CN102044116B - 信息处理装置、信息处理系统及信息处理装置的控制方法 - Google Patents

Abstract

本发明提供在不改变POS终端的情况下，能够检测POS终端的操作的信息处理装置、信息处理系统、信息处理装置的控制方法及程序。所述信息处理装置具备：取得从POS终端(1)输出的输出数据的输出数据取得部(21)；根据取得的输出数据，判定POS终端(1)的操作的操作判定部(22)；将操作判定部(22)的判定结果转换成店铺管理服务器(5)能够解释的规定形式的数据的数据转换部(23)；和将被数据转换部(23)转换后的转换数据输出给店铺管理服务器(5)的转换数据输出部(24)。

Description

信息处理装置、信息处理系统及信息处理装置的控制方法

技术领域

本发明涉及用于在超市等小卖店或家庭餐馆等餐饮店内，检测店员或顾客的违法行为的信息处理装置、信息处理系统、信息处理装置的控制方法及程序。 

背景技术

以往，作为用于在小卖店或餐饮店内，对店员在结帐处理时的违法行为进行检测的系统，提出了专利文献1的方案。该专利文献1中记载的系统由POS(Point Of Sales)终端(POS terminal)、对POS终端周边进行摄像的相机、照片日志记录器和检索终端构成。照片日志记录器是将日志数据(交易历史记录数据)、由相机拍摄到的POS终端周边的图像数据、和店员对POS终端的操作历史记录(操作历史记录数据)进行关联记录的设备。然后，管理者(操作人员)通过利用检索终端，指定时间、POS终端的操作信息等规定的检索条件，将与检索条件一致的日志数据、图像数据显示到显示器上。 

专利文献1：日本特开2005-115504号公报 

但是，在上述专利文献1所记载的系统中，只一览显示了与管理者指定的检索条件一致的记录数据(结帐处理的内容及此时的摄像图像)，为了检测在结帐处理中是否进行了违法行为，管理者不得不逐一确认记录数据。即，由于管理者如果不主动(自发)地执行检索处理，对作为该检索结果的记录数据进行验证，则无法判断是否进行了违法行为，所以，存在着违法行为的检测要花费大量的时间和劳力的问题。 

因此，为了提取出具有违法行为可能性的记录数据，可以考虑自动检测POS终端的异常处理。该异常处理作为违法行为的手段，经常被滥用。例如，存在着一种利用顾客未收取的收据，进行作为异常处理之一的“取消处理”，来侵吞与该收据的结算金额相当的现金的违法行为，该违法行 为也能够通过检测“取消处理”，来缩小记录数据的范围。另外，如果不是作为事后处理来对记录数据进行检索，而是在检测到异常处理的时刻进行某种警告，则能够在实时确认摄像图像的同时高效且迅速地检测出违法行为。 

不过，为了能够检测这样的“取消处理”等异常处理，需要改变POS终端。即，需要变更用于从POS应用程序输出异常处理数据的方法、或者需要POS终端自身的更换。因此，如果想要导入异常处理检测功能，则存在着小卖店一方的成本负担变大的问题。 

发明内容

本发明鉴于上述问题而提出，其目的在于，提供一种在不改变POS终端的情况下，能够检测POS终端的操作的信息处理装置、信息处理系统、信息处理装置的控制方法及程序。 

本发明的信息处理装置具备：取得从POS终端输出的输出数据的输出数据取得部；根据取得的输出数据，判定POS终端的操作的操作判定部；将操作判定部的判定结果转换成外部装置能够解释的规定形式的数据的数据转换部；和将被数据转换部转换后的转换数据输出给外部装置的转换数据输出部。 

本发明的信息处理装置的控制方法，是与POS终端及外部装置连接而使用的信息处理装置的控制方法，其中，信息处理装置执行下述步骤：取得从POS终端输出的输出数据的输出数据取得步骤；根据取得的输出数据，判定POS终端的操作的操作判定步骤；将操作判定步骤中的判定结果转换成外部装置能够解释的规定形式的数据的数据转换步骤；和将被数据转换步骤转换后的转换数据输出给外部装置的转换数据输出步骤。 

在上面所述的信息处理装置中，优选操作判定部参照能够根据POS终端的规格而改写的转换表，判定POS终端的操作。 

根据这些构成，由于利用与POS终端连接而使用的信息处理装置，根据从POS终端输出的输出数据，判定POS终端的操作，并将其判定结果输出给外部装置，所以能够在不改变POS终端的情况下，在外部装置中检测POS终端的操作。由此，由于不需要变更POS应用程序等，所以可减 轻与操作检测功能的追加相伴的小卖店侧的成本负担。而且，一般，文件格式按POS应用程序而不同，但本发明的信息处理装置(信息处理装置的控制方法)由于可以参照能够根据POS终端的规格而改写的转换表，所以能够与文件格式无关地判定POS终端的操作。即，基于转换表的改写，能够在各种POS系统中应用，可提高信息处理装置的通用性。 

在上面所述的信息处理装置中，优选输出数据是用于发送收据的打印数据，还具备将打印数据打印到纸张上的打印部。 

根据该构成，能够在收据打印机中应用本发明的信息处理装置及信息处理装置的控制方法。 

在上面所述的信息处理装置中，优选输出数据是顾客显示器的显示数据，还具备将显示数据向顾客显示器输出的显示数据输出部。 

根据该构成，可以根据从POS终端输出的顾客显示器的显示数据，判定POS终端的操作。 

在上面所述的信息处理装置中，优选操作判定部判定POS终端的操作是否是用于执行结帐处理的异常处理的操作，转换数据输出部在由操作判定部判定为POS终端的操作是用于执行异常处理的操作时，输出与异常处理相关的异常处理信息作为转换数据。 

根据该构成，可以检测出POS终端的异常处理，将表示该情况的异常处理信息输出给外部装置。而且，可以将输出的异常处理信息在店员的操作教育、顾客应对状况的把握、违法行为的检测等中利用。 

在上面所述的信息处理装置中，优选还具备从用于对设置有POS终端的收银台周围进行摄像的摄像装置，取得摄像结果的摄像结果取得部，在由操作判定部判定为POS终端的操作是用于执行异常处理的操作时，转换数据输出部将以操作判定部的判定时为基准的前后规定时间内的摄像装置的摄像结果，与异常处理信息一同输出。 

根据该构成，能够将异常处理时的收银台周围的摄像结果在店员的操作教育、顾客应对状况的把握、违法行为的检测等中利用。 

其中，“以操作判定部的判定时为基准的前后规定时间”是指：以操作判定部的判定前为始点及终点的规定时间；以操作判定部的判定前为始点、以操作判定部的判定后为终点的规定时间；以及以操作判定部的判定 后为始点及终点的规定时间中任意一个。 

在上面所述的信息处理装置中，优选操作判定部判定异常处理的类别，以操作判定部的判定时为基准的前后规定时间根据异常处理的类别被决定。 

根据该构成，由于基于异常处理的类别决定了摄像时间，所以可输出与异常处理的类别相适应的摄像结果。 

另外，也可以根据异常处理的类别来决定“前后规定时间”的始点及终点，而不决定“前后规定时间”的长度。 

在上面所述的信息处理装置中，优选操作判定部判定异常处理的交易金额，以操作判定部的判定时为基准的前后规定时间根据异常处理的交易金额被决定。 

根据该构成，由于基于异常处理的交易金额决定了摄像时间，所以能够输出与异常处理的交易金额相符的摄像结果(交易金额越大、摄像时间设定越长的摄像结果等)。 

另外，也可以根据异常处理的交易金额来决定“前后规定时间”的始点及终点，而不决定“前后规定时间”的长度。 

在上面所述的信息处理装置中，优选外部装置具有将异常处理信息与摄像装置的摄像结果关联存储的数据库。 

根据该构成，能够预先将异常处理信息和摄像装置的摄像结果存储到数据库中。而且，由于它们相互关联，所以可以将异常处理的类别或摄像日期时间等作为检索关键字，进行记录数据的检索。 

本发明的信息处理系统具备上面叙述的信息处理装置和外部装置，操作判定部包括对正在操作POS终端的店员、及POS终端的结帐处理时的顾客之中的至少一方进行判定的店员/顾客判定部，外部装置具备：在从信息处理装置取得的转换数据中含有表示结帐处理的异常处理的信息时，生成使由店员/顾客判定部判定出的店员的店员ID或顾客的顾客ID、与包括异常处理的类别的规定事项关联的异常处理关联信息，并将其记录到数据库的异常处理关联信息记录部；和按每个店员ID或顾客ID统计数据库中存储的异常处理关联信息，并作为历史记录信息将其输出的历史记录信息输出部。 

根据该构成，由于在数据库中预先存储了使店员ID或顾客ID、和与异常处理相关的规定事项关联的异常处理关联信息，按每个店员ID或顾客ID统计并输出这些异常处理关联信息，所以能够根据作为该统计结果的历史记录信息，容易且迅速地判断店员或顾客的违法行为。即，管理者通过基于被输出的历史记录信息，确认该店员或顾客在过去与什么样的异常处理相关、以及其次数等，能够客观地判断违法行为的有无。 

在上面所述的信息处理系统中，优选外部装置还具备：指定店员ID、顾客ID、异常处理的类别、异常处理日期、异常处理编号、成为异常处理的对象的商品、配置有POS终端的收银台前有无顾客、店员的位置之中的至少1个信息作为检索关键字的检索关键字指定部；和从数据库中提取出与被指定的检索关键字相符的异常处理关联信息的异常处理关联信息提取部；历史记录信息输出部对由异常处理关联信息提取部提取出的异常处理关联信息进行统计，输出历史记录信息。 

根据该构成，能够从数据库中提取出与被指定的检索关键字相符的异常处理关联信息，对提取出的异常处理关联信息进行统计，输出历史记录信息。由此，管理者能够容易地获得所需要的历史记录信息。 

在上面所述的信息处理系统中，优选外部装置还具备：根据对店员及顾客之中的至少一方进行监视的监视部的监视结果，判定店员及所述顾客之中的至少一方的违法可能性的违法判定部，历史记录信息输出部在所取得的所述转换数据中含有表示异常处理的信息、且由违法判定部判定为有违法的可能性时，对相关的店员或顾客的异常处理关联信息进行统计，输出历史记录信息。 

根据该构成，由于只有在根据店员或顾客的监视结果判定为有违法的可能性时，输出历史记录信息，所以，管理者只要在输出了历史记录信息时，进行违法行为的判断即可。由此，由于不需要管理者主动执行检索处理，所以可大幅减轻违法行为的验证所需要的劳力。而且，由于能够自动判定违法的可能性，所以能够不依据管理者的主观与力量，准确地判断违法行为的有无。 

在上面所述的信息处理系统中，优选历史记录信息输出部利用电子邮件或Web应用程序，向预先确定的管理者发送历史记录信息。 

根据该构成，能够与管理者的所在地无关地发送历史记录信息。 

在上面所述的信息处理系统中，优选监视部包括对店员及顾客之中的至少一方进行摄像的摄像部，历史记录信息输出部将违法判定部的违法判定时的摄像部的摄像结果，与历史记录信息一同输出。 

根据该构成，由于判定为有违法的可能性时的摄像部的摄像结果与历史记录信息一同被输出，所以管理者能够将该摄像结果作为违法行为的验证材料。 

在上面所述的信息处理系统中，优选外部装置还具备：将基于商品购买时取得的转换数据的购买时信息，与该购买时的摄像部的摄像结果关联记录到数据库的购买时信息记录部， 

历史记录信息输出部将购买成为异常处理的对象的商品时的摄像部的摄像结果，与历史记录信息一同输出。 

根据该构成，由于购买成为异常处理的对象的商品时的摄像部的摄像结果，与历史记录信息一同被输出，所以管理者可以将该摄像结果作为违法行为的验证材料。 

在上面所述的信息处理系统中，优选当异常处理的类别是进行商品退货的“退货”时，违法判定部将退货处理时的摄像部的摄像结果或异常处理关联信息、与购买成为退货处理的对象的商品时的摄像部的摄像结果或购买时信息进行对照，在退货处理时的顾客与购买时的顾客不是同一人物的情况下，判定为有违法的可能性。 

根据该构成，可以根据退货处理时的顾客与购买时的顾客不是同一人物，判定为有违法退货的可能性，来输出历史记录信息。 

在上面所述的信息处理系统中，优选违法判定部根据监视部的异常处理时的监视结果，判别顾客的有无，当不存在对应顾客时，判定为有违法的可能性。 

根据该构成，能够根据异常处理时不存在顾客，判定为有违法的可能性，来输出历史记录信息。 

其中，该构成的应用只限定于异常处理的类别为“错误登记”、“退货”、“兑换”、“折扣”、“降价”时等特定的异常处理。 

在上面所述的信息处理系统中，优选当异常处理的类别是对特定的人 进行商品折扣的“特定折扣”时，违法判定部根据特定折扣处理时的监视结果，判别相关的顾客是否符合特定的人，在不符合该特定的人的情况下，判定为有违法的可能性。 

根据该构成，能够在特定折扣处理时根据对应的顾客不符合特定的人(“公司职员折扣”情况下的公司职员等)，判定为有违法折扣的可能性，来输出历史记录信息。 

本发明的程序用于使计算机执行上面所述的信息处理装置的控制方法中的各步骤。 

通过利用该程序，能够实现在不改变POS终端的情况下，检测POS终端的操作的信息处理装置的控制方法。 

附图说明

图1是第1实施方式涉及的店铺监视系统的系统构成图。 

图2是第1实施方式涉及的店铺监视系统的功能框图。 

图3是第1实施方式涉及的收据打印机的控制框图。 

图4是表示第1实施方式涉及的数据转换的具体例的图。 

图5是第1实施方式涉及的异常处理数据库的说明图。 

图6是第1实施方式涉及的结帐处理数据库的说明图。 

图7是表示第1实施方式涉及的收据打印机的信息输出处理的流程图。 

图8是第2实施方式涉及的店铺监视系统的功能框图。 

图9是表示第2实施方式涉及的、将信息处理装置取得结帐信息作为触发的监视数据记录处理的流程图。 

图10是表示第2实施方式涉及的、将信息处理装置对收据的读取作为触发的监视数据记录处理及POS终端的收据内容变更处理的流程图。 

图11是第2实施方式涉及的、将信息处理装置对特定行动的检测作为触发的监视数据记录处理的流程图。 

图12是表示第2实施方式涉及的异常处理发生检测表的一例的图。 

图13是表示第2实施方式涉及的异常处理发生检测模式的其他例的功能框图。 

图14是表示第2实施方式涉及的异常处理发生检测模式的其他例的示意图。 

图15是表示第2实施方式涉及的特定行动发生检测表的一例的图。 

图16是表示第2实施方式涉及的特定行动发生检测模式的其他例的流程图。 

图17是第3实施方式涉及的店铺监视系统的功能框图。 

图18是表示第3实施方式涉及的由信息处理装置进行的数据记录处理的流程图。 

图19是表示第3实施方式涉及的由信息处理装置进行的统计报告生成处理的流程图。 

图20是表示第3实施方式涉及的统计报告(退货处理时)的一例的图。 

图21是表示第3实施方式涉及的统计报告(错误登记处理时)的一例的图。 

图22是表示第3实施方式涉及的统计报告(公司职员折扣处理时)的一例的图。 

具体实施方式

下面，参照附图，对本发明的信息处理装置、信息处理装置的控制方法及程序进行说明。需要说明的是，在以下所示的各实施方式中，例示了将本发明的信息处理装置应用到店铺监视系统的情况。该店铺监视系统在超市等小卖店内或家庭餐馆等餐饮店中，被构筑成用于检测店员与顾客的违法行为。 

[第1实施方式] 

图1是第1实施方式涉及的店铺监视系统SY1的系统构成图。如该图所示，店铺监视系统SY1由进行结帐处理的POS终端1、发放收据R的收据打印机2(信息处理装置)、显示结帐信息的顾客显示器4、监视店员的店员监视相机3、统一管理店铺监视系统SY1的店铺管理服务器5(外部装置)、和打印统计报告50的报告输出用打印机8构成。POS终端1 与收据打印机2、收据打印机2与顾客显示器4、以及店铺管理服务器5与报告输出用打印机8可以通过串行接口(例如USB(Universal Serial Bus)接口)连接成能够通信。而且，POS终端1、收据打印机2、店员监视相机3及店铺管理服务器5可以通过店铺内LAN6(有线LAN或无线LAN)连接成能够通信。 

另外，虽然在图1中例示了POS终端1为1台的情况，但也可以是在店铺监视系统SY1内存在多台POS终端1的构成。该情况下，对各POS终端1分别设置有对应的收据打印机2、店员监视相机3及顾客显示器4。 

POS终端1是设置于收银台7的记录器，根据由店员(操作人员)输入的商品信息执行结帐处理。然后，将作为结帐处理的处理结果的结帐信息(收据R打印用的打印数据、顾客显示器4显示用的显示数据等，以下将它们统称为“输出数据”)输出到收据打印机2。 

店员监视相机3例如是CCD相机，被设置在收银台7的周围(顶棚或顾客显示器4附近等)。摄像对象是在收银台7进行登记操作的店员、结帐处理时的顾客与载置在收银台7上的商品等。另外，店员监视相机3可以针对1个收银台7设置多个。店员监视相机3的摄像结果被输出到收据打印机2。 

收据打印机2根据从POS终端1输出的输出数据(打印数据)，发放(打印)收据R。而且，收据打印机2除了发放收据R的功能以外，还具备：将从POS终端1输出的输出数据(显示数据)传送给顾客显示器4的功能、取得店员监视相机3的摄像结果的功能、根据输出数据(打印数据及显示数据)来判定POS终端1的操作的功能、将该判定结果转换成规定形式的数据的功能、将转换数据及店员监视相机3的摄像结果向店铺管理服务器5发送的功能等各种功能。这样，通过以收据打印机2为主干来进行各种信息的输入输出(将收据打印机2取得的各种信息进行文件归档，输出必要的信息)，不会对POS基干网络(以POS终端1为主干的网络)的通信量造成影响。另外，在将本发明应用到现有的POS系统时，不需要POS基干网络自身的变更。 

店铺管理服务器5从收据打印机2取得转换数据、店员监视相机3的摄像结果，并将这些数据保存到数据库51(参照图2)中。另外，可以根 据需要对数据库51中保存的信息进行统计，利用报告输出用打印机8将其输出。其中，由于报告输出用打印机8能够应用一般的打印机，所以省略其说明。 

接着，参照图2，对店铺监视系统SY1的功能构成进行说明。作为主要的功能构成，POS终端1具有结帐处理部11。结帐处理部11执行包括结算处理与异常处理的结帐处理。而且，将伴随着结帐处理而生成的输出数据向收据打印机2输出。 

需要说明的是，在本实施方式中，异常处理是指与违法行为相关联的可能性高的处理。具体而言，是指用于在POS终端1的结帐处理中删去输入数据的“中止处理”、用于在结帐处理后取消该结帐处理的“取消处理(错误登记处理)”、用于进行商品的退货的“退货处理”、用于进行商品降价的“降价处理”、用于进行商品折扣的“折扣处理”、及用于金钱兑换的“兑换处理”、用于将现金存放抽屉内的金钱与销售额进行对照的“检查处理”、用于进行出钱或还钱的“出钱/还钱处理”、以及用于重新发放收据R的“再发放处理”等。 

其中，在以下的说明中，这些各处理被作为异常处理的类别而加以区分。而且，为了方便起见，将POS终端1能够执行的处理(产生事务数据(transaction data)的处理)中异常处理以外的处理，称为“通常处理”。该通常处理中包括商品购买时执行的“结算处理”。 

作为主要的功能构成，店员监视相机3具有摄像部31(摄像装置)。摄像部31用于对收银台7周围进行摄像，该摄像部31拍摄到的摄像数据与用于识别店员监视相机3的相机ID、摄像日期时间等信息相关联，作为摄像结果被输出到收据打印机2。其中，摄像日期时间是指店员监视相机3中具备的RTC(Real Time Clock，省略图示)的计时结果。 

作为主要的功能构成，顾客显示器4具有显示部41。显示部41根据从收据打印机2输出的显示数据，显示用于向顾客提示的结帐信息。 

作为主要的功能构成，收据打印机2具有：输出数据取得部21、操作判定部22、数据转换部23、转换数据输出部24、摄像结果取得部25、打印部26及显示数据输出部27。输出数据取得部21取得从POS终端1(结帐处理部11)输出的输出数据。 

操作判定部22对输出数据取得部21取得的输出数据进行意义分析，来判定POS终端1的操作。具体而言，判定在POS终端1中是否进行了用于执行结帐处理的异常处理的操作。此外，判定异常处理的类别、交易金额等。 

数据转换部23将操作判定部22的判定结果转换成店铺管理服务器5能够解释的规定形式的数据。在本实施方式中，作为该规定形式的数据，转换成XML(Extensible Markup Language)数据(参照图4(c))。 

转换数据输出部24将被数据转换部23转换后的转换数据(XML数据)输出到店铺管理服务器5。其中，在以下的说明中，将由操作判定部22判定为是用于执行异常处理的操作时的转换数据，称为“异常处理信息”。另外，将判定为不是用于执行异常处理的操作时的转换数据(与通常处理相关的信息)，称为“通常处理信息”。 

而且，转换数据输出部24在输出异常处理信息时，与该异常处理信息一同输出由后述的摄像结果取得部25取得的摄像结果。此时成为输出对象的摄像结果，是以操作判定部22的判定时为基准的前后规定时间量的店员监视相机3的摄像结果。即，从判定为在POS终端1中执行了异常处理时(≈异常处理发生时)开始，输出前后规定时间量的摄像结果。其中，对于摄像结果的记录方法，能够应用第2实施方式中在后面叙述的记录控制部83(参照图8)的记录方法。该情况下，称为收据打印机2内具有记录控制部83及存储部80(参照图8)的构成。 

摄像结果取得部25从店员监视相机3(摄像部31)取得摄像结果。打印部26在输出数据是打印数据的情况下，将其打印到收据纸张上，来发放收据R。显示数据输出部27在输出数据是显示数据的情况下，将其输出到顾客显示器4(显示部41)。 

作为主要的功能构成，店铺管理服务器5具有数据库51及统计结果输出部52。数据库51保存从转换数据输出部24输出的转换数据及摄像结果。其中，数据库51由存储异常处理信息的异常处理数据库51a(参照图5)、和存储所有结帐处理的信息(通常处理信息及异常处理信息)的结帐处理数据库51b(参照图6)构成，详细情况将在后面叙述。 

统计结果输出部52根据异常处理数据库51a中存储的异常处理信息， 按每个店员(按每个店员ID)或按每个顾客(按每个顾客ID)统计异常处理的发生状况，并将该统计结果作为统计报告50而输出。在本实施方式的情况下，作为输出方法，设想了由报告输出用打印机8进行打印输出的方法，但也可以是向显示器(省略图示)的显示输出，还可以是利用电子邮件或Web应用程序向管理者(店长等)的通知。其中，对于统计方法及统计报告50的具体例，会在后面的第3实施方式中进行叙述(参照图20～图22)。 

接着，参照图3，对店铺监视系统SY1的控制构成进行说明。POS终端1具有POS应用程序16。该POS应用程序16构成结帐处理部11的主要部分。 

收据打印机2具有：输入接口61、输出接口62、字形发生器(charactergenerator)63、主处理部64、打印机构65、转换表66、数据指定(tap)意义分析部67、上位层发送部68及DVR应用程序69。其中，转换表66、数据指定意义分析部67、上位层发送部68及DVR应用程序69是本实施方式涉及的收据打印机2的特有构成。 

另外，虽然没有特别图示，但主处理部64及数据指定意义分析部67由CPU(Central Processing Unit)、ROM(Read Only Memory)及RAM(Random Access Memory)等实现。而上位层发送部68由无线/有线LAN端子等实现。 

如果通过输入接口61取得了POS终端1的输出数据(打印数据及显示数据)，则主处理部64参照字形发生器63，进行向文本数据的转换处理(文本化)。另外，在来自POS终端1的输出数据是文本数据形式的情况下，可以替代转换处理而进行提出该文本数据的处理。文本化后的显示数据通过输出接口62被输出到顾客显示器4。而文本化后的打印数据被输出到打印机构65。另外，在收据打印机2被指定给无效的外围设备的情况下，文本化后的数据仅被输出给顾客显示器4。而在收据打印机2被指定给有效的外围设备的情况下，文本化后的数据被输出给顾客显示器4及打印机构65。 

数据指定意义分析部67通过指定(tap)文本化后的显示数据或打印数据，并参照转换表66进行意义分析，来对POS终端1的操作进行判定。 该转换表66能够根据POS应用程序16的文件格式，改写其转换规则。因此，即使在被组装到文件格式不同的各种POS系统的情况下，也能够毫无障碍地进行意义分析，进而能够准确地判定POS终端1的操作。即，本实施方式的收据打印机2通过具备转换表66及数据指定意义分析部67，能够判定各种样式的POS终端1的操作。而且，由此能够在各种POS系统中应用，从而可以提高通用性。 

数据指定意义分析部67在进行了意义分析之后，将其分析结果转换成店铺管理服务器5能够解释的XML形式的数据，并输出给上位层发送部68。即，异常处理信息及通常处理信息被以XML语言记述。 

图4是表示由数据指定意义分析部67进行的数据转换的具体例的图。数据指定意义分析部67通过数据指定转换功能对文本化后向顾客显示器4输出的数据(参照图4(a))及文本化后向打印机构65输出的数据(参照图4(b))进行数据指定，将其XML数据化，转换成向上位层的数据(参照图4(c)。在该图中，例示了结算处理时的输出数据(用于进行商品名、单价、部分合计额的显示与打印的数据)的转换例。这样，通过作为向上位层输出的数据而被转换成标识语言，具有作为Web页的文件公开、数据转换容易等优点。 

返回到图3的说明。DVR应用程序69将店员监视相机3的摄像结果预先记录到规定的存储区域(相当于第2实施方式的子存储部84)，以数据指定意义分析部67对异常处理的判定作为触发，将其中的规定时间量的摄像结果输出给上位层发送部68。上位层发送部68在异常处理发生时，对从数据指定意义分析部67输出的XML数据(异常处理信息)附加由DVR应用程序69输出的摄像结果，然后将其发送给店铺管理服务器5。另外，在通常处理发生时，只发送由数据指定意义分析部67输出的XML数据(通常处理信息)。 

店铺管理服务器5具有：对异常处理信息及店员监视相机3的摄像结果进行存储的异常处理数据库51a、和对异常处理信息及通常处理信息进行存储的结帐处理数据库51b。异常处理数据库51a是以统计报告50的打印为目的而设置的数据库。异常处理数据库51a中记录的数据例如被按每个店员或每个顾客进行统计，由报告输出用打印机8进行打印。其中，如 果指定了其他项目作为检索关键字，则还能够按日期、异常处理的类别、成为异常处理的对象的商品，来输出统计报告50。 

另外，结帐处理数据库51b是以结帐处理(事务数据)的全部记录为目的而设置的数据库。虽然没有特别图示，但作为结帐历史记录，能够打印输出或显示输出事务数据。 

接着，参照图5及图6，对异常处理数据库51a及结帐处理数据库51b的记录内容进行说明。图5是异常处理数据库51a的说明图。如该图所示，在异常处理数据库51a中，相关联地存储有异常处理信息与店员监视相机3的摄像结果。作为异常处理信息，包括作为操作判定部22的判定结果的事务编号、事务发生日期、事务类别(异常处理的类别)、交易金额、店员ID、POS终端ID及事务数据等。而作为摄像结果，包括摄像日期时间、相机ID及摄像数据等。 

另一方面，图6是结帐处理数据库51b的说明图。如该图所示，结帐处理数据库51b中存储有通常处理信息及异常处理信息。作为通常处理信息，可存储以异常处理信息为基准的项目。另外，虽然在该图中区分记载了通常处理信息和异常处理信息，但也可以按照事务编号顺序进行排列记载，不对二者进行区别地存储为结帐处理信息。而且，也可以采取在结帐处理数据库51b之中包含异常处理数据库51a的方式。 

接着，参照图7的流程图，对收据打印机2的信息输出处理进行说明。收据打印机2在取得了POS终端1的输出数据后(S11，输出数据取得部21)，利用主处理部64将其转换成文本数据(S12)。而且，利用数据指定意义分析部67根据文本化后的数据，进行POS终端1的操作判定(S13，操作判定部22)，来判别该操作是否是伴随着异常处理的执行的操作(S14，操作判定部22)。 

在是伴随着异常处理的执行的操作时(S14：是)，将操作判定结果转换成XML数据，生成转换数据(异常处理信息)(S15，数据转换部23)。而且，通过DVR应用程序69收集店员监视相机3的摄像结果(S16，摄像结果取得部25)。然后，通过上位层发送部68将转换数据(异常处理信息)及摄像结果发送给店铺管理服务器5(S17，转换数据输出部24)。另一方面，在不是伴随着异常处理的执行的操作时(S14：否)，将操作 判定结果转换成XML数据，生成转换数据(通常处理信息)(S18，数据转换部23)，然后通过上位层发送部68将该转换数据发送给店铺管理服务器5(S19，转换数据输出部24)。 

另外，在S16中，也可以由DVR应用程序69根据数据指定意义分析部67的操作判定结果，来收集摄像结果。具体而言，根据事务数据的内容(例如异常处理的类别或交易金额等)来决定所收集的摄像时间(以操作判定部22的判定时为基准的前后规定时间)，来收集该摄像时间内的摄像结果。根据该构成，能够将符合异常处理的类别、交易金额的摄像结果(例如在交易金额大的情况下，由于重要度变高，所以是摄像时间被设定得长的摄像结果)发送给店铺管理服务器5。 

如以上说明那样，通过第1实施方式的收据打印机2，由于根据从POS终端1输出的输出数据来判定POS终端1的操作，并将其判定结果输出给店铺管理服务器5，所以能够不改变POS终端1地检测出POS终端1的操作。由此，因为不需要变更POS应用程序16等，所以能够大幅减轻与操作检测功能的追加相伴的开发负担，进而还能够减轻小卖店侧的成本负担。而且，一般文件格式基于POS应用程序16而不同，但本实施方式的收据打印机2由于具有数据指定转换功能，所以能够通过转换表66的改写而在各种各样的POS系统中应用，从而提高了其通用性。 

另外，在判定为POS终端1的操作是用于执行异常处理的操作时，由于表示该信息的异常处理信息被记录到异常处理数据库51a中，能够作为每个店员或每个顾客的统计报告50而被输出，所以可以在店员的工作教育、顾客应对状况的把握、违法行为的检测等中利用该统计报告50。而且，由于在异常处理数据库51a中异常处理信息与店员监视相机3的摄像结果相关联存储，所以通过将该摄像结果包含在统计报告50中进行打印，能够使管理者更详细地把握异常处理发生时的状况。并且，由于成为记录对象的摄像时间可以根据异常处理的类别、交易金额来决定，所以能够保全与各事务对应的恰当摄像时间的摄像结果，将其作为认证违法行为时的有用证据进行利用。 

另外，在上述的实施方式中，采用了将本发明的信息处理装置内置于收据打印机2的构成，但也可以将除了打印部26之外的一部分或全部由 收据打印机2以外的外部装置或店铺管理服务器5实现。例如，虽然采用了将店员监视相机3的摄像结果通过收据打印机2发送给店铺管理服务器5的构成，但也可以构成为由店铺管理服务器5直接取得。该情况下，DVR应用程序69被搭载于店铺管理服务器5内。另外，也可以由POS系统或WWW服务器实现店铺管理服务器5的各部。 

而且，上述的实施方式中，在所有的结帐处理时，都将转换数据发送给店铺管理服务器5，但也可以只在异常处理发生时进行发送。另外，记载了在异常处理发生时，可以将与异常处理的类别、交易金额对应的摄像时间的摄像结果与转换数据一同发送的内容，但也可以与异常处理的类别、交易金额无关地发送同一摄像时间的摄像结果。并且，除了异常处理发生时之外，还可以在通常处理发生时也将转换数据与摄像结果一同发送。 

另外，在上述的实施方式中，将转换数据形式记载为XML数据，但也可以使用CSV(Comma Separated Values)等其他形式。 

[第2实施方式] 

接着，参照图8～图16，对本发明的第2实施方式进行说明。本实施方式的课题在于，通过准确地确定异常处理的发生，来有效地记录作为违法行为的有利证据的监视数据(相当于第1实施方式的摄像结果)。因此，详细说明对异常处理的发生进行检测的方法。需要说明的是，在本实施方式中，对与第1实施方式同样的构成部分赋予了同样的符号，并省略详细的说明。而且，与第1实施方式同样的构成部分所适用的变形例，对于本实施方式也同样适用。 

图8是第2实施方式涉及的店铺监视系统SY2的功能框图。本实施方式的店铺监视系统SY2由POS终端1、收据打印机2、读取收据R的收据扫描仪9、对店内进行监视的店内监视相机10、和统一管理店铺监视系统SY2的店铺管理服务器5构成。虽然没有对系统构成进行特别图示，但POS终端1与收据打印机2、以及收据打印机2与收据扫描仪9通过串行接口连接成能够通信。而且，在本实施方式中，成为店内监视相机10的摄像结果经由店铺内LAN6(参照图1)被直接发送给店铺管理服务器5的构 成。其中，如虚线框所示那样，由收据打印机2、收据扫描仪9及店铺管理服务器5构成了信息处理装置A2。 

作为主要的功能构成，收据扫描仪9具有读取部91。读取部91在退货处理或错误登记处理等发生时，读取顾客所出示的收据R。在本实施方式中，通过该收据R的读取，能够检测出异常处理，其详细内容将在后面叙述。 

作为主要的功能构成，POS终端1具有：结帐处理部11、读取结果取得部12、结帐处理信息读出部13及再登录部14。结帐处理部11执行结帐处理，并将作为其处理结果的结帐信息(相当于第1实施方式的输出数据)输出给收据打印机2。 

读取结果取得部12取得收据扫描仪9(读取部91)对收据R的读取结果(事务编号、商品码、商品名、数量、价格、事务发生日期、店员ID、POS终端ID等信息)。结帐处理信息读出部13根据由读取结果取得部12取得的收据R的读取结果，从结帐处理数据库51b(参照图6)读出相符的结帐处理信息(事务数据)。再登录部14用于只将结帐处理信息读出部13读出的结帐处理信息的一部分变更，然后再登录到结帐处理数据库51b中，是含有键盘等操作机构的概念。这样，当在结帐处理后进行该结帐处理的取消时，由于店员能够省去再次输入收据R中记载的商品的劳力和时间，所以可实现结帐处理业务的高效化。 

另一方面，作为主要的功能构成，收据打印机2具有：结帐信息取得部71、异常处理发生检测部72、打印部26及读取结果输出部74。结帐信息取得部71取得由POS终端1(结帐处理部11)输出的结帐信息。 

异常处理发生检测部72通过由结帐信息取得部71取得含有表示异常处理的信息的结帐信息，来检测异常处理的发生。另外，在图8中虽然省略了顾客显示器4(参照图2等)的图示，但也可以根据用于显示到顾客显示器4上的显示数据，来检测异常处理的发生。而且，如上所述，异常处理发生检测部72还通过利用收据扫描仪9(读取部91)读取收据R，来检测异常处理的发生。 

打印部26将结帐信息取得部71取得的结帐信息打印到收据纸张上，来发放收据R。在利用收据扫描仪9读取了收据R的情况下，读取结果输 出部74将该读取结果输出给POS终端1。 

作为主要的功能构成，店内监视相机10具有摄像部32。店内监视相机10被设置在收银台7周围、店铺入口等，在店内配置有多台。而且，各店内监视相机10的摄像数据与用于识别各店内监视相机10的相机ID、摄像日期时间等信息相关联，作为监视数据(相当于第1实施方式的摄像结果)被输出给店铺管理服务器5。 

作为主要的功能构成，店铺管理服务器5具有：监视数据取得部81、特定行动判定部82、记录控制部83、存储部80及监视数据检索部86。存储部80由在摄像部32进行摄像的期间，随时更新并存储规定时间量的监视数据的子存储部84(缓冲器)；和对子存储部84中存储的监视数据的一部分进行非易失性存储的主存储部85构成。 

监视数据取得部81从多个店内监视相机10(摄像部32)实时取得监视数据。特定行动判定部82根据监视数据取得部81取得的监视结果，来判定店员及顾客至少一方的特定行动。即，判定店员向周围张望(东张西望)等可疑行动、或顾客从店铺入口直接移动到收银台7前等大多被看作伴随着异常处理的特定行动。 

记录控制部83控制监视数据向主存储部85的记录。具体而言，在由特定行动判定部82判定为是特定行动的情况下，将以特定行动判定时为基准的规定时间量(L时间量)的监视数据记录到主存储部85中。而且，在由异常处理发生检测部72检测到异常处理的发生时，记录控制部83也将以异常处理的发生检测时为基准的规定时间量(N时间量)的监视数据记录到主存储部85中。该情况下，记录控制部83能够从子存储部84所存储的监视数据之中，将包括检测到异常处理的发生前的监视数据的规定时间量的监视数据记录到主存储部85中。 

其中，对于“以特定行动判定时为基准的规定时间(L时间)”与“以异常处理的发生检测时为基准的规定时间(N时间)”的L与N的值，能够由用户任意设定。而且，“以特定行动判定时为基准的规定时间量(L时间量)的监视数据”，可以被设定为以特定行动判定时的P时间前(其中0＜P≤L))作为开始时刻的监视数据，此时的P的值也能够由用户任意设定。同样，“以异常处理的发生检测时为基准的规定时间量(N时 间量)的监视数据”，可以被设定为以异常处理发生检测时的M时间前(其中0＜M≤N))为开始时刻的监视数据，此时的M的值也能够由用户任意设定。 

记录控制部83对上述规定时间量的监视数据附加表示异常处理发生时或特定行动判定时的状况的标签信息，并存储到主存储部85中。标签信息具体是指：异常处理的类别(事务的类别)、店员在店内的位置、收银台7周围有无顾客、包括收银台7周围的店内的声音数据、异常处理发生日期时间(事务发生日期时间)、特定行动判定日期时间等。此外，作为标签信息，能够利用读取部91对收据R的读取结果的各项目及第1实施方式所示的异常处理信息的各项目(参照图5等)。 

其中，“店员在店内的位置”可通过利用店内监视相机10的摄像数据进行面部认证，与面部认证用数据库(省略图示)中存储的店员的面部图像进行对照来确定。另外，也可以在店内预先配置多个RFID(RadioFrequency Identification)读取器，通过使店员持有组装了RFID的店员卡200(参照图13(b))，来确定各店员在店内的位置。该情况下，前提是在店员卡200中设置有记录了店员ID的存储部201(IC芯片)、及用于和RFID读取器进行无线通信的无线通信部202(天线)。另外，RFID读取器经由未图示的无线LAN路由器等，与和店铺内LAN6连接的收据打印机2或店铺管理服务器5进行通信。此外，也可以使店员持有搭载了GPS(Global Positioning System)天线的电子设备，来确定各店员在店内的位置。 

而且，“收银台周围有无顾客”能够通过分析店内监视相机10的摄像数据来判定。并且，“包括收银台周围的店内的声音数据”能够通过在收银台7周围等店内配置多个麦克，利用其声音分析结果来获得。 

监视数据检索部86用于利用被附加给监视数据的标签信息，来进行监视数据的检索，是包括键盘、鼠标等操作机构的概念。其中，通过指定店员ID、异常处理的类别来作为监视数据检索部86的检索关键字，能够打印在后面的第3实施方式中叙述的统计报告50(参照图20～图22)。 

接着，参照图9～图11的流程图，对记录控制部83的控制方法进行详细说明。如上所述，记录控制部83以结帐信息的取得、收据R的读取 及特定行动的检测作为触发，进行监视数据向主存储部85的记录。因此，对监视数据记录处理的各事例进行说明。 

图9是表示信息处理装置A2进行的以结帐信息的取得作为触发的监视数据记录处理的流程图。首先，收据打印机2在从POS终端1取得了结帐信息后(S21，结帐信息取得部71)，根据该结帐信息中是否含有表示异常处理的信息，来判定有无发生异常处理(S22，异常处理发生检测部72)。这里，在检测到异常处理的发生时(S22：是)，进而判别异常处理的类别(S23，异常处理发生检测部72)。 

店铺管理服务器5根据由收据打印机2判别的异常处理的类别，来收集异常处理发生时的标签信息(S24，记录控制部83)。例如，在是“取消处理”或“退货处理”的情况下，收集店员在店内的位置、收银台7周围有无顾客作为标签信息；在是“降价处理”或“折扣处理”的情况下，收集包括收银台7周围的店内的声音数据作为标签信息。其中，对于收银台7周围有无顾客，能够通过店内监视相机10的面部检测、利用了红外线的感人传感器来判定，收集其判定结果作为标签信息。而且，对于店内的声音数据，将被配置在收银台7、店内的麦克的声音识别结果收集作为标签信息。 

并且，店铺管理服务器5将与收据打印机2判别出的异常处理的类别对应的规定时间量的监视数据，和上述的标签信息一同记录(S25，记录控制部83)。例如，在是“取消处理”或“退货处理”的情况下，记录异常处理检测时的前后20秒(合计40秒)的监视数据，在是“降价处理”或“折扣处理”的情况下，记录异常处理检测后30秒的监视数据。此时，记录控制部83从子存储部84中存储的监视数据之中，读出必要的监视数据，存储到主存储部85中。 

另一方面，当在S22中收据打印机2没有检测到异常处理的发生时(S22：否)，由于未从收据打印机2向店铺管理服务器5发送指令，所以在店铺管理服务器5中不进行监视数据的记录，结束处理。 

另外，在上述的例子中，根据异常处理的类别来收集标签信息、或根据异常处理的类别来决定监视数据的摄像时间，但也可以与异常处理的类别无关地收集同一标签信息、或将监视数据的摄像时间设为同一时间。 

图10是表示信息处理装置A2进行的以收据R的读取作为触发的监视数据记录处理、及POS终端1的收据内容变更处理的流程图。本例是进行“取消处理”、“退货处理”等需要由顾客出示收据R的异常处理时的处理。而且，在图中，平行四边形的框表示了伴随着店员的操作的处理。 

收据打印机2通过从收据扫描仪9取得收据R的读取结果(S31)，来检测异常处理的发生(S32，异常处理发生检测部72)。而且，对POS终端1输出收据R的读取结果(S33，读取结果输出部74)。 

另外，店铺管理服务器5收集收据R的读取时(≈异常处理发生检测时)的标签信息(S34，记录控制部83)。该情况下，作为标签信息，例如收集异常处理发生日期时间等信息。进而，店铺管理服务器5将以收据R的读取时为基准的规定时间量的监视数据与上述的标签信息一同记录(S35，记录控制部83)。这里，例如以收据R的读取时的20秒前作为读取开始时刻，来记录记录时间为60秒的监视数据。 

另一方面，POS终端1如果从收据打印机2取得了收据R的读取结果(S36，读取结果取得部12)，则基于店员对“取消键”(POS终端1的键盘中设置的规定的键)的按压(S37)，从结帐处理数据库51b(参照图6)读出相符的结帐处理信息(事务数据)(S38，结帐处理信息读出部13)。然后，由店员进行对收据内容的变更操作，并进行结帐处理信息的再登录(S39，再登录部14)。需要说明的是，伴随着该再登录，发放了新的收据R，但对于该步骤省略了说明。 

图11是表示信息处理装置A2进行的以店员或顾客的特定行动的检测作为触发的监视数据记录处理的流程图。本例通过店铺管理服务器5执行所有的步骤。店铺管理服务器5在根据取得的监视数据检测到店员及/或顾客的特定行动时(S41：是)，判别特定行动的发生检测模式(S42，特定行动判定部82)。对于“特定行动的发生检测模式”，将利用图15在后面叙述。然后，根据特定行动的发生检测模式，收集标签信息(S43，记录控制部83)，将与特定行动的发生检测模式对应的规定时间量的监视数据与上述的标签信息一同记录(S44，记录控制部83)。 

另一方面，当在S41中没有检测到店员及/或顾客的特定行动时(S41：否)，店铺管理服务器5不进行监视数据的记录而结束处理。 

另外，在上述的例子中，根据特定行动的发生检测模式收集了标签信息、或根据特定行动的发生检测模式决定了监视数据的摄像时间，但也可以与发生检测模式无关地收集同一标签信息、或将监视数据的摄像时间设为同一时间。 

接着，参照图12～图16，对成为监视数据记录处理的触发的发生检测模式的设定进行说明。图12是表示异常处理发生检测表的一例的图。其中，该表只要被存储成能够从收据打印机2及店铺管理服务器5双方参照即可，可以存储到收据打印机2、店铺管理服务器5、其他外部装置中的任意一个。另外，还能够将异常处理发生检测表分割保存到各装置内。 

如该图所示，异常处理发生检测表按每个发生检测模式，相关联地存储有模式ID、异常处理的发生检测模式(成为监视数据记录处理的触发的事态)、检测对象的要否、记录开始时刻、记录时间(摄像时间)。例如，在该图的例子中，由于检测对象的要否在“模式ID：a1”及“模式ID：A2”中为“○”，所以在取得了表示异常处理的结帐信息时(模式ID：a1)、和由收据扫描仪9读取了收据R时(模式ID：A2)，检测异常处理的发生。其中，“模式ID：a1”相当于图9所示的流程图，“模式ID：A2”相当于图10所示的流程图。 

而且，由于在取得了表示异常处理的结帐信息时，记录开始时刻及记录时间分别“对应于异常处理的类别”，所以，遵照对应于异常处理的类别而另外确定的记录开始时刻及记录时间。另外，在读取了收据R时，将收据R的读取时的20秒前作为读取开始时刻，从子存储部84读出记录时间为60秒的监视数据，将其存储到主存储部85中。 

此外，作为异常处理的发生检测模式，能够设定收据打印机2的按钮操作(模式ID：a3)、店员卡200的按钮操作(模式ID：a4)、重量传感器(省略图示)对商品或收据R的载置检测(模式ID：a5)、通过图像识别对商品或收据R的载置检测(模式ID：a6)、通过声音识别对异常处理关键字的检测(模式ID：a7)、通过声音识别对通常处理关键字的非检测(模式ID：a8)、LED的熄灯检测(模式ID：a9)等。 

对于“模式ID：a3”而言，前提是如图13(a)所示，在收据打印机2中设置了店员或顾客能够操作的操作部75。该操作部75在判定为发生 了异常处理时由店员或顾客操作，其操作结果被输出给异常处理发生检测部72。其中，由于操作部75以外的构成要素与图8同样，所以省略说明。而对于“模式ID：a4”而言，前提是如图13(b)所示，在店员所持有的店员卡200中设置有记录了店员ID的店员ID存储部201、用于与收据打印机2进行无线通信的无线通信部202、和店员能够操作的操作部203。该操作部203在判断为发生了异常处理时被店员操作，其操作结果与从店员ID存储部201读出的店员ID一同，经由无线通信部202被发送给收据打印机2的异常处理发生检测部72。异常处理发生检测部72在接收到的店员ID与收据打印机2的操作者(登记担当者)一致的情况下，基于店员卡200的操作结果，检测异常处理的发生。这样，通过将“模式ID：a3”及“模式ID：a4”作为检测对象，即使在因登记杂乱等而推迟了异常处理的操作那样的情况下，也能够可靠地检测出异常处理的发生。而且，由于“模式ID：a4”进行店员ID的判别，所以收据打印机2不会错误地接收相邻的收银台7中的店员卡200的操作结果。 

另外，“模式ID：a5”的前提是图14(a)所示的构成。即，前提是与POS终端1及收据打印机2一同，在收银台7上设置有用于载置商品或收据R的规定的载置部211、和对商品或收据R被载置到该规定的载置部211进行检测的重量传感器212(载置检测部)，而且收据打印机2与重量传感器212连接。重量传感器212是板式重量测定装置，当被载置商品等时，将其检测结果输出给收据打印机2的异常处理发生检测部72。另外，对于“模式ID：a6”而言，虽然没有特别图示，但其前提是设置有：用于载置商品或收据R的规定的载置部；和用于通过判别载置前后的图像差量，来对在该规定的载置部载置了商品或收据R的情况进行图像识别的相机(也可以应用店内监视相机10)；且收据打印机2能够取得其检测结果。这样，通过将“模式ID：a5”及“模式ID：a6”作为检测对象，能够迅速检测出商品的退货或更换、收据R的取消或修正等异常处理的发生。 

另外，对于“模式ID：a7”及“模式ID：a8”而言，其前提是设置有：取得收银台7周围的声音的麦克、和对所取得的声音进行识别的声音识别部(省略图示)，且收据打印机2能够取得其识别结果。这样，通过将“模式ID：a7”作为检测对象，能够识别出店员或顾客在异常处理时发 出的规定的关键字(例如“错了”、“请给我退货”等异常处理关键字)，从而迅速检测出异常处理的发生。而且，通过将“模式ID：a8”作为检测对象，能够基于店员或顾客在通常处理时发出的规定的关键字(例如“3个苹果”等通常处理关键字)的非识别，迅速检测出异常处理的发生。 

而“模式ID：a9”的前提是图14(b)所示的构成。即，前提是与POS终端1及收据打印机2一同，在收银台7上设置有能够被商品、收据R或手等遮挡其光的LED投光器221、和接收该LED的光的LED受光器222，且收据打印机2与LED受光器222连接。LED受光器222在检测到从LED投光器221投射的光，被规定的载置部211上载置的某种物体遮挡时，将其检测结果输出给收据打印机2的异常处理发生检测部72。这样，通过将“模式ID：a9”作为检测对象，能够随机应变利用商品、收据R或手等检测异常处理的发生。 

其中，图12所示的异常处理发生检测表能够基于店铺管理服务器5等的操作而适当变更其内容。即，对于将哪个发生检测模式作为检测对象、以及检测到异常处理时监视数据的记录开始时刻及记录时间，能够适当变更。 

接下来，参照图15，对特定行动发生检测表进行说明。其中，该表被保存在店铺管理服务器5内。而且，与上述的异常处理发生检测表同样，能够基于店铺管理服务器5等的操作适当变更其内容。 

如该图所示，特定行动发生检测表按每个发生检测模式，相关联地存储有模式ID、特定行动的发生检测模式(成为监视数据记录处理的触发的事态)、检测对象的要否、记录开始时刻和记录时间。例如，在该图的例子中，由于检测对象的要否在“模式ID：b1”及“模式ID：b2”中为“○”，所以在顾客从入口直接移动到登记台前时(模式ID：b1)、和顾客不管登记等待队列而加塞时(模式ID：b2)，检测特定行动的发生。其中，这些行为可以通过利用店内监视相机10，进行顾客的面部认证，并追踪该顾客的移动来实施检测。即，通过从由店内监视相机10取得的监视数据，获取单位时间的帧之间的差量，来检测出动区域，并对该动区域实施面部检测(确认有没有与面部特征量相当的部分)。由此，面部检测成功的部分判别为人，并对判别出的个人进行追踪。另外，当在店内配置了多个RFID 读取器时，通过使顾客持有组装了RFID的会员卡，能够检测出顾客的位置。 

此外，作为特定行动的发生检测模式，能够设定顾客向店员递交商品或收据R(模式ID：b3)、店员向周围张望的(模式ID：b4)、店员数次出入收银台7(模式ID：b5)等。 

这里，参照图16的流程图，对“模式ID：b3”的检测处理进行说明。店铺管理服务器5(特定行动判定部82)根据店内监视相机10的监视结果，进行店员的面部检测及面部识别(S51)，确定店员的位置(S52)。同样，根据店内监视相机10的监视结果，进行顾客的面部检测及面部识别(S53)，确定顾客的位置(S54)。进而，跟踪顾客的手的动作(S55)，在判定为顾客向店员的方向移动了手的情况下(S56)，根据该判定结果判定为进行了商品或收据R的交接(S57)。这样，通过将“模式ID：b3”设为检测对象，能够将店员和顾客的具有异常处理的特征的动作检测为特定行动。另外，对于“模式ID：b4”，通过反复进行根据店内监视相机10的监视结果检测出动区域，并从该动区域检测出人的面部这一步骤，来检测出店员的动作(头部的位置变化)。由此，在头部的位置变化剧烈的情况下(如向周围张望那样的动作时)，能够判断为有可能东张西望、即进行了违法行为等。 

而对于“模式ID：b5”，判定是否从对收银台7进行摄像的店内监视相机10，连续多次检测到同一店员。由此，例如能够简单地检测出在收银台7周边往来那样的不自然的行动。而且，当在店内配置了多个RFID读取器时，通过规定店员必须持有组装了RFID的店员卡200，能够实现这种店员的行动检测。 

如以上说明那样，根据第2实施方式的信息处理装置A2，由于检测异常处理的发生，并记录以该异常处理的发生检测时为基准的规定时间量的监视数据，所以可防止不必要的监视数据记录。由此，能够只记录作为违法行为的有利证据的监视数据，进而可以更高效地检测出违法行为。而且，由于具备在店内监视相机10进行监视的期间，随时更新并存储规定时间量的监视数据的子存储部84，所以还能够记录异常处理的发生检测前的监视数据。由此，即便是异常处理发生前的监视数据被认为重要那样的 违法行为，也能够没有障碍地将其检测出。 

另外，除了检测到异常处理的发生时之外，在判定了店员或顾客的特定行动的情况下，也能够记录以特定行动判定时为基准的规定时间量的监视数据。由此，店长等能够高效地确认违法行为。 

而且，由于能够根据店铺来定制成为监视数据记录处理的触发的异常处理/特定行动的发生检测模式，所以便利性出色。并且，由于记录开始时刻、记录时间也能按每个发生检测模式进行设定，所以便利性更加出色。 

另外，上述实施方式的异常处理发生检测部72通过利用结帐信息取得部71取得含有表示异常处理的信息的结帐信息，对异常处理的发生进行了检测，但当收据打印机2能够识别在POS终端1中进行了“取消键”等成为异常处理的触发的键操作时，也可以通过识别该键操作，来检测异常处理的发生。 

而且，在上述的实施方式中，由收据打印机2、收据扫描仪9及店铺管理服务器5构成了信息处理装置A2，但也可以成为省略店铺管理服务器5的构成。该情况下，成为收据打印机2具备店铺管理服务器5的各部的构成。另外，也可以在POS终端1内具备信息处理装置A2的各部，或将存储部80设置在信息处理装置A2的外部。 

并且，在上述的实施方式中，作为监视数据，记录了店内监视相机10的摄像结果，但在通过RFID读取器监视店员及/或顾客的情况下，可以记录店内配置的多个RFID读取器的读取结果来作为监视数据。另外，在利用GPS对店员及/或顾客进行监视的情况下，可以记录GPS数据(店员及/或顾客的位置信息)来作为监视数据。 

另外，在上述的实施方式中，例示了利用收据R的读取结果，进行结帐处理信息的再登录的情况(参照图10)，但在作为异常处理，检测到因操作错误而发生了两次计费的情况下，通过对收据打印机2上设置的规定按钮的按压，可以根据未图示的结帐处理缓冲器内登录完毕的信息，恢复到引起错误之前的状态。其中，两次计费的发生可以在收据打印机2侧自动检测出连续输出了相同的商品数据，也可以通过由店员对未图示的操作部的操作来检测。该情况下，通过店员在POS终端1侧只删除重复的商品，能够同时进行错误登记处理、和正确的结算处理。 

[第3实施方式] 

接着，参照图17～图22，对本发明的第3实施方式进行说明。本实施方式的课题在于，生成用于容易且迅速地判断店员及/或顾客的违法行为的统计报告50。需要说明的是，在本实施方式中，对与上述各实施方式同样的构成部分赋予了同样的符号，并省略详细的说明。而且，针对与上述各实施方式同样的构成部分适用的变形例，对于本实施方式也同样适用。 

图17是第3实施方式涉及的店铺监视系统SY3的功能框图。本实施方式的店铺监视系统SY3由POS终端1、收据打印机2、监视店员的店员监视相机3、和统一管理店铺监视系统SY3的店铺管理服务器5构成。与上述的各实施方式同样，POS终端1与收据打印机2通过串行接口连接成能够通信。而且，成为店员监视相机3的摄像结果经由店铺内LAN6(参照图1)被发送给店铺管理服务器5的构成。其中，在本实施方式中，如虚线框所示那样，由收据打印机2及店铺管理服务器5构成信息处理装置A3(信息处理系统)。 

作为主要的功能构成，POS终端1具有结帐处理部11。而且，作为主要的功能构成，店员监视相机3具有摄像部31。摄像部31与第1实施方式同样，被设置在收银台7的周围，对店员、顾客及收银台7上的商品等进行摄像。摄像部31的摄像实时进行，其摄像结果被存储在后述的数据库103中。需要说明的是，在结帐处理时(包括异常处理时及购买时(结算处理时))，各结帐处理时的摄像结果(以结帐处理时为基准的前后规定时间的摄像数据)与各结帐处理的事务数据相关联地存储在数据库103中。而且，摄像部31能够拍摄运动图像及静止图像。但也可以只拍摄运动图像，将其中的1个镜头作为静止图像进行利用。 

作为主要的功能构成，收据打印机2具有：结帐信息取得部71、店员/顾客判定部92及打印部26。结帐信息取得部71从POS终端1(结帐处理部11)取得结帐信息。 

店员/顾客判定部92用于判定正在操作着POS终端1的店员、及结帐处理时的顾客的至少一方。在本实施方式中，根据所取得的结帐信息中含有的店员ID、顾客ID等信息，来判定店员及/或顾客。另外，在店员持有 店员卡200(参照图13(b))的情况、以及顾客持有会员卡的情况下，可以根据RFID读取器的读取结果，判定店员及/或顾客。并且，可以根据店内监视相机10的摄像结果进行面部认证，然后基于该认证结果判定店员及/或顾客。需要说明的是，对于面部认证，能够基于面部特征量，判定与面部认证用数据库(记录有店员与顾客的面部特征量的数据库，省略图示)中记录的人物是否是同一人物。对于面部特征量的提取，将利用图18在后面叙述。 

打印部26将结帐信息取得部71取得的结帐信息打印到收据纸张上，然后发放收据R。 

另一方面，作为主要的功能构成，店铺管理服务器5具有：异常处理信息记录部101、购买时信息记录部102、数据库103、违法判定部104、历史记录信息输出部105、检索关键字指定部106及异常处理信息提取部107。 

异常处理信息记录部101在结帐信息取得部71取得的结帐信息中含有表示异常处理的信息时(从收据打印机2取得的转换数据是异常处理信息的情况下)，生成由店员/顾客判定部92判定出的店员的店员ID或顾客的顾客ID、与包含异常处理的类别的规定事项(包含事务数据)相关联的异常处理关联信息，并记录到数据库103中。即，异常处理关联信息记录部101仅在异常处理发生时生成异常处理关联信息，并记录到数据库103中。 

购买时信息记录部102将购买商品时由结帐信息取得部71取得的结帐信息、即购买时信息(基于在商品购买时取得的转换数据的信息，相当于事务数据)记录到数据库103中。另外，作为购买时信息，可以记录在1次结帐处理中被显示于顾客显示器4的显示数据。 

记录控制部83能够与第2实施方式同样地发挥功能。即，在未图示的子存储部84(缓冲器)中随时更新并存储规定时间量的摄像数据，能够由记录控制部83读出子存储部84中存储的摄像数据的一部分，将其记录到与主存储部85相当的数据库103中。其中，本实施方式的记录控制部83在摄像部31的摄像结果中含有人物的情况下，附加从该摄像结果得到的顾客数据(颜色特征量及面部特征量)后记录到数据库103中。对于颜 色特征量及面部特征量的提取，将通过图18在后面叙述。 

数据库103如上所述那样，将异常处理关联信息与异常处理时的摄像部31的摄像结果关联存储，并将购买时信息与购买时的摄像部31的摄像结果关联存储。 

违法判定部104根据摄像部31的监视结果，判定店员及顾客至少一方的违法可能性。例如，对于店员的违法，在检测到第2实施方式所示的特定行动的发生检测模式中、“店员向周围张望(模式ID：b4)”或“店员数次出入收银台(模式ID：b5)”等情况下，可以判定为有违法的可能性。另外，对于顾客的违法，例如在未通过收银台7地持商品而去的情况下，可判定为有违法的可能性。 

此外，违法判定部104在检测到商品退货时的顾客与购买时的顾客不是同一人物、结帐处理时收银台7前不存在顾客、对特定的人(例如公司职员)进行商品折扣的特定折扣处理时顾客不属于特定的人等情况下，判定为有违法的可能性。其中，对于上述的判定处理将通过图19在后面叙述。 

历史记录信息输出部105在结帐信息取得部71取得的结帐信息(从收据打印机2取得的转换数据)中含有表示异常处理的信息、且由违法判定部104判定为有违法的可能性的情况下，对相符的店员或顾客的异常处理关联信息进行统计，并输出统计报告50。而且，历史记录信息输出部105在由后述的检索关键字指定部106指定了检索关键字的情况下，也输出统计报告50。其中，在本实施方式中，作为输出方法，设想了打印输出、和利用电子邮件或Web应用程序向管理者(店长等)的发送。另外，在统计报告50中还一并打印/表示了与各异常处理关联信息相关联的摄像部31的摄像结果，详细情况将在后面叙述。 

检索关键字指定部106用于指定输出统计报告50用的检索关键字，是包括键盘、鼠标等操作机构的概念。作为检索关键字，可以指定店员ID、顾客ID、异常处理的类别、异常处理日期时间、异常处理编号、成为异常处理的对象的商品、收银台7前有无顾客、店员的位置、包括收银台7周围的店内的声音数据与摄像数据等、能够从异常处理关联信息确定的信息与能够从摄像部31的摄像结果确定的信息(第2实施方式所示的标签信 息等)。 

异常处理关联信息提取部107从数据库103中提取出与由检索关键字指定部106指定的检索关键字相符的异常处理关联信息。此时，在指定了多个项目(例如店员ID、顾客ID)的情况下，将它们作为and条件或or条件，来提取出异常处理关联信息。历史记录信息输出部105对由异常处理关联信息提取部107提取出的异常处理关联信息进行统计，输出历史记录信息。 

接着，参照图18的流程图，对信息处理装置A3的数据记录处理进行说明。其中，该处理是对用于判别退货时的顾客与购买时的顾客是否是同一人物所需的顾客数据(颜色特征量及面部特征量)进行记录的处理。 

当收据打印机2取得了结帐信息时(S61，结帐信息取得部71)，店铺管理服务器5取得店内监视相机10的摄像数据(S62)。然后，由记录控制部83提取出帧之间的差量、和背景差量(S63)，并根据该提取结果检测动区域(S64)。而且，从检测出的动区域进行面部检测(S65)、提取出衣服部分的颜色特征量(S66)。并且，对进行了面部检测后的面部部分的图像进行规一化(S67)，提取出面部特征量。随后，将提取出的颜色特征量及面部特征量作为顾客数据，与摄像结果一同记录到数据库103中(S69)。 

其中，面部特征量还被用于判别特定折扣处理时的顾客是否与特定的人相符。此时的面部特征量只要根据特定的人的面部图像(照片)预先算出，并保存到未图示的面部特征量数据库即可。需要说明的是，在本实施方式中，将“公司职员”作为特定的人，来判定公司职员折扣处理时的违法。 

接着，参照图19的流程图，对信息处理装置A3的统计报告生成处理进行说明。该处理是判定为店员或顾客有违法的可能性时输出的统计报告50的生成处理。如上所述，由于在异常处理时、且判定为店员或顾客有违法的可能性时输出统计报告50，所以前提是在成为该处理的触发的结帐信息中，含有表示异常处理的信息。 

当收据打印机2取得了结帐信息时(S71，结帐信息取得部71)，店铺管理服务器5生成异常处理关联信息，并将其记录到数据库103中(S72， 异常处理关联信息记录部101)。而且违法判定部104如下所述，判别异常处理的类别，并根据该类别判定违法的可能性。 

例如，在异常处理的类别是“退货”的情况下(S73：是)，从数据库103取得退货处理时的顾客数据(颜色特征量及面部特征量)以及购买时的顾客数据(颜色特征量及面部特征量)(S74)，将两者进行比较(S75)。结果，对退货时的顾客与购买时的顾客是否是同一人物进行判别(S76)，在是同一人物的情况下(S76：是)，判定为没有违法的可能性，结束处理。而在不是同一人物的情况下(S76：否)，判定为有违法的可能性，通过历史记录信息输出部105从数据库103取得相符的顾客的图像数据及异常处理关联信息(退货历史记录)(S77)，生成统计报告50(S78)。 

另一方面，在异常处理的类别是“错误登记”的情况下(S79：是)，违法判定部104取得基于店内监视相机10的摄像数据的面部检测结果(S80)，判别在收银台7前是否存在顾客(S81)。当存在顾客时(S81：是)，判定为没有违法的可能性，结束处理。而当不存在顾客时(S81：否)，判定为有违法的可能性，通过历史记录信息输出部105从数据库103取得相符的店员及顾客的图像数据、以及相符的登记担当者(店员)的错误登记历史记录(S82)，生成统计报告50(S78)。 

另一方面，在异常处理的类别是“公司职员折扣”的情况下(S83：是)，违法判定部104从面部特征量数据库取得折扣对象者数据(面部特征量)(S84)、判别是否是相符的店员(S85)。在是相符的店员的情况下(S85：是)，判定为没有违法的可能性，结束处理。而在不是相符的店员的情况下(S85：否)，判定为有违法的可能性，通过历史记录信息输出部105从数据库103取得相符的店员及顾客的图像数据、以及相符的登记担当者(店员)的公司职员折扣历史记录(S86)，生成统计报告50(S78)。 

接着，参照图20～图22，对统计报告50的内容进行说明。图20是表示在退货处理时，当判定为有违法的可能性时输出的统计报告50a的一例的图。此时的统计报告50a中除了报告发行日期时间及报告编号之外，还包括：退货时顾客的面部图像(静止图像)121、购买时顾客的面部图像(静止图像)122、用于再生运动图像的条形码123、退货概要124、与 退货顾客相关的过去的退货状况125、和影像链接的说明126。 

在该图的例子中，未显示购买时顾客的面部图像122。这意味着退货时出示的收据R的信息在数据库103内不存在。例如，存在着利用在其他店铺购买的商品、和伪造的收据R来进行退货的情况。由此，确认统计报告50a的管理者能够判断进行了违法退货(无凭据的退货)的可能性。 

另外，条形码123用于确认退货时的摄像部31的摄像结果，如在影像链接的说明126中记载那样，通过利用未图示的条形码读取器对条形码123进行扫描，能够在未图示的显示器上显示退货时的影像。 

另外，退货概要124是从数据库103中记录的异常处理关联信息得到的信息，包括：退货发生时刻(异常处理发生日期时间)、事务编号、退货物(成为退货对象的商品的商品名)、退货额(异常处理时的交易金额)、退货时登记担当(根据异常处理关联信息或摄像结果判定的退货处理时的店员的名字)、购买对应历史记录的有无(数据库103中是否存在与退货时出示的收据R上记载的信息相同内容的事务数据)等。 

另外，在与退货顾客相关的过去退货状况125中，包括过去(例如1年以内)退货顾客的退货次数、此时的退货物一览及其比例、退货顾客退货时的登记担当的次数及其比例等。根据这些信息，管理者能够类推出退货的频度、成为退货对象的商品，可判断是否是顾客与店员合谋的违法退货。例如，在如该图的例子那样，退货时的登记担当是固定的人物时，可以判断为存在顾客与店员合谋进行了违法退货的可能性。 

另外，对于图20所示的统计报告50a，在显示了购买时顾客的面部图像122(存在购买对应历史记录)、或作为退货顾客退货时的登记担当显示了多个店员的名字的情况下，管理者可以判断为进行违法退货的可能性低。 

图21是表示在错误登记处理时，当判定为有违法的可能性时输出的统计报告50b的一例的图。此时的统计报告50b中除了报告发行日期时间及报告编号之外，还包括：错误登记发生时收银台7周围的图像(静止图像)131、用于再生运动图像的条形码132、错误登记概要133、与登记担当相关的过去的错误登记发生状况134、和影像链接的说明135。其中，条形码132用于确认错误登记发生时摄像部31的摄像结果(运动图像)， 在影像链接的说明135中记载有其内容。 

另外，错误登记概要133是从数据库103中记录的异常处理关联信息获得的信息，包括：错误登记发生时刻(异常处理发生日期时间)、事务编号、取消额(异常处理时的交易金额)、错误登记发生时的登记担当(根据异常处理关联信息或摄像结果判定的错误登记发生时的店员的名字)、对象顾客的有无(错误登记发生时在收银台7前是否存在顾客)等。在该图的例子中，由于对象顾客为“无”，从错误登记发生时收银台7周围的图像131也能够确认该情况，所以可判断为有错误登记违法的可能性。 

而且，与登记担当相关的过去的错误登记发生状况134中包括：过去(例如1年以内)的登记担当的总错误登记次数、同一期间登记担当的总劳动时间(从未图示的出勤管理数据库获得的信息)、单位时间(例如1小时)的错误登记发生次数、错误登记发生时间段及其比例等。根据这些信息，管理者能够针对相应的登记担当把握存在什么样程度的错误登记、和在什么样的时间段错误登记多等，可以将该结果在店员的操作教育中利用。并且，能够根据存在对象顾客的状况下的错误登记发生次数比不存在顾客的状况下的错误登记发生次数明显高、或在错误登记发生时间段中存在偏重等，判断为有错误登记违法的可能性。 

另外，对于图21所示的统计报告50b，当错误登记发生时收银台7周围的图像131中包括顾客(存在对象顾客)、或错误登记发生次数与顾客的有无无关没有偏重的情况下，管理者可以判断为错误登记违法的可能性低。 

图22是表示在公司职员折扣处理时，当判定为有违法的可能性时输出的统计报告50c的一例的图。此时的统计报告50c中除了报告发行日期时间及报告编号之外，还包括：公司职员折扣发生时顾客的面部图像(静止图像)141、公司职员折扣发生时收银台7周围的图像(静止图像)142、用于再生公司职员折扣发生时的运动图像的条形码143、公司职员折扣概要144、与登记担当相关的过去的公司职员折扣发生状况145、和影像链接的说明146。由于条形码143及影像链接的说明146与图20及图21的例子同样，所以省略说明。 

公司职员折扣概要144是从数据库103中记录的异常处理关联信息获 得的信息，包括：公司职员折扣发生时刻(异常处理发生日期时间)、事务编号、购买额、折扣额、公司职员折扣发生时的登记担当(根据异常处理关联信息或摄像结果判定的公司职员折扣发生时的店员的名字)、对象公司职员(当存在根据面部特征量被判定为同一人物的公司职员时，其名字)等。其中，在本例中，从购买额减去折扣额得到的金额，成为异常处理时的交易金额。而且，由于在该图的例子中，对象公司职员为“没有店员对应者”，所以可判断为有违法公司职员折扣的可能性。 

另外，在与登记担当相关的过去的公司职员折扣发生状况145中，包括：过去(例如1年以内)的登记担当的总公司职员折扣次数、同一期间登记担当的总劳动时间(从未图示的出勤管理数据库得到的信息)、单位时间的公司职员折扣发生次数、公司职员折扣担当次数(成为公司职员折扣对象的店员的名字和其比例)等。根据这些信息，管理者能够把握对应的登记担当以怎样的程度进行了公司职员折扣、以及对什么样的人物进行了公司职员折扣等。由此，可以根据单位时间的公司职员折扣发生次数极度多、或在公司职员折扣担当次数中存在偏重等，来判断为有违法公司职员折扣的可能性。 

另外，对于图22所示的统计报告50c，在单位时间的公司职员折扣发生次数少、或公司职员折扣担当次数中没有偏重的情况下，管理者可以判断为违法公司职员折扣的可能性低。 

如上所述，图20～图22所示的统计报告50能够由管理者在任意的时刻，通过检索关键字指定部106指定了检索关键字的情况下输出。例如，通过指定异常处理编号(事务编号)作为检索关键字，能够输出与该异常处理的类别对应的统计报告50(50a、50b、50c中任意一个)。另外，能够基于店员ID和异常处理的类别的指定(and条件)，输出与登记担当相关的过去的错误登记发生状况134(参照图21)或与登记担当相关的过去的公司职员折扣发生状况145(参照图22)等，作为统计报告50。 

而且，也可以通过指定收银台7前有无顾客来作为检索关键字，从而输出包含被判定为对象顾客为“无”的异常处理的一览(优选按每个店员、或按每个异常处理的类别分类)的统计报告50。并且，也可以通过指定店员的位置来作为检索关键字，从而输出包含在指定位置(指定收银台)存 在店员时的异常处理的一览(优选按每个店员、按每个顾客、或每个异常处理的类别分类)的统计报告50。这样，管理者通过检索关键字的指定，可以在必要的时刻输出必要的统计报告50。 

如以上说明那样，根据第3实施方式的信息处理装置A3，由于在数据库103中预先记录了使店员ID、顾客ID、关于异常处理的规定事项(事务数据)相关联的异常处理关联信息，能够按每个店员ID或顾客ID统计这些异常处理关联信息，输出统计报告50，所以，可以根据该统计结果容易且迅速地判断店员或顾客的违法行为。即，管理者能够基于输出的统计报告50，确认该店员或顾客过去与什么样的异常处理相关、以及其次数等，来判断违法行为的有无。 

而且，在根据店员或顾客的监视结果判定为有违法的可能性时，可以在管理者不进行特别的操作的情况下输出统计报告50。即，由于不需要管理者主动执行检索处理，所以能够大幅减轻违法行为的验证所需要的劳力。并且，由于违法的可能性被客观判定，所以能够不基于管理者的主观与力量，准确地判定违法行为的有无。 

而且，由于能够利用电子邮件或Web应用程序将统计报告50发送给预先决定的管理者，所以无论管理者身居何处，都能够发送历史记录信息。并且，由于结帐处理时(购买时或异常处理发生时)的摄像部31的摄像结果与从异常处理关联信息得到的历史记录信息，被一同输出到统计报告50，所以管理者可以将该摄像结果作为违法行为的验证材料。 

而且，管理者能够根据统计报告50以静止图像和运动图像双方，确认商品购买时或违法判定时店员与顾客的状况，可以更准确地把握收银台7周围的状况。并且，由于运动图像能够通过条形码123、132、143的读取而再生，所以店长等能迅速确认运动图像。 

另外，在上述的实施方式中，例示了打印输出统计报告50的情况，但在历史记录信息作为Web页等被输出的情况下，也可以取代条形码123、132、143，而显示与该运动图像链接的图标。 

而且，在上述的实施方式中，从与店铺管理服务器5连接的报告输出用打印机8打印统计报告50，但也可以由收据打印机2打印统计报告50。另外，在是与店员的违法相关的统计报告50时，也可以从被配置在检测 到违法的收银台7以外的其他收据打印机2(与店铺内LAN6连接的打印机)打印统计报告50。根据该构成，在判定为有违法的可能性时，能够在店内实时进行店员或顾客的违法验证。 

而且，上述的实施方式中，在异常处理的类别是错误登记处理的情况下，以异常处理时不存在顾客作为条件，判定为有违法的可能性，但在其他的异常处理(例如“退货处理”、“兑换处理”、“折扣处理”、“降价处理”等)中也能够应用。 

并且，在上述的实施方式中，通过结帐信息中含有表示异常处理的信息，来检测异常处理的发生，但也可以如第2实施方式所示那样，基于收据R的读取、店员或顾客操作规定的操作部、或在规定的载置部载置商品或收据R等，来检测异常处理的发生。 

另外，在上述的实施方式中，由收据打印机2及店铺管理服务器5构成了信息处理装置A3，但也可以采用省略店铺管理服务器5的构成。该情况下，成为收据打印机2具备店铺管理服务器5的各部的构成。而且，可以在POS终端1内具备信息处理装置A3的各部、或将数据库103设置在信息处理装置A3的外部。 

以上，根据第1实施方式～第3实施方式，在收据打印机2中能够检测异常处理的发生，通过以该异常处理发生时刻为基准来记录监视数据，能够有效地记录有助于店员或顾客的违法验证的监视数据。而且，起到下述等效果：通过按每个店员及/或顾客统计异常处理时的规定事项，并与店员监视相机3的摄像结果一同作为统计报告50输出，管理者能够容易且迅速地判断违法行为的有无。 

另外，能够将上述各实施方式涉及的店铺监视系统SY1～SY3的控制方法(上述各实施方式中表示的流程图)的各步骤，作为程序进行提供。而且，还能够将该程序保存到各种记录介质(CD-ROM、闪存存储器等)中进行提供。即，用于使计算机作为收据打印机2或信息处理装置A2、A3的各构成要素发挥功能的程序、以及记录有该程序的记录介质，也包含在本发明的范围中。 

而且，在上述的各实施方式中，例示了由收据打印机2与店铺管理服务器5实现本发明的信息处理装置的情况，但也可以由其他的电子设备来 实现。并且，还可以在店员、顾客的违法检测以外的用途中加以利用。此外，不限定于上述的实施例，在不脱离本发明主旨的范围内，还能够对店铺监视系统SY1～SY3的装置构成和处理步骤等适当进行变更。 

Claims (16)

1.一种信息处理装置，其特征在于，具备：

输出数据取得部，其取得从POS终端输出的输出数据；

操作判定部，其根据取得的所述输出数据，判定所述POS终端的操作；

数据转换部，其将所述操作判定部的判定结果转换成外部装置能够解释的规定形式的数据；和

转换数据输出部，其将被所述数据转换部转换后的转换数据输出给所述外部装置，

所述输出数据是用于发放收据的打印数据，

所述操作判定部判定所述POS终端的操作是否是用于执行结帐处理的异常处理的操作，

在由所述操作判定部判定为所述POS终端的操作是用于执行所述异常处理的操作时，所述转换数据输出部输出与所述异常处理相关的异常处理信息作为所述转换数据，

所述信息处理装置还具备：将所述打印数据打印到纸张上的打印部，以及

摄像结果取得部，其从用于对设置有所述POS终端的收银台周围进行摄像的摄像装置取得摄像结果，在由所述操作判定部判定为所述POS终端的操作是用于执行所述异常处理的操作时，所述转换数据输出部将以所述操作判定部的判定时为基准的前后规定时间内的所述摄像装置的摄像结果，与所述异常处理信息一同输出。

2.根据权利要求1所述的信息处理装置，其特征在于，

所述操作判定部参照能够根据所述POS终端的规格而改写的转换表，判定所述POS终端的操作。

3.根据权利要求1所述的信息处理装置，其特征在于，

所述输出数据是顾客显示器的显示数据，

该信息处理装置还具备将所述显示数据输出到所述顾客显示器的显示数据输出部。

4.根据权利要求1所述的信息处理装置，其特征在于，

所述操作判定部判定所述异常处理的类别，

以所述操作判定部的判定时为基准的前后规定时间根据所述异常处理的类别被决定。

5.根据权利要求1所述的信息处理装置，其特征在于，

所述操作判定部判定所述异常处理的交易金额，

以所述操作判定部的判定时为基准的前后规定时间根据所述异常处理的交易金额被决定。

6.根据权利要求1所述的信息处理装置，其特征在于，

所述外部装置具有将所述异常处理信息与所述摄像装置的摄像结果关联存储的数据库。

7.一种信息处理系统，具备权利要求1所述的信息处理装置和所述外部装置，该信息处理系统的特征在于，

所述操作判定部包括店员/顾客判定部，其对正在操作所述POS终端的店员及所述POS终端的结帐处理时的顾客之中的至少一方进行判定，

所述外部装置具备：

异常处理关联信息记录部，其在从所述信息处理装置取得的所述转换数据中含有表示所述结帐处理的异常处理的信息时，生成使由所述店员/顾客判定部判定出的所述店员的店员ID或所述顾客的顾客ID、与包括所述异常处理的类别的规定事项关联的异常处理关联信息，并将其记录到数据库中；和

历史记录信息输出部，其按每个所述店员ID或所述顾客ID统计所述数据库中存储的所述异常处理关联信息，并作为历史记录信息将其输出。

8.根据权利要求7所述的信息处理系统，其特征在于，

所述外部装置还具备：

检索关键字指定部，其指定所述店员ID、所述顾客ID、所述异常处理的类别、异常处理日期时间、异常处理编号、成为所述异常处理的对象的商品、配置有所述POS终端的收银台前有无顾客、店员的位置之中的至少1个信息作为检索关键字；和

异常处理关联信息提取部，其从所述数据库中提取出与被指定的所述检索关键字相符的所述异常处理关联信息；

所述历史记录信息输出部对由所述异常处理关联信息提取部提取出的所述异常处理关联信息进行统计，输出所述历史记录信息。

9.根据权利要求7所述的信息处理系统，其特征在于，

所述外部装置还具备违法判定部，其根据对所述店员及所述顾客之中的至少一方进行监视的监视部的监视结果，判定所述店员及所述顾客之中的至少一方的违法可能性，

所述历史记录信息输出部在所取得的所述转换数据中含有表示所述异常处理的信息、且由所述违法判定部判定为有违法的可能性时，对相应的所述店员或所述顾客的所述异常处理关联信息进行统计，输出所述历史记录信息。

10.根据权利要求7所述的信息处理系统，其特征在于，

所述历史记录信息输出部利用电子邮件或Web应用程序，向预先确定的管理者发送所述历史记录信息。

11.根据权利要求9所述的信息处理系统，其特征在于，

所述监视部包括对所述店员及所述顾客之中的至少一方进行摄像的摄像部，

所述历史记录信息输出部将所述违法判定部的违法判定时的所述摄像部的摄像结果，与所述历史记录信息一同输出。

12.根据权利要求11所述的信息处理系统，其特征在于，

所述外部装置还具备购买时信息记录部，其将基于商品购买时取得的转换数据的购买时信息，与该购买时的所述摄像部的摄像结果关联地记录到所述数据库中，

所述历史记录信息输出部将购买成为所述异常处理的对象的商品时的所述摄像部的摄像结果，与所述历史记录信息一同输出。

13.根据权利要求12所述的信息处理系统，其特征在于，

当所述异常处理的类别是进行商品退货的“退货”时，

所述违法判定部将退货处理时的所述摄像部的摄像结果或异常处理关联信息、与购买成为退货处理的对象的商品时的所述摄像部的摄像结果或购买时信息进行对照，在退货处理时的顾客与购买时的顾客不是同一人物的情况下，判定为有违法的可能性。

14.根据权利要求9所述的信息处理系统，其特征在于，

所述违法判定部根据所述监视部的异常处理时的监视结果，判别顾客的有无，当不存在该顾客时，判定为有违法的可能性。

15.根据权利要求9所述的信息处理系统，其特征在于，

当所述异常处理的类别是对特定的人进行商品折扣的“特定折扣”时，

所述违法判定部根据特定折扣处理时的监视结果，判别相应的顾客是否符合所述特定的人，在不符合该特定的人的情况下，判定为有违法的可能性。

16.一种信息处理装置的控制方法，是与POS终端及外部装置连接而使用的信息处理装置的控制方法，其特征在于，

所述信息处理装置执行下述步骤：

输出数据取得步骤，取得从所述POS终端输出的输出数据；

操作判定步骤，根据取得的所述输出数据，判定所述POS终端的操作；

数据转换步骤，将所述操作判定步骤中的判定结果转换成所述外部装置能够解释的规定形式的数据；和

转换数据输出步骤，将被所述数据转换步骤转换后的转换数据输出给所述外部装置，

所述输出数据是用于发放收据的打印数据，

所述操作判定步骤判定所述POS终端的操作是否是用于执行结帐处理的异常处理的操作，

在由所述操作判定步骤判定为所述POS终端的操作是用于执行所述异常处理的操作时，所述转换数据输出步骤输出与所述异常处理相关的异常处理信息作为所述转换数据，

所述信息处理装置还执行将所述打印数据打印到纸张上的打印步骤以及

摄像结果取得步骤，从用于对设置有所述POS终端的收银台周围进行摄像的摄像装置取得摄像结果，

在由所述操作判定步骤判定为所述POS终端的操作是用于执行所述异常处理的操作时，所述转换数据输出步骤将以所述操作判定部的判定时为基准的前后规定时间内的所述摄像装置的摄像结果，与所述异常处理信息一同输出。