JP2023173173A - 不正監視装置及びそのプログラム - Google Patents

Abstract

【課題】決済端末の操作に関して不正行為のおそれがある場合に決済を行えないようにする。【解決手段】不正監視装置は、不正検出手段と、受付手段と、禁止手段とを備える。不正検出手段は、決済端末に対する操作者の不正を検出する。受付手段は、不正に対して検証済の指示を受け付ける。禁止手段は、検証済の指示を受け付けていない不正が残っている決済端末の決済処理を禁止する。【選択図】 図２

Description

本発明の実施形態は、不正監視装置及びそのプログラムに関する。

セルフＰＯＳ端末は、買上商品の登録から決済までの各種の操作を原則として客が行うようにしたフルセルフタイプの決済端末である。このような決済端末では、客が買上商品群に加えた商品を買上商品として正しく登録しない等の不正行為が行われてしまうことがあり得る。そこで、カメラにより客の行動を撮影し、撮影された動画を店員等が確認することで、不正行為が行われたか否かを検証することは既に行われている。

しかしながら、客の行動を撮影した動画から客の不正行為を店員が見つけ出すには、長い時間を要する場合があった。このため、店員が客の不正行為を見つけ出してもすでに客が決済を済ませており、不正を正すことができない場合があった。このような事情から、決済端末の操作に関して不正行為のおそれがある場合に決済を行えないようにすることが望まれていた。

特開２０２１－１３５６２０号公報

本発明の実施形態が解決しようとする課題は、決済端末の操作に関して不正行為のおそれがある場合に決済を行えないようにできる不正監視装置及びそのプログラムを提供しようとするものである。

一実施形態において、不正監視装置は、不正検出手段と、受付手段と、禁止手段とを備える。不正検出手段は、決済端末に対する操作者の不正を検出する。受付手段は、不正に対して検証済の指示を受け付ける。禁止手段は、検証済の指示を受け付けていない不正が残っている決済端末の決済処理を禁止する。

図１は、セルフＰＯＳ端末が導入された店舗のシステム構成図である。 図２は、不正監視装置の主要な機能構成を示すブロック図である。 図３は、セルフＰＯＳ端末とカメラとの位置関係を説明するための図である。 図４は、アテンダント端末の概略構成を示す模式図である。 図５は、アテンダント端末の表示デバイスに表示される監視画像の一例を示す模式図である。 図６は、不正監視装置の要部回路構成を示すブロック図である。 図７は、不正監視装置におけるプロセッサの不正監視モードに係る情報処理の要部手順を示す流れ図である。 図８は、不正監視装置におけるプロセッサの不正検証モードに係る情報処理の要部手順を示す流れ図である。 図９は、不正行為検証前の監視画像領域の動画再生領域と進行状況バー領域とを示す模式図である。 図１０は、不正行為検証後の監視画像領域の動画再生領域と進行状況バー領域とを示す模式図である。

以下、不正監視装置の一実施形態について、図面を用いて説明する。
この実施形態は、セルフＰＯＳ端末１１（図１を参照）を決済端末の一例とする。そして、セルフＰＯＳ端末１１の操作に関して不正行為のおそれがある場合に、そのセルフＰＯＳ端末１１において決済を行えないようにする不正監視装置２４（図１を参照）を例示するものである。はじめに、不正監視装置２４を備えた店舗のシステム構成について説明する。

［店舗のシステム構成説明］
図１は、セルフＰＯＳ端末１１が導入された店舗のシステム構成図である。本システムは、セルフＰＯＳシステム１００と、不正行為監視システム２００とを含む。セルフＰＯＳシステム１００は、複数台のセルフＰＯＳ端末１１と、ＰＯＳサーバ１２と、表示制御装置１３と、アテンダント端末１４と、通信ネットワーク１５と、を備える。複数台のセルフＰＯＳ端末１１と、ＰＯＳサーバ１２と、表示制御装置１３とは、通信ネットワーク１５に接続する。アテンダント端末１４は、表示制御装置１３に接続する。通信ネットワーク１５は、典型的にはＬＡＮ（Local Area Network）である。ＬＡＮは、有線ＬＡＮであってもよいし、無線ＬＡＮであってもよい。

セルフＰＯＳ端末１１は、買上商品の登録から決済までの操作を客が自ら行うようにしたフルセルフタイプの決済端末である。すなわち客は、セルフＰＯＳ端末１１に対する操作者となり得る。なお、客に代わって店員が操作者となる場合もあり得る。

ＰＯＳサーバ１２は、各セルフＰＯＳ端末１１の動作を一元的に制御するためのサーバ用コンピュータである。ＰＯＳサーバ１２の制御により、各セルフＰＯＳ端末１１においては、同一の条件で買上商品の登録処理、決済処理等が行われる。

ＰＯＳサーバ１２は、会員データベース１２１と不正データベース１２２とを管理する。会員データベース１２１は、店舗の会員毎に作成される会員データの集合体である。会員は、例えば既知のポイント会員である。会員データは、各会員を個々に識別するために会員毎に設定された一意の会員ＩＤを含む。また会員データは、会員が保有する累計ポイント、来店回数等を含む。各会員は、自らの会員ＩＤが記録された会員カードを所有する。あるいは会員は、会員専用のアプリケーションソフトウェアをスマートフォン等の情報端末にインストールする。このアプリケーションソフトウェアを起動することによって、情報端末の表示デバイスには、会員ＩＤを示すバーコード又は二次元コードが表示される。

不正データベース１２２は、セルフＰＯＳ端末１１の操作に関して不正行為が店員により認定される毎に作成される不正データの集合体である。不正データは、例えば不正行為が認定された日時、不正行為が認定されたセルフＰＯＳ端末１１の識別情報であるレジ番号等を含む。不正データは、セルフＰＯＳ端末１１の操作者が会員である場合にはその会員ＩＤも含む。不正データは、アテンダント端末１４を介して入力されたコメントを含む場合もある。

表示制御装置１３は、各セルフＰＯＳ端末１１から出力されるデータ信号等を基に、セルフＰＯＳ端末１１毎に監視画像を作成して、アテンダント端末１４の表示デバイスに表示させるコントローラである。アテンダント端末１４は、アテンダントと称される店員が、監視画像を基に各セルフＰＯＳ端末１１の状態を監視するための端末である。アテンダント端末１４と監視画像の詳細については後述する。

不正行為監視システム２００は、複数のカメラ２１と、画像記憶装置２２と、動画再生装置２３と、不正監視装置２４とを備える。また不正行為監視システム２００は、アテンダント端末１４を利用する。

複数のカメラ２１は、それぞれ複数のセルフＰＯＳ端末１１と１対１で対応している。カメラ２１は、対応するセルフＰＯＳ端末１１を操作する操作者を撮影するためのものである。カメラ２１で撮影された撮影データは、操作者の動作を表す動画データである。従ってカメラ２１としては、例えば動画撮影の機能を備えたビデオカメラが用いられる。カメラ２１は、撮影デバイスの一例である。

画像記憶装置２２は、内蔵する記憶デバイスに、各カメラ２１から出力される撮影データを、各カメラ２１が対応するセルフＰＯＳ端末１１のレジ番号と関連付けて記憶する。画像記憶装置２２としては、ＳＳＤ（Solid State Drive）又はＨＤＤ（Hard Disc Drive）などの大容量の記憶装置を単独又は組み合わせて用いることができる。

動画再生装置２３は、画像記憶装置２２により記憶されている撮影データに基づく動画を再生する装置である。動画再生装置２３によって再生された動画は、表示制御装置１３の制御によりアテンダント端末１４において表示される。

不正監視装置２４は、複数のセルフＰＯＳ端末１１と、表示制御装置１３と、アテンダント端末１４と、画像記憶装置２２と、動画再生装置２３と、を接続する。不正監視装置２４は、セルフＰＯＳ端末１１を操作する操作者を監視し、不正行為が認識されるとアテンダント端末１４を介して店員に報知して不正行為の検証を促す装置である。また、不正監視装置２４は、不正行為の検証が済んでいないセルフＰＯＳ端末１１での決済処理を禁止する装置でもある。

図２は、不正監視装置２４の主要な機能構成を示すブロック図である。不正監視装置２４は、行動認識部３０１、操作認識部３０２、不正検出部３０３、チャプタ処理部３０４、報知部３０５、操作受付部３０６、検証処理部３０７、保存部３０８、検索部３０９及び決済制御部３１０としての機能を有する。

行動認識部３０１は、画像記憶装置２２により記憶されている撮影データを基に、セルフＰＯＳ端末１１に対する客の行動を認識する機能である。操作認識部３０２は、各セルフＰＯＳ端末１１から表示制御装置１３へと入力されるデータ信号を基に、セルフＰＯＳ端末１１に対する客の操作を認識する機能である。不正検出部３０３は、行動認識部３０１による認識結果と操作認識部３０２による認識結果とを基に、セルフＰＯＳ端末１１を操作する客の不正な行動、いわゆる不正行為を検出する機能である。ここに、行動認識部３０１、操作認識部３０２及び不正検出部３０３は、セルフＰＯＳ端末１１に対する操作者の不正を検出する不正検出手段を構成する。

チャプタ処理部３０４は、不正検出部３０３によりセルフＰＯＳ端末１１に対する不正行為が検出された時点において、そのセルフＰＯＳ端末１１に対応したカメラ２１で撮影されている操作者の撮影データにチャプタ（区切り）を付与する機能である。チャプタは、不正行為が検出された時点の動画の撮影時刻に相当する部分に付与される。不正監視装置２４は、チャプタが付与された撮影時刻の例えば前後１０秒間の計２０秒の動画を、不正行為検証用の動画としてアテンダント端末１４に表示させることができる。ここに、チャプタ処理部３０４は、不正検出部３０３により検出された不正行為の行動が映っている撮影データの範囲を識別可能とするチャプタを記録する記録手段を構成する。

報知部３０５は、不正検出部３０３により不正行為が検出された場合にアテンダント端末１４を介して店員に報知する機能である。この報知により不正行為が検出されたことを確認した店員は、その不正行為に係る検証用の動画を見て、不正行為が本当にあったのか否かを検証する。ここに、報知部３０５は、不正検出部３０３により不正行為が検出されたことを報知する報知手段を構成する。

操作受付部３０６は、アテンダント端末１４に対する店員の操作入力を受け付ける機能である。例えば店員は、不正行為が検出された場合にその不正行為の検証を指示するための操作入力をアテンダント端末１４に対して行う。そして、アテンダント端末１４に表示される検証用の動画等により不正行為を検証した店員は、その検証結果を不正監視装置２４に通知するための操作入力をアテンダント端末１４に対して行う。ここに、操作受付部３０６は、不正に対して検証済の指示を受け付ける受付手段を構成する。

検証処理部３０７は、操作受付部３０６で受け付けた操作入力に従い、不正行為の検証に係る種々の処理を行う機能である。例えば検証処理部３０７は、不正行為の検証を指示するための操作入力を受け付けると、画像記憶装置２２に記憶されている撮影データに基づき不正行為検証用の動画をアテンダント端末１４で再生させるための処理を行う。

例えば検証処理部３０７は、不正行為の検証結果を示す操作入力を受け付けると、チャプタ処理部３０４及び報知部３０５に検証済を通知するための処理を行う。この通知を受けて、チャプタ処理部３０４は、撮影データの不正行為検出箇所に付与されたチャプタを取り除く。報知部３０５は、不正行為の検証が済んだことを店員に報知する。

例えば検証処理部３０７は、不正行為の検証結果が不正有を示す操作入力を受け付けると、不正データを作成するための処理を行う。不正データは、前述したように、セルフＰＯＳ端末１１の操作者が会員である場合にその会員を識別するための会員ＩＤを含む。保存部３０８は、検証処理部３０７で作成された不正データを不正データベース１２２に保存する機能である。ここに、検証処理部３０７及び保存部３０８は、受付手段により不正有りの指示を受け付けた操作者に関する情報を保存する保存手段を構成する。

検索部３０９は、会員ＩＤを検索用のキーとして会員データベース１２１及び不正データベース１２２を検索し、検出した会員データ及び不正データを検証処理部３０７に与える機能である。検証処理部３０７は、検索部３０９から与えられた会員データと不正データとにより不正行為の検証に必要な会員情報をアテンダント端末１４に出力するための情報処理を行う。会員情報は、会員の来店回数とその会員の不正データ件数とを含む。ここに、検索部３０９及び検証処理部３０７は、保存手段により保存された操作者の情報を出力する出力手段を構成する。

検証処理部３０７は、セルフＰＯＳ端末１１から表示制御装置１３に出力されるデータ信号により、そのセルフＰＯＳ端末１１において決済に移行するための操作入力が行われたことを検知すると、そのセルフＰＯＳ端末１１で検出された不正行為の検証作業が残っているか否かを確認する。具体的には、検証処理部３０７は、そのセルフＰＯＳ端末１１のレジ番号と関連付けて画像記憶装置２２に記憶されている撮影データにチャプタが付与されている場合、不正行為の検証作業が残っていると判定する。同撮影データにチャプタが付与されていない場合には、検証処理部３０７は、不正行為の検証作業が残っていないと判定する。決済制御部３１０は、検証処理部３０７において不正行為の検証作業が残っていないと判定されたセルフＰＯＳ端末１１においての決済処理を許容する。決済制御部３１０は、検証処理部３０７において不正行為の検証作業が残っていると判定されたセルフＰＯＳ端末１１においての決済処理を禁止する。ここに、検証処理部３０７及び決済制御部３１０は、検証済の指示を受け付けていない不正が残っているセルフＰＯＳ端末１１の決済処理を禁止する禁止手段を構成する。

［セルフＰＯＳ端末とカメラとの位置関係の説明］
図３は、セルフＰＯＳ端末１１とカメラ２１との位置関係を説明するための図である。始めに、セルフＰＯＳ端末１１の外観構成について説明する。

セルフＰＯＳ端末１１は、床面に設置された本体４０と、この本体４０の脇に設置された袋詰め台５０とを備える。本体４０は、その上部にタッチパネル４１を取り付けている。タッチパネル４１は、ディスプレイとタッチセンサとで構成される。タッチパネル４１は、表示部の一例である。ディスプレイは、セルフＰＯＳ端末１１を操作する操作者に対して種々の画面を表示するためのデバイスである。タッチセンサは、操作者による画面へのタッチ入力を検知するためのデバイスである。セルフＰＯＳ端末１１において操作者は、通常は客である。

本体４０は、袋詰め台５０が設置された側とは反対側の側面中央部に籠台６０を設けている。籠台６０は、売場から来た客が買上商品を入れた籠等を置くためのものである。客は、タッチパネル４１の画面が見えるように、図２において本体４０の手前側に立って作業を行う。このため客から見ると、本体４０を挟んで右側に籠台６０があり、左側に袋詰め台５０がある。本実施形態では、客が立つ側を本体４０の正面とし、袋詰め台５０が設置されている側を本体４０の左側とし、籠台６０が設けられている側を本体４０の右側とする。

本体４０は、その内部にスキャナ、カードリーダ、レシートプリンタ、現金処理機等を備える。そして本体４０の正面に、スキャナの読取窓４２、カード挿入口４３、レシート発行口４４、硬貨投入口４５、硬貨払出口４６、紙幣投入口４７及び紙幣払出口４８を形成する。また、本体４０の右側面から外部へと通信ケーブルが延びており、この通信ケーブルの先端にハンディスキャナ６１が接続されている。また、図示しないが、電子マネー媒体用のリーダ・ライタも本体４０に備えられている。

本体４０は、その上面に表示ポール６４を取り付けている。表示ポール６４は、その先端部に発光部６５を備える。発光部６５は、例えば青色と赤色とを選択的に発光する。表示ポール６４は、発光部６５の発光色によってセルフＰＯＳ端末１１の状態、例えば待機中、動作中、呼出中、エラー中、不正行為発生中等を表示する。表示ポール６４は、発光部６５の点滅によってセルフＰＯＳ端末１１の状態を表示してもよい。

袋詰め台５０は、その上部に袋保持具５２を取り付けた構造となっている。袋保持具５２は、一対の保持アーム５３を備えており、この保持アーム５３で店舗備え付けのレジ袋又は客が持参した買物袋いわゆるマイバッグ等を保持する。

次に、セルフＰＯＳ端末１１とカメラ２１との位置関係を説明する。
図３に示すように、カメラ２１は、セルフＰＯＳ端末１１の正面に立って、本体４０、袋詰め台５０及び籠台６０等の部品と対峙する客を上方から撮影可能な位置に設置されている。

セルフＰＯＳ端末１１の正面に立った客は、先ず、向かって右側の籠台６０に買上商品を入れた籠等を書き、左側の保持アーム５３にレジ袋又はマイバッグ等を保持させる。次いで、客は、タッチパネル４１に表示されるガイダンスに従い、タッチパネル４１を操作して、セルフＰＯＳ端末１１の利用開始を宣言する。

その後、客は、籠台６０に置かれた籠から買上商品を１点ずつ手に取る。そして、その買上商品にバーコードが付されている場合には、客は、そのバーコードを読取窓４２に翳してスキャナで読み取らせることで、商品登録を行う。買上商品にバーコードが付されていない場合には、客は、タッチパネル４１を操作してバーコード無し商品のリストから買上商品を選択することで、商品登録を行う。客は、登録を終えた買上商品をレジ袋又はマイバッグ等に入れる。

全ての買上商品を登録し終えた客は、タッチパネル４１を操作して、買上商品の決済を宣言し、決済方法を選択する。例えば現金決済を選択した場合には、客は、紙幣投入口４７又は硬貨投入口４５に紙幣又は硬貨を投入し、紙幣払出口４８又は硬貨払出口４６から払い出された釣銭を取り出す。例えば電子マネー決済を選択したならば、客は、リーダ・ライタに電子マネー媒体を翳す。例えばクレジットカード決済を選択したならば、客は、カード挿入口４３にクレジットカードを挿入する。こうして、決済を終えたならば、客は、レシート発行口４４から発行されるレシートを受け取り、保持アーム５３から外したレジ袋又はマイバッグを持って退店する。

カメラ２１は、セルフＰＯＳ端末１１の正面で上記の如く行動する客の手の動きを撮影可能な位置に設置されている。

［アテンダント端末と監視画像の説明］
図４は、アテンダント端末１４の概略構成を示す模式図である。アテンダント端末１４は、タッチパネル式のディスプレイ１４１とテキスト入力用のキーボード１４２とを備える。ディスプレイ１４１の画面は、複数（図４では４つ）の監視画像領域ＡＲａと、動画検証領域ＡＲｂと、テキスト領域ＡＲｃとを有する。また、動画検証領域ＡＲｂとテキスト領域ＡＲｃとの間に、不正無ボタンＴＢａ、不正有ボタンＴＢｂ、及び、コメントボタンＴＢｃが配置されている。

動画検証領域ＡＲｂは、不正行為検証用の動画が再生される領域である。不正無ボタンＴＢａは、アテンダント端末１４の操作者である店員が、動画検証領域ＡＲｂで再生される動画等から不正行為無しと認定した場合にタッチするためのボタン画像である。不正有ボタンＴＢｂは、店員が動画検証領域ＡＲｂで再生される動画等から不正行為有りと認定した場合にタッチするためのボタン画像である。コメントボタンＴＢｃは、店員がコメント入力を必要とする場合にタッチするボタン画像である。コメントボタンＴＢｃにタッチすることで、店員は、キーボード１４２からコメントとなるテキストを入力することができる。入力されたテキストは、テキスト領域ＡＲｃに表示される。また、テキスト領域ＡＲｃには、前述した会員情報も表示される。

複数の監視画像領域ＡＲａは、それぞれ１つのセルフＰＯＳ端末１１に対応している。したがって図４においては、４台のセルフＰＯＳ端末１１にそれぞれ対応した監視画像領域ＡＲａを表示した例を示している。例えばアテンダント端末１４が６台のセルフＰＯＳ端末１１に対応している場合、６つの監視画像領域ＡＴａがディスプレイ１４１に表示される。

監視画像領域ＡＲａは、図５に示すように、登録明細領域ＡＲａａと動画再生領域ＡＲａｂと進行状況バー領域ＡＲａｃとに区分される。登録明細領域ＡＲａａは、対応するセルフＰＯＳ端末１１において登録された買上商品の商品名、点数、金額、合計金額等を表示するための領域である。動画再生領域ＡＲａｂは、対応するセルフＰＯＳ端末１１に対して設けられたカメラ２１で撮影される動画を再生するための領域である。進行状況バー領域ＡＲａｃは、動画再生領域ＡＲａｂで再生される動画の進行状況を示すバーを表示するための領域である。

監視画像領域ＡＲａに表示される画像は、表示制御装置１３によって制御される。すなわち、登録明細領域ＡＲａａに対しては、セルフＰＯＳ端末１１から表示制御装置１３へと出力されるデータ信号を基に買上商品の情報が表示される。動画再生領域ＡＲａｂに対しては、動画再生装置２３から表示制御装置１３へと出力される撮影データを基にセルフＰＯＳ端末１１を操作する操作者の動画が再生される。

［不正監視装置の構成説明］
図６は、不正監視装置２４の要部回路構成を示すブロック図である。不正監視装置２４は、プロセッサ３１、メインメモリ３２、補助記憶デバイス３３、時計３４、ネットワークインターフェース３５、通信インターフェース３６及びシステム伝送路３７を備える。システム伝送路３７は、アドレスバス、データバス等を含む。不正監視装置２４は、プロセッサ３１と、メインメモリ３２、補助記憶デバイス３３、時計３４、ネットワークインターフェース３５及び通信インターフェース３６とを、システム伝送路３７で接続することにより、コンピュータを構成する。

プロセッサ３１は、上記コンピュータの中枢部分に相当する。プロセッサ３１は、オペレーティングシステム又はアプリケーションプログラムに従って、不正監視装置２４としての各種の機能を実現するべく各部を制御する。プロセッサ３１は、例えばＣＰＵ（Central Processing Unit）である。

メインメモリ３２は、上記コンピュータの主記憶部分に相当する。メインメモリ３２は、不揮発性のメモリ領域及び揮発性のメモリ領域を含む。メインメモリ３２は、不揮発性のメモリ領域ではオペレーティングシステム又はアプリケーションプログラムを記憶する。メインメモリ３２は、揮発性のメモリ領域では、プロセッサ３１が各部を制御するための処理を実行する上で必要なデータを記憶する。この種のデータは、不揮発性のメモリ領域で記憶される場合もある。メインメモリ３２は、揮発性のメモリ領域を、プロセッサ３１によってデータが適宜書き換えられるワークエリアとして使用する。不揮発性のメモリ領域は、例えばＲＯＭ（Read Only Memory）である。揮発性のメモリ領域は、例えばＲＡＭ（Random Access Memory）である。

補助記憶デバイス３３は、上記コンピュータの補助記憶部分に相当する。補助記憶デバイス３３としては、例えばＳＳＤ（Solid State Drive）、ＨＤＤ（Hard Disc Drive）又はＥＥＰＲＯＭ（Electric Erasable Programmable Read-Only Memory）等の周知の記憶デバイスを単独で、あるいは複数組み合わせて用いられる。補助記憶デバイス３３は、プロセッサ３１が各種の処理を行う上で使用するデータ、プロセッサ３１での処理によって生成されたデータ等を保存する。補助記憶デバイス３３は、アプリケーションプログラムを記憶する場合もある。

時計３４は、不正監視装置２４の時刻情報源として機能する。プロセッサ３１は、時計３４によって計時される時刻情報を基に、現在の日付及び時刻を取得する。

ネットワークインターフェース３５は、通信ネットワーク１５を介してＰＯＳサーバ１２等とデータ通信を行うためのインターフェースである。不正監視装置２４は、ネットワークインターフェース３５を介してＰＯＳサーバ１２とデータ通信を行い、ＰＯＳサーバ１２によって管理されている会員データベース１２１及び不正データベース１２２にアクセスすることができる。

通信インターフェース３６は、各セルフＰＯＳ端末１１、表示制御装置１３、アテンダント端末１４、画像記憶装置２２及び動画再生装置２３の各部と通信するためのインターフェースである。

かかる構成の不正監視装置２４において、プロセッサ３１は、前述した行動認識部３０１、操作認識部３０２、不正検出部３０３、チャプタ処理部３０４、報知部３０５、操作受付部３０６、検証処理部３０７、検索部３０９、保存部３０８及び決済制御部３１０としての機能を実現するために、不正監視モード３１１及び不正検証モード３１２の各動作モードを有する。これらの動作モードは、メインメモリ３２又は補助記憶デバイス３３に記憶されるアプリケーションプログラムの一種である制御プログラムに従ったものである。

制御プログラムをメインメモリ３２又は補助記憶デバイス３３にインストールする方法は特に限定されない。リムーバブルな記録媒体に制御プログラムを記録して、あるいはネットワークを介した通信により制御プログラムを配信して、メインメモリ３２又は補助記憶デバイス３３にインストールすることができる。記録媒体は、ＣＤ－ＲＯＭ、メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。

［不正監視モードの動作説明］
図７は、１台のセルフＰＯＳ端末１１に対するプロセッサ３１の不正監視モードに係る情報処理の要部手順を示す流れ図である。プロセッサ３１は、他のセルフＰＯＳ端末１１に対しても同様な手順で不正監視モードに係る情報処理を並列的に実行することができる。

プロセッサ３１は、待機中の状態にあるセルフＰＯＳ端末１１に対して、図７の流れ図に示す手順の情報処理を開始する。プロセッサ３１は、ＡＣＴ１としてそのセルフＰＯＳ端末１１において買上商品の登録開始操作が行われるのを待ち受ける。

待機中の状態にあるセルフＰＯＳ端末１１のタッチパネル４１には、スタートキーを含む初期画面が表示されている。売場での買い物を終えた客は、空いているセルフＰＯＳ端末１１の正面へと移動し、買上商品を入れた籠等を籠台６０に置く。そして客は、初期画面のスタートキーにタッチする。スタートキーがタッチされると、セルフＰＯＳ端末１１から表示制御装置１３に登録開始信号が出力される。通信インターフェース３６を介して表示制御装置１３から登録開始信号が不正監視装置２４に入力されると、プロセッサ３１は、ＡＣＴ１においてＹＥＳと判定し、ＡＣＴ２へと進む。プロセッサ３１は、ＡＣＴ２として会員登録が行われるか否かを確認する。

会員である客は、会員カードのデータをセルフＰＯＳ端末１１のカードリーダで読み取らせる。あるいは客は、スマートフォン等の表示デバイスに表示される会員ＩＤを示すバーコード又は二次元コードをセルフＰＯＳ端末１１のスキャナで読み取らせる。会員がいずれかの操作を行うことにより、セルフＰＯＳ端末１１から表示制御装置１３に会員ＩＤを含むデータ信号が出力される。通信インターフェース３６を介して表示制御装置１３から会員ＩＤを含むデータ信号が不正監視装置２４に入力されると、プロセッサ３１は、ＡＣＴ２において会員登録が行われたと認識する。

会員登録が行われた場合、プロセッサ３１は、ＡＣＴ２においてＹＥＳと判定し、ＡＣＴ３へと進む。プロセッサ３１は、ＡＣＴ３として検索部３０９の機能により、会員データベース１２１及び不正データベース１２２を検索する。プロセッサ３１は、会員データベース１２１から、会員ＩＤで識別される会員の会員データを検出する。また、不正データベース１２２に会員ＩＤで識別される会員の不正データがある場合には、プロセッサ３１は、その不正データを検出する。そしてプロセッサ３１は、会員の来店回数とその会員の不正データ件数とを含む会員情報を取得する。プロセッサ３１は、ＡＣＴ４として、対応するセルフＰＯＳ端末１１のレジ番号と関連付けて会員情報をメインメモリ３２に記憶する。
一方、会員登録が行われなかった場合には、プロセッサ３１は、ＡＣＴ３及びＡＣＴ４の処理をスキップする。

プロセッサ３１は、ＡＣＴ５として行動認識部３０１の機能により、セルフＰＯＳ端末１１に対する客の行動を認識する。またプロセッサ３１は、ＡＣＴ６として操作認識部３０２の機能により、セルフＰＯＳ端末１１に対する客の操作を認識する。そしてプロセッサ３１は、ＡＣＴ７として不正検出部３０３の機能により、行動認識結果と操作認識結果とを基に、セルフＰＯＳ端末１１を操作する客の不正行為を検出する。

スタートキーがタッチされたセルフＰＯＳ端末１１においては、タッチパネル４１の画面が初期画面から登録画面へと遷移する。登録画面へと遷移したことを確認した客は、セルフＰＯＳ端末１１に対して買上商品を登録するための操作を行う。具体的には、客は、籠台６０に置いた籠等から１品目の買上商品を取り出す。そして、その買上商品にバーコードが付されている場合には、客は、そのバーコードをスキャナの読取窓４２に翳す。バーコードが付されていない場合には、客は、タッチパネル４１の画面に表示されるバーコード無し商品のリストから買上商品を選択する。読取窓４２に翳されたバーコードがスキャナで正しく読み取られるか、バーコード無し商品のリストから買上商品が選択されると、セルフＰＯＳ端末１１から表示制御装置１３に対してその買上商品の商品名、点数、金額等を含む登録商品データが出力されて、アテンダント端末１４の監視画像領域ＡＲａにおける登録明細領域ＡＲａａ表示される。こうして、１品目の買上商品の登録を終えた客は、その買上商品を袋詰め台５０に用意したレジ袋又はマイバッグ等に入れる。そして客は、２品目の買上商品の登録操作へと移行する。

このような買上商品の登録操作に対し、不正監視装置２４の行動認識部３０１においては、客が籠台６０から買上商品を取り出す取り出し動作と、客が買上商品をレジ袋又はマイバッグ等に入れる袋詰め動作とを認識する。また、操作認識部３０２においては、セルフＰＯＳ端末１１から表示制御装置１３へと出力された登録商品データを検出することにより、買上商品の登録操作を認識する。不正検出部３０３においては、取り出し動作と袋詰め動作との間に買上商品の登録操作を認識し得なかった場合、不正行為を検出する。すなわち、客が籠台６０から取り出した商品をセルフＰＯＳ端末１１に登録しないで袋詰めした場合に、不正監視装置２４は不正行為を検出する。

ＡＣＴ７の処理を終えたプロセッサ３１は、ＡＣＴ８として不正行為を検出したか否かを判定する。不正行為を検出していない場合、プロセッサ３１は、ＡＣＴ８においてＮＯと判定し、ＡＣＴ１１へと進む。

不正行為を検出した場合には、プロセッサ３１は、ＡＣＴ８においてＹＥＳと判定し、ＡＣＴ９へと進む。プロセッサ３１は、ＡＣＴ９としてチャプタ処理部３０４の機能により、不正行為が検出された時点の撮影データにチャプタを付与する。

撮影データは、カメラ２１に対応するセルフＰＯＳ端末１１のレジ番号と関連付けて画像記憶装置２２に記憶されている。そして、この撮影データに基づく動画は、レジ番号で識別されるセルフＰＯＳ端末１１に対応した監視画像領域ＡＲａの動画再生領域ＡＲａｂで再生されている。プロセッサ３１は、不正行為が検出された時点において動画再生領域ＡＲａｂで再生されている動画に対応した撮影データにチャプタを付与する。またプロセッサ３１は、ＡＣＴ１０として報知部３０５の機能により、不正行為を検出したことをアテンダント端末１４から報知する。その後、プロセッサ３１は、ＡＣＴ１１へと進む。

図９は、不正行為が検出されたセルフＰＯＳ端末１１に対する監視画像領域ＡＲａの動画再生領域ＡＲａｂと進行状況バー領域ＡＲａｃとを示す模式図である。進行状況バー領域ＡＲａｃには、動画再生領域ＡＲａｂで再生される動画の進行状況を示すバーが表示される。バーは、動画再生時間の経過とともに図９において左端から右端へと延伸していく。そして、撮影データにチャプタが付与されると、その時点でバーにチャプタマークＣＨａ、ＣＨｂ，ＣＨｃが表示される。図９においては、先ず、チャプタマークＣＨａが表示された第１の時点で１回目の不正行為が検出され、チャプタマークＣＨｂが表示された第２の時点で２回目の不正行為が検出され、チャプタマークＣＨｃが表示された第３の時点で３回目の不正行為が検出された場合を示している。このように、チャプタマークＣＨａ、ＣＨｂ，ＣＨｃの表示によって、不正行為が検出されたことが店員に報知される。

因みに、チャプタマークＣＨａ、ＣＨｂ，ＣＨｃは、第１の色、例えば赤色で表示されている。後述する不正検証モードの処理において検証され、不正無しと確認されてチャプタが取り除かれると、チャプタマークＣＨａ、ＣＨｂ，ＣＨｃは、第２の色、例えば青色で表示される。

図１０は、チャプタマークＣＨａに対応した不正行為とチャプタマークＣＨｂに対応した不正行為とについて検証が終わって不正無しと判定されたが、チャプタマークＣＨｃに対応した不正行為については、検証が終わっていないか、不正有りと判定された場合を示している。このように、チャプタマークＣＨａ、ＣＨｂ，ＣＨｃの色によって、不正行為が検出されたか否か、またその不正行為に対する検証が済んでいるか否かを、店員は知ることができる。なお、チャプタマークＣＨａ、ＣＨｂ，ＣＨｃの色の違いではなく、形状、点灯と点滅等の違いにより不正行為に対する検証が済んでいるか否かを店員が認識できるようにしてもよい。

図７の説明に戻る。
ＡＣＴ８において不正行為を検出していない場合、あるいは不正行為を検出したためにＡｃｔ９及びＡＣＴ１０の処理を実行した場合、プロセッサ３１は、ＡＣＴ１１へと進む。プロセッサ３１は、ＡＣＴ１１としてセルフＰＯＳ端末１１において会計を指示するための操作が行われたか否かを確認する。

全ての買上商品の登録操作を終えた客は、登録画面に表示されている支払キーにタッチする。支払キーがタッチされると、セルフＰＯＳ端末１１から表示制御装置１３に会計指令信号が出力される。この会計指令信号を検出したプロセッサ３１は、ＡＣＴ１１においてＹＥＳと判定し、ＡＣＴ１２へと進む。これに対し、会計指令信号を検出していない場合には、プロセッサ３１は、ＡＣＴ１１においてＮＯと判定し、ＡＣＴ２へと戻る。そしてプロセッサ３１は、ＡＣＴ２乃至ＡＣＴ１１の処理を前述したのと同様に実行する。

会計指令信号を検出したプロセッサ３１は、ＡＣＴ１２としてセルフＰＯＳ端末１１の撮影データを検索する。プロセッサ３１は、ＡＣＴ１３として撮影データにチャプタが付与されているか否かを確認する。撮影データにチャプタが付与されている場合、プロセッサ３１は、ＡＣＴ１３においてＹＥＳと判定し、ＡＣＴ１４へと進む。プロセッサ３１は、ＡＣＴ１４として決済制御部３１０の機能により、セルフＰＯＳ端末１１に対して決済禁止信号を出力する。不正監視装置２４から決済禁止信号を受信したセルフＰＯＳ端末１１においては、決済処理が禁止される。

ＡＣＴ１４の処理を終えたプロセッサ３１は、ＡＣＴ１１へと戻る。したがって、撮影データにチャプタが付与されている間は、セルフＰＯＳ端末１１の決済処理が禁止される。

一方、撮影データにチャプタが付与されていない場合には、プロセッサ３１は、ＡＣＴ１３においてＮＯと判定し、ＡＣＴ１５へと進む。プロセッサ３１は、ＡＣＴ１５として決済制御部３１０の機能により、セルフＰＯＳ端末１１に対して決済許諾信号を出力する。不正監視装置２４から決済許諾信号を受信したセルフＰＯＳ端末１１においては、決済処理が可能となる。ＡＣＴ１５の処理を終えると、プロセッサ３１は、図７の流れ図に示す手順の情報処理を終了する。

［不正検証モードの動作説明］
図８は、１台のセルフＰＯＳ端末１１に対するプロセッサ３１の不正検証モードに係る情報処理の要部手順を示す流れ図である。プロセッサ３１は、他のセルフＰＯＳ端末１１に対しても同様な手順で不正検証モードに係る情報処理を並列的に実行することができる。

プロセッサ３１は、不正行為が検出されたセルフＰＯＳ端末１１に対して、図８の流れ図に示す手順の情報処理を開始する。プロセッサ３１は、ＡＣＴ２１としてチャプタマークが選択操作されるのを待ち受ける。

アテンダント端末１４の店員は、監視画像領域ＡＲａの進行状況バー領域ＡＲａｃにチャプタマークが表示されたことを確認すると、その監視画像領域ＡＲａに対応したセルフＰＯＳ端末１１に対して不正行為が検出されたと認識する。店員は、不正行為を検証するために、チャプタマークにタッチする選択操作を行う。

プロセッサ３１は、操作受付部３０６の機能により、チャプタマークが選択操作されたことを認識すると、ＡＣＴ２１においてＹＥＳと判定し、ＡＣＴ２２へと進む。プロセッサ３１は、ＡＣＴ２２として検証処理部３０７の機能により、選択操作されたチャプタマークが表示されている監視画像領域ＡＲａに対応するセルフＰＯＳ端末１１のレジ番号を取得する。そしてプロセッサ３１は、ＡＣＴ２３としてそのレジ番号と関連付けて画像記憶装置２２に記憶されている撮影データから不正行為検証用の動画となる撮影データを抽出する。すなわちプロセッサ３１は、選択操作されたチャプタマークに対応するチャプタが付与された撮影時刻の例えば前後１０秒間の撮影データを抽出する。そしてプロセッサ３１は、ＡＣＴ２４としてこの不正行為検証用の動画を動画検証領域ＡＲｂで再生する。

プロセッサ３１は、ＡＣＴ２５としてレジ番号で識別されるセルフＰＯＳ端末１１の操作者が会員であるか否かを確認する。会員である場合、プロセッサ３１は、ＡＣＴ２５においてＹＥＳと判定し、ＡＣＴ２６へと進む。プロセッサ３１は、ＡＣＴ２６として当該会員に対する会員情報をテキスト領域ＡＲｃに表示する。会員情報は、前述した不正監視モードの処理のＡＣＴ４においてメインメモリ３２に記憶されている情報である。会員でない場合には、プロセッサ３１は、ＡＣＴ２６の処理をスキップする。

このように、店員が不正行為を検証するために、チャプタマークにタッチすると、そのチャプタマークに対応するチャプタが付与された撮影時刻の例えば前後１０秒間の動画が、不正行為検証用の動画として動画検証領域ＡＲｂで再生される。この動画は、セルフＰＯＳ端末１１において不正行為が検出された時点の操作者の行動を示す動画である。また操作者が会員である場合、会員情報として例えば来店回数と不正データ件数もテキスト領域ＡＲｃに表示される。

そこで店員は、動画検証領域ＡＲｂで再生される動画を見て、不正行為が実際に行われたか否かを検証する。その際、テキスト領域ＡＲｃに会員情報が表示されている場合には、その会員情報も参考する。例えば、動画からは不正行為が行われたか否かの判断が難しいが、１００回以上来店していて不正データ件数が０件の場合には、操作者は信用性が高い会員であるので、不正はないと認定する。したがって、動画を詳細に検証しなくてもよいので、検証に要する時間を短縮できる。逆に、来店回数が少ない会員、過去に不正があったと認定された会員、あるいは非会員である場合には、動画を詳細に検証する。このとき、不正行為が行われたか否かの判断が難しい場合には、店員は、操作者の元に出向いて確認してもよい。

このような検証の結果、不正行為無しと認定したならば、店員は、不正無ボタンＴＢａにタッチする。不正行為有りと認定したならば、店員は、不正有ボタンＴＢｂを入力する。また、例えば不正行為有り認定した操作者が非会員である場合には、操作者の特徴をコメントとして残したい。その場合には、店員は、コメントボタンＴＢｃにタッチしてキーボード１４２からコメントを入力する。

プロセッサ３１は、ＡＣＴ２７としてコメントボタンＴＢｃが入力されるか、ＡＣＴ２８として不正有ボタンＴＢｂが入力されるか、ＡＣＴ２９として不正無ボタンＴＢａが入力されるのを待ち受ける。この待ち受け状態において、コメントボタンＴＢｃが入力されると、プロセッサ３１は、ＡＣＴ２７においてＹＥＳと判定し、ＡＣＴ３０へと進む。プロセッサ３１は、ＡＣＴ３０としてキーボード１４２のキー操作により入力されたテキストをコメントとして取得する。その後、プロセッサ３１は、不正有ボタンＴＢｂ又は不正無ボタンＴＢａが入力されるのを待ち受ける。

ＡＣＴ２７乃至ＡＣＴ２９の待ち受け状態において、不正有ボタンＴＢｂが入力されると、プロセッサ３１は、ＡＣＴ２８においてＹＥＳと判定し、ＡＣＴ３１へと進む。プロセッサ３１は、ＡＣＴ３１として不正データを作成し、不正データベース１２２に保存する。そしてプロセッサ３１は、選択されたチャプタマークで特定される不正行為に対する不正検証モードの処理を終了する。

ＡＣＴ２７乃至ＡＣＴ２９の待ち受け状態において、不正無ボタンＴＢａが入力されると、プロセッサ３１は、ＡＣＴ２９においてＹＥＳと判定し、ＡＣＴ３２へと進む。プロセッサ３１は、ＡＣＴ３２として選択されたチャプタマークで特定される不正行為を検出したときに付与したチャプタを取り除く。そしてプロセッサ３１は、不正検証モードの処理を終了する。

［不正監視装置の効果説明］
以上、詳述したように、セルフＰＯＳ端末１１が導入された店舗において不正監視装置２４を備えることにより、以下の作用効果を奏し得る。

すなわち、セルフＰＯＳ端末１１の操作に関して不正行為のおそれがある場合には、その不正行為検証用の動画がアテンダント端末１４で再生される。したがって、店員は、この動画を見ることにより、不正行為が実際に行われたか否かを検証することができる。そして、この検証の結果、不正行為がなかったと認定されたセルフＰＯＳ端末１１においては決済処理が許容される。これに対し、不正行為の検証が行われていない場合、あるいは不正行為がなかったと認定されたセルフＰＯＳ端末１１においては決済処理が禁止される。したがって、セルフＰＯＳ端末１１の操作に関して不正行為のおそれがある場合には、決済を行えないようにすることができる。その結果、店員が客の不正行為を見つけ出した場合には、確実にその不正を正すことができる。

［変形例］
前記実施形態では、不正検出部３０３は、行動認識部３０１による認識結果と操作認識部３０２による認識結果とを基に、セルフＰＯＳ端末１１を操作する操作者の不正行為を検出した。不正検出部３０３は、例えば、カメラ２１で撮影された画像から操作者が不審な行動をしたことを検知した場合に不正行為を検出してもよい。また、画像以外の情報を用いて、操作者の不正行為を検出してもよい。

報知部３０５は、不正検出部３０３により不正行為が検出された場合に店員が携帯するスマートフォン、タブレット端末等の情報端末を利用して店員に報知してもよい。

決済制御部３１０は、少なくとも不正無しの指示を受け付けていない不正が残っているセルフＰＯＳ端末１１の決済処理を禁止した。この点に関しては、不正行為の検証さえ終わっていれば、不正の有無に関わらずセルフＰＯＳ端末１１の決済処理を許容してもよい。

前記実施形態では、会員ＩＤを利用して操作者である客を識別する場合を例示した。この点に関しては、例えばカメラ２１で撮影される操作者の顔等の外観特徴データを利用して客を識別してもよい。こうすることにより、非会員であっても客を特定して不正データを残すことができる。

この他、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１１…セルフＰＯＳ端末、１２…ＰＯＳサーバ、１３…表示制御装置、１４…アテンダント端末、１５…通信ネットワーク、２１…カメラ、２２…画像記憶装置２２…動画再生装置、２４…不正監視装置、３１…プロセッサ、３２…メインメモリ、３３…補助記憶デバイス、３４…時計、３５…ネットワークインターフェース、３６…通信インターフェース、３７…システム伝送路、１００…セルフＰＯＳシステム、１２１…会員データベース、１２２…不正データベース、２００…不正行為監視システム、３０１…行動認識部、３０２…操作認識部、３０３…不正検出部、３０４…チャプタ処理部、３０５…報知部、３０６…操作受付部、３０７…検証処理部、３０８…保存部、３０９…検索部、３１０…決済処理部。

Claims (6)

1. 決済端末に対する操作者の不正を検出する不正検出手段と、
   前記不正に対して検証済の指示を受け付ける受付手段と、
   前記検証済の指示を受け付けていない不正が残っている前記決済端末の決済処理を禁止する禁止手段と、
   を具備する不正監視装置。
2. 前記不正検出手段は、前記操作者の行動を撮影する撮影デバイスにより得られた動画に基づいて前記操作者の不正を検出し、
   前記受付手段は、前記操作者の不正が検出された場面の動画を表示デバイスで再生して前記検証済の指示を受け付ける、請求項１記載の不正監視装置。
3. 前記受付手段は、不正有りか不正無しかの指示を受け付け、
   前記禁止手段は、少なくとも不正無しの指示を受け付けていない不正が残っている前記決済端末の決済処理を禁止する、請求項２記載の不正監視装置。
4. 前記受付手段により不正有りの指示を受け付けた操作者に関する情報を保存する保存手段、
   をさらに具備する請求項３記載の不正監視装置。
5. 前記保存手段により保存された前記操作者の情報を出力する出力手段、
   をさらに具備する請求項４記載の不正監視装置。
6. 不正監視装置のコンピュータを、
   決済端末に対する操作者の不正を検出する不正検出手段、
   前記不正に対して検証済の指示を受け付ける受付手段、及び、
   前記検証済の指示を受け付けていない不正が残っている前記決済端末の決済処理を禁止する禁止手段、
   として機能させるためのプログラム。