JP2024047355A - 商品登録装置及びそのプロクラム、監視装置 - Google Patents

Abstract

【課題】買上商品の会計を行う購買者に映像の利用について同意を得る。
【解決手段】商品登録装置は、入力デバイスと、表示デバイスと、登録手段と、確認手段とを備える。入力デバイスは、客自身による操作が可能なものである。表示デバイスは、入力デバイスを操作する購買者に対して情報を表示するものである。登録手段は、入力デバイスを介して入力された商品に係るデータを基に、購買者が購入する商品の情報を登録処理する。確認手段は、入力デバイスを操作する購買者を撮影したカメラの映像を本来の目的以外で活用することの同意を当該購買者に得るための同意確認画面を、当該購買者が購入する商品に係るデータが入力デバイスから入力される前に表示デバイスに表示させて、同意又は不同意を確認する。
【選択図】 図３

Description

本発明の実施形態は、商品登録装置及びそのプロクラムと、商品登録装置の監視装置に関する。

近年、スーパーマーケット等の小売店では、人件費の削減、感染症の感染予防対策等の観点から、セルフＰＯＳ（Point Of Sales）端末が注目されている。セルフＰＯＳ端末は、買上商品の登録から決済までの操作を、購買者である客が自ら行うようにしたフルセルフ対応の商品登録装置である。このため、セルフＰＯＳ端末を操作する購買者の行動をカメラで監視し、映像に映し出された手の動き等から不正行為の有無を監視する監視装置が実用化されている。

このようなカメラ映像を用いた監視装置においては、購買者の不正行為を映像から認識する技術として、ＤＮＮ（Deep Neural Network）、ＣＮＮ（Convolutional Neural Network）、ＲＮＮ（Recurrent Neural Network）等を用いた機械学習が利用されている。機械学習を利用することにより、極めて短時間のうちに不正行為を発見することができる。ただし、機械学習の認識精度を高めるためには、入力データに対して結果を導き出す仕組みの機械学習モデルの精度を高める必要がある。機械学習モデルの精度を高めるためには、カメラで撮影された多くの購買者の映像を利用して機械学習モデルを学習させればよい。

しかしながら、不正行為の発見を本来の目的として撮影された購買者の映像を、機械学習モデルの精度を高めるという本来の目的とは異なる目的で利用するためには、個人情報保護法の観点から、その映像に映し出されている購買者に利用目的を通知して同意を得る必要がある。

国際公開第２０１８－１４２７６４号公報

本発明の実施形態が解決しようとする課題は、買上商品の会計を行う購買者に映像の利用について同意を得ることができる商品登録装置を提供しようとするものである。

一実施形態において、商品登録装置は、入力デバイスと、表示デバイスと、登録手段と、確認手段とを備える。入力デバイスは、客自身による操作が可能なものである。表示デバイスは、入力デバイスを操作する購買者に対して情報を表示するものである。登録手段は、入力デバイスを介して入力された商品に係るデータを基に、購買者が購入する商品の情報を登録処理する。確認手段は、入力デバイスを操作する購買者を撮影したカメラの映像を本来の目的以外で活用することの同意を当該購買者に得るための同意確認画面を、当該購買者が購入する商品に係るデータが入力デバイスから入力される前に表示デバイスに表示させて、同意又は不同意を確認する。

図１は、一実施形態に係る会計システムを示す概略構成図である。 図２は、セルフＰＯＳ端末の外観構成を示す模式図である。 図３は、セルフＰＯＳ端末の要部回路構成を示すブロック図である。 図４は、監視装置の主要な機能構成を示すブロック図である。 図５は、切出情報ファイルに保存される切出データの構造を示す模式図である。 図６は、監視装置の要部回路構成を示すブロック図である。 図７は、セルフＰＯＳ端末のプロセッサが実行する主要な情報処理の手順を示す流れ図である。 図８は、監視装置のプロセッサが実行する主要な情報処理の手順を示す流れ図である。 図９は、監視装置のプロセッサが実行する主要な情報処理の手順を示す流れ図である。 図１０は、セルフＰＯＳ端末のタッチパネルに表示される同意確認画面を示す模式図である。 図１１は、会員データベースに保存される会計レコードのデータ構造を示す模式図である。 図１２は、第２の実施形態において、セルフＰＯＳ端末のプロセッサが実行する情報処理の要部手順を示す流れ図である。 図１３は、第２の実施形態において、セルフＰＯＳ端末のプロセッサが実行する情報処理の要部手順を示す流れ図である。 図１４は、第２の実施形態において、監視装置のプロセッサが実行する情報処理の要部手順を示す流れ図である。 図１５は、セルフＰＯＳ端末のタッチパネルに表示される会員用同意確認画面を示す模式図である。

以下、買上商品の会計を行う購買者に映像の利用について同意を得ることができる商品登録装置と、この商品登録装置を操作する購買者の不正行為の有無を監視する監視装置とを含む会計システムの実施形態について、図面を用いて説明する。

＜第１の実施形態＞
はじめに、第１の実施形態について図１乃至図１０を用いて説明する。
［会計システムの説明］
図１は、一実施形態に係る会計システム１００を示す概略構成図である。会計システム１００は、複数台のセルフＰＯＳ端末１０と、ＰＯＳサーバ２０と、アテンダント端末３０とを含む。会計システム１００は、各セルフＰＯＳ端末１０とＰＯＳサーバ２０とアテンダント端末３０とをＬＡＮ（Local Area Network）等の通信ネットワーク４０で接続する。

複数台のセルフＰＯＳ端末１０は、それぞれ店舗の会計場に設置されており、買物を終えた客、つまりは購買者が操作者となる。商品が陳列された売場において買上商品を買物籠等に入れたりショッピングカートに積んだりして会計場へと移動した購買者は、セルフＰＯＳ端末１０を操作して、買上商品の会計、つまりは買上商品の登録から決済までをセルフで行う。セルフＰＯＳ端末１０は、フルセルフ対応の商品登録装置の一例である。商品登録装置は、商品登録端末、決済装置、決済端末、会計装置、会計端末等と言い換えることができる。

ＰＯＳサーバ２０は、通信ネットワーク４０で接続された各セルフＰＯＳ端末１０及びアテンダント端末３０に対し、会計システム１００に係る様々なサービスを提供する。例えばＰＯＳサーバ２０は、商品データベース２１を管理する。商品データベース２１は、店舗で販売される商品毎に作成される商品レコードの集合体である。商品レコードは、商品コード、商品名、価格等のデータを含む。商品コードは、各商品を個々に識別するために商品毎に設定された一意のコードである。各商品には、当該商品の商品コードを表すバーコードが付されている。商品名及び価格は、商品コードで識別される商品の固有名称及び１点当たりの販売金額である。ＰＯＳサーバ２０は、セルフＰＯＳ端末１０において商品コードが入力されると商品データベース２１を検索して、その商品コードを含む商品レコードの商品名、価格等のデータをセルフＰＯＳ端末１０に提供する。

例えばＰＯＳサーバ２０は、会員データベース２２を管理する。会員データベース２２は、店舗の会員となった客毎に作成される会員レコードの集合体である。会員レコードは、会員コードと会員情報とを含む。会員コードは、各会員を個々に識別するために会員毎に設定された一意のコードである。会員情報は、氏名、性別、入会日、累積ポイント、購買履歴等である。各会員は、自身の会員コードを記録した会員カードを所持している。あるいは各会員は、店舗会員用のアプリケーションソフトウェアをスマートフォンにインストールしている。このアプリケーションソフトウェアを起動すると、会員コードを表すバーコード又は二次元コードがスマートフォンの表示デバイスに表示される。ＰＯＳサーバ２０は、セルフＰＯＳ端末１０において会員コードが入力されると会員データベース２２を検索して、その会員コードを含む会員レコードの会員情報をセルフＰＯＳ端末１０に提供する。

アテンダント端末３０は、会計場の出口近傍に設けられた監視場に設置されている。アテンダント端末３０は、セルフＰＯＳ端末１０毎に登録された買上商品のリスト等を表示デバイスに表示する。またアテンダント端末３０は、セルフＰＯＳ端末１０でエラーが発生した場合にはそのエラー情報を報知する。監視場にいる従業員、いわゆるアテンダントは、アテンダント端末３０において表示され、また報知された情報を基に会計場の監視を行う。なお、図１では、アテンダント端末３０の台数を１台としているが、複数台のアテンダント端末３０が通信ネットワーク４０に接続されていてもよい。また、そのうちの少なくとも一台は、上記の監視場とは異なる場所、例えば、バックオフィスのような同店舗の別フロアやヘルプデスク等に設置してもよい。そのようなセルフＰＯＳ端末１０から遠く離れた場所のアテンダント端末３０も、通信ネットワーク４０経由によりセルフＰＯＳ端末１０からのエラー情報を報知できる。よって、直接セルフＰＯＳ端末１０を確認できない場所に居る従業員であっても、セルフＰＯＳ端末１０を監視することが可能となる。

会計システム１００は、セルフＰＯＳ端末１０毎に、カメラ５０と監視装置６０とを備える。カメラ５０と監視装置６０は、セルフＰＯＳ端末１０を操作する購買者の不正行為を防ぐ防犯目的として、セルフＰＯＳ端末１０の近傍に設けられる。監視装置６０は、セルフＰＯＳ端末１０の外部に設けられてもよいし、内部に設けられてもよい。各監視装置６０は、それぞれセルフＰＯＳ端末１０と、そのセルフＰＯＳ端末１０の近傍に設けられたカメラ５０とを接続する。また各監視装置６０は、アテンダント端末３０と接続する。これらの接続により、各監視装置６０は、セルフＰＯＳ端末１０及びアテンダント端末３０とデータ信号を送受信することができる。また各監視装置６０は、カメラ５０から映像信号を受信することができる。

［セルフＰＯＳ端末の説明］
図２は、セルフＰＯＳ端末１０の外観構成を示す模式図である。セルフＰＯＳ端末１０は、本体１０１と、該本体１０１の左右に配置された第１の商品載置台１０２及び第２の商品載置台１０３とを備える。本体１０１に向かって右側に配置される第１の商品載置台１０２は、購買者である客が登録前の買上商品を載置するための台である。登録前の買上商品は、通常、買物籠に入れられて第１の商品載置台１０２に載置される。登録前の買上商品は、ショッピングカートに積まれた状態で第１の商品載置台１０２の前方又は上方に配置されてもよい。

本体１０１に向かって左側に配置される第２の商品載置台１０３は、購買者が登録後の買上商品を載置するための台である。登録後の買上商品は、第２の商品載置台１０３に置かれた収容体、例えば買物籠、レジ袋またはマイバッグ等に入れられる。登録後の買上商品は、第２の商品載置台１０３に直接置かれてもよい。図２において、第２の商品載置台１０３は、その上部に支柱を介して一時置き台１０４を設けている。一時置き台１０４は、例えば、商品をレジ袋等に入れる前に一時的に載置するための台である。一時置き台１０４には、左右に離間させて２本の保持アーム１０５が設けられている。購買者は、これらの保持アーム１０５を用いて、レジ袋、マイバッグ等を開口した状態で第２の商品載置台１０３の上に置くことが可能である。

このように、第１の商品載置台１０２及び第２の商品載置台１０３は、買上商品を載置する載置部として機能する。なお、第１の商品載置台１０２及び第２の商品載置台１０３の取り付け位置は、左右が逆であってもよい。

本体１０１は、入出力デバイスとしてのタッチパネル１１、カードリーダ１２、プリンタ１３、スキャナ１４、ハンドスキャナ１５、現金処理機１６、パトランプ１７、発光部１８、スピーカ１９、等を備える。

タッチパネル１１は、ディスプレイに文字、記号、画像等からなる表示要素を表示する表示デバイスである。またタッチパネル１１は、ディスプレイに対するタッチ操作位置をセンサで検知し、その位置の表示要素が入力されたものとして処理する入力デバイスでもある。ディスプレイには、決済開始画面、商品登録画面、支払い方法選択画面、決済終了画面等の種々の画面が表示される。決済開始画面は、取引の決済開始を受け付ける画面である。決済開始画面には、取引の決済開始を指令するためのスタートキーが配置される。買上商品の登録を始める購買者は、スタートキーにタッチする。スタートキーがタッチ操作されたことをタッチセンサが検知すると、ディスプレイの画面は、決済開始画面から商品登録画面へと切り替わる。

商品登録画面は、登録された買上商品の商品名、価格、合計金額等の明細情報を表示する画面である。商品登録画面には、登録を終えた買上商品の代金支払いへの移行を指令するための会計キーが配置される。買上商品の登録を終えた購買者は、会計キーにタッチする。会計キーがタッチ操作されたことをタッチセンサが検知すると、ディスプレイの画面は、商品登録画面から支払い方法選択画面へと切り替わる。

支払い方法選択画面は、現金支払い、クレジットカード支払い、電子マネー支払い、コード決済支払い等の支払い方法の選択入力を受け付ける画面である。支払い方法選択画面には、現金支払いを指令するための現金キー、クレジットカード支払いを指令するためのクレジットキー、電子マネー支払いを指令するための電子マネーキー、コード決済支払いを指令するためのコード決済キー等が配置される。購買者は、希望する支払い方法のキーにタッチする。例えば、現金キーがタッチ操作されたことをタッチセンサが検知すると、現金による決済処理が実行される。そして、ディスプレイの画面は、支払い方法選択画面から現金による決済終了画面へと切り替わる。クレジットキーがタッチ操作されたことをタッチセンサが検知すると、クレジットカードによる決済処理が実行される。そして、ディスプレイの画面は、支払い方法選択画面からクレジットカードによる決済終了画面へと切り替わる。電子マネーキーがタッチ操作されたことをタッチセンサが検知すると、電子マネーカードによる決済処理が実行される。そして、ディスプレイの画面は、支払い方法選択画面から電子マネーカードによる決済終了画面へと切り替わる。コード決済キーがタッチ操作されたことをタッチセンサが検知すると、コード決済用のコードによる決済処理が実行される。そして、ディスプレイの画面は、支払い方法選択画面からコード決済による決済終了画面へと切り替わる。

例えば現金による決済終了画面は、取引の合計金額、現金の預かり金額、及び、釣銭額等を表示する画面である。例えば現金による決済処理は、預かり金額から取引の合計金額を減額して釣銭額を算出し、レシートを発行して取引を終了させる処理である。このような現金による決済処理は周知の処理であるので、詳細な説明は省略する。また、クレジットカード、電子マネーカードまたはコード決済による決済処理も周知の処理であるので、ここでの説明は省略する。

カードリーダ１２は、クレジットカード、電子マネーカード、ポイントカード等のカード媒体に記録されたデータを読み取るデバイスである。カード媒体が磁気カードの場合、カードリーダ１２は磁気カードリーダである。カード媒体がＩＣカードの場合、カードリーダ１２は、ＩＣカードリーダである。セルフＰＯＳ端末１０は、カードリーダ１２として磁気カードリーダまたはＩＣカードリーダのいずれか一方を備えていてもよいし、両方を備えていてもよい。カードリーダ１２は、カードへのデータ書込み機能を有したカードリーダ・ライタであってもよい。

プリンタ１３は、レシート用紙に買上レシート、クレジットカード伝票等に係るデータを印刷するデバイスである。プリンタ１３によって種々のデータが印刷されたレシート用紙は、カッタによりカットされて、レシート発行口から発行される。プリンタ１３は、例えばサーマルプリンタまたはドットインパクトプリンタ等によって実現される。

スキャナ１４及びハンドスキャナ１５は、バーコード、二次元コード等の機械可読コードを光で走査して読み取る光学式の入力デバイスである。スキャナ１４は、読取窓（ガラス窓）に翳された機械可読コードを光学的に読み取る。ハンドスキャナ１５は、購買者によって手持ちで操作されるもので、機械可読コードに近接されることによりその機械可読コードを光学的に読み取る。スキャナ１４は、カメラで撮影した画像から機械可読コードを読み取る撮像式の入力デバイスであってもよい。スキャナ１４及びハンドスキャナ１５は、商品等に付された機械可読コードだけでなく、スマートフォン等の端末のディスプレイに表示された機械可読コードを読み取ることもできる。

現金処理機１６は、現金を処理するものである。現金処理機１６は、紙幣投入口１６１、紙幣排出口１６２、硬貨投入口１６３及び硬貨排出口１６４を有する。現金処理機１６は、紙幣投入口１６１に投入された紙幣を処理する。現金処理機１６は、釣銭としての紙幣を紙幣排出口１６２から排出する。現金処理機１６は、硬貨投入口１６３に投入された硬貨を受け入れて処理する。現金処理機１６は、釣銭としての硬貨を硬貨排出口１６４から排出する。

パトランプ１７は、遠くからでも見えるように、鉛直方向に延びたポールの先端に取り付けられている。パトランプ１７は、発光部材と円筒とを含む。発光部材は、円筒の内部に、円筒と同軸に回転可能に取り付けられている。パトランプ１７は、動作すると、発光部材を発光させながら回転させることができる。パトランプ１７は、アラートを表示するためのものである。例えば、パトランプ１７は、商品登録時に発光部材を点灯させることで、購買者やアテンダント端末３０に居る従業員が、商品スキャンが適切に行われているか否かを目視確認できるようにする。

発光部１８は、ポールのパトランプ１７の下段に配置されている。発光部１８も、パトランプ１７と同様に発光部材と円筒を含む。発光部材は、複数の色で選択的に発光可能となっている。あるいは、発光部１８は、互いに異なる発光色の複数の発光部材を備える。発光部１８もパトランプ１７と同様に、アラートを表示するためのものである。

スピーカ１９は、アラートとしての警告音、あるいは、メッセージとしての音声等の音を出力する。

本体１０１の上方部には、撮像装置としてのカメラ５０が取り付けられている。カメラ５０は、セルフＰＯＳ端末１０とそれを操作する購買者とを撮影するものである。図２に示すように、タッチパネル１１のディスプレイ、カードリーダ１２のカード挿入口、プリンタ１３のレシート発行口、スキャナ１４の読取窓及び現金処理機１６の紙幣投入口１６１、紙幣排出口１６２、硬貨投入口１６３及び硬貨排出口１６４は、本体１０１の１つの面（以下、正面とする）に配置されている。このため購買者は、本体１０１の正面と対峙するように立って、セルフＰＯＳ端末１０を操作する。カメラ５０は、セルフＰＯＳ端末１０とその正面に立つ購買者とを上方から撮影する。したがって、購買者の頭部、顔面、両肩、両腕、胸部、腹部等がカメラ５０によって撮影される。また、本体１０１を挟んで左右に配置された第１の商品載置台１０２及び第２の商品載置台１０３を含むセルフＰＯＳ端末１０の上面もカメラ５０によって撮影される。

図３は、セルフＰＯＳ端末１０の要部回路構成を示すブロック図である。セルフＰＯＳ端末１０は、プロセッサ７１、メインメモリ７２、補助記憶デバイス７３、時計７４、第１通信インターフェース７５、第２通信インターフェース７６、複数のデバイスインターフェース７７１～７７６、出力ポート７８及びシステム伝送路７９を備える。システム伝送路７９は、アドレスバス、データバス、制御信号線等を含む。セルフＰＯＳ端末１０は、プロセッサ７１とメインメモリ７２、補助記憶デバイス７３、時計７４、第１通信インターフェース７５、第２通信インターフェース７６、複数のデバイスインターフェース７７１～７７６及び出力ポート７８とをシステム伝送路７９で接続することにより、コンピュータを構成する。そしてセルフＰＯＳ端末１０は、各デバイスインターフェース７７１～７７６に、それぞれタッチパネル７９１、カードリーダ７９２、プリンタ７９３、スキャナ７９４、ハンドスキャナ７９５及び現金処理機７９６の各種デバイスを接続する。またセルフＰＯＳ端末１０は、出力ポート７８に、パトランプ１７、発光部１８及びスピーカ１９を接続する。

プロセッサ７１は、上記コンピュータの中枢部分に相当する。プロセッサ７１は、オペレーティングシステム又はアプリケーションプログラムに従って、セルフＰＯＳ端末１０としての各種の機能を実現するべく各部を制御する。プロセッサ７１は、例えばＣＰＵ（Central Processing Unit）である。

メインメモリ７２は、上記コンピュータの主記憶部分に相当する。メインメモリ７２は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。メインメモリ７２は、不揮発性のメモリ領域ではオペレーティングシステム又はアプリケーションプログラムを記憶する。メインメモリ７２は、プロセッサ７１が各部を制御するための処理を実行する上で必要なデータを不揮発性又は揮発性のメモリ領域で記憶する場合もある。メインメモリ７２は、揮発性のメモリ領域を、プロセッサ７１によってデータが適宜書き換えられるワークエリアとして使用する。不揮発性のメモリ領域は、例えばＲＯＭ（Read Only Memory）である。揮発性のメモリ領域は、例えばＲＡＭ（Random Access Memory）である。

補助記憶デバイス７３は、上記コンピュータの補助記憶部分に相当する。例えばＥＥＰＲＯＭ（Electric Erasable Programmable Read-Only Memory）、ＨＤＤ（Hard Disk Drive）、あるいはＳＳＤ（Solid State Drive）等が補助記憶デバイス７３となり得る。補助記憶デバイス７３は、プロセッサ７１が各種の処理を行う上で使用するデータ、又は、プロセッサ７１での処理によって作成されたデータ等を保存する。補助記憶デバイス７３は、上記のアプリケーションプログラムを記憶する場合もある。

時計７４は、日付と時刻を計時する。プロセッサ７１は、時計７４によって計時されている日付と時刻を現在日時として処理する。

第１通信インターフェース７５は、通信ネットワーク４０を介して接続されるＰＯＳサーバ２０及びアテンダント端末３０とデータ通信を行うための回路である。第２通信インターフェース７６は、監視装置６０とデータ通信を行うための回路である。

デバイスインターフェース７７１は、タッチパネル１１との間でデータ通信を行うための回路である。デバイスインターフェース７７２は、カードリーダ１２との間でデータ通信を行うための回路である。デバイスインターフェース７７３は、プリンタ１３との間でデータ通信を行うための回路である。デバイスインターフェース７７４は、スキャナ１４との間でデータ通信を行うための回路である。デバイスインターフェース７７５は、ハンドスキャナ１５との間でデータ通信を行うための回路である。デバイスインターフェース７７６は、現金処理機１６との間でデータ通信を行うための回路である。

出力ポート７８は、パトランプ１７に対して駆動信号を出力する。この駆動信号に応じて、パトランプ１７は、アラートを表示する。また出力ポート７８は、発光部１８に対して駆動信号を出力する。この駆動信号に応じて、発光部１８は、アラートを表示する。また出力ポート７８は、スピーカ１９に対して駆動信号を出力する。この駆動信号に応じて、スピーカ１９は、アラートとしての警告音、あるいは、メッセージとしての音声等の音を出力する。

かかる構成のセルフＰＯＳ端末１０は、プロセッサ７１が登録手段７１１及び確認手段７１２を有するように、第１プログラムを記憶している。第１プログラムは、メインメモリ７２または補助記憶デバイス７３に記憶されるアプリケーションプログラムの一種である。第１プログラムをメインメモリ７２または補助記憶デバイス７３にインストールする方法は特に限定されるものではない。リムーバブルな記録媒体に第１プログラムを記録して、あるいはネットワークを介した通信により第１プログラムを配信して、メインメモリ７２または補助記憶デバイス７３にインストールすることができる。記録媒体は、ＣＤ－ＲＯＭ，メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。

登録手段７１１は、購買者である客自身による操作が可能な入力デバイスを介して入力された商品に係るデータを基に、購買者が購入する商品の情報を登録処理する手段である。入力デバイスは、スキャナ１４又はハンドスキャナ１５である。入力デバイスは、タッチパネル１１の場合もあり得る。

確認手段７１２は、入力デバイスを操作する購買者を撮影したカメラ５０の映像を本来の目的以外で活用することの同意を当該購買者に得るための同意確認画面ＳＣａ（図１０を参照）を表示デバイスに表示させて、同意又は不同意を確認する手段である。確認手段７１２は、購買者が購入する商品に係るデータが入力デバイスから入力される前に同意確認画面ＳＣａを表示デバイスに表示させる。表示デバイスは、タッチパネル１１である。タッチパネル１１とは別の表示デバイスに同意確認画面ＳＣａを表示させてもよい。

因みに、購買者を撮影したカメラ５０の映像の本来の目的とは、不正行為の発見である。本来の目的以外の活用とは、本実施形態の場合、機械学習モデルの精度を高めるための活用である。このように、カメラ５０の映像を本来の目的以外を目的として活用する場合、個人情報保護法の観点から、その映像に映し出されている購買者に利用目的を通知して同意を得る必要がある。同意確認画面ＳＣａは、購買者に対し、同意するか否かを確認するための画面である。

［監視装置の説明］
監視装置６０は、カメラ５０で撮影される映像等の情報に基づき、セルフＰＯＳ端末１０に対する購買者の不正な行動を監視するための装置である。不正な行動とは、例えば買上商品をセルフＰＯＳ端末１０に登録せずに袋詰めする行動である。不正な行動とは、例えば買上商品の代金を支払わずに会計場から退出する行動である。監視装置６０は、購買者の不正な行動を検出すると、警告を発する。警告は、セルフＰＯＳ端末１０とアテンダント端末３０の両方または一方に対して発せられる。

このように、監視装置６０は、カメラ５０の映像を本来の目的で活用するための装置である。また、その一方で、監視装置６０は、カメラ５０の映像を本来の目的以外の目的で活用するための装置でもある。

図４は、監視装置６０の主要な機能構成を示すブロック図である。図示するように監視装置６０は、映像取込部６１、映像処理部６２、行動認識部６３、状態認識部６４、不正推定部６５、記録部６６及び学習部６７としての機能を有する。また、監視装置６０は、映像ファイル８１、機械学習モデル８２及び切出情報ファイル８３を備えている。

映像取込部６１は、カメラ５０で撮影された映像を時間軸に沿った順序でフレーム毎に取り込む機能である。映像処理部６２は、映像取込部６１を介して取り込んだ映像を行動認識部６３に与えるとともに、映像ファイル８１に書き込む機能である。映像ファイル８１には、カメラ５０で撮影された映像が撮影時刻のデータと関連付けて順次記憶される。映像ファイル８１に保存された映像は、一定期間が経過すると削除される。

行動認識部６３は、カメラ５０で撮影された映像からセルフＰＯＳ端末１０に対する購買者の行動を認識する機能である。具体的には行動認識部６３は、機械学習モデル８２を利用して、購買者の行動を認識する。すなわち行動認識部６３は、カメラ５０で撮影された映像を機械学習モデル８２に入力する。機械学習モデル８２は、ＤＮＮ、ＣＮＮ又はＲＮＮ等の機械学習の手法を利用して映像を解析し、取出し行動、袋詰め行動、退出行動等の購買者の行動を認識する。行動認識部６３は、機械学習モデル８２によって認識された購買者の行動を取得し、不正推定部６５に出力する。

因みに、取出し行動とは、セルフＰＯＳ端末１０の第１の商品載置台１０２から未登録の買上商品を取り出す行動である。袋詰め行動とは、登録済の買上商品をセルフＰＯＳ端末１０の第１の商品載置台１０２にあるレジ袋等に入れる行動である。退出行動は、セルフＰＯＳ端末１０で買上商品の会計を終えた購買者が会計場から退出する行動である。

状態認識部６４は、セルフＰＯＳ端末１０の状態を認識する機能である。セルフＰＯＳ端末１０の状態には、決済開始前の状態、商品登録中の状態、決済処理中の状態、決済終了の状態等がある。決済開始前の状態は、タッチパネル１１に決済開始画面を表示している状態である。すなわち状態認識部６４は、タッチパネル１１に決済開始画面が表示されている間は、セルフＰＯＳ端末１０が決済開始前の状態であると認識する。

決済開始画面のスタートキーがタッチ操作されると、タッチパネル１１の画面が決済開始画面から商品登録画面に切り替わる。そして、例えばスキャナ１４又はハンドスキャナ１５のスキャニング操作により買上商品が登録されると、商品登録画面が更新される。状態認識部６４は、タッチパネル１１の商品登録画面が更新される毎に、セルフＰＯＳ端末１０が商品登録中の状態であると認識する。

商品登録画面の会計キーがタッチ操作されると、タッチパネル１１の画面は、商品登録画面から支払い方法選択画面へと切り替わる。状態認識部６４は、タッチパネル１１の画面が支払い方法選択画面に切り替わると、セルフＰＯＳ端末１０が決済処理中の状態であると認識する。

例えば、支払い方法選択画面の現金キーがタッチ操作され、決済に必要な現金が現金処理機１６に投入されると、タッチパネル１１の画面は、支払い方法選択画面から決済終了画面へと切り替わる。状態認識部６４は、タッチパネル１１の画面が決済終了画面に切り替わると、セルフＰＯＳ端末１０が決済終了の状態であると認識する。

不正推定部６５は、行動認識部６３によって認識された購買者の行動と、状態認識部６４によって認識されたセルフＰＯＳ端末１０の状態とに基づいて、購買者の不正な行動を推定する機能である。例えば不正推定部６５は、行動認識部６３において取出し行動と袋詰め行動とが認識されたにも拘らず、状態認識部６４において商品登録中の状態が認識されなかった場合に、買上商品をセルフＰＯＳ端末１０に登録せずに袋詰めした不正な行動があったと推定する。例えば不正推定部６５は、状態認識部６４において決済終了の状態を認識していないにも拘わらず、行動認識部６３において退出行動が認識された場合には、買上商品の代金を支払わずに会計場から退出する不正な行動があったと推定する。なお、不正な行動の種類及びその推定方法は、上記のものに限定されるものではない。

記録部６６は、状態認識部６４を介して認識したセルフＰＯＳ端末１０の状態を基に、切出情報ファイル８３に切出データ８３１（図５を参照）を記録する機能である。切出データ７３１は、図５に示すように、切出開始日時と切出終了日時と同意フラグと学習フラグとで構成される。

切出開始日時は、セルフＰＯＳ端末１０の状態が決済開始の状態から商品登録中の状態に切り替わった時点の日時である。切出終了日時は、セルフＰＯＳ端末１０の状態が決済処理中の状態から決済終了の状態に切り替わった時点の日時である。同意フラグは、切出開始日時から切出終了日時までの時間内にカメラ５０で撮影された映像を、本来の目的以外で活用することの同意を購買者から得たか否かを識別するための１ビットデータである。本実施形態では、同意を得た場合の同意フラグを“１”とし、同意を得ていない場合の同意フラグを“０”とする。学習フラグは、切出開始日時から切出終了日時までの時間内にカメラ５０で撮影された映像を機械学習モデル８２の学習に用いるか否かを識別するための１ビットデータである。本実施形態では、学習に用いる場合の学習フラグを“１”とし、学習に用いない場合の学習フラグを“０”とする。

学習部６７は、切出情報ファイル８３に記録された切出データに従い映像ファイル８１に記憶された映像を切り出し、その切り出された映像を用いて機械学習モデル８２の学習を実行する機能である。すなわち学習部６７は、切り出された映像を機械学習モデル８２への入力データとし、その入力データに対して期待される購買者の行動を正解ラベルとして組み合わせた学習データを生成して、機械学習モデル８２の学習を実行する。このような学習を大量の学習データを用いて実行することにより、機械学習モデル８２の精度が向上する。

このように、監視装置６０において、映像取込部６１、映像処理部６２、行動認識部６３、状態認識部６４及び不正推定部６５は、カメラ５０の映像を本来の目的で活用するための機能である。記録部６６及び学習部６７は、カメラ５０の映像を本来の目的以外の目的で活用するための機能である。

図６は、監視装置６０の要部回路構成を示すブロック図である。監視装置６０は、プロセッサ９１、メインメモリ９２、補助記憶デバイス９３、時計９４、ＧＰＵ（Graphics Processing Unit）９５、カメラインターフェース９６、第１端末インターフェース９７、第２端末インターフェース９８及びシステム伝送路９９等を備える。システム伝送路９９は、アドレスバス、データバス、制御信号線等を含む。システム伝送路９９は、プロセッサ９１と他の各部とを接続し、相互間で授受されるデータ信号を伝送する。

監視装置６０は、プロセッサ９１と、メインメモリ９２、補助記憶デバイス９３、時計９４、ＧＰＵ９５、カメラインターフェース９６、第１端末インターフェース９７及び第２端末インターフェース９８とをシステム伝送路９９で接続することにより、コンピュータを構成する。

プロセッサ９１、メインメモリ９２、補助記憶デバイス９３及び時計９４の概略説明は、図３を用いて説明したセルフＰＯＳ端末１０のプロセッサ７１、メインメモリ７２、補助記憶デバイス７３及び時計７４と同様である。よって、ここでの説明は省略する。

ＧＰＵ９５は、ＣＰＵ９１が行う演算処理を補助するアクセラレータとして機能する演算装置である。監視装置６０において、ＧＰＵ９５は、主に機械学習モデル８２を利用した映像処理の演算を高速に実行するために使用される。

カメラインターフェース９６は、カメラ５０を接続する。カメラインターフェース９６は、カメラ５０の駆動を制御する制御信号をカメラ５０に対して出力する。カメラ５０は、この制御信号に従って撮影動作を行う。カメラインターフェース９６は、カメラ５０によって撮影された映像データを取り込む。

第１端末インターフェース９７は、セルフＰＯＳ端末１０を接続する。第１端末インターフェース９７は、セルフＰＯＳ端末１０からタッチパネル１１に表示されている画面のデータ等を取り込む。

第２端末インターフェース９８は、アテンダント端末３０を接続する。第２端末インターフェース９８は、アテンダント端末３０にアラート信号等を出力する。

監視装置６０は、上述した回路構成により、映像取込部６１、映像処理部６２、行動認識部６３、状態認識部６４、不正推定部６５、記録部６６及び学習部６７としての機能を実現する。さらに監視装置６０は、プロセッサ９１が第１の日時取得手段９１１、第２の日時取得手段９１２及び記録手段９１３を有するように、第２プログラムを記憶している。第２プログラムは、メインメモリ９２または補助記憶デバイス９３に記憶されるアプリケーションプログラムの一種である。第２プログラムをメインメモリ９２または補助記憶デバイス９３にインストールする方法は特に限定されるものではない。リムーバブルな記録媒体に第２プログラムを記録して、あるいはネットワークを介した通信により第２プログラムを配信して、メインメモリ９２または補助記憶デバイス９３にインストールすることができる。記録媒体は、ＣＤ－ＲＯＭ，メモリカード等のようにプログラムを記憶でき、かつ装置が読み取り可能であれば、その形態は問わない。

第１の日時取得手段９１１は、セルフＰＯＳ端末１０において、確認手段７１２により同意する旨の選択入力を受け付けた時点の日時を取得する手段である。また、第２の日時取得手段９１２は、セルフＰＯＳ端末１０において、登録手段７１１により登録された商品の会計が終了した時点の日時を取得する手段である。このような第１の日時取得手段９１１及び第２の日時取得手段９１２は、状態認識部６４としての機能によって実現される。

記録手段９１３は、第１の日時取得手段９１１により取得した日時をカメラ５０で撮影された映像の切出開始日時とし、第２の日時取得手段９１２により取得した日時をカメラ５０で撮影された映像の切出終了日時として、切出情報ファイル８３に記録する手段である。このような記録手段９１３は、記録部６６としての機能によって実現される。

［会計システムの動作説明］
図７は、セルフＰＯＳ端末１０のプロセッサ７１が第１プログラムに従って実行する主要な情報処理の手順を示す流れ図である。図８及び図９は、監視装置６０のプロセッサ９１が第２プログラムに従って実行する主要な情報処理の手順を示す流れ図である。図１０は、セルフＰＯＳ端末１０のタッチパネル１１に表示される同意確認画面ＳＣａを示す模式図である。次に、各図を用いて会計システム１００を構成するセルフＰＯＳ端末１０及び監視装置６０の主要な動作について説明する。なお、以下に説明する情報処理の手順及び内容は一例である。同様な作用効果を奏し得るのであれば、その手順及び内容は適宜変更することができる。また、同意確認画面ＳＣａも一例である。表示要素の配置又はテキストの内容等を適宜変更可能であることは言うまでもないことである。

（セルフＰＯＳ端末の動作）
セルフＰＯＳ端末１０が購買者による操作を受けていないアイドル状態にあるとき、プロセッサ７１は、ＡＣＴ１としてデバイスインターフェース７７１を介してタッチパネル１１に同意確認画面ＳＣａを表示させる。図１０に示すように同意確認画面ＳＣａには、購買者を撮影したカメラ５０の映像を本来の目的以外で活用することの同意を当該購買者に得るための第１のテキストＴＸａが表示されている。また、［同意する］ボタンＢＴａ及び［同意しない］ボタンＢＴｂのソフトキーが配置されている。［同意する］ボタンＢＴａ及び［同意しない］ボタンＢＴｂは、同意又は不同意の選択入力を受け付ける第１操作子である。同意確認画面ＳＣａは、決済開始画面として機能する。すなわち、［同意する］ボタンＢＴａ及び［同意しない］ボタンＢＴｂのソフトキーは、スタートキーとして機能する。

したがって、売場において買上商品を買物籠等に入れたりショッピングカートに積んだりして会計場へと移動し、空いているセルフＰＯＳ端末１０の正面に立った購買者は、はじめに同意確認画面ＳＣａを確認する。セルフＰＯＳ端末１０に買上商品を登録する購買者は、テキストＴＸａを読み、カメラ５０の映像を本来の目的以外で活用することについて同意する場合には、［同意する］ボタンＢＴａにタッチする。同意しない場合には、購買者は、［同意しない］ボタンＢＴｂにタッチする。セルフＰＯＳ端末１０は、［同意する］ボタンＢＴａ又は［同意しない］ボタンＢＴｂが入力されることによって、商品の登録が可能となる。

同意確認画面ＳＣａを表示させたプロセッサ７１は、ＡＣＴ２として［同意する］ボタンＢＴａがタッチされるか、［同意しない］ボタンＢＴｂがタッチされるのを待ち受ける。デバイスインターフェース７７１を介して［同意する］ボタンＢＴａがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ２からＡＣＴ３へと進む。プロセッサ７１は、ＡＣＴ３として第２通信インターフェース７６を介して監視装置６０に同意通知信号を送信する。

デバイスインターフェース７７１を介して［同意しない］ボタンＢＴｂがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ２からＡＣＴ４へと進む。プロセッサ７１は、ＡＣＴ４として第２通信インターフェース７６を介して監視装置６０に不同意通知信号を送信する。

ＡＣＴ３又はＡＣＴ４において同意通知信号又は不同意通知信号を送信したプロセッサ７１は、ＡＣＴ５へと進む。プロセッサ７１は、ＡＣＴ５としてデバイスインターフェース７７１を介してタッチパネル１１に会員確認画面を表示させる。会員確認画面には、購買者が店舗の会員であるか否かを当該購買者に問い合わせるテキストが表示されている。また、［会員］ボタン及び［非会員］ボタンのソフトキーが配置されている。［会員］ボタン及び［非会員］ボタンは、会員又は非会員の選択入力を受け付ける第２操作子である。会員ではない購買者は、［非会員］ボタンにタッチする。これに対し、会員である購買者は、［会員］ボタンにタッチする。そして購買者は、会員コードをセルフＰＯＳ端末１０に入力する。すなわち、会員カードを所持している購買者は、その会員カードのデータをカードリーダ１２に読み取らせる。店舗会員用のアプリケーションソフトウェアをスマートフォンにインストールしている購買者は、スマートフォンの表示デバイスに表示された会員コードを表すバーコード又は二次元コードをスキャナ１４又はハンドスキャナ１５で読み取らせる。

会員確認画面を表示させたプロセッサ７１は、ＡＣＴ６として［会員］ボタンがタッチされるか、［非会員］ボタンがタッチされるのを待ち受ける。デバイスインターフェース７７１を介して［会員］ボタンがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ６からＡＣＴ７へと進む。プロセッサ７１は、ＡＣＴ７としてデバイスインターフェース７７２を介してカードリーダ１２から会員カードのデータを読み取る。そしてプロセッサ７１は、この会員カードのデータから会員コードを検出する。あるいはプロセッサ７１は、デバイスインターフェース７７４又はデバイスインターフェース７７５を介してスキャナ１４又はハンドスキャナ１５で読み取られたバーコード又は二次元コードのデータを取得する。そしてプロセッサ７１は、このバーコード又は二次元コードのデータから会員コードを検出する。

デバイスインターフェース７７１を介して［非会員］ボタンがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ７の処理をスキップする。

ＡＣＴ７の処理を実行するかスキップすると、プロセッサ７１は、ＡＣＴ８へと進む。なお、会員制度を採用していない店舗の場合には、上述したＡＣＴ５乃至ＡＣＴ７の処理をスキップし、ＡＣＴ３またはＡＣＴ４からＡＣＴ８へと進むようにプログラムを構成すればよい。

プロセッサ７１は、ＡＣＴ８としてデバイスインターフェース７７１を介してタッチパネル１１に商品登録画面を表示させる。商品登録画面は、登録された買上商品の商品名、価格、合計金額等の明細情報を表示する画面である。商品登録画面を確認した購買者は、買上商品の登録操作を開始する。すなわち購買者は、第１の商品載置台１０２に置かれた未登録の買上商品を１品ずつ取り上げる。そして購買者は、その買上商品のバーコードをスキャナ１４の読取窓に翳す。あるいは購買者は、その買上商品のバーコードにハンドスキャナ１５を近接する。このような操作により、買上商品のバーコードが読み取られるので、購買者は、買上商品を第２の商品載置台１０３に用意したレジ袋等に入れる。

商品登録画面を表示させたプロセッサ７１は、ＡＣＴ９として商品コードが入力されるのを待ち受ける。そして、デバイスインターフェース７７４又はデバイスインターフェース７７５を介してスキャナ１４又はハンドスキャナ１５で読み取られたバーコードを取得し、そのバーコードのデータから買上商品の商品コードを検出すると、プロセッサ７１は、ＡＣＴ９からＡＣＴ１０へと進む。プロセッサ７１は、ＡＣＴ１０として買上商品の登録処理を行う。具体的にはプロセッサ７１は、商品データベース２１から買上商品の商品コードを含む商品レコードを取得し、その商品レコードの商品コード、商品名、価格等に基づいて商品販売データを生成する。プロセッサ７１は、商品販売データを取引メモリに登録処理する。取引メモリは、１取引分の買上商品の商品販売データを記憶するためのメインメモリ９２上の領域である。

買上商品の登録処理を終えると、プロセッサ７１は、ＡＣＴ１１へと進む。プロセッサ７１は、ＡＣＴ１１として商品登録画面を更新する。すなわちプロセッサ７１は、買上商品の商品名、価格等を表示させる。またプロセッサ７１は、買上商品の合計点数、合計金額等を最新の値とする。その後、プロセッサ７１は、ＡＣＴ１２と進む。

商品登録画面には、［会計］ボタンのソフトキーが配置されている。［会計］ボタンは、登録を終えた買上商品の代金支払いへの移行を指令するための会計キーの一例である。プロセッサ７１は、［会計］ボタンがタッチされたか否かを確認する。［会計］ボタンがタッチされていない場合、プロセッサ７１は、ＡＣＴ９へと戻る。プロセッサ７１は、次の買上商品の商品コードが入力されるのを待ち受ける。そして、商品コードが入力されると、プロセッサ７１は、ＡＣＴ１０及びＡＣＴ１１の処理を前述したのと同様に実行する。

デバイスインターフェース７７１を介して［会計］ボタンがタッチされたときの信号を入力すると、プロセッサ７１は、ＡＣＴ１２からＡＣＴ１３へと進む。プロセッサ７１は、ＡＣＴ１３として決済処理を実行する。例えば支払い方法として現金支払いが選択された場合、プロセッサ７１は、現金による決済処理を実行する。クレジットカード支払いが選択された場合には、プロセッサ７１は、クレジットカードによる決済処理を実行する。電子マネー支払いが選択された場合には、プロセッサ７１は、電子マネーによる決済処理を実行する。これらの決済処理は周知の処理であるので、ここでの詳細な説明は省略する。

決済処理を終えると、プロセッサ７１は、ＡＣＴ１４へと進む。プロセッサ７１は、ＡＣＴ１４としてデバイスインターフェース７７３を介してプリンタ１３にレシートデータを出力して、取引レシートの発行を制御する。取引レシートを発行し終えると、プロセッサ７１は、ＡＣＴ１５へと進む。プロセッサ７１は、ＡＣＴ１５として第２通信インターフェース７６を介して監視装置６０に利用終了通知信号を送信する。以上でプロセッサ７１は、図７の流れ図に示す手順の情報処理を終了する。プロセッサ７１は、アイドル状態に戻る。したがって、タッチパネル１１の画面は、同意確認画面ＳＣａとなる。

このようにプロセッサ７１は、ＡＣＴ８乃至ＡＣＴ１１の処理として説明したように、登録手段７１１を有している。またプロセッサ７１は、ＡＣＴ１乃至ＡＣＴ４の処理として説明したように、確認手段７１２を有している。そして、確認手段７１２により同意する旨の選択入力を受け付けたプロセッサ７１は、購買者が、カメラ５０の映像を本来の目的以外で活用することに同意した場合には監視装置６０に同意通知信号を出力し（ＡＣＴ３）、同意しない場合には監視装置６０に不同意通知信号を出力する（ＡＣＴ４）。また、登録手段７１１により登録された商品の明細を示す取引レシートが発行されて会計が終了すると、プロセッサ７１は、監視装置６０に利用終了通知信号を出力する（ＡＣＴ１５）。

（監視装置の動作）
監視装置６０は、セルフＰＯＳ端末１０を操作する購買者の行動をカメラ５０で監視し、映像に映し出された手の動き等から不正行為の有無を監視する、というメインの動作以外に、以下の動作１及び動作２を行う。

（動作１）
図８に示すように、監視装置６０のプロセッサ９１は、ＡＣＴ２１としてセルフＰＯＳ端末１０から通知信号を待ち受けている。第１端末インターフェース９７を介して通知信号を受信すると、プロセッサ９１は、ＡＣＴ２１からＡＣＴ２２へと進む。プロセッサ９１は、ＡＣＴ２２として同意通知信号を受信したか否かを確認する。通知信号が同意通知信号でない場合、プロセッサ９１は、ＡＣＴ２２からＡＣＴ２３へと進む。プロセッサ９１は、ＡＣＴ２３として不同意通知信号を受信したか否かを確認する。通知信号が不同意通知信号でない場合、プロセッサ９１は、ＡＣＴ２３からＡＣＴ２４へと進む。プロセッサ９１は、ＡＣＴ２４として利用終了通知信号を受信したか否かを確認する。

セルフＰＯＳ端末１０からの通知信号は、上述した同意通知信号、不同意通知信号及び利用終了通知信号の３種類とは限らない。これら３種類以外の通知信号を受信した場合には、プロセッサ９１は、その通知信号に応じた他の処理を実行する。他の処理の詳細についての説明は省略する。

セルフＰＯＳ端末１０から同意通知信号を受信した場合には、プロセッサ９１は、ＡＣＴ２２からＡＣＴ２５へと進む。プロセッサ９１は、ＡＣＴ２５として時計９４によって計時されている現在の日時を取得する。そしてプロセッサ９１は、ＡＣＴ２６としてその日時を切出開始日時とする。またプロセッサ９１は、ＡＣＴ２７として同意フラグを“１”とする。以上の処理を終えると、プロセッサ９１は、ＡＣＴ２１へと戻り、次の通知信号を受信するのを待ち受ける。

セルフＰＯＳ端末１０から不同意通知信号を受信した場合には、プロセッサ９１は、ＡＣＴ２３からＡＣＴ２８へと進む。プロセッサ９１は、ＡＣＴ２８として時計９４によって計時されている現在の日時を取得する。そしてプロセッサ９１は、ＡＣＴ２９としてその日時を切出開始日時とする。またプロセッサ９１は、ＡＣＴ３０として同意フラグを“０”とする。以上の処理を終えると、プロセッサ９１は、ＡＣＴ２１へと戻り、次の通知信号を受信するのを待ち受ける。

セルフＰＯＳ端末１０から利用終了通知信号を受信した場合には、プロセッサ９１は、ＡＣＴ２４からＡＣＴ３１へと進む。プロセッサ９１は、ＡＣＴ３１として時計９４によって計時されている現在の日時を取得する。そしてプロセッサ９１は、ＡＣＴ３２としてその日時を切出終了日時とする。

プロセッサ９１は、ＡＣＴ３３として同意フラグを調べる。同意フラグが“１”に設定されていた場合、すなわち同意通知信号を受信していた場合には、プロセッサ９１は、ＡＣＴ３３からＡＣＴ３４へと進む。プロセッサ９１は、ＡＣＴ３４として学習フラグを“１”とする。同意フラグが“０”に設定されていた場合、すなわち不同意通知信号を受信していた場合には、プロセッサ９１は、ＡＣＴ３３からＡＣＴ３５へと進む。プロセッサ９１は、ＡＣＴ３５として学習フラグを“０”とする。

ＡＣＴ３４又はＡＣＴ３５の処理を終えると、プロセッサ７１は、ＡＣＴ３６へと進む。プロセッサ９１は、ＡＣＴ３６として切出データ８３１を保存する。すなわちプロセッサ７１は、ＡＣＴ２６又はＡＣＴ２９の処理において得た切出開始日時と、ＡＣＴ３２の処理において得た切出終了日時と、ＡＣＴ２７又はＡＣＴ３０の処理において得た同意フラグと、ＡＣＴ３４又はＡＣＴ３５の処理において得た学習フラグとから、切出データ８３１を作成する。そしてプロセッサ９１は、切出情報ファイル８３に切出データ８３１を保存する。その後、プロセッサ９１は、ＡＣＴ２１へと戻り、次の通知信号を受信するのを待ち受ける。

このようにプロセッサ９１は、ＡＣＴ２５及びＡＣＴ２６の処理として説明したように、第１の日時取得手段９１１を有している。またプロセッサ９１は、ＡＣＴ３１及びＡＣＴ３２の処理として説明したように、第２の日時取得手段９１２を有している。さらにプロセッサ９１は、ＡＣＴ３６の処理として説明したように、記録手段９１３を有している。

すなわちプロセッサ９１は、監視対象のセルフＰＯＳ端末１０において、購買者が決済開始画面として機能する同意確認画面ＳＣａの［同意する］ボタンＢＴａにタッチして、カメラ５０の映像を本来の目的以外で活用することに同意した場合、その時点の日時を切出し開始日時として取得する。またプロセッサ９１は、セルフＰＯＳ端末１０において、当該購買者が買い上げる商品の会計が終了すると、その時点の日時を切出し終了日時として取得する。そしてプロセッサ９１は、その切出開始日時及び切出終了日時を含む切出データ８３１を切出情報ファイル８３に保存する。このときの切出データ８３１に含まれる同意フラグは、同意を示す値“１”になっている。また、学習フラグは、学習に用いることを示す値“１”になっている。

一方、プロセッサ９１は、監視対象のセルフＰＯＳ端末１０において、購買者が決済開始画面として機能する同意確認画面ＳＣａの［同意しない］ボタンＢＴｂにタッチして、カメラ５０の映像を本来の目的以外で活用することに同意しない場合にも、その時点の日時を切出し開始日時として取得する。またプロセッサ９１は、セルフＰＯＳ端末１０において、当該購買者が買い上げる商品の会計が終了すると、その時点の日時を切出し終了日時として取得する。そしてプロセッサ９１は、その切出開始日時及び切出終了日時を含む切出データ８３１を切出情報ファイル８３に保存する。しかし、このときの切出データ８３１に含まれる同意フラグは、不同意を示す値“０”になっている。また、学習フラグは、学習に用いないことを示す値“０”になっている。

（動作２）
監視装置６０は、機械学習モデル８２の学習スケジュールを設定している。例えば毎日の午前６：００になると機械学習モデル８２を学習するというスケジュールが設定されている。このスケジュールに関するデータは、例えば補助記憶デバイス９３に記憶されている。スケジュールに関するデータには、学習期間も設定されている。例えば上述した例のように毎日、機械学習モデル８２を学習する場合、学習期間は過去２４時間とすればよい。あるいは学習期間は、不正が発生しやすい時間帯、例えばレジが混雑する１５：００～１８：００等と設定してもよい。学習期間を短くすることによって、学習に要する装置の負荷は軽減される。その一方で、学習期間が短いと、機械学習モデル８２の精度が上がらない。よって、学習期間をどのように定めるかは任意である。

プロセッサ９１は、ＡＣＴ４１として時計９４によって計時されている現在の日時が学習スケジュールの開始日時になるのを待ち受ける。現在の日時が開始日時になると、プロセッサ９１は、ＡＣＴ４１からＡＣＴ４２へと進む。プロセッサ９１は、ＡＣＴ４２として学習期間を決定する。前述したように、学習期間はスケジュールに関するデータとして設定されているので、プロセッサ９１は、その設定された期間を学習期間として決定する。

学習期間を決定したならば、プロセッサ９１は、ＡＣＴ４３へと進む。プロセッサ９１は、ＡＣＴ４３として切出情報ファイル８３を検索する。例えばプロセッサ９１は、切出情報ファイル８３から切出開始日時が古い順に切出データ８３１を検索する。

プロセッサ９１は、ＡＣＴ４４として検索した切出データ８３１の学習フラグが“１”であるか否かを確認する。学習フラグが“１”でない、つまり“０”の場合には、プロセッサ９１は、ＡＣＴ４４からＡＣＴ５０へと進む。プロセッサ９１は、ＡＣＴ５０として切出情報ファイル８３の検索を終了したか否かを確認する。切出情報ファイル８３の検索を終了していない場合、プロセッサ９１は、ＡＣＴ４３に戻る。プロセッサ９１は、切出情報ファイル８３の検索を継続する。

一方、検索した切出データ８３１の学習フラグが“１”であった場合には、プロセッサ９１は、ＡＣＴ４４からＡＣＴ４５へと進む。プロセッサ９１は、ＡＣＴ４５としてその切出データの切出開始日時又は切出終了日時の日付が学習期間内であるか否を確認する。切出開始日時又は切出終了日時の日付が学習期間内でない場合、プロセッサ９１は、ＡＣＴ４５からＡＣＴ５０へと進む。すなわちプロセッサ９１は、切出情報ファイル８３の検索を終了したか否かを確認する。切出情報ファイル８３の検索を終了していない場合、プロセッサ９１は、切出情報ファイル８３の検索を継続する。

切出開始日時又は切出終了日時の日付が学習期間内である場合には、プロセッサ９１は、ＡＣＴ４５からＡＣＴ４６へと進む。プロセッサ９１は、ＡＣＴ４６として切出データ８３１の学習フラグを“１”から“０”へと書き換える。またプロセッサ９１は、ＡＣＴ４７として切出データ８３１の切出開始日時と切出終了日時とを取得する。そしてプロセッサ９１は、ＡＣＴ４８として切出開始日時から切出終了日時までの時間内にカメラ５０で撮影された映像を映像ファイル８１から切り出す。プロセッサ９１は、ＡＣＴ４９として映像ファイル８１から切り出した映像を機械学習モデル８２の学習データとして記憶する。その後、プロセッサ９１は、ＡＣＴ５０へと進む。すなわちプロセッサ９１は、切出情報ファイル８３の検索を終了したか否かを確認する。切出情報ファイル８３の検索を終了していない場合、プロセッサ９１は、切出情報ファイル８３の検索を継続する。

プロセッサ９１は、切出情報ファイル８３の検索を終了すると、ＡＣＴ５０からＡＣＴ５１へと進む。プロセッサ９１は、ＡＣＴ５１として学習データを記憶しているか否かを確認する。学習データを記憶していない場合、プロセッサ９１は、図９の流れ図に示す手順の情報処理を終了する。

学習データを記憶している場合には、プロセッサ９１は、ＡＣＴ５１からＡＣＴ５２へと進む。プロセッサ９１は、ＡＣＴ５２としてその学習データを利用して機械学習モデル８２の学習を実行する。以上で、プロセッサ９１は、図９の流れ図に示す手順の情報処理を終了する。

このように、プロセッサ９１は、現在の日時が学習スケジュールの開始日時になると、切出情報ファイル８３から、学習フラグが“１”の切出データ８３１を検出する。学習フラグが“１”の切出データ８３１は、同意フラグが“１”、すなわち同意確認画面ＳＣａにおいて［同意する］ボタンＢＴａにタッチした購買者との取引で生成された切出データであり、かつ、機械学習モデル８２の学習に使用されていない切出データである。プロセッサ９１は、学習フラグの切出データ８３１のうち、切出開始日時又は切出終了日時の日付が学習期間に含まれる切出データ８３１をさらに検出する。そしてプロセッサ９１は、その切出データ８３１の切出開始日時から切出終了日時までの時間内にカメラ５０で撮影された映像を利用して、機械学習モデル８２の学習を行う。この映像は、カメラ５０の映像を本来の目的以外で活用することに同意した購買者が映し出されている映像である。

一方、プロセッサ９１は、同意フラグが“０”の切出データ８３１を切出情報ファイル８３から検出することはない。したがって、カメラ５０の映像を本来の目的以外で活用することに同意しなかった購買者が映し出されている映像は、機械学習モデル８２の学習に利用されない。

なお、機械学習モデル８２の学習アルゴリズムについては、周知のアルゴリズムを利用する。したがって、ここでの詳細な説明は省略する。

［会計システムの作用効果］
以上詳述したように本実施形態によれば、セルフＰＯＳ端末１０で買上商品の登録をセルフで行う購買者に対し、その購買者が映し出されている映像を本来の目的以外の目的で利用することについての同意を、店舗の従業員を介することなく得ることができる。しかも、購買者が買上商品の登録を開始する前に同意を得ることができる。したがって、買上商品の登録後に同意を得ようとしたために生じる購買者とのトラブルを未然に防ぐことができる。

一方、監視装置６０においては、セルフＰＯＳ端末１０で同意する旨の選択入力を受け付けた時点の日時を、カメラ５０で撮影された映像の切出開始日時とし、商品の会計が終了した時点の日時を同映像の切出終了日時としている。上述したように、セルフＰＯＳ端末１０で同意を受けるタイミングは、購買者が買上商品の登録を開始する前である。したがって、切出し開示時刻から切出し終了時刻までの期間は、購買者が買上商品の登録を開始してから会計を終えるまでの期間を含むので、同意を得た購買者のセルフＰＯＳ端末１０に対する最初から最後までの操作に係る映像を、機械学習モデル８２の学習に使用することができる。

＜第２の実施形態＞
次に、第２の実施形態について、図１１乃至図１５を用いて説明する。
第２の実施形態も、図１に示す会計システム１００に適用した場合である。以下では、第１の実施形態と異なる部分について説明する。第１の実施形態と共通する部分については同一符号を付して説明を省略する。

［会計システムの説明］
第２の実施形態では、監視装置６０がＰＯＳサーバ２０にアクセスできるようになっている。例えば監視装置６０は、セルフＰＯＳ端末１０を介してＰＯＳサーバ２０にアクセスすることができる。あるいは監視装置６０は、通信ネットワーク４０に接続しており、セルフＰＯＳ端末１０を介することなくＰＯＳサーバ２０にアクセスすることができる。

また、第２の実施形態では、会員データベース２２に記憶される会員レコード２２１のデータ構造が第１の実施形態と異なる。
図１１は、会員レコード２２１のデータ構造を示す模式図である。図示するように、会員レコード２２１は、会員コード及び会員情報に加えて、会員同意フラグと確認不要フラグとを含む。会員同意フラグは、会員コードで識別される会員が、カメラ５０の映像を本来の目的以外で活用することに同意したか否を識別するための１ビットデータである。本実施形態では、同意した会員の会員同意フラグを“１”とし、同意していない会員の会員同意フラグを“０”とする。確認不要フラグは、カメラ５０の映像を本来の目的以外で活用することを同意するかの確認が不要な会員であるか否かを識別するための１ビットデータである。本実施形態では、確認が不要な会員の確認不要フラグを“１”とし、確認が必要な会員の確認不要フラグを“０”とする。

［会計システムの動作説明］
図１２及び図１３は、セルフＰＯＳ端末１０のプロセッサ７１が第１プログラムに従って実行する情報処理の手順のうち、第１の実施形態とは異なる手順を示す流れ図である。図１４は、監視装置６０のプロセッサ９１が第２プログラムに従って実行する情報処理の手順のうち、第１の実施形態とは異なる手順を示す流れ図である。図１５は、セルフＰＯＳ端末１０のタッチパネル１１に表示される会員用同意確認画面ＳＣｂを示す模式図である。次に、各図を用いて会計システム１００を構成するセルフＰＯＳ端末１０及び監視装置６０の第１の実施形態とは異なる動作について説明する。なお、以下に説明する情報処理の手順及び内容は一例である。同様な作用効果を奏し得るのであれば、その手順及び内容は適宜変更することができる。また、会員用同意確認画面ＳＣｂも一例である。表示要素の配置又はテキストの内容等を適宜変更可能であることは言うまでもないことである。

（セルフＰＯＳ端末の動作）
セルフＰＯＳ端末１０が購買者による操作を受けていないアイドル状態にあるとき、プロセッサ７１は、ＡＣＴ６１としてデバイスインターフェース７７１を介してタッチパネル１１に決済開始画面を表示させる。決済開始画面には、［スタート］ボタンのソフトキーが配置されている。このように、アイドル状態にあるとき、第１の実施形態では、決済開始画面の代わりに同意確認画面ＳＣａを表示させたが、第２の実施形態では既存の決済開始画面を表示させる。

したがって、売場において買上商品を買物籠等に入れたりショッピングカートに積んだりして会計場へと移動し、空いているセルフＰＯＳ端末１０の正面に立った購買者は、はじめに決済開始画面を確認する。セルフＰＯＳ端末１０に買上商品を登録する購買者は、［スタート］ボタンにタッチする。

決済開始画面を表示させたプロセッサ７１は、ＡＣＴ６２として［スタート］ボタンがタッチされるのを待ち受ける。デバイスインターフェース７７１を介して［スタート］ボタンがタッチされたときの信号を入力すると、プロセッサ７１は、ＡＣＴ６２からＡＣＴ６３へと進む。プロセッサ７１は、ＡＣＴ６３としてデバイスインターフェース７７１を介してタッチパネル１１に会員確認画面を表示させる。会員確認画面は、第１の実施形態と同様である。すなわち［会員］ボタン及び［非会員］ボタンは、第２操作子である。購買者が会員である場合には、［会員］ボタンにタッチする。購買者が会員でない場合には、［非会員］ボタンにタッチする。

会員確認画面を表示させたプロセッサ７１は、ＡＣＴ６４として［会員］ボタンがタッチされるか、［非会員］ボタンがタッチされるのを待ち受ける。デバイスインターフェース７７１を介して［非会員］ボタンがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ６４からＡＣＴ６５へと進む。プロセッサ７１は、ＡＣＴ６５としてデバイスインターフェース７７１を介してタッチパネル１１に同意確認画面ＳＣａを表示させる。同意確認画面ＳＣａは第１の実施形態と同様である。すなわち［同意する］ボタン及び［同意しない］ボタンは、第１操作子である。カメラ５０の映像を本来の目的以外で活用することについて同意する購買者は、［同意する］ボタンにタッチする。同意しない購買者は、［同意しない］ボタンにタッチする。

同意確認画面ＳＣａを表示させたプロセッサ７１は、ＡＣＴ６６として［同意する］ボタンＢＴａがタッチされるか、［同意しない］ボタンＢＴｂがタッチされるのを待ち受ける。デバイスインターフェース７７１を介して［同意する］ボタンＢＴａがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ６６からＡＣＴ６７へと進む。プロセッサ７１は、ＡＣＴ６７として第２通信インターフェース７６を介して監視装置６０に同意通知信号を送信する。

デバイスインターフェース７７１を介して［同意しない］ボタンＢＴｂがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ６６からＡＣＴ６８へと進む。プロセッサ７１は、ＡＣＴ６８として第２通信インターフェース７６を介して監視装置６０に不同意通知信号を送信する。

ＡＣＴ６７又はＡＣＴ６８において同意通知信号又は不同意通知信号を送信したプロセッサ７１は、ＡＣＴ６９へと進む。プロセッサ７１は、ＡＣＴ６９としてデバイスインターフェース７７１を介してタッチパネル１１に商品登録画面を表示させる。商品登録画面も第１の実施形態と同様である。そして、この商品登録画面を表示させた後のプロセッサ７１の情報処理も第１の実施形態と同様である。したがって、図７のＡＣＴ９乃至ＡＣＴ１５の処理をそのまま第２の実施形態に適用し、その説明は省略する。

一方、会員確認画面において［会員］ボタンがタッチされた場合、すなわちデバイスインターフェース７７１を介して［会員］ボタンがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ６４から図１３のＡＣＴ７１へと進む。プロセッサ７１は、ＡＣＴ７１としてデバイスインターフェース７７２を介してカードリーダ１２から会員カードのデータを読み取る。そしてプロセッサ７１は、この会員カードのデータから会員コードを検出する。あるいはプロセッサ７１は、デバイスインターフェース７７４又はデバイスインターフェース７７５を介してスキャナ１４又はハンドスキャナ１５で読み取られたバーコード又は二次元コードのデータを取得する。そしてプロセッサ７１は、このバーコード又は二次元コードのデータから会員コードを検出する。

こうして、会員コードを取得したプロセッサ７１は、ＡＣＴ７２へと進む。プロセッサ７１は、ＡＣＴ７２としてＰＯＳサーバ２０にアクセスして会員コードを問い合わせる。この問い合わせに応じて、ＰＯＳサーバ２０は会員データベース２２を検索する。そして、当該会員コードを含む会員レコード２２１を検出し得た場合には、ＰＯＳサーバ２０は、その会員レコード２２１のデータを含む肯定応答信号をセルフＰＯＳ端末１０に送信する。当該会員コードを含む会員レコード２２１を検出し得なかった場合には、ＰＯＳサーバ２０は、否定応答信号をセルフＰＯＳ端末１０に送信する。

プロセッサ７１は、ＡＣＴ７３としてＰＯＳサーバ２０からの応答信号を確認する。否定応答信号を受信した場合、プロセッサ７１は、図１２のＡＣＴ６５へと進む。すなわちプロセッサ７１は、タッチパネル１１に同意確認画面ＳＣａを表示させる。以後、プロセッサ７１は、ＡＣＴ６５以降の処理を前述したのと同様に実行する。

これに対し、肯定応答信号を受信した場合には、プロセッサ７１は、ＡＣＴ７４としてその肯定応答信号に含まれる会員データの確認不要フラグを調べる。確認不要フラグが確認必要な会員であることを示す値、すなわち“０”であった場合には、プロセッサ７１は、ＡＣＴ７４からＡＣＴ７５へと進む。プロセッサ７１は、ＡＣＴ７５としてデバイスインターフェース７７１を介してタッチパネル１１に会員用同意確認画面ＳＣｂを表示させる。

図１５に示すように会員用同意確認画面ＳＣｂには、購買者を撮影したカメラ５０の映像を本来の目的以外で活用することの同意を当該購買者に得るための第１のテキストＴＸａと、第２のテキストＴＸｂとが表示されている。また、［同意する］ボタンＢＴａ及び［同意しない］ボタンＢＴｂのソフトキーが配置されている。［同意する］ボタンＢＴａ及び［同意しない］ボタンＢＴｂは、同意又は不同意の選択入力を受け付ける第１操作子である。さらに、［同意する］ボタンＢＴａ及び［同意しない］ボタンＢＴｂの選択結果を保存する場合にチェックを入れるチェックボックスＣＢが配置されている。チェックボックスＣＢは、同意又は不同意の選択入力の結果を保存することを指示する第３操作子である。第２のテキストＴＸｂは、会員レコード２２１の会員同意フラグが同意を示す値“１”であった場合には、例えば「前回は同意していただきました」という内容となる。会員同意フラグが同意を示す値“１”でない場合には、第２のテキストＴＸｂは、例えば「同意をよろしくお願いいたします」という内容となる。第２のテキストＴＸｂは、省略されてもよい。

会員用同意確認画面ＳＣｂを確認した購買者は、カメラ５０の映像を本来の目的以外で活用することについて同意する場合には、［同意する］ボタンＢＴａにタッチする。同意しない場合には、購買者は、［同意しない］ボタンＢＴｂにタッチする。また、今回の選択結果を保存する場合には、購買者は、チェックボックスＣＢにチェックを入れる。

会員用同意確認画面ＳＣｂを表示させたプロセッサ７１は、ＡＣＴ７６として［同意する］ボタンＢＴａがタッチされるか、［同意しない］ボタンＢＴｂがタッチされるのを待ち受ける。デバイスインターフェース７７１を介して［同意する］ボタンＢＴａがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ７６からＡＣＴ７７へと進む。プロセッサ７１は、ＡＣＴ７６として第２通信インターフェース７６を介して監視装置６０に会員同意通知信号を送信する。会員同意通知信号には会員コードが含まれる。

デバイスインターフェース７７１を介して［同意しない］ボタンＢＴｂがタッチされたときの信号を入力した場合には、プロセッサ７１は、ＡＣＴ７６からＡＣＴ７８へと進む。プロセッサ７１は、ＡＣＴ７８として第２通信インターフェース７６を介して監視装置６０に会員不同意通知信号を送信する。会員不同意通知信号にも会員コードが含まれる。

ＡＣＴ７７又はＡＣＴ７８において会員同意通知信号又は会員不同意通知信号を送信したプロセッサ７１は、ＡＣＴ７９へと進む。プロセッサ７１は、ＡＣＴ７９としてチェックボックスＣＢにチェックが入っているか否かを確認する。チェックボックスＣＢにチェックが入っている場合には、プロセッサ７１は、ＡＣＴ７９からＡＣＴ８０へと進む。プロセッサ７１は、ＡＣＴ８０として第２通信インターフェース７６を介して監視装置６０に確認不要通知信号を送信する。チェックボックスＣＢにチェックが入っていない場合には、プロセッサ７１は、ＡＣＴ８０の処理をスキップする。確認不要通知信号にも会員コードが含まれる。

ＡＣＴ８０の処理を実行するかスキップしたプロセッサ７１は、図１２のＡＣＴ６９へと進む。すなわちプロセッサ７１は、タッチパネル１１に商品登録画面を表示させる。以後、プロセッサ７１は、ＡＣＴ６９以降の処理を前述したのと同様に実行する。

一方、肯定応答信号に含まれる会員データの確認不要フラグが確認不要な会員であることを示す値、すなわち“１”であった場合には、プロセッサ７１は、ＡＣＴ７４からＡＣＴ８１へと進む。プロセッサ７１は、ＡＣＴ８１として肯定応答信号に含まれる会員データの会員同意フラグを取得する。プロセッサ７１は、ＡＣＴ８２として会員同意フラグが“１”であるか確認する。会員同意フラグが“１”の場合には、プロセッサ７１は、ＡＣＴ８２からＡＣＴ８３へと進む。プロセッサ７１は、ＡＣＴ８３として第２通信インターフェース７６を介して監視装置６０に会員同意通知信号を送信する。

会員同意フラグが“０”の場合には、プロセッサ７１は、ＡＣＴ８２からＡＣＴ８４へと進む。プロセッサ７１は、ＡＣＴ８４として第２通信インターフェース７６を介して監視装置６０に会員不同意通知信号を送信する。

ＡＣＴ８３又はＡＣＴ８４において会員同意通知信号又は会員不同意通知信号を送信したプロセッサ７１は、図１２のＡＣＴ６９へと進む。すなわちプロセッサ７１は、タッチパネル１１に商品登録画面を表示させる。以後、プロセッサ７１は、ＡＣＴ６９以降の処理を前述したのと同様に実行する。

（監視装置の動作）
上述したように、セルフＰＯＳ端末１０から監視装置６０に送信される通知信号の種類は、第１の実施形態の同意通知信号、不同意通知信号、利用終了通知信号に加えて、会員同意通知信号、会員不同意通知信号及び確認不要通知信号が含まれる。

監視装置６０のプロセッサ９１は、図１４のＡＣＴ９１としてセルフＰＯＳ端末１０から通知信号を待ち受けている。第１端末インターフェース９７を介して通知信号を受信すると、プロセッサ９１は、ＡＣＴ９１からＡＣＴ９２へと進む。プロセッサ９１は、ＡＣＴ９２として会員同意通知信号を受信したか否かを確認する。通知信号が会員同意通知信号でない場合、プロセッサ９１は、ＡＣＴ９２からＡＣＴ９３へと進む。プロセッサ９１は、ＡＣＴ９３として会員不同意通知信号を受信したか否かを確認する。通知信号が会員不同意通知信号でない場合、プロセッサ９１は、ＡＣＴ９３からＡＣＴ９４へと進む。プロセッサ９１は、ＡＣＴ９４として確認不要通知信号を受信したか否かを確認する。

通知信号が確認不要通知信号でない場合、プロセッサ９１は、他の処理を実行する。例えば、通知信号が同意通知信号、不同意通知信号又は利用終了通知信号の場合、プロセッサ９１は、第１の実施形態で説明したＡＣＴ２５乃至ＡＣＴ３６の処理を同様の処理を実行する。

通知信号が会員同意通知信号である場合、プロセッサ９１は、ＡＣＴ９２からＡＣＴ９５へと進む。プロセッサ９１は、ＡＣＴ９５として時計９４によって計時されている現在の日時を取得する。そしてプロセッサ９１は、ＡＣＴ９６としてその日時を切出開始日時とする。またプロセッサ９１は、ＡＣＴ９７として同意フラグを“１”とする。

次いで、プロセッサ９１は、ＡＣＴ９８として会員同意通知信号から会員コードを取得する。そしてプロセッサ９１は、ＡＣＴ９９としてＰＯＳサーバ２０にアクセスして、当該会員コードを含む会員レコード２２１の会員同意フラグを、同意を示す値“１”とするように指示する。この指示を受けて、ＰＯＳサーバ２０は、会員データベース２２に保存されている会員レコード２２１のうち、当該会員コードを含む会員レコード２２１の会員同意フラグを“１”とする。以上の処理を終えると、プロセッサ９１は、ＡＣＴ９１へと戻り、次の通知信号を受信するのを待ち受ける。

通知信号が会員不同意通知信号である場合、プロセッサ９１は、ＡＣＴ９３からＡＣＴ１００へと進む。プロセッサ９１は、ＡＣＴ１００として時計９４によって計時されている現在の日時を取得する。そしてプロセッサ９１は、ＡＣＴ１０１としてその日時を切出開始日時とする。またプロセッサ９１は、ＡＣＴ１０２として同意フラグを“０”とする。

次いで、プロセッサ９１は、ＡＣＴ１０３として会員不同意通知信号から会員コードを取得する。そしてプロセッサ９１は、ＡＣＴ１０４としてＰＯＳサーバ２０にアクセスして、当該会員コードを含む会員レコード２２１の会員同意フラグを、不同意を示す値“０”とするように指示する。この指示を受けて、ＰＯＳサーバ２０は、会員データベース２２に保存されている会員レコード２２１のうち、当該会員コードを含む会員レコード２２１の会員同意フラグを“０”とする。以上の処理を終えると、プロセッサ９１は、ＡＣＴ９１へと戻り、次の通知信号を受信するのを待ち受ける。

通知信号が確認不要通知信号である場合、プロセッサ９１は、ＡＣＴ９４からＡＣＴ１０５へと進む。プロセッサ９１は、ＡＣＴ１０５としてＰＯＳサーバ２０にアクセスして、当該会員コードを含む会員レコード２２１の確認不要フラグを、確認が不要な会員を示す値“１”とするように指示する。この指示を受けて、ＰＯＳサーバ２０は、会員データベース２２に保存されている会員レコード２２１のうち、当該会員コードを含む会員レコード２２１の確認不要フラグを“１”とする。以上の処理を終えると、プロセッサ９１は、ＡＣＴ９１へと戻り、次の通知信号を受信するのを待ち受ける。

このように、第２の実施形態においては、確認不要フラグが“０”、すなわち同意するか否かの確認が必要な会員である購買者がセルフＰＯＳ端末１０の決済開始画面の［スタート］ボタンにタッチし、続いて会員確認画面の［会員］ボタンにタッチすると、会員用同意確認画面ＳＣｂが表示される。ここで、購買者が例えば［同意しない］ボタンＢＴｂにタッチし、さらにチェックボックスＣＢにチェックを入れると、監視装置６０においては、現在の日時が利用開始日時となり、同意フラグが“０”となる。またＰＯＳサーバ２０においては、会員データベース２２における当該会員の会員コードを含む会員レコード２２１の会員同意フラグが“０”となる。また、確認不要フラグが“１”となる。その後、購買者の会計が終了して利用終了通知信号がセルフＰＯＳ端末１０から監視装置６０に出力されると、現在の日時が利用終了日時となる。また、同意フラグが“０”のため、学習フラグは“０”となる。したがって、購買者を撮影した映像は、機械学習モデルの学習には利用されない。

その後、購買者が、再びセルフＰＯＳ端末１０の決済開始画面の［スタート］ボタンにタッチし、続いて会員確認画面の［会員］ボタンにタッチすると、会員用同意確認画面ＳＣｂは表示されない。タッチパネル１１には、商品登録画面が表示される。また、監視装置６０の同意フラグは“０”となる。したがって、購買者を撮影した映像は、機械学習モデルの学習には利用されない。

このように、会員である購買者が会員用同意確認画面ＳＣｂの［不同意］ボタンにタッチし、チェックボックスＣＢにチェックを入れることによって、次回以降は会員用同意確認画面ＳＣｂに対する操作は不要となる。そして購買者を撮影した画像は、機械学習モデルの学習に利用されない。

一方、会員用同意確認画面ＳＣｂを確認した購買者が例えば［同意する］ボタンＢＴａにタッチし、さらにチェックボックスＣＢにチェックを入れると、監視装置６０においては、現在の日時が利用開始日時となり、同意フラグが“１”となる。またＰＯＳサーバ２０においては、会員データベース２２における当該会員の会員コードを含む会員レコード２２１の会員同意フラグが“１”となる。また、確認不要フラグも“１”となる。その後、購買者の会計が終了して利用終了通知信号がセルフＰＯＳ端末１０から監視装置６０に出力されると、現在の日時が利用終了日時となる。また、同意フラグが“１”のため、学習フラグは“１”となる。したがって、購買者を撮影した映像は、機械学習モデルの学習に利用される。

その後、購買者が、再びセルフＰＯＳ端末１０の決済開始画面の［スタート］ボタンにタッチし、続いて会員確認画面の［会員］ボタンにタッチすると、会員用同意確認画面ＳＣｂは表示されない。タッチパネル１１には、商品登録画面が表示される。また、監視装置６０の同意フラグは“１”となる。したがって、購買者を撮影した映像は、機械学習モデルの学習には利用される。

このように、会員である購買者が会員用同意確認画面ＳＣｂの［同意］ボタンにタッチし、チェックボックスＣＢにチェックを入れることによって、次回以降は会員用同意確認画面ＳＣｂに対する操作は不要となる。そして購買者を撮影した画像は、機械学習モデルの学習に利用される。

［他の実施形態］
前記実施形態では、セルフＰＯＳ端末１０毎にカメラ５０と監視装置６０とを備えた。他の実施形態としては、例えば隣接する２台のセルフＰＯＳ端末１０に対して共通にカメラ５０と監視装置６０とを設けてもよい。あるいは、複数台のカメラ５０に対して１台の監視装置６０を接続して、２台以上のセルフＰＯＳ端末１０に対する購買者の不正行為を1台の監視装置６０で監視してもよい。

前記実施形態では、セルフＰＯＳ端末１０から不同意通知信号を受信した場合、プロセッサ９１は、ＡＣＴ２８乃至ＡＣＴ３０の処理を実行した。他の実施形態としては、ＡＣＴ２８及びＡＣＴ２９の処理を省略し、ＡＣＴ２３からＡＣＴ３０へと進んで、同意フラグを“１”とするだけであってもよい。この場合、ＡＣＴ３６において保存される切出データ８３１は、切出し開始日時が設定されていないデータとなる。さらに言えば、切出し開始日時が設定されていない切出データ８３１は、切出情報ファイル８３に保存しなくてもよい。そうすることにより、切出情報ファイル８３の記憶容量を節約できるメリットがある。

この他、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１０…セルフＰＯＳ端末、１１…タッチパネル、１２…カードリーダ、１３…プリンタ、１４…スキャナ、１５…ハンドスキャナ、１６…現金処理機、１７…パトランプ、１８…発光部、１９…スピーカ、２０…ＰＯＳサーバ、２１…商品データベース、２２…会員データベース、３０…アテンダント端末、４０…通信ネットワーク、５０…カメラ、６０…監視装置、６１…映像取込部、６２…映像処理部、６３…行動認識部、６４…状態認識部、６５…不正推定部、６６…記録部、６７…学習部、７１，９１…プロセッサ、７２，９２…メインメモリ、７３，９３…補助記憶デバイス、７４，９４…時計、７５…第１通信インターフェース、７６…第２通信インターフェース、７８…出力ポート、８１…映像ファイル、８２…機械学習モデル、８３…切出情報ファイル、９５…ＧＰＵ、９６…カメラインターフェース、９７…第１端末インターフェース、９８…第２端末インターフェース、１００…会計システム、７１１…登録手段、７１２…確認手段、７７１～７７６…デバイスインターフェース、９１１…第１の日時取得手段、９１２…第２の日時取得手段、９１３…記録手段。

Claims (6)

1. 客自身による操作が可能な入力デバイスと、
   前記入力デバイスを操作する購買者に対して情報を表示する表示デバイスと、
   前記入力デバイスを介して入力された商品に係るデータを基に、購買者が購入する商品の情報を登録処理する登録手段と、
   前記入力デバイスを操作する購買者を撮影したカメラの映像を本来の目的以外で活用することの同意を当該購買者に得るための同意確認画面を、当該購買者が購入する商品に係るデータが前記入力デバイスから入力される前に前記表示デバイスに表示させて、同意又は不同意を確認する確認手段と、
   を具備する商品登録装置。
2. 前記同意確認画面は、同意又は不同意の選択入力を受け付ける第１操作子を配置した画面であり、
   前記第1操作子で同意又は不同意の選択入力を受け付けたことを購買者の操作開始宣言として処理する、請求項１記載の商品登録装置。
3. 前記同意確認画面は、会員又は非会員の選択入力を受け付ける第２操作子を配置した会員確認画面の前記第２操作子で会員又は非会員の選択入力を受け付け、前記会員が選択入力された場合にはその会員を識別する情報を入力した後に表示される画面である、請求項１記載の商品登録装置。
4. 前記会員確認画面の第２操作子で会員が選択入力された後に表示される前記同意確認画面は、同意又は不同意の選択入力を受け付ける第１操作子とともにその選択結果を保存することを指示する第３操作子を配置した画面であり、
   前記第３操作子で選択結果を保存することが指示された場合には、その直前に入力された前記会員を識別する情報と関連付けて前記第１操作子で受け付けた選択入力の結果を保存し、
   前記会員確認画面の前記第２操作子で会員の選択入力を受け付けた後に入力される前記会員を識別する情報と関連付けて、前記第１操作子で受け付けた選択入力の結果が保存されている場合には、前記同意確認画面の表示をキャンセルする、請求項３記載の商品登録装置。
5. 請求項１乃至４のうちいずれか一記載の商品登録装置の監視装置であって、
   前記商品登録装置において、前記確認手段により同意する旨の選択入力を受け付けた時点の日時を取得する第１の日時取得手段と、
   前記商品登録装置において、前記登録手段により登録された商品の会計が終了した時点の日時を取得する第２の日時取得手段と、
   前記第１の日時取得手段により取得した日時を前記カメラで撮影された映像の切出開始日時とし、前記第２の日時取得手段により取得した日時を前記カメラで撮影された映像の切出終了日時として記録する記録手段と、を具備する監視装置。
6. 購買者自身による操作が可能な入力デバイスと、前記入力デバイスを操作する購買者に対して情報を表示する表示デバイスとを備えた商品登録装置のコンピュータを、
   前記入力デバイスを介して入力された商品に係るデータを基に、購買者が購入する商品の情報を登録処理する登録手段、及び、
   前記入力デバイスを操作する購買者を撮影したカメラの映像を本来の目的以外で活用することの同意を当該購買者に得るための同意確認画面を、当該購買者が購入する商品に係るデータが前記入力デバイスから入力される前に前記表示デバイスに表示させて、同意又は不同意を確認する確認手段、として機能させるためのプログラム。