JP2022090881A - チェックアウト装置、監視装置および監視プログラム - Google Patents

Abstract

【課題】 商品登録処理および会計処理を含む一連の処理中において人物の存在を監視することができるチェックアウト装置、監視装置および監視プログラムを提供する。【解決手段】 実施形態によれば、チェックアウト装置は、カメラインターフェースとプロセッサとを有する。カメラインターフェースは、人物が商品の情報を登録する登録作業と商品の精算金額を決済する作業とを行うための作業エリアを撮影範囲に含むカメラが撮影した画像を取得する。プロセッサは、人物の登録作業に応じて商品の情報を登録する登録処理と登録処理で登録した情報に基づいて商品の精算金額を決済する会計処理とを行い、登録処理を開始してから会計処理が終了するまでの間にカメラが撮影する画像において人物が作業エリアに存在しないことを検知した場合にアラートを出力する。【選択図】図２

Description

本発明の実施形態は、チェックアウト装置、監視装置および監視プログラムに関する。

従来、商品を購入する顧客自身の操作によって商品の登録および決済を行うセルフレジ（セルフチェックアウト装置）がある。従来のセルフレジには、会計処理へ移行しようとする場合に未登録の商品があれば、顧客に対してアラートを通知する機能を有するものがある。

しかしながら、従来のセルフレジでは、商品の情報を登録する商品登録処理および会計処理を含む一連の処理中において継続的に顧客の存在を監視することは行っていない。このため、セルフレジで商品の登録を開始した顧客がセルフレジを会計処理に移行させずに立ち去ってしまうような場合にアラートを発することができない。

特開２０１８－１１６５２５号公報

本発明が解決しようとする課題は、商品登録処理および会計処理を含む一連の処理中において人物の存在を監視することができるチェックアウト装置、監視装置および監視プログラムを提供することである。

実施形態によれば、チェックアウト装置は、カメラインターフェースとプロセッサとを有する。カメラインターフェースは、人物が商品の情報を登録する登録作業と商品の精算金額を決済する作業とを行うための作業エリアを撮影範囲に含むカメラが撮影した画像を取得する。プロセッサは、人物の登録作業に応じて商品の情報を登録する登録処理と登録処理で登録した情報に基づいて商品の精算金額を決済する会計処理とを行い、登録処理を開始してから会計処理が終了するまでの間にカメラが撮影する画像において人物が作業エリアに存在しないことを検知した場合にアラートを出力する。

図１は、第１実施形態に係るチェックアウト装置における外観の構成例を示す図である。 図２は、第１実施形態に係るチェックアウト装置における制御系の構成例を示すブロック図である。 図３は、第１実施形態に係るチェックアウト装置に接続されるアテンダント端末の構成例を示すブロック図である。 図４は、第１実施形態に係るチェックアウト装置における商品登録処理と会計処理との動作例を説明するためのフローチャートである。 図５は、第１実施形態に係るチェックアウト装置における人物監視処理の動作例を説明するためのフローチャートである。 図６は、第１実施形態に係るアテンダント端末のディスプレイに表示するアラートの表示例を示す図である。 図７は、第２実施形態に係る監視装置を含むチェックアウトシステムの構成例を示すブロック図である。 図８は、第２実施形態に係る監視装置における制御系の構成例を示すブロック図である。 図９は、第２実施形態に係る監視装置における人物監視処理の動作例を説明するためのフローチャートである。

以下、第１および第２の実施形態について、図面を参照しながら説明する。
（第１の実施形態）
まず、第１実施形態に係るチェックアウト装置２について説明する。
図１は、第１実施形態に係るチェックアウト装置２における外観の構成例を示す図である。
図１に示すチェックアウト装置２は、商品登録（読取）処理および会計処理を実行する装置である。実施形態において、チェックアウト装置２は、利用者自身の操作によって、当該利用者が購入する商品に対する商品登録処理および会計処理を行うセルフチェックアウト装置（セルフレジ）であるものとする。

図１に示すように、チェックアウト装置２は、本体１０と、本体１０の左右に配置された第１の商品載置台１１と第２の商品載置台１２とを備える。第１の商品載置台１１は登録処理前の商品を載置する商品置き場である。また、第２の商品載置台１２は登録処理後の商品を載置するものとする。ただし、登録処理前の商品は、ショッピングカート（以下、カート）に入れた状態で所定位置（商品置き場）に配置されるようにしても良い。この場合、登録処理前の商品を入れたカートを配置する所定位置は、セキュリティカメラ４の撮影範囲内になるものであれば良い。

第１の商品載置台１１は、本体１０に向かって本体１０の右側に配置する。例えば、第１の商品載置台１１には、利用者が購入しようとする商品（登録処理前の商品）を入れたかご（容器）が載置される。また、第１の商品載置台１１は、利用者が購入しようとする商品（登録処理前の商品）が直接載置されるものとしても良い。

また、第２の商品載置台１２は、本体１０に向かって本体１０の左側に配置する。第２の商品載置台１２は、第１の商品載置台１１から取り出されて登録処理がなされた商品が載置される。例えば、第２の商品載置台１２は、本体１０のバーコードが読み取られた商品、或は、キー操作により商品を示す情報（商品情報）を入力した商品（登録処理後の商品）が載置される。図２に示す構成例では、第２の商品載置台１２は、上部に支柱を介して一時置き台１２１を設ける。一時置き台１２１は、例えば、商品を買い物袋に入れる前に一時的に載置するために使用される。一時置き台１２１には、左右に離間させて２本の保持アーム１２２が設けられる。保持アーム１２２は、買い物袋（レジ袋）を開口させた状態で係止する。

本体１０には、ディスプレイ２１、カードリーダライタ（ＲＷ）２２、プリンタ２３、スピーカ２４、スキャナ２５、ハンドスキャナ２６、および、現金処理機２７が設けられる。さらに、本体１０には、それぞれ支柱を介してカメラ２８と警告灯２９とが設けられる。

ディスプレイ２１は、表示デバイス２１１とタッチセンサ２１２とを含むタッチパネルである。表示デバイス２１１は、操作案内、顧客が選択可能なアイコン（タッチキー）、或は、アラートとして警告のメッセージなどを表示する。表示デバイス２１１は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）である。タッチセンサ２１２は、表示デバイス２１１の表示画面（操作画面）における人のタッチ位置を検出する。タッチセンサ２１２は、検知したタッチ位置を示す情報を処理部としての後述するプロセッサへと送る。

例えば、表示デバイス２１１は、顧客のタッチ操作により支払い方法（現金、カード）などの選択指示や各種情報を入力するためのＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を表示する。また、表示デバイス２１１は、案内画面、情報入力画面、商品登録画面、精算画面などを表示する。案内画面は、顧客に操作方法を知らせるための案内（メッセージ）を表示する画面である。情報入力画面は、例えば、バーコードが付されていない商品の情報を入力するための操作画面である。商品登録画面は、登録した商品に関する情報を表示する画面である。商品登録画面では、例えば、スキャナ２５又はハンドスキャナ２６が読み取ったバーコードによって識別した商品、および、キー操作で指定された商品などの情報を表示する。精算画面は、商品の代金を顧客が支払う会計処理において、購入する商品（登録した商品）の合計金額、預かり金額、および、釣り銭額などを表示する画面である。

カードリーダライタ（ＲＷ）２２は、カードを処理する。カードリーダライタ２２は、カード挿入口を有する。カードリーダライタ２２は、カードに記録されたデータを読み取る機能とカードへデータを書き込む機能とを有する。カードリーダライタ４９は、磁気情報を記録する磁気カードであっても良いし、接触式あるいは非接触式のＩＣカードであっても良い。また、カードリーダライタ２２は、複数種のカードを処理する機構を有するものであっても良い。

例えば、カードリーダライタ２２は、カード挿入口に挿入される精算用のクレジットカード又は会員カードなどのカードを処理する。精算（決済）用のカードとしては、クレジットカード、デビットカード、電子マネーカード、プリペイドカードなどがある。また、会員カードとしては、会員情報を記録したメンバーズカード、或は、サービスとして利用可能なポイントを記録したポイントカードなどがある。

プリンタ２３は、レシートを印刷する。プリンタ２３は、レシート発行口を有する。プリンタ２３は、レシート用紙に対して各種の文字列や画像などを印刷することによりレシートを発行する。プリンタ２３は、例えばサーマルプリンタやドットインパクトプリンタなどを実現される。例えば、プリンタ２３は、会計処理が完了した場合に、処理内容（会計内容）を印刷したレシートを作成し、作成したレシートをレシート発行口２３１から排出する。
スピーカ２４は、アラートしての警告音、或は、メッセージとしての音声などの音を出力する。

スキャナ２５およびハンドスキャナ２６は、商品を識別する情報を読み取るものである。本実施形態において、スキャナ２５およびハンドスキャナ２６は、商品を識別する情報として商品に付されたバーコードを読み取るものとする。スキャナ２５は、商品に付されたバーコードが相対するように、顧客が翳す商品のバーコードの画像を光学的に読み取る。ハンドスキャナ２６は、顧客によって手持ちで操作されるもので、商品に付されたバーコードに近接されることによりバーコードの画像を光学的に読み取る。なお、スキャナ２５およびハンドスキャナ２６は、商品を認識する情報を読み取るものであれば良く、例えば、バーコード以外の情報を読み取るものであっても良い。

現金処理機２７は、現金を処理するものである。現金処理機２７は、紙幣投入口、紙幣排出口、硬貨投入口および硬貨排出口などを有する。現金処理機２７は、紙幣投入口２７１に投入された紙幣を処理する。現金処理機２７は、釣銭としての紙幣を紙幣排出口２７２から排出する。現金処理機２７は、硬貨投入口２７３に投入された硬貨を受け入れて処理する。現金処理機２７は、釣銭としての硬貨を硬貨排出口２７４から排出する。

カメラ２８は、利用者が商品登録処理と会計処理とに伴う作業を行うエリア（作業エリア）を撮影する。例えば、カメラ２８は、第１の商品載置台１１と第２の商品載置台１２とが撮影範囲に含まれるように設置する。カメラ２８は、商品登録処理に伴う利用者の動作（作業）として、利用者が第１の商品載置台１１に載置された商品（登録処理前の商品）を取り出してから商品登録処理後の商品を第２の商品載置台１２に載置するまでの動作を撮影する。また、カメラ２８は、会計処理に伴う利用者の動作（作業）として、利用者がディスプレイ２１を操作して現金又はカードなどを用いて商品の精算金額を決済するための動作を撮影する。カメラ２８は、上述したような商品登録処理に伴う利用者の動作（作業）と会計処理に伴う利用者の動作（作業）とを利用者が行う作業エリアを撮影するように設定する。カメラ２８が撮影した画像（映像）は、データメモリ４３などに保存しておくことにより、エラーが発生した場合などに状況を確認するために使用できる。

また、カメラ２８は、商品登録処理の開始および会計処理の終了を検出するための画像を撮影するようにしても良い。例えば、カメラ２８は、商品登録処理前（未登録）の商品を撮影するように設定する。カメラ２８が撮影した画像において利用者が商品登録処理のために未登録の商品をピックアップしたことを検出することで、商品登録処理が開始されたことを検出できる。また、カメラ２８は、レシート発行口を含む領域を撮影するように設定する。この場合、カメラ２８が撮影した画像においてレシート発行口からレシートが排出されたことを検出することで、会計処理が終了したことを検出することもできる。
次に、第１実施形態に係るチェックアウト装置２における制御系の構成について説明する。
図２は、第１実施形態に係るチェックアウト装置２における制御系の構成例を示すブロック図である。
図２に示す構成例において、チェックアウト装置２の本体１０は、制御ユニット３０を有する。制御ユニット３０は、例えば、コンピュータで実現される。制御ユニット３０には、ディスプレイ２１、カードリーダライタ２２、プリンタ２３、スピーカ２４、スキャナ２５、ハンドスキャナ２６、現金処理機２７、カメラ２８および警告灯２９などが電気的に接続される。また、制御ユニット３０は、プロセッサ４０、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）４１、ＲＡＭ（ｒａｎｄｏｍ－ａｃｃｅｓｓ ｍｅｍｏｒｙ）４２、データメモリ４３、および、各種のインターフェース（ＩＦ）４４～５３を有する。

プロセッサ４０は、プログラムを実行することにより種々の処理を実行する。プロセッサ４０は、例えば、ＣＰＵ（ｃｅｎｔｒａｌ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）である。プロセッサ４０は、ＲＯＭ４１又はデータメモリ４３が記憶するプログラムを実行することにより各種の処理機能を実現する。例えば、プロセッサ４０は、商品の登録（入力）処理用のプログラムを実行することにより、登録モードとして商品の商品情報を登録（入力）する商品登録処理を実行する。プロセッサ４０は、会計処理用のプログラムを実行することにより、会計モードとして商品の代金を決済する会計処理を実行する。

ＲＯＭ４１は、不揮発性のメモリであり、プログラムおよびデータを記憶する。例えば、ＲＯＭ４１は、オペレーティングシステム、ミドルウェア、アプリケーションなどのプログラムを記憶する。また、ＲＯＭ４１は、プロセッサ４０が各種の処理を実行する場合に参照するデータを記憶しても良い。
ＲＡＭ４２は、作業用のデータを記憶する。ＲＡＭ４２は、いわゆるワークエリアとして利用されるメモリである。ＲＡＭ４２は、プロセッサ４０が各種の処理を実行する場合に参照するデータ、或は、一時的に使用するデータなどを適宜記憶する。

データメモリ４３は、データを記憶するメモリである。データメモリ４３は、書き換え可能な不揮発性のメモリである。データメモリ４３は、例えばＥＥＰＲＯＭ（登録商標）（ｅｌｅｃｔｒｉｃ ｅｒａｓａｂｌｅ ｐｒｏｇｒａｍｍａｂｌｅ ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＨＤＤ（ｈａｒｄ ｄｉｓｋ ｄｒｉｖｅ）、あるいはＳＳＤ（ｓｏｌｉｄ ｓｔａｔｅ ｄｒｉｖｅ）などで構成する。データメモリ４３は、プロセッサ４０が各種の処理を実行する場合に使用するデータ、或は、プロセッサ４０による処理で生成されたデータを保存する。また、データメモリ４３は、プロセッサ４０が実行する各種のプログラムを記憶しても良い。例えば、データメモリ４３は、登録処理用のプログラム、会計処理用のプログラムを記憶しても良い。

また、ＲＡＭ４２あるいはデータメモリ４３は、商品登録処理において登録した商品（登録商品）に関する情報を記憶する。ＲＡＭ４２あるいはデータメモリ４３は、例えば、登録商品に関する情報をリスト形式のデータ（登録商品リスト）として記録しても良い。また、ＲＡＭ４２あるいはデータメモリ４３は、カメラ２８が撮影する撮影画像を記憶する。データメモリ４３は、例えば、カメラ２８が撮影する撮影画像に撮影時刻を示すタイムスタンプのデータを付加した映像データを記憶しても良い。

プロセッサ４０は、スキャナＩＦ４４を介してスキャナ２５に接続する。プロセッサ４０は、スキャナＩＦ４４を介してスキャナ２５が読み取る画像（スキャン画像）を取得する。また、プロセッサ４０は、スキャナＩＦ４５を介してハンドスキャナ２６に接続する。プロセッサ４０は、スキャナＩＦ４５を介してハンドスキャナ２６が読み取る画像（スキャン画像）を取得する。プロセッサ４０は、スキャナ２５又はハンドスキャナ２６のスキャン画像に含まれるバーコードをデコードすることによりバーコードが示す商品を識別する。

プロセッサ４０は、表示ＩＦ４６を介してディスプレイ２１に接続する。プロセッサ４０は、表示ＩＦ４６を介してディスプレイ２１の表示デバイス２１１が表示する表示内容を制御する。また、プロセッサ４０は、表示ＩＦ４６を介してディスプレイ２１のタッチセンサ２１２が検知するタッチ位置を示す情報を取得する。例えば、プロセッサ４０は、登録処理前（未登録）の商品が存在することを報知するためのアラート或はインジケータとしてのメッセージをディスプレイ２１に表示する。また、プロセッサ４０は、タッチ位置を示す情報によりディスプレイ２１に表示した各アイコン（タッチキー）への入力を検知する。

プロセッサ４０は、カードＩＦ４７を介してカードリーダライタ２２に接続する。プロセッサ４０は、カードＩＦ４７を介してカードリーダライタ２２によるカードに対する処理を制御する。例えば、プロセッサ４０は、カードリーダライタ２２が処理するクレジットカードによる精算処理を実行する。
プロセッサ４０は、プリンタＩＦ４８を介してプリンタ２３に接続する。プロセッサ４０は、プリンタＩＦ４８を介してプリンタ２３を制御する。例えば、プロセッサ４０は、プリンタ２３により会計処理の結果を示すレシートを発行する。
プロセッサ４０は、音声ＩＦ４９を介してスピーカ２４に接続する。プロセッサ４０は、音声ＩＦ４９を介してスピーカ２４から出力する音を制御する。例えば、プロセッサ４０は、登録処理前の商品が存在することを報知するためのアラートとしての音（ブザー）をスピーカ２４により出力する。

プロセッサ４０は、入出金ＩＦ５０を介して現金処理機２７に接続する。プロセッサ４０は、入出金ＩＦ５０を介して現金処理機２７を制御する。例えば、プロセッサ４０は、顧客が入金した現金を現金処理機２７が計数し、現金処理機２７が計数した入金金額を示す情報を取得する。また、プロセッサ４０は、入金した金額と登録済みの商品の合計金額（商品代金）とから算出した釣銭を現金処理機２７によって放出する制御を行う。

プロセッサ４０は、カメラＩＦ５１を介してカメラ２８に接続する。プロセッサ４０は、カメラＩＦ５１を介してカメラ２８が撮影する撮影画像を取得する。例えば、プロセッサ４０は、商品登録処理が開始された場合にカメラ２８が撮影する撮影画像の取得を開始する。また、プロセッサ４０は、商品登録処理中および会計処理中において継続的に（例えば所定周期で）カメラ２８が撮影する撮影画像を取得する。プロセッサ４０は、会計処理が終了した場合にカメラ２８が撮影する撮影画像の取得を終了する。

プロセッサ４０は、警告灯ＩＦ５２を介して警告灯２９に接続する。プロセッサ４０は、利用者の立ち去りなどを検知した場合、警告灯ＩＦ５２を介して警告灯２９に警告を示す明かりを点灯させる。

プロセッサ４０は、通信ＩＦ５３を介して外部装置に接続する。通信ＩＦ５３は、外部装置とネットワーク通信を行うための通信インターフェースであっても良いし、外部装置とローカルに接続するインターフェースであっても良い。通信ＩＦ５３は、無線通信用のインターフェースであっても良いし、有線通信用のインターフェースであっても良い。また、通信ＩＦ５３は、１つの通信インターフェースであっても良いし、複数の通信インターフェースであっても良い。

例えば、プロセッサ４０は、通信ＩＦ５３を介して外部装置としてのアテンダント端末３に接続する。アテンダント端末３は、監視対象とするチェックアウト装置２の利用状況などを示す情報を係員に報知する。アテンダント端末３は、チェックアウト装置２に接続される。複数のチェックアウト装置２を監視対象とする場合、アテンダント端末３は、監視対象とする複数のチェックアウト装置２における利用状況などを一元的に監視する。アテンダント端末３は、監視対象となるチェックアウト装置２の利用状況を示す情報を表示するディスプレイ７０（図３参照）を有する。この場合、プロセッサ４０は、通信ＩＦ５３を介してアテンダント端末３に動作状況を示す情報を送信する。例えば、プロセッサ４０は、チェックアウト装置２による商品の登録状況あるいは会計処理の実行状況などの利用状況を示す情報をアテンダント端末３へ送信する。また、プロセッサ４０は、処理中の利用者の立ち去りなどを検知した場合、通信ＩＦ５３を介してアテンダント端末３へアラートを送信する。

また、プロセッサ４０は、通信ＩＦ５３を介して管理サーバなどのコンピュータに接続するようにしても良い。例えば、プロセッサ４０は、通信ＩＦ５３によりチェックアウト装置２で登録された商品あるいは会計済みとなった商品を示す情報を管理サーバへ送信する。また、プロセッサ４０は、通信ＩＦ５３を介して通信するストアコンピュータから商品に関する情報などを適宜取得するようにしても良い。

次に、第１実施形態に係るチェックアウト装置２に通信接続されるアテンダント端末３の構成について説明する。
図３は、第１実施形態に係るアテンダント端末３における制御系の構成例を示すブロック図である。
図３に示す構成例において、アテンダント端末３は、ディスプレイ７０を具備する。アテンダント端末３は、ディスプレイを有するコンピュータなどで実現される。アテンダント端末３は、プロセッサ６０、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）６１、ＲＡＭ（ｒａｎｄｏｍ－ａｃｃｅｓｓ ｍｅｍｏｒｙ）６２、データメモリ６３、表示インターフェース（ＩＦ）６４、および、通信インターフェース（ＩＦ）６５を有する。

プロセッサ６０は、プログラムを実行することにより種々の処理を実行する。プロセッサ６０は、例えば、ＣＰＵ（ｃｅｎｔｒａｌ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）である。プロセッサ６０は、ＲＯＭ６１又はデータメモリ６３が記憶するプログラムを実行することにより各種の処理機能を実現する。例えば、プロセッサ６０は、監視用のプログラムを実行することによりチェックアウト装置２からのアラートの通知に応じてディスプレイ７０にアラートを表示したり、カメラ２８が撮影した画像を表示したりする。

ＲＯＭ６１は、不揮発性のメモリであり、プログラムおよびデータを記憶する。例えば、ＲＯＭ６１は、オペレーティングシステム、ミドルウェア、アプリケーションなどのプログラムを記憶する。また、ＲＯＭ６１は、プロセッサ６０が各種の処理を実行する場合に参照するデータを記憶しても良い。
ＲＡＭ６２は、作業用のデータを記憶する。ＲＡＭ６２は、いわゆるワークエリアとして利用されるメモリである。ＲＡＭ６２は、プロセッサ６０が各種の処理を実行する場合に参照するデータ、或は、一時的に使用するデータなどを適宜記憶する。

データメモリ６３は、データを記憶するメモリである。データメモリ６３は、書き換え可能な不揮発性のメモリである。データメモリ６３は、例えばＥＥＰＲＯＭ（登録商標）（ｅｌｅｃｔｒｉｃ ｅｒａｓａｂｌｅ ｐｒｏｇｒａｍｍａｂｌｅ ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＨＤＤ（ｈａｒｄ ｄｉｓｋ ｄｒｉｖｅ）、あるいはＳＳＤ（ｓｏｌｉｄ ｓｔａｔｅ ｄｒｉｖｅ）などで構成する。データメモリ６３は、プロセッサ６０が各種の処理を実行する場合に使用するデータ、或は、プロセッサ６０による処理で生成されたデータを保存する。また、データメモリ６３は、プロセッサ６０が実行する各種のプログラムを記憶しても良い。

プロセッサ６０は、表示ＩＦ６４を介してディスプレイ７０に接続する。プロセッサ６０は、表示ＩＦ６６を介してディスプレイ７０の表示デバイスが表示する表示内容を制御する。また、ディスプレイ７０は、タッチセンサ内蔵の表示装置であっても良い。この場合、プロセッサ６０は、表示ＩＦ６４を介してディスプレイ７０のタッチセンサが検知するタッチ位置を示す情報を取得するようにしても良い。例えば、プロセッサ６０は、タッチ位置を示す情報によりディスプレイ７０に表示した各アイコン（タッチキー）への入力を検知する。

プロセッサ６０は、通信ＩＦ６５を介してチェックアウト装置２に接続する。通信ＩＦ６５は、チェックアウト装置２と通信する通信インターフェースであれば良い。例えば、通信ＩＦは、ＬＡＮ（ｌｏｃａｌ ａｒｅａ ｎｅｔｗｏｒｋ）などのネットワークを介してチェックアウト装置２と通信するための通信インターフェースである。例えば、プロセッサ６０は、通信ＩＦ６５を介してチェックアウト装置２から商品登録処理あるいは会計処理の処理内容を示す情報を取得する。また、プロセッサ６０は、通信ＩＦ６５を介してチェックアウト装置２から利用者の立ち去りなどのアラートを取得する。また、プロセッサ６０は、通信ＩＦ６５を介してカメラ２８が撮影した撮影画像をチェックアウト装置２から取得するようにしても良い。

次に、第１実施形態に係るチェックアウト装置２による商品登録処理および会計処理を含む動作について説明する。
図６は、第１実施形態に係るチェックアウト装置２による商品登録処理および会計処理を含む動作例を説明するためのフローチャートである。
ここで、利用者は、購入する商品を持ってチェックアウト装置２の前に訪れるものとする。利用者は、チェックアウトの対象とする商品（登録前の商品）を所定の位置にセットする。例えば、利用者は、チェックアウトの対象とする商品（対象商品）を入れたカゴ（容器）を商品置き場としての第１の商品載置台１１上に載置する。また、利用者は、購入する商品を第１の商品載置台１１上に直接載置しても良い。また、利用者は、購入する商品を入れたカートを商品置き場としての所定位置に配置するようにしても良い。

購入する商品を商品置き場にセットした後、利用者は、所定の操作によりチェックアウト処理又は商品登録処理の開始を指示する。例えば、利用者は、ディスプレイ２１に表示されるタッチキーをタッチすることにより商品登録処理の開始を指示する。また、商品登録処理の開始は、利用者の動きに応じてプロセッサ４０が認識するようにしても良い。例えば、プロセッサ４０は、カメラ２８が撮影する画像を解析することにより利用者の動きを認識し、認識した利用者の動きに応じて商品登録処理の開始を判断しても良い。

チェックアウト装置２のプロセッサ４０は、商品登録処理の開始指示に応じて対象となる商品の商品情報を登録（入力）する商品登録処理を実行する（ＡＣＴ１１）。商品登録処理（登録モード）において、プロセッサ４０は、利用者の操作に応じてスキャナ２５又はハンドスキャナ２６が読み取るバーコードにより個々の商品を識別する。バーコードにより商品が識別できた場合、プロセッサ４０は、識別した商品に関する情報（商品情報）を登録する。

また、商品登録処理において、プロセッサ４０は、商品を利用者が指定する商品として登録しても良い。例えば、プロセッサ４０は、取り出した商品をディスプレイ２１に表示するタッチキーを利用者が操作して指定する商品として登録しても良い。商品の登録が完了したと判断した利用者は、会計処理への移行（商品登録処理の終了）を指示する。例えば、利用者は、ディスプレイ２１に表示されるタッチキーを操作することにより会計処理への移行を指示する。

会計処理への移行（又は、商品登録処理の終了）が指示された場合（ＡＣＴ１２、ＹＥＳ）、プロセッサ４０は、登録された商品に対する会計処理へ移行する。会計処理へ移行すると、プロセッサ４０は、登録された全商品の精算金額の合計金額を決済する会計処理を実行する（ＡＣＴ１３）。例えば、プロセッサ４０は、登録された各商品の精算金額を特定し、各商品の精算金額の合計金額を算出する。プロセッサ４０は、算出した合計金額をディスプレイ２１に表示し、利用者から合計金額を収受する処理を行う。商品の合計金額の収受が完了すると、プロセッサ４０は、プリンタ２３により精算内容を印字したレシートを発行し、レシート発行口２３１からレシートを排出する。プロセッサ４０は、プリンタ２３に精算内容を示すレシートを発行させ、商品登録処理により登録した商品に対する会計処理を終了する。

登録した商品に対する会計処理を終了する場合、プロセッサ４０は、当該利用者が続けて別の商品の登録および会計を実施するか否かを判断する（ＡＣＴ１４）。当該利用者は、続けて別の商品登録処理を実行する場合、所定の操作により次の商品登録処理の開始を指示する。例えば、プロセッサ４０は、会計処理を終了してから所定期間において当該利用者による次の商品に対する登録処理の開始指示を受付ける。所定期間において次の商品に対する登録処理の開始が指示された場合、プロセッサ４０は、ＡＣＴ１１へ戻り、上述した商品登録処理を実行する。また、所定期間内に次の商品に対する登録処理の開始が指示されない場合、プロセッサ４０は、当該利用者に対する一連の処理を終了する。

また、プロセッサ４０は、会計処理を終了してから当該利用者が所定領域（例えば、作業エリア）から立ち去るまで、次の商品に対する登録処理の開始指示を受付けるようにしても良い。当該利用者が所定領域から立ち去ったか否かは、プロセッサ４０がカメラ２８の撮影画像から検出するようにしても良い。プロセッサ４０は、当該利用者が所定領域から立ち去った場合、あるいは、当該利用者による一連の処理の終了指示が入力された場合、当該利用者に対する処理を終了する。

次に、第１実施形態に係るチェックアウト装置２における人物監視処理（人物の立ち去り検知処理）について説明する。
図５は、第１実施形態に係るチェックアウト装置２による人物監視処理（人物の立ち去り検知処理）の動作例を説明するためのフローチャートである。
チェックアウト装置２のプロセッサ４０は、待機状態において、商品登録処理の開始を受付ける。上述したように、プロセッサ４０は、利用者によるチェックアウト処理又は商品登録処理の開始指示を受けた場合、商品登録処理の開始を判断する。また、プロセッサ４０は、カメラ２８が撮影する画像から検出される利用者の動きに応じて商品登録処理の開始を判断しても良い。

商品登録処理を開始すると（ＡＣＴ２１、ＹＥＳ）、プロセッサ４０は、カメラＩＦ５１を介してカメラ２８が撮影する画像の取得を開始する（ＡＣＴ２２）。例えば、プロセッサ４０は、監視対象とする作業エリアを含む撮影範囲をカメラ２８が撮影した画像（映像）を所定周期で取得する。

プロセッサ４０は、カメラＩＦ５１を介して取得するカメラ２８が撮影した画像に基づいて作業エリアに利用者が存在するか否かをチェックする（ＡＣＴ２３）。プロセッサ４０は、カメラ２８が撮影した画像を解析することにより作業エリアに利用者が存在しているかを判断する存在チェックを行う。例えば、プロセッサ４０は、ＯｐｅｎＰｏｓｅのような骨格推定技術を用いて利用者が作業エリアに存在するか否かを判定する。また、プロセッサ４０は、ＳＳＤ（Ｓｉｎｇｌｅ Ｓｈｏｔ ＭｕｌｔｉＢｏｘ Ｄｅｔｅｃｔｏｒ）のような物体検出技術を用いて利用者が作業エリアに存在するか否かを判定するようにしても良い。

プロセッサ４０は、カメラ２８が撮影した画像に基づく利用者の存在チェックの結果に基づいて利用者が立ち去ったか否かを判断する（ＡＣＴ２４）。例えば、プロセッサ４０は、作業エリアに利用者が存在しないことを検出した場合に利用者が立ち去ったものと判断する。また、プロセッサ４０は、利用者が作業エリアに存在しない期間が所定期間を超えた場合に利用者が立ち去ったと判断するようにしても良い。

利用者が立ち去ったと判断した場合（ＡＣＴ２４、ＹＥＳ）、プロセッサ４０は、アラートを出力する（ＡＣＴ２６）。プロセッサ４０は、アラートの通知として、警告灯２９を点灯させる。また、プロセッサ４０は、通信ＩＦ５３を介してアテンダント端末３に未会計の利用者が立ち去ったことを検知したことを示すアラートを通知する。アテンダント端末３は、チェックアウト装置２からのアラートの通知に応じて利用者が立ち去ったことを検知したことをディスプレイ７０に表示する。これにより、アテンダント端末で監視を行う監視員は、利用者の立ち去りが検知されたチェックアウト装置を認識でき、当該利用者の行動を目視で確認することができる。

図６は、アテンダント端末３のディスプレイ７０に表示する警告画面の表示例を示す図である。
図６に示す表示例では、アテンダント端末３は、「セルフＰＯＳ端末Ｎｏ．３（チェックアウト装置）で未会計のお客様の立ち去りを検知しました。」という警告のメッセージをディスプレイ７０に表示する。また、図６に示す表示例において、アテンダント端末３は、警告のメッセージと共に、セキュリティ担当者への転送（通知）を指示する転送ボタンを表示する。

アテンダント端末３のプロセッサ６０は、転送ボタンを指示されると、上述したような警告のメッセージなどを含むアラートをセキュリティ担当者に通報する。例えば、セキュリティ担当者の連絡先は、通信ＩＦ６５を介して通信可能な宛先として予めデータメモリ６３などに記憶されているものとする。この場合、プロセッサ６０は、転送ボタンへの指示に応じて、データメモリ６３に記憶されているセキュリティ担当者の連絡先へ警告のメッセージを含むアラートを転送（送信）する。

なお、プロセッサ４０は、通信ＩＦ５３を介して通信可能な店員やセキュリティ担当者等の係員が所持するモバイル端末へアラートを通知する構成としても良い。この場合、プロセッサ４０は、通信ＩＦ５３を介して係員が所持するモバイル端末に利用者が立ち去ったことを検知したことを示すアラートを通知する。係員が所持するモバイル端末は、例えば、チェックアウト装置２からのアラートの通知に応じて利用者が立ち去ったことを検知したことを画面上にポップアップ表示する。これにより、モバイル端末を所持する係員は、利用者の立ち去りを認識でき、当該利用者の行動を目視で確認するなどの対応が可能となる。

利用者が立ち去ったことを検出していない場合（利用者が作業エリアに存在することを検出した場合）（ＡＣＴ２４、ＮＯ）、プロセッサ４０は、会計処理が終了したか否かをチェックする（ＡＣＴ２５）。例えば、プロセッサ４０は、商品登録処理で登録した商品に対する精算金額の収受が完了した場合、会計処理が終了したものと判断する。また、プロセッサ４０は、精算金額の収受後にプリンタ２３がレシートを発行した場合に会計処理が終了したものと判断するようにしても良い。また、プロセッサ４０は、プリンタ２３がレシート発行口２３１から排出したレシートが取り去れた場合に会計処理が終了したものと判断するようにしても良い。

会計処理が完了していない場合（ＡＣＴ２５、ＮＯ）、プロセッサ４０は、ＡＣＴ２２へ戻り、上述した処理を繰り返し実行する。会計処理が完了した場合（ＡＣＴ２５、ＹＥＳ）、プロセッサ４０は、商品登録処理および会計処理中における利用者の立ち去りを検知する監視処理を終了する。

なお、プロセッサ４０は、作業エリアにおける人の存在の有無にかかわらずに、カメラ２８が撮影した画像をデータメモリ４３に記憶するようにしても良い。この場合、プロセッサ４０は、データメモリ４３に記憶する撮影画像に撮影時刻を対応づけて記録する。さらに、プロセッサ４０は、作業エリアに人が存在することが検出された時刻（作業エリアに人が進入してきた時刻）をデータメモリ４３に記録しておくようにしても良い。

以上のように、第１実施形態に係るチェックアウト装置は、商品登録処理が開始されてから会計処理が終了するまでの間、カメラが撮影する映像から利用者の立ち去りを監視する。チェックアウト装置は、商品登録処理の開始から会計処理の完了までの間にカメラが撮影する映像において利用者が所定領域（作業エリア）に存在するか否かを検出する。チェックアウト装置は、商品登録処理を開始した利用者が会計処理の完了までの間に所定領域から立ち去ったことを検出した場合にアラートを出力する。
これにより、チェックアウト装置は、会計処理への移行時でなくても、商品登録処理を開始した利用者が会計処理を終了せずに立ち去ったことを報知することができる。

また、チェックアウト装置は、カメラが撮影する画像から作業エリアにおける人物の存在の有無を検出する。このため、チェックアウト装置は、遮蔽物などで検出不可となる人感センサによる人物検知とは異なり、作業エリアが広範囲であっても利用者に立ち去りを確実に検出できる。

（第２実施形態）
次に、第２実施形態について説明する。
上述した第１実施形態は、チェックアウト装置２が利用者の立ち去りを検知（監視）する機能を有するものとした。これに対して、第２実施形態は、チェックアウト装置２とは別に設ける監視装置が利用者の立ち去りを検知（監視）するチェックアウトシステムを構成するものとする。

図７は、第２実施形態に係るチェックアウトシステム１０１の構成例を示すブロック図である。
図７に示すように、チェックアウトシステム１０１は、チェックアウト装置２およびアテンダント端末３に加えて、監視カメラ１０４、および、監視装置（画像解析装置）１０５を有する。

チェックアウト装置２は、第１実施形態で説明した図１および図２に示すものと同様なハードウエア構成を有するものであって良い。ただし、第２実施形態では、第１実施形態で説明した人物監視処理に相当する処理を監視装置１０５が実行する。このため、第２実施形態に係るチェックアウト装置２は、第１実施形態で説明した構成のうち人物監視処理を行うための構成を省略して良い。

アテンダント端末３は、第１実施形態で説明した図１および図３に示すものと同様なハードウエア構成を有するものであって良い。ただし、第２実施形態に係るアテンダント端末３は、通信ＩＦ６６を介して監視装置１０５とも通信するものとする。つまり、アテンダント端末３のプロセッサ６０は、通信ＩＦ６６を介してチェックアウト装置２および監視装置１０５と通信する。第２実施形態に係るアテンダント端末３のプロセッサ６０は、通信ＩＦ６６を介して監視装置１０５からアラートなどを取得する。例えば、プロセッサ６０は、通信ＩＦ６６を介して監視装置１０５から利用者が立ち去った旨のアラートを受信した場合、ディスプレイ７０に図６に示すような警告を表示する。

監視カメラ１０４は、第１実施形態で説明したカメラ２８と同様に、作業エリアを撮影範囲に含む画像を撮影するものである。監視カメラ１０４は、作業エリアを撮影するものであれば良い。監視カメラ１０４は、チェックアウト装置２とは別に設けられるものであっても良い。この場合、監視カメラ１０４は、図７に示すように、監視装置１０５に通信接続される。また、監視カメラ１０４は、第１実施形態で説明したようなチェックアウト装置２が備えるカメラ２８であっても良い。この場合、監視装置１０５は、監視対象とするチェックアウト装置２に設けられたカメラ２８から画像を取得する構成とする。なお、以下の第２実施形態の説明では、監視カメラ１０４は、図７に示すように、チェックアウト装置２とは別に設けられ、監視装置１０５に接続されるものとする。

監視カメラ１０４は、監視対象とするチェックアウト装置２に商品登録処理と会計処理とを実行させる利用者が作業を行う所定領域（作業エリア）を撮影する。例えば、監視カメラ１０４は、監視対象とするチェックアウト装置２の第１の商品載置台１１と第２の商品載置台１２とが撮影範囲に含まれるように設置する。

監視カメラ１０４は、商品登録処理に伴う動作として、利用者が登録処理前（未登録）の商品を取り出してから商品登録処理後の商品を第２の商品載置台１２に載置するまでの動作を撮影する。また、監視カメラ１０４は、会計処理に伴う利用者の動作として、利用者が現金又はカードなどを用いて商品の精算金額を決済するための動作を撮影する。監視カメラ１０４は、上述したような商品登録処理に伴う動作と会計処理に伴う動作とを利用者が行う作業エリアを撮影するように設定する。

また、監視カメラ１０４は、監視対象とするチェックアウト装置２における商品登録処理の開始および会計処理の終了を検出するための画像を撮影する。例えば、監視カメラ１０４は、商品登録処理の開始として、利用者が商品登録処理のために未登録の商品をピックアップしたことを検出するための画像を撮影する。監視カメラ１０４は、商品登録処理の開始として、利用者がディスプレイ２１に対して商品登録処理の開始を指示する動作を行ったことを検出するための画像を撮影するようにしても良い。また、監視カメラ１０４は、会計処理の終了として、レシート発行口２３１からレシートが排出されたことを検出するための画像を撮影する。また、監視カメラ１０４は、会計処理の終了として、利用者がディスプレイ２１に対して会計処理の実行又は終了を指示する動作を行ったことを検出するための画像を撮影するようにしても良い。

監視装置１０５は、監視カメラ１０４が撮影する撮影画像を解析する画像解析装置である。監視装置１０５は、監視カメラ１０４およびアテンダント端末３に通信接続される。監視装置１０５は、監視カメラ１０４が撮影する画像を解析することによりチェックアウト装置２の作業エリアに利用者が存在するか否かを検知する。監視装置１０５は、作業エリアにおける利用者の存在チェックの結果からチェックアウト装置２で商品登録処理および会計処理を実行中の利用者が立ち去ったことを検知する。監視装置１０５は、チェックアウト装置２で処理中の利用者が立ち去ったことを検知した場合、アテンダント端末３又はチェックアウト装置２へアラートを通知する。

また、監視装置１０５は、監視カメラ１０４が撮影する画像から監視対象とするチェックアウト装置２における商品登録処理の開始および会計処理の終了を検出する。
例えば、監視装置１０５は、商品登録処理の開始として、監視カメラ１０４が撮影する画像から利用者が商品登録処理のために未登録の商品をピックアップしたことを検出する。また、監視装置１０５は、商品登録処理の開始として、監視カメラ１０４が撮影する画像から利用者がディスプレイ２１に対して商品登録処理の開始を指示する動作を行ったことを検出するようにしても良い。

また、監視装置１０５は、会計処理の終了として、監視カメラ１０４が撮影する画像からレシート発行口２３１からレシートが排出されたことを検出する。監視装置１０５は、会計処理の終了として、監視カメラ１０４が撮影する画像から利用者がディスプレイ２１に対して会計処理の実行又は終了を指示する動作を行ったことを検出するようにしても良い。

なお、図７に示す構成例において、監視装置１０５は、チェックアウト装置２に通信接続する構成とする。この場合、監視装置１０５は、チェックアウト装置２から商品登録処理の開始を示す情報、および、会計処理の終了を示す情報を取得するようにしても良い。ただし、監視装置１０５は、監視カメラ１０４が撮影する画像から商品登録処理の開始および会計処理の終了を検出する場合、チェックアウト装置２と通信しない構成としても良い。すなわち、監視装置１０５は、チェックアウト装置２とは独立した装置として、商品登録処理および会計処理の実行中に利用者が立ち去ったことを検知する構成することもできる。

次に、第２実施形態に係る監視装置１０５における制御系の構成について説明する。
図８は、第２実施形態に係る監視装置１０５における制御系の構成例を示すブロック図である。
図８に示す構成例において、監視装置１０５は、例えば、コンピュータで実現される。監視装置１０５は、監視カメラ１０４、チェックアウト装置２およびアテンダント端末３に通信接続される。

監視装置１０５は、プロセッサ１１０、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）１１１、ＲＡＭ（ｒａｎｄｏｍ－ａｃｃｅｓｓ ｍｅｍｏｒｙ）１１２、データメモリ１１３、画像インターフェース（ＩＦ）１１４、および、通信インターフェース（ＩＦ）１１５、１１６を有する。

プロセッサ１１０は、プログラムを実行することにより種々の処理を実行する。プロセッサ１１０は、例えば、ＣＰＵ（ｃｅｎｔｒａｌ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）である。プロセッサ１１０は、ＲＯＭ１１１又はデータメモリ１１３が記憶するプログラムを実行することにより各種の処理機能を実現する。

例えば、プロセッサ４０は、画像解析用のプログラムを実行することにより、監視カメラ１０４から取得する画像からチェックアウト装置２の作業エリアにおける人物の有無を検知する。また、プロセッサ４０は、動作認識用のプログラムを実行することにより、監視カメラ１０４から取得する画像から人物の動作などを認識する処理を実行する。例えば、プロセッサ４０は、利用者又はチェックアウト装置２の動作を認識することにより商品登録処理の開始および会計処理の終了を検出する。

ＲＯＭ１１１は、不揮発性のメモリであり、プログラムおよびデータを記憶する。例えば、ＲＯＭ１１１は、オペレーティングシステム、ミドルウェア、アプリケーションなどのプログラムを記憶する。また、ＲＯＭ１１１は、プロセッサ１１０が各種の処理を実行する場合に参照するデータを記憶しても良い。
ＲＡＭ１１２は、作業用のデータを記憶する。ＲＡＭ１１２は、いわゆるワークエリアとして利用されるメモリである。ＲＡＭ１１２は、プロセッサ１１０が各種の処理を実行する場合に参照するデータ、或は、一時的に使用するデータなどを適宜記憶する。

データメモリ１１３は、データを記憶するメモリである。データメモリ１１３は、書き換え可能な不揮発性のメモリである。データメモリ４３は、例えばＥＥＰＲＯＭ（登録商標）（ｅｌｅｃｔｒｉｃ ｅｒａｓａｂｌｅ ｐｒｏｇｒａｍｍａｂｌｅ ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＨＤＤ（ｈａｒｄ ｄｉｓｋ ｄｒｉｖｅ）、あるいはＳＳＤ（ｓｏｌｉｄ ｓｔａｔｅ ｄｒｉｖｅ）などで構成する。データメモリ１１３は、プロセッサ１１０が各種の処理を実行する場合に使用するデータ、或は、プロセッサ１１０による処理で生成されたデータを保存する。

例えば、データメモリ１１３は、監視カメラ１０４が撮影した画像を一定期間分保存する。さらに、データメモリ１１３は、監視カメラ１０４が撮影した画像のうち画像解析処理によってアテンダント端末３に表示させるべきと判定された一連の画像を保存する。また、データメモリ１１３は、プロセッサ１１０が実行する各種のプログラムを記憶しても良い。例えば、データメモリ４３は、画像解析処理用のプログラム、動作認識用のプログラムなどのプログラムを記憶しても良い。

プロセッサ１１０は、画像ＩＦ１１４を介して監視カメラ１０４に接続する。プロセッサ１１０は、画像ＩＦ１１４を介して監視カメラ１０４が撮影した画像（撮影画像）を取得する。なお、チェックアウト装置２が具備するカメラ２８を監視カメラ１０４として利用するようにしても良い。この場合、プロセッサ１１０は、通信ＩＦ１１５を介してチェックアウト装置２からカメラ２８が撮影する画像を取得するようにすれば良い。

プロセッサ１１０は、通信ＩＦ１１５を介してチェックアウト装置２に接続する。プロセッサ１１０は、通信ＩＦ１１５を介してチェックアウト装置２から商品登録処理の開始および会計処理の終了を示す信号を取得しても良い。また、プロセッサ１１０は、監視カメラ１０４が撮影した撮影画像に対する解析結果として得られた利用者の状況（例えば、作業エリアにおける人物の有無など）を示す情報をチェックアウト装置２へ送信するようにしても良い。

プロセッサ１１０は、通信ＩＦ１１６を介してアテンダント端末３に接続する。プロセッサ１１０は、通信ＩＦ１１６を介してアテンダント端末３に人物監視処理の結果や画像解析処理の結果として得られた情報を送信する。例えば、プロセッサ１１０は、商品登録処理を開始した利用者が会計処理を終了せずにチェックアウト装置２の作業エリアから立ち去った場合、アテンダント端末３へアラートを送信する。また、プロセッサ１１０は、アラートと共に監視カメラ１０４が撮影した撮影画像などの情報をアテンダント端末３へ送信するようにしても良い。
なお、通信ＩＦ１１５および通信ＩＦ１１６は、ＬＡＮ（ｌｏｃａｌ ａｒｅａ ｎｅｔｗｏｒｋ）などのネットワークを介してチェックアウト装置２およびアテンダント端末３と通信するための１つの通信インターフェースであっても良い。

次に、第２実施形態に係る監視装置１０５の動作について説明する。
図９は、第２実施形態に係る監視装置１０５によるチェックアウト装置２の利用者の立ち去り検知処理（人物検知処理）の動作例を説明するためのフローチャートである。
以下の説明において、監視装置１０５が監視対象するチェックアウト装置２は、第１実施形態でした図４に示すような商品登録処理および会計処理を行うものとする。また、監視カメラ１０４は、監視装置１０５が監視対象するチェックアウト装置２の作業エリアを含む撮影範囲の画像を撮影するものとする。

待機状態において、監視装置１０５のプロセッサ１１０は、画像ＩＦ１１４を介して監視対象のチェックアウト装置２における商品登録処理の開始を検知する処理を実行する（ＡＣＴ３１－３３）。図９に示す動作例において、プロセッサ１１０は、画像ＩＦ１１４を介してチェックアウト装置２における商品登録処理の開始を検出するための画像を監視カメラ１０４から取得する（ＡＣＴ３１）。

プロセッサ１１０は、監視カメラ１０４から取得する画像に基づいて商品登録処理の開始を検知する処理（商品登録開始の検知処理）を実行する（ＡＣＴ３２）。
例えば、プロセッサ１１０は、監視カメラ１０４が撮影する画像から利用者が商品登録処理のために未登録の商品をピックアップしたことを検出する。プロセッサ１１０は、利用者が商品登録処理のために未登録の商品をピックアップしたことを検出した場合に商品登録処理が開始されたものと判定する。また、監視装置１０５は、監視カメラ１０４が撮影する画像から利用者がチェックアウト装置２のディスプレイ２１に対して商品登録処理の開始を指示する動作を行ったことを検出するようにしても良い。この場合、プロセッサ１１０は、利用者が商品登録処理の開始を指示する動作を行ったことを検出した場合に商品登録処理が開始されたものと判定する。

なお、プロセッサ１１０は、通信ＩＦ１１５を介してチェックアウト装置２から商品登録処理の開始を示す信号を取得するようにしても良い。この場合、プロセッサ１１０は、ＡＣＴ３１および３２に代わる処理として、チェックアウト装置２から商品登録処理の開始を示す信号を取得したか否かを判定する処理を行う。

商品登録処理の開始を検出していない場合（ＡＣＴ３３、ＮＯ）、プロセッサ１１０は、ＡＣＴ３１へ戻り、上述した処理を繰り返し実行する。
商品登録処理の開始を検出した場合（ＡＣＴ３３、ＹＥＳ）プロセッサ１１０は、画像ＩＦ１１４を介して監視対象とするチェックアウト装置２の作業エリアを含む範囲を撮影した画像を監視カメラ１０４から取得する（ＡＣＴ３４）。例えば、プロセッサ１１０は、監視対象とする作業エリアを含む撮影範囲を監視カメラ１０４が撮影した画像（映像）を所定周期で取得する。

プロセッサ１１０は、画像ＩＦ１１４を介して取得する監視カメラ１０４が撮影した画像に基づいて作業エリアに利用者が存在するか否かをチェックする（ＡＣＴ３５）。プロセッサ１１０は、監視カメラ１０４が撮影した画像を解析することにより監視対象の作業エリアに利用者が存在しているかを判断する存在チェックを行う。例えば、プロセッサ１１０は、ＯｐｅｎＰｏｓｅのような骨格推定技術を用いて利用者が作業エリアに存在するか否かを判定する。また、プロセッサ１１０は、ＳＳＤのような物体検出技術を用いて利用者が作業エリアに存在するか否かを判定するようにしても良い。

プロセッサ１１０は、監視カメラ１０４が撮影した画像に基づく利用者の存在チェックの結果に基づいて利用者が立ち去ったか否かを判断する（ＡＣＴ３６）。例えば、プロセッサ１１０は、作業エリアに利用者が存在しないことを検出した場合に利用者が立ち去ったものと判断する。また、プロセッサ１１０は、利用者が作業エリアに存在しない期間が所定期間を超えた場合に利用者が作業エリアから立ち去ったと判断するようにしても良い。

利用者が立ち去ったと判断した場合（ＡＣＴ３６、ＹＥＳ）、プロセッサ１１０は、アラートを出力する（ＡＣＴ４０）。プロセッサ１１０は、通信ＩＦ１１６を介してアテンダント端末３に未会計の利用者が立ち去ったことを検知したことを示すアラートを通知する。アテンダント端末３は、チェックアウト装置２からのアラートの通知に応じて利用者が立ち去ったことを検知したことをディスプレイ７０に表示する。例えば、アテンダント端末３は、第１実施形態で説明した図６に示すような警告画面をディスプレイ７０に表示する。また、プロセッサ１１０は、アラートの通知を監視対象とするチェックアウト装置２へ通知し、当該チェックアウト装置２の警告灯２９を点灯させるようにしても良い。

なお、プロセッサ１１０は、通信ＩＦ１１５又は１１６を介して通信可能とする店員やセキュリティ担当者などの係員が所持するモバイル端末にアラートを通知しても良い。この場合、モバイル端末は、例えば、監視装置１０５からのアラートの通知に応じて利用者が立ち去ったことを検知したことを画面上にポップアップ表示するようにする。これにより、モバイル端末を所持する係員は、監視装置１０５からのアラートによって、利用者の立ち去りを認識でき、当該利用者の行動を目視で確認することが可能となる。

利用者が立ち去ったと判断していない場合（利用者が作業エリアに存在する場合）（ＡＣＴ３６、ＮＯ）、プロセッサ１１０は、監視対象のチェックアウト装置２における会計処理の終了を検出する処理を実行する（ＡＣＴ３７－３９）。図９に示す例において、プロセッサ１１０は、画像ＩＦ１１４を介してチェックアウト装置２における会計処理の終了を検出するための画像を監視カメラ１０４から取得する（ＡＣＴ３７）。

プロセッサ１１０は、監視カメラ１０４から取得する画像に基づいて会計処理の終了を検知する処理（会計終了の検知処理）を実行する（ＡＣＴ３８）。
例えば、プロセッサ１１０は、監視カメラ１０４が撮影する画像からレシート発行口２３１からレシートが排出されたことを検出する。この場合、プロセッサ１１０は、レシート発行口２３１からレシートが排出されたことを検出した場合にチェックアウト装置２での会計処理が終了したものと判定する。また、プロセッサ１１０は、監視カメラ１０４が撮影する画像から利用者がディスプレイ２１に対して会計処理の実行又は終了を指示する動作を行ったことを検出するようにしても良い。この場合、プロセッサ１１０は、利用者が会計処理の実行又は終了を指示する動作を行ったことを検出した場合にチェックアウト装置２での会計処理が終了したものと判定する。

なお、プロセッサ１１０は、通信ＩＦ１１５を介してチェックアウト装置２から会計処理の終了を示す情報を取得するようにしても良い。この場合、プロセッサ１１０は、ＡＣＴ３７－３８に代わる処理として、チェックアウト装置２から会計処理の終了を示す信号を取得したか否かを判定する処理を行う。

会計処理が終了したことを検出していない場合（ＡＣＴ３９、ＮＯ）、プロセッサ１１０は、ＡＣＴ３４へ戻り、上述した処理を繰り返し実行する。会計処理が終了したことを検出した場合（ＡＣＴ３９、ＹＥＳ）、プロセッサ１１０は、商品登録処理および会計処理を含む一連の処理中における利用者の立ち去りを検知する人物監視処理を終了する。

なお、プロセッサ１１０は、作業エリアにおける人の存在の有無にかかわらずに、監視カメラ１０４が撮影した画像をデータメモリ１１３に記憶するようにしても良い。この場合、プロセッサ１１０は、データメモリ１１３に記憶する撮影画像に撮影時刻を対応づけて記録する。さらに、プロセッサ１１０は、作業エリアに人が存在することが検出された時刻（作業エリアに人が進入してきた時刻）などをデータメモリ１１３に記録しておくようにしても良い。

以上のように、第２実施形態に係る監視装置は、監視対象のチェックアウト装置において商品登録処理が開始されてから会計処理が完了するまでの間、監視カメラが撮影する映像に基づいて利用者の立ち去りを監視する。監視装置は、監視対象のチェックアウト装置における商品登録処理の開始から会計処理の完了までの間に監視カメラが撮影する映像を取得する。監視装置は、監視カメラが撮影する画像に基づいて利用者が所定領域（作業エリア）に存在するか否かを検出する。監視装置は、チェックアウト装置で商品登録処理を開始した利用者が会計処理の完了までの間に利用者の立ち去りを検知した場合にアラートを出力する。

これにより、監視装置は、チェックアウト装置で商品登録処理を開始した利用者が会計処理を終了せずに立ち去ったことを報知することができる。また、監視装置は、監視カメラが撮影する画像に基づいて、チェックアウト装置の作業エリアに人物が存在するか否かを検出できる。このため、監視装置は、チェックアウト装置の作業エリアを俯瞰的に撮影する監視カメラの映像により利用者の立ち去りを検知できる。この結果、監視装置は、遮蔽物などで検出不可となる人感センサによる人物検知とは異なり、作業エリアが広範囲であっても利用者に立ち去りを確実に検出できる。

さらに、第１および第２実施形態では、装置内部に本発明を実施する機能が予め記録されている場合で説明をしたが、これに限らず同様の機能をネットワークから装置にダウンロードしても良いし、同様の機能を記録媒体に記憶させたものを装置にインストールしても良い。記録媒体としては、ＣＤ－ＲＯＭ等プログラムを記憶でき、且つ装置が読み取り可能な記録媒体であれば、その形態はいずれの形態であっても良い。またこのように予めインストールやダウンロードにより得る機能は装置内部のＯＳ（オペレーティングシステム）等と協動してその機能を実現させるものであっても良い。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

２…チェックアウト装置、３…アテンダント端末、４０…プロセッサ、５１…カメラインターフェース、５２…警告灯インターフェース、５３…通信インターフェース、１０１…チェックアウトシステム、１０４…監視カメラ１０４…監視装置（画像解析装置）、１１０…プロセッサ、１１４…画像インターフェース、１１５、１１６…通信インターフェース。

Claims (6)

1. 人物が商品の情報を登録する登録作業と前記商品の精算金額を決済する作業とを行うための作業エリアを撮影範囲に含むカメラが撮影した画像を取得するカメラインターフェースと、
   前記人物の登録作業に応じて商品の情報を登録する登録処理と前記登録処理で登録した情報に基づいて前記商品の精算金額を決済する会計処理とを行い、前記登録処理を開始してから前記会計処理が終了するまでの間に前記カメラが撮影する画像において前記人物が前記作業エリアに存在しないことを検知した場合にアラートを出力するプロセッサと、
   を有するチェックアウト装置。
2. さらに、監視員が目視するディスプレイを具備するアテンダント端末と通信する通信インターフェースを有し、
   前記プロセッサは、前記登録処理を開始してから前記会計処理が終了するまでの間に前記カメラが撮影する画像から前記人物が前記作業エリアに存在しないことを検知した場合に前記チェックアウト装置における会計を終了していない人物が立ち去ったことを前記アテンダント端末に報知させる、
   請求項１に記載のチェックアウト装置。
3. チェックアウト装置に対して人物が商品の情報を登録させる登録作業と前記商品の精算金額を決済する作業とを行うための作業エリアを撮影範囲に含むカメラが撮影した画像を取得するカメラインターフェースと、
   人物が前記チェックアウト装置に対する登録作業を開始してから前記チェックアウト装置が前記商品の精算金額を決済する会計処理を終了するまでの間に前記カメラが撮影する画像において前記人物が前記作業エリアから立ち去ったことを検知した場合にアラートを出力するプロセッサと、を有する、
   監視装置。
4. 前記プロセッサは、前記登録作業の開始、および、前記会計処理の終了を前記カメラが撮影する画像から検知する、
   請求項３に記載の監視装置。
5. さらに、前記チェックアウト装置と通信する通信インターフェースを有し、
   前記プロセッサは、前記チェックアウト装置から通知される情報に基づいて前記登録作業の開始および前記会計処理の終了を検知する、
   請求項３に記載の監視装置。
6. コンピュータに
   チェックアウト装置に対して人物が商品の情報を登録させる登録作業と登録した商品の精算金額を決済する作業とを行うための作業エリアを撮影範囲に含むカメラが撮影した画像を取得させ、
   人物が前記チェックアウト装置に対して前記登録作業を開始してから前記チェックアウト装置が前記商品の精算金額を決済する会計処理を終了するまでの間に前記カメラが撮影する画像において前記人物が前記作業エリアから立ち去ったことを検出した場合にアラートを出力させる、
   ことを実行させる監視プログラム。

Images