JP2011113442A - 会計処理判定装置、会計処理判定装置の制御方法およびプログラム - Google Patents
会計処理判定装置、会計処理判定装置の制御方法およびプログラム Download PDFInfo
- Publication number
- JP2011113442A JP2011113442A JP2009271238A JP2009271238A JP2011113442A JP 2011113442 A JP2011113442 A JP 2011113442A JP 2009271238 A JP2009271238 A JP 2009271238A JP 2009271238 A JP2009271238 A JP 2009271238A JP 2011113442 A JP2011113442 A JP 2011113442A
- Authority
- JP
- Japan
- Prior art keywords
- accounting
- processing
- unit
- customer
- determination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 265
- 238000012545 processing Methods 0.000 title claims abstract description 255
- 230000008569 process Effects 0.000 claims description 229
- 238000001514 detection method Methods 0.000 claims description 26
- 230000000694 effects Effects 0.000 abstract description 2
- 238000012544 monitoring process Methods 0.000 description 42
- 238000003384 imaging method Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 108700028516 Lan-7 Proteins 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000008571 general function Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003449 preventive effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Cash Registers Or Receiving Machines (AREA)
Abstract
【課題】店内における顧客や店員の不正行為を容易且つ迅速に検出可能な会計処理判定装置、会計処理判定装置の制御方法およびプログラムを提供する。
【解決手段】会計処理部11による会計処理に関するキーワードを記憶するキーワード記憶部61と、会計処理時における顧客および店員の音声を取得する音声取得部41,51と、会計処理時において、キーワード記憶部61に記憶されているキーワードを、音声取得部41,51により取得したか否かに応じて、会計処理が正常に行われたか否かを判定する会計処理判定部62と、会計処理が正常に行われなかったと判定された場合、オペレーターおよび管理者に対して警告を行う警告部25,65と、を備えた。
【選択図】図2
【解決手段】会計処理部11による会計処理に関するキーワードを記憶するキーワード記憶部61と、会計処理時における顧客および店員の音声を取得する音声取得部41,51と、会計処理時において、キーワード記憶部61に記憶されているキーワードを、音声取得部41,51により取得したか否かに応じて、会計処理が正常に行われたか否かを判定する会計処理判定部62と、会計処理が正常に行われなかったと判定された場合、オペレーターおよび管理者に対して警告を行う警告部25,65と、を備えた。
【選択図】図2
Description
本発明は、スーパーマーケット等の小売店やファミリーレストラン等の飲食店内において、店員や顧客による不正行為を検出するための会計処理判定装置、会計処理判定装置の制御方法およびプログラムに関するものである。
従来、小売店や飲食店内において、店員による会計処理時の不正行為を検出するためのシステムとして、特許文献1が提案されている。当該特許文献1に記載のシステムは、POS(Point Of Sales)端末(POSターミナル)と、POS端末周辺を撮像するカメラと、フォトジャーナルレコーダーと、検索端末と、により構成されている。フォトジャーナルレコーダーとは、ジャーナルデーター(取引履歴データー)と、カメラにより撮像されたPOS端末周辺の画像データーと、店員によるPOS端末の操作履歴(操作履歴データー)と、を関連付けて記録するものである。そして、管理者が検索端末を用いて、時間やPOS端末の操作情報等の所定の検索条件を指定することにより、検索条件に一致するジャーナルデーターや画像データーをディスプレイに表示する。
しかしながら、上記特許文献1に記載のシステムでは、管理者が指定した検索条件に一致する記録データー(会計処理の内容およびその時の撮像画像)を一覧表示するのみであり、会計処理において不正行為が行われたか否かを検出するためには、逐一、管理者が記録データーを確認しなければならない。また、膨大な記録データーを確認する必要があるため、不正行為の検出漏れが発生するといった問題もある。このように、従来提案されているシステムでは、確実に不正行為を検出することができず、不正行為の防止策としての効果が低かった。
本発明は、上記の問題に鑑み、店員や顧客の不正行為を容易且つ迅速に検出可能な会計処理判定装置、会計処理判定装置の制御方法およびプログラムを提供することを目的とする。
本発明の会計処理判定装置は、会計処理部による会計処理に関するキーワードを記憶するキーワード記憶部と、会計処理時における店員および顧客の少なくとも一方の音声を取得する音声取得部と、会計処理時において、キーワード記憶部に記憶されているキーワードを、音声取得部により取得したか否かに応じて、会計処理が正常に行われたか否かを判定する会計処理判定部と、を備えたことを特徴とする。
本発明の会計処理判定装置の制御方法は、会計処理部と、当該会計処理部による会計処理に関するキーワードを記憶するキーワード記憶部と、を内部または外部に備えた会計処理判定装置の制御方法であって、会計処理判定装置が、会計処理時における店員および顧客の少なくとも一方の音声を取得する音声取得ステップと、音声取得ステップにおいて、キーワード記憶部に記憶されているキーワードを取得したか否かに応じて、会計処理が正常に行われたか否かを判定する会計処理判定ステップと、を実行することを特徴とする。
これらの構成によれば、会計処理時におけるキーワードの取得の有無に応じて、会計処理が正常に行われたか否かを判定することができる。これにより、会計処理時において即座に判定を行うことができるため、迅速に不正行為を検出することができる。また、膨大な記録データーを確認する必要がないため、検出漏れの心配もなく、容易且つ確実に不正行為を検出することができる。
なお、会計処理判定部(会計処理判定ステップ)は、キーワード記憶部に記憶されているキーワードを取得した場合に、会計処理が正常に行われたと判定しても良いし、キーワード記憶部に記憶されているキーワードを取得しなかった場合に、会計処理が正常に行われたと判定しても良い。
なお、会計処理判定部(会計処理判定ステップ)は、キーワード記憶部に記憶されているキーワードを取得した場合に、会計処理が正常に行われたと判定しても良いし、キーワード記憶部に記憶されているキーワードを取得しなかった場合に、会計処理が正常に行われたと判定しても良い。
上記に記載の会計処理判定装置において、キーワード記憶部は、会計処理の処理内容ごとにキーワードを記憶しており、会計処理部で実行されている処理内容を判定する処理内容判定部をさらに備え、会計処理判定部は、処理内容判定部により判定された処理内容に対応するキーワードを、音声取得部により取得したか否かに応じて、会計処理が正常に行われたか否かを判定することが好ましい。
この構成によれば、会計処理部で実行されている処理内容を判定し、判定された処理内容に対応するキーワードの取得の有無に応じて、会計処理が正常に行われたか否かを判定することができる。これにより、処理内容ごとに取得対象キーワードを絞り込むことができるため、キーワードの認識精度を上げることができ、ひいては会計処理が正常に行われたか否かの判定精度を上げることができる。また、取得対象キーワードの削減により、ロースペックのコンピューターでも処理可能となり、装置の小型化、ローコスト化および省電力化を図ることができる。
上記に記載の会計処理判定装置において、会計処理判定部は、会計処理時において、処理内容判定部により判定された処理内容に対応するキーワードを取得しなかった場合、会計処理が正常に行われなかったと判定し、会計処理判定部により、会計処理が正常に行われなかったと判定された場合、会計処理部を操作している店員および予め定められた管理者の少なくとも一方に対して警告を行う警告部をさらに備えたことが好ましい。
この構成によれば、店員や管理者は、会計処理が正常に行われなかった旨を確認することができる。これにより、不正行為に対する適切な対処および対応を行うことができる。
上記に記載の会計処理判定装置において、警告部は、管理者に対し、電子メールまたはWebアプリケーションを用いて、会計処理が正常に行われなかった旨を通知することが好ましい。
この構成によれば、管理者の居場所に関わらず、会計処理が正常に行われなかった旨を確実に通知することができる。
上記に記載の会計処理判定装置において、処理内容判定部は、会計処理の取引金額を判定し、警告部は、会計処理の取引金額に応じて、警告先および警告方法の少なくとも一方を可変することが好ましい。
この構成によれば、例えば、取引金額が大きい場合は権限の大きい管理者に対して警告を行うなど、取引金額に応じた適切な警告先(会計処理部を操作している店員、管理者など)に対して警告を行うことができる。また、例えば、取引金額が大きい場合は、大音量の警告音を発したり、ディスプレイ表示による警告を行うなど、取引金額に応じた適切な警告方法で警告を行うことができる。
なお、「警告方法を可変する」とは、音声警告の場合、音声パターン、音量、警告回数、警告間隔などを可変することを指す。また、表示警告の場合、表示内容、表示色、表示回数、表示間隔などを可変することを指す。また、通知警告の場合、通知内容、通知方法、通知回数などを可変することを指す。さらに、音声、表示、通知など、警告手段を可変することも、警告方法を可変することに含まれる。
なお、「警告方法を可変する」とは、音声警告の場合、音声パターン、音量、警告回数、警告間隔などを可変することを指す。また、表示警告の場合、表示内容、表示色、表示回数、表示間隔などを可変することを指す。また、通知警告の場合、通知内容、通知方法、通知回数などを可変することを指す。さらに、音声、表示、通知など、警告手段を可変することも、警告方法を可変することに含まれる。
上記に記載の会計処理判定装置において、会計処理判定部により、会計処理が正常に行われなかったと判定されたときの店員および顧客の少なくとも一方の音声から特定される対象者声紋と、その判定回数と、を関連付けて記憶しておく不正履歴記憶部をさらに備え、警告部は、会計処理判定部により、会計処理が正常に行われなかったと判定された場合であって、その対象者の声紋と一致する対象者声紋が不正履歴記憶部に記憶されている場合、当該対象者声紋に関連付けられている過去の判定回数に応じて、警告先および警告方法の少なくとも一方を可変することが好ましい。
この構成によれば、店員や顧客の過去の不正判定回数(会計処理が正常に行われなかったと判定された回数)に応じて、警告先や警告方法を可変することができる。これにより、例えば、判定回数が多い場合は、不正行為の可能性が高いため、より多くの警告先に対して警告を行ったり、より確実な警告方法を採用したりなど、不正行為の可能性の高さに応じた適切な警告を行うことができる。
上記に記載の会計処理判定装置において、会計処理の対象顧客を検出する顧客検出部をさらに備え、警告部は、顧客検出部による対象顧客の検出の有無に応じて、警告先および警告方法の少なくとも一方を可変することが好ましい。
一般的に、対象顧客が存在しない場合は、対象顧客が存在する場合よりも不正行為の可能性が高いと言える。この構成によれば、例えば、対象顧客が存在しない場合は、より多くの警告先に対して警告を行ったり、より確実な警告方法を採用したりなど、不正行為の可能性の高さに応じた適切な警告を行うことができる。
上記に記載の会計処理判定装置において、会計処理の対象顧客を検出する顧客検出部をさらに備え、会計処理判定部は、処理内容判定部により判定された処理内容に対応するキーワードを取得せず、且つ顧客検出部により対象顧客を検出できなかった場合、会計処理が正常に行われなかったと判定することが好ましい。
この構成によれば、処理内容に対応するキーワードを取得できなかったことと、対象顧客を検出できなかったこと、の2つの条件を満たす場合に、会計処理が正常に行われなかったと判定する。これにより、誤判定の可能性を低くすることができる。
上記に記載の会計処理判定装置において、処理内容判定部により、処理内容が、特定の人に対して商品の割引きを行う特定割引処理であると判定された場合、会計処理判定部は、特定割引処理に対応するキーワードを取得せず、且つ顧客検出部により特定の人に該当する対象顧客を検出できなかった場合、会計処理が正常に行われなかったと判定することが好ましい。
この構成によれば、特定割引処理の場合は、特定割引処理に対応するキーワードを取得できなかったことと、特定の人に該当する対象顧客を検出できなかったこと、の2つの条件を満たす場合に、会計処理が正常に行われなかったと判定する。これにより、誤判定の可能性を低くすることができる。
上記に記載の会計処理判定装置において、処理内容判定部により、処理内容が、精算時における商品コード読取処理であると判定された場合、会計処理判定部は、商品コード読取処理に対応するキーワードを取得せず、且つ商品コードの読取結果を取得できなかった場合、会計処理が正常に行われなかったと判定することが好ましい。
この構成によれば、商品コード読取処理(バーコードスキャン処理)の場合は、商品コード読取処理に対応するキーワードを取得できなかったことと、商品コードの読取結果を取得できなかったこと、の2つの条件を満たす場合に、会計処理が正常に行われなかったと判定する。これにより、誤判定の可能性を低くすることができる。
なお、上記に記載の会計処理判定装置において、会計処理判定部は、商品コード読取処理に対応するキーワードを取得した場合であっても、商品コード読取処理時に取得した音声の認識結果から特定される商品と、商品コードの読取結果とが一致しなかった場合、会計処理が正常に行われなかったと判定しても良い。
一般的に、商品コード読取処理時には、店員が発する音声(「○○が一点。」など)と、商品コードの読取結果とが一致する。この構成によれば、これらが一致しない場合、会計処理が正常に行われなかった(カラスキャンの可能性あり)と判定することができ、より確実に不正行為を検出することができる。
なお、会計処理判定部は、1回の会計処理内において、取得した音声の認識結果(解析結果)から特定される商品と、商品コードの読取結果とが一致しなかった回数が、所定回数を超えた場合に、会計処理が正常に行われなかったと判定しても良い。この構成によれば、店員が、悪意なく1回だけ商品名を誤って発声してしまった場合、即座に「会計処理が正常に行われなかった」と判定されてしまうような不具合を解消することができる。なお、この場合は、店員に対してオペレーションをやり直すように促すための報知を行うことが好ましい。
なお、会計処理判定部は、1回の会計処理内において、取得した音声の認識結果(解析結果)から特定される商品と、商品コードの読取結果とが一致しなかった回数が、所定回数を超えた場合に、会計処理が正常に行われなかったと判定しても良い。この構成によれば、店員が、悪意なく1回だけ商品名を誤って発声してしまった場合、即座に「会計処理が正常に行われなかった」と判定されてしまうような不具合を解消することができる。なお、この場合は、店員に対してオペレーションをやり直すように促すための報知を行うことが好ましい。
上記に記載の会計処理判定装置において、キーワード記憶部は、店員を対象とした店員用キーワードと、顧客を対象とした顧客用キーワードと、を区別して記憶しており、音声取得部により取得した店員の音声と、顧客の音声と、を区別して認識する音声認識部をさらに備え、会計処理判定部は、店員および顧客から、それぞれ店員用キーワードおよび顧客用キーワードを取得したか否かに応じて、会計処理が正常に行われたか否かを判定することが好ましい。
この構成によれば、店員の音声と、顧客の音声と、を区別して認識することで、取得対象キーワードを絞り込むことができる。これにより、キーワードの認識精度を上げることができ、ひいては会計処理が正常に行われたか否かの判定精度を上げることができる。
なお、上記に記載の会計処理判定装置において、音声取得部は、店員に対して指向性を持つ店員用音声取得部と、顧客に対して指向性を持つ顧客用音声取得部と、から成っても良い。
この構成によれば、店員または顧客に対して指向性を持つ専用の音声取得部を設けることで、確実且つ容易に、店員の音声と、顧客の音声と、を区別して認識することができる。
また、上記に記載の会計処理判定装置において店員の声紋を記憶しておく店員声紋記憶部をさらに備え、音声認識部は、取得した音声の声紋が、店員声紋記憶部に記憶されている声紋と一致するか否かに応じて、店員の音声と、顧客の音声と、を区別しても良い。
この構成によれば、取得した音声の声紋が、予め記憶されている店員の声紋と一致するか否かに応じて、店員の音声と、顧客の音声と、を区別することができるため、音声取得部をそれぞれ独立して設ける必要がない。これにより、システム構築に要するイニシャライズコストを軽減することができる。
上記に記載の会計処理判定装置において、会計処理判定部は、処理内容判定部により、処理内容が会計処理の例外処理を示す所定の処理であると判定された場合のみ、会計処理が正常に行われたか否かを判定することが好ましい。
この構成によれば、会計処理が正常に行われたか否かの判定を、例外処理時のみに限定することで、取得対象キーワードを絞り込むことができる。これにより、キーワードの認識精度を上げることができ、ひいては会計処理が正常に行われたか否かの判定精度を上げることができる。
なお、上記に記載の会計処理判定装置において、会計処理部の会計処理結果である会計情報をレシート用紙に印刷する印刷部をさらに備えても良い。
この構成によれば、レシートプリンターによって、本発明の会計処理判定装置を実現することができる。
本発明のプログラムは、コンピューターに、上記に記載の会計処理判定装置の制御方法における各ステップを実行させることを特徴とする。
このプログラムを実行することにより、店員や顧客の不正行為を容易且つ迅速に検出可能な会計処理判定装置の制御方法を実現することができる。
以下、添付の図面を参照し、本発明の会計処理判定装置、会計処理判定装置の制御方法およびプログラムについて説明する。なお、以下に示す各実施形態では、本発明の会計処理判定装置を、店舗監視システムに適用した場合について例示する。当該店舗監視システムは、スーパーマーケット等の小売店内において、店員や顧客による不正行為を検出するべく構築されたものである。
[第1実施形態]
図1は、第1実施形態に係る店舗監視システムSYのシステム構成図である。同図に示すように、店舗監視システムSYは、会計処理を行うPOS端末1と、レシート(図示省略)を発行するレシートプリンター2と、商品に貼付または印刷されたバーコードを読み取るハンディスキャナー3と、商品情報を表示するカスタマディスプレイ4と、店員(オペレーター)が装着するヘッドセット5と、店舗監視システムSYを統括する店舗管理サーバー6と、ヘッドセット5と無線LAN7を介して通信を行う無線LANルーター8と、により構成されている。POS端末1とレシートプリンター2、POS端末1とハンディスキャナー3、レシートプリンター2とカスタマディスプレイ4、並びにレシートプリンター2と無線LANルーター8は、それぞれシリアルインターフェース(例えば、USB(Universal Serial Bus)インターフェース)により接続されている。また、POS端末1、レシートプリンター2、および店舗管理サーバー6は、店舗内有線LAN9により接続されている。
図1は、第1実施形態に係る店舗監視システムSYのシステム構成図である。同図に示すように、店舗監視システムSYは、会計処理を行うPOS端末1と、レシート(図示省略)を発行するレシートプリンター2と、商品に貼付または印刷されたバーコードを読み取るハンディスキャナー3と、商品情報を表示するカスタマディスプレイ4と、店員(オペレーター)が装着するヘッドセット5と、店舗監視システムSYを統括する店舗管理サーバー6と、ヘッドセット5と無線LAN7を介して通信を行う無線LANルーター8と、により構成されている。POS端末1とレシートプリンター2、POS端末1とハンディスキャナー3、レシートプリンター2とカスタマディスプレイ4、並びにレシートプリンター2と無線LANルーター8は、それぞれシリアルインターフェース(例えば、USB(Universal Serial Bus)インターフェース)により接続されている。また、POS端末1、レシートプリンター2、および店舗管理サーバー6は、店舗内有線LAN9により接続されている。
一方、店舗管理サーバー6は、インターネット等のネットワークNTを介して携帯電話会社110と接続されている。また、図示の携帯電話120は、店舗において所定の権限を有する管理者(マネージャーや店長など)によって所持され、電話回線130および携帯電話会社110を介して、ヘッドセット5を装着した店員と通話を行うことができるようになっている。
なお、図1では、POS端末1が1台の場合を示しているが、店舗内に複数のレジカウンター10が設置されている場合、レジカウンター10ごとに、POS端末1が設けられる。すなわち、この場合は、複数のPOS端末1、レシートプリンター2、ハンディスキャナー3、カスタマディスプレイ4、ヘッドセット5および無線LANルーター8が、店舗監視システムSYの構成要素となる。また、請求項における「会計処理判定装置」は、上記の構成要素のうち、レシートプリンター2、カスタマディスプレイ4、ヘッドセット5、無線LANルーター8および店舗管理サーバー6から成る。
POS端末1は、レジカウンター10に設置されたレジスターであり、店員により入力された商品情報に基づいて会計処理を行う。そして、会計処理の処理結果である会計情報(トランザクションデーター)や、種々の操作結果を、レシートプリンター2に出力する。また、ハンディスキャナー3は、商品コードなどが記録された商品バーコードを読み取り、その読取結果をPOS端末1に出力する。
カスタマディスプレイ4は、顧客用マイク4aを有し、顧客に対して、商品名や商品価格を表示する顧客用ディスプレイとしての一般的な機能の他、顧客の音声を取得する機能を有している。顧客用マイク4aは、小型集音マイクであり、カスタマディスプレイ4の周縁部に、顧客側に向けて設けられる。
ヘッドセット5は、インカムとも称されるものであり、店員用マイク5aと、ヘッドフォン(図示省略)を有している。POS端末1を操作する店員は、このヘッドセット5の装着が義務付けられており、これを用いて管理者(携帯電話120)との通話を行う。
レシートプリンター2は、POS端末1から出力された会計情報に基づいて、レシートを発行すると共に、POS端末1で実行された処理の内容(以下、「処理内容」と称する)を判定する。また、レシートプリンター2は、カスタマディスプレイ4およびヘッドセット5から、顧客の音声データーおよび店員の音声データーを取得し、その音声認識結果を店舗管理サーバー6へ出力する。このように、レシートプリンター2を主幹として各種情報の入出力を行うことで(レシートプリンター2が、取得した各種情報をフィルタリングして必要な情報を出力することで)、POS基幹ネットワーク(POS端末1を主幹としたネットワーク)のトラフィックに影響を与えることがない。また、既存のPOSシステムに本発明を適用する際、POS基幹ネットワーク自体の変更が不要となる。
店舗管理サーバー6は、顧客および店員の音声認識結果と、POS端末1で実行された処理内容と、を照合し、会計処理が正常に行われたか否かを判定する。例えば、会計処理が実行されたにも関わらず、店員の音声データーを取得できなかった場合は、会計処理が正常に行われなかったと判定し、警告を行う。また、店舗管理サーバー6は、会計処理が正常に行われたか否かに関する不正履歴を会計処理ごとに記録し、不図示のプリンターにより、その記録結果(不正レポート)を印刷出力する。当該不正レポートは、不正履歴を、顧客、店員または処理内容ごとに分類したものであり、店舗内不正の検証および不正行為の証拠として用いられる。
次に、図2を参照し、店舗監視システムSYの機能構成について説明する。POS端末1は、主な機能構成として、会計処理部11を有している。会計処理部11は、POSアプリケーション(図示省略)を主要部とするものであり、スキャン処理(商品コード読取処理)や例外処理を含む会計処理を実行する。また、それらの処理結果を、会計情報としてレシートプリンター2に出力する。
なお、本実施形態において、例外処理とは、不正行為に関連する可能性の高い所定の処理を指す。具体的には、商品の返品を行うための「返品処理」、会計処理後に当該会計処理の取り消し行うための「ミスレジ処理(取消処理)」、商品の値引きを行うための「値引処理」、商品の割引きを行うための「割引処理」、会計処理中において入力データーをキャンセルするための「中止処理」、および金銭の両替を行うための「両替処理」、キャッシュドロア内の金銭と売上を照合するための「点検処理」、出金または返金を行うための「出金/返金処理」、およびレシートを再発行するための「再発行処理」などを指す。これらの各処理は、例外処理の種別として区別される。また、便宜上、上記のスキャン処理は、これらの例外処理と区別して、通常処理と称する。
カスタマディスプレイ4に設けられた顧客用マイク4aは、主な機能構成として、顧客用音声取得部41を有している。顧客用音声取得部41は、顧客の音声信号を取得し、レシートプリンター2に出力する。また、ヘッドセット5に設けられた店員用マイク5aは、主な機能構成として、店員用音声取得部51を有している。店員用音声取得部51は、店員の音声信号を取得し、レシートプリンター2に出力する。
レシートプリンター2は、主な機能構成として、会計情報取得部21、処理内容判定部22、音声認識部23、印刷部24およびオペレーター警告部25を有している。会計情報取得部21は、POS端末1(会計処理部11)から出力された会計情報を取得する。
処理内容判定部22は、会計処理部11で実行されている処理内容を判定し、その判定結果を店舗管理サーバー6に出力する。処理内容については、印刷データーとして用いられる会計情報に基づいて、判定を行う。具体的には、POS端末1から出力された印刷データーをタップしてテキストデーターに変換し、意味解析を行って処理内容を判定する。なお、レシートプリンター2は、カスタマディスプレイ4と接続されているため、POS端末1から出力されたカスタマディスプレイ4への表示データーをタップして、処理内容を判定しても良い。また、例外処理時に操作される所定キーの操作結果および通常処理時に読み取られる商品コードの取得によって判定を行うことも可能である。例外処理の具体的な判定方法としては、POS端末1にPOSキーボード用のフックドライバーをインストールすることにより、POSキーボードの操作結果(キーコード)を会計情報取得部21経由で処理内容判定部22へ送信し、処理内容判定部22により例外処理時に操作される所定キーのキーコードを検出することで処理内容の特定を行う。また、通常処理時の具体的な判定方法としては、POS端末1にハンディスキャナー用のフックドライバーをインストールすることにより、ハンディスキャナーからの商品コードをタップし、その結果を会計情報取得部21経由で処理内容判定部22へ送信することで処理内容の特定を行う。この場合は、会計処理の取引開始時に、POS端末1の操作(=処理内容)を判定することができる。
音声認識部23は、顧客用音声取得部41および店員用音声取得部51から音声データーを取得し、音声認識を行う。当該音声認識部23は、顧客の音声認識を行う顧客用音声認識部231と、店員の音声認識を行う店員用音声認識部232と、から成り、各音声認識部231,232は、音響モデル111,112、単語辞書121,122および言語モデル131,132を有している(図5参照)。詳細については、後述する。
印刷部24は、会計情報取得部21が取得した会計情報をレシート用紙に印刷し、レシートを発行する。また、オペレーター警告部25は、後述する会計処理判定部62により、会計処理が正常に行われなかったと判定された場合、POS端末1を操作する店員(オペレーター)に対し、会計処理が正常に行われなかった旨を報知する。報知方法としては、オペレーターディスプレイ(図示省略)への表示、音声発生、LEDの点灯/点滅、バイブレーターによる振動などが考えられる。
店舗管理サーバー6は、主な機能構成として、キーワード記憶部61、会計処理判定部62、不正履歴記録部63、不正履歴記憶部64および管理者警告部65を有している。キーワード記憶部61は、会計処理部11による会計処理に関するキーワードを記憶するものであり、顧客用キーワードデーターベースDB1と、顧客用キーワードデーターベースDB2と、が含まれる。ここで、図3を参照し、各キーワードデーターベースDB1,DB2について説明する。
図3(a)は、顧客用キーワードデーターベースDB1の一例を示す図である。同図に示すように、顧客用キーワードデーターベースDB1は、処理内容ごとに、顧客用キーワードが関連付けられている。顧客用フレーズは、顧客用キーワードを含むフレーズの一例を示したものである。例えば、例外処理の一つである「返品処理」の場合、顧客によって「返品お願いします。」または「これ、返品したいのですが。」などのフレーズが発声されることが予想される。そこで、実際に返品処理時において、これらのフレーズに含まれる「返品」のキーワードが顧客用マイク4aから取得できた場合、後述する会計処理判定部62により、その会計処理は正常に実行されたと判定される。逆に、返品処理時において、顧客用マイク4aから「返品」のキーワードを取得できなかった場合、その会計処理は正常に実行されなかったと判定される。
一方、図3(b)は、店員用キーワードデーターベースDB2の一例を示す図である。同図に示すように、店員用キーワードデーターベースDB2は、処理内容ごとに、店員用キーワードが関連付けられている。店員用フレーズは、店員用キーワードを含むフレーズの一例を示したものである。例えば、例外処理の一つである「返品処理」の場合、顧客の依頼に対し、店員が「了解いたしました。返品ですね。」などのフレーズを発声することが予想される。なお、オペレーションを行う前に、店員に対し、そのようなフレーズを発声することを指導しておくことが望ましい。そこで、返品処理時において、実際にこれらのフレーズに含まれる「了解」または「返品」のキーワードが店員用マイク5aから取得できた場合、後述する会計処理判定部62により、その会計処理は正常に実行されたと判定される。逆に、返品処理時において、店員用マイク5aから「了解」または「返品」のキーワードを取得できなかった場合、その会計処理は正常に実行されなかったと判定される。
なお、本例のように、1の処理内容に対して複数のキーワードが登録されている場合、少なくとも1つのキーワードを検出できた場合、その会計処理は正常に実行されたと判定しても良いし、複数全てのキーワードを検出できた場合、その会計処理は正常に実行されたと判定しても良い。また、1の処理内容に対して3つ以上のキーワードが登録されている場合は、所定数または所定割合以上のキーワードを検出できたことを条件として、その会計処理は正常に実行されたと判定しても良い。
また、顧客用キーワードおよび店員用キーワードの少なくとも一方が検出できた場合、その会計処理は正常に実行されたと判定しても良いし、両キーワードを検出できた場合、その会計処理は正常に実行されたと判定しても良い。但し、後者の場合であっても、顧客用キーワードデーターベースDB1の「スキャン処理」のように、キーワードが登録されていない処理内容もあるため、その場合は、店員用キーワードを検出できたことを条件として、その会計処理は正常に実行されたと判定する。
また、同図の例では、処理内容として、返品処理、ミスレジ処理、店員割引処理(特定割引処理)およびスキャン処理を挙げているが、あくまでも一例であり、これらに限定されるものではない。
図2の説明に戻る。会計処理判定部62は、上記のとおり、処理内容判定部22により判定された処理内容に対応するキーワードを、顧客および店員から、それぞれ顧客用音声取得部41および店員用音声取得部51により取得したか否かに応じて、会計処理が正常に行われたか否かを判定する。なお、顧客用音声取得部41から店員用キーワードを取得した場合、および店員用音声取得部51から顧客用キーワードを取得した場合は、いずれも対応するキーワードを検出できたと判定しないことが好ましい。
不正履歴記録部63は、会計処理判定部62の判定結果を、トランザクションデーターと関連付けて、不正履歴記憶部64に記憶する。具体的には、不正履歴として、会計処理判定部62の判定結果(正常or警告)、会計処理日時、トランザクション番号、レジ番号(POS端末1のID)、オペレーターID、顧客ID、処理内容などを記録する。また、不正履歴記憶部64は、これらの不正履歴を不揮発に記憶する。
管理者警告部65は、会計処理判定部62により、会計処理が正常に行われなかったと判定された場合、管理者に対して警告を行う。本実施形態では、管理者の携帯電話120に対して、電子メールを送信することにより、会計処理が正常に行われなかった旨(不正行為が行われた可能性がある旨)を通知する。当該電子メールには、不正発生日時、トランザクション番号、対象レジ番号(POS端末1のID)、オペレーター名、処理内容、などの情報が含まれる。
なお、管理者に対する警告方法として、電子メールではなく、Webアプリケーションを用いても良い。このように、電子メールやWebアプリケーションを用いることで、管理者の居場所に関わらず、不正行為が行われた可能性を確実に通知することができる。また、携帯電話120(管理者)は、電子メールの受信後、ヘッドセット5(店員)と通話できることが好ましい。この構成によれば、管理者が、会計処理の状況などを直接店員に確認することができ、より適切な対処を行うことができる。
次に、図4および図5のフローチャートを参照し、第1実施形態に係る店舗監視システムSYの警告処理について説明する。図5は、図4に示すフローチャートのサブルーチンを示す。図4に示すように、店舗監視システムSYは、会計情報を取得すると(S01,会計情報取得部21)、取得した会計情報に基づいて、処理内容を判定する(S02,処理内容判定部22)。また、キーワード記憶部61を参照して、顧客用マイク4aおよび店員用マイク5aから取得した音声データーに基づく音声認識結果と、判定した処理内容別キーワードと、を照合し(S03)、会計処理が正常に行われたか否か(以下、「照合OKか否か」と称する。)を判定する(S04,会計処理判定部62)。
ここで、照合NGの場合は(S04:No)、不正行為が行われた可能性があるため、オペレーターおよび管理者に対して警告を行い(S05,オペレーター警告部25および管理者警告部65)、不正履歴記憶部64に不正履歴を記録する(S06,不正履歴記録部63)。一方、照合OKの場合は(S04:Yes)、不正なし(会計処理が正常に行われた旨)を、不正履歴として記録する(S06,不正履歴記録部63)。
次に、図5を参照し、図4のS03に相当する照合処理について説明する。なお、顧客の音声認識処理(S11〜S15)と店員の音声認識処理(S21〜S25)は、ほぼ同一であるため、ここでは顧客の音声認識処理についてのみ説明する。店舗監視システムSYは、顧客の音声信号を取得し(S11,顧客用音声取得部41)、顧客用音声認識部231により音声認識処理を行う。顧客の音声信号取得は、会計処理開始時から開始しても良いし、前回の会計処理終了時から開始しても良い。顧客用音声認識部231は、まず、取得した音声信号を音響分析する(S12)。具体的には、フーリエ解析などを用いて、取得した音声信号を、特徴量に変換する。また、音響モデル111、単語辞書121および言語モデル131を用いて、音響分析した特徴量からテキスト出力を行う(S13)。なお、音響モデル111とは、単語列の音響特徴を記述したものであり、言語モデル131とは、音素の並び方に関する制約を表す確立モデルを指す。また、単語辞書121とは、音響モデル111により特定された音素列と言語モデル131により特定された単語とを対応付けるためのデーターベースである。これら音響モデル111、単語辞書121および言語モデル131は、顧客用音声認識部231と店員用音声認識部232とで、独立して設けられている。
S13により、顧客用音声認識部231からテキストが出力されると、店舗監視システムSYは、顧客用キーワードデーターベースDB1を参照し(S14)、音声認識結果であるテキストと、顧客用キーワードデーターベースDB1から読み出した処理内容別顧客用キーワードと、を照合する(S15)。ここで、両者が一致した場合、照合OKと判定する。なお、図5に示した例では、顧客の音声認識処理(S11〜S15)と店員の音声認識処理(S21〜S25)とが、並行して行われるように記載したが、直列的な処理として行っても良い。
以上説明したとおり、第1実施形態に係る店舗監視システムSYによれば、会計処理部11で実行されている処理内容を判定し、判定された処理内容に対応するキーワードの取得の有無に応じて、会計処理が正常に行われたか否かを判定することができる。これにより、会計処理時において即座に判定を行うことができるため、迅速に不正行為を検出することができる。また、処理内容ごとに取得対象キーワードを絞り込むことができるため、キーワードの認識精度を上げることができ、ひいては会計処理が正常に行われたか否かの判定精度を上げることができる。また、取得対象キーワードの削減により、ロースペックのコンピューターでも処理可能となり、店舗管理サーバー6の小型化、ローコスト化および省電力化を図ることができる。
また、キーワード記憶部61は、店員を対象とした店員用キーワードと、顧客を対象とした顧客用キーワードと、を区別して記憶しており、顧客用音声取得部41および店員用音声取得部51により、店員の音声と、顧客の音声と、を区別して取得するため、取得対象キーワードをさらに絞り込むことができる。これにより、キーワードの認識精度をさらに向上させることができる。
なお、上記の実施形態では、キーワードデーターベースDB1,DB2に記憶されているキーワードを取得した場合に、会計処理が正常に行われたと判定したが、キーワードデーターベースDB1,DB2に記憶されているキーワードを取得しなかった場合に、会計処理が正常に行われたと判定しても良い。
また、上記の実施形態では、処理内容ごとにキーワードが記憶されているとしたが、必ずしも処理内容ごとに分類される必要はなく、全ての処理内容について、キーワードデーターベースDB1,DB2に記憶されている全てのキーワードのうちいずれかに一致した場合、または一致しなかった場合に、会計処理が正常に行われたと判定しても良い。
また、上記の実施形態では、顧客の音声を集音する顧客用マイク4aと、店員の音声を集音する店員用マイク5aと、を独立して設けたが、1のマイクで集音するようにしても良い。この場合、店員の声紋を記憶しておく店員声紋記憶部(図示省略)を、レシートプリンター2または店舗管理サーバー6内に設けておく。そして、音声認識部23が、取得した音声の声紋と、店員声紋記憶部に記憶されている声紋とを照合し、一致するか否かに応じて、店員の音声と顧客の音声とを区別する。この構成によれば、店員用と顧客用のマイクをそれぞれ独立して設ける必要がない。これにより、店舗監視システムSYのローコスト化を図ることができる。
また、上記の実施形態において、会計処理判定部62は、通常処理(スキャン処理)を含む全ての会計処理について、会計処理が正常に行われたか否かを判定したが、処理内容判定部22により例外処理が実行されたと判定された場合のみ、判定を行っても良い。この構成によれば、会計処理が正常に行われたか否かの判定を、不正行為の発生確率が高い例外処理時のみに限定することで、不正行為の検出能力を保持しつつも、取得対象キーワードを絞り込むことができるため、キーワードの認識精度を向上させることができる。
また、上記の実施形態では、顧客用マイク4aおよび店員用マイク5aからの音声データーを、レシートプリンター2で認識する構成としたが、店舗管理サーバー6で認識しても良い。この場合、音声認識部23は、店舗管理サーバー6内に設けられる。その他、レシートプリンター2の印刷部24およびオペレーター警告部25を除く各構成要素を、店舗管理サーバー6内に設けても良い。また、逆に、店舗管理サーバー6の各構成要素をレシートプリンター2内に設けても良い。
また、無線LANルーター8は、レシートプリンター2にシリアル接続される構成としたが、店舗内有線LAN9に接続される構成としても良い。さらに、キーワード記憶部61を店舗監視システムSY内に設ける構成としたが、これらを店舗監視システムSYの外部に設けても良い。
また、上記の実施形態では、顧客および店員の両方の音声を取得したが、いずれか一方のみを取得しても良い。また、取得対象を「顧客のみ」、「店員のみ」、「顧客および店員」のいずれにするかについて、レシートプリンター2や店舗管理サーバー6などに備えられた操作部(図示省略)を用いて、ユーザーが設定可能としても良い。
また、上記の実施形態において、管理者警告部65は、電子メールやWebアプリケーションを用いて、警告を行うとしたが、オペレーター警告部25と同様に、ディスプレイへの表示、音声発生、LEDの点灯/点滅、バイブレーターによる振動などを用いて警告を行っても良い。
[第2実施形態]
次に、図6および図7を参照し、本発明の第2実施形態について説明する。本実施形態は、警告先や警告方法などの警告態様を、顧客の有無、過去の不正履歴および取引金額に応じて可変することを特徴とする。そこで、第1実施形態と異なる点のみ説明する。なお、本実施形態において、第1実施形態と同様の構成部分については同様の符号を付し、詳細な説明を省略する。また、第1実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。
次に、図6および図7を参照し、本発明の第2実施形態について説明する。本実施形態は、警告先や警告方法などの警告態様を、顧客の有無、過去の不正履歴および取引金額に応じて可変することを特徴とする。そこで、第1実施形態と異なる点のみ説明する。なお、本実施形態において、第1実施形態と同様の構成部分については同様の符号を付し、詳細な説明を省略する。また、第1実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。
図6は、第2実施形態に係る店舗監視システムSYの機能ブロック図である。本実施形態では、システム構成要素として、監視カメラ13が追加されている。当該監視カメラ13は、レジカウンター10の周囲(例えば、天井)に設置され、店舗内有線LAN9またはネットワークNTに接続される。また、監視カメラ13は、主な機能構成として、撮像部31を有している。撮像部31は、レジカウンター10周りを撮像するものであり、特に本実施形態では、レジカウンター10前(顧客の立ち位置)を撮像する。撮像部31により撮像された撮像データーは、撮像日時や監視カメラ13を識別するためのカメラIDなどの情報と関連付けられ、撮像結果として、店舗管理サーバー6に出力される。なお、撮像日時とは、監視カメラ13に備えられたRTC(Real Time Clock,図示省略)の計時結果を指す。
また、本実施形態のレシートプリンター2は、処理内容判定部22において、処理内容を判定すると共に、会計処理の取引金額を判定する。取引金額とは、返品処理の場合の「返金額」、ミスレジ処理の場合の「取消金額」、店員割引処理の場合の「割引前金額または割引後金額」、スキャン処理の場合の「精算金額」などを指す。
また、本実施形態の店舗管理サーバー6は、第1実施形態と比較して、顧客検出部66が追加されている。当該顧客検出部66は、撮像部31の撮像結果に基づいて、会計処理の対象顧客の有無を検出する。具体的には、撮像結果を取得して、フレーム間の差分と背景差分を抽出し、当該抽出結果から動領域を検出する。そして、検出した動領域から顔検出を行い、顔検出ができた場合、そこに顧客が存在すると判定する。
また、本実施形態の不正履歴記憶部64は、会計処理判定部62により、会計処理が正常に行われなかったと判定されたときの顧客および店員の少なくとも一方の音声から特定される対象者声紋と、その判定回数(会計処理が正常に行われなかったものとして警告を行った回数)と、を関連付けて記憶する。会計処理の対象となる顧客や店員は、声紋によって特定される。つまり、不正履歴記憶部64は、店員や顧客のIDと、その人物の声紋と、その人物が不正の可能性ありと判定された判定回数とを、不正履歴の一部として記憶する。
上記の構成により、本実施形態の会計処理判定部62は、顧客検出部66により、会計処理時においてレジカウンター10前に顧客が存在しないことを検出した場合、不正の可能性が高いと判定する。また、不正履歴記憶部64の参照結果から、その会計処理時における対象顧客および対象店員の少なくとも一方に、不正履歴が存在することが確認できた場合(判定回数が「1」以上である場合)、さらに不正の可能性が高いと判定する。また、処理内容判定部22により判定された取引金額が所定額を超える場合、さらに不正の可能性が高い(および不正による被害額が大きい)と判定する。このように、会計処理判定部62は、不正の可能性の高さや想定される被害額の大きさを判定し、その判定結果から不正レベルを定める。当該不正レベルは、オペレーター警告部25および管理者警告部65に出力される。
オペレーター警告部25および管理者警告部65は、会計処理判定部62から出力された不正レベルに応じて、警告を行う。例えば、不正レベルが高い場合は、権限の大きい管理者に対して警告を行う(電子メールを送信する)など、不正レベルに応じた適切な警告先に警告を行う。なお、不正レベルが低い場合は、電子メールの送信先を1箇所としたり、POS端末1を操作している店員のみに警告を行うことが考えられる。また、例えば、不正レベルが高い場合は、大音量の警告音を発したり、ディスプレイ表示による警告を行うなど、不正レベルに応じた適切な警告方法で警告を行うことができる。
なお、「警告方法を可変する」とは、音声警告の場合、音声パターン、音量、警告回数、警告間隔などを可変することを指す。また、表示警告の場合、表示内容、表示色、表示回数、表示間隔などを可変することを指す。また、通知警告(電子メールによる通知など)の場合、通知内容、通知方法、通知回数などを可変することを指す。さらに、音声、表示、通知など、警告手段を可変することも、警告方法を可変することに含まれる。なお、不正レベルと、警告先や警告方法との対応付けを、レシートプリンター2や店舗管理サーバー6などに備えられた操作部(図示省略)を用いて、ユーザーが変更可能としても良い。また、取引金額を判定する際の所定額についても、ユーザーが設定可能としても良い。
次に、図7のフローチャートを参照し、第2実施形態に係る店舗監視システムSYの警告処理について説明する。同図に示すように、店舗監視システムSYは、会計情報を取得すると(S31,会計情報取得部21)、取得した会計情報に基づいて、処理内容および取引金額を判定する(S32,処理内容判定部22)。また、顧客用マイク4aおよび店員用マイク5aから取得した音声データーに基づく音声認識結果と、判定した処理内容別キーワードと、を照合し(S33)、照合OKか否かを判定する(S34,会計処理判定部62)。
照合NGの場合は(S34:No)、監視カメラ13の撮像結果から対象顧客の有無を検出し(S35,顧客検出部66)、対象顧客が存在した場合は(S35:Yes)、レベル1の警告を行う(S36,オペレーター警告部25および管理者警告部65)。ここで、「レベル1」とは不正レベルが最も低いことを意味し、数値が上がるにしたがって不正レベルが高くなることを意味する。
対象顧客が存在しない場合は(S35:No)、続いて不正履歴記憶部64を参照し、不正履歴の有無を判別する(S37,会計処理判定部62)。ここで、会計処理の対象となっている顧客または店員の声紋に関連付けられている不正履歴が不正履歴記憶部64に存在しない場合は(S37:No)、レベル2の警告を行う(S38,オペレーター警告部25および管理者警告部65)。
また、不正履歴記憶部64に不正履歴が存在する場合は(S37:Yes)、さらに処理内容判定部22の判定結果に基づいて、取引金額が所定額を超えるか否かを判別する(S39,会計処理判定部62)。取引金額が所定額を超えない場合は(S39:No)、レベル3の警告を行う(S40,オペレーター警告部25および管理者警告部65)。また、取引金額が所定額を超える場合は(S39:Yes)、不正レベルが最も高いレベル4の警告を行う(S41,オペレーター警告部25および管理者警告部65)。その後(S34:Yes、S36、S38、S40、S41の後)、第1実施形態と同様に、不正履歴記憶部64に不正履歴を記録し(S42,不正履歴記録部63)、処理を終了する。
以上説明したとおり、第2実施形態に係る店舗監視システムSYによれば、顧客の有無、過去の不正履歴および取引金額を判定し、これらの判定結果に基づいて警告を行うことができる。つまり、不正の可能性の高さや想定される被害額の大きさに応じて、適切な警告態様を採用することができる。また、これにより、オペレーターや管理者に対し、確実且つ効果的に不正行為を通知することができる。
なお、上記の実施形態において、顧客検出部66は、監視カメラ13の撮像結果に基づいて顧客の有無を検出したが、赤外センサーを用いて顧客の有無を検出しても良い。また、顧客に無線IC(RFID:Radio Frequency Identificationなど)が組み込まれた会員カードを所持させ、カードリーダーによって会員カードを検出したか否かに応じて、顧客の有無を検出しても良い。この場合、カードリーダーは、レシートプリンター2または店舗内有線LAN9に接続される。
また、上記の実施形態では、会計処理の対象となる顧客や店員を、声紋によって特定したが、顧客については、ポイント付与を目的とした会員カードの読取結果や、クレジットカードまたは電子マネーの使用結果から特定しても良い。また、店員については、会計情報に含まれるオペレーター氏名やオペレーターIDから特定しても良い。
また、上記の実施形態において、会計処理判定部62は、不正履歴記憶部64に記憶されている判定回数が「1」以上である場合、不正の可能性が高いと判定したが(図7のフローチャートにおいて、S37:Yesと判定したが)、判定回数が所定回数以上の場合に、不正の可能性が高いと判定しても良い。また、この所定回数について、ユーザーが設定可能としても良い。
また、上記の実施形態では、撮像部31の撮像結果を、店舗管理サーバー6に直接出力したが、レシートプリンター2を介して店舗管理サーバー6に出力しても良い。この場合、監視カメラ13は、レシートプリンター2に接続される構成としても良い。
[第3実施形態]
次に、図8を参照し、本発明の第3実施形態について説明する。本実施形態は、処理内容ごとに定められた所定の条件を満たす場合に警告を行うことを特徴とする。そこで、上記の各実施形態と異なる点のみ説明する。なお、本実施形態において、上記の各実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。また、本実施形態のシステム構成は、第2実施形態と同様であるため、図示および説明を省略する。
次に、図8を参照し、本発明の第3実施形態について説明する。本実施形態は、処理内容ごとに定められた所定の条件を満たす場合に警告を行うことを特徴とする。そこで、上記の各実施形態と異なる点のみ説明する。なお、本実施形態において、上記の各実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。また、本実施形態のシステム構成は、第2実施形態と同様であるため、図示および説明を省略する。
図8は、第3実施形態に係る店舗監視システムSYの警告処理を示すフローチャートである。同図に示すように、店舗監視システムSYは、会計情報を取得すると(S51,会計情報取得部21)、取得した会計情報に基づいて、処理内容を判定し(S52,処理内容判定部22)、音声認識結果と処理内容別キーワードとを照合する(S53,会計処理判定部62)。
ここで、照合NGの場合は(S54:No)、会計処理の処理内容が返品処理またはミスレジ処理であるか否かを判別し(S55,会計処理判定部62)、これらに該当する場合は(S55:Yes)、顧客検出部66の検出結果を取得して(S56)、対象顧客が存在するか否かを判定する(S57,会計処理判定部62)。対象顧客が存在しない場合は(S57:No)、会計処理が正常に行われなかったものとして警告を行う(S58,オペレーター警告部25および管理者警告部65)。このように、会計処理判定部62は、返品処理またはミスレジ処理の場合、照合NG且つ対象顧客が存在しないことを条件として警告を行う。
一方、返品処理またはミスレジ処理のいずれでもない場合は(S55:No)、会計処理の処理内容が店員割引処理であるか否かを判別し(S59,会計処理判定部62)、店員割引処理の場合は(S59:Yes)、顧客検出部66の検出結果を取得して(S60)、対象顧客が店員(特定の人)であるか否かを判定する(S61,会計処理判定部62)。なお、対象顧客が店員であるか否かを判定するために、店舗管理サーバー6内には、店員顔特徴量データーベース(図示省略)が設けられている。この店員顔特徴量データーベースには、店員の顔写真から予め算出された顔特徴量と、店員IDとが関連付けて記憶されている。会計処理判定部62は、監視カメラ13の撮像結果を解析して、顔検出を行い、当該顔部分の画像を正規化して、顔特徴量を算出する。そして、店員顔特徴量データーベースに記憶されている顔特徴量と一致するか否かによって、対象顧客が店員であるか否かを判定する。
対象顧客が店員でないと判定した場合は(S61:No)、会計処理が正常に行われなかったものとして警告を行う(S58)。このように、会計処理判定部62は、店員割引処理の場合、照合NG且つ対象顧客が店員ではないことを条件として警告を行う。
一方、処理内容が店員割引処理でもない場合は(S59:No)、会計処理の処理内容がスキャン処理であるか否かを判別し(S62,会計処理判定部62)、スキャン処理の場合は(S62:Yes)、ハンディスキャナー3(図1参照)の読取結果を取得して(S63)、読取結果があるか否かを判定する(S64,会計処理判定部62)。なお、読取結果があるか否かは、会計情報に基づいて判定しても良いし、店舗管理サーバー6が、スキャン毎にハンディスキャナー3の読取結果を取得できる場合は、当該読取結果の取得の有無に応じて判定しても良い。読取結果が無い場合は(S64:No)、会計処理が正常に行われなかったものとして警告を行う(S58)。このように、会計処理判定部62は、スキャン処理の場合、照合NG且つハンディスキャナー3の読取結果がないことを条件として警告を行う。
その後(S58の後)、並びに、S54:Yes、S57:Yes、S61:Yes、S62:No、S64:Yesの後は、不正履歴記憶部64に不正履歴を記録し(S65,不正履歴記録部63)、処理を終了する。なお、上記のフローチャートでは、処理内容が、返品処理、ミスレジ処理、店員割引処理およびスキャン処理以外の場合は、警告を行わないものとしたが、他の処理内容の場合も警告を行うようにしても良い。
以上説明したとおり、第3実施形態に係る店舗監視システムSYによれば、返品処理時において、処理内容に対応するキーワードを取得できなかった場合でも、対象顧客を検出できた場合は、会計処理が正常に行われたと判定する。また、店員割引処理時において、特定割引処理に対応するキーワードを取得できなかった場合でも、対象顧客として店員を検出できた場合は、会計処理が正常に行われたと判定する。さらに、スキャン処理時において、商品コード読取処理に対応するキーワードを取得できなかった場合でも、商品コードの読取結果を取得できた場合は、会計処理が正常に行われたと判定する。これらにより、誤って不正行為の発生と判定してしまう誤判定の可能性を低くすることができる。
なお、上記の実施形態では、スキャン処理の場合、商品コード読取処理に対応するキーワードと、商品コードの読取結果を取得できなかったことを条件として、会計処理が正常に行われなかったと判定したが、これらの条件を満たす場合であっても、商品コード読取処理時に取得した音声の認識結果から特定される商品と、商品コードの読取結果とが一致しなかった場合、会計処理が正常に行われなかったと判定しても良い。一般的に、商品コード読取処理時には、店員が発声する音声(「○○が一点。」など)と、商品コードの読取結果とが一致する。したがって、これらが一致しない場合、会計処理が正常に行われなかったと判定することができ、より確実に不正行為を検出することができる。
また、この場合、会計処理判定部62は、1回の会計処理内において、取得した音声の認識結果から特定される商品と、商品コードの読取結果とが一致しなかった回数が、所定回数を超えた場合に、会計処理が正常に行われなかったと判定しても良い。この構成によれば、店員が、悪意なく1回だけ商品名を誤って発声してしまった場合、即座に「会計処理が正常に行われなかった」と判定されてしまうような不具合を解消することができる。なお、この場合は、店員に対してオペレーションをやり直すように促すための報知を行うことが好ましい。また、判定の基準となる所定回数を、ユーザーが設定可能としても良い。
また、上記の実施形態では、顧客検出部66の検出結果から、対象顧客が店員であるか否かを判定したが、声紋によって判定しても良い。この場合は、店員顔特徴量データーベースに代えて店員声紋データーベースを店舗管理サーバー6内に設け、記憶されている声紋と、顧客用マイク4aから取得した音声の認識結果から得られる声紋とが一致するか否かによって、対象顧客が店員であるか否かを判定する。
以上、第1実施形態ないし第3実施形態を示したが、これらの各実施形態に示したフローチャート(店舗監視システムSYの警告処理)の各ステップをプログラムとして提供することが可能である。また、そのプログラムを各種記録媒体(CD−ROM、フラッシュメモリー等)に格納して提供することも可能である。すなわち、コンピューターを、店舗監視システムSYの各構成要素として機能させるためのプログラム、およびそれを記録した記録媒体も、本発明の権利範囲に含まれるものである。
また、上記の各実施形態では、本発明の会計処理判定装置を、店舗内における不正防止のために用いたが、他の用途(店員の育成、管理)を目的としても良い。また、店舗管理サーバー6の各部を、POSシステムやWWWサーバーで実現しても良い。その他、上述した実施例によらず、店舗監視システムSYのシステム構成や処理工程等について、本発明の要旨を逸脱しない範囲で、適宜変更が可能である。
1…POS端末 2…レシートプリンター 3…ハンディスキャナー 4…カスタマディスプレイ 4a…顧客用マイク 5…ヘッドセット 5a…店員用マイク 6…店舗管理サーバー 7…無線LAN 8…無線LANルーター 9…店舗内有線LAN 10…レジカウンター 13…監視カメラ 21…会計情報取得部 22…処理内容判定部 23…音声認識部 25…オペレーター警告部 31…撮像部 41…顧客用音声取得部 51…店員用音声取得部 61…キーワード記憶部 62…会計処理判定部 63…不正履歴記録部 64…不正履歴記憶部 65…管理者警告部 66…顧客検出部 110…携帯電話会社 120…携帯電話 130…電話回線 SY…店舗監視システム
Claims (14)
- 会計処理部による会計処理に関するキーワードを記憶するキーワード記憶部と、
前記会計処理時における店員および顧客の少なくとも一方の音声を取得する音声取得部と、
前記会計処理時において、前記キーワード記憶部に記憶されているキーワードを、前記音声取得部により取得したか否かに応じて、前記会計処理が正常に行われたか否かを判定する会計処理判定部と、を備えたことを特徴とする会計処理判定装置。 - 前記キーワード記憶部は、前記会計処理の処理内容ごとに前記キーワードを記憶しており、
前記会計処理部で実行されている処理内容を判定する処理内容判定部をさらに備え、
前記会計処理判定部は、前記処理内容判定部により判定された処理内容に対応するキーワードを、前記音声取得部により取得したか否かに応じて、前記会計処理が正常に行われたか否かを判定することを特徴とする請求項1に記載の会計処理判定装置。 - 前記会計処理判定部は、前記会計処理時において、前記処理内容判定部により判定された処理内容に対応するキーワードを取得しなかった場合、前記会計処理が正常に行われなかったと判定し、
前記会計処理判定部により、前記会計処理が正常に行われなかったと判定された場合、前記会計処理部を操作している店員および予め定められた管理者の少なくとも一方に対して警告を行う警告部をさらに備えたことを特徴とする請求項2に記載の会計処理判定装置。 - 前記警告部は、前記管理者に対し、電子メールまたはWebアプリケーションを用いて、前記会計処理が正常に行われなかった旨を通知することを特徴とする請求項3に記載の会計処理判定装置。
- 前記処理内容判定部は、前記会計処理の取引金額を判定し、
前記警告部は、前記会計処理の取引金額に応じて、警告先および警告方法の少なくとも一方を可変することを特徴とする請求項3または4に記載の会計処理判定装置。 - 前記会計処理判定部により、前記会計処理が正常に行われなかったと判定されたときの前記店員および前記顧客の少なくとも一方の音声から特定される対象者声紋と、その判定回数と、を関連付けて記憶しておく不正履歴記憶部をさらに備え、
前記警告部は、前記会計処理判定部により、前記会計処理が正常に行われなかったと判定された場合であって、その対象者の声紋と一致する前記対象者声紋が前記不正履歴記憶部に記憶されている場合、当該対象者声紋に関連付けられている過去の前記判定回数に応じて、警告先および警告方法の少なくとも一方を可変することを特徴とする請求項3ないし5のいずれか1項に記載の会計処理判定装置。 - 前記会計処理の対象顧客を検出する顧客検出部をさらに備え、
前記警告部は、前記顧客検出部による前記対象顧客の検出の有無に応じて、警告先および警告方法の少なくとも一方を可変することを特徴とする請求項3ないし6のいずれか1項に記載の会計処理判定装置。 - 前記会計処理の対象顧客を検出する顧客検出部をさらに備え、
前記会計処理判定部は、前記処理内容判定部により判定された処理内容に対応するキーワードを取得せず、且つ前記顧客検出部により前記対象顧客を検出できなかった場合、前記会計処理が正常に行われなかったと判定することを特徴とする請求項3ないし6のいずれか1項に記載の会計処理判定装置。 - 前記処理内容判定部により、前記処理内容が、特定の人に対して商品の割引きを行う特定割引処理であると判定された場合、
前記会計処理判定部は、前記特定割引処理に対応するキーワードを取得せず、且つ前記顧客検出部により前記特定の人に該当する対象顧客を検出できなかった場合、前記会計処理が正常に行われなかったと判定することを特徴とする請求項8に記載の会計処理判定装置。 - 前記処理内容判定部により、前記処理内容が、精算時における商品コード読取処理であると判定された場合、
前記会計処理判定部は、前記商品コード読取処理に対応するキーワードを取得せず、且つ前記商品コードの読取結果を取得できなかった場合、前記会計処理が正常に行われなかったと判定することを特徴とする請求項3ないし6のいずれか1項に記載の会計処理判定装置。 - 前記キーワード記憶部は、前記店員を対象とした店員用キーワードと、前記顧客を対象とした顧客用キーワードと、を区別して記憶しており、
前記音声取得部により取得した前記店員の音声と、前記顧客の音声と、を区別して認識する音声認識部をさらに備え、
前記会計処理判定部は、前記店員および前記顧客から、それぞれ前記店員用キーワードおよび前記顧客用キーワードを取得したか否かに応じて、前記会計処理が正常に行われたか否かを判定することを特徴とする請求項1ないし10のいずれか1項に記載の会計処理判定装置。 - 前記会計処理判定部は、前記処理内容判定部により、前記処理内容が前記会計処理の例外処理を示す所定の処理であると判定された場合のみ、前記会計処理が正常に行われたか否かを判定することを特徴とする請求項1ないし11のいずれか1項に記載の会計処理判定装置。
- 会計処理部と、当該会計処理部による会計処理に関するキーワードを記憶するキーワード記憶部と、を内部または外部に備えた会計処理判定装置の制御方法であって、
前記会計処理判定装置が、
前記会計処理時における店員および顧客の少なくとも一方の音声を取得する音声取得ステップと、
前記音声取得ステップにおいて、前記キーワード記憶部に記憶されているキーワードを取得したか否かに応じて、前記会計処理が正常に行われたか否かを判定する会計処理判定ステップと、を実行することを特徴とする会計処理判定装置の制御方法。 - コンピューターに、請求項13に記載の会計処理判定装置の制御方法における各ステップを実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009271238A JP2011113442A (ja) | 2009-11-30 | 2009-11-30 | 会計処理判定装置、会計処理判定装置の制御方法およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009271238A JP2011113442A (ja) | 2009-11-30 | 2009-11-30 | 会計処理判定装置、会計処理判定装置の制御方法およびプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011113442A true JP2011113442A (ja) | 2011-06-09 |
Family
ID=44235702
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009271238A Withdrawn JP2011113442A (ja) | 2009-11-30 | 2009-11-30 | 会計処理判定装置、会計処理判定装置の制御方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2011113442A (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015528161A (ja) * | 2012-06-27 | 2015-09-24 | オーパワー, インコーポレイテッド | 通常と異なる利用率報告のための方法およびシステム |
JP2016021196A (ja) * | 2014-07-15 | 2016-02-04 | パナソニックIpマネジメント株式会社 | 注文入力システム及び注文入力方法 |
JP5974312B1 (ja) * | 2015-04-07 | 2016-08-23 | パナソニックIpマネジメント株式会社 | 販売管理装置、販売管理システムおよび販売管理方法 |
WO2020196743A1 (ja) * | 2019-03-27 | 2020-10-01 | 株式会社博報堂Dyホールディングス | 評価システム及び評価方法 |
JP2021002362A (ja) * | 2014-09-30 | 2021-01-07 | 日本電気株式会社 | 装置、処理方法、及び、プログラム |
JP7039084B1 (ja) * | 2021-08-25 | 2022-03-22 | アースアイズ株式会社 | セルフレジ監視システム及びセルフレジ監視方法 |
-
2009
- 2009-11-30 JP JP2009271238A patent/JP2011113442A/ja not_active Withdrawn
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015528161A (ja) * | 2012-06-27 | 2015-09-24 | オーパワー, インコーポレイテッド | 通常と異なる利用率報告のための方法およびシステム |
JP2016021196A (ja) * | 2014-07-15 | 2016-02-04 | パナソニックIpマネジメント株式会社 | 注文入力システム及び注文入力方法 |
US9665904B2 (en) | 2014-07-15 | 2017-05-30 | Panasonic Intellectual Property Management Co., Ltd. | Order entry system and order entry method |
JP2021002362A (ja) * | 2014-09-30 | 2021-01-07 | 日本電気株式会社 | 装置、処理方法、及び、プログラム |
JP7024833B2 (ja) | 2014-09-30 | 2022-02-24 | 日本電気株式会社 | 装置、処理方法、及び、プログラム |
JP5974312B1 (ja) * | 2015-04-07 | 2016-08-23 | パナソニックIpマネジメント株式会社 | 販売管理装置、販売管理システムおよび販売管理方法 |
WO2016163060A1 (ja) * | 2015-04-07 | 2016-10-13 | パナソニックIpマネジメント株式会社 | 販売管理装置、販売管理システムおよび販売管理方法 |
JP2016200851A (ja) * | 2015-04-07 | 2016-12-01 | パナソニックIpマネジメント株式会社 | 販売管理装置、販売管理システムおよび販売管理方法 |
WO2020196743A1 (ja) * | 2019-03-27 | 2020-10-01 | 株式会社博報堂Dyホールディングス | 評価システム及び評価方法 |
JP7039084B1 (ja) * | 2021-08-25 | 2022-03-22 | アースアイズ株式会社 | セルフレジ監視システム及びセルフレジ監視方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20110131105A1 (en) | Degree of Fraud Calculating Device, Control Method for a Degree of Fraud Calculating Device, and Store Surveillance System | |
JP5540645B2 (ja) | 情報処理装置、情報処理装置の制御方法およびプログラム | |
JP5499616B2 (ja) | 情報処理装置、情報処理装置の制御方法およびプログラム | |
EP2312542A1 (en) | Information processing device, information processing system, control method for an information processing device, and a program | |
JP2011113442A (ja) | 会計処理判定装置、会計処理判定装置の制御方法およびプログラム | |
US20110063108A1 (en) | Store Surveillance System, Alarm Device, Control Method for a Store Surveillance System, and a Program | |
JP6904743B2 (ja) | 会計システムおよび会計方法 | |
US9990619B2 (en) | Holding manner learning apparatus, holding manner learning system and holding manner learning method | |
JP5477153B2 (ja) | 接客データ記録装置、接客データ記録方法およびプログラム | |
JP5359792B2 (ja) | 例外処理管理装置、例外処理管理装置の制御方法およびプログラム | |
JP2012027633A (ja) | デバイスドライバー、情報処理システム、デバイスドライバーの制御方法およびプログラム | |
JP2019193089A (ja) | 映像解析装置 | |
JP2011221891A (ja) | キーワード記録装置、接客支援装置、キーワード記録方法およびプログラム | |
JP2011123527A (ja) | 警告装置、警告装置の制御方法およびプログラム | |
JP2011221683A (ja) | 接客支援装置、接客支援方法およびプログラム | |
JP5540622B2 (ja) | レシートプリンター、レシートプリンターの制御方法およびプログラム | |
US20110022480A1 (en) | Loss Prevention At Point Of Sale | |
JP7513161B2 (ja) | 情報処理システム、顧客特定装置、情報処理方法及びプログラム | |
US11216651B2 (en) | Information processing device and reporting method | |
JP6177122B2 (ja) | 商品販売データ処理装置及びプログラム | |
JP2011237966A (ja) | 接客支援装置、接客支援方法およびプログラム | |
JP5482079B2 (ja) | レシートプリンター、レシートプリンターの制御方法およびプログラム | |
JP2011118653A (ja) | 不正度記録装置、不正度記録装置の制御方法およびプログラム | |
JP5515745B2 (ja) | 店舗監視システム、店舗監視システムの制御方法およびプログラム | |
JP2011100172A (ja) | 例外処理管理装置、例外処理管理装置の制御方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20130205 |