JP2022012399A - 情報処理装置、情報処理装置の制御方法、およびプログラム - Google Patents

Abstract

【課題】 商品の販売が無人で行われる店舗において、利用者が退店時に商品の代金を上限のある電子マネーによって決済を行う場合、電子マネーが残高不足であると決済ができず、商品を店内の元にあった場所に戻しに行く必要がある。【解決手段】 ユーザが所持する記憶装置から電子マネーの残高を示す残高情報を取得し、店舗内を撮像する撮像手段により撮像された画像を用いて、ユーザが手に取った商品の合計金額を特定する。そして、特定した合計金額が、残高を超える場合に、ユーザにその旨を認識させるための情報を出力する。【選択図】 図７

Description

本発明は、情報処理装置、情報処理装置の制御方法、およびプログラムに関するものである。

従来、スーパーマーケットや量販店等の店舗では、陳列された商品を客が選び、レジコーナーで店員が精算処理を行うことが一般的であったが、人件費や設備費を抑えるためにレジの台数を増やせず、レジ付近が混雑するという課題があった。特許文献１では、店内に設置された複数のカメラで客を撮影して客の識別を行い、また客の行動を撮影して、どの客がどの商品を所持しているかを認識し、客が退店する際に客が事前に登録した決済手段により自動で決済が行われるようにしている。これにより、現金の受け渡しを行わないため、客側は買い物にかかる時間を短縮することができる。

特開２０１９－１４５０５４

しかしながら、特許文献１において、上限のある電子マネーによって決済を行う場合、客がいざ決済をしようとしたときに電子マネーが残高不足で決済ができず、客が商品を店舗内の元にあった場所に戻しに行くという手間が発生する可能性がある。

本発明は、上限のある電子マネーによる決済処理を行う際に電子マネーの残高が不足することを、未然に防ぐことが可能な技術を提供することを目的とする。

上述の課題を解決するため、本発明は、ユーザが所持する記憶装置から電子マネーの残高を示す残高情報を取得する取得手段と、店舗内を撮像する撮像手段により撮像された画像を用いて、前記ユーザが手に取った商品の合計金額を特定する特定手段と、前記特定手段により特定された合計金額が、前記取得手段により取得した前記残高情報により示される残高を超える場合に、前記ユーザにその旨を認識させるための情報を出力する出力手段とを備えることを特徴とする。

本発明によれば、上限のある電子マネーによる決済処理を行う際に電子マネーの残高が不足することを、未然に防ぐことができる。

第１の実施形態に係る店舗の一例を示す模式図である。 第１の実施形態に係る画像処理装置およびそれに接続された部材の機能および構成の一例を示すブロック図である。 第１の実施形態に係る画像処理装置のハードウェア構成の一例を示す図である。 第１の実施形態に係る画像処理装置で管理する人物と貨幣情報の関連を表すデータ構造の一例である。 第１の実施形態に係る画像処理装置で管理する人物と商品の関連を表すデータ構造の一例である。 第１の実施形態に係る画像処理装置で管理する店舗内にある商品に関する情報のデータ構造の一例である。 第１の実施形態に係る画像処理装置からの通知指示により端末装置の表示機能で残高不足であることを通知する一例である。 第１の実施形態に係る画像処理装置が、客が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。 第２の実施形態に係る画像処理装置からの通知指示により端末装置の表示機能で店舗内に残高で購入できる商品がないことを通知する一例である。 第２の実施形態に係る画像処理装置が、客が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。 第３の実施形態に係る画像処理装置からの通知指示により端末装置の表示機能で残高不足であることを通知する一例である。 第３の実施形態に係る画像処理装置が、客が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。 第４の実施形態に係る画像処理装置からの通知指示により端末装置の表示機能で残高不足であることを通知する一例である。 第４の実施形態に係る画像処理装置が、客が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。

以下に、図面を参照して、本発明の実施形態の一例を詳しく説明する。なお、以下の実施形態はあくまで例示であり、本発明の範囲を限定する趣旨のものではない。図面においては、同一もしくは同様の構成に同一の参照番号を付与し、重複した説明は省略する。

＜第１の実施形態＞
図１は、第１の実施形態に係る店舗１００の一例を示す模式図である。店舗１００には、店舗入口１０１、店舗出口１０５、店舗用カメラ１０８、音声通知装置１０９、商品棚１１０が設置されており、店舗１００には客１１１がいる。

客１１１は、表示機能を有しネットワークに接続可能なスマートフォン等の端末装置（記憶装置）１１２を携帯している。なお、端末装置１１２は、ＩＣカードでも良い。その場合、
店舗入口１０１には、貨幣情報読取装置１０２、入口部カメラ１０３、入口ゲート１０４が備えられている。さらに、店舗出口１０５には、出口部カメラ１０６、出口ゲート１０７が備えられている。なお、店舗入口１０１と店舗出口１０５は、それぞれ複数設置されていてもよい。

店舗入口１０１では、客（ユーザ）１１１の入店処理として、貨幣情報読取装置１０２により客１１１の端末装置１１２から貨幣情報（客１１１が、入店時点で利用可能な電子マネーの上限金額）や端末装置１１２の端末情報を読み取る。そして、入口部カメラ１０３にて、貨幣情報読取装置１０２にて貨幣情報を読み取った客１１１を撮影し、入口ゲート１０４を開扉する。

店舗１００内では、店舗用カメラ１０８の映像データを解析して、客１１１が所持している商品を認識する。

店舗出口１０５では、出口部カメラ１０６の映像データを解析して客１１１を検出すると、客１１１の退店処理として、客１１１の貨幣情報と所持している商品に基づいて決済処理を行い、出口ゲート１０７を開扉する。

図２は、第１の実施形態に係る画像処理装置（情報処理装置）２００およびそれに接続された部材の機能および構成の一例を示すブロック図である。ここに示す各ブロックは、ハードウェア的には、コンピュータのＣＰＵをはじめとする素子や機械装置で実現でき、ソフトウェア的にはコンピュータプログラム等によって実現されるが、ここでは、それらの連携によって実現される機能ブロックを記載している。したがって、これらの機能ブロックはハードウェア、ソフトウェアの組合せによって様々なかたちで実現できることは、本明細書に触れた当業者には理解されるところである。

画像処理装置２００は、撮像装置２０１（図１における各種カメラに該当）、貨幣情報読取装置１０２、音声通知装置１０９、端末装置１１２とインターネットなどのネットワーク（図１では不図示）を介して接続される。また、各種動作を行う動作部２０２、動作部２０２の各種動作の設定をする設定部２１２、データを記憶する記憶部２１３を有する。さらに、動作部２０２は、画像取得部２０３、検出部２０４、貨幣情報関連付け部２０７、商品関連付け部２０８、決済判定部２０９、通知指示部２１０、決済部２１１を有する。

画像取得部２０３は、撮像装置２０１から画像を取得し、記憶部２１３に記憶する。

検出部２０４は、人物検出部２０５と商品検出部２０６により構成される。人物検出部２０５は、画像に含まれる人物を検出する。商品検出部２０６は、画像に含まれる人物が手に取った商品を検出する。また、商品検出部２０６は、検出した商品を時系列的に連続した複数の画像で追尾することで、客１１１がその商品を商品棚１１０から取ったのか、それともその商品を商品棚１１０に戻したのかを特定する。

貨幣情報関連付け部２０７は、貨幣情報読取装置１０２から貨幣情報を取得し、人物検出部２０５で検出した貨幣情報の持ち主である人物の情報と関連付けて記憶部２１３に記憶する。この人物と貨幣情報の関連を表すデータの管理については、図４を参照して後述する。

商品関連付け部２０８は、商品検出部２０６で検出した商品の情報と商品を手に取った人物の情報を関連付けて記憶部２１３に記憶する。この人物と商品の関連を表すデータの管理については、図５を参照して後述する。

決済判定部２０９は、商品関連付け部２０８により人物に対して関連付けられた商品の情報に変更があった場合に、貨幣情報関連付け部２０７により人物に対して関連付けられた貨幣情報に基づいて、商品の合計金額が決済可能な金額であるかどうかを判定する。

通知指示部（出力部）２１０は、決済判定部２０９により決済可能な金額ではないと判定された場合に、客１１１に最も近い音声通知装置１０９と端末装置１１２に所定の通知を行うよう指示する。この際、音声通知装置１０９に対しては音声による通知を指示し、端末装置１１２に対しては端末装置１１２の表示機能による通知を指示する。なお、他の実施形態として、音声通知装置１０９、または端末装置１１２のいずれか一方への通知指示でも良いが。ただし、端末装置１１２がＩＣカードの場合、通知指示部２１０は、音声通知装置１０９に対して音声による通知を指示する。

決済部２１１は、貨幣情報関連付け部２０７により人物に対して関連付けられた貨幣情報と商品の合計金額に基づいて、図示しない外部の電子マネーの決済を行うサーバへ決済の要求を行う。

図３は、第１の実施形態に係る画像処理装置２００のハードウェア構成の一例を示す図である。画像処理装置２００は、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、ハードディスクドライブ（ＨＤＤ）３０４、入力装置３０５、表示デバイス３０６、ディスクドライブ３０７、ネットワークインタフェース３０８を有する。ネットワークインタフェース３０８は、ネットワーク３０９に接続されている。

ＣＰＵ３０１は、画像処理装置２００を統括制御する制御装置である。

ＲＯＭ３０２は、ＣＰＵ３０１が画像処理装置２００を制御するためのプログラムを記憶する。なお、ＲＯＭ３０２に代えて、２次記憶装置を設けてもよい。

ＲＡＭ３０３は、ＣＰＵ３０１がＲＯＭ３０２から読み出したプログラムを展開し、処理を実行するためのメモリである。また、ＲＡＭ３０３は、一時記憶メモリとして各種処理の対象となるデータを一時記憶するための記憶領域としても使用される。

ＨＤＤ３０４は、画像データや処理の対象となるデータを格納する。ＣＰＵ３０１は、ＨＤＤ３０４から画像データや処理の対象となるデータを読み出す。

入力装置３０５は、数値等のデータ入力用のキーボード、表示デバイス３０６の表示領域の表示位置を指示するためのポインティングデバイス、マウス、およびタッチパネル等を有する。

表示デバイス３０６は、画像や領域枠を表示するディスプレイ等のデバイスである。

ディスクドライブ３０７は、ＣＤ、ＤＶＤ、ブルーレイディスク、またはフレキシブルディスク内の画像データを読み出し、ＣＰＵ３０１はディスクドライブ３０７を介して画像データを取得する。なお、ＣＰＵ３０１が画像データをＨＤＤ３０４またはネットワークインタフェース３０８から入力する場合には、ディスクドライブ３０７はなくてもよい。

ネットワークインタフェース３０８は、ネットワーク３０９を介して通信を行う回路である。ＣＰＵ３０１は、ネットワーク３０９を介して外部装置（例えば、撮像装置２０１）から画像データを取得する。ＣＰＵ３０１は、ネットワーク３０９を介して外部の音声通知装置１０９、端末装置１１２に指示を送信する。

以上のように、画像処理装置２００のハードウェア構成は、一般的なＰＣ（パーソナルコンピュータ）に搭載されるハードウェア構成要素と同様のハードウェア構成要素を有している。そのため、画像処理装置２００で実現される各種機能を、ＰＣ上で動作するソフトウェアとして実装することが可能である。画像処理装置２００は、ＣＰＵ３０１がプログラムを実行することにより、画像処理装置の種々の機能を実現することができる。

図４は、第１の実施形態に係る画像処理装置２００で管理する人物と貨幣情報の関連を表すデータ構造の一例である。

人物識別子４０１は、客１１１を識別するための識別子である。人物識別子４０１は、店舗入口１０１の入口部カメラ１０３により撮影された画像データから、人物検出部２０５が客１１１を検出した際に発行される。

貨幣情報４０２は、人物識別子４０１により示される客１１１が利用可能な電子マネーの上限金額（残高情報）である。貨幣情報４０２は、店舗入口１０１の貨幣情報読取装置１０２により客１１１の端末装置１１２から読み取られ、貨幣情報関連付け部２０７により取得される。

端末情報４０３は、人物識別子４０１により示される客１１１が所持する端末を識別するための識別子である。端末情報４０３は、店舗入口１０１の貨幣情報読取装置１０２により客１１１の端末装置１１２から読み取られ、貨幣情報関連付け部２０７により取得される。また、図４には図示していないが、電子マネーの残高が不足していたときに端末装置１１２に通知するための情報も画像処理装置２００で管理される。端末装置１１２に通知するための情報とは、例えば端末装置１１２で閲覧可能な電子メールのメールアドレスである。また、お店の専用アプリケーションが端末装置１１２にインストールされている場合には、当該アプリケーションに通知するために必要となる情報である。

図５は、第１の実施形態に係る画像処理装置２００で管理する人物と商品の関連を表すデータ構造の一例である。

人物識別子５０１は、客１１１を識別するための識別子であり、人物識別子４０１と同様である。

商品５０２は、客１１１が手に取った商品である。商品５０２は、商品検出部２０６により検出される。

価格５０３は、商品５０２の価格である。この価格５０３をはじめとした店舗内にある商品に関する情報の管理については、図６を参照して後述する。

個数５０４は、客１１１が手に取った商品の数である。個数５０４は、商品検出部２０６により検出される。

合計金額５０５は、客１１１が手に取った商品の合計金額である。

図６は、第１の実施形態に係る画像処理装置２００で管理する店舗１００内にある商品に関する情報のデータ構造の一例である。

商品種別６０１は、商品の種類である。商品６０２は、同一の商品種別６０１の中で各商品を識別するための識別子であり、商品５０２と同様である。価格６０３は、商品６０２の価格であり、価格５０３と同様である。

図７は、第１の実施形態に係る画像処理装置２００からの通知指示により端末装置１１２の表示機能で残高不足であることを通知する一例である。

７０１は、端末装置１１２の表示部である。７０２は、表示部７０１に表示される客１１１に対して残高不足であることを通知するメッセージである。メッセージは、画像処理装置２００から端末装置１１２に電子メールを用いて通知指示する場合には、客が電子メールを開くことにより表示される。また、画像処理装置２００から端末装置１１２に、専用アプリケーションを用いて通知指示する場合には、専用アプリケーションによるプッシュ通知により表示される。

なお、他の実施形態として、専用アプリケーションを用いて画像処理装置２００から端末装置１１２に通知指示する場合には、専用アプリケーションを介して、端末装置１１２が有するバイブレーション機能を動作させることで通知しても良い。

図８は、第１の実施形態に係る画像処理装置２００が、客１１１が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。図８に示す各処理は画像処理装置２００が有する各機能部により実行される。

ステップＳ８０１にて、画像処理装置２００は、貨幣情報読取装置１０２から客１１１の貨幣情報４０２と端末情報４０３とを取得する。

ステップＳ８０２にて、画像処理装置２００は、入口部カメラ１０３からステップＳ８０１で貨幣情報４０２を取得した客１１１が撮影された画像データを取得する。

ステップＳ８０３にて、画像処理装置２００は、ステップＳ８０２で取得した画像データを解析して、客１１１を検出する。そして、客１１１を識別するための人物識別子４０１を発行する。

ステップＳ８０４にて、画像処理装置２００は、ステップＳ８０３にて発行した人物識別子４０１、ステップＳ８０２で取得した貨幣情報４０２、および端末情報４０３を関連付けて記憶する。

ステップＳ８０５にて、画像処理装置２００は、ステップＳ８０６で解析を行うために、店舗用カメラ１０８から店舗１００内が撮影された画像データを取得する。また、出口部カメラ１０６から店舗出口１０５辺りが撮影された画像データを取得する。

ステップＳ８０６にて、画像処理装置２００は、ステップＳ８０５で取得した画像データを解析する。

ステップＳ８０７にて、画像処理装置２００は、ステップＳ８０６における解析の結果、客１１１が手に取った商品５０２を検出した場合、または店舗出口１０５にて客１１１を検出した場合はステップＳ８０８に進む。一方で、画像処理装置２００は、どちらも検出しなかった場合はステップＳ８０５に戻る。

ステップＳ８０８にて、画像処理装置２００は、ステップＳ８０６における解析の結果、客１１１が手に取った商品５０２を検出した場合、客１１１が商品５０２を、商品棚１１０から取る、または戻す動作を行っているため、ステップＳ８０９に進む。一方で、画像処理装置２００は、ステップＳ８０６で店舗出口１０５にて客１１１を検出した場合は、決済であると判断し、ステップＳ８１２に進む。

ステップＳ８０９にて、画像処理装置２００は、ステップＳ８０３にて発行した人物識別子４０１、ステップＳ８０６で検出した商品５０２の情報を関連付けて記憶する。なお、ステップＳ８０６における解析の結果、客１１１が商品５０２を商品棚１１０に戻す動作を行っていた場合、ステップＳ８０９にて、画像処理装置２００は、戻した商品５０２に関して、客１１１との関連付けを解除する。

ステップＳ８１０にて、画像処理装置２００は、客１１１の貨幣情報４０２に基づいて、商品の合計金額５０５が決済可能な金額であるかどうかを判定する。商品の合計金額５０５が決済可能な金額である場合はステップＳ８０５に戻り、そうではない場合はステップＳ８１１に進む。

ステップＳ８１１にて、画像処理装置２００は、客１１１に最も近い音声通知装置１０９と端末装置１１２に客１１１に対して残高不足であることを通知するための指示を送信する。この際、音声通知装置１０９に対しては音声による通知を指示し、端末装置１１２に対しては端末装置１１２の表示機能による通知を指示する。指示の送信後はステップＳ８０５に戻る。

ステップＳ８１２にて、画像処理装置２００は、客１１１の貨幣情報４０２と商品の合計金額５０５に基づいて、図示しない外部の電子マネーの決済を行うサーバへ決済の要求を送信し、処理を終了する。

以上、第１の実施形態によると、電子マネーによる決済処理を行うより前に、電子マネーの残高が不足することを通知することができるため、客は、電子マネーをチャージしたり、商品を戻したりする等の対応をとることが可能となる。すなわち、電子マネーによる決済処理を行う際に電子マネーの残高が不足することを、未然に防ぐことができる。

＜第２の実施形態＞
第２の実施形態では、上述した第１の実施形態の処理に加えて、店舗１００内に電子マネーの残高で購入可能な商品がない場合に、客１１１に対してその旨を通知する方法について説明する。なお、以下では第１の実施形態と同様の内容については説明を省略し、第２の実施形態に特有の内容について説明する。

図９は、第２の実施形態に係る画像処理装置２００からの通知指示により端末装置１１２の表示機能で店舗１００内に電子マネーの残高で購入できる商品がないことを通知する一例である。

９０２は、客１１１に対して店舗１００内に残高で購入できる商品がないことを通知するメッセージである。メッセージは、画像処理装置２００から端末装置１１２に電子メールを用いて通知指示する場合には、客が電子メールを開くことにより表示される。また、画像処理装置２００から端末装置１１２に、専用アプリケーションを用いて通知指示する場合には、専用アプリケーションによるプッシュ通知により表示される。

図１０は、第２の実施形態に係る画像処理装置２００が、客１１１が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。図１０では、図８の処理にステップＳ１０１３とステップＳ１０１４の処理を加えている。

ステップＳ１０１３にて、画像処理装置２００は、客１１１の貨幣情報４０２と商品の合計金額５０５に基づいて、店舗１００内に電子マネーの残高で購入できる商品があるかどうかを判定する。なお、この判定を行うために、店舗１００内で最も安い商品の価格に関するデータを事前に画像処理装置２００で保持しておく。店舗１００内に残高で購入できる商品がある場合はステップＳ８０５に戻り、そうではない場合はステップＳ１０１４に進む。

ステップＳ１０１４にて、画像処理装置２００は、客１１１に最も近い音声通知装置１０９と端末装置１１２に客１１１に対して店舗１００内に残高で購入できる商品がないことを通知するための指示を送信する。この際、音声通知装置１０９に対しては音声による通知を指示し、端末装置１１２に対しては端末装置１１２の表示機能による通知を指示する。指示の送信後はステップＳ８０５に戻る。

以上、第２の実施形態によると、客は、商品を手に取ってから、次の商品を手に取る前に、これ以上、いまの電子マネーの残高で購入可能な商品がないことを知ることが可能となる。

＜第３の実施形態＞
上述した第１の実施形態では、商品の合計金額５０５が決済可能な金額ではない場合に、客１１１に対して残高不足であることのみを通知した。第３の実施形態では、残高不足であることに加えて、残高内で商品の合計金額が最大となる商品の組合せを通知する方法について説明する。なお、以下では第１の実施形態と同様の内容については説明を省略し、第３の実施形態に特有の内容について説明する。

図１１は、第３の実施形態に係る画像処理装置２００からの通知指示により端末装置１１２の表示機能で残高不足であることを通知する一例である。

１１０２は、客１１１に対して残高不足であること、および残高内（残高以下）で商品の合計金額が最大となる商品の組合せを通知するメッセージである。メッセージは、画像処理装置２００から端末装置１１２に電子メールを用いて通知指示する場合には、客が電子メールを開くことにより表示される。また、画像処理装置２００から端末装置１１２に、専用アプリケーションを用いて通知指示する場合には、専用アプリケーションによるプッシュ通知により表示される。

図１２は、第３の実施形態に係る画像処理装置２００が、客１１１が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。図１２では、図８の処理にステップＳ１２１３の処理を加えている。

ステップＳ１２１３にて、画像処理装置２００は、客１１１の貨幣情報４０２と商品の価格５０３に基づいて、残高内で商品の合計金額が最大となる商品の組合せを求める。そして、求めた商品の組合せを、ステップＳ８１１での通知指示に使用する。

以上、第３の実施形態によると、客は現在の電子マネーの残高を最大限に利用して購入可能な商品の組み合わせを知ることが可能となる。

＜第４の実施形態＞
上述した第１の実施形態では、商品の合計金額５０５が決済可能な金額ではない場合に、客１１１に対して残高不足であることのみを通知した。第４の実施形態では、残高不足であることに加えて、店舗１００内に価格より安い代替商品が存在する場合は、代替商品を含めた商品の組合せを通知する方法について説明する。なお、以下では第１の実施形態と同様の内容については説明を省略し、第４の実施形態に特有の内容について説明する。

図１３は、第４の実施形態に係る画像処理装置２００からの通知指示により端末装置１１２の表示機能で残高不足であることを通知する一例である。

１３０２は、客１１１に対して残高不足であること、および店舗１００内に価格より安い代替商品（類似商品）が存在する場合に代替商品を含めた商品の組合せを通知するメッセージである。メッセージは、画像処理装置２００から端末装置１１２に電子メールを用いて通知指示する場合には、客が電子メールを開くことにより表示される。また、画像処理装置２００から端末装置１１２に、専用アプリケーションを用いて通知指示する場合には、専用アプリケーションによるプッシュ通知により表示される。

図１４は、第４の実施形態に係る画像処理装置２００が、客１１１が来店してから退店するまでの間に実行する処理の一例を示すフローチャート図である。図１４では、図８の処理にステップＳ１４１３の処理を加えている。

ステップＳ１４１３にて、画像処理装置２００は、客１１１の貨幣情報４０２と商品５０２、および図６にて上述した店舗内にある商品に関する情報に基づいて、店舗１００内に商品の種類が同じで価格がより安い代替商品が存在するかどうかを特定する。そして、代替商品が存在する場合は、代替商品を含めた商品の組合せを求める。そして、ステップＳ８１１での通知指示に使用する。

以上、第４の実施形態によると、客は残高が不足した場合に、購入する商品の数を減らすことなく、買い物をすることが可能となる。

＜第５の実施形態＞
上述した各実施形態では、客１１１が手に取った商品５０２を検出した後に、商品の合計金額５０５が決済可能な金額であるかを判定する。第５の実施形態では、客１１１が商品５０２を手に取る前に、商品５０２を手に取ったと仮定した場合に商品の合計金額５０５が決済可能な金額であるかを判定する。

具体的には、画像処理装置２００は、客１１１の手の移動方向を検出し、客１１１の手と、客１１１の手が移動した先にある商品５０２との距離が所定距離になったら、客１１１が手に取った商品５０２とみなす。そして、画像処理装置２００は、図８のステップＳ８０８以降の処理を実行する。

以上、第５の実施形態によると、電子マネーの残高が不足している場合に、客は商品を手に取る前に残高不足を知ることが可能となるため、商品を商品棚に戻す手間を省くことが可能となる。

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。また、上述の実施形態の一部を適宜組み合わせてもよい。

それから、上述の実施形態の機能を実現するソフトウェアのプログラムを、記録媒体から直接、或いは有線／無線通信を用いてプログラムを実行可能なコンピュータを有するシステム又は装置に供給し、そのプログラムを実行する場合も本発明に含む。従って、本発明の機能処理をコンピュータで実現するために、該コンピュータに供給、インストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の機能処理を実現するためのコンピュータプログラム自体も本発明に含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。

プログラムを供給するための記録媒体としては、例えば、ハードディスク、磁気テープ等の磁気記録媒体、光／光磁気記憶媒体、不揮発性の半導体メモリでもよい。また、プログラムの供給方法としては、コンピュータネットワーク上のサーバに本発明を形成するコンピュータプログラムを記憶し、接続のあったクライアントコンピュータがコンピュータプログラムをダウンロードしてプログラムするような方法も考えられる。

２００ 画像処理装置
２０２ 動作部
２０３ 画像取得部
２０４ 検出部
２０５ 人体検出部
２０６ 商品検出部
２０７ 貨幣情報関連付け部
２０８ 商品関連付け部
２０９ 決済判定部
２１０ 通知指示部
２１１ 決済部
２１２ 設定部
２１３ 記憶部

Claims (9)

1. ユーザが所持する記憶装置から電子マネーの残高を示す残高情報を取得する取得手段と、
   店舗内を撮像する撮像手段により撮像された画像を用いて、前記ユーザが手に取った商品の合計金額を特定する特定手段と、
   前記特定手段により特定された合計金額が、前記取得手段により取得した前記残高情報により示される残高を超える場合に、前記ユーザにその旨を認識させるための情報を出力する出力手段と
   を備えることを特徴とする情報処理装置。
2. 前記店舗にある各商品の金額を管理する管理手段を更に備え、
   前記出力手段は、前記残高が、前記管理手段で管理するいずれの商品の金額よりも少ない場合に、購入可能な商品がないことを前記ユーザに認識させるための情報を、更に出力することを特徴とする請求項１に記載の情報処理装置。
3. 前記出力手段は、前記合計金額が前記残高を超える場合に、前記ユーザが手に取った商品のうち、前記残高以下となる商品の組み合わせの情報を更に出力することを特徴とする請求項１または２に記載の情報処理装置。
4. 前記出力手段は、前記合計金額が前記残高を超える場合に、前記ユーザが手に取った商品のうち、前記残高以下となる商品の組み合わせであって、前記残高内で商品の合計金額が最大となる商品の組合せの情報を出力することを特徴とする請求項３に記載の情報処理装置。
5. 前記出力手段は、前記合計金額が前記残高を超える場合に、前記ユーザが手に取った商品と類似する商品であって、前記ユーザが手に取った商品よりも金額が安い商品の情報を更に出力することを特徴とする請求項１乃至４のいずれか１項に記載の情報処理装置。
6. 前記出力手段は、音声による通知を行う音声通知手段、または前記記憶装置に対して出力することを特徴とする請求項１乃至５のいずれか１項に記載の情報処理装置。
7. 前記記憶装置が、無線通信を行う機能を備えたＩＣカードである場合、前記出力手段は、前記音声通知手段を介して出力することを特徴とする請求項６に記載の情報処理装置。
8. ユーザが所持する記憶装置から電子マネーの残高を示す残高情報を取得する取得工程と、
   店舗内を撮像する撮像手段により撮像された画像を用いて、前記ユーザが手に取った商品の合計金額を特定する特定工程と、
   前記特定工程で特定された合計金額が、前記取得工程で取得した前記残高情報により示される残高を超える場合に、前記ユーザにその旨を認識させるための情報を出力する出力工程と
   を有することを特徴とする情報処理装置の制御方法。
9. コンピュータを、請求項１乃至７のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。

Images