JP7051411B2 - 飲食物の消費量カウント装置 - Google Patents

Description

この発明は、飲食物の消費量カウント装置に関し、特に、店舗内で提供される飲食物の消費量をカウントする装置に関する。

飲食物を客室に搬送して提供する飲食物提供装置について、例えば下記先行技術が存在する。

特開２００３－１６４３６５号公報

この発明は、飲食物の消費量のカウントを簡易に行うことのできる装置を提供することを目的としている。

上記目的を達成するため、この発明のある局面に従うと、顧客用のテーブルの近傍に設けられる飲食物の運搬経路と、皿に乗った飲食物を前記運搬経路に沿って運搬し、店舗内を循環させる運搬手段とを備えた店舗に設けられる飲食物の消費量カウント装置は、前記テーブルの前記運搬経路上流に設けられ、前記皿を画像で検出することが可能な第１のカメラと、前記テーブルの前記運搬経路下流に設けられ、前記皿を画像で検出することが可能な第２のカメラと、前記第１のカメラで皿が検出されてから所定時間内に、その皿が第２のカメラで検出されるか否かを判定する判定手段と、前記判定手段の判定結果に従って、飲食物の消費量をカウントするカウント手段とを備える。

好ましくは前記第１および第２のカメラは、前記皿の色を識別可能であり、前記カウント手段は、皿の色ごとに飲食物の消費量をカウントする。

好ましくは、前記顧客用のテーブルの近傍には、顧客から注文を受け付ける注文入力装置が備えられ、前記飲食物の消費量カウント装置は、前記注文入力装置に入力された情報と、前記カウント手段のカウント結果とに基づいて飲食料金を演算する演算装置とを備える。

好ましくは前記カウント手段は、複数の顧客グループのそれぞれについて飲食物の消費量をカウントし、前記第２のカメラは、前記テーブルの下流側のテーブルについての前記第１のカメラの機能を兼ね備える。

この発明によると、飲食物の消費量のカウントを簡易に行うことのできる装置を提供することが可能となる。

本発明の実施の形態の１つにおける、飲食物の消費量カウント装置（画像認識システム）５０５を用いた自動会計システムのブロック図である。 図１における飲食物の消費量カウント装置（画像認識システム）５０５の構成を示すブロック図である。 図１における飲食物の消費量カウント装置（画像認識システム）５０５の動作を示すフローチャートである。

図１は、本発明の実施の形態の１つにおける飲食物の消費量カウント装置（画像認識システム）５０５を用いた自動会計システムのブロック図である。

本自動会計システムは、回転寿司店舗など、皿に乗った飲食物を運搬経路（提供レーン）に沿って運搬し、店舗内を循環させる運搬手段（ベルトコンベアなど）を備えた店舗に設けられる。店舗内には飲食物の運搬経路の近傍に沿って、顧客用のテーブルおよび座席が複数備えられる。顧客用のテーブルおよび座席は、複数の顧客グループ用に複数設けられる。

図１を参照して、自動会計システムは、テーブル毎に提供レーンから取られて消費されたすし皿の数を、すし皿の色ごとにカウントする画像認識システム５０５と、顧客テーブルの席の近傍に備えられる、顧客から注文を受け付けるテーブルタッチシステム（注文入力装置）５０３と、テーブルタッチシステム（注文入力装置）５０３から送られてきた情報に基づいて顧客が会計処理、精算を行うセルフレジ５０１とから構成される。

テーブルタッチシステム（注文入力装置）５０３は、タッチパネルディスプレイなどの表示・入力装置を備えており、顧客から商品の注文情報（オーダー情報）を入力し、それを厨房に送信するとともに、オーダー情報を蓄積する。また、テーブルタッチシステム（注文入力装置）５０３は、画像認識システム５０５から送られてくる皿カウント情報を蓄積する。精算時にテーブルタッチシステム（注文入力装置）５０３は、そのテーブルに対応する顧客グループについて蓄積されたオーダー情報と皿カウント情報とに基づいて、精算情報（提供・消費した商品の種類と数量）をセルフレジ５０１に送信する。セルフレジ５０１は、送信されてきた情報に基づいて金額を計算し、顧客に提示するとともに、顧客からの料金の受領や釣り銭の返却などを行う。

なお、テーブルタッチシステム（注文入力装置）５０３に入力された注文に対応する商品は、前述の運搬手段（ベルトコンベアなど）とは異なる搬送手段（別経路のレーン）によって、厨房からそれを注文した顧客へダイレクトに届けられる。

画像認識システム５０５は、１つの顧客テーブル毎に、飲食物の運搬経路の上流側に設けられ、皿を画像で検出することが可能な第１のカメラユニットと、飲食物の運搬経路の下流側に設けられ、皿を画像で検出することが可能な第２のカメラユニットと、各カメラユニットからの信号を処理するパーソナルコンピュータとを備えている。店舗内には、複数の顧客グループが使用する複数のテーブルが存在する。上流側にあるテーブルの第２のカメラユニットの機能と、その１つ下流側にあるテーブルの第１のカメラユニットの機能は、１つのカメラユニットが兼用してもよい。すなわち、１台のカメラユニットに、上流側テーブルの第２のカメラユニットの機能と、その１つ下流側にあるテーブルの第２のカメラユニットの機能とを兼ね備えさせるものである。このような構成を採用することにより、店舗に設置するカメラユニットの数を減少させることができ、機材の設置スペースとコストの減少を図ることができる。

図２は、図１における飲食物の消費量カウント装置（画像認識システム）５０５の構成を示すブロック図である。

ここでは店舗内にＢＯＸ席Ａ～ｎのｎ個のＢＯＸ席があり、各ＢＯＸ席にテーブル１１５ａ～１１５ｎが存在することを示している。ＢＯＸ席Ａが運搬経路の最も上流にある席であり、ＢＯＸ席ｎが運搬経路の最も下流にある席であるものとする。

各ＢＯＸ席にカメラユニット３０１が設けられる。各カメラユニット３０１は、運搬経路、および運搬経路上を運ばれる皿をリアルタイムに常時撮影するＣＣＤカメラ３０１ｃと、運搬経路の撮影地点に向けられる照明装置３０１ｂと、ＣＣＤカメラ３０１ｃおよび照明装置３０１ｂを固定し、電気信号のやりとりを行う基板３０１ａとを備えている。

各カメラユニット３０１に対して専用の小型ＰＣ（パーソナルコンピュータ）３０３が接続されている。各カメラユニット３０１は、そのテーブルにおける運搬経路の上流の位置を撮影し、第１のカメラユニットの機能を発揮する。また、ＢＯＸ席Ｂ～ｎに設けられた各カメラユニット３０１は、そのテーブルの１つ上流側のテーブルについての第２のカメラユニットの機能を兼ね備えている。

各カメラユニット３０１は、例えばＭＩＰＩ（Ｍｏｂｉｌｅ Ｉｎｄｕｓｔｒｙ Ｐｒｏｃｅｓｓｏｒ Ｉｎｔｅｒｆａｃｅ）規格により、専用の小型ＰＣ（パーソナルコンピュータ）３０３と通信を行い、かつ、専用の小型ＰＣ（パーソナルコンピュータ）３０３から電源を供給される。

最終のＢＯＸ席ｎの下流側の第２のカメラの機能を実現するため、ＢＯＸ席ｎの下流側には、カメラユニット３０１と専用の小型ＰＣ（パーソナルコンピュータ）３０３とが設けられている。

図３は、図１における飲食物の消費量カウント装置（画像認識システム）５０５の動作を示すフローチャートである。

このフローチャートに示される処理は、各小型ＰＣ（パーソナルコンピュータ）３０３のＣＰＵによってテーブルごとに実行される。

図を参照して、ステップＳ１０１において、そのテーブルの上流側に設けられた第１のカメラによってすし皿が検出されると、ステップＳ１０３においてその皿の色が識別される。

すし皿の検出は、以下のように行われる。各小型ＰＣ（パーソナルコンピュータ）３０３は、すし皿が存在しない状態でのカメラ画像を事前に記憶している。画像中の画素の一部をサンプリングし、それら画素の輝度を記憶していてもよい。店舗営業中に、記憶されたカメラ画像と撮影されたカメラ画像とで変化があるかが判定され、変化がある場合にはすし皿が検出されたものとする。

すし皿の色の検出は、以下のように行われる。事前に、ＲＧＢの色空間を適当な大きさの領域に分割する。撮影された皿の縁の画素を取得し、それがどの領域に含まれるかを決定し、該当する領域のカウンタを＋１する（この分類によって似た色をまとめ、真値からの誤差、色ムラを除去し平均化する）。皿の縁の全画素の分類後、最も多い色を皿の色とする。

その後、検出した皿の色のＲＧＢコードを色相、明度、色相で色を表現するＨＬＳコードに変換する。変換後の（色相、明度）を色の検出結果とする（彩度は皿毎の差異が出にくいため使用しないものとする）。色相だけでは似た色の差が小さく色数を増やせないため、明度も採用し、同じ系統の色の「明るい色」と「暗い色」とで明度の差をつけ色数を増やすこととしている。

ステップＳ１０５において、所定時間にそのテーブルの下流側に設けられた第２のカメラによってすし皿が検出されたか否かを判定する。これは、運搬手段（ベルトコンベアなど）の運搬速度と、第１のカメラおよび第２のカメラの間の距離から、第１のカメラですし皿が検出されてから第２のカメラですし皿が検出されるまでの時間を所定時間として予測しておき、誤差を考慮した時間範囲内に、第１のカメラによって撮影されたすし皿と同じ皿が第２のカメラによって検出されるか否かを判定するものである。

ステップＳ１０５において、上流で検出されたものと同じすし皿が下流でも検出されたのであれば、そのテーブルにおいてすし皿は取られずに（消費されずに）通過したものと判定する（ステップＳ１０７）。ステップＳ１０５において、上流で検出されたものと同じすし皿が下流では検出されなかったのであれば、そのテーブルにおいてすし皿は取られた（消費された）ものと判定し、対応する色の皿の数を＋１カウントアップする（ステップＳ１０９）。

顧客が食事を終えてテーブルを離れるときに、テーブルタッチシステム５０３の会計・精算ボタンを押下すると、テーブルタッチシステム５０３への入力で注文された商品の種類・数量と、画像認識システム５０５で自動的に検出された消費された商品の種類（皿の色）・数量とが精算情報としてセルフレジ５０１に送られる。

セルフレジ５０１において、テーブルタッチシステム５０３への入力で注文された商品の種類・数量と、画像認識システム５０５で自動的に検出された消費された商品の種類（皿の色）・数量とに基づいて、合計金額が算出される。例えば、すし皿の色により商品の金額に差を設けている場合には、すし皿の色ごとの消費数のカウントが行われ、その色のすし皿の単価と、その色のすし皿の消費数の乗算結果が演算され、全ての色のすし皿についての乗算結果が合計される。

セルフレジ５０１は、金額を顧客に提示するとともに、顧客からの料金の受領や釣り銭の返却などを行う。

なお上述の実施の形態において、カメラによってすし皿上の食品を画像で検出してもよい。すし皿上の食品がテーブル通過中に無くなったかを判定し、無くなった場合にはその食品が消費されたとして消費数をカウントアップするものである。

また、店舗によっては、商品の種類、説明を記載したサンプル皿に続いて、そのサンプル皿に対応する商品を搬送する場合がある。この場合、カメラによってサンプル皿も画像として検出することで、それに続く商品の種類を判定することができる。このようにサンプル皿も画像検出に用いることで、より正確な商品種類の判定を行うことができる。

なお、図３のフローチャートのステップＳ１０５において、上流で検出された皿が所定時間内に下流の第２のカメラで検出されなかったとしても、それは顧客が一旦そのすし皿を手にし、その後それをレーンに戻したことによる場合も考えられる。そこで、第１のカメラで検出されなかったすし皿が第２のカメラで検出されたときには、そのすし皿が実際には消費されなかったものであるとして、消費のカウント数を１減算（消費のカウントから除外）してもよい。

以上のようにして構成された、飲食物の消費量カウント装置および自動会計システムによって、顧客の消費した飲食物の量を簡易かつ正確に演算することが可能となる。

上述の実施の形態における処理は、ソフトウェアにより行っても、ハードウェア回路を用いて行ってもよい。また、上述の実施の形態における処理を実行するプログラムを提供することもできるし、そのプログラムをＣＤ－ＲＯＭ、フレキシブルディスク、ハードディスク、ＲＯＭ、ＲＡＭ、メモリカードなどの記録媒体に記録してユーザーに提供することにしてもよい。プログラムは、ＣＰＵなどのコンピューターにより実行される。また、プログラムはインターネットなどの通信回線を介して、装置にダウンロードするようにしてもよい。

上記実施の形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。

１１５ａ～１１５ｎ ＢＯＸ席のテーブル
３０１ カメラユニット
３０１ｃ カメラ
３０３ 小型ＰＣ
５０１ セルフレジ
５０３ テーブルタッチシステム（注文入力装置）
５０５ 画像認識システム

Claims (3)

1. 複数の顧客グループ用に備えられる顧客用の複数のテーブルの近傍に設けられる飲食物の運搬経路と、
   皿に乗った飲食物を前記運搬経路に沿って運搬し、店舗内を循環させる運搬手段とを備えた店舗に設けられる飲食物の消費量カウント装置であって、
   前記テーブルの前記運搬経路上流に設けられ、前記皿を画像で検出することが可能な第１のカメラと、
   前記テーブルの前記運搬経路下流に設けられ、前記皿を画像で検出することが可能な第２のカメラと、
   前記第１のカメラで前記皿が検出されてから所定時間内に、前記第１のカメラで検出された前記皿が前記第２のカメラで検出されるか否かを判定する判定手段と、
   前記判定手段の判定結果に従って、飲食物の消費量をカウントするカウント手段とを備え、
   前記カウント手段は、前記所定時間内に前記第１のカメラで検出された前記皿が前記第２のカメラで検出されないと前記判定手段にて判定した場合において、前記第１のカメラで検出されなかった前記皿が前記第２のカメラで検出されたときは、前記所定時間内に前記第２のカメラで検出されなかった前記皿の飲食物が消費されなかったものとして、飲食物の消費量のカウント数を１減算し、
   前記第１および第２のカメラの各々は、前記第１および第２のカメラの各々で撮影された前記皿の複数の画素を取得し、前記皿の複数の画素に基づいて、前記皿の色を識別可能であり、
   前記カウント手段は、前記皿の色ごとに、対応する顧客グループについての飲食物の消費量をカウントする、消費量カウント装置。
2. 前記顧客用のテーブルの近傍には、顧客から注文を受け付ける注文入力装置が備えられ、
   前記注文入力装置に入力された情報と、前記カウント手段のカウント結果とに基づいて飲食料金を演算する演算装置とを備えた、請求項１に記載の飲食物の消費量カウント装置。
3. 前記カウント手段は、複数の顧客グループのそれぞれについて飲食物の消費量をカウントし、
   前記第２のカメラは、前記テーブルの下流側のテーブルについての前記第１のカメラの機能を兼ね備える、請求項１または２に記載の飲食物の消費量カウント装置。
   

Images