JP2004206177A - Order confirmation system and program - Google Patents

Order confirmation system and program Download PDF

Info

Publication number
JP2004206177A
JP2004206177A JP2002371190A JP2002371190A JP2004206177A JP 2004206177 A JP2004206177 A JP 2004206177A JP 2002371190 A JP2002371190 A JP 2002371190A JP 2002371190 A JP2002371190 A JP 2002371190A JP 2004206177 A JP2004206177 A JP 2004206177A
Authority
JP
Japan
Prior art keywords
order
item
image
product
ordered
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002371190A
Other languages
Japanese (ja)
Other versions
JP4096729B2 (en
Inventor
Masayuki Furuya
真之 古谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2002371190A priority Critical patent/JP4096729B2/en
Publication of JP2004206177A publication Critical patent/JP2004206177A/en
Application granted granted Critical
Publication of JP4096729B2 publication Critical patent/JP4096729B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To confirm whether an ordered article is correctly delivered, based on an article delivery image which is shot at delivery of the ordered article. <P>SOLUTION: A host device 1 transmits order information of an article received by a terminal 2 of a person in charge owned by the person in charge of an order, and submits the order for the article to a kitchen printer 3 of a division handling the article according to the kind of the ordered article. When the article is delivered to a table, the host device compares the article delivery image registered in an article information file 15 with the article delivery image provided by shooting the article, and determines whether the ordered article is delivered by referring to an order information file 14. When an article different from the ordered article is delivered, the fact is transmitted and reported to the terminal 2 of the person in charge owned by the person in charge of delivery of the article. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
この発明は、注文された品物を品だしする際に、その注文品の品だしを確認する注文品確認システム並びにプログラムに関する。
【０００２】
【従来の技術】
従来、飲食店においては、ウエイトレス等の係員が所持している携帯端末を使用して、顧客から注文された注文情報を入力し、この注文情報をホスト装置へ送信すると、ホスト装置は、注文品の種類に応じて厨房側の種類別キッチンプリンタを指定して注文情報を送信するようにした飲食店仕様のシステム（レストラン管理システム）が構築されている。この種のレストラン管理システムとしては、例えば、顧客の待ち時間を最小限とするようにしたシステムも知られている（特許文献１参照）。
【０００３】
【特許文献１】
特開２００２−２０３０１７号公報
【０００４】
【発明が解決しようとする課題】
ところで、ウエイトレス等の担当者は、注文品をその顧客のテーブル（食卓）まで運んで品だしを行った際に、その注文通りに各商品が揃っているかを顧客に問い合わせて確認するようにしているが、その際、次のような問題が生じることがある。すなわち、人為的な確認作業の為にチェック抜け（確認漏れ）が生じたり、間違ったテーブルに品だしするおそれがある他、例えば、酔い客にあっては、自分が注文した品を忘れてしまうこともある。また、例えば、大人数の宴会等では、とりまとめ役の客が注文通り全ての品が人数分揃ったかを確認することは困難であり、とりまとめ役に大きな負担をかけてしまう。更に、品だしの間違いによって他の顧客にも迷惑をかけたり、それだけ品だしまでの待ち時間が長くなる等、各種の問題を生じる場合がある。
【０００５】
一方、複数の品を注文する場合において、例えば、飲料物にあっては、食事の前に飲料するか、食事の後で飲料するかは顧客に応じて異なり、また、一度に注文した多くの品のうち、特定の品だけを優先して欲しいという要求を受けることがあるが、このような要求に応じてその順に品だしすることは、特に、店が混雑している場合には極めて困難となり、顧客の要求に背くケースも多くなる。
したがって、注文通りに各商品が揃っているかの確認不良によるトラブルや顧客から要求された品だし順を間違える等のトラブルが頻繁に生じることは、店の評判にも響き、信用を損ねる結果となる。
【０００６】
第１の発明の課題は、注文品の品だし時に、その品物を撮影した品だし画像に基づいて注文された品物が正しく品だしされたかを確認できるようにすることである。
第２の発明の課題は、複数の品物が注文されると共に各品物を品出しする順番が要求された場合に、その注文品の品だし時にその品物を撮影した品だし画像を確認しながら次に品だしする品物を決定できるようにすることである。
【０００７】
【課題を解決するための手段】
請求項１記載の発明（第１の発明）は、注文された品物を品だしする際に、その注文品の品だしを確認する注文品確認システムであって、品物毎に予め登録されている品物画像を記憶管理する品物記憶手段と、注文された品物を注文情報として受け付ける注文情報受付手段と、品物を品だしする際に、その品物を撮影する撮影手段と、この撮影手段によって撮影された品だし画像と前記品物記憶手段内の各品物画像とを比較すると共に、前記注文情報受付手段によって受け付けた注文情報を参照することによって注文品が品だしされたかを判別する判別手段と、この判別手段によって注文品と異なる品物が品だしされたことが判別された場合に、その旨を報知する報知手段とを具備するものである。
更に、コンピュータに対して、上述した請求項１記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項９記載の発明）。
【０００８】
したがって、請求項１、９記載の発明は、注文情報に基づいてその品物を品だしする際に、その品物を撮影した品だし画像と、品物毎に予め登録されている品物画像とを比較すると共に、受け付けた注文情報を参照することによって注文品が品だしされたかを判別し、注文品と異なる品物が品だしされた場合に、その旨を報知するようにしたから、品だし時に、人為的な確認作業を行うことなく、間違った品だしを確実に防止することができ、作業全体の効率化・円滑化が可能となる。
【０００９】
なお、請求項１記載の発明は次のようなものであってもよい。
前記注文情報受付手段は、顧客から注文された注文情報を入力してホスト装置へ送信する注文担当者所持の携帯端末であり、前記ホスト装置は、前記撮影手段によって品だし時に撮影された品だし画像と前記品物記憶手段内の各品物画像とを比較すると共に、前記携帯端末から送信されて来た注文情報を参照することによって注文品が品だしされたかを判別し、注文品と異なる品物が品だしされた場合には、品だし担当者所持の携帯端末へその旨を送信報知する（請求項２記載の発明）。
したがって、請求項２記載の発明によれば、請求項１記載の発明と同様の効果を有する他に、注文担当者所持の携帯端末によって受け付けた注文情報をホスト装置へ送信すると、ホスト装置は、品だし時に撮影された品だし画像と、品物毎に予め登録されている品物画像とを比較すると共に、受け付けた注文情報を参照することによって注文品が品だしされたかを判別し、注文品と異なる品物が品だしされた場合には、品だし担当者所持の携帯端末へその旨を送信報知するようにしたから、例えば、飲食店システムにおいて、通常、各担当者が所持している携帯端末を利用して、品だし確認を行うことができ、更に、作業の効率化・円滑化を促進することができる。
【００１０】
この場合、顧客周辺を撮影した撮影画像を解析することによって当該撮影画像内に出現した品だし担当者が商品を顧客に出している状態を認識した際に、その商品を撮影した商品画像を前記品だし画像としてもよい（請求項３記載の発明）。すなわち、飲食店を例に挙げると、食卓の周辺がモニタ撮影されている状態において、そのモニタ画像内に出現したウエイター、ウエイトレスが着用しているユニホームの色、形状、模様、マーク等によってウエイター、ウエイトレスを認識すると共に、このウエイター、ウエイトレスがテーブルの位置で止まり、品物を出す動作を始めたことを画像解析によって認識した際に、その商品を撮影した商品画像を品だし画像として特定することによって、品だし担当者等による撮影指示等の人為的な作業を一切必要とせずに、品だし商品を自動取得することが可能となる。
【００１１】
顧客周辺を撮影した撮影画像を解析することによって当該撮影画像内に品だし担当者が出現したことを認識した場合に、その人物像に基づいて担当者を認識すると共に、その品だし担当者所持の携帯端末へ注文品と異なる品物が品だしされた旨を送信する（請求項４記載の発明）。
したがって、請求項４記載の発明によれば、請求項１、２記載の発明と同様の効果を有する他に、撮影画像を解析することによって品だし担当者を認識してその担当者所持の携帯端末を特定するようにしたから、品だし担当者から特別な要求がなくても、品だし確認の照合結果をその品だし担当者宛に直接通知することが可能となる。
【００１２】
前記撮影手段は、予め設置されている複数台のカメラのうち、その顧客周辺に設置されているカメラによって撮影された商品画像を品だし画像として前記ホスト装置へ送信すると共に、当該カメラの設置位置を識別する為の識別情報を前記ホスト装置へ送信し、前記ホスト装置は、前記撮影手段から品だし画像と共に送信されて来た識別情報に基づいて顧客の特定を行う（請求項５記載の発明）。
したがって、請求項５記載の発明によれば、請求項１、２記載の発明と同様の効果を有する他に、顧客周辺に設置されているカメラによって撮影された品だし画像と共に送信されて来た当該カメラの設置位置を識別する為の識別情報に基づいて品だし先の顧客の特定をするようにしたから、例えば、飲食店において、テーブル（食卓）とカメラとを１対１に対応付けておれば、このテーブル番号から品だし先の顧客を容易に特定することができる。
【００１３】
前記報知手段は、注文品と異なる品物が品だしされた場合に、その品物の正規な注文元を報知する（請求項６記載の発明）。これによって、間違った品だしを確実に防止することができる他に、その品物を正規な注文元へ素早く品だしすることが可能となる。
【００１４】
正しく品だしされた場合に、前記撮影手段によって撮影された品だし画像を記憶保存する保存手段と、入力された検索条件に基づいて前記保存手段を検索し、入力条件に該当する品だし画像を読み出して案内出力する案内手段とを設ける（請求項７記載の発明）。
したがって、請求項７記載の発明によれば、請求項１、２記載の発明と同様の効果を有する他に、正しく品だしされた場合に、その品だし画像を記憶保存しておき、必要に応じて入力された条件に該当する品だし画像を出力するようにしたから、例えば、酔い客が注文した品を忘れてしまった場合、特別なオプション注文（大盛り、追加トッピング等）を注文通りに出したかを後で確認する場合等の証拠として、品だし画像を顧客に提示することができ、顧客とのトラブル防止に役立つ。
【００１５】
請求項８記載の発明（第２の発明）は、注文された品物を品だしする際に、その注文品の品だしを確認する注文品確認システムであって、品物毎に予め登録されている品物画像を記憶管理する登録画像記憶手段と、複数の品物に関する注文情報を受け付けた際に、各品物を品出しする順番も合わせて要求された場合に、その注文情報と共に要求された品だし順を入力する注文情報受付手段と、品物をその注文元へ品だしする際に、その品物を撮影する撮影手段と、前記注文情報受付手段によって受け付けた注文情報を参照し、品だし順が要求されている場合には、この品だし順にしたがって各品物を出す為に、前記撮影手段によって撮影された品だし画像と前記品物記憶手段内の各品物画像とを比較することによってその品物を認識した後に、この品物の次に品だしすべき品物を決定する動作を品だし順にしたがって繰り返す品だし管理手段とを具備するものである。
更に、コンピュータに対して、上述した請求項８記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項１０記載の発明）。
【００１６】
したがって、請求項８、１０記載の発明は、複数の品物に関する注文情報を受け付けた際に各品物を品出しする順番も合わせて要求された場合には、この品だし順にしたがって各品物を出す為に、その品物を撮影した品だし画像と、品物毎に予め登録されている品物画像とを比較することによってその品物を認識した後に、この品物の次に品だしすべき品物を特定する動作を品だし順にしたがって繰り返すようにしたから、人為的な確認作業を行うことなく、注文品の品だし時にその品物を撮影した品だし画像を確認しながら次に品だしする品物を決定することができ、例えば、飲食店において、店が混雑している場合でも、顧客の要求通りの品だしすることが可能となり、作業全体の効率化・円滑化を図ることが可能となる。
【００１７】
【発明の実施の形態】
（第１実施形態）
以下、図１〜図１６を参照してこの発明の第１実施形態を説明する。
図１は、この実施形態におけるレストラン管理システムの全体構成を示したブロック図である。
このレストラン管理システムは、大型飲食店内に構築された構内通信システム（ＬＡＮ）であり、ホスト装置１を中核とする構成となっている。このホスト装置１には、各ウエイター、ウエイトレス（以下、担当者と称する）が所持している担当者端末群２と、厨房側において部門別に設置されているキッチンプリンタ群３と、店内の各食卓（テーブル）をその斜め上方向から撮影する食卓カメラ群４とが無線ＬＡＮ５を介して接続されている。なお、以下、担当者端末群２、キッチンプリンタ群３、食卓カメラ群４内の個々の端末、プリンタ、カメラにおいても、同一番号２、３、４を付して説明する。
【００１８】
ホスト装置１は、このレストラン管理システムの全体動作を制御する通信機能付きのデータ処理装置である。なお、ホスト装置１は、その機能別に設けた複数台のデータ処理装置によって構成するようにしてもよい。
担当者端末群２は、顧客から注文を受けた際に、その注文情報を入力する携帯端末群であり、ホスト装置１は、担当者端末２から送信されて来た顧客別の注文情報を受信すると、この注文情報を登録する登録処理を実行すると共に、その注文内容に基づいてキッチンプリンタ３に対して発注する発注処理を行う。
【００１９】
キッチンプリンタ群３は、「ドリンク」、「軽食」、「料理」の各部門別に、ホスト装置１から送信されて来た発注情報を受信して印刷出力するプリンタ群である。
食卓カメラ群４は、図２に示すように、各テーブルに１対１に対応して設置され、その斜め上方向（天井）からテーブル上に品だしされた商品をカラー撮影する為のモニタカメラ群であり、テーブル上に品だしされた商品を認識可能なサイズで拡大撮影を行うもので、動画撮影を行うビデオカメラあるいは数秒単位で連続撮影を行うスチールカメラによって構成されている。そして、食卓カメラ群４は、所定のタイミング毎（例えば、数秒間隔毎）にそのモニタ画像をホスト装置１へ送信するもので、その送信タイミングは、各カメラ毎に予め設定されている。すなわち、１台目のカメラからＮ台目の順にそのモニタ画像をサイクリックにホスト装置１へ送信するようにしている。
【００２０】
ホスト装置１は、その主要機能として、通信管理部１１、注文情報管理部１２、テーブル（食卓）情報判断部１３を有している。
通信管理部１１は、担当者端末群２、キッチンプリンタ群３、食卓カメラ群４との間においてデータの送受信を制御すると共に、データを受信する毎に、その受信データの種別を判別し、その種別に応じて注文情報管理部１２、テーブル情報判断部１３を起動するようにしている。注文情報管理部１２は、担当者端末群２から送信されて来た注文情報を取得して、注文情報ファイル１４に登録する登録機能１２−１と、この注文情報ファイル１４に基づいてキッチンプリンタ群３に対して発注する為の発注情報を生成する発注機能１２−２を有している。
【００２１】
テーブル情報判断部１３は、食卓カメラ４から送信されて来たモニタ画像を解析し、このモニタ画像内に現れた品だし担当者が商品を顧客に出している状態を認識した際に、その担当者の顔画像や全体画像から担当者を特定すると共に、その商品を撮影すべきことをその食卓カメラ４に対して指示するようにしている。この場合、食卓カメラ４は、この撮影指示に応答してテーブル上の品だし商品を拡大撮影し、その「テーブル番号」と共に「品だし画像」をホスト装置１へ送信する。ここで、テーブル情報判断部１３は、食卓カメラ４から送信されて来た品だし画像を受信すると、この品だし画像に基づいて商品情報ファイル１５を検索するようにしている。
【００２２】
この商品情報ファイル１５については、後で詳述するが、商品毎に予め撮影した「商品画像」を登録画像として記憶管理するものであり、テーブル情報判断部１３は、「品だし画像」と「商品録画像」とを比較することによって品だし商品を特定した後に、食卓カメラ４からのテーブル番号とこの特定商品とに基づいて注文情報ファイル１４をアクセスし、注文通りに品だしされたか否かを照合するようにしている。この照合結果に基づいて正規な品だしを示しメッセージや品だし間違えを示すメッセージを作成し、上述のようにして特定した品だし担当者宛に（当該担当者所持の端末２に対して）案内送信するようにしている。
【００２３】
図３は、注文情報ファイル１４の内容を示した図である。
この注文情報ファイル１４は、注文商品毎に注文レコードを記憶管理するもので、注文レコードは、「注文番号」、「テーブル番号」、「商品コード」、「発注済みフラグ」、「出品画像」の各項目を記憶する構成となっている。
「注文番号」は、商品が注文される毎に更新される一連番号であり、「テーブル番号」は、注文元の食卓を識別する食卓番号である。「発注済みフラグ」は、注文情報をキッチンプリンタ３へ送信済み（発注済み）であることを示すフラグであり、フラグ“１”は発注済み、“０”は未発注を示している。
【００２４】
「出品画像」は、注文された商品が品だしされた際に、食卓カメラ４によって撮影された品だし画像（カラー画像）であり、その項目内に“０”がセットされている場合には、品だし画像の未登録状態（品だし前の状態）であることを示している。なお、図示の例では、同一商品が複数個分、同時に注文された場合には、その個数分の注文レコードを生成して登録するようにしているが、個数分の注文レコードを生成登録せず、例えば、注文レコード内に「数量」の項目を設けておき、同一商品が複数個同時に注文された場合には、この「数量」の項目にその注文数をセットするようにしてもよい。
【００２５】
ホスト装置１は、注文情報ファイル１４を検索し、その商品に該当する部門を特定して部門別の発注情報を生成し、キッチンプリンタ群３へ送信する発注処理を行う他に、担当者端末２から注文内容の確認要求を受けた場合にも、注文情報ファイル１４を検索してその要求に応じた注文内容を読み出し、その要求元である担当者端末２へ送信する注文確認処理を行うようにしている。すなわち、この注文確認要求は、顧客との間で注文内容を確認し合う事態が生じた場合に行われるもので、その担当者端末２から注文確認要求と共に「テーブル番号」、「商品コード」が送信されて来た場合、ホスト装置１は、この「テーブル番号」、「商品コード」に基づいて注文情報ファイル１４を検索し、この問合せ内容に応じた注文情報を読み出してその要求元へ案内送信するようにしている。
【００２６】
図４（Ａ）は、商品情報ファイル１５の内容を示した図である。
この商品情報ファイル１５は、注文可能な全商品分の商品情報として、商品毎のレコードを記憶管理するもので、各商品レコードは、「商品コード」、「商品画像」、「厨房部門コード」の各項目を有する構成となっている。ここで、「商品画像」は、注文可能な商品をその斜め上方向から撮影した撮影画像（静止画）であり、予め商品毎に登録された登録画像である。この場合、商品が料理であれば、そのできあがり状態を撮影したものであり、特別なオプション注文（大盛り、追加トッピング等）の商品画像も含まれている。「厨房部門コード」は、「ドリンク」、「軽食」、「料理」の各部門別のうち、当該商品がどの部門に属するかを示す為の部門情報である。
【００２７】
図４（Ｂ）は、担当者別ファイル１６の内容を示した図である。
担当者別ファイル１６は、担当者別に、その担当者に関する情報を記憶管理するもので、各担当者レコードは、「担当者コード」、「人物特徴情報」、「端末番号」の各項目を有する構成となっている。ここで、「担当者コード」は、担当者に割当てられた識別情報であり、「人物特徴画像」は、その担当者の顔を中心に撮影した顔画像および身体的な特徴（性別、身長、体格、髪型、眼鏡の有無等）を示す情報である。「端末番号」は、その担当者所持の担当者端末２を呼び出す為のアドレス情報である。
【００２８】
図５は、ホスト装置１の基本的構成要素を示したブロック図である。
ＣＰＵ１０１は、記憶装置１０２内のオペレーティングシステムや各種アプリケーションソフトにしたがってこのホスト装置１の全体動作を制御する中央演算処理装置である。記憶装置１０２は、プログラム記憶領域とデータ記憶領域とを有し、このプログラム記憶領域内には、オペレーティングシステムの他に、上述した通信管理部１１、注文情報管理部１２、テーブル情報判断部１３に対応する各種アプリケーションプログラム等が格納され、また、データ記憶領域には、上述した注文情報ファイル１４、商品情報ファイル１５、担当者別ファイル１６等が格納され、磁気的、光学的、半導体メモリ等やその駆動系によって構成されている。
この記録装置１０２はハードディスク等の固定的なメモリの他、ＣＤ−ＲＯＭ、ＤＶＤ等の着脱自在な記憶媒体を装着可能な構成であってもよい。
【００２９】
この記憶装置１０２内のプログラムやデータは、必要に応じてＲＡＭ（例えば、スタティックＲＡＭ）１０３にロードされたり、ＲＡＭ１０３内のデータが記憶装置１０２にセーブされる。なお、ＲＡＭ１０３内には、プログラム実行領域と作業領域とを有している。更に、ＣＰＵ１０１は通信装置１０４を介して他の電子機器側のプログラム／データを直接アクセスして使用したり、通信装置１０４を介してダウンロード受信することもできる。通信装置１０４は、無線の通信インターフェイスである。一方、ＣＰＵ１０１にはその入出力周辺デバイスである入力装置１０５、表示装置１０６、印刷装置１０７がバスラインを介して接続されており、入出力プログラムにしたがってＣＰＵ１０１はそれらの動作を制御する。
【００３０】
図６は、食卓カメラ４の基本的構成要素を示したブロック図である。
この食卓カメラ４も、上述したホスト装置１の基本要素と同様に、ＣＰＵ４１、記憶装置４２、ＲＡＭ４３、通信装置４４を有する他、撮影装置４５を有している。ここで、ＲＡＭ４３には、記憶装置４２内に予め設定されている「テーブル番号」がセットされている。この「テーブル番号」は、この食卓カメラ４に予め１対１に対応付けられているテーブルの番号であり、食卓カメラ４は、ホスト装置１からの撮影指示を受けた際に、このテーブル上に品だしされた商品を拡大撮影すると共に、この品だし画像と共にＲＡＭ４３内のテーブル番号をホスト装置１へ送信するようにしている。なお、食卓カメラ４は、上述のように所定のタイミング毎（例えば、数秒間隔毎）にそのモニタ画像をホスト装置１へ送信する動作を行う。
【００３１】
次に、この第１実施形態におけるレストラン管理システムの動作概念を図７〜図１４に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作を逐次実行する。また、伝送媒体を介して伝送されてきた上述のプログラムコードにしたがった動作を逐次実行することもできる。このことは後述する他の実施形態においても同様であり、記録媒体の他、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施形態特有の動作を実行することもできる。
【００３２】
図７は、ホスト装置１の全体動作の概要を示したフローチャートである。
ここで、図８〜１２は、図７で示した各処理を詳述する為のフローチャートであり、また、図１３は、担当者端末２側の動作を示したフローチャート、図１４は、食卓カメラ４側の動作を示したフローチャートである。
先ず、図７において、ホスト装置１側の通信管理部１１は、 担当者端末２あるいは食卓カメラ４から送信されて来るデータを受信する受信待ち状態において、何らかのデータを受信すると（ステップＡ１）、この受信データの種別を判別する（ステップＡ２）。この場合、担当者端末２からは注文情報／注文確認要求が送信され、また、食卓カメラ４からはテーブル番号／モニタ画像が送信される。
いま、担当者端末２から送信されて来た注文情報（テーブル番号、商品コード、数量）を受信した場合には、この注文情報に基づいて注文レコードを生成して注文情報ファイル１４へ新規登録する処理を行った後に（ステップＡ３）、未発注品の発注処理を行う（ステップＡ４）。
【００３３】
ここで、図１３のフローチャートを参照して担当者端末２側での注文入力処理について説明しておく。
先ず、担当者端末２は、注文情報の入力が指示されると（ステップＧ１）、注文情報（商品コード、数量）の入力を受け付け（ステップＧ２）、１テーブル分（全商品分）の入力終了が指示されるまで（ステップＧ３）、入力された注文情報を受け付ける。ここで、全商品分の入力が終了すると、テーブル番号の入力を受け付け（ステップＧ４）、入力された各注文内容（商品コード、数量）と共に、このテーブル番号をホスト装置１へ送信する（ステップＧ４）。
【００３４】
図８は、図７で示した注文情報登録処理を詳述する為のフローチャートである。
先ず、ホスト装置１は、注文情報ファイル１４をアクセスしてその最終レコード内から「注文番号」を読み出し、この「注文番号」に“１”を加算してその値を更新することにより「注文番号」を生成すると共に（ステップＢ１）、この「注文番号」、「テーブル番号」、「商品コード」を含む注文レコードを生成した後（ステップＢ２）、この生成レコード内の「発注済みフラグ」、「出品画像」の項目を初期化して、注文情報ファイル１４へ追加登録する（ステップＢ３）。そして、全商品分の登録が完了するまで（ステップＢ４）、上述の登録処理が繰り返される（ステップＢ１〜Ｂ４）。この場合、上述したように同一商品が複数個同時に注文された場合には、その個数分の注文レコードが生成されて追加登録される。
【００３５】
図９は、図７で示した未発注品の発注処理を詳述する為のフローチャートである。
先ず、ホスト装置１は、注文情報ファイル１４をアクセスして「発注済みフラグ」が“０（未発注）”にセットされている全ての注文レコードを発注対象として取得しておく（ステップＣ１）。この状態において、この未発注レコード群の中から「テーブル番号」、「商品コード」が同一のレコードを指定し（ステップＣ２）、同じ「テーブル番号」で同じ「商品コード」を持ったレコードが複数存在している場合には（ステップＣ３）、その商品の個数を算出しておく（ステップＣ４）。
そして、この指定レコード内の「商品コード」に基づいて商品情報ファイル１５をアクセスして該当する「厨房部門コード」を取得し（ステップＣ５）、この「厨房部門コード」で示されるキッチンプリンタ３を送信先として指定し、「商品コード」、「個数」、「テーブル番号」を含む発注情報を生成して送信する（ステップＣ６）。
【００３６】
このようにして発注を行った後は、この未発注指定レコード内の「発注済みフラグ」を“１”に書き込んで発注済みにセットしておく（ステップＣ７）。
ここで、図１５は、図３に示した注文情報ファイル１４において、図示の各注文商品を全て発注した後における注文情報ファイル１４の内容を示した図である。この場合、各注文レコード内の「発注済みフラグ」は、“１”に書き換えられて発注済みとなっているが、発注直後においては、品だし前であるから、各発注済み商品の「出品画像」は、“０”のままとなっている。
そして、次のステップＣ８に移り、未発注レコードは他に有るか否かをチェックし、有れば、ステップＣ２に戻って上述の動作を１レコード毎に繰り返す。
【００３７】
一方、ホスト装置１は、各食卓カメラ４から所定のタイミング毎に順次送信されて来るモニタ画像を受信すると（図７のステップＡ１、Ａ２）、このモニタ画像を解析して品だし担当者を認識すると共に、品だしされたテーブル対応の食卓カメラ４に対して品だし画像の撮影を指示するモニタ画像解析処理を実行する（ステップＡ７）。
図１０は、図７で示したモニタ画像解析処理を詳述する為のフローチャートであり、先ず、ホスト装置１は、食卓カメラ４からのモニタ画像を受信すると、このモニタ画像内の人物像を解析し（ステップＤ１）、この人物像の衣服に着目し、品だし担当者（ウエイター、ウエイトレス）が着用しているユニフォームの色、形、柄、マーク等を総合的に比較して（ステップＤ２）、品だし担当者がその画面内に現れたか否かの照合チェックを行う（ステップＤ３）。
【００３８】
ここで、モニタ画面内に品だし担当者が写っていなければ（ステップＤ３でＮＯ）、この処理の終了となるが、品だし担当者を認識した場合には、その行動の解析を行う（ステップＤ４）。つまり、テーブル付近を通過するだけの担当者を除く為に、商品を持っている品だし担当者がテーブルの前に止まり、そのテーブルに品出している状態であるかをその担当者の行動を解析することによって認識するが、この担当者の行動監視は、所定時間分（例えば、５秒程度）行う。
いま、テーブル付近を通過するだけの担当者であると認識した場合には（ステップＤ５でＮＯ）、この処理の終了となるが、担当者が品出しを行っている状態を認識した場合には（ステップＤ５でＹＥＳ）、更に、その品だし担当者の特徴を解析すると共に（ステップＤ６）、この解析結果に基づいて担当者別ファイル１６内の予め登録されている「人物特徴情報」との比較照合を行い（ステップＤ７）、その品だし担当者を認識特定する（ステップＤ８）。
【００３９】
この場合、人物像の中から特徴部分を抽出して特徴比較を行うが、その際、顔の向き、大きさ等を補正した後に、顔の輪郭、目、口、鼻、額等の形、位置、大きさ等を比較すると共に、性別、顔、眼鏡の有無、身長、体型、髪型、色を総合的に比較して担当者認識を行う。これによって品だし担当者を認識した場合には、担当者別ファイル１６から対応する「端末番号」を読み出して、その担当者が所持している担当者端末２を特定した後（ステップＤ９）、品だしを行っているテーブル対応の食卓カメラ４に対して品だし撮影を指示する（ステップＤ１０）。
その後、その担当者がテーブル上に全ての商品を品だしす動作が完了するまで（ステップＤ１１）、次の商品が品だしさける毎に、品だし撮影を指示するが（ステップＤ１０）、全商品分の品だし完了を検知した際には、その完了通知をこの食卓カメラ４に対して送信する（ステップＤ１２）。
【００４０】
図１４は、各食卓カメラ４の動作を示したフローチャートである。
先ず、食卓カメラ４は、予め設定されている送信タイミングに達したかをチェックしており（ステップＨ１）、自己の送信タイミングである場合には、予め設定されている「テーブル番号」と共に、その時の「モニタ画像」をホスト装置１へ送信する（ステップＨ２）。
また、ホスト装置１から品だし撮影の指示を受けた場合には（ステップＨ３）、そのテーブル上に品だしされた商品を拡大撮影した後に（ステップＨ４）、「テーブル番号」を読み出し（ステップＨ５）、その時の「品だし画像」を「テーブル番号」と共に、ホスト装置１へ送信する（ステップＨ６）。この場合、ホスト装置１から全商品分の品だし完了通知を受けるまで（ステップＨ７）、次の商品が品だしさける毎に「テーブル番号」と共に、その時の「品だし画像」をホスト装置１へ送信する動作を繰り返す（ステップＨ４〜Ｈ７）。
【００４１】
ホスト装置１は、品だし撮影指示に応答して食卓カメラ４から送信されて来た「テーブル番号」、「品だし画像」を受信すると（図７のステップＡ５）、品だしチェック処理を実行する（ステップＡ６）。
図１１は、図７で示した品だしチェック処理を詳述する為のフローチャートである。先ず、ホスト装置１は、受信した品だし画像の中から特徴部分を抽出し（ステップＥ１）、商品情報ファイル１５内の各「商品画像」と比較して該当する商品画像を検索する（ステップＥ２）。この場合、品だし画像との特徴比較において、商品の向き、大きさ等を補正した後に、商品の外形、大きさ、色、特別なオプション注文（大盛り、追加トッピング）等を総合的に画像比較することによって行う。
【００４２】
このようにして品だし商品に該当する商品画像を検索した後、ホスト装置１は、この「商品画像」に対応付けられている「商品コード」を商品情報ファイル１５から読み出し（ステップＥ３）、この「商品コード」に基づいて注文情報ファイル１４をアクセスし、この「商品コード」と一致し、かつ、「出品画像」がセットされていない商品（未品だし商品）のレコードを抽出すると共に、この抽出レコードの中で「注文番号」が一番若い「注文番号」を持ったレコードから「テーブル番号」を優先取得する（ステップＥ４）。言換えれば、同一商品が複数のテーブルから注文され、かつ、その商品を何れのテーブルにも出していない場合には、その注文順に商品を出す為に、一番若い「注文番号」を持ったレコードから「テーブル番号」を優先取得するようにしている。
【００４３】
ここで、受信取得した「テーブル番号」と優先取得した「テーブル番号」とを比較して、両者の一致を判別する（ステップＥ５）。いま、不一致が検出された場合には、その商品を注文先顧客に品だしを行ったことは正しいが、先に注文した顧客に対してその商品を品だしすべきところ、間違って後で注文した顧客（テーブル）に出してしまった場合であるから、先に注文した優先顧客（テーブル）をその担当者に知らせる為に、照合結果として、優先取得した「テーブル番号」と「商品名」とを含む照合ＮＧメッセージを作成する（ステップＥ６）。
一方、受信取得した「テーブル番号」と優先取得した「テーブル番号」とが一致している場合には、その商品を注文順に正しく品だしを行った場合であるので、この注文レコード内の「出品画像」に、この品だし画像を登録保存すると共に（ステップＥ７）、正しい品だしである旨を示す照合ＯＫメッセージを作成する（ステップＥ８）。
【００４４】
図１６は、図３で示した注文情報ファイル１４において、「テーブル番号」が“１”で示される各注文商品のうち、その一部の商品のみの品だしが完了した場合（品だし途中）における注文情報ファイル１４の内容を示した図である。
この場合、正しく品だしされた各注文レコードには、その品だし画像が「出品画像」として登録保存されているが、品だし前あるいは間違った品だしの場合には、その「出品画像」は、“０”のままとなっている。
【００４５】
これによって作成された照合メッセージは、上述した図１０のモニタ画像解析処理のステップＤ８、Ｄ９において、品だし担当者として特定された担当者所持の担当者端末２へ案内送信される（図７のステップＡ６）。
この場合、担当者端末２側では、ホスト装置１からの照合結果通知を受信すると（図１３のステップＧ６）、その照合結果を判別し（ステップＧ７）、照合ＯＫであれば、この照合ＯＫメッセージをその端末画面に表示するが（ステップＧ８）、照合ＮＧであれば（ステップＧ７）、この照合ＮＧメッセージをその端末画面に表示すると共に（ステップＧ９）、警告アラーム音を出力する（ステップＧ１０）。この場合、当該担当者は、品だし間違いを知ることができ、照合ＯＫメッセージ内の「テーブル番号」、「商品名」によって、どの商品をどのテーブルに持ってゆけばよいかを確認することができる。
【００４６】
他方、担当者端末２側において、顧客との間で注文内容を確認し合う事態が生じた場合に、その担当者は、注文確認要求が有る旨の入力指示を行った後に（図１３のステップＧ１１）、その顧客の「テーブル番号」を入力すると共に（ステップＧ１２）、顧客から特定商品だけの確認要求を受けた場合には、更に、その商品コードの入力も行う（ステップＧ１３）。ここで、この担当者端末２は、入力された情報に自己の「端末番号」を付加した注文確認の要求をホスト装置１に対して送信する（ステップＧ１４）。
【００４７】
ここで、ホスト装置１は、注文確認要求を受信すると（図７のステップＡ１、Ａ２）、注文確認処理を実行する（ステップＡ８）。
図１２は、図７で示した注文確認処理を詳述する為のフローチャートである。先ず、ホスト装置１は、受信した「テーブル番号」に基づいて注文情報ファイル１４をアクセスし（ステップＦ１）、この「テーブル番号」対応の各注文レコードを抽出する（ステップＦ２）。この場合、受信データの中に「商品コード」が含まれている場合には（ステップＦ３）、更に、この各抽出レコードの中からこの商品に該当する注文レコードを抽出する（ステップＦ４）。
そして、抽出レコードから「品だし画像」、「テーブル番号」、「商品コード」を読み出して確認案内情報を作成し（ステップＦ５）、この受信データの中に含まれている「端末番号」で示される要求元の担当者端末２へこの確認案内情報を送信する（ステップＦ６）。
ここで、確認要求元である担当者端末２は、ホスト装置１からの確認案内情報を受信すると（図１３のステップＧ１５）、これを端末画面に表示させる（ステップＧ１６）。この場合、担当者は、注文商品を正しく品だしした旨の証拠として、この確認案内画面を顧客に見せながらの対処を行う。
【００４８】
以上のように、この第１実施形態においてホスト装置１は、注文担当者所持の担当者端末２によって受け付けた注文情報を送信すると、この商品をその種類に応じて対応する部門のキッチンプリンタ３に対して発注した後において、その商品がテーブルへ品だしされた際に、その商品を撮影した品だし画像と、商品情報ファイル１５内の各登録画像（商品画像）とを比較すると共に、注文情報ファイル１４を参照することによって注文品が品だしされたかを判別し、注文品と異なる商品が品だしされた場合には、品だし担当者所持の担当者端末２へその旨を送信報知するようにしたから、飲食店において通常、各担当者が所持している担当者端末２を利用して、品だし確認を行うことができると共に、品だし時に、人為的な確認作業を行うことなく、間違った品だしを確実に防止することができ、作業全体の効率化・円滑化が可能となる。
【００４９】
この場合、食卓カメラ４によって食卓の周辺がモニタ撮影されている状態において、ホスト装置１は、このモニタ画面内に出現したウエイター、ウエイトレスが着用しているユニホームの色、形状、模様、マーク等によって担当者の出現を認識すると共に、その担当者がテーブルの位置で止まり、品物を出す動作を始めたことを画像解析によって認識した際に、食卓カメラ４に対して撮影指示を与え、その時に撮影された商品画像を取得して品だし画像として特定するようにしたから、品だし担当者等による撮影指示等の人為的な作業を一切必要とせずに、品だし商品を自動取得することが可能となる。
更に、モニタ画像を解析することによって品だし担当者を認識してその担当者所持の担当者端末２を特定するようにしたから、品だし担当者から特別な要求がなくても、品だし確認の照合結果を品だし担当者宛に直接通知することが可能となる。
【００５０】
ホスト装置１は、テーブル周辺に設置されている食卓カメラ４によって撮影された品だし画像と共に送信されて来た当該カメラ４の設置位置を識別する為の識別情報（テーブル番号）に基づいて品だし先のテーブルを特定するようにしたから、テーブルとカメラとを１対１に対応付けておけば、このテーブル番号から品だし先の顧客を特定することができる。
ホスト装置１は、注文品と異なる品物が品だしされた場合に、その品物の正規な注文元を示す「テーブル番号」を品だし担当者所持の担当者端末２へ送信するようにしたから、その商品を正規なテーブルへ素早く品だしすることが可能となる。
【００５１】
また、ホスト装置１は、ただしく品だしされた商品の品だし画像を注文情報ファイル１４内に記憶保存しておき、顧客から担当者端末２を介して注文確認の要求を受けた場合に、要求内容に該当する品だし画像を担当者端末２へ案内送信するようにしたから、例えば、酔い客が注文した品を忘れてしまった場合、特別なオプション注文（大盛り、追加トッピング等）を注文通りに出したかを後で確認する場合等の証拠として、品だし画像を顧客に提示することができ、顧客とのトラブル防止に役立つ。
【００５２】
なお、上述した第１実施形態において注文情報ファイル１４は、各注文レコード内に一連番号としての「注文番号」をセットするようにしたが、図１７に示すように、「注文番号」の代わりに「注文時刻」を記憶するようにしてもよい。この場合、注文を受ける毎に、その時の現在時刻（時分）を注文時刻として注文レコード内にセットするようにすれば、注文時刻順に品だし管理が可能となる。また、この「注文時刻」から所定時間（例えば、１５分）の経過を検出したか否かを監視し、所定時間の経過を検出した際に、キッチンプリンタ３へ催促通知を行うこともできる。更に、図１７に示すように、キッチンプリンタ３に対して発注手配を行った際の「発注時刻」を注文レコード内にセットするようにすれば、「発注時刻」から所定時間（例えば、１５分）の経過を検出したか否かを監視し、所定時間が経過しても品だしされていない場合に、キッチンプリンタ３へ催促通知を行うこともできる。
【００５３】
また、予め予め商品毎に登録された登録画像としての「商品画像」は、注文可能な商品をその斜め上方向から撮影したものであるが、商品を斜め左右前後の４方向から撮影した複数の画像であってもよい。このように複数の方向から撮影した登録画像を用意しておくことにより、例えば、品だし商品の一部が人の影に入ってしまったような場合等、品だし画像の撮影状況に全く影響されることなく、画像照合を正確に行うことが可能となる。
【００５４】
また、上述した第１実施形態においては、顧客から担当者端末２を介して注文確認の要求を受けた場合に、要求内容に該当する品だし画像を注文情報ファイル１４から読み出して担当者端末２へ案内送信するようにしたが、例えば、週単位、月単位毎に品だし画像を注文情報ファイル１４から読み出して表示／印刷出力するようにすれば、料理の出来具合等を比較検討することも可能となる。
更に、また、品出しチェックを行う際に、その商品と一緒に出される付属品（例えば、ドレッシング、調味料、フォーク等）も合わせてチェックするようにしてもよい。
【００５５】
一方、コンピュータに対して、上述した各手段を実行させるためのプログラムコードをそれぞれ記録した記録媒体（例えば、ＣＤ−ＲＯＭ、フロッピィデスク、ＲＡＭカード等）を提供するようにしてもよい。
すなわち、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、品物毎に予め登録されている品物画像を記憶管理する機能と、注文された品物を注文情報として受け付ける機能と、品物を品だしする際に、その品物を撮影する機能と、撮影された品だし画像と前記品物画像とを比較すると共に、受け付けた注文情報を参照することによって注文品が品だしされたかを判別する機能と、注文品と異なる品物が品だしされたことが判別された場合に、その旨を報知する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００５６】
（第２実施形態）
以下、この発明の第２実施形態について図１８〜図２２を参照して説明する。なお、上述した第１実施形態は、注文品の品だし時に、その商品を撮影した品だし画像に基づいて注文された商品が正しく品だしされたかを確認できるようにしたが、この第２実施形態にあっては、複数の商品が同時に注文されると共に、各商品を品出しする順番が要求された場合に、その注文品の品だし時にその商品を撮影した品だし画像を確認しながら次に品だしする商品を決定することにより、店が混雑している場合でも、顧客の要求通りの品だしすることを可能としたものである。
ここで、両実施形態において基本的に同一のものは、同一符号を付して示し、その説明を省略する他、以下、第２実施形態の特徴部分を中心に説明するものとする。
【００５７】
図１８は、この第２実施形態における注文情報ファイル１４の内容を示した図である。
この注文情報ファイル１４は、注文商品毎に注文レコードを記憶管理するもので、注文レコードは、「注文番号」、「テーブル番号」、「商品コード」、「発注済みフラグ」、「出品画像」の各項目の他、特に、「関連注文番号」を追加した構成となっている。この第２実施形態において、「発注済みフラグ」は、発注済みの場合には“１”がセットされ、未発注の場合には“０”がセットされる他、発注待機中の場合には“−１”がセットされる。
なお、発注待機中とは、複数の商品が同時に注文されると共に各商品を品出しする順番が要求された場合、例えば、ある商品を優先的に出した後に、次の商品を出して欲しい旨の要求を受けた場合、この優先商品が出されるまで後の商品の発注を待機すべきこと（待機中であること）を意味している。
【００５８】
「関連注文番号」は、優先的に出すことが要求された商品に対応してセットされるもので、優先的に出される商品の後に出す次の商品の「注文番号」が「関連注文番号」としてセットされる。ここで、図示の例において、商品コードが「０００１２５」の商品が２個注文されて、商品コードが「００００３４」の商品よりも優先的に出して欲しい旨の要求を受けた場合には、商品コードが「００００３４」の商品に対応する「発注済みフラグ」には、発注待機中であることを示す“−１”がセットされ、商品コードが「００００３４」の商品（２個目の商品）に対応する「関連注文番号」には、次の出す商品の注文番号として「１」がセットされる。
【００５９】
この第２実施形態においてもホスト装置１は、図７で示した全体動作の概要フローチャートにしたがって各種の処理を実行する。すなわち、担当者端末２からの注文情報を注文情報ファイル１４に登録する登録処理（図８）、未発注品をキッチンプリンタ３に対して発注する発注処理（図９）、食卓カメラ４からのモニタ画像を解析して品だし撮影を指示するモニタ画像解析処理（図１０）、品だし担当者所持の担当者端末２からの注文確認要求に応じた確認処理（図１２）を実行するが、この第２実施形態における品だしチェック処理は、図１９に示したフローチャートにしたがって実行される。
【００６０】
この図１９の品だしチェック処理においても、上述した図１１のフローチャートと基本的には同様である為、以下、この特徴部分を中心に詳述する。
先ず、ホスト装置１は、受信した品だし画像の中から特徴部分を抽出し（ステップＪ１）、商品情報ファイル１５内の各「商品画像」と比較して該当する商品画像を検索する（ステップＪ２）。そして、この商品に対応付けられている「商品コード」を商品情報ファイル１５から読み出し（ステップＪ３）、この「商品コード」に基づいて注文情報ファイル１４をアクセスし、この「商品コード」と一致し、かつ、「出品画像」がセットされていない商品（未品だし商品）のレコードを抽出すると共に、この抽出レコードの中で「注文番号」が一番若い「注文番号」を持ったレコードから「テーブル番号」を優先取得する（ステップＪ４）。
【００６１】
ここで、受信取得した「テーブル番号」と優先取得した「テーブル番号」とを比較して両者の一致を判別する（ステップＪ５）。ここで、不一致が検出された場合には、その商品を注文先顧客に品だしを行ったことは正しいが、先に注文した顧客に対してその商品を品だしすべきところ、間違って後で注文した顧客に出してしまった場合であるから、先に注文した優先顧客（テーブル）を知らせる為に、照合結果として、優先取得の「テーブル番号」と「商品名」とを含む照合ＮＧメッセージを作成する（ステップＪ６）。
【００６２】
一方、受信取得した「テーブル番号」と優先取得した「テーブル番号」とが一致している場合には、その商品を注文先顧客に対して注文順通りに品だしを行った場合であるから、この品だし画像をその注文レコード内に「出品画像」として登録保存した後に（ステップＪ７）、この注文レコード内の「関連注文番号」を参照し、この「関連注文番号」で示される他の注文レコードの「発注済みフラグ」を待機中状態である“−１”から未発注状態の“０”にセットし直す（ステップＪ８）。言換えれば、正しい品だしが行われた後においては、次に品だしする商品を待機中から未発注状態にランクアップさせる。そして、照合ＯＫメッセージを作成する（ステップＪ９）。
【００６３】
ここで、品だしされる毎に注文情報ファイル１４の内容は、図２０〜図２２に示す如く変遷する。すなわち、図２０は、商品コードが「０００１２５」の商品が２個注文されて、商品コードが「００００３４」の商品よりも優先的に出して欲しい旨の要求を受けた場合において、「０００１２５」の商品の品だしを２個分行った後の状態を示し、上述した図９の発注処理によって、当該商品の「発注済みフラグ」には“１”がセットされて発注済みの状態となる。
【００６４】
この状態において、この商品の品だし画像に基づいて品だしチェック処理が実行されると、注文情報ファイル１４の内容は、図２１に示す如くとなり、次に品だしする「００００３４」の商品は、その「発注済みフラグ」が待機中状態“−１”から未発注状態“０”にセットし直される為、次に品だしされる商品となる。図２２は、「００００３４」の商品をキッチンプリンタ３に対して発注した後の注文情報ファイル１４の内容を示し、上述した図９の発注処理によって、当該商品の「発注済みフラグ」は、未発注状態“０”から発注済み状態“１”に書き換えられる。この段階で１顧客分の発注が全て完了したことになる。
【００６５】
以上のように、この第２実施形態においてホスト装置１は、注文担当者所持の担当者端末２によって複数の商品に関する注文情報と共に、各商品を品出しする順番も合わせて受け付けた場合において、この商品をその種類に応じて対応する部門のキッチンプリンタ３に対して発注する際に、この品だし順にしたがって品だしされた商品の撮影した品だし画像と、商品毎に予め登録されている商品画像とを比較することによってその商品を認識した後に、この商品の次に品だしすべき商品を特定する動作を品だし順にしたがって繰り返すようにしたから、人為的な確認作業を行うことなく、注文品の品だし時にその商品を撮影した品だし画像を確認しながら次に品だしする商品を決定することができ、店が混雑している場合でも、顧客の要求通りの品だしすることが可能となり、作業全体の効率化・円滑化を図ることが可能となる。
【００６６】
なお、上述した第２実施形態においては、品出しする順番が要求されている各商品をキッチンプリンタ３に対して発注する際に、先の商品が品だしされた際に、次に発注する商品を決定するようにしたが、先に品だしされた商品をその顧客が飲食し終わる間際に、先の商品を品だしするようにしてもよい。この場合、食卓カメラ４からのモニタ画像を解析することによって顧客が飲食し終わるかを認識するようにすればよい。
また、品出しする順番をチェックする際に、その商品と一緒に出される付属品（例えば、ドレッシング、調味料、フォーク等）も合わせてチェックするようにしてもよい。
【００６７】
また、コンピュータに対して、上述した各手段を実行させるためのプログラムコードをそれぞれ記録した記録媒体（例えば、ＣＤ−ＲＯＭ、フロッピィデスク、ＲＡＭカード等）を提供するようにしてもよい。
すなわち、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、品物毎に予め登録されている品物画像を記憶管理する機能と、複数の品物に関する注文情報を受け付けた際に、各品物を品出しする順番も合わせて要求された場合に、その注文情報と共に要求された品だし順を入力する機能と、前記受け付けた注文情報を参照し、品だし順が要求されている場合には、この品だし順にしたがって各品物を出す為に、撮影された品だし画像と前記品物画像とを比較することによってその品物を認識した後に、この品物の次に品だしすべき品物を決定する動作を品だし順にしたがって繰り返す機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００６８】
なお、上述した各実施形態におけるレストラン管理システムは、店内の各テーブルに対応付けて食卓カメラ４を１対１に設置しておき、品だし時には、そのテーブルに対応する１台の食卓カメラ４によって商品撮影を行うようにしたが、そのテーブルの近傍に設置されている他のテーブル用の食卓カメラ４を含めて、複数台のカメラによって品だし商品を多方向から撮影するようにすれば、品だしチェック時における商品特定をより確実かつ容易に行うことが可能となる。
【００６９】
上述した各実施形態におけるレストラン管理システムにおいて、品だしチェックの結果を担当者端末２へ通知した際に、担当者端末２は、このチェック結果をその端末画面にメッセージ表示するようにしたが、音声メッセージも合わせて出力するようにしてもよい。
また、上述した各実施形態におけるレストラン管理システムは、ホスト装置１、担当者端末群２、キッチンプリンタ群３、食卓カメラ群４とから構成した場合を例示したが、ホスト装置１側の機能の一部あるいは全部を担当者端末群２側に設けるようにしてもよい。例えば、注文情報の登録処理、キッチンプリンタ３への発注処理、品だしチェック処理等を担当者端末２側で行うようにしてもよく、また、食卓カメラ４の機能も担当者端末群２側に設けるようにしてもよい。
更に、通信システムに限らず、スタンド・アロン・タイプにも適用可能である。
【００７０】
その他、上述した各実施形態においては、レストラン管理システムに適用した場合を例示したが、注文を受けた品物を品だしする業務を行うものであれば、レストラン管理システムに限らずに適用可能である。例えば、運送業における宅配管理システム等、品物の授受を行う業務処理にも適用することができる。この場合、品だし時における撮影は、担当者所持の携帯端末によって行うようにすればよい。
【００７１】
【発明の効果】
第１の発明（請求項１記載の発明）によれば、注文情報に基づいてその品物を品だしする際に、その品物を撮影した品だし画像と、品物毎に予め登録されている品物画像とを比較すると共に、受け付けた注文情報を参照することによって注文品が品だしされたかを判別し、注文品と異なる品物が品だしされた場合に、その旨を報知するようにしたから、品だし時に、人為的な確認作業を行うことなく、間違った品だしを確実に防止することができ、作業全体の効率化・円滑化が可能となる。
第２の発明（請求項 記載の発明）によれば、複数の品物に関する注文情報を受け付けた際に各品物を品出しする順番も合わせて要求された場合には、この品だし順にしたがって各品物を出す為に、その品物を撮影した品だし画像と、品物毎に予め登録されている品物画像とを比較することによってその品物を認識した後に、この品物の次に品だしすべき品物を特定する動作を品だし順にしたがって繰り返すようにしたから、人為的な確認作業を行うことなく、注文品の品だし時にその品物を撮影した品だし画像を確認しながら次に品だしする品物を決定することができ、例えば、飲食店において、店が混雑している場合でも、顧客の要求通りの品だしすることが可能となり、作業全体の効率化・円滑化を図ることが可能となる。
【図面の簡単な説明】
【図１】レストラン管理システムの全体構成を示したブロック図。
【図２】食卓カメラがテーブルに１対１に対応して設置されている状態を示した図。
【図３】注文情報ファイル１４の内容を示した図。
【図４】（Ａ）は、商品情報ファイル１５の内容を示した図、（Ｂ）は、担当者別ファイル１６の内容を示した図。
【図５】ホスト装置１の基本的構成要素を示したブロック図。
【図６】食卓カメラ４の基本的構成要素を示したブロック図。
【図７】ホスト装置１の全体動作の概要を示したフローチャート。
【図８】図７で示した注文情報登録処理を詳述する為のフローチャート。
【図９】図７で示した未発注品の発注処理を詳述する為のフローチャート。
【図１０】図７で示したモニタ画像解析処理を詳述する為のフローチャート。
【図１１】図７で示した品だしチェック処理を詳述する為のフローチャート。
【図１２】図７で示した注文確認処理を詳述する為のフローチャート。
【図１３】担当者端末２側での注文入力処理を示したフローチャート。
【図１４】各食卓カメラ４の動作を示したフローチャート。
【図１５】図３に示した注文情報ファイル１４において、図示の各注文商品を全て発注した後における注文情報ファイル１４の内容を示した図。
【図１６】図３で示した注文情報ファイル１４において、「テーブル番号」が“１”で示される各注文商品のうち、その一部の商品のみの品だしが完了した場合（品だし途中）における注文情報ファイル１４の内容を示した図。
【図１７】この実施形態の変形応用例を説明する為の注文情報ファイル１４の内容を示した図。
【図１８】第２実施形態における注文情報ファイル１４の内容を示した図。
【図１９】第２実施形態における品だしチェック処理を示したフローチャート。
【図２０】優先的に出して欲しい旨の要求を受けた場合において、その優先的な商品を品だし後の状態を示した図。
【図２１】図２０の注文情報ファイル１４の内容に続いて、「発注済みフラグ」が待機中状態から未発注状態にセットされた状態を示した図。
【図２２】図２１の注文情報ファイル１４の内容に続いて、未発注状態の商品を発注した状態を示した図。
【符号の説明】
１ ホスト装置
２ 担当者端末
３ キッチンプリンタ
４ 食卓カメラ
５ 無線ＬＡＮ
１１ 通信管理部
１２ 注文情報管理部
１３ テーブル情報判断部
１４ 注文情報ファイル
１５ 商品情報ファイル
１６ 担当者別ファイル
４５ 撮影装置
４１、１０１ ＣＰＵ
４２、１０２ 記憶装置
４４、１０４ 通信装置
１０５ 入力装置
１０６ 表示装置[0001]
TECHNICAL FIELD OF THE INVENTION
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an order confirmation system and a program for confirming the order when the item is ordered.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, in a restaurant, when a waitress or the like uses a mobile terminal possessed by a staff member to input order information ordered by a customer and transmits the order information to a host device, the host device receives the order product. A restaurant-specific system (restaurant management system) has been constructed in which a kitchen printer for each type on the kitchen side is designated according to the type and the order information is transmitted. As a restaurant management system of this type, for example, a system that minimizes the waiting time of a customer is also known (see Patent Document 1).
[0003]
[Patent Document 1]
JP 2002-203017 A
[0004]
[Problems to be solved by the invention]
By the way, when the waitress or the like carries the ordered item to the customer's table (table) and carries out the ordering, the customer asks the customer to confirm that each item is complete as ordered. However, the following problems may occur. That is, there is a possibility that a check may be omitted (missing confirmation) due to an artificial check operation, or a product may be picked up on an incorrect table. For example, a drunken customer may forget the item ordered by himself. Sometimes. Also, for example, in a large number of banquets, it is difficult for the organizer to confirm that all the items have been ordered by the number of persons according to the order, which places a heavy burden on the organizer. Further, there may be various problems such as inconvenience to other customers due to mistakes in the stocking and prolonged waiting time until the stocking.
[0005]
On the other hand, when ordering a plurality of items, for example, in the case of beverages, whether to drink before meals or to drink after meals differs depending on the customer, Often there is a request to give priority to specific items, but it is extremely difficult to order items in that order, especially when the store is crowded. As a result, there are many cases where customer demands are not met.
Therefore, the frequent occurrence of troubles, such as a failure to confirm whether or not each product is complete as ordered or a mistake in the order of goods requested by the customer, affects the reputation of the store and results in a loss of trust. .
[0006]
A first object of the present invention is to make it possible to confirm whether or not an ordered item has been correctly ordered based on an itemized image of the item when the item is ordered.
A second object of the present invention is to provide an image processing apparatus that, when a plurality of items are ordered and the order in which the items are to be delivered is requested, while checking the product images taken at the time of taking out the ordered items, Is to be able to determine the goods to be stocked.
[0007]
[Means for Solving the Problems]
The invention according to claim 1 (first invention) is an order item confirmation system for confirming the order item when the item is ordered, and is registered in advance for each item. Product storage means for storing and managing product images; order information receiving means for receiving ordered goods as order information; photographing means for photographing the goods when the goods are taken out; and photographing means for photographing the goods. Determining means for comparing the stock image and each product image in the product storage means and determining whether or not the ordered product has been stocked by referring to the order information received by the order information receiving means; If it is determined by the means that an item different from the ordered item has been put out, there is provided a notifying means for notifying that fact.
Further, the present invention provides a computer with a program for realizing the main functions described in the first aspect of the present invention.
[0008]
Therefore, according to the first and ninth aspects of the present invention, when the item is taken out based on the order information, the itemized image photographed of the item is compared with the item image registered in advance for each item. At the same time, by referring to the received order information, it is determined whether or not the ordered item has been delivered, and if an item different from the ordered item has been delivered, that fact is notified. It is possible to surely prevent incorrect stocking without performing a manual check operation, and to make the entire operation more efficient and smoother.
[0009]
The invention described in claim 1 may be as follows.
The order information receiving means is a portable terminal possessed by an order person in charge of inputting order information ordered from a customer and transmitting the information to a host device, and the host device is an article photographed by the photographing means at the time of stocking. While comparing the image and each item image in the item storage means, it is determined whether or not the ordered item has been delivered by referring to the order information transmitted from the portable terminal. When the goods are removed, the notification is transmitted to the portable terminal owned by the person in charge of the removal (the invention according to claim 2).
Therefore, according to the second aspect of the present invention, in addition to having the same effect as the first aspect of the present invention, when transmitting the order information received by the portable terminal owned by the ordering person to the host device, Compare the stock image taken at the time of stocking with the product image registered in advance for each product, and determine whether the ordered product was stocked by referring to the received order information. When a different item is picked up, a notification is sent to the mobile terminal owned by the person in charge of the stocking, so, for example, in a restaurant system, for example, the mobile terminal normally owned by each person in charge Can be used to check the stocking, and furthermore, the efficiency and smoothness of the work can be promoted.
[0010]
In this case, by analyzing the photographed image photographing the area around the customer, when the stocker who appears in the photographed image recognizes the state in which the merchandise is being offered to the customer, the merchandise image photographing the merchandise is described above. It may be a stock image (the invention according to claim 3). That is, taking a restaurant as an example, in a state where the periphery of the dining table is being monitored and photographed, the waiter that appears in the monitor image, the color, shape, pattern, mark, etc. of the uniform worn by the waitress, the waiter, By recognizing the waitress, and by recognizing by image analysis that the waiter and waitress stopped at the position of the table and began to take out the item, by specifying the product image of the product as a stock image In addition, it is possible to automatically obtain the goods to be stocked without requiring any artificial work such as a photographing instruction by a stocking person or the like.
[0011]
When it is recognized that a person in charge has appeared in the photographed image by analyzing the photographed image taken around the customer, the person in charge is recognized based on the person image, and the person in charge of the goods removal is possessed. Is transmitted to the portable terminal of the present invention to the effect that an item different from the ordered item has been delivered (the invention according to claim 4).
Therefore, according to the fourth aspect of the present invention, in addition to having the same effects as the first and second aspects of the present invention, by analyzing the photographed image, the person in charge of the goods is recognized, and the portable device possessed by the person in charge is recognized. Since the terminal is specified, it is possible to notify the matching result of the stocking confirmation directly to the stocking person without any special request from the stocking person.
[0012]
The photographing unit transmits a product image photographed by a camera installed around the customer among the plurality of cameras installed in advance to the host device as a stock image and an installation position of the camera. The host device transmits identification information for identifying the customer to the host device, and the host device specifies the customer based on the identification information transmitted together with the stock image from the photographing means (the invention according to claim 5). ).
Therefore, according to the fifth aspect of the present invention, in addition to having the same effects as the first and second aspects of the present invention, it is transmitted together with the stock image taken by the camera installed around the customer. Since the customer at the product destination is specified based on the identification information for identifying the installation position of the camera, for example, in a restaurant, a table (table) and a camera are associated one-to-one. If so, the customer at the destination can be easily specified from the table number.
[0013]
The notifying means notifies, when an item different from the ordered item is put out, an authorized order source of the item (the invention according to claim 6). This makes it possible to reliably prevent the wrong item from being stocked, and also to quickly stock the item to a legitimate ordering source.
[0014]
A storage means for storing the stock image photographed by the photographing means when the product is correctly stocked; searching the storage means based on the input search condition, and searching for the stock image corresponding to the input condition; A guide means for reading out and outputting a guide is provided (the invention according to claim 7).
Therefore, according to the invention of claim 7, in addition to having the same effects as those of the inventions of claims 1 and 2, when the product is correctly stocked, the stock image is stored and saved. Since the stock image corresponding to the input condition is output according to the conditions, for example, if a drunken customer forgets the item ordered, a special option order (large serving, additional topping, etc.) can be placed as ordered. The stock image can be presented to the customer as evidence, such as when it is later confirmed whether or not the product has been issued, which is useful for preventing trouble with the customer.
[0015]
The invention according to claim 8 (second invention) is an order item confirmation system for confirming the order item when the item is ordered, and is registered in advance for each item. Registered image storage means for storing and managing the item images, and when order information for a plurality of items is received, when the order for extracting each item is also requested, the order of the requested items together with the order information The order information receiving means for inputting the order, the photographing means for photographing the article when the goods are to be ordered to the order source, and the order information received by the order information receiving means are referred to, and the order of the goods is requested. In order to put out each item according to the order of the items, after recognizing the item by comparing the item image taken by the photographing means with each item image in the item storage means, It's goods operations to determine the items to be next goods out of this article is to and a management unit's a goods repeated in the order.
Further, the present invention provides a computer with a program for realizing the main functions described in the invention described in claim 8 (the invention described in claim 10).
[0016]
Therefore, in the invention according to claims 8 and 10, when order information for a plurality of items is received when the order information for the plurality of items is received, the items are ordered according to the order of the items. Then, after recognizing the product by comparing the product image taken of the product with a product image registered in advance for each product, an operation of specifying the product to be stocked next to the product is performed. Since the order is repeated according to the order of stocking, it is possible to determine the item to be stocked next while checking the image and the image taken at the time of picking up the item without artificial confirmation work. For example, even in a restaurant, even when the store is crowded, it is possible to stock as requested by the customer, and it is possible to improve the efficiency and smoothness of the entire work.
[0017]
BEST MODE FOR CARRYING OUT THE INVENTION
(1st Embodiment)
Hereinafter, a first embodiment of the present invention will be described with reference to FIGS.
FIG. 1 is a block diagram showing the overall configuration of a restaurant management system according to this embodiment.
This restaurant management system is a local communication system (LAN) built in a large restaurant, and has a configuration in which the host device 1 is a core. The host device 1 includes a staff terminal group 2 owned by each waiter and waitress (hereinafter referred to as a person in charge), a kitchen printer group 3 installed for each department on the kitchen side, and a dining table in the store. A table camera group 4 for photographing the (table) from obliquely above is connected via a wireless LAN 5. Hereinafter, individual terminals, printers, and cameras in the staff terminal group 2, the kitchen printer group 3, and the dining table camera group 4 will be described with the same numbers 2, 3, and 4.
[0018]
The host device 1 is a data processing device with a communication function that controls the overall operation of the restaurant management system. The host device 1 may be configured by a plurality of data processing devices provided for the respective functions.
The clerk terminal group 2 is a portable terminal group for inputting order information when receiving an order from a customer, and the host device 1 receives the customer-specific order information transmitted from the clerk terminal 2. Then, a registration process for registering the order information is executed, and an order process for ordering the kitchen printer 3 based on the contents of the order is performed.
[0019]
The kitchen printer group 3 is a printer group that receives and prints out order information transmitted from the host device 1 for each section of “drink”, “snacks”, and “cooking”.
As shown in FIG. 2, the table camera group 4 is installed on each table in a one-to-one correspondence, and is a monitor camera for color-photographing products displayed on the table from an obliquely upward direction (ceiling). It is a group that performs enlarged shooting of a product put on the table in a recognizable size, and is composed of a video camera that shoots a moving image or a still camera that shoots continuously for several seconds. The table camera group 4 transmits the monitor image to the host device 1 at a predetermined timing (for example, every several seconds), and the transmission timing is set in advance for each camera. That is, the monitor images are cyclically transmitted to the host device 1 in order from the first camera to the Nth camera.
[0020]
The host device 1 has a communication management unit 11, an order information management unit 12, and a table (table) information determination unit 13 as its main functions.
The communication management unit 11 controls transmission and reception of data between the staff terminal group 2, the kitchen printer group 3, and the table camera group 4, and determines the type of the received data every time data is received. The order information management unit 12 and the table information determination unit 13 are activated according to the type. The order information management unit 12 acquires the order information transmitted from the person in charge terminal group 2 and registers the order information in the order information file 14, and a kitchen printer group based on the order information file 14. 3 has an ordering function 12-2 for generating ordering information for ordering.
[0021]
The table information determination unit 13 analyzes the monitor image transmitted from the table camera 4 and, when recognizing a state in which the stocking person who appears in the monitor image gives out the product to the customer, takes charge of the item. The person in charge is specified from the person's face image and the whole image, and the table camera 4 is instructed to photograph the product. In this case, the dining table camera 4 magnifies and photographs the stock item on the table in response to the shooting instruction, and transmits a “stock image” to the host device 1 together with the “table number”. Here, upon receiving the stock image transmitted from the table camera 4, the table information determination unit 13 searches the product information file 15 based on the stock image.
[0022]
As will be described later in detail, the product information file 15 stores and manages a “product image” photographed in advance for each product as a registered image, and the table information determination unit 13 determines the “stock image” and “ After identifying the goods to be ordered by comparing the “product record image”, the order information file 14 is accessed based on the table number from the table camera 4 and the specific goods, and whether or not the goods have been ordered is determined. Is collated. Based on the result of the collation, a message indicating a legitimate stocking and a message indicating an incorrect stocking are created, and the goods specified in the manner described above are guided to the person in charge (to the terminal 2 owned by the person in charge). I try to send.
[0023]
FIG. 3 is a diagram showing the contents of the order information file 14.
The order information file 14 stores and manages order records for each ordered product, and the order records include “order number”, “table number”, “product code”, “ordered flag”, and “exhibition image”. Each item is stored.
The “order number” is a serial number that is updated each time a product is ordered, and the “table number” is a table number for identifying the ordering table. The “order-completed flag” is a flag indicating that the order information has been transmitted to the kitchen printer 3 (order-completed). The flag “1” indicates that the order has been placed, and “0” indicates that the order has not been placed.
[0024]
The “exhibition image” is an article image (color image) taken by the dining table camera 4 when the ordered item is put out, and when “0” is set in the item, This indicates that the stock image is in an unregistered state (a state before the stock). In the illustrated example, when a plurality of identical products are ordered at the same time, order records for the number are generated and registered, but the order records for the number are not generated and registered. For example, an item of “quantity” may be provided in an order record, and when a plurality of identical products are ordered at the same time, the number of orders may be set in the item of “quantity”.
[0025]
The host device 1 searches the order information file 14, specifies a department corresponding to the product, generates order information for each department, transmits the kitchen printer group 3, and executes the order processing. When an order confirmation request is received from, the order information file 14 is searched, the order contents corresponding to the request are read, and the order confirmation processing of transmitting the order contents to the person in charge terminal 2 that made the request is performed. ing. In other words, this order confirmation request is performed when a situation occurs in which the customer confirms the order details with the customer. The "table number" and "product code" are sent together with the order confirmation request from the person in charge terminal 2. When it is transmitted, the host device 1 searches the order information file 14 based on the "table number" and the "product code", reads out the order information according to the contents of the inquiry, and sends a guide to the request source. I am trying to do it.
[0026]
FIG. 4A shows the contents of the product information file 15.
The product information file 15 stores and manages a record for each product as product information of all orderable products, and each product record includes “product code”, “product image”, and “kitchen section code”. It has a configuration having each item. Here, the “product image” is a photographed image (still image) obtained by photographing an orderable product from an obliquely upward direction, and is a registered image registered in advance for each product. In this case, if the product is a dish, the finished state is photographed, and a product image of a special option order (large serving, additional topping, etc.) is also included. The “kitchen section code” is section information for indicating which section the product belongs to among the sections “drink”, “snacks”, and “cooking”.
[0027]
FIG. 4B is a diagram showing the contents of the person-in-charge file 16.
The person-in-charge file 16 stores and manages information about the person in charge for each person in charge, and each person-in-charge record has items of “person-in-charge code”, “personal characteristic information”, and “terminal number”. It has a configuration. Here, the “person in charge code” is identification information assigned to the person in charge, and the “person characteristic image” is a face image and a physical feature (gender, height, Physique, hairstyle, presence or absence of glasses). The “terminal number” is address information for calling the person in charge terminal 2 owned by the person in charge.
[0028]
FIG. 5 is a block diagram showing basic components of the host device 1.
The CPU 101 is a central processing unit that controls the overall operation of the host device 1 according to an operating system and various application software in the storage device 102. The storage device 102 has a program storage area and a data storage area. In the program storage area, in addition to the operating system, the communication management unit 11, the order information management unit 12, and the table information determination unit 13 Corresponding various application programs and the like are stored, and the data storage area stores the above-described order information file 14, product information file 15, person-in-charge file 16, and the like. It is constituted by the drive system.
The recording device 102 may have a configuration in which a removable storage medium such as a CD-ROM or a DVD can be mounted in addition to a fixed memory such as a hard disk.
[0029]
The programs and data in the storage device 102 are loaded into a RAM (for example, a static RAM) 103 as necessary, or the data in the RAM 103 is saved in the storage device 102. The RAM 103 has a program execution area and a work area. Further, the CPU 101 can directly access and use a program / data of another electronic device via the communication device 104, and can receive a download via the communication device 104. The communication device 104 is a wireless communication interface. On the other hand, an input device 105, a display device 106, and a printing device 107, which are input / output peripheral devices, are connected to the CPU 101 via a bus line, and the CPU 101 controls the operation according to an input / output program.
[0030]
FIG. 6 is a block diagram showing basic components of the table camera 4.
The dining table camera 4 also has a photographing device 45 in addition to a CPU 41, a storage device 42, a RAM 43, and a communication device 44, similarly to the basic elements of the host device 1 described above. Here, a “table number” preset in the storage device 42 is set in the RAM 43. The “table number” is a table number that is associated with the table camera 4 in a one-to-one correspondence in advance, and the table camera 4 displays the table number when receiving a photographing instruction from the host device 1. The stocked product is enlarged and photographed, and the table number in the RAM 43 is transmitted to the host device 1 together with the stocked image. The dining table camera 4 performs an operation of transmitting the monitor image to the host device 1 at predetermined timings (for example, at intervals of several seconds) as described above.
[0031]
Next, an operation concept of the restaurant management system according to the first embodiment will be described with reference to flowcharts shown in FIGS. Here, the functions described in these flowcharts are stored in the form of readable program codes, and sequentially execute operations according to the program codes. Further, the operation according to the above-described program code transmitted via the transmission medium can be sequentially performed. This is the same in other embodiments described later, and an operation specific to this embodiment can be executed using a program / data externally supplied via a transmission medium in addition to a recording medium.
[0032]
FIG. 7 is a flowchart showing an outline of the overall operation of the host device 1.
Here, FIGS. 8 to 12 are flowcharts for explaining each process shown in FIG. 7 in detail, FIG. 13 is a flowchart showing the operation of the person in charge terminal 2 side, and FIG. 9 is a flowchart showing the operation of the fourth side.
First, in FIG. 7, the communication management unit 11 of the host device 1 receives any data in a reception waiting state for receiving data transmitted from the staff terminal 2 or the table camera 4 (step A1). The type of the received data is determined (step A2). In this case, the order information / order confirmation request is transmitted from the person in charge terminal 2, and the table number / monitor image is transmitted from the table camera 4.
If the order information (table number, product code, quantity) transmitted from the person in charge terminal 2 is received, an order record is generated based on the order information and newly registered in the order information file 14. After performing the processing (step A3), an order processing of an unordered product is performed (step A4).
[0033]
Here, the order input processing on the clerk terminal 2 will be described with reference to the flowchart of FIG.
First, when input of order information is instructed (step G1), the clerk terminal 2 accepts input of order information (product code and quantity) (step G2), and ends input of one table (all products). Is received (step G3), the input order information is received. Here, when the input of all the products is completed, the input of the table number is accepted (step G4), and this table number is transmitted to the host device 1 together with the input order contents (product code and quantity) (step G4). ).
[0034]
FIG. 8 is a flowchart for explaining in detail the order information registration process shown in FIG.
First, the host device 1 accesses the order information file 14, reads out the "order number" from the last record, adds "1" to this "order number", and updates the value by adding "1" to the "order number". Is generated (step B1), and an order record including the "order number", "table number", and "product code" is generated (step B2). Then, the "ordered flag", "ordered flag", and " The item of "exhibition image" is initialized and additionally registered in the order information file 14 (step B3). Then, the above-described registration process is repeated (steps B1 to B4) until the registration for all products is completed (step B4). In this case, when a plurality of the same products are ordered at the same time as described above, order records corresponding to the number are generated and additionally registered.
[0035]
FIG. 9 is a flowchart for explaining in detail the ordering process of the unordered product shown in FIG.
First, the host device 1 accesses the order information file 14 and acquires all order records in which the “ordered flag” is set to “0 (unordered)” as order targets (step C1). In this state, a record having the same “table number” and “product code” is designated from this unordered record group (step C2), and a plurality of records having the same “table number” and the same “product code” are specified. If it exists (step C3), the number of the product is calculated (step C4).
Then, the product information file 15 is accessed based on the "product code" in the designated record to acquire the corresponding "kitchen department code" (step C5), and the kitchen printer 3 indicated by the "kitchen department code" is read. It designates it as a transmission destination and generates and transmits order information including "product code", "quantity", and "table number" (step C6).
[0036]
After the order is placed in this way, the "ordered flag" in the unordered designated record is written to "1" and set to ordered (step C7).
Here, FIG. 15 is a diagram showing the contents of the order information file 14 after all the ordered items shown in the order information file 14 shown in FIG. 3 have been ordered. In this case, the “ordered flag” in each order record is rewritten to “1”, indicating that the order has already been placed. "Remains at" 0 ".
Then, the process proceeds to the next step C8, where it is checked whether or not there is another unordered record. If there is, the process returns to step C2 to repeat the above operation for each record.
[0037]
On the other hand, when the host device 1 receives monitor images sequentially transmitted from the table cameras 4 at predetermined timings (steps A1 and A2 in FIG. 7), the host device 1 analyzes the monitor images and recognizes the person in charge of the product. At the same time, a monitor image analysis process for instructing the table camera 4 corresponding to the displayed table to shoot a display image is executed (step A7).
FIG. 10 is a flowchart for explaining the monitor image analysis processing shown in FIG. 7 in detail. First, when the host device 1 receives the monitor image from the dining table camera 4, the host device 1 analyzes the person image in this monitor image. (Step D1), paying attention to the clothes of this person image, and comprehensively comparing the colors, shapes, patterns, marks, etc. of the uniforms worn by the stocking staff (waiters, waitresses) (Step D2). Then, a collation check is performed to determine whether the stocking person has appeared on the screen (step D3).
[0038]
Here, if the person in charge of stocking is not shown in the monitor screen (NO in step D3), this process ends. If the person in charge of stocking is recognized, the behavior is analyzed (step S3). D4). In other words, in order to exclude the person in charge who only passes near the table, the stocker who has the goods stops at the table and checks the action of the person in charge to see if it is in the state of being out on the table. Although it is recognized by analysis, the behavior monitoring of the person in charge is performed for a predetermined time (for example, about 5 seconds).
If it is determined that the person in charge is just passing the vicinity of the table (NO in step D5), the process is terminated. (YES in step D5), further, the characteristics of the person in charge of the stocking are analyzed (step D6), and based on this analysis result, the person in charge is registered with the "personal characteristic information" registered in advance in the file 16 for each person in charge. Comparison and collation are performed (step D7), and the person in charge of the stocking is recognized and specified (step D8).
[0039]
In this case, a feature portion is extracted from the human image and feature comparison is performed. At this time, after correcting the face direction, size, etc., the shape of the face contour, eyes, mouth, nose, forehead, etc. In addition to comparing the position, size, etc., the person in charge is recognized by comprehensively comparing the gender, face, presence or absence of glasses, height, body shape, hairstyle, and color. When the person in charge is identified as a result, the corresponding "terminal number" is read out from the person-in-charge file 16 and the person-in-charge terminal 2 owned by the person in charge is identified (step D9). An instruction is given to the table camera 4 corresponding to the table, which is performing the selection, to perform the selection (Step D10).
Thereafter, until the person in charge puts out all the products on the table (Step D11), the user instructs to take out the stock each time the next product is put out (Step D10). When the completion of the serving is detected, the completion notification is transmitted to the table camera 4 (step D12).
[0040]
FIG. 14 is a flowchart showing the operation of each table camera 4.
First, the table camera 4 checks whether or not a preset transmission timing has been reached (step H1). If it is its own transmission timing, the table camera 4 together with a preset “table number” indicates that time. Is transmitted to the host device 1 (step H2).
In addition, when an instruction for taking out a product is received from the host device 1 (step H3), after taking the enlarged product on the table (step H4), the “table number” is read out (step H5). ), And transmits the “stock image” at that time together with the “table number” to the host device 1 (step H6). In this case, each time the next product is removed, the “table number” and the “product image” at that time are sent to the host device 1 until the completion of the product removal for all products is received from the host device 1 (step H7). The transmitting operation is repeated (steps H4 to H7).
[0041]
When receiving the “table number” and the “stock image” transmitted from the dining table camera 4 in response to the stock photography command (step A5 in FIG. 7), the host device 1 executes the stock check process. (Step A6).
FIG. 11 is a flowchart for explaining in detail the stock checking process shown in FIG. First, the host device 1 extracts a characteristic part from the received stock image (step E1), and searches for a corresponding product image by comparing with each “product image” in the product information file 15 (step E2). ). In this case, in the feature comparison with the stock image, after compensating the direction, size, etc. of the product, comprehensively compare the outer shape, size, color, special option order (large assortment, additional topping) etc. of the product Do by doing.
[0042]
After searching for the product image corresponding to the stock product in this way, the host device 1 reads out the “product code” associated with the “product image” from the product information file 15 (step E3), and The order information file 14 is accessed based on the “product code” to extract a record of a product (unstocked product) that matches the “product code” and for which the “exhibition image” is not set. The "table number" is preferentially acquired from the record having the "order number" with the smallest "order number" among the extracted records (step E4). In other words, when the same product is ordered from a plurality of tables and the product is not placed in any of the tables, the user has the youngest "order number" in order to place the product in that order. The "table number" is obtained preferentially from the record.
[0043]
Here, the received and acquired "table number" is compared with the "table number" acquired preferentially, and it is determined whether they match (step E5). Now, if a mismatch is detected, it is true that the product was delivered to the customer who ordered it, but it was incorrect to place the product on the customer who ordered it earlier, In order to notify the person in charge of the priority customer (table) who ordered first, the "table number" and the "product name" obtained by priority are obtained as collation results. (Step E6).
On the other hand, if the “table number” received and obtained matches the “table number” obtained preferentially, it means that the product has been correctly stocked in the order that it was ordered. This stock image is registered and stored in "image" (step E7), and a collation OK message indicating that the stock is correct is created (step E8).
[0044]
FIG. 16 shows a case where, in the order information file 14 shown in FIG. 3, out of the ordered products whose “table number” is indicated by “1”, the removal of only some of the ordered products is completed (during shipping). 3 is a diagram showing the contents of an order information file 14 in FIG.
In this case, in each order record that has been correctly stocked, the stock image is registered and saved as "Selling image", but if it is before stocking or if it is the wrong item, the "Selling image" will be , "0".
[0045]
The collation message created in this way is guided and transmitted to the person in charge terminal 2 of the person in charge belonging to the person specified as the stocking person in steps D8 and D9 of the monitor image analysis processing of FIG. 10 described above (FIG. 7). Step A6).
In this case, upon receiving the notification of the collation result from the host device 1 (step G6 in FIG. 13), the person in charge terminal 2 determines the collation result (step G7). Is displayed on the terminal screen (step G8). If the verification is NG (step G7), the verification NG message is displayed on the terminal screen (step G9), and a warning alarm sound is output (step G10). . In this case, the person in charge can know the wrong product and confirm which product should be brought to which table based on the “table number” and “product name” in the verification OK message. it can.
[0046]
On the other hand, when a situation occurs in which the order of the order is confirmed with the customer on the side of the person in charge 2, the person in charge gives an input instruction to the effect that there is an order confirmation request (step in FIG. 13). G11), enter the "table number" of the customer (step G12), and if a confirmation request for only a specific product is received from the customer, further input the product code (step G13). Here, the responsible person terminal 2 transmits a request for order confirmation in which the own terminal number is added to the input information to the host device 1 (step G14).
[0047]
Here, upon receiving the order confirmation request (steps A1 and A2 in FIG. 7), the host device 1 executes an order confirmation process (step A8).
FIG. 12 is a flowchart for explaining the order confirmation processing shown in FIG. 7 in detail. First, the host device 1 accesses the order information file 14 based on the received "table number" (step F1), and extracts each order record corresponding to the "table number" (step F2). In this case, if the received data includes a "product code" (step F3), an order record corresponding to the product is further extracted from the extracted records (step F4).
Then, "stock image", "table number", and "product code" are read from the extracted record to generate confirmation guide information (step F5), and are indicated by the "terminal number" included in the received data. This confirmation guide information is transmitted to the person in charge terminal 2 of the request source (step F6).
Here, upon receiving the confirmation guide information from the host device 1 (step G15 in FIG. 13), the responsible person terminal 2 that is the confirmation request source displays this on the terminal screen (step G16). In this case, the person in charge performs the countermeasure while showing this confirmation guide screen to the customer as evidence that the ordered product has been correctly ordered.
[0048]
As described above, in the first embodiment, when the host device 1 transmits the order information received by the clerk terminal 2 possessed by the order clerk, the host device 1 sends the product to the kitchen printer 3 of the corresponding section according to the type. After the order is placed, when the product is put on the table, the stock image obtained by shooting the product is compared with each registered image (product image) in the product information file 15 and the order information is displayed. By referring to the file 14, it is determined whether or not the ordered item has been ordered. If an item different from the ordered item has been identified, a notification to that effect is transmitted to the person in charge terminal 2 of the inventorying person. Therefore, in a restaurant, usually, the person in charge can use the person in charge terminal 2 possessed by the person in charge to check the stocking, and at the time of stocking, perform an artificial check work. No, it is possible to reliably prevent the wrong goods However, it is possible to efficiency and facilitation of the entire work.
[0049]
In this case, in a state where the periphery of the dining table is photographed by the table camera 4 with the monitor, the host device 1 determines the color, shape, pattern, mark, and the like of the waiter and the uniform worn by the waitress appearing on the monitor screen. When the person in charge recognizes the appearance of the person in charge and recognizes by image analysis that the person in charge stopped at the position of the table and started the operation of taking out the article, a photographing instruction was given to the table camera 4 and photographing was performed at that time. The acquired product image is acquired and specified as a stock image, so it is possible to automatically obtain the stock product without any artificial work such as shooting instructions by the stocking staff etc. It becomes.
Further, since the person in charge of retrieving is identified by analyzing the monitor image and the person in charge terminal 2 possessed by the person in charge is identified, the retrieving confirmation can be made even if there is no special request from the person in charge of retrieving. The collation result can be sent out to the person in charge directly.
[0050]
The host device 1 carries out stocking based on identification information (table number) for identifying the installation position of the camera 4 transmitted with the stock image taken by the table camera 4 installed around the table. Since the previous table is specified, if the table and the camera are associated with each other on a one-to-one basis, it is possible to specify the customer to be stocked from this table number.
When an item different from the ordered item is picked up, the host device 1 sends out a “table number” indicating a legitimate order source of the item to the picked-up terminal 2 of the person in charge. The product can be quickly put on a regular table.
[0051]
In addition, the host device 1 stores the stock image of the selected product in the order information file 14, and when a request for order confirmation is received from the customer via the person in charge terminal 2, the request is made. Since the product image corresponding to the content is guided and sent to the person in charge terminal 2, for example, if a drunken customer forgets the product ordered, a special option order (large serving, additional topping, etc.) is placed as ordered. The stock image can be presented to the customer as evidence, such as when it is later confirmed that the product has been sent to the customer, which helps prevent trouble with the customer.
[0052]
In the first embodiment described above, the order information file 14 sets the “order number” as a serial number in each order record, but instead of the “order number” as shown in FIG. “Order time” may be stored. In this case, every time an order is received, if the current time (hour and minute) at that time is set in the order record as the order time, the products can be managed in the order of the order time. It is also possible to monitor whether or not a predetermined time (for example, 15 minutes) has elapsed from the “order time” and to notify the kitchen printer 3 when the predetermined time has elapsed. Further, as shown in FIG. 17, if the “order time” when the order is arranged for the kitchen printer 3 is set in the order record, a predetermined time (for example, 15 minutes) from the “order time” is set. ) Is monitored, and if the product is not stocked even after the predetermined time has elapsed, a reminder can be sent to the kitchen printer 3.
[0053]
The “product image” as a registered image registered in advance for each product is obtained by photographing a product that can be ordered from an obliquely upward direction. It may be an image. By preparing the registered images taken from multiple directions in this way, for example, when a part of the stocked product enters the shadow of a person, it has no effect on the shooting situation of the stocked image It is possible to accurately perform image matching without being performed.
[0054]
Further, in the first embodiment described above, when an order confirmation request is received from the customer via the clerk terminal 2, the stock image corresponding to the request is read from the order information file 14 and is read. For example, if the stock images are read from the order information file 14 and displayed / printed out on a weekly or monthly basis, it is also possible to compare and examine the quality of the cooking and the like. It becomes possible.
Further, when performing a product check, accessories (for example, dressings, seasonings, forks, etc.) provided with the product may also be checked.
[0055]
On the other hand, a recording medium (for example, a CD-ROM, a floppy disk, a RAM card, or the like) in which a program code for causing each of the above-described units to be executed may be provided to the computer.
That is, a storage medium having a program code that can be read by a computer, a function of storing and managing an item image registered in advance for each item, a function of receiving an ordered item as order information, and In doing so, a function of photographing the item, a function of comparing the photographed item image and the item image, and determining whether the item is ordered by referring to the received order information, When it is determined that an item different from the ordered item has been put out, a computer-readable recording medium that stores a program for realizing a function of notifying the user of the determination may be provided.
[0056]
(2nd Embodiment)
Hereinafter, a second embodiment of the present invention will be described with reference to FIGS. In the first embodiment described above, it is possible to confirm whether or not the ordered product has been correctly ordered based on the stock image taken of the product when the ordered product is stocked. In the form, when a plurality of products are ordered at the same time and the order of ordering each product is requested, check the stock image of the product at the time of stocking the order while checking the stock image. By determining the goods to be stocked in the shop, even if the shop is crowded, it is possible to stock goods as requested by the customer.
Here, in both embodiments, basically the same components are denoted by the same reference numerals, and the description thereof will be omitted. In addition, the following description focuses on the features of the second embodiment.
[0057]
FIG. 18 is a diagram showing the contents of the order information file 14 in the second embodiment.
The order information file 14 stores and manages order records for each ordered product, and the order records include “order number”, “table number”, “product code”, “ordered flag”, and “exhibition image”. In addition to each item, in particular, a "related order number" is added. In the second embodiment, the “order-completed flag” is set to “1” when an order has been placed, “0” when an order has not been placed, and “0” when the order is waiting. -1 "is set.
In addition, the order waiting state means that, when a plurality of products are ordered at the same time and the order in which each product is to be ordered is requested, for example, after a certain product is given priority, the next product is requested to be put out. Means that it is necessary to wait for an order for a later product until the priority product is issued (it is on standby).
[0058]
The “related order number” is set in correspondence with the product that is requested to be issued with priority, and the “order number” of the next product to be issued after the product that is given priority is “related order number” Is set as Here, in the example shown in the figure, if two products with the product code “000125” are ordered and a request is issued to request that the product code be given priority over the product with the product code “0000034”, In the “order completed flag” corresponding to the product with the code “000034”, “−1” indicating that the product is waiting for order is set, and the product with the product code “000034” (the second product) is set. In the corresponding “related order number”, “1” is set as the order number of the next product to be put out.
[0059]
Also in the second embodiment, the host device 1 executes various processes according to the general flowchart of the overall operation shown in FIG. That is, a registration process for registering order information from the clerk terminal 2 in the order information file 14 (FIG. 8), an order process for ordering an unordered product to the kitchen printer 3 (FIG. 9), and a monitor from the table camera 4 The monitor image analysis process (FIG. 10) for analyzing the image and instructing the product to be taken out is executed (FIG. 10), and the confirmation process (FIG. 12) in response to the order confirmation request from the clerk terminal 2 possessed by the product clerk is executed. The stock checking process in the second embodiment is executed according to the flowchart shown in FIG.
[0060]
19 is basically the same as the flowchart of FIG. 11 described above, and therefore, the following description will focus on this characteristic part.
First, the host device 1 extracts a characteristic portion from the received stock image (step J1), and searches for a corresponding product image by comparing with each “product image” in the product information file 15 (step J2). ). Then, the "product code" associated with the product is read from the product information file 15 (step J3), and the order information file 14 is accessed based on the "product code", and is matched with the "product code". In addition to extracting the record of the product (unstocked product) in which the "exhibition image" is not set, and from the record having the "order number" with the smallest "order number" in the extracted records, The table number is preferentially acquired (step J4).
[0061]
Here, the received and acquired "table number" is compared with the "table number" acquired preferentially to determine whether they match (step J5). Here, if a mismatch is detected, it is true that the product was shipped to the ordering customer, but the product should be shipped to the customer who ordered first, In order to notify the priority customer (table) ordered earlier, a collation NG message including the priority acquisition “table number” and “product name” is given in order to notify the priority customer (table) ordered earlier. It is created (step J6).
[0062]
On the other hand, if the “table number” received and obtained matches the “table number” obtained preferentially, it means that the product was ordered to the ordering customer in the order of order, After the stock image is registered and saved as an "exhibition image" in the order record (step J7), the "related order number" in the order record is referred to, and another order indicated by the "related order number" is referred to. The "ordered flag" of the record is reset from "-1" in the waiting state to "0" in the unordered state (step J8). In other words, after the correct stocking is performed, the product to be stocked next is ranked up from the waiting state to the unordered state. Then, a collation OK message is created (step J9).
[0063]
Here, the contents of the order information file 14 change as shown in FIGS. In other words, FIG. 20 shows a case where two products with the product code "000125" are ordered and a request is issued to request that the product code be given priority over the product with the product code "0000034". FIG. 9 shows the state after the stocking of the product is performed for two items. By the ordering process in FIG. 9 described above, the “ordered flag” of the product is set to “1”, and the product is placed in the ordered state.
[0064]
In this state, when the stocking check process is executed based on the stocking image of this product, the contents of the order information file 14 are as shown in FIG. 21, and the next product “000034” to be stocked is Since the "ordered flag" is reset from the waiting state "-1" to the unordered state "0", the product is the next product to be stocked. FIG. 22 shows the contents of the order information file 14 after the order of the product “0000034” to the kitchen printer 3. By the ordering process of FIG. The status “0” is rewritten to the ordered status “1”. At this stage, all orders for one customer have been completed.
[0065]
As described above, in the second embodiment, when the host device 1 receives the order information of a plurality of products together with the order information on a plurality of products by the clerk terminal 2 possessed by the order clerk, When ordering a product to the kitchen printer 3 of the corresponding section according to the type, a stock image of the product which is taken according to the stock order and a product image registered in advance for each product. After recognizing the product by comparing it with the product, the operation of specifying the product to be ordered next to this product is repeated according to the order in which the product was ordered, so that the order product can be ordered without performing any artificial confirmation work. You can determine the next product to be stocked while checking the stock image of the product at the time of stocking, even if the store is crowded, It is possible to goods out of, it becomes possible to improve the efficiency and facilitation of the entire work.
[0066]
Note that, in the above-described second embodiment, when ordering each product for which the order to put out products is requested to the kitchen printer 3, when the preceding product is put out, the next product to be ordered is placed. Is determined, but it may be arranged such that immediately before the customer finishes eating and drinking the previously ordered product, the preceding product is ordered. In this case, the monitor image from the table camera 4 may be analyzed to recognize whether the customer has finished eating or drinking.
Further, when checking the order in which goods are to be delivered, accessories (for example, dressings, seasonings, forks, etc.) delivered together with the product may also be checked.
[0067]
Further, a recording medium (for example, a CD-ROM, a floppy disk, a RAM card, or the like) in which a program code for causing the computer to execute the above-described units may be provided.
That is, it is a recording medium having a program code that can be read by a computer, and has a function of storing and managing an article image registered in advance for each article. When the order of delivery is also requested, a function of inputting the requested order of goods together with the order information, and referring to the received order information, if the order of goods is requested, this In order to put out each item according to the order of stocking, after recognizing the product by comparing the taken stock image with the product image, the operation of determining the product to be stocked next to the product is performed. However, a computer-readable recording medium on which a program for realizing the function to be repeated according to the order may be provided.
[0068]
In the restaurant management system according to each of the above-described embodiments, the table camera 4 is installed in a one-to-one correspondence with each table in the store, and at the time of stocking, one table camera 4 corresponding to the table is used. Although the product is photographed, if the product is photographed from multiple directions, including a table camera 4 for another table installed near the table, the product can be photographed from multiple directions. However, it is possible to more reliably and easily specify a product at the time of checking.
[0069]
In the restaurant management system in each of the above-described embodiments, when the result of the stocking check is notified to the person in charge terminal 2, the person in charge terminal 2 displays the check result in a message on the terminal screen. The message may be output together.
In addition, the restaurant management system in each of the above-described embodiments is exemplified by the case where the restaurant management system includes the host device 1, the staff terminal group 2, the kitchen printer group 3, and the dining table camera group 4. All or a part may be provided on the staff terminal group 2 side. For example, the order information registration processing, the order processing to the kitchen printer 3, the stocking check processing, and the like may be performed on the staff terminal 2 side, and the function of the dining table camera 4 is also performed on the staff terminal group 2 side. It may be provided.
Further, the present invention is applicable not only to the communication system but also to a stand-alone type.
[0070]
In addition, in each of the above-described embodiments, the case where the present invention is applied to a restaurant management system is exemplified. However, the present invention is not limited to the restaurant management system as long as it performs a task of stocking ordered items. . For example, the present invention can also be applied to business processing for exchanging articles, such as a home delivery management system in the transportation business. In this case, shooting at the time of stocking may be performed by a portable terminal possessed by the person in charge.
[0071]
【The invention's effect】
According to the first invention (the invention described in claim 1), when an article is taken out based on the order information, an article image obtained by photographing the article and an article image registered in advance for each article And, by referring to the received order information, it is determined whether the ordered item has been delivered, and if an item different from the ordered item has been delivered, the fact is notified. In the meantime, it is possible to surely prevent the wrong stocking without performing any manual checking work, and it is possible to make the whole work more efficient and smoother.
According to the second invention (the invention described in the claims), when order information for each item is also requested when order information on a plurality of items is received, each item is ordered according to the order of the items. After recognizing the product by comparing the stock image of the product taken with the product image registered in advance for each product, the product to be stocked next to this product is specified. Is performed according to the order in which the items are ordered, so that the user decides the next item to be ordered next while checking the image and image of the item when the item is ordered, without performing any manual checking work. For example, in a restaurant, even if the store is crowded, it is possible to stock items as requested by the customer, and it is possible to improve the efficiency and smoothness of the entire work.
[Brief description of the drawings]
FIG. 1 is a block diagram showing the overall configuration of a restaurant management system.
FIG. 2 is a diagram showing a state in which a table camera is installed on the table in a one-to-one correspondence.
FIG. 3 is a diagram showing the contents of an order information file 14;
4A is a diagram showing the contents of a product information file 15, and FIG. 4B is a diagram showing the contents of a person-in-charge file 16;
FIG. 5 is a block diagram showing basic components of the host device 1.
6 is a block diagram showing basic components of the dining table camera 4. FIG.
FIG. 7 is a flowchart showing an outline of the overall operation of the host device 1;
FIG. 8 is a flowchart for explaining in detail the order information registration process shown in FIG. 7;
FIG. 9 is a flowchart for explaining in detail the ordering process of an unordered product shown in FIG. 7;
FIG. 10 is a flowchart illustrating a monitor image analysis process shown in FIG. 7 in detail;
FIG. 11 is a flowchart for explaining in detail the stock checking process shown in FIG. 7;
FIG. 12 is a flowchart for explaining the order confirmation processing shown in FIG. 7 in detail.
FIG. 13 is a flowchart showing an order input process on the clerk terminal 2 side.
FIG. 14 is a flowchart showing the operation of each dining table camera 4;
FIG. 15 is a view showing the contents of the order information file 14 after all the ordered products shown in the order information file 14 shown in FIG. 3 have been ordered.
FIG. 16 shows a case where, in the order information file 14 shown in FIG. 3, out of all the ordered products whose “table number” is indicated by “1”, only a part of the ordered products is completed (in the middle of the unloading). The figure which showed the content of the order information file 14 in FIG.
FIG. 17 is a view showing the contents of an order information file 14 for explaining a modified application example of the embodiment.
FIG. 18 is a diagram showing the contents of an order information file 14 in the second embodiment.
FIG. 19 is a flowchart illustrating a stocking check process according to the second embodiment.
FIG. 20 is a diagram showing a state after the priority product is put out when a request to give it priority is received.
FIG. 21 is a diagram showing a state in which an “order completed flag” is set from a waiting state to an unordered state, following the contents of the order information file 14 of FIG. 20;
FIG. 22 is a view showing a state in which an unordered product has been ordered following the contents of the order information file 14 of FIG. 21;
[Explanation of symbols]
1 Host device
2 Person in charge terminal
3 Kitchen printer
4 Table camera
5 Wireless LAN
11 Communication Management Department
12 Order Information Management Department
13 Table information judgment unit
14 Order information file
15 Product information file
16 Files by person in charge
45 Camera
41, 101 CPU
42, 102 storage device
44,104 Communication device
105 Input device
106 display device

Claims (10)

注文された品物を品だしする際に、その注文品の品だしを確認する注文品確認システムであって、
品物毎に予め登録されている品物画像を記憶管理する品物記憶手段と、
注文された品物を注文情報として受け付ける注文情報受付手段と、
品物を品だしする際に、その品物を撮影する撮影手段と、
この撮影手段によって撮影された品だし画像と前記品物記憶手段内の各品物画像とを比較すると共に、前記注文情報受付手段によって受け付けた注文情報を参照することによって注文品が品だしされたかを判別する判別手段と、
この判別手段によって注文品と異なる品物が品だしされたことが判別された場合に、その旨を報知する報知手段と、
を具備したことを特徴とする注文品確認システム。An order confirmation system for confirming the order of the ordered item when the item is ordered,
An article storage means for storing and managing an article image registered in advance for each article;
Order information receiving means for receiving the ordered item as order information;
A photographing means for photographing the item when the item is displayed;
By comparing the stock image taken by the photographing means with each product image in the product storage means, it is determined whether or not the ordered product has been stocked by referring to the order information received by the order information receiving means. Means for determining
When it is determined by the determining means that an item different from the ordered item has been delivered, a notifying device for notifying that fact,
An order confirmation system comprising: 前記注文情報受付手段は、顧客から注文された注文情報を入力してホスト装置へ送信する注文担当者所持の携帯端末であり、
前記ホスト装置は、品だし時に前記撮影手段によって撮影された品だし画像と前記品物記憶手段内の各品物画像とを比較すると共に、前記携帯端末から送信されて来た注文情報を参照することによって注文品が品だしされたかを判別し、注文品と異なる品物が品だしされた場合には、品だし担当者所持の携帯端末へその旨を送信報知する、
ようにしたことを特徴とする請求項1記載の注文品確認システム。The order information receiving means is a portable terminal possessed by an order person in charge of inputting order information ordered from a customer and transmitting the information to a host device,
The host device compares the stock image photographed by the photographing means at the time of stocking with each article image in the article storage means, and by referring to the order information transmitted from the portable terminal. Determine whether the ordered item has been delivered, and if an item different from the ordered item has been delivered, send a notification to that effect to the mobile terminal owned by the outsourcer,
2. The order confirmation system according to claim 1, wherein: 前記品だし画像は、顧客周辺を撮影した撮影画像を解析することによって当該撮影画像内に出現した品だし担当者が商品を顧客に出している状態を認識した際に、その商品を撮影した商品画像である、
ことを特徴とする請求項１あるいは請求項２記載の注文品確認システム。The stocking image is an article that appears in the photographed image by analyzing the photographed image of the customer's surroundings, and when the person in charge recognizes the state of giving out the product to the customer, Image
The order confirmation system according to claim 1 or 2, wherein: 顧客周辺を撮影した撮影画像を解析することによって当該撮影画像内に品だし担当者が出現したことを認識した場合に、その人物像に基づいて担当者を認識すると共に、その品だし担当者所持の携帯端末へ注文品と異なる品物が品だしされた旨を送信する、
ようにしたことを特徴とする請求項２記載の注文品確認システム。When it is recognized that a person in charge has appeared in the photographed image by analyzing the photographed image taken around the customer, the person in charge is recognized based on the person image, and the person in charge of the goods removal is possessed. To the mobile device of the item that is different from the order,
3. The order confirmation system according to claim 2, wherein: 前記撮影手段は、予め設置されている複数台のカメラのうち、その顧客周辺に設置されているカメラによって撮影された商品画像を品だし画像として前記ホスト装置へ送信すると共に、そのカメラの設置場所を識別する為の識別情報を前記ホスト装置へ送信し、
前記ホスト装置は、前記撮影手段から品だし画像と共に送信されて来た識別情報に基づいて顧客を特定する、
ようにしたことを特徴とする請求項２記載の注文品確認システム。The photographing unit transmits a product image photographed by a camera installed around the customer as a stock image to the host device among a plurality of cameras installed in advance, and a location where the camera is installed. Sending identification information to identify the host device,
The host device specifies a customer based on identification information transmitted together with the stock image from the photographing unit,
3. The order confirmation system according to claim 2, wherein: 前記報知手段は、注文品と異なる品物が品だしされた場合に、その品物の正規な注文元を報知する、
ようにしたことを特徴とする請求項1あるいは請求項２記載の注文品確認システム。The notifying unit, when an item different from the ordered item is put out, notifies an authorized order source of the item,
The order confirmation system according to claim 1 or 2, wherein the order confirmation system is configured as follows. 正しく品だしされた場合に、前記撮影手段によって撮影された品だし画像を記憶保存する保存手段と、
入力された検索条件に基づいて前記保存手段を検索し、入力条件に該当する品だし画像を読み出して案内出力する案内手段と、
を設けたことを特徴とする請求項1あるいは請求項２記載の注文品確認システム。Storage means for storing the stock image taken by the shooting means when correctly stocked;
Guide means for searching the storage means based on the input search condition, reading a stock image corresponding to the input condition, and outputting guide information;
The order confirmation system according to claim 1 or 2, further comprising: 注文された品物を品だしする際に、その注文品の品だしを確認する注文品確認システムであって、
品物毎に予め登録されている品物画像を記憶管理する品物記憶手段と、
複数の品物に関する注文情報を受け付けた際に、各品物を品出しする順番も合わせて要求された場合に、その注文情報と共に要求された品だし順を入力する注文情報受付手段と、
品物を品だしする際に、その品物を撮影する撮影手段と、
前記注文情報受付手段によって受け付けた注文情報を参照し、品だし順が要求されている場合には、この品だし順にしたがって各品物を出す為に、前記撮影手段によって撮影された品だし画像と前記品物記憶手段内の各品物画像とを比較することによってその品物を認識した後に、この品物の次に品だしすべき品物を決定する動作を品だし順にしたがって繰り返す品だし管理手段と、
を具備したことを特徴とする注文品確認システム。An order confirmation system for confirming the order of the ordered item when the item is ordered,
An article storage means for storing and managing an article image registered in advance for each article;
An order information receiving means for inputting the requested order of goods together with the order information when the order of picking up each item is also requested when receiving order information on a plurality of items;
A photographing means for photographing the item when the item is displayed;
With reference to the order information received by the order information receiving means, if the order of stocking is requested, in order to put out each item according to the order of stocking, the stock image taken by the shooting means and the An article management means for recognizing the article by comparing each article image in the article storage means and then repeating an operation of determining an article to be stocked next to the article according to the article order,
An order confirmation system comprising: コンピュータに対して、
品物毎に予め登録されている品物画像を記憶管理する機能と、
注文された品物を注文情報として受け付ける機能と、
品物を品だしする際に、その品物を撮影する機能と、
撮影された品だし画像と前記品物画像とを比較すると共に、受け付けた注文情報を参照することによって注文品が品だしされたかを判別する機能と、
注文品と異なる品物が品だしされたことが判別された場合に、その旨を報知する機能と、
を実現させるためのプログラム。Against the computer
A function of storing and managing an article image registered in advance for each article;
A function to accept ordered items as order information,
When taking out an item, a function to shoot the item,
A function of comparing the taken product image and the product image, and determining whether the ordered product has been provided by referring to the received order information,
When it is determined that an item different from the ordered item has been delivered, a function of notifying that fact,
The program to realize. コンピュータに対して、
品物毎に予め登録されている品物画像を記憶管理する機能と、
複数の品物に関する注文情報を受け付けた際に、各品物を品出しする順番も合わせて要求された場合に、その注文情報と共に要求された品だし順を入力する機能と、
前記受け付けた注文情報を参照し、品だし順が要求されている場合には、この品だし順にしたがって各品物を出す為に、撮影された品だし画像と前記品物画像とを比較することによってその品物を認識した後に、この品物の次に品だしすべき品物を決定する動作を品だし順にしたがって繰り返す機能と、
を実現させるためのプログラム。Against the computer
A function of storing and managing an article image registered in advance for each article;
A function for inputting the requested stocking order together with the order information when the order for picking up each item is also requested when receiving order information on a plurality of items;
With reference to the received order information, if the order of stocking is requested, in order to put out each item according to the order of stocking, by comparing the shot image of the stocking with the item image, A function of, after recognizing an item, repeating an operation of determining an item to be ordered next to the item according to the order in which the item is identified;
The program to realize.
JP2002371190A 2002-12-24 2002-12-24 Order confirmation system and program Expired - Fee Related JP4096729B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002371190A JP4096729B2 (en) 2002-12-24 2002-12-24 Order confirmation system and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002371190A JP4096729B2 (en) 2002-12-24 2002-12-24 Order confirmation system and program

Publications (2)

Publication Number Publication Date
JP2004206177A true JP2004206177A (en) 2004-07-22
JP4096729B2 JP4096729B2 (en) 2008-06-04

Family

ID=32810123

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002371190A Expired - Fee Related JP4096729B2 (en) 2002-12-24 2002-12-24 Order confirmation system and program

Country Status (1)

Country Link
JP (1) JP4096729B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013008103A (en) * 2011-06-22 2013-01-10 Toshiba Tec Corp Provision commodity confirmation device, program and provision commodity confirmation method
JP2014013629A (en) * 2013-10-23 2014-01-23 Toshiba Tec Corp Information processing apparatus and program
CN113066227A (en) * 2021-03-16 2021-07-02 广东便捷神科技股份有限公司 Support to sell unmanned vending machine of depositing function in advance
CN113518998A (en) * 2019-03-08 2021-10-19 三菱电机株式会社 Counting system, counting device, machine learning device, counting method, component arrangement method, and program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04145575A (en) * 1990-10-06 1992-05-19 Puranetsuto:Kk Method and device for inspecting shipping commodity
JPH11283128A (en) * 1998-03-30 1999-10-15 Nitsuko Corp Pos device
JP2000293685A (en) * 1999-04-06 2000-10-20 Toyota Motor Corp Scene recognizing device
JP2001216571A (en) * 2000-02-03 2001-08-10 Glory Ltd Method and device for adjusting charge
JP2001338035A (en) * 2000-05-30 2001-12-07 Takuo Yoshizuka Service network system for eating house

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04145575A (en) * 1990-10-06 1992-05-19 Puranetsuto:Kk Method and device for inspecting shipping commodity
JPH11283128A (en) * 1998-03-30 1999-10-15 Nitsuko Corp Pos device
JP2000293685A (en) * 1999-04-06 2000-10-20 Toyota Motor Corp Scene recognizing device
JP2001216571A (en) * 2000-02-03 2001-08-10 Glory Ltd Method and device for adjusting charge
JP2001338035A (en) * 2000-05-30 2001-12-07 Takuo Yoshizuka Service network system for eating house

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013008103A (en) * 2011-06-22 2013-01-10 Toshiba Tec Corp Provision commodity confirmation device, program and provision commodity confirmation method
JP2014013629A (en) * 2013-10-23 2014-01-23 Toshiba Tec Corp Information processing apparatus and program
CN113518998A (en) * 2019-03-08 2021-10-19 三菱电机株式会社 Counting system, counting device, machine learning device, counting method, component arrangement method, and program
CN113518998B (en) * 2019-03-08 2024-04-16 三菱电机株式会社 Counting system, counting device, machine learning device, counting method, component arrangement method, and recording medium
CN113066227A (en) * 2021-03-16 2021-07-02 广东便捷神科技股份有限公司 Support to sell unmanned vending machine of depositing function in advance

Also Published As

Publication number Publication date
JP4096729B2 (en) 2008-06-04

Similar Documents

Publication Publication Date Title
US6549891B1 (en) Method for managing inventory
US20120280040A1 (en) Wireless-based checkout and loss prevention
JP2009301297A (en) Information providing device, computer program and store system
US20200065791A1 (en) Self-service product return using computer vision and artificial intelligence
JP6563094B1 (en) Self-registration system
JP2004326208A (en) Customer managing system, program for realizing system, and recording medium
JP6077103B2 (en) Order information control system, method, program
CN110520888A (en) The processing method and program of store system, electronic shelf label, store system
WO2014187979A1 (en) Associating identifiers to participants
US7353178B2 (en) Touch point and attribute tracking system and process
JP2022009877A (en) Management device and program
JP2009070010A (en) Clothing information management system and clothing information management method
JP2005071262A (en) Slip processing system
JP4096729B2 (en) Order confirmation system and program
WO2015125455A1 (en) Selling support device, selling system, selling support method, and program
JP6434093B1 (en) Article sales system, method, and program
JP6977286B2 (en) Sales system, server, sales system processing method, server processing method and program
JP2022023559A (en) Work management device, work management method, and program
JP2022014485A (en) Remote shopping system and remote shopping method
JP6969631B1 (en) Terminal equipment and product ordering system
JP7468022B2 (en) Item management system and method, and label matching device, method and program
JP7269304B1 (en) STORE WORK TERMINAL, STORE WORK METHOD AND STORE WORK PROGRAM
JP7335033B2 (en) Merchandise sales data processing system, settlement device, and program
US20230259914A1 (en) Display processing apparatus, transaction support apparatus, and program
WO2024024421A1 (en) Transaction support system, transaction support method, and recording medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050920

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20060208

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060406

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080219

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080303

R150 Certificate of patent or registration of utility model

Ref document number: 4096729

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110321

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110321

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120321

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130321

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130321

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140321

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees