JP5166374B2 - ウエアラブル注文端末及びプログラム - Google Patents

Description

本発明は、ウエアラブル注文端末及びプログラムに関する。

従来からヘッドマウントディスプレイ（ＨＭＤ：Head Mounted Display）を備えた身体に装着可能なウエアラブル端末がある。このウエアラブル端末としては、レストランのオーダーエントリー（注文入力）などに活用されたウエアラブル注文端末がある。ウエアラブル注文端末の従来技術としては特許文献１が知られている。特許文献１には、音声入力されたメニュー内容がオーダー情報として表示される頭部装着型表示システムが開示されている。

ところで、ウエアラブル注文端末を使用する店員にとっては、業務を行ううえで視線を客に向ける必要があることから、余分な情報がいつまでもヘッドマウントディスプレイに表示されることは望ましくない。例えば上記従来技術では、客からの注文を受け付けて次の業務を行いたい場合でも、音声入力されたメニュー内容が表示されたままとなることがあり、不便なものであった。

本発明は、上記に鑑みてなされたものであって、店員が業務を行う上で見やすく情報を表示することを可能とするウエアラブル注文端末及びプログラムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、実施形態のウエアラブル注文端末は、表示部を有するヘッドマウントディスプレイと、装着者の操作入力を受け付ける操作手段と、他の機器との通信を行い、前記他の機器から配信された、調理の完了を示す調理完了情報、追加注文の確認を示す追加注文確認情報、客卓からの呼び出しを示す呼出情報のうちの少なくとも一つの配信情報を受信する通信手段と、前記操作入力に応じた注文受付時には受け付けた注文内容を含む注文画面を前記表示部に表示するとともに、前記操作入力に応じた注文受付終了時には前記注文画面の表示を終了する第１の表示制御手段と、前記配信情報を受信した際に前記第１の表示制御手段が前記注文画面を表示している際には前記配信情報の表示を行うことなく、前記第１の表示制御手段が前記注文画面を表示していない時に、前記配信情報を前記表示部に表示するとともに、前記操作入力に応じた確認指示に基づいて前記配信情報の表示を終了する第２の表示制御手段と、を備えることを特徴とする。

また、実施形態のプログラムは、表示部を有するヘッドマウントディスプレイと、装着者の操作入力を受け付ける操作手段と、他の機器との通信を行い、前記他の機器から配信された、調理の完了を示す調理完了情報、追加注文の確認を示す追加注文確認情報、客卓からの呼び出しを示す呼出情報のうちの少なくとも一つの配信情報を受信する通信手段とを備えるウエアラブル注文端末のコンピュータに、前記操作入力に応じた注文受付時には受け付けた注文内容を含む注文画面を前記表示部に表示するとともに、前記操作入力に応じた注文受付終了時には前記注文画面の表示を終了するステップと、前記配信情報を受信した際に前記注文画面を表示している際には前記配信情報の表示を行うことなく、前記注文画面を表示していない時に、前記配信情報を前記表示部に表示するとともに、前記操作入力に応じた確認指示に基づいて前記配信情報の表示を終了するステップと、を実行させることを特徴とする。

本発明は、店員が業務を行う上で見やすく情報を表示することを可能とする、という効果を奏する。

図１は、本実施形態にかかる注文システムの一例を示す図である。 図２は、本実施形態にかかるヘッドマウントディスプレイの一例を示す図である。 図３は、本実施形態にかかる注文システムの動作の一例を示すラダーチャートである。 図４は、モニタ表示部の表示例を示す図である。 図５は、モニタ表示部の表示例を示す図である。 図６は、モニタ表示部の表示例を示す図である。 図７は、モニタ表示部の表示例を示す図である。 図８は、モニタ表示部の表示例を示す図である。 図９は、モニタ表示部の表示例を示す図である。 図１０は、モニタ表示部の表示例を示す図である。 図１１は、本実施形態にかかるウエアラブル注文端末の処理を示すフローチャートである。 図１２は、本実施形態にかかる注文管理サーバの処理を示すフローチャートである。

以下に添付図面を参照して、この発明にかかるウエアラブル注文端末及びプログラムの最良な実施の形態を詳細に説明する。本実施形態では、レストランなどの注文システムにおいて、ウエイターやウエイトレスなどの店員が使用するユーザインタフェースにウエアラブル注文端末を適用する場合について例示する。

図１は、本実施形態にかかる注文システムの一例を示す図である。図１に示すように、注文システムは、装着者２が装着して使用するユーザインタフェースであるウエアラブル注文端末１、そのウエアラブル注文端末１からの注文を管理する注文管理サーバ３０、各種帳票（例えば注文伝票）などを印刷するためのプリンタ３１を制御するプリンタサーバ３２、ウエアラブル注文端末１とデータの送受信を行うための送受信装置３４、調理人が使用するための調理補助端末３５がネットワークＮＴを介して接続されている。ネットワークＮＴは、ＬＡＮ（Local Area Network）、イントラネット、イーサネット（登録商標）などである。

送受信装置３４とウエアラブル注文端末１との間のデータの送受信は、電波、光、赤外線、超音波などであってよく、本実施形態では通信範囲が数ｍ程度である近接無線通信（例えばＢｌｕｅｔｏｏｔｈ（登録商標）など）を用いて行うものとする。なお、送受信装置３４は、店舗内の全ての領域（例えば、精算カウンター近傍、客卓が設けられたフロア、バックヤード等）をカバーするように複数設けられている。

注文管理サーバ３０は、店員がウエアラブル注文端末１に入力した料理の注文を管理する。具体的には、注文管理サーバ３０は、ウエアラブル注文端末１から送受信装置３４を介して通知された注文情報にユニークな注文番号を割り当てて内部のストレージ等に記憶し、注文情報を登録する。注文情報には、注文を受けた客卓、客数、注文品目、その注文数などが含まれる。注文管理サーバ３０に登録された注文情報は、注文番号とともにプリンタ３１より注文伝票として印刷される。この注文伝票は、ＰＯＳ端末３３での精算時に使用するものとして、例えば料理提供後の客に渡されるものである。また、注文管理サーバ３０は、登録された注文情報の調理補助端末３５への通知や、各種情報のウエアラブル注文端末１への配信を行う（詳細は後述する）。

ＰＯＳ端末３３は、ドロア、キー入力部、スキャナ、カードリーダ、ディスプレイ、レシート／ジャーナル用プリンタなどを備え（いずれも図示しない）、現金やクレジットカードを用いて商取引を行うもので、例えば精算カウンター等に設けられる。例えば、ＰＯＳ端末３３は、キー入力やスキャナ読み取りなどにより、注文伝票に印刷された注文番号を受け付け、その注文番号に対応する注文情報を注文管理サーバ３０から取得する。ＰＯＳ端末３３は、料理品目（メニュー）ごとの識別コードや価格がプリセットされたマスタファイルを、内部ＲＯＭ（Read Only Memory）やデータサーバ（特に図示しない）から読み出し、取得した注文情報にかかる注文の精算を行う。

調理補助端末３５は、調理人が使用するための情報端末である。調理補助端末３５は、ＬＣＤ（Liquid Crystal Display）等のディスプレイ、操作入力を受け付けるためのタッチパネル等の操作入力部などを備え、例えば調理場に設けられる。

ウエアラブル注文端末１は、装着者２（店員）が装着して使用する情報端末であり、ヘッドマウントディスプレイ１０と、撮像装置としてのデジタルカメラ１１と、インタフェースボックス１２と、マイク１５とを備える。図２に示すように、ヘッドマウントディスプレイ１０は、モニタ表示部１７を備えた光透過性部材１６を保持するためのフレーム１３と、このフレーム１３を装着者２の左目前に配置するためのヘッドホン型の装着用アーム１４とを備える。すなわち、ヘッドマウントディスプレイ１０は、装着用アーム１４によって装着者２の頭部２ａに装着可能であり、装着した状態ではフレーム１３が装着者２の左目前に配置されることとなる。

フレーム１３は、装着者２の左目に合わせた大きさの形状に形成されている。フレーム１３の枠外の上部には、撮像方向可変機構１８を介してデジタルカメラ１１が設けられている。また、フレーム１３の枠外には、装着者２の瞳を撮像して視線２ｂ（視線位置）の検出を行うための視線認識用カメラ１９が設けられている。また、フレーム１３の下部には、装着者２やその周囲の音声を集音するためのマイク１５が設けられている。フレーム１３の枠内には、例えばフレーム枠の形状に合わせて形成された板状の光透過性部材１６が保持されている。この光透過性部材１６は、ヘッドマウントディスプレイ１０を装着者２の頭部２ａに装着した場合であっても、装着者２の眼から周辺環境を観察可能である。この光透過性部材１６は、例えば無色透明又は予め決められた色を有していてもよい。

光透過性部材１６内の一部分には、モニタ表示部１７が形成されている。このモニタ表示部１７は、例えばデジタルカメラ１１の撮像により取得される動画の画像データや各種情報等をリアルタイムにモニタ表示する。したがって、ヘッドマウントディスプレイ１０を装着した状態で装着者２の左目へのモニタ表示を行うことが可能である。なお、モニタ表示部１７は、光透過性の状態でモニタ表示する。しかるに、モニタ表示部１７は、リアルタイムにモニタ表示している状態でも周辺環境を観察可能とすることができる。例えば、店員が接客中であっても、客から目を離すことなくモニタ表示を確認することができる。

なお、本実施形態では、フレーム１３を装着者２の左目前に配置し、装着者２の左目へのモニタ表示を行う構成を例示した。しかしながら、装着者２へのモニタ表示は、右眼又は両目に行うものであってよい。例えば、フレーム１３を装着者２の右眼前に配置することで、装着者２の右目へのモニタ表示を行うことが可能である。

デジタルカメラ１１は、撮像動作を行って動画の画像データを出力する。このデジタルカメラ１１は、光透過性部材１６を通した装着者２の視線２ｂ方向に焦点が合うように撮像範囲を設定した状態でヘッドマウントディスプレイ１０のフレーム１３上に取り付けられている。撮像方向可変機構１８は、例えばデジタルカメラ１１を首振り可能に支持し、デジタルカメラ１１の撮像方向を任意の方向、ここでは上記の如くデジタルカメラ１１の撮像範囲を装着者２の視線２ｂ方向に焦点が合うように設定する。

インタフェースボックス１２は、送受信装置３４との間のデータの送受信を行うとともに、ヘッドマウントディスプレイ１０にかかる各種処理を行う。具体的には、インタフェースボックス１２は、制御部１２１、音声処理部１２２、送受信部１２３、情報表示部１２４、画像処理部１２５を備え、装着者２が携帯可能なボックスである。制御部１２１は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭなどを有するコンピュータであり、ウエアラブル注文端末１の動作を制御する。ＲＯＭには、プログラムやそのプログラムを実行する際に参照される各種設定情報などが予め格納されている。ＣＰＵは、ＲＯＭに記憶されたプログラムをＲＡＭの作業領域に展開して順実行することで、ウエアラブル注文端末１の動作を中央制御する。なお、インタフェースボックス１２における画像処理部１２５、情報表示部１２４、送受信部１２３、音声処理部１２２などの各部が有する機能は、制御部１２１がＲＯＭに予め格納されたプログラムを実行することで実現してもよい。

音声処理部１２２は、マイク１５により入力された音声の認識などの処理を行う。具体的には、音声処理部１２２は、予め設定された辞書データに含まれる音声データと、マイク１５からの音声データとを照合して所定の音声コマンドを認識し、認識した音声コマンドを制御部１２１へ通知する。制御部１２１は、通知された音声コマンドに応じた処理を行う。これにより、ウエアラブル注文端末１は、装着者２が発声する音声コマンドによる操作が可能である。以後、上述した音声コマンドによるウエアラブル注文端末１の操作を音声操作と呼ぶ。ウエアラブル注文端末１は、装着者２の音声操作を受け付けることで、装着者２の手入力による手間を省くことができる、特に装着者２が接客中などの場合は、視線を客に向けた状態で操作入力を行うことができるため、効果的である。

情報表示部１２４は、制御部１２１などから入力された画像データをヘッドマウントディスプレイ１０のモニタ表示部１７へ表示する。また、情報表示部１２４は、制御部１２１の制御の下、情報ウインドウやアイコンなどの各種画像を、モニタ表示部１７の所定の座標へ表示する。

画像処理部１２５は、デジタルカメラ１１の撮像により取得された画像データの画像処理や、視線認識用カメラ１９で撮像された画像データを解析して装着者２の視線２ｂの検出を行う。具体的には、画像処理部１２５は、視線認識用カメラ１９で撮像された画像データから装着者２の瞳を検出し、その検出された瞳の位置に応じて視線２ｂの検出を行う。なお、視線２ｂの検出結果は情報表示部１２４へ出力される。情報表示部１２４は、画像処理部１２５から出力される視線２ｂの検出結果に対応するモニタ表示部１７の座標に注文表示ウインドウを表示する。また、画像処理部１２５は、デジタルカメラ１１の撮像により取得された画像データの中から１枚のフレームをチャプタし、このチャプタ画像の中のバーコードを識別し、識別された画像データを２値化してコード情報を取得する等の画像処理を行う。

なお、ウエアラブル注文端末１における入力操作は、制御部１２１の制御の下、視線認識用カメラ１９の画像を元に画像処理部１２５により検出された視線２ｂに応じて行われてもよい。具体的には、情報表示部１２４がモニタ表示部１７に表示した操作入力用のアイコン画像を装着者２が見つめた際の視線２ｂを検出することで、ウエアラブル注文端末１における入力操作を行う。例えば、モニタ表示部１７の所定の座標に表示したアイコン画像と、視線２ｂの検出結果により注文表示ウインドウとが重複する場合に、そのアイコン画像に対応する入力操作を受け付ける。以後、上述した視線２ｂに応じたウエアラブル注文端末１の入力操作を視線操作と呼ぶ。ウエアラブル注文端末１は、装着者２の視線操作を受け付けることで、装着者２の手入力による手間を省くことができる、特に装着者２が接客中などの場合は、視線をコンソールなどに向けることなく操作入力を行うことができるため、効果的である。

次に、本実施形態にかかる注文システムの動作について説明する。図３は、本実施形態にかかる注文システムの動作の一例を示すラダーチャートである。

図３に示すように、ウエアラブル注文端末１は、注文を受けた客卓、客数、注文品目、その注文数などの注文入力を装着した店員から音声操作又は視線操作により受け付け（Ｓ１）、受け付けた注文を注文情報として注文管理サーバ３０へ通知する（Ｓ２）。

図４、５は、モニタ表示部１７の表示例を示す図であり、より具体的には注文受付時における注文画面を示す図である。Ｓ１における注文受付時には、音声操作や視線操作による注文開始の指示に応じて、図４、５に例示した注文画面をモニタ表示部１７に表示する。例えば、音声操作の場合は「注文開始」等の音声コマンドに応じて注文画面を表示する。また、視線操作の場合は注文開始を指示するためのアイコン画像（図６を参照）を装着者２が見つめることに応じて注文画面を表示する。

図４、５に示すように、注文画面において、視線マーカーＧ１は、視線２ｂの検出結果に応じてモニタ表示部１７に表示されるマーカーである。注文表示ウインドウＧ２は、受け付けた注文内容を表示する表示ウインドウであり、例えば注文品目などを表示する。注文完了アイコンＧ３は、注文完了の視線操作を行うためのアイコン画像である。

例えば、音声操作による注文受付の場合は、装着者２と客との会話から、辞書データに該当する所定の単語を識別し、注文を受けた客卓、客数、注文品目、その注文数、注文完了などの入力を受け付ける。より具体的には、「いらっしゃいませ、×名様、××卓へようこそ」などの音声入力から、「名様」、「卓」などの単語と一致する音声を認識し、「名様」の前にある数を識別することで客数の入力を、「卓」の前にある数を識別することで客卓の入力を受け付ける。また、「海鮮グラタンを１つですね」などの音声入力から、料理品目の一つの単語と一致する「海鮮グラタン」を識別することで注文品目の入力を、その個数である「１」を識別することで注文数の入力を受け付ける。また、「ご注文ありがとうございました」などの音声入力から、注文完了を示す単語や文を識別することで、注文完了の入力を受け付ける。

また、視線操作による注文受付の場合は、テンキーを模したアイコン画像などから、客卓、客数、注文数などの数の入力を、料理品目の一覧画像から注文品目の入力を、注文完了アイコンＧ３から注文完了の入力を受け付ける。なお、注文品目の入力は、図５に示すように、料理品目毎にその料理を識別するための識別コードＭ１１、Ｍ１２が掲載されたメニューＭ１により行ってもよい。具体的には、視線マーカーＧ１が重なった識別コードＭ１２を取得し、ＲＯＭに記憶されたマスタファイルから識別コードＭ１２に該当する品目を注文品目として受け付ける。

図４、５に示すように、音声操作や視線操作により入力された注文内容は、注文表示ウインドウＧ２に表示される。このため、ウエアラブル注文端末１を装着した店員は、客に視線を向けた状態で注文内容の確認を行うことができる。

図３に示すように、ウエアラブル注文端末１は、注文受付を終了して、受け付けた注文を通知した後に、注文受付時に表示した注文画面を消去する（Ｓ３）。図６は、モニタ表示部１７の表示例を示す図であり、より具体的には注文画面を消去した後の表示状態を示す図である。図６に示すように、モニタ表示部１７は、注文受付を行わない状態、すなわち、装着者２が注文受付以外の作業を行っている状態では注文表示ウインドウＧ２や注文完了アイコンＧ３などを含む注文画面が消去されていることとなる。したがって、ウエアラブル注文端末１は、注文受付以外の作業を行っている装着者２の視認性を向上させることができる。注文開始アイコンＧ５は、視線操作による注文開始を指示するためのアイコン画像である。上述したように、注文画面は注文開始アイコンＧ５を装着者２が見つめることで表示される。

図３に示すように、注文管理サーバ３０は、ウエアラブル注文端末１から通知された注文情報を登録し（Ｓ４）、登録された注文情報とその注文番号とを調理補助端末３５に通知する（Ｓ５）。調理補助端末３５は、注文管理サーバ３０から通知された注文情報をディスプレイに表示する（Ｓ６）。これにより、調理人は、注文情報に含まれる注文品目の調理を開始することができる。

調理補助端末３５のディスプレイに表示された注文情報に含まれる注文品目の調理が完了した場合、調理人は、操作入力部により調理完了の入力を行う（Ｓ７）。この調理完了の入力に応じて、調理補助端末３５は、Ｓ５において通知された注文情報にかかる調理の完了（調理完了情報）を注文管理サーバ３０に通知する（Ｓ８）。具体的には、注文情報の注文番号に調理完了を示すフラグを付して注文管理サーバ３０に通知する。

調理完了の通知を受け付けた注文管理サーバ３０は、調理済みであることを示す情報を登録された注文情報に付して、注文情報の更新を行い（Ｓ９）、その注文情報にかかる調理の完了をウエアラブル注文端末１へ配信する（Ｓ１０）。具体的には、注文情報に調理完了を示すフラグを付してウエアラブル注文端末１へ配信する。

調理完了の配信を受け付けたウエアラブル注文端末１は、モニタ表示部１７において、調理完了を示す情報を表示する（Ｓ１１）。図７は、モニタ表示部１７の表示例を示す図であり、より具体的には調理完了の情報の表示例を示す図である。図７に示すように、Ｓ１１では、調理完了を示す情報がインフォメーションウインドウＧ４に表示される。これにより、装着者２は、調理完了により配膳が必要な状況であることを確認できる。なお、Ｓ１１におけるインフォメーションウインドウＧ４の表示内容は、調理完了を示すフラグを付して配信された注文情報に含まれる客卓をもとに、図示例のとおり、調理が完了した客卓の料理を配膳するための指示であってよい。

ウエアラブル注文端末１は、モニタ表示部１７に調理完了を表示している際に、その表示の確認を示す音声操作又は視線操作が行われた場合、その表示内容が確認されたことを注文管理サーバ３０に通知する（Ｓ１２）。具体的には、ウエアラブル注文端末１は、Ｓ１０において配信された情報に確認したことを示すフラグを付して通知する（以下、この通知を確認通知と呼ぶ）。確認通知に伴い、ウエアラブル注文端末１は、調理完了の表示を消去する。なお、表示の確認を示す音声操作は、例えば「確認」など音声コマンドであってよい。また、表示の確認を示す視線操作は、装着者２がインフォメーションウインドウＧ４を見つめて、視線マーカーＧ１をインフォメーションウインドウＧ４に所定の時間重複させることなどであってよい。

また、注文管理サーバ３０は、注文登録から所定の時間が経過した注文情報があるなど、追加注文の確認が必要である場合（Ｓ１３）、追加注文の確認指示（追加注文確認情報）をウエアラブル注文端末１へ配信する（Ｓ１４）。具体的には、注文登録から所定の時間が経過した注文情報に追加注文の確認を示すフラグを付してウエアラブル注文端末１へ配信する。

追加注文の確認指示を受け付けたウエアラブル注文端末１は、モニタ表示部１７において、追加注文の確認を示す情報を表示する（Ｓ１５）。図８は、モニタ表示部１７の表示例を示す図であり、より具体的には追加注文の確認を示す情報の表示例を示す図である。図８に示すように、Ｓ１５では、追加注文の確認を示す情報がインフォメーションウインドウＧ４に表示される。これにより、装着者２は、追加注文の確認が必要な状況であることを確認でき、販売機会の損失を防ぐとともに、売り上げの向上を図ることができる。なお、Ｓ１５におけるインフォメーションウインドウＧ４の表示内容は、追加注文の確認を示すフラグを付して配信された注文情報に含まれる客卓をもとに、図示例のとおり、その客卓の追加注文の確認を促す指示であってよい。

ウエアラブル注文端末１は、モニタ表示部１７に追加注文の確認を示す情報を表示している際に、その表示の確認を示す音声操作又は視線操作が行われた場合、その表示内容が確認されたことの確認通知を注文管理サーバ３０に通知する（Ｓ１６）。この通知に伴い、ウエアラブル注文端末１は、追加注文の確認を示す情報の表示を消去する。

また、注文管理サーバ３０は、客卓ごとに設置された呼出スイッチ（特に図示しない）の操作による呼び出し通知が客卓からあった場合（Ｓ１７）、その操作のあった客卓からの呼び出し（呼出情報）をウエアラブル注文端末１へ配信する（Ｓ１８）。具体的には、呼出スイッチの操作があった客卓に呼び出しを示すフラグを付してウエアラブル注文端末１へ配信する。

客卓からの呼び出しを受け付けたウエアラブル注文端末１は、モニタ表示部１７において、客卓からの呼び出しを示す情報を表示する（Ｓ１９）。図９は、モニタ表示部１７の表示例を示す図であり、より具体的には客卓からの呼び出しを示す情報の表示例を示す図である。図９に示すように、Ｓ１９では、客卓からの呼び出しを示す情報がインフォメーションウインドウＧ４に表示される。これにより、装着者２は、客卓から呼び出されている状況を確認できる。なお、Ｓ１９におけるインフォメーションウインドウＧ４の表示内容は、図示例のとおり、呼び出しを示すフラグが付された客卓を通知するものであってよい。

ウエアラブル注文端末１は、モニタ表示部１７に呼び出しを示す情報を表示している際に、その表示の確認を示す音声操作又は視線操作が行われた場合、その表示内容が確認されたことの確認通知を注文管理サーバ３０に通知する（Ｓ２０）。この通知に伴い、ウエアラブル注文端末１は、呼び出しを示す情報の表示を消去する。

なお、ウエアラブル注文端末１では、モニタ表示部１７に注文画面等の表示を行っている際に、Ｓ１０、Ｓ１４、Ｓ１８の複数の配信を順次受け付けた場合は、それらの配信情報をキューに格納しておく。そして、注文画面等の表示が終了（消去）した後に、キューに格納された配信情報を読み出すことで、配信された順にＳ１１、Ｓ１５、Ｓ１９の表示を行う。具体的には、配信された順序を示して調理完了、追加注文の確認、呼び出しをモニタ表示部１７に表示する。図１０は、モニタ表示部１７の表示例を示す図であり、より具体的には複数の配信を順序を示して表示する場合を例示する図である。図１０に示すように、インフォメーションウインドウＧ４には、タブＴ１から順にタブＴ３まで配信された情報が表示される。これにより、装着者２は、配信があった情報の時系列を確認することができる。

ウエアラブル注文端末１は、表示の切り替えを示す音声操作又は視線操作が行われた場合、その操作指示に応じて表示すべきタブを切り替える。具体的には、「切り替え」などの音声コマンドに応じてタブの切り替えを行う。また、装着者２が表示すべきタブを見つめて、視線マーカーＧ１がそのタブに所定の時間重複することを検出した場合に、タブの切り替えを行う。

なお、複数の配信を受け付けた場合のモニタ表示部１７への表示は、配信された順序だけでなく、優先して確認すべき順序に配信された情報を並び替えたものであってよい。これは、装着者２が作業を行う上での優先順位は、配信された指示の時系列順とは必ずしも一致しないためである。なお、この並び替えは、予め設定された規則に従って行うものであり、詳細については後述する。

次に、ウエアラブル注文端末１が制御部１２１の制御の下で行う処理の詳細について、図１１を参照して説明する。図１１は、本実施形態にかかるウエアラブル注文端末１の処理を示すフローチャートである。

図１１に示すように、処理が開始されると、制御部１２１は、音声操作又は視線操作により注文受付の開始が指示されたた否かを判定する（Ｓ１０１）。注文受付の開始が指示されない場合（Ｓ１０１：ＮＯ）は、注文画面の表示などを行うことなく、Ｓ１０８へ処理を進める。

注文受付の開始が指示された場合（Ｓ１０１：ＹＥＳ）、制御部１２１は、注文画面をモニタ表示部１７に表示させ（Ｓ１０２）、音声操作又は視線操作による注文受付を行い（Ｓ１０３）、受け付けた注文内容をモニタ表示部１７に表示させる（Ｓ１０４）。

次いで、制御部１２１は、音声操作又は視線操作による注文受付の終了が指示されたか否かを判定する（Ｓ１０５）。注文受付の終了が指示されない場合（Ｓ１０５：ＮＯ）は、Ｓ１０３へ処理を戻して、注文受付を継続する。

注文受付の終了が指示された場合（Ｓ１０５：ＹＥＳ）、制御部１２１は、受け付けた注文を注文情報として注文管理サーバ３０に通知させ（Ｓ１０６）、モニタ表示部１７に表示中であった注文画面を消去させて（Ｓ１０７）、Ｓ１０８へ処理を進める。これにより、ウエアラブル注文端末１では、注文受付時にのみ注文画面を表示することができる。すなわち、ウエアラブル注文端末１の装着者２が業務を行う上で見やすく注文画面を表示することができる。

Ｓ１０８において、制御部１２１は、調理完了、追加注文の確認、呼び出しなど、注文管理サーバ３０からの配信の有無を判定する。配信があった場合（Ｓ１０８：ＹＥＳ）、制御部１２１は、配信された情報をモニタ表示部１７に表示させ（Ｓ１０９）、その確認を示す音声操作又は視線操作の有無を判定する（Ｓ１１０）。確認を示す操作がない場合（Ｓ１１０：ＮＯ）は、処理をＳ１０９へ戻して、配信された情報の表示を継続させる。このＳ１０９における配信された情報の表示は、前述したＳ１０１において注文受付が開始されない場合や、Ｓ１０７において注文画面が消去された場合であって、注文画面が表示中でなく、配信がある場合にのみ実行される。すなわち、注文画面を表示して注文受付を行っている間は、Ｓ１０２〜Ｓ１０５の処理が行われることから、配信情報がモニタ表示部１７に表示されることはない。また、注文受付を行っている間に配信された情報は、前述したとおり、キューに格納されており、Ｓ１０９においてモニタ表示部１７に表示されることとなる。

確認を示す操作がある場合（Ｓ１１０：ＹＥＳ）、制御部１２１は、配信された情報の表示内容が確認されたことを注文管理サーバ３０に通知させて（Ｓ１１１）、モニタ表示部１７に表示中であった配信された情報を消去させる（Ｓ１１２）。したがって、ウエアラブル注文端末１では、装着者２の確認があった時点で、装着者２が確認すべき配信された情報の表示が終了することとなる。すなわち、ウエアラブル注文端末１は、装着者２が業務を行う上で邪魔にならないように、確認すべき情報を表示できる。

次いで、制御部１２１は、音声操作又は視線操作による終了指示があるか否かを判定し（Ｓ１１３）、終了指示がなく、処理を継続させる場合（ＮＯ）はＳ１０１へ処理を戻す。なお、終了指示がある場合（ＹＥＳ）、制御部１２１は処理を終了する。

次に、注文管理サーバ３０が行う処理の詳細について、図１２を参照して説明する。図１２は、本実施形態にかかる注文管理サーバ３０の処理を示すフローチャートである。なお、以下で説明する注文管理サーバ３０の処理は、ＣＰＵ、ＲＡＭ、ＲＯＭなどを備えた制御部（特に図示しない）において、ＲＯＭに記憶されたプログラムをＲＡＭの作業領域に展開してＣＰＵが順次実行することで行うものである。

図１２に示すように、処理が開始されると、注文管理サーバ３０は、ウエアラブル注文端末１や調理補助端末３５からの通知の有無を判定する（Ｓ３０１）。通知がない場合（Ｓ３０１：ＮＯ）はＳ３１１へ処理を進める。

通知がある場合（Ｓ３０１：ＹＥＳ）、注文管理サーバ３０は、その通知がウエアラブル注文端末１からの注文通知、調理補助端末３５からの調理完了通知、客卓からの呼び出し通知、ウエアラブル注文端末１からの確認通知のいずれの通知であるかを判定する（Ｓ３０２、Ｓ３０４、Ｓ３０７、Ｓ３０９）。

ウエアラブル注文端末１からの注文通知である場合（Ｓ３０２：ＹＥＳ）、注文管理サーバ３０は、ウエアラブル注文端末１から通知された注文情報を登録するとともに、登録された注文情報とその注文番号とを調理補助端末３５に通知して（Ｓ３０３）、Ｓ３１１へ処理を進める。

調理補助端末３５からの調理完了通知である場合（Ｓ３０４：ＹＥＳ）、注文管理サーバ３０は、注文情報の更新を行い（Ｓ３０５）、その注文情報にかかる調理の完了をウエアラブル注文端末１へ配信することを設定して（Ｓ３０６）、Ｓ３１１へ処理を進める。

客卓からの呼び出し通知である場合（Ｓ３０７：ＹＥＳ）、注文管理サーバ３０は、その客卓からの呼び出しをウエアラブル注文端末１へ配信することを設定して（Ｓ３０８）、Ｓ３１１へ処理を進める。

ウエアラブル注文端末１からの確認通知である場合（Ｓ３０９：ＹＥＳ）、注文管理サーバ３０は、配信すべき情報として設定されているものの中から確認通知のあった情報を削除し（Ｓ３１０）、その情報の配信を行わないように設定して、Ｓ３１１へ処理を進める。

Ｓ３１１において、注文管理サーバ３０は、登録済みの注文情報を確認し（Ｓ３１１）、追加注文の確認が必要な注文情報の有無を判定する（Ｓ３１２）。追加注文の確認が必要な注文情報とは、登録からある程度の時間が経過し、次の注文があると予測される注文情報である。具体的には、登録済みであり、精算前の注文情報の中から、所定の時間が経過したものを追加注文の確認が必要な注文情報とする。さらに、調理完了を示すフラグが付された注文情報という条件での絞り込みを行ってもよい。

追加注文の確認が必要な注文情報がある場合（Ｓ３１２：ＹＥＳ）、注文管理サーバ３０は、追加注文の確認指示をウエアラブル注文端末１へ配信することを設定して（Ｓ３１３）、Ｓ３１４へ処理を進める。追加注文の確認が必要な注文情報がない場合（Ｓ３１２：ＮＯ）は、確認指示の配信を設定することなく、Ｓ３１４へ処理を進める。

Ｓ３１４において、注文管理サーバ３０は、Ｓ３０６、Ｓ３０８、Ｓ３１０、Ｓ３１３などを経て設定された配信すべき情報を、優先して確認すべき順序に並び替える。次いで、注文管理サーバ３０は、並び替えた後の配信すべき情報をウエアラブル注文端末１へ配信する（Ｓ３１５）。

Ｓ３１４における並び替えは、予め設定された規則に従って行われる。具体的には、配信すべき情報の各々について、配信を設定した時刻順に並べるとともに、配信すべき情報の種別に応じた加点を行って、その先後を調整する。例えば、配信すべき情報が、調理完了、追加注文の確認、呼び出しの順に設定されたものとする。そして、予め設定された規則として、呼び出しの方が追加注文の確認より加点がある場合は、調理完了、呼び出し、追加注文の確認の順に並び替えられることとなる。

次いで、注文管理サーバ３０は、所定の操作指示などにより、処理の終了を行うか否かを判定し（Ｓ３１６）、処理を継続させる場合（ＮＯ）はＳ３０１へ処理を戻し、処理を終了する場合（ＹＥＳ）、そのまま処理を終了する。すなわち、処理の継続中は、Ｓ３０１〜Ｓ３１５が繰り返し実行されることとなり、調理完了、追加注文の確認、呼び出しの通知に応じて配信すべき情報が設定されるとともに、追加注文の確認が必要な場合には追加注文の確認も配信すべき情報として設定されることとなる。そして、その設定は、ウエアラブル注文端末１から確認通知を受け付けるまではそのまま継続される。したがって、Ｓ３０１〜Ｓ３１５が繰り返し実行されることで、ウエアラブル注文端末１から確認通知を受け付けるまで順次設定された配信すべき情報がＳ３１４で優先順位順に並び替えられて、Ｓ３１５で配信されることとなる。

以上のように、ウエアラブル注文端末１は、ヘッドマウントディスプレイ１０と、その表示を制御する第１、第２の表示制御手段としての制御部１２１とを備える。制御部１２１は、操作入力に応じた注文受付時には受け付けた注文内容を含む注文画面をヘッドマウントディスプレイ１０に表示するとともに、操作入力に応じた注文受付終了時には注文画面の表示を終了する。また、制御部１２１は、注文画面を表示していない時に、装着者２が確認すべき情報をヘッドマウントディスプレイ１０に表示するとともに、操作入力に応じた確認指示に基づいて確認すべき情報の表示を終了する。したがって、ウエアラブル注文端末１は、装着した店員が業務を行う上で見やすく情報を表示することができる。

なお、図１１、１２の例では、注文管理サーバ３０からウエアラブル注文端末１への配信する情報を、予め優先して確認すべき順序に注文管理サーバ３０で並び替える構成を例示した。しかしながら、注文管理サーバ３０からウエアラブル注文端末１へは配信を設定した時刻順に情報を配信し、Ｓ３１４における並び替えは、配信を受け付けたウエアラブル注文端末１が行うものであってもよい。

なお、本実施形態の制御部１２１や注文管理サーバ３０のＣＰＵが実行するプログラムは、ＲＯＭ等に予め組み込んで提供するように構成してもよい。また、上記プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録されて提供されてもよい。

また、上記プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、上記プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

また、本発明は、上記実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施の形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施の形態にわたる構成要素を適宜組み合わせても良い。

１ ウエアラブル注文端末
２ 装着者
２ａ 頭部
２ｂ 視線
１０ ヘッドマウントディスプレイ
１１ デジタルカメラ
１２ インタフェースボックス
１５ マイク
１７ モニタ表示部
１９ 視線認識用カメラ
３０ 注文管理サーバ
３４ 送受信装置
３５ 調理補助端末
１２１ 制御部
１２２ 音声処理部
１２３ 送受信部
１２４ 情報表示部
１２５ 画像処理部
Ｇ１ 視線マーカー
Ｇ２ 注文表示ウインドウ
Ｇ３ 注文完了アイコン
Ｇ４ インフォメーションウインドウ
Ｇ５ 注文開始アイコン
Ｍ１ メニュー
Ｍ１１、Ｍ１２ 識別コード
Ｔ１〜Ｔ３ タブ
ＮＴ ネットワーク

特開平１１−６５５１０公報

Claims (5)

1. 表示部を有するヘッドマウントディスプレイと、
   装着者の操作入力を受け付ける操作手段と、
   他の機器との通信を行い、前記他の機器から配信された、調理の完了を示す調理完了情報、追加注文の確認を示す追加注文確認情報、客卓からの呼び出しを示す呼出情報のうちの少なくとも一つの配信情報を受信する通信手段と、
   前記操作入力に応じた注文受付時には受け付けた注文内容を含む注文画面を前記表示部に表示するとともに、前記操作入力に応じた注文受付終了時には前記注文画面の表示を終了する第１の表示制御手段と、
   前記配信情報を受信した際に前記第１の表示制御手段が前記注文画面を表示している際には前記配信情報の表示を行うことなく、前記第１の表示制御手段が前記注文画面を表示していない時に、前記配信情報を前記表示部に表示するとともに、前記操作入力に応じた確認指示に基づいて前記配信情報の表示を終了する第２の表示制御手段と、
   を備えることを特徴とするウエアラブル注文端末。
2. 前記装着者の音声を集音する集音手段と、
   前記集音された音声に基づいて前記装着者からの音声コマンドを認識する音声認識手段と、を更に備え、
   前記操作手段は、前記認識された音声コマンドに応じた操作入力を受け付けることを特徴とする請求項１に記載のウエアラブル注文端末。
3. 前記装着者の視線位置を検出する視線検出手段を更に備え、
   前記操作手段は、前記検出された視線位置に応じた操作入力を受け付けることを特徴とする請求項１に記載のウエアラブル注文端末。
4. 前記第２の表示制御手段は、前記配信情報の表示を、当該配信情報の受信順又は予め設定された規則に従った優先順位順に並び替えて表示することを特徴とする請求項１乃至３のいずれか一項に記載のウエアラブル注文端末。
5. 表示部を有するヘッドマウントディスプレイと、装着者の操作入力を受け付ける操作手段と、他の機器との通信を行い、前記他の機器から配信された、調理の完了を示す調理完了情報、追加注文の確認を示す追加注文確認情報、客卓からの呼び出しを示す呼出情報のうちの少なくとも一つの配信情報を受信する通信手段とを備えるウエアラブル注文端末のコンピュータに、
   前記操作入力に応じた注文受付時には受け付けた注文内容を含む注文画面を前記表示部に表示するとともに、前記操作入力に応じた注文受付終了時には前記注文画面の表示を終了するステップと、
   前記配信情報を受信した際に前記注文画面を表示している際には前記配信情報の表示を行うことなく、前記注文画面を表示していない時に、前記配信情報を前記表示部に表示するとともに、前記操作入力に応じた確認指示に基づいて前記配信情報の表示を終了するステップと、
   を実行させることを特徴とするプログラム。

Images