JP2005174251A - Order processing device, order processing method, order processing program, order processing program recording medium and order processing system - Google Patents
Order processing device, order processing method, order processing program, order processing program recording medium and order processing system Download PDFInfo
- Publication number
- JP2005174251A JP2005174251A JP2003417027A JP2003417027A JP2005174251A JP 2005174251 A JP2005174251 A JP 2005174251A JP 2003417027 A JP2003417027 A JP 2003417027A JP 2003417027 A JP2003417027 A JP 2003417027A JP 2005174251 A JP2005174251 A JP 2005174251A
- Authority
- JP
- Japan
- Prior art keywords
- order information
- order
- repeated
- voice
- order processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Cash Registers Or Receiving Machines (AREA)
Abstract
Description
本発明は、レストランや料理店、食堂などの飲食店において、客の注文に従った注文情報を処理するオーダー処理装置、オーダー処理方法、オーダー処理プログラム、オーダー処理プログラム記録媒体及びオーダー処理システムに関する。 The present invention relates to an order processing apparatus, an order processing method, an order processing program, an order processing program recording medium, and an order processing system that process order information according to customer orders in restaurants, restaurants, restaurants, and other restaurants.
従来、レストランなどでは、給仕人が客の注文メニューを端末に入力し、客の注文が終わった後、客の注文を確認するために、注文メニューを繰り返し読み上げる(注文メニューを復唱する)。特開2002−312451の従来技術では、注文メニューを復唱する際に、入力済み注文メニュー(オーダー)を表示させていた。 Conventionally, in a restaurant or the like, a waiter inputs a customer's order menu into the terminal, and after the customer's order is completed, the order menu is repeatedly read out (repeated the order menu) to confirm the customer's order. In the prior art disclosed in Japanese Patent Laid-Open No. 2002-312451, an input order menu (order) is displayed when the order menu is repeated.
また、特開2002−312451や特開2003−122966の従来技術では、音声認識を利用して客の注文を入力していたが、注文メニュー確認のための復唱の音声を認識する機能はなかった。
しかしながら、従来の技術では、注文メニューが非常に多い時に、それら注文メニューの一覧表示を見ながら復唱を行う場合、どの注文メニューを復唱したかが分かり難く、一部の注文メニューを読み飛ばしてしまうという問題点を有している。 However, with the conventional technology, when there are many order menus, if you repeat while looking at the list display of those order menus, it is difficult to tell which order menu was repeated, and some order menus are skipped. Has the problem.
例えば、図16には、従来のオーダー処理端末装置において、入力された注文情報のリストが表示されている状態を示す。図16のような場合、給仕人は、注文メニューを復唱する際に、例えば、Bセット、Cセット、和風ハンバーグセット、サーロインステーキセットと読み上げ、ビーフカレーライスを読み飛ばして、カツ丼、...、チーズケーキと読んでしまうことがある。通常、オーダー処理端末装置の表示画面は小さく見づらいので、そのようなミスが起こりやすい。 For example, FIG. 16 shows a state in which a list of input order information is displayed in a conventional order processing terminal device. In the case of FIG. 16, when the waiter repeats the order menu, for example, he reads “B set, C set, Japanese style hamburger set, sirloin steak set”, skips the beef curry rice, cuts katsu,. . . , Sometimes read as cheesecake. Usually, since the display screen of the order processing terminal device is small and difficult to see, such a mistake is likely to occur.
なお、注文メニューを読み上げた後、キー操作やタッチパネル入力によって、その注文メニューをマークするという手法が容易に類推されるが、そのような手法では端末装置の操作がわずらわしい。 It should be noted that after reading out the order menu, a method of marking the order menu by key operation or touch panel input can be easily inferred, but such a method is troublesome to operate the terminal device.
本発明は、上記の課題を解決するためになされたものであって、例えば注文メニューが非常に多い場合の給仕人による注文メニューの読み飛ばしを減少させることができ、かつ、使い勝手が良好なオーダー処理装置、オーダー処理方法、オーダー処理プログラム、オーダー処理プログラム記録媒体及びオーダー処理システムの提供を目的としている。 The present invention has been made to solve the above-described problem, and can reduce skipping of order menus by a waiter, for example, when there are very many order menus, and is an order that is easy to use. An object is to provide a processing device, an order processing method, an order processing program, an order processing program recording medium, and an order processing system.
上記課題を解決する発明のポイントをまとめると
・給仕人に入力済み注文情報(注文メニューとその数量)の一覧を表示して示し、注文情報の復唱音声を認識し、認識した注文情報を復唱済みとし、この復唱済みの注文情報と復唱されていない注文情報とを識別できるように出力データを作成すること
である。具体的には、本発明の構成とその作用・効果は、以下のようになる。
Summarizing the points of the invention that solves the above-mentioned problems-A list of entered order information (order menu and its quantity) is displayed and shown to the waiter, the repetitive voice of the order information is recognized, and the recognized order information has been repeated The output data is created so that the order information that has been repeated and the order information that has not been repeated can be identified. Specifically, the configuration of the present invention and the operations and effects thereof are as follows.
本発明のオーダー処理装置は、入力された注文情報の少なくとも一つからなる注文情報リストを作成するリスト作成手段と、音声を認識する音声認識手段と、前記注文情報リスト中の注文情報のうち、この注文情報リスト作成後の音声入力についての前記音声認識手段による音声認識結果に相当する注文情報を復唱済みとし、この復唱済みの注文情報と復唱されていない注文情報とを互いに識別できるような出力用データを作成する出力用データ作成手段とを備えたことを特徴としている。 The order processing apparatus of the present invention includes: a list creation unit that creates an order information list including at least one of the input order information; a voice recognition unit that recognizes voice; and the order information in the order information list, The order information corresponding to the voice recognition result by the voice recognition means for the voice input after the creation of the order information list has been repeated and the order information that has been repeated and the order information that has not been repeated can be distinguished from each other. And output data creation means for creating business data.
上記の構成によれば、例えばレストランの給仕人が本装置を使用する状況において、給仕人により注文メニュー(注文情報)が復唱された場合に、音声認識手段がその音声を認識し、出力用データ作成手段が音声認識結果に相当する注文情報を復唱済みとし、復唱済みの注文情報と復唱されていない注文情報とを識別できるような出力用データ、例えば表示用データや音声データを作成する。したがって、給仕人は、前記出力用データに基づく例えば表示や音声により復唱済みの注文メニューと復唱していない注文メニューとを容易に識別することができる。この結果、例えば注文メニューが非常に多い場合の給仕人による注文メニューの読み飛ばしを減少させ、かつ端末装置の操作のわずらわしさを軽減することができる。 According to the above configuration, for example, in a situation where a restaurant waiter uses the apparatus, when the order menu (order information) is repeated by the waiter, the voice recognition means recognizes the voice and outputs the data. The creation means sets the order information corresponding to the voice recognition result as repeated, and creates output data such as display data and voice data that can identify the repeated order information and the non-returned order information. Therefore, the waiter can easily identify the order menu that has been repeated and the order menu that has not been repeated, for example, by display or voice based on the output data. As a result, for example, it is possible to reduce skipping of the order menu by the waiter when the order menu is very large, and to reduce the troublesome operation of the terminal device.
上記のオーダー処理装置において、前記出力用データ作成手段は、前記リスト作成手段にて作成された注文情報リストの表示領域とは異なる表示領域に復唱されていない注文情報を表示するための表示用データを前記出力用データとして作成することを特徴としている。 In the order processing apparatus, the output data creation means displays data for displaying order information that has not been repeated in a display area different from the display area of the order information list created by the list creation means. Is created as the output data.
上記の構成によれば、前記リスト作成手段にて作成された注文情報リストの表示領域とは異なる表示領域に、復唱されていない注文情報を表示するための表示用データを作成するので、この表示用データに基づく表示が行われた場合に、給仕人は次に復唱すべき注文情報が分かりやすい。 According to the above configuration, the display data for displaying the order information that has not been repeated is created in a display area different from the display area of the order information list created by the list creating means. When the display based on the business data is performed, the waiter can easily understand the order information to be repeated next.
上記のオーダー処理装置において、前記出力用データ作成手段は、音声合成手段と音声再生手段とを備え、復唱されていない注文情報を音声合成手段にて音声合成し、音声再生手段にて音声として再生することを特徴としている。 In the order processing apparatus, the output data creation means includes voice synthesis means and voice reproduction means, and the order information that has not been repeated is synthesized by the voice synthesis means and reproduced as voice by the voice reproduction means. It is characterized by doing.
上記の構成によれば、復唱されていない注文情報を音声合成手段にて音声合成し、音声再生手段にて音声として再生するので、給仕人は次に復唱すべき注文情報が分かりやすい。また、給仕人が、例えば漢字の読み方が分からないような注文メニューを誤った読み方で発音してしまうといった不都合を防止することができる。 According to the above configuration, since the order information that has not been read back is voice-synthesized by the voice synthesizer and reproduced as voice by the voice synthesizer, the waiter can easily understand the order information to be repeated next. In addition, it is possible to prevent inconvenience that the waiter pronounces an order menu that does not know how to read kanji in an incorrect way.
上記のオーダー処理装置において、前記音声認識手段は、音声認識の対象となる語彙を、現在表示されている注文情報に係る語彙に限定することを特徴としている。 In the above order processing apparatus, the voice recognition means limits the vocabulary to be recognized by the voice recognition to the vocabulary related to the currently displayed order information.
ここで、注文情報に係る語彙とは、注文情報の簡略化表現なども含んでいる。例えば、「チョコレートパフェが3」という注文情報が表示されている場合に、注文情報に係る語彙は、「チョコパ」、「チョコレートパフェ」、「さん」と「みっつ」などを含んでいる。 Here, the vocabulary related to order information includes a simplified expression of order information. For example, when the order information “chocolate parfait is 3” is displayed, the vocabulary related to the order information includes “chocopa”, “chocolate parfait”, “san”, “mittsu”, and the like.
上記構成によれば、音声認識の対象となる語彙を、現在表示されている注文情報に係る語彙に限定するので、音声認識の処理の負担を軽減でき、かつ例えば全メニューを認識の対象としたようなオーダー入力装置よりも認識性能を向上させることができる。 According to the above configuration, the vocabulary subject to speech recognition is limited to the vocabulary related to the currently displayed order information, so the burden of speech recognition processing can be reduced, and for example, all menus are subject to recognition. Recognition performance can be improved as compared with such an order input device.
上記のオーダー処理装置において、前記出力用データ作成手段は、復唱済みの注文情報の表示領域と復唱されていない注文情報の表示領域との背景色が互いに異なる背景色となる表示用データを前記出力用データとして作成することを特徴としている。 In the order processing apparatus, the output data creation means outputs the display data in which the background colors of the display area of the order information that has been repeated and the display area of the order information that has not been repeated are different from each other. It is characterized in that it is created as business data.
上記の構成によれば、上記表示用データに基づく表示が行われた場合に、復唱済みの注文情報に係る表示領域と復唱されていない注文情報の表示領域との背景色が互いに異なる背景色として表示されるので、復唱済みの注文情報が分かりやすく、給仕人による注文メニューの読み飛ばしを減少させることができる。 According to the above configuration, when display based on the display data is performed, the background color of the display area related to the repeated order information and the display area of the order information not repeated are different background colors. Since the displayed order information is easy to understand, it is possible to reduce skipping of the order menu by the waiter.
また、上記の発明のオーダー処理装置において、前記出力用データ作成手段は、復唱されていない注文情報を表示するための表示用データを作成する一方、復唱済みの注文情報の表示用データを作成しないことにより、両注文情報が互いに識別可能となる出力用データを作成することを特徴としている。 In the order processing apparatus of the above invention, the output data creation means creates display data for displaying order information that has not been repeated, but does not create display data for order information that has been repeated. In this way, output data is created in which both order information can be distinguished from each other.
上記構成によれば、復唱されていない注文情報を表示するための表示用データを作成し、復唱済みの注文情報の表示用データを作成しないので、復唱していない注文情報が分かりやすく、給仕人による注文メニューの読み飛ばしを減少させることができる。 According to the above configuration, the display data for displaying the order information that has not been repeated is created, and the display data for the order information that has not been repeated is not created. It is possible to reduce skipping of order menus.
上記のオーダー処理装置において、前記出力用データ作成手段は、復唱済みの注文情報を表示する領域と復唱されていない注文情報を表示する領域とを分割して配置した表示用データを前記出力用データとして作成することを特徴としている。 In the above order processing apparatus, the output data creation means includes display data in which an area for displaying repeated order information and an area for displaying order information that has not been repeated are divided into the output data. It is characterized by creating as.
上記の構成によれば、前記表示用データに基づく表示が行われた場合に、復唱済みの注文情報を表示する領域と復唱されていない注文情報を表示する領域とが分割して配置されるので、復唱していない注文情報と復唱済みの注文情報の違いが分かりやすく、給仕人による注文メニューの読み飛ばしを減少させることができる。 According to the above configuration, when the display based on the display data is performed, the area for displaying the order information that has been repeated and the area for displaying the order information that has not been repeated are arranged separately. The difference between the order information that has not been repeated and the order information that has been repeated can be easily understood, and skipping of the order menu by the waiter can be reduced.
上記のオーダー処理装置において、前記出力用データ作成手段は、復唱済みの注文情報と復唱していない注文情報とを異なる表示形態にて表示するための表示用データを前記出力用データとして作成することを特徴としている。 In the order processing apparatus, the output data creation means creates display data for displaying the order information that has been repeated and the order information that has not been repeated in different display forms as the output data. It is characterized by.
上記の構成によれば、復唱済みの注文情報と復唱していない注文情報とを異なる表示形態、例えば異なるフォントサイズ、異なる色、異なる背景色、異なる表示領域等にて表示することができるので、復唱していない注文情報と復唱済みの注文情報の違いが分かりやすく、給仕人による注文メニューの読み飛ばしを減少させることができる。 According to the above configuration, the order information that has been repeated and the order information that has not been repeated can be displayed in different display forms, such as different font sizes, different colors, different background colors, different display areas, etc. The difference between the order information that has not been repeated and the order information that has been repeated is easy to understand, and skipping of the order menu by the waiter can be reduced.
上記の発明のオーダー処理装置は、前記注文情報リストを表示する表示手段を備えていることを特徴としている。 The order processing apparatus according to the invention is characterized by comprising display means for displaying the order information list.
上記の構成によれば、前記注文情報リストを表示する表示手段を備えているので、給仕人は復唱すべき注文情報が分かりやすい。 According to said structure, since the display means which displays the said order information list is provided, the waiter can understand easily the order information which should be repeated.
また、表示用データを作成することを特徴とする上記の発明のオーダー処理装置において、前記注文情報リストに加えて、前記表示用データを表示する表示手段を備えていることを特徴としている。 The order processing apparatus according to the invention described above is characterized in that display data is created, further comprising display means for displaying the display data in addition to the order information list.
上記の構成によれば、前記注文情報リストに加えて、前記表示用データを表示する表示手段を備えているので、給仕人による注文メニューの読み飛ばしを減少させ、かつ端末装置の操作のわずらわしさを軽減することができる。 According to the above configuration, since the display means for displaying the display data in addition to the order information list is provided, it is possible to reduce skipping of the order menu by the waiter, and troublesome operation of the terminal device. Can be reduced.
本発明のオーダー処理システムは、ネットワークサーバとしての音声認識装置と、このネットワークサーバとネットワークを介して接続されたネットワーククライアントしての少なくとも1台のオーダー処理装置とを備え、前記オーダー処理装置は、少なくとも音声による入力が可能な入力手段と、入力された注文情報の少なくとも一つからなる注文情報リストを作成するリスト作成手段と、前記ネットワークを介して、前記注文情報リスト、および前記音声入力手段より入力された音声を前記音声認識装置に送信するとともに、前記音声認識装置から送信された音声認識結果を受信する送受信手段と、前記注文情報リスト中の注文情報のうち、受信した前記音声認識結果に相当する注文情報を復唱済みとし、この復唱済みの注文情報と復唱されていない注文情報とを互いに識別できるような出力用データを作成する出力用データ作成手段とを備え、前記音声認識装置は、受信した前記音声を認識する音声認識手段と、前記ネットワークを介して、前記オーダー処理装置から送信された前記注文情報リストおよび音声を受信するとともに、前記音声認識手段による音声認識結果を前記オーダー処理装置へ送信する送受信手段とを備えていることを特徴としている。 The order processing system of the present invention comprises a voice recognition device as a network server, and at least one order processing device as a network client connected to the network server via a network, the order processing device comprising: Input means capable of inputting at least by voice, list creating means for creating an order information list including at least one of the inputted order information, the order information list and the voice input means via the network Transmitting input speech to the speech recognition device and transmitting / receiving means for receiving the speech recognition result transmitted from the speech recognition device; among the order information in the order information list, the received speech recognition result The corresponding order information has been repeated, and this repeated order information and the repetition Output data creation means for creating output data that can be distinguished from each other order information, the voice recognition device via the network, voice recognition means for recognizing the received voice And receiving and receiving the order information list and voice transmitted from the order processing apparatus, and transmitting / receiving means for transmitting a voice recognition result by the voice recognition means to the order processing apparatus.
上記の構成によれば、例えばレストランの給仕人が本システムを使用する状況において、給仕人により注文メニュー(注文情報)が復唱された場合に、音声認識手段がその復唱された注文情報を認識し、出力用データ作成手段が音声認識結果に相当する注文情報を復唱済みとし、復唱済みの注文情報と復唱されていない注文情報を識別できるような出力用データを作成する。したがって、給仕人は、前記出力用データに基づく例えば表示や音声により復唱済みの注文メニューと復唱していない注文メニューとを容易に識別することができる。この結果、例えば注文メニューが非常に多い場合の給仕人による注文メニューの読み飛ばしを減少させ、かつ端末装置の操作のわずらわしさを軽減することができる。また、音声認識処理をサーバ側で行うので、オーダー処理装置の負担を軽減することができる。 According to the above configuration, for example, in a situation where a restaurant waiter uses this system, when the order menu (order information) is read back by the waiter, the voice recognition means recognizes the read back order information. Then, the output data creation means sets the order information corresponding to the voice recognition result as repeated, and creates output data that can identify the order information that has been repeated and the order information that has not been repeated. Therefore, the waiter can easily identify the order menu that has been repeated and the order menu that has not been repeated, for example, by display or voice based on the output data. As a result, for example, it is possible to reduce skipping of the order menu by the waiter when the order menu is very large, and to reduce the troublesome operation of the terminal device. Moreover, since the voice recognition process is performed on the server side, the burden on the order processing apparatus can be reduced.
発明の効果をまとめると以下のようになる。
・図6のように次に復唱すべき注文情報(Bセット)を表示することによって、あるいは、それを読み上げる処理によって、給仕人は次に復唱すべき注文情報がわかりやすくなる。
・図8あるいは図9のように復唱済みの注文情報と復唱していない注文情報の表示領域の背景色を変えることによって、給仕人は既に復唱した注文情報とこれから復唱すべき注文情報が区別しやすい。
・復唱されていない、かつ表示されている注文情報に認識対象となる語彙を限定するので、音声認識処理の負担を軽減でき、かつ全メニューを認識対象とするよりも認識性能を向上させることができる。
The effects of the invention are summarized as follows.
By displaying the order information (B set) to be repeated next as shown in FIG. 6 or by reading out the order information, the waiter can easily understand the order information to be repeated next.
-By changing the background color of the display area of the order information that has been repeated and the order information that has not been repeated as shown in FIG. 8 or 9, the waiter can distinguish between the order information that has already been repeated and the order information that should be repeated. Cheap.
・ Because the vocabulary to be recognized is limited to the order information that is not repeated and displayed, the burden of voice recognition processing can be reduced and the recognition performance can be improved compared to the case where all menus are recognized. it can.
具体的には、本発明のオーダー処理装置は、リスト作成手段と、音声認識手段と、注文情報リスト中の注文情報のうち、この注文情報リスト作成後の音声入力についての前記音声認識手段による音声認識結果に相当する注文情報を復唱済みとし、この復唱済みの注文情報と復唱されていない注文情報とを互いに識別できるような出力用データを作成する出力用データ作成手段とを備えた構成である。 Specifically, the order processing apparatus according to the present invention includes a list creating unit, a voice recognizing unit, and a voice by the voice recognizing unit for voice input after the order information list is created among the order information in the order information list. The order information corresponding to the recognition result has been repeated, and the output data creation means for creating output data that can distinguish the order information that has been repeated and the order information that has not been repeated from each other is provided. .
これにより、給仕人は、前記出力用データに基づく例えば表示や音声により復唱済みの注文メニューと復唱していない注文メニューとを容易に識別することができる。この結果、例えば注文メニューが非常に多い場合の給仕人による注文メニューの読み飛ばしを減少させ、かつ端末装置の操作のわずらわしさを軽減することができる。 Thereby, the waiter can easily identify the order menu that has been repeated and the order menu that has not been repeated, for example, by display or voice based on the output data. As a result, for example, it is possible to reduce skipping of the order menu by the waiter when the order menu is very large, and to reduce the troublesome operation of the terminal device.
以下添付図面を参照して本発明の実施の形態を説明する。 Embodiments of the present invention will be described below with reference to the accompanying drawings.
(オーダー処理装置の外観)
まず、図3を用いて、本発明の実施例におけるオーダー処理装置H1の外観を説明する。ここでは、本発明が表示機能と音声出力機能を有するオーダー処理装置に適用されて実施されている。図3のオーダー処理装置H1は、スピーカH2、表示装置H3、数量を入力する、あるいは注文メニューを選択するキーH4、音声入力のON/OFFを切り替える音声入力ボタンH5及びマイクH6が配置されている。この図の例では、マイクH6は内蔵されているが、外付けされてもよい。マイクを外付けする場合に、マイクには送信器を設ける一方、オーダー処理装置H1には受信器を設けて,両者を無線で接続してもよい。また、表示装置H3は、注文メニューなどを表示する機能を有し、タッチパネルとそのコントローラで構成される。
(Appearance of order processing equipment)
First, the external appearance of the order processing apparatus H1 in the embodiment of the present invention will be described with reference to FIG. Here, the present invention is applied to an order processing apparatus having a display function and an audio output function. 3 includes a speaker H2, a display device H3, a key H4 for inputting a quantity or selecting an order menu, a voice input button H5 for switching on / off of voice input, and a microphone H6. . In the example of this figure, the microphone H6 is built in, but may be externally attached. When the microphone is externally attached, the microphone may be provided with a transmitter, while the order processing device H1 may be provided with a receiver, and both may be connected wirelessly. The display device H3 has a function of displaying an order menu and the like, and includes a touch panel and its controller.
(オーダー処理装置のハードウェア構成)
ここで、図2を用いて、本発明の実施例におけるオーダー処理装置H1のハードウェア構成を説明する。図2に示すオーダー処理装置H1は、一般には、1台のサーバH105に対して複数台が設けられる。すなわち、オーダー処理装置H1及びサーバH105は、相互に通信可能なオーダーデータ処理システムとして構成可能である。
(Hardware configuration of order processing equipment)
Here, the hardware configuration of the order processing apparatus H1 in the embodiment of the present invention will be described with reference to FIG. In general, a plurality of order processing apparatuses H1 shown in FIG. 2 are provided for one server H105. That is, the order processing device H1 and the server H105 can be configured as an order data processing system that can communicate with each other.
図2に示すオーダー処理装置H1は、スピーカH2、表示装置H3、キーH4、音声入力ボタンH5、マイクH6、タッチキーH100、サウンドカードH101、制御部H102、記憶部H103及びネットワークIFカードH104を備える。 The order processing device H1 shown in FIG. 2 includes a speaker H2, a display device H3, a key H4, a voice input button H5, a microphone H6, a touch key H100, a sound card H101, a control unit H102, a storage unit H103, and a network IF card H104. .
制御部102は、プロセッサなどから構成され、例えばROMが記憶している制御プログラムに従って動作し、このオーダー処理装置H1全体の動作を制御する。記憶部(記憶手段)H103は、RAMあるいはROMなどの記録媒体から構成され、入力指示、入力データ、一時データ、処理状態を表すフラグ、注文情報(入力手段より入力された注文情報)及び制御プログラムを記憶する。 The control unit 102 includes a processor and the like, and operates according to a control program stored in the ROM, for example, and controls the entire operation of the order processing apparatus H1. A storage unit (storage unit) H103 is configured by a recording medium such as a RAM or a ROM, and includes an input instruction, input data, temporary data, a flag indicating a processing state, order information (order information input from the input unit), and a control program. Remember.
スピーカH2は、サウンドカードH101から供給されたアナログ音声信号を出力する。表示装置H3は、例えば注文メニューなどを表示する機能を有し、液晶パネルや、表示ドライバーなどから構成される。キーH4は、キー及びキーボードのコントローラなどで構成され、装置の使用者である給仕人が注文メニューを選択する、あるいは注文数を入力するためのものである。音声入力ボタンH5は、マイクH6からの音声データの取り込みの開始または終了など、音声入力のON/OFFを切り替えるためのスイッチである。 The speaker H2 outputs an analog audio signal supplied from the sound card H101. The display device H3 has a function of displaying an order menu, for example, and includes a liquid crystal panel, a display driver, and the like. The key H4 includes a key and a keyboard controller, and is used by a waiter who is a user of the apparatus to select an order menu or input an order quantity. The voice input button H5 is a switch for switching ON / OFF of voice input, such as start or end of taking in voice data from the microphone H6.
マイクH6は、給仕人からの音声信号を集音し、サウンドカードH101に供給する。サウンドカードH101は、D/A及びA/D変換器などで構成され、マイクH6により集音されたアナログ音声信号をデジタル化して記憶部H103に保存する処理及び、デジタル音声信号をアナログ化してスピーカH2に供給する処理を行う。 The microphone H6 collects an audio signal from the waiter and supplies it to the sound card H101. The sound card H101 is composed of a D / A, an A / D converter, and the like, digitizes an analog audio signal collected by the microphone H6 and stores it in the storage unit H103, and converts the digital audio signal into an analog speaker. Processing to supply to H2 is performed.
タッチキーH100は、タッチパネルとそのコントローラなどで構成され、上記給仕人が押圧操作して入力を行うためのものである。 The touch key H100 includes a touch panel and a controller thereof, and is used by the waiter to perform a pressing operation.
ネットワークIFカードH104は、無線LANなどで構成され、サーバH105との間で、注文情報や音声信号データを送受信する。 The network IF card H104 is configured by a wireless LAN or the like, and transmits / receives order information and audio signal data to / from the server H105.
(オーダー処理装置の機能構成)
ここで、図1のブロック図を用いて、本実施の形態におけるオーダー処理装置H1の機能構成を説明する。このオーダー処理装置H1は、注文情報入力部F1、注文情報リスト作成部F2、音声入力部F4、音声認識部F5、注文情報管理部F6、出力用データ作成部F7、出力制御部F8及び出力部F9を備えている。
(Functional configuration of order processing equipment)
Here, the functional configuration of the order processing apparatus H1 in the present embodiment will be described using the block diagram of FIG. The order processing apparatus H1 includes an order information input unit F1, an order information list creation unit F2, a voice input unit F4, a voice recognition unit F5, an order information management unit F6, an output data creation unit F7, an output control unit F8, and an output unit. F9 is provided.
注文情報入力部(入力手段)F1は、キーH4及び(あるいは)タッチキーH100によって構成され、給仕人の操作により、客から注文されたメニュー名とその注文数からなる注文情報が入力される。注文情報リスト作成部F2は、制御部H102及びこの制御部H102が実行するプログラムによって構成され、注文情報入力部F1にて入力された注文情報データを記憶部H103に記憶し、注文情報のリスト(以下、注文情報リストと称する)を作成して、記憶部H103に保存する。なお、注文情報は、下記のマイクH6を使用して音声により入力する構成とすることも可能である。 The order information input unit (input means) F1 includes a key H4 and / or a touch key H100, and the order information including the menu name ordered by the customer and the number of orders is input by the operation of the customer. The order information list creation unit F2 includes a control unit H102 and a program executed by the control unit H102, stores the order information data input by the order information input unit F1 in the storage unit H103, and stores an order information list ( (Hereinafter referred to as an order information list) is created and stored in the storage unit H103. The order information may be input by voice using the following microphone H6.
音声入力部F4は、マイクH6、音声入力ボタンH5及びサウンドカードH101によって構成され、集音したアナログの音声信号をデジタル化して、記憶部H103に保存する。音声認識部F5は、制御部H102及びこの制御部H102が実行するプログラムによって構成され、音声入力部F4にて入力された音声を認識し、認識結果を文字列として出力する。ただし、音声認識部F5が、制御部H102及びこの制御部H102が実行するプログラムによって構成される必要はなく、音声認識LSIを用いて構成しても良い。 The voice input unit F4 includes a microphone H6, a voice input button H5, and a sound card H101, digitizes the collected analog voice signal, and stores it in the storage unit H103. The voice recognition unit F5 includes a control unit H102 and a program executed by the control unit H102, recognizes the voice input by the voice input unit F4, and outputs the recognition result as a character string. However, the voice recognition unit F5 does not have to be configured by the control unit H102 and a program executed by the control unit H102, and may be configured by using a voice recognition LSI.
注文情報管理部F6は、制御部H102及びこの制御部H102が実行するプログラムによって構成され、注文情報リストに含まれる注文情報のうち、音声認識部F5での認識結果に相当する注文情報を復唱済みとする。 The order information management unit F6 is configured by the control unit H102 and a program executed by the control unit H102. Of the order information included in the order information list, the order information corresponding to the recognition result in the voice recognition unit F5 has been repeated. And
出力用データ作成部F7は、制御部H102及びこの制御部H102が実行するプログラムによって構成され、注文情報管理部F6にて復唱済みとされた注文情報と復唱済みとされていない注文情報とを識別できるような出力用データを作成する。出力部F9は、表示装置H3からなる表示部F10、サウンドカードH101及びスピーカH2からなる音声出力部F11、及びネットワークIFカードH104からなるネットワーク出力部F12を備えている。 The output data creation unit F7 includes a control unit H102 and a program executed by the control unit H102, and identifies order information that has been repeated by the order information management unit F6 and order information that has not been repeated. Create output data that you can do. The output unit F9 includes a display unit F10 including a display device H3, an audio output unit F11 including a sound card H101 and a speaker H2, and a network output unit F12 including a network IF card H104.
出力制御部F8は、制御部H102及びこの制御部H102が実行するプログラムによって構成され、出力用データ作成部F7で作成した出力データを、その種類に応じて、出力部F9の適合するデバイスへ出力する。具体的には、出力データの種類が画像であるなら表示装置H3(表示部F10)へ出力し、出力データの種類が音声であるならサウンドカードH101(音声出力部F11)へ出力し、出力データの種類が通信データであるならネットワークIFカードH104(ネットワーク出力部F12)へ出力する。 The output control unit F8 includes a control unit H102 and a program executed by the control unit H102, and outputs the output data created by the output data creation unit F7 to a suitable device of the output unit F9 according to the type. To do. Specifically, if the type of output data is an image, it is output to the display device H3 (display unit F10), and if the type of output data is sound, it is output to the sound card H101 (audio output unit F11). Is the communication data, it is output to the network IF card H104 (network output unit F12).
(オーダー処理装置の動作)
ここで、図4のフローチャートを用いて、本実施の形態におけるオーダー処理装置H1の動作を説明する。
(Operation of order processing equipment)
Here, the operation of the order processing apparatus H1 in the present embodiment will be described using the flowchart of FIG.
ステップS1(以下ステップSをSと略記する)では、給仕人のキーH4あるいはタッチキーH100(注文情報入力部F1)の操作によって、客から注文されたメニュー名とその注文数からなる注文情報が入力され、その注文情報が記憶部H103に保存される。図5は、注文情報の具体的な例を示す。以後の具体例を用いた処理の説明では、図5のような注文情報が入力された場合について説明する。 In step S1 (hereinafter, step S is abbreviated as S), the order information including the name of the menu ordered by the customer and the number of orders by the operation of the key H4 of the waiter or the touch key H100 (order information input unit F1) is displayed. The order information is input and stored in the storage unit H103. FIG. 5 shows a specific example of order information. In the following description of processing using a specific example, a case where order information as shown in FIG. 5 is input will be described.
S2では、注文情報リスト作成部F2がS1にて記憶した注文情報のリストを作成する。このとき、リストの注文情報の順序はどのようなものでも良いが、例えば注文情報を入力した順番に並べると良い。以降、リストの注文情報は、入力した順番に並べられているものとして説明する。 In S2, the order information list creation unit F2 creates a list of order information stored in S1. At this time, the order information in the list may be in any order. For example, the order information may be arranged in the order in which the order information is input. Hereinafter, description will be made assuming that the order information in the list is arranged in the input order.
S3では、注文情報管理部F6が、S2にて作成したリストの各注文情報について、復唱をされたかどうかを示す復唱済みフラグと対応付ける。給仕人は、注文情報を入力した後、入力ミスおよび入力忘れの有無を確認するため、入力した注文情報を復唱する。そこで、注文情報について復唱済みフラグにより復唱されたものとされていないものとを区別する。復唱済みフラグは、TRUEであるときにその注文情報が復唱されたことを示し,FALSEであるときにその注文情報が復唱されていないことを示す。ただし,このS3の段階では,復唱済みフラグの初期化のため、復唱済みフラグはすべてFALSEに設定される。 In S3, the order information management unit F6 associates each order information in the list created in S2 with a repeated flag indicating whether or not the repetition has been performed. After inputting the order information, the waiter repeats the input order information in order to check whether there is an input error and forgetting to input. Therefore, the order information is distinguished from those that have not been repeated by the repeated flag. The repeated flag indicates that the order information has been repeated when it is TRUE, and indicates that the order information has not been repeated when it is FALSE. However, at the stage of S3, all the repeated flags are set to FALSE in order to initialize the repeated flags.
S4では、まず、S2にて作成した注文情報のリストを表示部F10へ出力するための表示用データを出力用データ作成部F7が作成する。このとき、各注文情報が表示されているかどうかを判別するための注文情報表示フラグを、各注文情報に対応付けて作成する。ただし、注文情報表示フラグは、TRUEなら対応する注文情報が表示されていることを示し、FALSEなら表示されていないということを示す。 In S4, first, the output data creation unit F7 creates display data for outputting the order information list created in S2 to the display unit F10. At this time, an order information display flag for determining whether or not each order information is displayed is created in association with each order information. However, the order information display flag indicates that the corresponding order information is displayed if TRUE, and indicates that it is not displayed if FALSE.
図6は、図5のような注文情報が入力された時、本実施例にて表示される例であるが、画面サイズの制限が原因で “クリームあんみつ”と“チーズケーキ”が表示されていない。その場合、“クリームあんみつ” と“チーズケーキ”の注文情報に対応した注文情報表示フラグがFALSEになっている。ただし、キー4あるいはタッチキー5により下スクロールすると、図7のように“クリームあんみつ”も表示される。図7のような場合、“クリームあんみつ”の注文情報に対応した注文情報表示フラグがTRUEになり、“Bセット”に対応した注文情報表示フラグがFALSEになる。
FIG. 6 is an example displayed in the present embodiment when order information as shown in FIG. 5 is input, but “Cream Anmitsu” and “Cheesecake” are displayed due to screen size limitations. Absent. In that case, the order information display flag corresponding to the order information of “Cream Anmitsu” and “Cheesecake” is FALSE. However, if the key 4 or the
次に、S4では、復唱済みフラグがFALSEである注文情報の中で、リストの最前列にある注文情報の文字列を、リストの表示領域とは異なる領域に表示させるための表示用データを作成する。図6は、図5のような注文情報が入力された時に、本実施例にて表示される一例である。図6では、復唱済みフラグがFALSEであり、かつ、リストの最前列にある“Bセット(注文数1)”に係るフォントが拡大されて表示されている。ただし、フォントを拡大せずに、通常のフォントと同じように表示しても良い。勿論、フォントだけでなく、メニューに対応付けた画像をあらかじめ記憶部H103に保存しておき、その画像を表示しても良い。 Next, in S4, the display data for displaying the order information character string in the front row of the list in the order information in which the repeated flag is FALSE is displayed in a different area from the display area of the list. To do. FIG. 6 is an example displayed in the present embodiment when the order information as shown in FIG. 5 is input. In FIG. 6, the repetitive flag is FALSE, and the font related to “B set (order number 1)” in the front row of the list is enlarged and displayed. However, it may be displayed in the same way as a normal font without enlarging the font. Of course, not only the font but also an image associated with the menu may be stored in the storage unit H103 in advance and displayed.
さらに、S4では、復唱済みフラグがFALSEである注文情報において、リストの最前列にある注文情報の音声データを作成する。ただし、メニュー名や数量を読み上げた音声をあらかじめ記憶部H103に保存しておくか、あるいは、テキスト音声合成エンジンを搭載しておく必要がある。 Further, in S4, voice data of order information in the front row of the list is created in the order information whose re-read flag is FALSE. However, it is necessary to store the speech that reads out the menu name and quantity in the storage unit H103 in advance, or to install a text-to-speech synthesis engine.
図6のように、オーダー処理装置H1において、次に復唱すべき注文情報(Bセット)を表示すること,あるいは,それを読み上げる処理を行うことによって,給仕人は注文情報についての復唱作業を容易に行うことができる。 As shown in FIG. 6, the order processing device H1 displays the order information (B set) to be repeated next, or reads out the order information, so that the waiter can easily repeat the order information. Can be done.
最後に、S4では、図8のように、復唱済みフラグがTRUEになっている注文情報の表示領域においてフォント色と背景色が反転した表示用データが作成される。ただし、フォント色と背景色の反転に限定する必要はなく、図9のように、復唱済みフラグがTRUEになっている注文情報の表示領域に斜線を表示しても良い。また、図10のように、復唱済みフラグがTRUEになっている注文情報を非表示としても良い。また、図11のように、復唱済みフラグがFALSEの表示領域と復唱済みフラグがTRUEの表示領域とを分けて表示してもよい。このように、復唱済みフラグがFALSEである注文情報の表示領域と復唱済みフラグがTRUEである注文情報の表示領域とを識別できるように表示することで、給仕人は既に復唱した注文情報とこれから復唱すべき注文情報が区別しやすい。 Finally, in S4, as shown in FIG. 8, display data in which the font color and the background color are reversed in the display area of the order information in which the repeated flag is TRUE is created. However, it is not necessary to limit the reversal of the font color and the background color, and as shown in FIG. 9, a diagonal line may be displayed in the order information display area where the repeated flag is TRUE. Further, as shown in FIG. 10, the order information in which the repeated flag is TRUE may be hidden. In addition, as shown in FIG. 11, the display area where the repeated flag is FALSE and the display area where the repeated flag is TRUE may be displayed separately. In this way, by displaying the order information display area where the repeated flag is FALSE and the order information display area where the repeated flag is TRUE, the waiter can confirm the order information which has already been repeated and the future. It is easy to distinguish order information to be repeated.
S5では、S4(出力用データ作成部F7)で作成した表示用データを表示部F10へ出力し、S4で作成した音声データを音声出力部F11へ出力する。勿論、表示用データ及び音声データを共に出力する必要は無く、どちらか一方だけのデータを出力しても良い。 In S5, the display data created in S4 (output data creation unit F7) is output to the display unit F10, and the audio data created in S4 is output to the audio output unit F11. Of course, it is not necessary to output both the display data and the audio data, and only one of the data may be output.
S6では、音声認識部F5が、音声認識処理に必要な言語モデルを作成する。本実施例の説明において、言語モデルとは、認識可能な(受理できる)単語列を登録する文法データである。 In S6, the speech recognition unit F5 creates a language model necessary for speech recognition processing. In the description of this embodiment, the language model is grammar data for registering recognizable (acceptable) word strings.
ここで文法データについて説明する。文法データに登録されている単語列は、図12のような単語ネットワークの形式で表される。図12は、“メニュー名 − が − 注文数呼び方1”、“メニュー名 − が − 注文数呼び方2”、...、“メニュー名 − が − 注文数呼び方n”、“メニュー名 − を − 注文数呼び方1”、...、“メニュー名 − を − 注文数呼び方n”、“メニュー名 − ガーベッジ − 注文数呼び方1”、...、“メニュー名 − ガーベッジ − 注文数呼び方n”といった単語列を表した単語ネットワークである。ただし、ガーベッジとはすべての音韻をカバーすることを表す記号語である。ガーベッジという記号語に対応する音響モデルは、雑音、あらゆる音韻を持つ音声から学習される。通常そのような音響モデルはガーベッジモデルと呼ばれる。本実施例では、ガーベッジモデルは、初期状態から最終状態へスキップ可能な(NULL出力を許す)モデルであるとしている。つまり、“メニュー名 − ガーベッジ − 注文数呼び方1”の単語列が文法データに登録されている場合、“メニュー名 − 注文数呼び方1”という音声も認識可能である。以上の例では、メニュー名に対応する単語は一つだけとしたが、勿論、一つのメニューに複数の単語(呼び方)を対応付けて、一つのメニューに対応した複数の単語を認識可能な単語ネットワークも作成できるようにしても良い。例えば、“チョコレートパフェ”のメニュー名に対して、“チョコレートパフェ”と“チョコパ”という単語を割り当てても良い。
Here, the grammar data will be described. The word string registered in the grammar data is expressed in the form of a word network as shown in FIG. FIG. 12 shows that “menu name − is − order
まず、S6では、復唱済みフラグがFALSEかつ注文情報表示フラグがTRUEである各注文情報に対応して、図12のような単語ネットワークのテンプレートに、“メニュー名”や“注文数呼び方”が書き込まれる。次に、作成した各単語ネットワークを、並列に連結することで受理可能な単語列を定義する。図13は、図5のような注文情報が入力された後、図6のように表示した場合の文法データである。ただし、図13では、復唱済みフラグが全てFALSEである。復唱済みフラグがFALSEかつ注文情報表示フラグがTRUEになっている各注文情報に認識対象となる語彙を限定するので、音声認識処理の負担が軽減され、かつ、全メニューを認識対象とするよりも認識性能を向上させることができる。 First, in S6, “menu name” and “how to call the number of orders” are added to the template of the word network as shown in FIG. 12 in correspondence with each order information in which the repeated flag is FALSE and the order information display flag is TRUE. Written. Next, an acceptable word string is defined by connecting the created word networks in parallel. FIG. 13 shows grammatical data when the order information shown in FIG. 5 is input and displayed as shown in FIG. However, in FIG. 13, all the repeated flags are FALSE. Since the vocabulary to be recognized is limited to each order information in which the repeated flag is FALSE and the order information display flag is TRUE, the burden of the voice recognition processing is reduced, and more than all menus are to be recognized. Recognition performance can be improved.
S7では、音声認識部F5がS6にて作成した言語モデルを用いて、給仕人が復唱する音声を認識する。 In S7, the voice recognizing part F5 recognizes the voice that the waiter repeats using the language model created in S6.
S8では、まず、S7で認識した結果に相当する注文情報の復唱済みフラグをTRUEに設定する。例えば、図5のような注文情報が入力された時に、“Bセットがおひとつ”と音声認識した場合、“Bセット(注文数1)”の注文情報の復唱済みフラグはTRUEに設定される。 In S8, first, the repeated flag of the order information corresponding to the result recognized in S7 is set to TRUE. For example, when the order information as shown in FIG. 5 is input, if the voice recognition that “B set is one” is recognized, the repeated flag of the order information of “B set (number of orders 1)” is set to TRUE. .
S9では、必要に応じて、給仕人のキー4あるいはタッチキー5の操作によってリストの注文情報の修正が行われる。修正によって注文情報の注文数が0になった(注文情報が消去された)場合、その注文情報がリストから削除され、それに対応する各フラグも消去される。また、新しい注文が入力された場合は、その注文情報がリストの最後に新しく追加され、それに対応した各フラグが作成される。このとき、新しく追加された注文情報が見えるようにリストの表示を行い、注文情報表示フラグはTRUEに設定される。勿論、新しく追加され注文情報が多すぎて一度に全て表示できない場合、表示できない注文情報に対応する注文情報表示フラグはFALSEに設定される。また、新しい注文情報に対応する復唱済みフラグは、TRUEに設定される。
In S9, the order information in the list is corrected by operating the key 4 or the
S10では、リストの注文情報が全て復唱されたかを判別する。具体的には、復唱済みフラグが全てTRUEになっていると、リストの注文情報が全て復唱されたと判断し、S11の処理に進む。そうでない場合、S4の処理に戻る。 In S10, it is determined whether all the order information in the list has been repeated. Specifically, if all the repeated flags are TRUE, it is determined that all the order information in the list has been repeated, and the process proceeds to S11. Otherwise, the process returns to S4.
S11では、最後の注文情報の修正を行う。このときの処理は、S9と同じである。
S12では、客の注文情報を確定し、リストの注文情報の全てをサーバ12に送信する。
In S11, the last order information is corrected. The process at this time is the same as S9.
In
(サーバー・クライアントシステムでの実施例)
以上は、オーダー処理装置H1にて、以上の全処理を行う実施形態を説明したが、本発明は、通信回線を介したサーバー・クライアントシステムで構成することも可能である。通常、音声認識の処理の計算量は大きいため、この音声認識の処理をサーバ装置H105側で行うことによって、クライアントのオーダー処理装置H1(以下ネットワーククライアントとしてのオーダー処理装置を単に端末装置と呼ぶ)のコストを削減できる。そのような場合、端末装置H1のハードウェア構成は、は図2及び図3の構成と同じでよいが、図1の音声認識部F5の機能をサーバ装置H105で行うことになる。
(Example in server / client system)
The embodiment in which all the above processes are performed by the order processing apparatus H1 has been described above, but the present invention can also be configured by a server / client system via a communication line. Usually, since the amount of calculation of voice recognition processing is large, by performing this voice recognition processing on the server device H105 side, the client order processing device H1 (hereinafter, the order processing device as a network client is simply referred to as a terminal device). Can reduce costs. In such a case, the hardware configuration of the terminal device H1 may be the same as the configuration of FIGS. 2 and 3, but the server device H105 performs the function of the voice recognition unit F5 of FIG.
(サーバー・クライアントシステムでの機能構成)
図14は、に本発明をサーバ・クライアントシステムで実施した場合の機能構成を示すブロック図である。本発明をサーバー・クライアントシステムで実施した場合、端末装置H1は、注文情報入力部F1、注文情報リスト作成部F2、音声入力部F4、送受信部F100、注文情報管理部F6、出力用データ作成部F7、出力制御部F8及び出力部F9を備える。また、サーバ装置H105は、送受信部F101及び音声認識部F5aを備えている。
(Function configuration on server / client system)
FIG. 14 is a block diagram showing a functional configuration when the present invention is implemented in a server / client system. When the present invention is implemented in a server / client system, the terminal device H1 includes an order information input unit F1, an order information list creation unit F2, a voice input unit F4, a transmission / reception unit F100, an order information management unit F6, and an output data creation unit. F7, the output control part F8, and the output part F9 are provided. The server device H105 includes a transmission / reception unit F101 and a voice recognition unit F5a.
本発明をサーバ・クライアントシステムで実施した場合における端末装置H1の各部の機能は、オーダー処理装置H1にて全処理を行う場合のものと同じであるが、注文情報リスト作成部F2と音声入力部F4のデータ出力先及び、注文情報管理部F6へのデータ入力先が異なっている。 The function of each unit of the terminal device H1 when the present invention is implemented in the server / client system is the same as that in the case where all processing is performed in the order processing device H1, but the order information list creation unit F2 and the voice input unit The data output destination of F4 and the data input destination to the order information management unit F6 are different.
さらに詳しく述べると、注文情報リスト作成部F2は、注文情報入力部F1にて入力された注文情報リストを記憶部H103に保存し、さらにその注文情報リストを送受信部F100に出力する。 More specifically, the order information list creation unit F2 stores the order information list input by the order information input unit F1 in the storage unit H103, and further outputs the order information list to the transmission / reception unit F100.
また、音声入力部F4は、アナログの音声信号をデジタル化して、そのデジタル音声信号を送受信部F100に出力する。 The audio input unit F4 digitizes an analog audio signal and outputs the digital audio signal to the transmission / reception unit F100.
また、注文情報管理部F6は、送受信部F100から音声認識部F5aの認識結果を取得し、注文情報リストに含まれる注文情報のうち、認識結果に相当する注文情報を復唱済みとする。 Further, the order information management unit F6 acquires the recognition result of the voice recognition unit F5a from the transmission / reception unit F100, and sets the order information corresponding to the recognition result among the order information included in the order information list to be repeated.
送受信部F100は、ネットワークIFカードH104で構成され、注文情報リスト作成部F2が作成した注文情報リスト、音声入力部F4から取得したデジタル音声信号をサーバ装置H105に送信し、そのサーバ装置から送信された音声認識結果を受信する。 The transmission / reception unit F100 includes a network IF card H104, transmits the order information list created by the order information list creation unit F2 and the digital audio signal acquired from the voice input unit F4 to the server device H105, and is transmitted from the server device. Receive voice recognition results.
サーバ装置H105の音声認識部F5aは、CPU及びこのCPUが実行するプログラムなどによって構成され、送受信部H101にて取得した音声を認識し、その認識結果を文字列として送受信部H101に出力する。 The voice recognition unit F5a of the server device H105 includes a CPU and a program executed by the CPU, recognizes the voice acquired by the transmission / reception unit H101, and outputs the recognition result as a character string to the transmission / reception unit H101.
サーバ装置H105の送受信部H101は、ネットワークIFカードなど(例えばH104と同じものでも良い)によって構成され、端末装置H1から送信された送信データを受信し、音声認識部F5aの音声認識結果を端末装置H1へ送信する。 The transmission / reception unit H101 of the server device H105 is configured by a network IF card or the like (for example, the same as that of H104), receives transmission data transmitted from the terminal device H1, and transmits the voice recognition result of the voice recognition unit F5a to the terminal device. Send to H1.
(サーバー・クライアントシステムでの動作)
図15は、本発明をサーバ・クライアントシステムで実施した場合の動作を示すフローチャートである。図15の(a)は端末装置H1における動作を示し、図15の(b)はサーバ装置H105における動作を示す。図4と図15とを比較すると、サーバ・クライアントシステムで実施した場合(図6)の動作は、オーダー処理装置H1にて全処理を行った場合(図4)のS6及びS7の処理を端末装置H1では行わない点が異なっていることが分かる。また、本システムにおいて、オーダー処理装置H1にて全処理を行う場合と同じようにS6の言語モデル作成のステップを行った場合、端末装置H1にて表示している注文情報など(注文情報表示フラグ)を頻繁に(それらが生じる度に)サーバ装置H105へ送信しなければならないという(通信回線を無駄に使用するという)欠点がある。
(Operation on server / client system)
FIG. 15 is a flowchart showing the operation when the present invention is implemented in a server / client system. FIG. 15A shows the operation in the terminal device H1, and FIG. 15B shows the operation in the server device H105. When FIG. 4 is compared with FIG. 15, when the server / client system performs the operation (FIG. 6), the operation of S6 and S7 when the entire processing is performed by the order processing apparatus H1 (FIG. 4) It can be seen that the apparatus H1 is different in that it is not performed. Further, in this system, when the language model creation step of S6 is performed in the same manner as when all processing is performed by the order processing device H1, order information displayed on the terminal device H1 (order information display flag) ) Must be transmitted frequently (every time they occur) to the server apparatus H105 (use a communication line wastefully).
そこで、サーバ・クライアントシステムで実施した場合では、まず端末装置H1側において、注文情報リスト作成部F2が注文情報リストを作成(S2)した後に、送受信部F100が作成した注文情報リストをサーバ装置H105へ送信(S100)する。サーバH105側において、送受信部F101が端末装置H1から送信されたリストを受信(S101)し、受信したリストに基づいて言語モデルを作成(S6a)し、言語モデルの作成が完了したことを端末側に通知(S102)する。S10にて復唱終了と判断されるまで、S6aにて作成した言語モデルを用いて音声認識(S7)を行う。ただし、その場合、認識対象となる語彙を限定する機能が失われることになる。 Therefore, when implemented in the server / client system, first, on the terminal device H1, the order information list creation unit F2 creates the order information list (S2), and then the order information list created by the transmission / reception unit F100 is used as the server device H105. (S100). On the server H105 side, the transmission / reception unit F101 receives the list transmitted from the terminal device H1 (S101), creates a language model based on the received list (S6a), and indicates that the creation of the language model has been completed. (S102). Speech recognition (S7) is performed using the language model created in S6a until it is determined in S10 that the repetition has ended. However, in that case, the function of limiting the vocabulary to be recognized is lost.
(ソフトウェアでの実施例)
なお、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体を、他のシステムあるいは装置に供給し、そのシステムあるいは装置のコンピュータCPUが記録媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。
(Example in software)
An object of the present invention is to supply a recording medium that records a program code of software that realizes the functions of the above-described embodiments to another system or apparatus, and the computer CPU of the system or apparatus is stored in the recording medium. Needless to say, this can also be achieved by reading and executing the program code.
この場合、記録媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成することになる。 In this case, the program code itself read from the recording medium realizes the functions of the above-described embodiment, and the recording medium on which the program code is recorded constitutes the present invention.
プログラムコードを供給するための記録媒体としては、例えば、フロッピディスク、ハードディスク、光ディスク、光磁気ディスク、磁気テープ、不揮発性のメモリカード、等を用いることができる。 As a recording medium for supplying the program code, for example, a floppy disk, a hard disk, an optical disk, a magneto-optical disk, a magnetic tape, a nonvolatile memory card, or the like can be used.
また、上記プログラムコードは、通信ネットワークのような伝送媒体を介して、他のコンピュータシステムから記録装置等へダウンロードされるものであってもよい。 The program code may be downloaded from another computer system to a recording device or the like via a transmission medium such as a communication network.
また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているOS(オペレーティングシステム)などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, by executing the program code read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) operating on the computer based on the instruction of the program code. It goes without saying that a case where the function of the above-described embodiment is realized by performing part or all of the actual processing and the processing is included.
さらに、記録媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Furthermore, after the program code read from the recording medium is written in a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function is determined based on the instruction of the program code. It goes without saying that the CPU of the expansion board or function expansion unit performs part or all of the actual processing, and the functions of the above-described embodiments are realized by the processing.
本発明を上記記録媒体に適用する場合、その記録媒体には、先に説明したフローチャートに対応するプログラムコードを格納することになる。 When the present invention is applied to the recording medium, the recording medium stores program codes corresponding to the flowcharts described above.
なお、以上の例において、出力用データ作成部F7が作成する、復唱済みの注文情報と復唱されていない注文情報とを識別可能な出力用データが表示用データである場合について説明したが、これに限らず、前記出力用データは、音声データであってもよい。この場合の音声データは、例えば、図5のような注文情報が入力され、給仕人が“Bセットがお一つ”と復唱した時、“Bセットが一つ”という音声出力せずに、復唱されていない注文情報を“Cセットが一つ”、...、“チーズケーキが一つ”を音声出力することにより、復唱済みの注文情報と復唱されていない注文情報は互いに識別可能となる。 In the above example, the case has been described in which the output data created by the output data creation unit F7 is the display data, which can identify the order information that has been repeated and the order information that has not been repeated. The output data is not limited to audio data. In this case, for example, when the order information as shown in FIG. 5 is input and the waiter repeats “one B set”, the voice data is not output as “one B set”. Order information that has not been repeated is “one C set”,. . . By outputting a voice of “one cheesecake”, the order information that has been repeated and the order information that has not been repeated can be distinguished from each other.
以上のように、本発明のオーダー処理装置は、少なくとも音声による入力が可能な入力手段と、前記入力手段より入力された注文情報を記憶する記憶手段と、入力された注文情報の少なくとも一つからなる注文情報リストを作成するリスト作成手段と、音声を認識する音声認識手段と、前記注文情報リスト中の注文情報のうち、この注文情報リスト作成後の音声入力についての前記音声認識手段による音声認識結果に相当する注文情報を復唱済みとし、この復唱済みの注文情報と復唱されていない注文情報とを互いに識別可能な出力用データとして出力する出力用データ作成手段とを備えた構成である。 As described above, the order processing apparatus of the present invention comprises at least one of input means capable of inputting at least by voice, storage means for storing order information input from the input means, and at least one of the input order information. A voice information recognition means for generating voice information after the creation of the order information list out of the order information in the order information list. The configuration includes output data creation means for setting the order information corresponding to the result as repeated and outputting the repeated order information and the non-repeated order information as output data that can be distinguished from each other.
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。 The present invention is not limited to the above-described embodiments, and various modifications are possible within the scope shown in the claims, and embodiments obtained by appropriately combining technical means disclosed in different embodiments. Is also included in the technical scope of the present invention.
以上の実施の形態においては、オーダー処理装置及びオーダー処理システムを飲食店にて使用した例について説明したが、客が注文して店員が復唱するような状況にて使用する装置及びシステム(例えばコンビニなどのレジなど)にも使用可能である。 In the above embodiment, the example in which the order processing apparatus and the order processing system are used in a restaurant has been described. However, an apparatus and system (for example, a convenience store) used in a situation where a customer orders and a store clerk repeats it. Etc.).
H1 オーダー処理装置
H2 スピーカ
H3 表示装置
H4 キー
H5 音声入力ボタン
H6 マイク
H100 タッチキー
H101 サウンドカード
H102 制御部
H103 記憶部(記憶手段)
H104 ネットワークIFカード
H105 サーバ
F1 注文情報入力部
F2 注文情報リスト作成部(リスト作成手段)
F4 音声入力部
F5 音声認識部(音声認識手段)
F6 注文情報管理部(出力用データ作成手段)
F7 出力用データ作成部(出力用データ作成手段)
F8 出力制御部
F9 出力部(音声合成手段、音声再生手段、表示手段)
H1 Order processing device H2 Speaker H3 Display device H4 Key H5 Voice input button H6 Microphone H100 Touch key H101 Sound card H102 Control unit H103 Storage unit (storage means)
H104 Network IF card H105 Server F1 Order information input unit F2 Order information list creation unit (list creation means)
F4 voice input unit F5 voice recognition unit (voice recognition means)
F6 Order Information Management Unit (Output data creation means)
F7 Output data creation unit (output data creation means)
F8 output control unit F9 output unit (voice synthesis means, voice reproduction means, display means)
Claims (13)
音声を認識する音声認識手段と、
前記注文情報リスト中の注文情報のうち、この注文情報リスト作成後の音声入力についての前記音声認識手段による音声認識結果に相当する注文情報を復唱済みとし、この復唱済みの注文情報と復唱されていない注文情報とを互いに識別できるような出力用データを作成する出力用データ作成手段とを備えたことを特徴とするオーダー処理装置。 A list creation means for creating an order information list including at least one of the input order information;
Speech recognition means for recognizing speech;
Of the order information in the order information list, the order information corresponding to the voice recognition result by the voice recognition means for the voice input after the creation of the order information list has been repeated, and the repeated order information has been repeated. An order processing apparatus, comprising: output data creation means for creating output data that can be distinguished from each other without any order information.
前記オーダー処理装置は、
少なくとも音声による入力が可能な入力手段と、
入力された注文情報の少なくとも一つからなる注文情報リストを作成するリスト作成手段と、
前記ネットワークを介して、前記注文情報リスト、および前記音声入力手段より入力された音声を前記音声認識装置に送信するとともに、前記音声認識装置から送信された音声認識結果を受信する送受信手段と、
前記注文情報リスト中の注文情報のうち、受信した前記音声認識結果に相当する注文情報を復唱済みとし、この復唱済みの注文情報と復唱されていない注文情報とを互いに識別できるような出力用データを作成する出力用データ作成手段とを備え、
前記音声認識装置は、
受信した前記音声を認識する音声認識手段と、
前記ネットワークを介して、前記オーダー処理装置から送信された前記注文情報リストおよび音声を受信するとともに、前記音声認識手段による音声認識結果を前記オーダー処理装置へ送信する送受信手段とを備えていることを特徴とするオーダー処理システム。 A speech recognition device as a network server, and at least one order processing device as a network client connected to the network server via a network,
The order processing apparatus includes:
Input means capable of at least voice input;
A list creation means for creating an order information list including at least one of the input order information;
Transmitting and receiving means for transmitting the voice inputted from the order information list and the voice input means to the voice recognition device via the network and receiving a voice recognition result sent from the voice recognition device;
Out of the order information in the order information list, the order information corresponding to the received voice recognition result is repeated, and the output data is such that the repeated order information and the unrepeated order information can be distinguished from each other. Output data creation means for creating
The voice recognition device
Voice recognition means for recognizing the received voice;
Receiving the order information list and voice transmitted from the order processing apparatus via the network, and transmitting / receiving means for transmitting a voice recognition result by the voice recognition means to the order processing apparatus. Characteristic order processing system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003417027A JP4149370B2 (en) | 2003-12-15 | 2003-12-15 | Order processing apparatus, order processing method, order processing program, order processing program recording medium, and order processing system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003417027A JP4149370B2 (en) | 2003-12-15 | 2003-12-15 | Order processing apparatus, order processing method, order processing program, order processing program recording medium, and order processing system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005174251A true JP2005174251A (en) | 2005-06-30 |
JP4149370B2 JP4149370B2 (en) | 2008-09-10 |
Family
ID=34736065
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003417027A Expired - Fee Related JP4149370B2 (en) | 2003-12-15 | 2003-12-15 | Order processing apparatus, order processing method, order processing program, order processing program recording medium, and order processing system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4149370B2 (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007225793A (en) * | 2006-02-22 | 2007-09-06 | Toshiba Tec Corp | Data input apparatus, method and program |
JP2008186143A (en) * | 2007-01-29 | 2008-08-14 | Nec Infrontia Corp | Money amount confirming method, and pos device using the same |
JP2012003789A (en) * | 2011-10-06 | 2012-01-05 | Toshiba Tec Corp | Order accepting device and program |
KR101440286B1 (en) | 2012-09-20 | 2014-09-17 | 주식회사 씽크풀 | Ordering system using speech recognition and ordering method thereof |
JP2018116539A (en) * | 2017-01-19 | 2018-07-26 | セイコーソリューションズ株式会社 | Order management system, order management method, display device for order management system |
JP2019518483A (en) * | 2016-03-17 | 2019-07-04 | カーリー ケア, インコーポレイテッドKali Care, Inc. | Network connection cap for container |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5769360A (en) * | 1980-10-13 | 1982-04-28 | Toshiba Corp | Voice electronic register |
JPH03104295U (en) * | 1990-02-07 | 1991-10-29 | ||
JPH10322450A (en) * | 1997-03-18 | 1998-12-04 | N T T Data:Kk | Voice recognition system, call center system, voice recognition method and record medium |
JPH1125179A (en) * | 1997-07-09 | 1999-01-29 | Tec Corp | Order data processor |
JP2001243282A (en) * | 1999-12-24 | 2001-09-07 | Toshiba Tec Corp | Order management system |
JP2002056458A (en) * | 2000-08-08 | 2002-02-22 | Just Syst Corp | Commodity control system, method, host device and terminal device for commodity control, and recording medium |
JP2002117462A (en) * | 2000-10-06 | 2002-04-19 | Sharp Corp | Order data management device |
JP2003132439A (en) * | 2001-10-24 | 2003-05-09 | Seiko Instruments Inc | Order data managing device |
-
2003
- 2003-12-15 JP JP2003417027A patent/JP4149370B2/en not_active Expired - Fee Related
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5769360A (en) * | 1980-10-13 | 1982-04-28 | Toshiba Corp | Voice electronic register |
JPH03104295U (en) * | 1990-02-07 | 1991-10-29 | ||
JPH10322450A (en) * | 1997-03-18 | 1998-12-04 | N T T Data:Kk | Voice recognition system, call center system, voice recognition method and record medium |
JPH1125179A (en) * | 1997-07-09 | 1999-01-29 | Tec Corp | Order data processor |
JP2001243282A (en) * | 1999-12-24 | 2001-09-07 | Toshiba Tec Corp | Order management system |
JP2002056458A (en) * | 2000-08-08 | 2002-02-22 | Just Syst Corp | Commodity control system, method, host device and terminal device for commodity control, and recording medium |
JP2002117462A (en) * | 2000-10-06 | 2002-04-19 | Sharp Corp | Order data management device |
JP2003132439A (en) * | 2001-10-24 | 2003-05-09 | Seiko Instruments Inc | Order data managing device |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007225793A (en) * | 2006-02-22 | 2007-09-06 | Toshiba Tec Corp | Data input apparatus, method and program |
JP4755918B2 (en) * | 2006-02-22 | 2011-08-24 | 東芝テック株式会社 | Data input device and method, and program |
JP2008186143A (en) * | 2007-01-29 | 2008-08-14 | Nec Infrontia Corp | Money amount confirming method, and pos device using the same |
JP2012003789A (en) * | 2011-10-06 | 2012-01-05 | Toshiba Tec Corp | Order accepting device and program |
KR101440286B1 (en) | 2012-09-20 | 2014-09-17 | 주식회사 씽크풀 | Ordering system using speech recognition and ordering method thereof |
JP2019518483A (en) * | 2016-03-17 | 2019-07-04 | カーリー ケア, インコーポレイテッドKali Care, Inc. | Network connection cap for container |
JP2018116539A (en) * | 2017-01-19 | 2018-07-26 | セイコーソリューションズ株式会社 | Order management system, order management method, display device for order management system |
Also Published As
Publication number | Publication date |
---|---|
JP4149370B2 (en) | 2008-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200026415A1 (en) | Method for creating short message and portable terminal using the same | |
KR101143034B1 (en) | Centralized method and system for clarifying voice commands | |
WO2004057566A1 (en) | Text display terminal device and server | |
JP5146429B2 (en) | Image processing apparatus, speech recognition processing apparatus, control method for speech recognition processing apparatus, and computer program | |
JPH0651930A (en) | Computer | |
EP1836582A2 (en) | Formulating and sending a message by a personal messaging device | |
JP2020027132A (en) | Information processing device and program | |
JP4149370B2 (en) | Order processing apparatus, order processing method, order processing program, order processing program recording medium, and order processing system | |
JP3542578B2 (en) | Speech recognition apparatus and method, and program | |
JP2017102939A (en) | Authoring device, authoring method, and program | |
JP4722010B2 (en) | Information processing apparatus, information processing method, information processing program, and computer-readable recording medium recording the information processing program | |
KR20090020265A (en) | Mobile terminal and method for inputting message thereof | |
JP5402102B2 (en) | Schedule management apparatus and schedule management program | |
JP2004301980A (en) | Speech interaction device and proxy device for speech interaction, and programs for them | |
US20050119888A1 (en) | Information processing apparatus and method, and program | |
JP2004054811A (en) | Input display method, input display device, input display program and recording medium to record input display program | |
JP2002108380A (en) | Information presenting device and its control method, and computer-readable memory | |
JP2004287756A (en) | E-mail generating device and method | |
JP2007178692A (en) | Character input device and method | |
JP2006185342A (en) | Information processor, method and program for classifying character string, and recording medium | |
JP2016161735A (en) | Authoring device, authoring method, and program | |
TWI425811B (en) | System and method for playing text short messages | |
JP2002132403A (en) | Speech synthetic e-mail terminal with image file | |
CN113312502A (en) | Information processing apparatus, storage medium, and information processing method | |
JP4047323B2 (en) | Information processing apparatus and method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060125 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080410 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080624 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080625 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110704 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |