JP2000187776A - 情報提供装置、情報提供システム、情報提供処理方法、及び記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 本発明の課題は、ネットワークを利用した学
習機能により高精度な音声認識処理が可能な音声入力に
よるメニュー選択機能と、利用客がメニューの構造を意
識せずに所望の情報に到達できる機能を備えたことによ
り、利用客の利便性を高められる情報提供装置、及び情
報提供システム等を提供することである。 【解決手段】 利用客の発話は、周波数解析をなされ音
素データ等のパラメータに変換され、この音素データ等
のパラメータに基づいて、音素認識処理、単語認識処
理、文認識処理の順序で音声認識処理がなされる。この
際の単語認識辞書として、コマンド音声テーブル、及び
案内表示の項目に関する音声テーブルが参照される。案
内表示の項目に関する音声テーブル内の単語が認識され
た場合には、それぞれに対応するネームマスターに設定
された項目のリンク状態に関する情報を参照してメニュ
ー体系を構築し、案内文データテーブルに基づく案内出
力処理に移行する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、コンビニエンスス
トアに代表される店舗に設置する商品販売情報処理端末
装置等のように利用者が所望する情報を提供する情報提
供装置、及び情報管理装置と複数の情報提供装置によっ
て構成される情報提供システム等に関する。

【０００２】

【従来の技術】コンビニエンスストアに代表される店に
設置する什器として、ゲームソフトの販売用に、多種の
商品カードを入れて並べた陳列棚と、ゲームのプロモー
ション映像を表示するモニターを組み込んだものがあ
る。

【０００３】また、表示情報が切り替わる表示画面兼用
のタッチパネルを備え、そのタッチパネルに対するメニ
ュー画面からの入力操作により、ショッピングの配送申
し込みや予約、チケットの予約を含む購入、ゲームの書
換申し込み、各種の情報や商品の紹介といった多機能を
具備したものもある。また、音声認識技術を用いて利用
客が音声による入力操作を行うことができるものもあ
る。

【０００４】

【発明が解決しようとする課題】しかしながら、メニュ
ーの構成は、図３２に示すような階層構造となっている
ため、タッチパネルを使用する場合、例えば、ゲームソ
フトを選択する際には、まず、図３３に示すように、音
楽、映像、ゲーム、チケット、プリント等の分類が表示
された初期メニュー画面からゲームを選択操作し、次い
で表示される図３４に示すような、シューティング、Ｒ
ＰＧ、シミュレーション等の各ジャンルが表示されたジ
ャンル選択画面から所望のジャンルを選択操作する。そ
して、更に図３５に示すような、Ａ社、Ｂ社、Ｃ社等の
各メーカーが表示されたメーカー選択画面から所望のメ
ーカーを選択操作してから、最後に、図３６に示すよう
な、Ｘの冒険、Ｙ物語、Ｚファンタジー等の各タイトル
が表示された商品選択画面から所望の商品を選択操作す
ることにより、図３７に示すような所望のゲームソフト
の表示画面に到達することができる。

【０００５】このように、ゲームを例に取った場合、タ
ッチパネルによる４回の操作手順を経なければならず、
利用客に非常な煩雑さを感じさせていた。

【０００６】また、音声認識技術を採用した場合には、
不特定話者に対応するための多数の音声サンプルを収集
することが困難であることから、音声認識精度の面にお
いて改良の余地があった。

【０００７】そこで、本発明の課題は、ネットワークを
介して収集した多数の音声サンプルによる学習機能によ
り高精度な音声認識処理が可能な音声入力によるメニュ
ー選択機能と、利用客がメニューの構造を意識せずに所
望の情報に到達できる機能を備えたことにより、利用客
の利便性を高められる情報提供装置、及び情報提供シス
テム等を提供することである。

【０００８】

【課題を解決するための手段】以上の課題を解決すべく
請求項１記載の発明の情報提供装置によれば、音声認識
手段は、音声入力手段から入力された利用者の音声を音
声認識辞書に基づいて認識して、音声内容毎に対応づけ
られた所定コードに変換し、情報格納手段は、各種情
報、及び当該各種情報を識別する情報である識別項目を
対応づけて格納し、情報特定手段は、前記音声認識手段
によって変換された所定コードに基づいて、前記情報格
納手段に格納された前記識別項目の中から該当する識別
項目を検索して特定し、情報抽出手段は、この情報特定
手段によって特定された識別項目、及び当該識別項目に
対応づけられた情報を前記情報格納手段から抽出し、情
報提供手段は、この情報抽出手段により抽出された識別
項目、及び情報を、その情報内容に応じた各種情報形態
で出力して、当該抽出情報の情報内容を提供し、判別手
段は、撮像手段によって撮像された利用者の画像を解析
して利用者が所定の範囲内に位置しているか否かを判別
し、そして、前記音声入力手段は、前記判別手段によっ
て利用者が所定の範囲内に位置していると判別された場
合に利用者の音声入力を可能とする。

【０００９】したがって、この請求項１記載の発明によ
って、利用者が音声によって指定した情報名称等の識別
項目に対応する情報が、直接的に提供されるため、従来
のように、階層構造を深く下りていくことによって情報
にたどり着く煩雑さを感じることなく、希望する情報を
直接的に容易に得ることができるため、情報提供装置の
利便性を向上させることが可能となる。

【００１０】また、利用者が所定の範囲内に位置してい
ないと判別された場合の音声を入力音声として検出しな
いようにすることができるため、周囲の雑音や利用者の
指示以外の音声によって、不必要な処理を行うことがな
く、情報提供の処理の信頼性を向上させることが可能と
なる。

【００１１】請求項２記載の発明の情報提供装置によれ
ば、音声認識手段は、音声入力手段から入力された利用
者の音声を音声認識辞書に基づいて認識して、音声内容
毎に対応づけられた所定コードに変換し、情報格納手段
は、各種情報、当該各種情報を識別する情報である識別
項目、及び前記各種情報の情報内容を複数の観点から分
類するために前記識別項目と関連づけられた各種分類項
目を格納し、情報特定手段は、前記音声認識手段によっ
て変換された所定コードに基づいて、前記情報格納手段
から該当する識別項目または分類項目を検索して特定
し、情報抽出手段は、この情報特定手段によって識別項
目が特定された場合は、当該識別項目、及び当該識別項
目に対応づけられた情報を前記情報格納手段から抽出
し、または、前記情報特定手段によって分類項目が特定
された場合は、当該分類項目、及び当該分類項目と関連
づけられた識別項目を前記情報格納手段から抽出し、情
報提供手段は、この情報抽出手段により抽出された識別
項目、及び情報を、その情報内容に応じた各種情報形態
で出力して、当該抽出情報の情報内容を提供し、また
は、前記情報抽出手段により抽出された分類項目、及び
識別項目を、関連づけられた状態に基づいて体系化して
所定の情報形態で出力することにより、当該識別項目に
対応づけられた前記情報の情報内容を提供し、入力手段
は、各種指示入力を行うための複数の入力キーを備え、
キー設定格納手段は、前記情報提供手段により出力され
る識別項目、分類項目、及び各種情報を入力項目として
前記入力手段の各入力キーに対応づけて設定するための
キー設定データを格納し、そして、前記入力手段の入力
キーが操作された場合は、前記キー設定格納手段に格納
されたキー設定データに基づいて、前記情報特定手段に
より、当該入力キーに対応づけられた前記識別項目、分
類項目、あるいは各種情報を前記情報格納手段から検索
して特定し、判別手段は、撮像手段によって撮像された
利用者の画像を解析して利用者が所定の範囲内に位置し
ているか否かを判別し、前記音声入力手段は、前記判別
手段によって利用者が所定の範囲内に位置していると判
別された場合に利用者の音声入力を可能とする。

【００１２】したがって、この請求項２記載の発明によ
って、音声入力と指示操作入力の２つの入力方法を併用
することにより、利用者は、状況に応じて適宜入力方法
を使い分けることができるため、所望の情報を取り出す
ことが更に容易になり、情報提供装置の使い勝手を更に
向上させることが可能となる。

【００１３】また、利用者が所定の範囲内に位置してい
ないと判別された場合の音声を入力音声として検出しな
いようにすることができるため、周囲の雑音や利用者の
指示以外の音声によって、不必要な処理を行うことがな
く、情報提供の処理の信頼性を向上させることが可能と
なる。

【００１４】また、請求項３記載の発明によれば、ネッ
トワークサーバとしての情報管理装置と、ネットワーク
クライアントとしての請求項１または２に記載の複数の
情報提供装置とが、ネットワークを介して接続されるこ
とによって構成される情報提供システムにおいて、前記
情報管理装置は、管理側情報格納手段によって、各種情
報、当該各種情報を識別する情報である識別項目、及び
前記各種情報の情報内容を複数の観点から分類するため
に前記識別項目と関連づけられた各種分類項目を、随時
更新管理して格納しており、配信手段によって、この管
理側情報格納手段に格納された各種情報、識別項目、及
び分類項目を前記複数の情報提供装置に配信する。そし
て、前記情報提供装置は、受信手段によって、前記情報
管理装置から配信された各種情報、識別項目、及び分類
項目を受信すると、情報更新手段によって、受信された
各種情報、識別項目、及び分類項目に基づいて、前記情
報格納手段に格納された前記各種情報、識別項目、及び
分類項目を更新する。

【００１５】したがって、この請求項３記載の発明によ
って、情報提供装置には記録されていない新規の情報が
発生した際にも、新規の情報に関する情報名称等の識別
項目、及び分類項目を情報提供装置に追加するための処
理を、情報管理装置によって一括して行うことができる
ため、情報提供装置によって提供する情報内容を容易に
常に新しい状態に保つことができ、情報提供システムの
有用性を向上させることができる。

【００１６】

【発明の実施の形態】以下、図を参照して本発明に係る
情報提供システムの実施の形態を詳細に説明する。図１
〜図３６を参照して、本発明の情報提供システムを適用
した一実施の形態における商品販売情報処理システム１
について詳細に説明する。

【００１７】まず構成を説明する。図１は、本実施の形
態の商品販売情報処理システム１における情報のやりと
りを概念的に示した全体構成図である。この図１に示す
ように、商品販売情報処理システム１の構成員は、販売
管理センターＢ、及び店舗Ａである。販売センターと店
舗Ａとは例えば、専用回線、またはＩＳＤＮ（Integrat
ed Services Digital Network ）等の公衆回線を利用し
て接続されており、各地に点在するコンビニエンススト
アに代表される店舗Ａには、販売管理センターＢから音
楽、映像、ゲーム、チケット等のコンテンツ情報が随時
送信される。

【００１８】また、販売管理センターＢは、ＣＳ（Comm
unication Satellite ：通信衛星）等の衛星通信を介し
て広告映像等を含む各種コンテンツ情報を配信すること
も可能であり、各地に点在する店舗Ａは、専用のアンテ
ナとチューナによって配信される情報を受信し、店内に
設置される商品販売情報処理端末装置４の表示画面に表
示するなどして来店した客に対してコンテンツ情報を提
供する。

【００１９】また、店舗Ａに設置される商品販売情報処
理端末装置４の販売状況を示す販売データが商品販売情
報管理装置３に対して送信される他、店舗Ａと販売管理
センターＢの間では、後述する音声認識辞書学習処理
（図２８参照）に関する音声データが送受信される。す
なわち、図１に示すように、店舗Ａ側からは、後述する
取得音声データ４１３Ｑが販売管理センターＢに対して
送信され、この取得音声データ４１３Ｑを音声認識辞書
学習処理によって適切な音声データに加工された学習音
声データ３７Ｄが販売管理センターＢから各地に点在す
る店舗Ａに対して送信される。また、販売管理センター
Ｂ側からは、新規のコンテンツ情報に関する追加データ
３７Ｃが各店舗Ａに対して送信される。

【００２０】図２は、商品販売情報処理システム１を構
成する販売管理センターＢ、及び店舗Ａに設置される各
装置の接続関係を示すブロック図である。この図２に示
すように、商品販売情報処理システム１は、ネットワー
ク２に対して、販売管理センターＢに設置されるネット
ワークサーバとしての商品販売情報管理装置３、及び各
店舗Ａに設置されるネットワーククライアントとしての
複数の商品販売情報処理端末装置４が接続されることに
より構成されている。ネットワーク２は、専用回線によ
って接続されるもの、ＩＳＤＮ等の公衆回線によって接
続されるもの、あるいは無線通信によって接続されるも
の等の様々な接続形態を適用することが可能であるが、
情報管理の信頼性の観点から、セキュリティの確保され
ているネットワークであることが好ましい。

【００２１】次に商品販売情報処理システム１を構成す
る各装置について詳細に説明する。図３は、図２に示す
商品販売情報管理装置３の概略内部構成を示すブロック
図である。

【００２２】この図３において、商品販売情報管理装置
３は、ＣＰＵ３１、入力装置３２、表示装置３３、通信
装置３４、ＲＡＭ３５、及びＨＤドライブ３６によって
構成され、各部はバス３８によって接続されている。

【００２３】ＣＰＵ（Central Processing Unit ）３１
は、ＨＤドライブ３６に記録されている当該商品販売情
報管理装置３に対応する各種アプリケーションプログラ
ムの中から指定されたアプリケーションプログラム、入
力装置３２から入力される各種指示あるいはデータをＲ
ＡＭ３５内のワークエリアに格納し、この入力指示及び
入力データに応じてＲＡＭ３５内に格納したアプリケー
ションプログラムに従って各種処理を実行し、その処理
結果をＲＡＭ３５内のワークエリアに格納するととも
に、表示装置３３に表示する。そして、ワークエリアに
格納した処理結果を入力装置３２から入力指示されるＨ
Ｄドライブ３６内の保存先に保存する。

【００２４】入力装置３２は、カーソルキー、数字入力
キー及び各種機能キー等を備えたキーボードと、ポイン
ティングデバイスであるマウスと、を備え、キーボード
で押下されたキーの押下信号をＣＰＵ３１に出力すると
ともに、マウスによる操作信号をＣＰＵ３１に出力す
る。

【００２５】表示装置３３は、ＣＲＴ（Cathode Ray Tu
be）、液晶表示装置等により構成され、ＣＰＵ３１から
入力される表示データに基づいて画面表示を行う。

【００２６】通信装置３４は、ターミナルアダプタ（Ｔ
Ａ：Tarminal Adapter）、またはルーター等によって構
成され、ＩＳＤＮ回線、あるいは専用線等の通信回線を
介してネットワーク２に接続される複数の商品販売情報
処理端末装置４のそれぞれとの通信を行うための制御を
行う。また、衛星アンテナ、及びデコーダを備えること
によって衛星通信が可能である。

【００２７】ＲＡＭ（Random Access Memory）３５は、
指定されたプログラム、入力指示、入力データ及び処理
結果等を格納するワークエリアを有する。

【００２８】ＨＤドライブ３６には当該商品販売情報管
理装置３に対応する商品販売情報管理プログラム、サー
バーアプリケーションプログラム、後述する音声認識辞
書学習処理プログラム、及びこれらのプログラムで処理
されたデータ等を記録する。

【００２９】図４は、ＨＤドライブ３６に格納される送
受信データの構成を示す図である。この図４において、
商品販売情報管理装置３が複数の商品販売情報処理端末
装置４のそれぞれから受信するデータとして取得音声デ
ータ３７Ａ、及び販売データ３７Ｂがあり、商品販売情
報管理装置３から複数の商品販売情報処理端末装置４の
それぞれに対して送信されるデータとして追加データ３
７Ｃ、及び学習音声データ３７Ｄがある。

【００３０】取得音声データ３７Ａは、各地に点在する
多数の商品販売情報処理端末装置４が利用客の音声をサ
ンプルとして取得した取得音声データがそれぞれの商品
販売情報処理端末装置４から定期的に送信されるもので
ある。販売データ３７Ｂは、それぞれの商品販売情報処
理端末装置４が販売したコンテンツに関する販売データ
がそれぞれの商品販売情報処理端末装置４から定期的に
送信されるものである。

【００３１】追加データ３７Ｃは、新規コンテンツに対
する各種データを商品販売情報処理端末装置４に追加す
るためのデータであり、後述する図７に示す各種データ
と同一の構成の追加差分データである。また、この追加
データ３７Ｃとして複数種類のデータを用意して地域ご
とに配信内容を変更することにより、地域限定の商品等
にも対応することが可能となる。学習音声データ３７Ｄ
は、受信した取得音声データ３７Ａを解析して音声認識
辞書学習処理を行い、適度な容量のデータに編集したも
のであり、取得した多数の音声サンプルによって音声認
識辞書を学習させた結果を商品販売情報処理端末装置４
に配信するためのデータである。

【００３２】以上が、図２に示す商品販売情報管理装置
３の概略内部構成を示す図３の各部についての説明であ
る。

【００３３】次いで図５は、図２に示す商品販売情報処
理端末装置４の概略内部構成を示す図である。

【００３４】この図５において、商品販売情報処理端末
装置４は、ＣＰＵ４０１、入力部４０２、メイン表示部
４０３、サブ表示部４０４、音声認識部４０５、音声合
成部４０６、デジタルカメラ４０７、通信制御部４０
８、レシート発行部４０９、チケット発行部４１０、Ｒ
ＯＭ４１１、ＲＡＭ４１２、ＨＤドライブ４１３、スキ
ャナ４１４、プリンタ４１５、メモリカードドライブ４
１６、ディスクメディアドライブ４１７、及び複数の予
備ドライブ４１８によって構成されており、各部はバス
４１９によって接続されている。

【００３５】ＣＰＵ４０１は、ＲＯＭ４１１、あるいは
ＨＤドライブ４１３に記録されている当該商品販売情報
処理端末装置４に対応するプログラムの中から指定され
たプログラム、入力部４０２から入力される各種指示あ
るいはデータをＲＡＭ４１２内のワークエリアに格納
し、この入力指示及び入力データに応じてＲＡＭ４１２
内に格納したプログラムに従って各種処理を実行し、そ
の処理結果をＲＡＭ４１２内のワークエリアに格納する
とともに、メイン表示部４０３やサブ表示部４０４に表
示する。そして、ＲＡＭ４１２内のワークエリアに格納
した処理結果をＨＤドライブ４１３内の所定の保存先に
保存する。

【００３６】また、ＣＰＵ４０１は、後述するコンテン
ツ表示処理（図２５参照）、項目処理（図２６参照）、
コマンド処理（図２７参照）等において、商品販売情報
処理端末装置４の各部の制御を行う。例えば、デジタル
カメラ４０７から入力される画像データを解析し、コン
テンツ表示処理において、デジタルカメラ４０７のピン
トが合焦する範囲であるか否かを判別して、利用客が商
品販売情報処理端末装置４の前に立っていることを判別
したり、項目処理やコマンド処理において、画像の２値
化処理等によって利用客の姿勢を判別する。

【００３７】入力部４０２は、メイン表示部４０３と一
体となったタッチパネルであり、メイン表示部４０３に
表示される各種操作ボタンの位置を利用客に指示される
と、指示された座標を検出して座標データをＣＰＵ４０
１に対して出力する。この各種操作ボタンには予め各種
商品情報に関わる商品名や分類名等が対応付けられてお
り、当該ボタンがタッチされることにより、直接当該商
品名や分類名の指定を行うことが可能である。

【００３８】メイン表示部４０３は、入力部４０２と一
体となった液晶表示パネル等の表示部であり、商品販売
情報処理端末装置４が利用客に提供する各種コンテンツ
やメニューの表示を行う。

【００３９】サブ表示部４０４は、ＣＲＴ（Cathode Ra
y Tube）や液晶表示パネル等で構成されており、商品販
売情報処理端末装置４が利用客に提供する各種コンテン
ツに関する広告放送などの映像を表示する。

【００４０】音声認識部４０５は、マイク４０５ａ，４
０５ｂによって収集した利用客の音声の解析を行う。す
なわち、音声をマイク４０５ａ，４０５ｂによって電気
信号に変換し、この信号の周波数分析を行い、音声認識
処理に必要な音素データ等のパラメータを生成し、商品
販売情報処理端末装置４に対して出力する。また、後述
するようにマイク４０５ａ，４０５ｂは、脱着可能とな
っており、脱状態の時には接話マイクロホンに、着状態
の時には指向性マイクロホンに切り替えて音声を入力す
ることができるようにするなど、状況に応じた適切なマ
イクに自動的に切り替え可能な構成としてもよい。そし
て、このような構成にすることにより周囲の雑音を極力
排除することができる。また、音声認識部４０５によっ
て解析した音声の特徴から、利用者の性別や年齢等の声
質からある程度判断できる要素を判定し、市場調査のデ
ータとして活用することもできる。この際、デジタルカ
メラ４０７によって利用者を撮影した画像を解析するこ
とにより判定した結果と照らし合わせて判定を行うこと
により判定精度を向上させることができる。

【００４１】音声合成部４０６は、利用客に対する案内
音声を合成してスピーカ４０６ａ，４０６ｂから出力す
る。音声合成の方式には大きく分けて、音片編集方式、
規則合成方式、テキスト音声合成方式の３種類があり、
また、これらを必要に応じて適宜組み合わせて音声合成
を行うことも可能である。

【００４２】音片編集方式は、録音された文、文節、単
語単位の音声を適宜組み合わせて必要な文章を編集する
方式であるため音質が優れており、また、音声合成に要
する演算量も少なくて済むため高速な処理が期待でき
る。規則合成方式は、単語の読みとアクセント、文のイ
ントネーションに関する情報を保持する表音文字列を適
宜組み合わせて必要な文章を編集し、更に表音文字列を
音声波形に変換するため、音片編集方式と比較して予め
用意しておくデータの容量は小さくて済むが、音質は音
片編集方式より劣化する。テキスト音声合成方式は、Ｊ
ＩＳコード等によって表現されるテキストデータを解析
して表音文字列に変換することから処理が始まるため、
合成処理は最も複雑かつ演算量が多くなる。そのため、
音声合成の誤処理の可能性が他の２方式と比較すると大
きくなってしまう。

【００４３】また、具体的な例としては、音片編集方式
は、駅の到着案内や、空港のフライトインフォメーショ
ンを行う電話応答、テレホンバンキングの無人応答等が
挙げられ、予め決められた文や文節等の音声を録音して
おき、条件に応じてコンピュータで組み合わせることに
よって応答文章を作成するために、定型文組み合わせ型
とも呼ばれている。また、規則合成方式やテキスト音声
合成方式の例としては、任意のテキスト文章の読み上げ
等が挙げられ、音質が機械的（ロボット的）であるため
に、ロボット合成方式とも呼ばれている。

【００４４】高速かつ高品質な音声認識・合成処理を行
うためには、音声認識部４０５、及び音声合成部４０６
としては、専用の音声認識処理回路、または音声合成処
理回路を備えることが好ましいが、コストを抑えるとい
う観点からは、音声認識部４０５、及び音声合成部４０
６は、音声入出力のための基本的な処理回路のみを備
え、音声認識・合成処理はＣＰＵ４０１によって行うこ
とが好ましい。この相反する２つの条件のバランスを考
慮して、音声認識部４０５、及び音声合成部４０６の内
部構成は様々な形態が考えられるが、本実施の形態にお
いては、音声認識部４０５、音声合成部４０６はそれぞ
れ専用の音声認識処理回路、または音声合成処理回路を
備えるものとして説明する。

【００４５】デジタルカメラ４０７は、ＣＣＤ（Charge
Coupled Device）という光を検知する半導体素子を用
いて画像を電気信号に変換し、ＣＰＵ４０１に対して出
力する。このデジタルカメラ４０７によって取り込まれ
た画像は、ＣＰＵ４０１によって解析され、この解析結
果を監視用として利用するほか、利用客の存在を感知し
たり、利用客の姿勢を判別するために利用することがで
きる。また、利用客を撮影した画像を解析することによ
り、利用客の性別、年齢等の外見からある程度判断でき
る要素を判定し、市場調査のデータとして活用すること
もできる。この際、音声認識部４０５によって解析した
音声の特徴から判定した結果と照らし合わせて判定を行
うことにより判定精度を向上させることができる。

【００４６】通信制御部４０８は、モデム、ターミナル
アダプタ、またはルーター等によって構成され、電話回
線、ＩＳＤＮ回線、あるいは専用線等の通信回線を介し
てネットワーク２に接続される複数の商品販売情報処理
端末装置４のそれぞれとの通信を行うための制御を行
う。また、衛星アンテナ、及びデコーダを備えることに
よって衛星通信が可能である。

【００４７】レシート発行部４０９は、利用客が商品販
売情報処理端末装置４によって提供されるコンテンツを
購入した際のレシートを印字して発行する。チケット発
行部４１０は、利用客が商品販売情報処理端末装置４に
よって提供されるコンテンツとしてのコンサートチケッ
ト等の各種チケットを購入した際のチケットを印字して
発行する。

【００４８】ＲＯＭ（Read Only Memory）４１１は、商
品販売情報処理端末装置４の処理を実現する機能の内、
変更の必要のない機能に関するプログラムやデータを格
納する。ＲＡＭ４１２は、指定されたプログラム、入力
指示、入力データ及び処理結果等を格納するワークエリ
アを有する。

【００４９】ＨＤドライブ４１３は、プログラムやデー
タ等が予め記録されている磁気的記録媒体としてのＨＤ
（Hard Disk ）を有しており、このＨＤには当該商品販
売情報処理端末装置４に対応するプログラム、及びこの
プログラムで処理されたデータ等を記録する。

【００５０】このＨＤドライブ４１３に装着されるＨＤ
には、図７に示すような各種データが格納されている。
すなわち、音声認識処理に関する音声パターンテーブル
４１３Ａ、コマンド音声テーブル４１３Ｂ、コンテンツ
音声テーブル４１３Ｃ、メーカー音声テーブル４１３
Ｄ、ジャンル音声テーブル４１３Ｅ、分野音声テーブル
４１３Ｆ、メニュー体系に関するコンテンツネームマス
ター４１３Ｇ、コンテンツデータマスター４１３Ｈ、メ
ーカーネームマスター４１３Ｉ、ジャンルネームマスタ
ー４１３Ｊ、分野ネームマスター４１３Ｋ、案内出力処
理に関する案内文データテーブル４１３Ｌ、背景画像テ
ーブル４１３Ｍ、文字修飾テーブル４１３Ｎ、コマンド
ボタンテーブル４１３Ｏ、音声特徴テーブル４１３Ｐ、
及び音声認識辞書学習処理に関する取得音声データ４１
３Ｑ等が格納されており、各データは、図８に示すよう
な処理の流れの中で参照される。以下、処理の流れを示
す図８と、各データの具体的な構成例を示す図９〜図２
４を参照して各データについて詳細に説明する。

【００５１】図８に示すように、利用客の発話は、ま
ず、周波数解析をなされ音素データ等のパラメータに変
換されるとともに、この際の周波数解析の結果が、音声
パターンテーブル４１３Ａに格納された各種音声パター
ンと比較されて、利用客の音声パターンが特定される。
音声パターンテーブル４１３Ａは、図９に示すように、
例えば、成人男性パターン１，２，・・・・，成人女性パタ
ーン１，２，・・・・，子供パターン１，２，・・・・等の複数
のパターンがそれぞれ固有のパターンＩＤと対応づけら
れることによって構成されている。これら複数の音声パ
ターンは、不特定話者音声認識の認識率を向上させるた
めに利用されるとともに、コンテンツ毎の利用客の性別
や年齢層を判断する材料として参照される。

【００５２】次いで、図８において、音素データ等のパ
ラメータに基づいて、音素認識処理、単語認識処理、文
認識処理の順序で音声認識処理がなされる。この際の単
語認識辞書として、複数の語彙が各種商品情報に関わる
分類毎に格納されたコマンド音声テーブル４１３Ｂ、コ
ンテンツ音声テーブル４１３Ｃ、メーカー音声テーブル
４１３Ｄ、ジャンル音声テーブル４１３Ｅ、及び分野音
声テーブル４１３Ｆが参照される。これらの各音声テー
ブルの音声データ部に登録される単語は、音素の系列等
の解析パラメータによって構成される。

【００５３】コマンド音声テーブル４１３Ｂは、図１０
に示すように、例えば、「戻る」，「欲しい」，・・・・，
「の」，・・・・等の、商品販売情報処理端末装置４の処理
に対するコマンドに関する単語の音声データがそれぞれ
固有のコマンドＩＤと対応づけられることによって構成
されている。利用者が「戻る」と発話したと認識された
場合には１つ前の案内画面に戻る、「欲しい」と発話し
たと認識された場合には選択中のコンテンツを購入する
ことを確認する等の処理が行われる。また、「の」のよ
うな助詞に対しては、利用者が「Ａ社 の Ｚファンタ
ジー」と発話したと認識された場合に、後述するコンテ
ンツネームマスター４１３Ｇにおいて、メーカーが「Ａ
社」にリンクされた「Ｚファンタジー」を要求されたと
解析して処理を行うアルゴリズムが対応づけられる。

【００５４】コンテンツ音声テーブル４１３Ｃは、図１
１に示すように、例えば、「○○○」，「×××」，・・
・・，「Ｘの冒険」，「Ｙ物語」，「Ｚファンタジー」，
・・・・等の、商品販売情報処理端末装置４によって提供さ
れるコンテンツに関する単語の音声データがそれぞれ固
有のコンテンツＩＤと対応づけられることによって構成
されている。

【００５５】メーカー音声テーブル４１３Ｄは、図１２
に示すように、例えば、「Ｐレコード」，「Ｑレコー
ド」，・・・・，「Ａ社」，「Ｂ社」，「Ｃ社」，・・・・等
の、商品販売情報処理端末装置４によって提供されるコ
ンテンツを扱うメーカーに関する単語の音声データがそ
れぞれ固有のメーカーＩＤと対応づけられることによっ
て構成されている。

【００５６】ジャンル音声テーブル４１３Ｅは、図１３
に示すように、例えば、「ロック」，「ジャズ」，・・・
・，「シューティング」，「ＲＰＧ」，「シミュレーシ
ョン」，・・・・等の、商品販売情報処理端末装置４によっ
て提供されるコンテンツの特定分野内のジャンルに関す
る単語の音声データがそれぞれ固有のジャンルＩＤと対
応づけられることによって構成されている。

【００５７】分野音声テーブル４１３Ｆは、図１４に示
すように、例えば、「音楽」，「映像」，「ゲーム」，
「チケット」，「プリント」，・・・・等の、商品販売情報
処理端末装置４によって提供されるコンテンツのメニュ
ー内の分野に関する単語の音声データがそれぞれ固有の
分野ＩＤと対応づけられることによって構成されてい
る。

【００５８】図８において、上述したコマンド音声テー
ブル４１３Ｂ内の単語のみが認識された場合には、後述
する案内出力処理に移行する。また、案内表示の項目に
関する音声テーブルであるコンテンツ音声テーブル４１
３Ｃ、メーカー音声テーブル４１３Ｄ、ジャンル音声テ
ーブル４１３Ｅ、及び分野音声テーブル４１３Ｆ内の単
語が認識された場合には、以下に説明するそれぞれに対
応するネームマスターに設定された項目のリンク状態に
関する情報を参照してメニュー体系を構築する。

【００５９】コンテンツネームマスター４１３Ｇは、図
１５に示すように、例えば、「○○○」，「×××」，
・・・・，「Ｘの冒険」，「Ｙ物語」，「Ｚファンタジ
ー」，・・・・等の、商品販売情報処理端末装置４によって
提供されるコンテンツに関する単語のテキストデータが
それぞれ固有のコンテンツＩＤ、メーカーＩＤ、ジャン
ルＩＤ、及び分野ＩＤと対応づけられることによって構
成されている。このコンテンツネームマスター４１３Ｇ
のネーム部のテキストデータと、コンテンツ音声テーブ
ル４１３Ｃの音声データ部のデータのそれぞれに対応づ
けられるコンテンツＩＤは共通であり、１対１に対応し
ている。

【００６０】そして、コンテンツデータマスター４１３
Ｈには、図１６に示すように、コンテンツ音声テーブル
４１３Ｃ、及びコンテンツネームマスター４１３Ｇのコ
ンテンツＩＤと１対１に対応するそれぞれのコンテンツ
データが格納されている。例えば、「Ｘの冒険のデー
タ」は、「Ｘの冒険」というゲームタイトルの紹介文、
定価、発売日等のデータである。

【００６１】メーカーネームマスター４１３Ｉは、図１
７に示すように、例えば、「Ｐレコード」，「Ｑレコー
ド」，・・・・，「Ａ社」，「Ｂ社」，「Ｃ社」，・・・・等
の、商品販売情報処理端末装置４によって提供されるコ
ンテンツを扱うメーカーに関する単語のテキストデータ
がそれぞれ固有のメーカーＩＤと対応づけられることに
よって構成されている。このメーカーネームマスター４
１３Ｉのネーム部のテキストデータと、メーカー音声テ
ーブル４１３Ｄの音声データ部のデータのそれぞれに対
応づけられるメーカーＩＤは共通であり、１対１に対応
している。

【００６２】ジャンルネームマスター４１３Ｊは、図１
８に示すように、例えば、「ロック」，「ジャズ」，・・
・・，「シューティング」，「ＲＰＧ」，「シミュレーシ
ョン」，・・・・等の、商品販売情報処理端末装置４によっ
て提供されるコンテンツの特定分野内のジャンルに関す
る単語のテキストデータがそれぞれ固有のジャンルＩＤ
と対応づけられることによって構成されている。このジ
ャンルネームマスター４１３Ｊのネーム部のテキストデ
ータと、ジャンル音声テーブル４１３Ｅの音声データ部
のデータのそれぞれに対応づけられるジャンルＩＤは共
通であり、１対１に対応している。

【００６３】分野ネームマスター４１３Ｋは、図１９に
示すように、例えば、「音楽」，「映像」，「ゲー
ム」，「チケット」，「プリント」，・・・・等の、商品販
売情報処理端末装置４によって提供されるコンテンツの
メニュー内の分野に関する単語のテキストデータがそれ
ぞれ固有の分野ＩＤと対応づけられることによって構成
されている。この分野ネームマスター４１３Ｋのネーム
部のテキストデータと、分野音声テーブル４１３Ｆの音
声データ部のデータのそれぞれに対応づけられる分野Ｉ
Ｄは共通であり、１対１に対応している。

【００６４】上述のように、項目に関する各音声テーブ
ルと各ネームマスターは、固有のコンテンツＩＤによっ
て１対１に対応しているが、音声認識処理時には、音声
データを格納した音声テーブルのみを検索することによ
り、処理の高速化に貢献することができる。そして、コ
ンテンツネームマスター４１３Ｇに登録されたリンク情
報によって、各コンテンツとメーカー、ジャンル、及び
分野を対応づけることができる。

【００６５】例えば、図１５において、ＩＤ「１２３４
７」の「Ｚファンタジー」には、メーカーＩＤとして
「２４」、ジャンルＩＤとして「３２２」、分野ＩＤと
して「２」がそれぞれ対応づけられているが、メーカー
ＩＤ「２４」は、図１７に示すメーカーネームマスター
４１３Ｉを参照すると「Ａ社」であり、ジャンルＩＤ
「３２２」は、図１８に示すジャンルネームマスター４
１３Ｊを参照すると「ＲＰＧ」であり、分野ＩＤ「２」
は、図１９に示す分野ネームマスター４１３Ｋを参照す
ると「ゲーム」であるから、「Ｚファンタジー」は、Ａ
社から発売のＲＰＧゲームであることがリンク情報によ
り判明する。そして、これらの情報と、コンテンツデー
タマスター４１３Ｈに格納されたデータとが、後述する
案内出力処理によって利用客に提示される。

【００６６】また、例えば、利用客が「ＲＰＧ」と発話
したと認識された場合には、図１８に示すジャンルネー
ムマスター４１３Ｊを参照するとジャンルＩＤは「３２
２」であるから、図１５に示すコンテンツネームマスタ
ー４１３Ｇに登録されたジャンルＩＤが「３２２」であ
るコンテンツが抽出される。すなわち、「Ｘの冒険」，
「Ｙ物語」，「Ｚファンタジー」，・・・・が抽出され、後
述する案内出力処理によって利用客に提示される。

【００６７】図８において、上述した音声認識処理によ
ってコマンド音声テーブル４１３Ｂ内の単語のみが認識
された場合、または項目に関する単語が認識された後
に、コンテンツネームマスター４１３Ｇによってメニュ
ー体系が構築された場合には、続いて、案内文データテ
ーブル４１３Ｌに基づく案内出力処理に移行する。

【００６８】案内文データテーブル４１３Ｌは、図２０
に示すように、例えば、「ご希望のメニューをお選びく
ださい。」，「ご希望の商品をお選びください。」，・・
・・，「あなたが選択した商品です。」，「ご希望の商品
は見つかりませんでした。」，「この商品を購入します
か?」，・・・・等の案内文データがそれぞれ固有の案内文
ＩＤ、背景画像ＩＤ、文字修飾ＩＤ、コマンドボタンＩ
Ｄ、及び音声特徴ＩＤと対応づけられることによって構
成されている。

【００６９】背景画像テーブル４１３Ｍは、図２１に示
すように、例えば、「青、ベタ」，「緑、網掛け」，・・
・・等の、商品販売情報処理端末装置４のメイン表示部４
０３に表示される案内表示画面の背景画像データがそれ
ぞれ固有の背景画像ＩＤと対応づけられることによって
構成されている。この背景画像テーブル４１３Ｍに登録
される背景画像データは、図２１に例示したように、色
及び塗りつぶし形態を指定することとしてもよいし、ビ
ットマップ、ＪＰＥＧやその他の画像形式で保存された
データを指定することとしてもよい。

【００７０】文字修飾テーブル４１３Ｎは、図２２に示
すように、例えば、「ゴシック、２４ｐｔ（ポイン
ト）」，「明朝、２０ｐｔ」，・・・・等の、商品販売情報
処理端末装置４のメイン表示部４０３に表示される案内
表示画面の前記案内文データの文字修飾データがそれぞ
れ固有の文字修飾ＩＤと対応づけられることによって構
成されている。この文字修飾テーブル４１３Ｎに登録さ
れる文字修飾データは、図２２に例示したように、フォ
ント名及びポイント数を指定することとしてもよいし、
更に、太字、斜体字、下線付き、文字色等のその他の書
式や、変形の形態（影文字、グラデーション、回転、ア
ーチ状等）を指定することとしてもよい。

【００７１】コマンドボタンテーブル４１３Ｏは、図２
３に示すように、例えば、「情報ボタン」，「上位ボタ
ン」，「下位ボタン」，・・・・等の、商品販売情報処理端
末装置４のメイン表示部４０３に表示される案内表示画
面に配置されるコマンドボタンに関するデータがそれぞ
れ固有のコマンドボタンＩＤと対応づけられることによ
って構成されている。例えば、「情報ボタン」は、利用
客が更に詳しい情報が欲しいときに指示操作することに
より詳細情報を提示するためのボタンであり、「上位ボ
タン」は、階層構造のメニュー体系において上位に位置
する項目へジャンプするためのリンクボタンであり、
「下位ボタン」は、階層構造のメニュー体系において下
位に位置する項目へジャンプするためのリンクボタンで
ある。

【００７２】音声特徴テーブル４１３Ｐは、図２４に示
すように、例えば、「通常音声」，「確認音声」，「警
告音声」，・・・・等の、商品販売情報処理端末装置４の音
声合成部４０６のスピーカ４０６ａ，４０６ｂから出力
される音声の特徴を示すデータがそれぞれ固有の音声特
徴ＩＤと対応づけられることによって構成されている。

【００７３】取得音声データ４１３Ｑは、後述する項目
処理（図２６参照）やコマンド処理（図２７参照）にお
いてメニュー利用の姿勢であると判別された場合等に、
利用客の発話内容と音声認識部４０５による認識処理の
結果が一致したと判断されて、取得した音声サンプルと
音声認識部４０５から入力されたＩＤとが対応づけて格
納されることにより作成されるデータである。このよう
にして作成された取得音声データ４１３Ｑは、定期的に
（例えば、毎日定時に）商品販売情報管理装置３に対し
て送信される。

【００７４】以上が、ＨＤドライブ４１３に装着される
ＨＤに格納される各種データについての説明である。

【００７５】スキャナ４１４は、商品販売情報処理端末
装置４が提供するコピーサービスのための画像読取部で
あり、読み取った画像をＣＰＵ４０１に対して出力す
る。プリンタ４１５は、商品販売情報処理端末装置４が
提供するコピーサービス、プリントサービス等のための
印刷部であり、ＣＰＵ４０１から入力される印刷データ
を印刷する。

【００７６】メモリカードドライブ４１６、及びディス
クメディアドライブ４１７は、交換及び書き換え可能な
記録媒体としてのメモリーカードまたはディスクメディ
アに対するデータの読み書きを行う。また、予備ドライ
ブ４１８は、その他の記録媒体として、例えば、ＦＤ
（Floppy Disk ）、コンパクトフラッシュ（CompactFla
sh：商標名）、ＤＶＤ等の各種記録媒体に対するデータ
の読み書きを行うドライブを適宜装着する。

【００７７】以上が、図２に示す商品販売情報処理端末
装置４の概略内部構成を示す図５の各部についての説明
である。

【００７８】次いで図６は、図５に示すような内部構成
によって実現される商品販売情報処理端末装置４の概略
外観の一例を示す図である。この図６に示すように、商
品販売情報処理端末装置４には、操作台部４ａの上面
に、表示情報が切り替わるメイン表示部４０３兼用のタ
ッチパネル等の入力部４０２、左右のスピーカ４０６
ａ，４０６ｂ、及び用紙挿入・排出部４２１が備えられ
ている。

【００７９】また、操作台部４ａの上面の奥方に位置す
る起立部４ｂの前面に、左右のマイク４０５ａ，４０５
ｂとその間のサブ表示部４０４、及びメモリカードドラ
イブ４１６のメモリカード挿入口、左右のマイク４０５
ａ，４０５ｂの上方の左右の推奨表示部４２０とその間
のレンズ４０７ａが備えられている。

【００８０】更に、操作台部４ａの前面上部に、レシー
ト発行部４０９、チケット発行部４１０、及びディスク
メディアドライブ４１７のディスクメディア挿入口が備
えられ、その下方には、複数の予備ドライブ４１８が備
えられている。また、操作台部４ａの側面には、その手
前側の上部に物掛け部４２２が備えられている。この物
掛け部４２２は、図示例では、買い物袋や傘等の手荷物
を掛けておけるような多目的フックであるが、他の形状
のものでも良い。

【００８１】図６において、入力部４０２はタッチパネ
ル等によって構成され、メイン表示部４０３は液晶表示
パネル等によって構成されており、両者は一体となって
いる。そして、メイン表示部４０３に表示されるメニュ
ーのボタン表示を利用客が指で指示することが入力部４
０２に対する入力操作となる。メイン表示部４０３の表
示内容の視野角を調整することにより、例えば、商品販
売情報処理端末装置４を利用する利用客の背後を通りか
かった他人等に案内表示内容を見られてしまうことがな
く、利用客のプライバシーを守ることが可能となる。

【００８２】また、この入力部４０２とメイン表示部４
０３が一体となったパネルは、図６の両矢印で示すよう
な方向に開閉可能であるように左端部をヒンジ等の回動
部材で固定されている。そして、当該パネルの下部には
スキャナ４１４の読取部が位置しており、当該パネル
は、利用客が商品販売情報処理端末装置４を複写機とし
て利用する際の蓋部としても機能する。商品販売情報処
理端末装置４を複写機として利用する際には、用紙挿入
・排出部４２１の用紙挿入口から被複写原稿を挿入する
ことも可能である。また、複写により印刷された用紙は
用紙挿入・排出部４２１の用紙排出口から排出される。

【００８３】スピーカ４０６ａ，４０６ｂは、図６に示
すように天井面に向けられているため、店内に流れる音
楽等の他の音を妨害してしまうことや、店内の他の人に
案内内容を聞かれてしまう可能性を低くすることができ
る。更に、このスピーカ４０６ａ，４０６ｂとして指向
性の高いスピーカを使用することによって、商品販売情
報処理端末装置４の利用客にのみ案内音声が聞こえるよ
うにすることが可能となる。

【００８４】マイク４０５ａ，４０５ｂについても同様
に、指向性の高いマイクを使用することによって商品販
売情報処理端末装置４の利用客の発話内容以外の音声を
極力拾わないようにすることができる。また、このマイ
ク４０５ａ，４０５ｂは、商品販売情報処理端末装置４
の起立部４ｂに対して脱着可能であるため、周辺の道路
からの騒音等が大きいために音声認識の精度が低下して
しまう場合などには、脱状態にしてマイクスタンド（図
示せず）等によって利用客の口元に設置することもでき
る。そして、この場合、脱状態の時には接話マイクロホ
ンに、着状態の時には指向性マイクロホンに自動的に切
り替えて音声を入力することができる構成とすることに
よって、周囲の雑音を極力排除することができる。

【００８５】前述のメイン表示部４０３が商品販売情報
処理端末装置４の利用客のみに対する案内表示であった
のに対して、サブ表示部４０４は、商品販売情報処理端
末装置４が扱うコンテンツを店舗Ａ内の客に対して広く
宣伝するための広告や、新着情報を常時表示するための
表示部であるため、表示画面が垂直になるように設置さ
れている。また、推奨表示部４２０は、新商品や売れ筋
商品などの推奨コンテンツの案内カードを格納するフォ
ルダである。このフォルダに格納される案内カードは、
商品引き替えカードを兼ねており利用客は案内カードを
レジに持参することによって商品を購入することもでき
る。あるいは、推奨表示部４２０をＣＲＴや液晶表示パ
ネルによって構成することとしてもよい。

【００８６】レンズ４０７ａは、デジタルカメラ４０７
のレンズ部分であり、監視用として利用するほか、利用
客の存在を感知することによりメイン表示部４０３の表
示を通常時の広告画面からメニュー表示に切り替えた
り、利用客の姿勢を判別することにより利用客の発話内
容がメニュー操作の意図で発話されたものか否かを判別
したりするために利用することができる。また、デジタ
ルカメラ４０７によって、商品販売情報処理端末装置４
を簡易型の写真撮影装置として利用することもできる。
この写真撮影機能により、証明写真や遊技目的の写真を
撮影し、その場で現像するサービスを利用客に対して提
供することもできる。

【００８７】メモリカードドライブ４１６に挿入するメ
モリカードの利用形態としては様々なものが考えられ
る。例えば、予め個人情報を記録したメモリカードを挿
入することにより、会員のみが受けられるサービスが存
在する場合などに個人認証を行うことができる。また、
利用客が市販のデジタルカメラで撮影した画像を記録し
たメモリカードを持参することにより、画像印刷のサー
ビスを提供することもできる。ディスクメディアドライ
ブ４１７に対してもメモリカードドライブ４１６と同様
の利用形態が考えられる。また、予備ドライブ４１８と
してその他の記録媒体用のドライブを設置することによ
り、ＦＤ、コンパクトフラッシュ（商標名）、ＤＶＤ等
の様々な記録媒体を利用することが可能となる。

【００８８】レシート発行部４０９、チケット発行部４
１０から発行されるレシート、チケット等は、専用の用
紙に印字されてそれぞれの排出口から排出される。

【００８９】以上が、図５に示すような内部構成によっ
て実現される商品販売情報処理端末装置４の概略外観の
一例を示す図６の各部についての説明である。

【００９０】次に動作を説明する。まず、図２５に示す
フローチャートを参照して商品販売情報処理端末装置４
によって実行されるコンテンツ表示処理について説明す
る。

【００９１】店舗Ａ内に設置された商品販売情報処理端
末装置４は、通常時においては、サブ表示部４０４に広
告や、新着情報等を表示するとともに、メイン表示部４
０３の画面にも表示画面の焼き付き防止を兼ねるために
常時変化するコンテンツ情報を表示しているとともに、
監視用を兼ねたデジタルカメラ４０７は、常時、レンズ
４０７ａによって画像の取込を行っている（ステップＳ
１）。この状態の商品販売情報処理端末装置４の操作台
部４ａの前に利用客が近づき、デジタルカメラの取込画
像がピント合焦範囲内の画像を取り込んだと判別される
と（ステップＳ２）、ＣＰＵ４０１は、メイン表示部４
０３に対して表示データを出力してメインメニュー画面
を表示させる（ステップＳ３）。

【００９２】メインメニュー画面表示後、ＣＰＵ４０１
は、タッチパネル等の入力部４０２に対する指示入力、
あるいは音声認識部４０５のマイク４０５ａ，４０５ｂ
に対する音声入力を待機する状態（ステップＳ４）に移
行し、タッチパネル等の入力部４０２に対する指示入力
があると判別された場合には、タッチパネル操作に対応
する処理を行い（ステップＳ５）、音声認識部４０５の
マイク４０５ａ，４０５ｂに対する音声入力がなされた
と判別された場合には、音声入力に対応する処理として
まず音声パターンの判別を行う（ステップＳ６）。

【００９３】このステップＳ６における音声パターン判
別は以下のように行われる。すなわち、入力された音声
はマイク４０５ａ，４０５ｂによって電気信号に変換さ
れ、更に音声認識部４０５によって周波数解析をなされ
て音素データ等のパラメータに変換される。そして、該
パラメータが音声パターンテーブル４１３Ａに格納され
た複数の音声パターンと比較されて、最もパラメータの
パターンが近い音声パターンが選択される。この処理は
図８に示す周波数解析の処理に該当する。なお、周波数
解析をなされた結果としての音素データ等のパラメータ
は、後述する項目処理（図２６参照）やコマンド処理
（図２７参照）において、音声認識辞書学習用のデータ
として保存されるため、音声サンプルとしてＲＡＭ４１
２に保持される。

【００９４】次いで、音声認識部４０５は、音素データ
等のパラメータに基づいて、音素認識処理、単語認識処
理、文認識処理の順序で音声認識処理を行う（ステップ
Ｓ７）。この際の単語認識辞書として、コマンド音声テ
ーブル４１３Ｂ、コンテンツ音声テーブル４１３Ｃ、メ
ーカー音声テーブル４１３Ｄ、ジャンル音声テーブル４
１３Ｅ、及び分野音声テーブル４１３Ｆが参照される。
そして、音声認識部４０５は、認識した単語を確定する
と、該確定した単語が登録された音声テーブルがいずれ
の音声テーブルであるかを示す識別情報と、対応するＩ
ＤとをＣＰＵ４０１に対して出力する。この処理は図８
に示す音声認識の処理に該当する。

【００９５】そして、ＣＰＵ４０１は、音声認識部４０
５から入力された前記識別情報を参照して、それがコマ
ンド音声テーブル４１３Ｂであるか、項目に関する単語
の音声テーブル（コンテンツ音声テーブル４１３Ｃ、メ
ーカー音声テーブル４１３Ｄ、ジャンル音声テーブル４
１３Ｅ、分野音声テーブル４１３Ｆ）であるかによって
入力音声種を判別する（ステップＳ８）。

【００９６】更に、ＣＰＵ４０１は、ステップＳ８にお
いて前記識別情報が項目に関する単語の音声テーブルを
示すものであると判別された場合には、後述する項目処
理（ステップＳ９：図２６参照）を行った後に再び入力
待機状態に移行し、コマンド音声テーブル４１３Ｂを示
すものであると判別された場合には、音声認識部４０５
から入力されたコマンドＩＤがメニュー操作を終了する
コマンドに関する単語を示すＩＤであるか否かを判別す
る（ステップＳ１０）。そして、ＣＰＵ４０１は、ステ
ップＳ１０において、メニュー操作を終了するコマンド
に関する単語を示すコマンドＩＤであると判別された場
合には、一連のコンテンツ表示処理を終了し、それ以外
の単語を示すコマンドＩＤであると判別された場合に
は、後述するコマンド処理（ステップＳ１１：図２７参
照）を行った後に再び入力待機状態に移行する。

【００９７】次に、図２６に示すフローチャートを参照
して、図２５のステップＳ９において実行される項目処
理について説明する。

【００９８】この項目処理において、まず、ＣＰＵ４０
１は、図２５のステップＳ７において音声認識部４０５
から入力された前記識別情報を参照して、それがコンテ
ンツ音声テーブル４１３Ｃを示すものであるか否かを判
別し（ステップＳ２０）、コンテンツ音声テーブル４１
３Ｃを示すものである場合には、コンテンツネームマス
ター４１３Ｇ、及びコンテンツデータマスター４１３Ｈ
に登録されたデータの内、音声認識部４０５から入力さ
れたコンテンツＩＤに対応するデータを取得してＲＡＭ
４１２に格納する。

【００９９】一方、ステップＳ２０において、前記識別
情報がコンテンツ音声テーブル４１３Ｃを示すものでな
いと判別された場合には、当該識別情報が示す音声テー
ブルに対応するネームマスターを参照する（ステップＳ
２２）。例えば、図２５のステップＳ７において音声認
識されて特定された単語が「ＲＰＧ」であった場合に
は、ＣＰＵ４０１は、ジャンル音声テーブル４１３Ｅに
よってジャンルＩＤが「３２２」であると特定し、ジャ
ンル音声テーブル４１３Ｅに対応するジャンルネームマ
スター４１３ＪのジャンルＩＤ「３２２」のデータとし
て「ＲＰＧ」のテキストデータを取得してＲＡＭ４１２
に格納する。

【０１００】次いで、ＣＰＵ４０１は、コンテンツネー
ムマスター４１３Ｇを参照して、前記識別情報が示す音
声テーブルに対応する項目のコンテンツＩＤが、音声認
識部４０５から入力されたＩＤと同一であるコンテンツ
のＩＤ、ネーム部のテキストデータ、及びその他の項目
ＩＤを取得する（ステップＳ２３）。例えば、図２５の
ステップＳ７において音声認識されて特定された単語が
「ＲＰＧ」であった場合には、ＣＰＵ４０１は、ジャン
ル音声テーブル４１３ＥによってジャンルＩＤが「３２
２」であると特定されているので、コンテンツネームマ
スター４１３Ｇに登録されたジャンルＩＤが「３２２」
であるコンテンツ、［「１２３４５」（コンテンツＩ
Ｄ），「Ｘの冒険」（ネーム部），「２４」（メーカー
ＩＤ），「２」（分野ＩＤ）］、［「１２３４６」，
「Ｙ物語」，「２４」，「２」］、［「１２３４７」，
「Ｚファンタジー」，「２４」，「２」］，・・・・を取得
してＲＡＭ４１２に格納する。

【０１０１】上記ステップＳ２０〜ステップＳ２３の処
理は、図８に示すメニュー体系処理に該当する。

【０１０２】ステップＳ２１、またはステップＳ２３の
処理によりリンク情報を取得すると、ＣＰＵ４０１は、
デジタルカメラ４０７が取り込んだ画像を解析して利用
客の姿勢を判別する（ステップＳ２４）。例えば、取り
込んだ画像に対して２値化処理を行い、黒値領域の分布
状態によって利用客の顔の向きを判別することができ
る。

【０１０３】そして、ＣＰＵ４０１は、このような処理
により判別した利用客の姿勢が、商品販売情報処理端末
装置４に正対し、メニューを利用する姿勢であるか否か
を判別し（ステップＳ２５）、メニューを利用する姿勢
であると判別された場合には、図２５のステップＳ６に
おける音声認識処理時にＲＡＭ４１２に保持されていた
音声サンプルと前記音声認識部４０５から入力されたＩ
Ｄとを対応づけて取得音声データ４１３Ｑに格納する
（ステップＳ２６）。

【０１０４】一方、ステップＳ２５において、メニュー
を利用する姿勢でないと判別された場合には、ＣＰＵ４
０１は、メイン表示部４０３に項目をジャンプすること
を確認する画面の表示データを出力して表示画面に表示
させ（ステップＳ２８）、この確認画面に表示されたボ
タン（例えば、［はい］と［いいえ］）を利用客が操作
することにより、項目をジャンプしてもよいと指示入力
されたか否かを、入力部４０２から入力される座標デー
タに基づいて判別する（ステップＳ２９）。

【０１０５】そして、ステップＳ２９において、項目を
ジャンプしてもよいと指示入力されたと判別された場合
には、ＣＰＵ４０１は、ステップＳ２６に移行して図２
５のステップＳ６における音声認識処理時にＲＡＭ４１
２に保持されていた音声サンプルと前記音声認識部４０
５から入力されたＩＤとを対応づけて取得音声データ４
１３Ｑに格納し、項目をジャンプしないと指示入力され
たと判別された場合には、一連の項目処理を終了して図
２５に示すコンテンツ表示処理のステップＳ４における
入力待機状態に移行する。

【０１０６】ステップＳ２６の処理を終えたＣＰＵ４０
１は、案内文データテーブル４１３Ｌを参照し、上述の
ステップＳ２０〜ステップＳ２３の処理において取得し
たリンクデータに基づいて、案内表示データをメイン表
示部４０３に対して出力してメイン表示部４０３の表示
画面に表示させるとともに、案内音声データを音声合成
部４０６に対して出力してスピーカ４０６ａ，４０６ｂ
から案内音声を出力させ（ステップＳ２７）、一連の項
目処理を終了して図２５に示すコンテンツ表示処理のス
テップＳ４における入力待機状態に移行する。このステ
ップＳ２７の処理は、図８に示す案内出力処理に該当す
る。

【０１０７】例えば、利用客が「Ｚファンタジー」と発
話し、図２５のステップＳ７において音声認識されて特
定された単語が「Ｚファンタジー」であった場合には、
ＣＰＵ４０１は、項目処理プログラムに従って、案内文
データテーブル４１３Ｌの案内文ＩＤ「１１１」のデー
タを読み出して、案内文データ部の「あなたが選択した
商品です。」というテキストデータをメイン表示部４０
３の表示画面に表示させる。このとき、背景画像ＩＤは
「１」であるため、背景画像テーブル４１３Ｍを参照し
て、背景は「緑、網掛け」の画像となり、文字修飾ＩＤ
は「１」であるため、文字修飾テーブル４１３Ｎを参照
して、「あなたが選択した商品です。」の文字は「明
朝、２０ｐｔ」で表示され、コマンドボタンＩＤは
「０、１」であるため、コマンドボタンテーブル４１３
Ｏを参照して、コマンドボタンとしては「情報ボタン」
と「上位ボタン」が表示されることとなる。

【０１０８】このコマンドボタンの内、「情報ボタン」
は、利用客が更に詳しい情報が欲しいときに指示操作す
ることにより詳細情報を提示するためのボタンであり、
図３３〜図３６に示す表示画面の図において、右下部分
に位置するボタンである。また、「上位ボタン」は、上
位に位置する項目へジャンプするためのリンクボタンで
あり、図３４〜図３７に示す表示画面の図において、最
上列に位置するボタンである。この例の場合には、階層
構造を下りてきたことにより「Ｚファンタジー」にたど
り着いたのではなく直接ジャンプしてきたので、コンテ
ンツネームマスター４１３Ｇによってリンクされている
メーカーＩＤ「２４」、ジャンルＩＤ「３２２」、及び
分野ＩＤ「２」の全ての上位ボタンが表示されることと
なる。例えば、メーカーＩＤ「２４」に対応して、メー
カーネームマスター４１３ＩのＩＤ「２４」に対応づけ
られたテキストデータとして「Ａ社」が取得されている
ので、上位ボタンの内の一つには、「Ａ社」の文字が表
示されることとなる。

【０１０９】また、音声特徴ＩＤは「０」であるため、
音声特徴テーブル４１３Ｐを参照して、案内文データ部
の「あなたが選択した商品です。」というテキストデー
タは、「通常音声」の音声パラメータを使用して音声合
成部４０６によって音声合成されてスピーカ４０６ａ，
４０６ｂから出力される。更に、「Ｚファンタジー」と
いうテキストデータも同様に音声として出力される。

【０１１０】また、例えば、利用客が「ＲＰＧ」と発話
し、図２５のステップＳ７において音声認識されて特定
された単語が「ＲＰＧ」であった場合には、ＣＰＵ４０
１は、項目処理プログラムに従って、案内文データテー
ブル４１３Ｌの案内文ＩＤ「１」のデータを読み出し
て、案内文データ部の「ご希望の商品をお選びくださ
い。」というテキストデータをメイン表示部４０３の表
示画面に表示させる。このとき、背景画像ＩＤは「０」
であるため、背景画像テーブル４１３Ｍを参照して、背
景は「青、ベタ」の画像となり、文字修飾ＩＤは「３」
であるため、文字修飾テーブル４１３Ｎを参照して、
「ご希望の商品をお選びください。」の文字は「ゴシッ
ク、２４ｐｔ」で表示され、コマンドボタンＩＤは
「０、２」であるため、コマンドボタンテーブル４１３
Ｏを参照して、コマンドボタンとしては「情報ボタン」
と「下位ボタン」が表示されることとなる。この際の表
示画面は、図３６に示す表示画面の例の内最上列に位置
するボタンを省いたものと同様の表示画面となる（細部
は異なる）。

【０１１１】コマンドボタンの内、「下位ボタン」は、
下位に位置する項目へジャンプするためのリンクボタン
である。この例においては、ステップＳ２３において、
コンテンツネームマスター４１３Ｇに登録されたジャン
ルＩＤが「３２２」であるコンテンツ、［「１２３４
５」（コンテンツＩＤ），「Ｘの冒険」（ネーム部），
「２４」（メーカーＩＤ），「２」（分野ＩＤ）］、
［「１２３４６」，「Ｙ物語」，「２４」，「２」］、
［「１２３４７」，「Ｚファンタジー」，「２４」，
「２」］，・・・・が取得されてＲＡＭ４１２に格納されて
いるので、下位ボタンとして、「Ｘの冒険」，「Ｙ物
語」，「Ｚファンタジー」，・・・・のそれぞれのテキスト
データを表示したボタンが表示される（図３６は実際の
表示と細部が異なっている）。

【０１１２】また、音声特徴ＩＤは「０」であるため、
音声特徴テーブル４１３Ｐを参照して、案内文データ部
の「ご希望の商品をお選びください。」というテキスト
データは、「通常音声」の音声パラメータを使用して音
声合成部４０６によって音声合成されてスピーカ４０６
ａ，４０６ｂから出力される。更に、「Ｘの冒険」，
「Ｙ物語」，「Ｚファンタジー」，・・・・というテキスト
データも同様に音声として出力される。

【０１１３】次に、図２７に示すフローチャートを参照
して、図２５のステップＳ１１において実行されるコマ
ンド処理について説明する。

【０１１４】このコマンド処理において、まず、ＣＰＵ
４０１は、図２５のステップＳ７において音声認識部４
０５から入力されたコマンドＩＤを取得して（ステップ
Ｓ４０）、当該ＩＤに対応するコマンドがその時点での
表示画面において実行可能なコマンドであるか否かを判
別する（ステップＳ４１）。そして、ステップＳ４１に
おいて、実行可能なコマンドでないと判別された場合に
は、ＣＰＵ４０１は、エラーメッセージを画面表示、及
び音声の両方で出力し（ステップＳ４２）、一連のコマ
ンド処理を終了して図２５に示すコンテンツ表示処理の
ステップＳ４における入力待機状態に移行する。例え
ば、図３３に示すような最初のメニュー画面において
は、前の画面に戻ることを指示するコマンドは実行する
ことができないため、その旨を伝えるエラーメッセージ
を出力することとなる。

【０１１５】一方、ステップＳ４１において、実行可能
なコマンドであると判別された場合には、ＣＰＵ４０１
は、図２６のステップＳ２４における処理と同様に、デ
ジタルカメラ４０７が取り込んだ画像を解析して利用客
の姿勢を判別する（ステップＳ４３）。そして、ＣＰＵ
４０１は、ステップＳ４３の処理により判別した利用客
の姿勢が、商品販売情報処理端末装置４に正対し、メニ
ューを利用する姿勢であるか否かを判別し（ステップＳ
４４）、メニューを利用する姿勢であると判別された場
合には、図２５のステップＳ６における音声認識処理時
にＲＡＭ４１２に保持されていた音声サンプルと前記音
声認識部４０５から入力されたＩＤとを対応づけて取得
音声データ４１３Ｑに格納する（ステップＳ４５）。

【０１１６】一方、ステップＳ４４において、メニュー
を利用する姿勢でないと判別された場合には、ＣＰＵ４
０１は、メイン表示部４０３にコマンドを実行すること
を確認する画面の表示データを出力して表示画面に表示
させ（ステップＳ４９）、この確認画面に表示されたボ
タン（例えば、［はい］と［いいえ］）を利用客が操作
することにより、コマンドを実行してもよいと指示入力
されたか否かを、入力部４０２から入力される座標デー
タに基づいて判別する（ステップＳ５０）。

【０１１７】そして、ステップＳ５０において、コマン
ドを実行してもよいと指示入力されたと判別された場合
には、ＣＰＵ４０１は、ステップＳ４５に移行して図２
５のステップＳ６における音声認識処理時にＲＡＭ４１
２に保持されていた音声サンプルと前記音声認識部４０
５から入力されたＩＤとを対応づけて取得音声データ４
１３Ｑに格納し、コマンドを実行しないと指示入力され
たと判別された場合には、一連の項目処理を終了して図
２５に示すコンテンツ表示処理のステップＳ４における
入力待機状態に移行する。

【０１１８】ステップＳ４５の処理を終えたＣＰＵ４０
１は、前記音声認識部４０５から入力されたコマンドＩ
Ｄに対応するコマンドプログラムをＲＡＭ４１２から読
みだして（ステップＳ４６）、実行する（ステップＳ４
７）。この際、案内文データテーブル４１３Ｌを参照
し、その時点での画面表示に対応するリンクデータに基
づいて、案内表示データをメイン表示部４０３に対して
出力してメイン表示部４０３の表示画面に表示させると
ともに、案内音声データを音声合成部４０６に対して出
力してスピーカ４０６ａ，４０６ｂから案内音声を出力
させ（ステップＳ４８）、一連のコマンド処理を終了し
て図２５に示すコンテンツ表示処理のステップＳ４にお
ける入力待機状態に移行する。このステップＳ４８の処
理は、図８に示す案内出力処理に該当する。

【０１１９】例えば、利用客が「戻る」と発話し、図２
５のステップＳ７において音声認識されて特定された単
語が「戻る」であった場合には、ＣＰＵ４０１は、コマ
ンドプログラムに従って一つ前の画面表示に戻る。

【０１２０】また、例えば、音声認識されて特定された
単語が「欲しい」であった場合には、ＣＰＵ４０１は、
コマンドプログラムに従って、案内文データテーブル４
１３Ｌの案内文ＩＤ「１１３」のデータを読み出して、
案内文データ部の「この商品を購入しますか?」という
テキストデータをメイン表示部４０３の表示画面に表示
させる。このとき、背景画像ＩＤは「６」であるため、
背景画像テーブル４１３Ｍを参照して対応する背景画像
を表示し、文字修飾ＩＤは「５」であるため、文字修飾
テーブル４１３Ｎを参照して対応する文字修飾を行い、
コマンドボタンＩＤは「０、５」であるため、コマンド
ボタンテーブル４１３Ｏを参照して対応するコマンドボ
タンを表示することとなる。

【０１２１】また、音声特徴ＩＤは「１」であるため、
音声特徴テーブル４１３Ｐを参照して、案内文データ部
の「この商品を購入しますか?」というテキストデータ
は、「確認音声」の音声パラメータを使用して音声合成
部４０６によって音声合成されてスピーカ４０６ａ，４
０６ｂから出力される。更に、選択中の商品、例えば
「Ｚファンタジー」というテキストデータも同様に音声
として出力される。

【０１２２】以上が、商品販売情報処理端末装置４によ
って実行されるコンテンツ表示処理についての説明であ
る。このコンテンツ表示処理によれば、利用客の音声を
音声認識した後、認識結果として特定された単語、及び
そのリンク関係をコンテンツネームマスター４１３Ｇか
ら取得してメニュー体系を構築した後、メイン表示部４
０３によって表示出力するとともに、音声合成部４０６
によって音声出力を行う。

【０１２３】したがって、商品販売情報処理端末装置４
の利用客は、階層構造を深く下りていくことによってコ
ンテンツにたどり着く煩雑さを感じることなく、希望す
るコンテンツの情報を直接的に容易に得ることができる
ため、商品販売情報処理端末装置４の使い勝手が向上す
る。

【０１２４】次に、図２８を参照して商品販売情報処理
システム１全体としての音声認識辞書学習処理について
説明する。本実施の形態において音声認識辞書とは、音
声パターンテーブル４１３Ａ、コマンド音声テーブル４
１３Ｂ、コンテンツ音声テーブル４１３Ｃ、メーカー音
声テーブル４１３Ｄ、ジャンル音声テーブル４１３Ｅ、
及び分野音声テーブル４１３Ｆを指す。

【０１２５】各地に点在する店舗Ａに設置された商品販
売情報処理端末装置４には、コンテンツ表示処理を示す
図２５のステップＳ６における音声パターン判別時に、
周波数解析処理の結果としての音素データ等のパラメー
タが音声サンプルとしてＲＡＭ４１２に保持されてい
る。そして、項目処理を示す図２６のステップＳ２５に
おいてメニュー利用の姿勢であると判別されるか、ある
いは、ステップＳ２９において項目ジャンプをする指示
入力であると判別されるかのいずれかの状態になると、
ＣＰＵ４０１は、利用客の発話内容と音声認識部４０５
による認識処理の結果が一致したと判断して、ＲＡＭ４
１２に保持されていた音声サンプルと音声認識部４０５
から入力されたＩＤとを対応づけて取得音声データ４１
３Ｑに格納する。また、ＣＰＵ４０１は、コマンド処理
においても同様の処理により音声サンプルとＩＤとを対
応づけて取得音声データ４１３Ｑに格納する。

【０１２６】このようにして生成された取得音声データ
４１３Ｑは、定期的に（例えば、毎日定時に）商品販売
情報管理装置３に対して送信される。商品販売情報管理
装置３は、図２８に示すように、各地に点在する店舗Ａ
に設置された商品販売情報処理端末装置４から送信され
た取得音声データ４１３Ｑを受信して、取得音声データ
３７ＡとしてＨＤドライブ３６内に格納する。そして、
商品販売情報管理装置３のＣＰＵ３１は、音声認識辞書
学習プログラムに従って取得音声データ３７Ａを解析し
て音声認識辞書の学習や容量の最適化を行い、学習済の
データを学習音声データ３７ＤとしてＨＤドライブ３６
内に格納する。

【０１２７】更に、図２８に示すように、ＣＰＵ３１
は、通信装置３４の送信処理を制御して学習音声データ
３７Ｄを各地に点在する店舗Ａに設置された商品販売情
報処理端末装置４に対して配信する。そして、商品販売
情報処理端末装置４は、商品販売情報管理装置３から受
信した学習音声データ３７Ｄに基づいて、音声パターン
テーブル４１３Ａ、コマンド音声テーブル４１３Ｂ、コ
ンテンツ音声テーブル４１３Ｃ、メーカー音声テーブル
４１３Ｄ、ジャンル音声テーブル４１３Ｅ、及び分野音
声テーブル４１３Ｆをそれぞれ更新する、あるいは差分
データの追加を行う。

【０１２８】このような音声認識辞書学習処理によっ
て、従来の音声認識装置においては困難であった不特定
話者の多数の音声サンプル収集を、各地に点在する店舗
Ａに設置された商品販売情報処理端末装置４からの取得
音声データ４１３Ｑを受信する商品販売情報管理装置３
によって容易に実現して、多数の音声サンプルを用いた
ことによって音声認識精度向上に有効な音声認識辞書学
習結果を、商品販売情報処理端末装置４にフィードバッ
クすることができるため、商品販売情報処理端末装置４
における音声認識処理の精度を向上させることができ、
利用客に対するサービスの質を向上させることができ
る。

【０１２９】また、商品販売情報処理端末装置４が設置
される店舗Ａ毎に周囲環境による定常雑音（近隣の道路
の騒音等）が異なることや、各店舗Ａに設置された商品
販売情報処理端末装置４を頻繁に利用する利用客の音声
に対する認識精度の向上を考慮すれば、各地に点在する
店舗Ａに設置された商品販売情報処理端末装置４毎に音
声認識辞書学習処理を行うことが有効である。この際、
商品販売情報処理端末装置４は、ＨＤドライブ４１３内
に音声認識辞書学習処理プログラムを格納しており、こ
のプログラムに従い、ＨＤドライブ４１３に格納された
取得音声データ４１３Ｑに基づいて、音声パターンテー
ブル４１３Ａ、コマンド音声テーブル４１３Ｂ、コンテ
ンツ音声テーブル４１３Ｃ、メーカー音声テーブル４１
３Ｄ、ジャンル音声テーブル４１３Ｅ、及び分野音声テ
ーブル４１３Ｆをそれぞれ更新する、あるいは差分デー
タの追加を行う。

【０１３０】更に、以上説明した２種類の音声認識辞書
学習処理を併用することも可能である。そして、このよ
うな各店舗Ａ毎の環境の差異を考慮した音声認識辞書学
習処理によって、更に、商品販売情報処理端末装置４に
おける音声認識処理の精度を向上させることができ、利
用客に対するサービスの質を向上させることができる。

【０１３１】また、商品販売情報管理装置３から商品販
売情報処理端末装置４に対して新規コンテンツのデータ
としての追加データ３７Ｃを配信する際には、図２９に
示すように、例えば、関東圏、関西圏などの地域別の情
報を配信することが有効である。図２９においては、商
品販売情報管理装置３は、関東圏用、及び関西圏用の追
加データ３７Ｃをそれぞれ個別に有しており、関東圏に
属する商品販売情報処理端末装置４に対しては関東圏用
の追加データ３７Ｃを配信し、関西圏に属する商品販売
情報処理端末装置４に対しては関西圏用の追加データ３
７Ｃを配信する。このように、追加データ３７Ｃとして
複数種類のデータを用意して地域ごとに配信内容を変更
することにより、地域限定の商品等にも対応することが
可能となる。

【０１３２】この際、商品販売情報処理端末装置４がい
ずれの地域に属するかを判別するためには、例えば、商
品販売情報処理端末装置４から商品販売情報管理装置３
への送信処理時の認証処理において、認証情報（ログイ
ン名、パスワード等）によって判別する。

【０１３３】なお、本実施の形態においては、本発明の
情報提供システムを適用した一例として商品販売情報処
理システム１について詳細に説明したが、本発明を商品
以外の他の情報を提供するシステムに適用することも可
能である。

【０１３４】また、上記実施の形態において説明した商
品情報処理端末装置４は、マイク（音声入力部）とスピ
ーカ（音声応答部）を別個に設けたが、有線電話機のハ
ンドセットや無線電話機を備えるように構成しても良
い。すなわち、図６の商品販売情報処理端末装置４に対
して、操作台部４ａの右側面にハンドセット４９０を備
えた商品販売情報処理端末装置１００の変形例を示した
図３０のように、商品販売情報処理端末装置１００は、
上記図６に示した商品販売情報処理端末装置４の操作台
部４ａの右側面に、新たにハンドセット４９０と、フッ
ク４９０ａとを備えた構成としても良い。また、この場
合の商品販売情報処理端末装置１００の概略内部構成を
図３１に示す。この図３１において、ハンドセット４９
０は、音声認識部４０５と、音声合成部４０６とに接続
されており、音声認識部４０５は、ハンドセット４９０
と、マイク４０５ａ、４０５ｂとを、音声合成部４０６
は、ハンドセット４９０と、スピーカ４０６ａ、４０６
ｂとを、ハンドセット４９０の状態に応じて切り換えて
接続する。

【０１３５】このため、ハンドセット４９０が利用客に
より取り上げられると、ハンドセット４９０により垂下
されていたフック４９０ａによりハンドセット４９０が
利用状態となったことが検知され、マイク４０５ａ、４
０５ｂと、スピーカ４０６ａ、４０６ｂによる音声入力
と応答音声の出力が、音声認識部４０５及び音声合成部
４０６により、ハンドセット４９０に切り替わる。この
ため、利用客は、ハンドセット４９０のみによる音声入
力や応答音声の聴聞ができるため、利用客のプライバシ
ーを保護することができる。また、周囲に音声が漏れる
ことがないため、商品販売情報処理端末装置１００が設
置されるコンビニエンスストア等の他の利用客に迷惑と
ならずに、商品販売情報処理端末装置１００を利用する
ことができる。なお、このハンドセット４９０は、操作
台部４ａの右側面に備えることとして説明したが、左側
面や操作台部４ａの台上、起立部４ｂの前面等に備える
こととしても良い。

【０１３６】

【発明の効果】本発明によれば、利用者が音声によって
指定した情報名称等の識別項目に対応する情報が、直接
的に提供されるため、従来のように、階層構造を深く下
りていくことによって情報にたどり着く煩雑さを感じる
ことなく、希望する情報を直接的に容易に得ることがで
きるため、情報提供装置の利便性を向上させることが可
能となる。また、利用者が所定の範囲内に位置していな
いと判別された場合の音声を入力音声として検出しない
ようにすることができるため、周囲の雑音や利用者の指
示以外の音声によって、不必要な処理を行うことがな
く、情報提供の処理の信頼性を向上させることが可能と
なる。

【０１３７】また、音声入力と指示操作入力の２つの入
力方法を併用することにより、利用者は、状況に応じて
適宜入力方法を使い分けることができるため、所望の情
報を取り出すことが更に容易になり、情報提供装置の使
い勝手を更に向上させることが可能となる。また、利用
者が所定の範囲内に位置していないと判別された場合の
音声を入力音声として検出しないようにすることができ
るため、周囲の雑音や利用者の指示以外の音声によっ
て、不必要な処理を行うことがなく、情報提供の処理の
信頼性を向上させることが可能となる。

【０１３８】さらに、本発明によれば、情報提供装置に
は記録されていない新規の情報が発生した際にも、新規
の情報に関する情報名称等の識別項目、及び分類項目を
情報提供装置に追加するための処理を、情報管理装置に
よって一括して行うことができるため、情報提供装置に
よって提供する情報内容を容易に常に新しい状態に保つ
ことができ、情報提供システムの有用性を向上させるこ
とができる。

【図面の簡単な説明】

【図１】本発明の一実施の形態の商品販売情報処理シス
テム１における情報のやりとりを概念的に示した全体構
成図である。

【図２】商品販売情報処理システム１を構成する販売管
理センターＢ、及び店舗Ａに設置される各装置の接続関
係を示すブロック図である。

【図３】図２に示す商品販売情報管理装置３の概略内部
構成を示すブロック図である。

【図４】図３に示すＨＤドライブ３６内に格納される送
受信データの構成を示す図である。

【図５】図２に示す商品販売情報処理端末装置４の概略
内部構成を示す図である。

【図６】図５に示すような内部構成によって実現される
商品販売情報処理端末装置４の概略外観の一例を示す図
である。

【図７】ＨＤドライブ４１３に装着されるＨＤに格納さ
れる各種データの構成を示す図である。

【図８】商品販売情報処理端末装置４の処理の流れと図
７に示す各種データの関係を示す図である。

【図９】図７に示す音声パターンテーブル４１３Ａの具
体的な構成例を示す図である。

【図１０】図７に示すコマンド音声テーブル４１３Ｂの
具体的な構成例を示す図である。

【図１１】図７に示すコンテンツ音声テーブル４１３Ｃ
の具体的な構成例を示す図である。

【図１２】図７に示すメーカー音声テーブル４１３Ｄの
具体的な構成例を示す図である。

【図１３】図７に示すジャンル音声テーブル４１３Ｅの
具体的な構成例を示す図である。

【図１４】図７に示す分野音声テーブル４１３Ｆの具体
的な構成例を示す図である。

【図１５】図７に示すコンテンツネームマスター４１３
Ｇの具体的な構成例を示す図である。

【図１６】図７に示すコンテンツデータマスター４１３
Ｈの具体的な構成例を示す図である。

【図１７】図７に示すメーカーネームマスター４１３Ｉ
の具体的な構成例を示す図である。

【図１８】図７に示すジャンルネームマスター４１３Ｊ
の具体的な構成例を示す図である。

【図１９】図７に示す分野ネームマスター４１３Ｋの具
体的な構成例を示す図である。

【図２０】図７に示す案内文データテーブル４１３Ｌの
具体的な構成例を示す図である。

【図２１】図７に示す背景画像テーブル４１３Ｍの具体
的な構成例を示す図である。

【図２２】図７に示す文字修飾テーブル４１３Ｎの具体
的な構成例を示す図である。

【図２３】図７に示すコマンドボタンテーブル４１３Ｏ
の具体的な構成例を示す図である。

【図２４】図７に示す音声特徴テーブル４１３Ｐの具体
的な構成例を示す図である。

【図２５】商品販売情報処理端末装置４によって実行さ
れるコンテンツ表示処理について説明するフローチャー
トである。

【図２６】図２５のステップＳ９において実行される項
目処理について説明するフローチャートである。

【図２７】図２５のステップＳ１１において実行される
コマンド処理について説明するフローチャートである。

【図２８】商品販売情報処理システム１全体としての音
声認識辞書学習処理について説明する図である。

【図２９】地方語等の影響を考慮して、所定範囲（地
方、県等）毎に個別の音声認識辞書を学習する場合を示
す図である。

【図３０】図６の商品販売情報処理端末装置４に対し
て、操作台部４ａの右側面にハンドセット４９０を備え
た変形例である商品販売情報処理端末装置１００を示し
た概観斜視図である。

【図３１】図３０に示す商品販売情報処理端末装置１０
０の概略内部構成を示すブロック図である。

【図３２】階層構造となっているメニューの構成の例を
示す図である。

【図３３】初期メニュー画面の例を示す図である。

【図３４】図３３に示す画面において「ゲーム」を選択
した場合に表示されるジャンル選択画面の例を示す図で
ある。

【図３５】図３４に示す画面において「ＲＰＧ」を選択
した場合に表示されるメーカー選択画面の例を示す図で
ある。

【図３６】図３５に示す画面において「Ａ社」を選択し
た場合に表示される商品選択画面の例を示す図である。

【図３７】図３６に示す画面において「Ｚファンタジ
ー」を選択した場合に表示される商品案内画面の例を示
す図である。

【符号の説明】

１ 商品販売情報処理システム ２ ネットワーク ３ 商品販売情報管理装置 ３１ ＣＰＵ ３２ 入力装置 ３３ 表示装置 ３４ 通信装置 ３５ ＲＡＭ ３６ ＨＤドライブ ３８ バス ４、１００ 商品販売情報処理端末装置 ４ａ 操作台部 ４ｂ 起立部 ４０１ ＣＰＵ ４０２ 入力部 ４０３ メイン表示部 ４０４ サブ表示部 ４０５ 音声認識部 ４０５ａ マイク ４０５ｂ マイク ４０６ 音声合成部 ４０６ａ スピーカ ４０６ｂ スピーカ ４０７ デジタルカメラ ４０７ａ レンズ ４０８ 通信制御部 ４０９ レシート発行部 ４１０ チケット発行部 ４１１ ＲＯＭ ４１２ ＲＡＭ ４１３ ＨＤドライブ ４１４ スキャナ ４１５ プリンタ ４１６ メモリカードドライブ ４１７ ディスクメディアドライブ ４１８ 予備ドライブ ４１９ バス ４２０ 推奨表示部 ４２１ 用紙挿入・排出部 ４２２ 物掛け部 ４９０ ハンドセット ４９０ａ フック

─────────────────────────────────────────────────────

【手続補正書】

【提出日】平成１２年１月１９日（２０００．１．１
９）

【手続補正１】

【補正対象書類名】明細書

【補正対象項目名】発明の名称

【補正方法】変更

【補正内容】

【発明の名称】 情報提供装置、情報提供システム、情
報提供処理方法、及び記録媒体

【手続補正２】

【補正対象書類名】明細書

【補正対象項目名】特許請求の範囲

【補正方法】変更

【補正内容】

【特許請求の範囲】

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｇ１０Ｌ 15/00 Ｇ１０Ｌ 3/00 ５５１Ｚ 15/28 ５７１Ｈ

Claims (3)

【特許請求の範囲】
1. 【請求項１】利用者の音声を入力する音声入力手段と、 音声入力手段から入力された音声を音声認識辞書に基づ
   いて認識して、音声内容毎に対応づけられた所定コード
   に変換する音声認識手段と、 各種情報、及び当該各種情報を識別する情報である識別
   項目を対応づけて格納する情報格納手段と、 前記音声認識手段によって変換された所定コードに基づ
   いて、前記情報格納手段に格納された前記識別項目の中
   から該当する識別項目を検索して特定する情報特定手段
   と、 この情報特定手段によって特定された識別項目、及び当
   該識別項目に対応づけられた情報を前記情報格納手段か
   ら抽出する情報抽出手段と、 この情報抽出手段により抽出された識別項目、及び情報
   を、その情報内容に応じた各種情報形態で出力して、当
   該抽出情報の情報内容を提供する情報提供手段と、 利用者を撮像する撮像手段と、 この撮像手段によって撮像された画像を解析して利用者
   が所定の範囲内に位置しているか否かを判別する判別手
   段と、 を備えたことを特徴とする情報提供装置であって、 前記音声入力手段は、前記判別手段によって利用者が所
   定の範囲内に位置していると判別された場合に利用者の
   音声入力を可能とすることを特徴とする情報提供装置。
2. 【請求項２】利用者の音声を入力する音声入力手段と、 音声入力手段から入力された音声を音声認識辞書に基づ
   いて認識して、音声内容毎に対応づけられた所定コード
   に変換する音声認識手段と、 各種情報、当該各種情報を識別する情報である識別項
   目、及び前記各種情報の情報内容を複数の観点から分類
   するために前記識別項目と関連づけられた各種分類項目
   を格納する情報格納手段と、 前記音声認識手段によって変換された所定コードに基づ
   いて、前記情報格納手段から該当する識別項目または分
   類項目を検索して特定する情報特定手段と、 この情報特定手段によって識別項目が特定された場合
   は、当該識別項目、及び当該識別項目に対応づけられた
   情報を前記情報格納手段から抽出し、または、前記情報
   特定手段によって分類項目が特定された場合は、当該分
   類項目、及び当該分類項目と関連づけられた識別項目を
   前記情報格納手段から抽出する情報抽出手段と、 この情報抽出手段により抽出された識別項目、及び情報
   を、その情報内容に応じた各種情報形態で出力して、当
   該抽出情報の情報内容を提供し、または、前記情報抽出
   手段により抽出された分類項目、及び識別項目を、関連
   づけられた状態に基づいて体系化して所定の情報形態で
   出力することにより、当該識別項目に対応づけられた前
   記情報の情報内容を提供する情報提供手段と、 各種指示入力を行うための複数の入力キーを備えた入力
   手段と、 前記情報提供手段により出力される識別項目、分類項
   目、及び各種情報を入力項目として前記入力手段の各入
   力キーに対応づけて設定するためのキー設定データを格
   納するキー設定格納手段と、 を備え、前記入力手段の入力キーが操作された場合は、
   前記キー設定格納手段に格納されたキー設定データに基
   づいて、前記情報特定手段により、当該入力キーに対応
   づけられた前記識別項目、分類項目、あるいは各種情報
   を前記情報格納手段から検索して特定する情報提供装置
   であって、 利用者を撮像する撮像手段と、 この撮像手段によって撮像された画像を解析して利用者
   が所定の範囲内に位置しているか否かを判別する判別手
   段と、 を更に備え、前記音声入力手段は、前記判別手段によっ
   て利用者が所定の範囲内に位置していると判別された場
   合に利用者の音声入力を可能とすることを特徴とする情
   報提供装置。
3. 【請求項３】ネットワークサーバとしての情報管理装置
   と、ネットワーククライアントとしての請求項１または
   ２に記載の複数の情報提供装置とが、ネットワークを介
   して接続されることによって構成される情報提供システ
   ムにおいて、 前記情報管理装置は、 各種情報、当該各種情報を識別する情報である識別項
   目、及び前記各種情報の情報内容を複数の観点から分類
   するために前記識別項目と関連づけられた各種分類項目
   を、随時更新管理して格納する管理側情報格納手段と、 この管理側情報格納手段に格納された各種情報、識別項
   目、及び分類項目を前記複数の情報提供装置に配信する
   配信手段と、 を備え、 前記情報提供装置は、 前記情報管理装置から配信された各種情報、識別項目、
   及び分類項目を受信する受信手段と、 この受信手段によって受信された各種情報、識別項目、
   及び分類項目に基づいて、前記情報格納手段に格納され
   た前記各種情報、識別項目、及び分類項目を更新する情
   報更新手段と、 を更に備えたことを特徴とする情報提供システム。