JP2003022092A

JP2003022092A - 対話システム

Info

Publication number: JP2003022092A
Application number: JP2001208355A
Authority: JP
Inventors: Shinichi Iwamoto; 真一岩本; Toshiaki Kusano; 俊明草野; Masahiro Kamiya; 昌宏神谷; Mika Yamada; みか山田
Original assignee: Denso Ten Ltd
Current assignee: Denso Ten Ltd
Priority date: 2001-07-09
Filing date: 2001-07-09
Publication date: 2003-01-24

Abstract

(57)【要約】【課題】一見してすぐにユーザがシステムの接続状態
あるいは内部状況を理解することができるキャラクタ表
示をディスプレイ上にて行う対話システムを提供する。【解決手段】音声認識処理部１１と、対話の流れを指
示する対話エンジン部１３と、応答をユーザに返す音声
合成部と、その対話に応じたキャラクタをディスプレイ
に出力するキャラクタ表示制御部１７と、対話システム
の置かれている現在の状況を、ユーザに対して直感的に
イメージさせるキャラクタを格納しディスプレイに表示
させるイメージ提供手段２０と、を備えて構成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は対話システム、例え
ば車載用のナビゲーションユニットやオーディオ（Ｃ
Ｄ）ユニット等とユーザとの間のヒューマン・マシン・
インタフェース（ＨＭＩ）として機能し、音声による操
作を可能にする対話システムに関する。

【０００２】

【従来の技術】対話システムは、通常、ユーザからの発
声を取り込むマイクと、その発声内容を分析して次の発
声をユーザに促すための処理を行う対話処理部と、ユー
ザへの発声を行うスピーカと、ユーザへのガイダンスを
可視表示するディスプレイとを含んで構成される。

【０００３】これらの中で本発明に特に関係するのはデ
ィスプレイである。従前はこのディスプレイに表示され
るのは、上記ガイダンスに必要な情報を可視化したもの
だけであった。

【０００４】近年、ＨＭＩのさらなる高機能化という観
点から、そのディスプレイ内の一部にユーザによる操作
を一層容易にするため補助ガイダンスを表示することが
提案され、実用にも供され始めている。この場合、その
補助ガイダンスはキャラクタという形でディスプレイの
一部に表示される。その一例としては、特開２０００−
１９３４６３号に開示されたキャラクタがある。

【０００５】

【発明が解決しようとする課題】公知のキャラクタの一
例として上記の特開２０００−１９３４６３号がある
が、例えば車載用の対話システムとしては、一層きめ細
かい補助ガイダンスが求められる。車を運転するユーザ
にとってはほぼリアルタイムに対話システムのあらゆる
状況を確認できることが望まれるからである。

【０００６】例えば、現状ではユーザは、今対話システ
ムが処理中の認識モード等、対話システムの内部状況を
理解できない。

【０００７】また対話システムと今どのユニット（上記
のナビゲーションユニットやオーディオユニット等）と
が接続状態にあるかをユーザが確認したいと思ったとき
には、メニューをディスプレイ上に表示させる必要があ
るが、この場合、そのメニューがどの位置に入っている
かユーザは覚えていなければならない。また覚えていな
ければその確認はできない。

【０００８】結局、現状の対話システムにおける補助ガ
イダンスとしてのキャラクタは、ＨＭＩの向上という点
からしてさらなる工夫を要する、という問題がある。

【０００９】したがって本発明は、上記問題点に鑑み、
ＨＭＩの一層の向上を図ることができるキャラクタを表
示することのできる対話システムを提供することを目的
とするものである。

【００１０】

【課題を解決するための手段】図１は本発明に係る対話
システムの基本構成を示す図である。

【００１１】本図に示すように、本発明に係る対話シス
テムは基本的には、ユーザが発声した音声を認識する音
声認識処理部１１と、その認識結果に適合する対話の流
れを指示する対話エンジン部１３と、その対話に応じた
応答を音声にてユーザに返す音声合成部１６と、その対
話に応じたキャラクタをディスプレイ１８に出力するキ
ャラクタ表示制御部１７と、を少なくとも有する対話シ
ステムである。

【００１２】より詳細には、ユーザが発声した音声はマ
イクＭＣに入力され、上記音声認識処理部１１にてまず
そのアナログ入力がＡ／Ｄ変換される。このディジタル
入力をもとに、認識辞書１２を参照しながら、入力され
た音声の意味を解析する。

【００１３】上記対話エンジン部１３は、上記の音声の
解析結果に応じて一連の対話を進める。この一連の対話
は全て対話データベース（ＤＢ）１５に収容されてお
り、アプリケーション１４に応じた所定の対話を、該Ｄ
Ｂ１５より読み出して、一方では、上記音声合成部１６
よりスピーカＳＰを通して当該対話音声をユーザに返
す。

【００１４】また他方では、上記キャラクタ表示制御部
１７を介し、当該キャラクタをディスプレイ１８に表示
する。なお本図ではそのキャラクタ表示制御部１７を、
一般的なＧＵＩ（Graphical User Interface）制御部と
して示している。

【００１５】このような対話システム１０において本発
明は、図示するイメージ提供手段２０を備えることを特
徴とするものである。該イメージ提供手段２０は、対話
システム１０の置かれている現在の状況を、その状況の
種別に応じてその状況毎にユーザに対して直感的にイメ
ージさせる複数種のキャラクタを格納しディスプレイ１
８の一部に表示させる手段である。

【００１６】特にここに言う「直感的にイメージさせ
る」とは、キャラクタとしての人物の“仕草”、“格
好”、“身なり”、“季節感”、“朝、昼、晩、夜等の
時間帯感”、その他同様のものを意味する。

【００１７】これによりユーザはほぼリアルタイムに、
対話システムの今置かれている状況を確認することがで
きる。

【００１８】なお上記のイメージ提供手段２０は、本図
ではその存在を明確にするために独立した１つの構成要
素として表しているが、例えば対話エンジン部１３の中
に組み込まれていてもよいし、あるいは、対話システム
１０の対話ＤＢ１５や対話エンジン部１３の中に組み込
まれていてもよい。

【００１９】

【発明の実施の形態】図２は本発明に基づくキャラクタ
の第１の態様を示す図である。

【００２０】この第１の態様においては、対話システム
１０の置かれている現在の状況が、この対話システム１
０が連係して動作すべき複数種のユニットのいずれかと
接続状態にあるとき、イメージ提供手段２０は、当該ユ
ニットを直感的にイメージさせるキャラクタをディスプ
レイの一部に表示させることを特徴とするものである。

【００２１】接続状態とは、対話システム１０に、例え
ばナビゲーションユニットが連係したり、あるいはＧＰ
ＳユニットやＶＩＣＳユニットが連係したりする状態の
ことを意味する。またオーディオ関係ならば、ＣＤ（あ
るいはＭＤ）チェンジャー等のオーディオユニットが対
話システム１０に連係している状態をいう。

【００２２】図２においては、上記のＣＤチェンジャー
ＣＤ−ＣＨとＧＰＳ（アンテナのマークで示す）とＶＩ
ＣＳとが仮に同時に対話システム１０に連係した場合の
接続状態をキャラクタとして表示しているディスプレイ
１８の様子を示している。

【００２３】ここで仮にＧＰＳが対話システム１０に対
し非接続状態となったとすると、このようなときには、
キャラクタ“ＧＰＳ”をディスプレイ１８から消してし
まう。あるいは当該アンテナマークの上に重ねて×印を
表示してもよい。このことは、他のＣＤ−ＣＨやＶＩＣ
Ｓについても同じである。

【００２４】図３は第１の態様のもとでの動作を示すフ
ローチャートである。

【００２５】ステップＳ１１：イメージ提供手段２０
は、上述したユニット（ＧＰＳ，ＣＤ−ＣＨ，ＶＩＣＳ
等）が対話システム１０に新しく接続されたか否か判断
する。なおこの判断のもとになる入力情報を該手段２０
がどのようにして得るかは問わないが、例えば既述のＭ
ＰＵから与えられるようにすることが考えられる。

【００２６】ステップＳ１２：上記の判断がＹｅｓであ
れば、その新しく接続されたユニット例えばＶＩＣＳの
シンボルマークをキャラクタとして表示する。

【００２７】第１の態様は、対話システム１０に対する
各種ユニットの接続状態を即座に知らせるという便宜を
ユーザに与えることのできるキャラクタであるが、この
キャラクタの役割としては他にも種々ある。これを第２
の態様として以下に説明する。

【００２８】対話システム１０が連係して動作すべき１
つのユニットが特定されたとき、音声認識処理部１１が
そのユニットの操作に限定した音声の認識対象範囲に絞
って音声認識処理を行う場合、イメージ提供手段２０
は、そのユニットを直感的にイメージさせるキャラクタ
をディスプレイ１８の一部に表示させる。これが本発明
の第２の態様である。

【００２９】ユーザがどのユニット（ナビゲーション、
ＧＰＳ，ＣＤ−ＣＨ，ＶＩＣＳ等）についてもその操作
に関する発声をすれば、対話システム１０がその発声に
即座に応えることができる、という訳ではない。このた
め、通常、ユーザが各種ユニットのうち例えばナビゲー
ションユニットを使用する場合には、まず初めに“ナビ
ゲーション”と発声する。これにより音声認識処理部１
１は、そのナビゲーションユニットの操作に限定した音
声の認識対象範囲に絞ってから、本来の音声認識処理を
開始するようにしている。このようにすれば音声の認識
率は飛躍的に高まる。

【００３０】図４は本発明に基づくキャラクタの第２の
態様の一例を示す図である。

【００３１】音声の認識対象範囲を絞るモードとして
は、上述したナビゲーションの操作に限定するナビモー
ドや、ＶＩＣＳの操作に限定するＶＩＣＳモード等いろ
いろあるが、図４の例は、ＣＤの操作に限定するＣＤモ
ードについて示している。つまりキャラクタの顔がＣＤ
のように変化する。他にＭＤモードならばキャラクタの
顔を例えば正方形に変化させればよいし、ナビゲーショ
ンモードならばキャラクタの顔を車のイメージに変化さ
せればよい。

【００３２】この第２の態様は例えば次のような場合に
役立つ。ユーザが車で移動中にナビゲーションユニット
を使用しているものとする。ところが何らかの要因でナ
ビゲーションの操作を急に中止し、ナビゲーションとは
全く関係のない動作例えばかかってきた自動車電話に対
する応答をしなければならない、という事態が発生する
ことがある。

【００３３】このような事態が発生し、所要の対応を済
ませると、そのあとユーザは元のモードに戻って対話シ
ステム１０と元の対話を再開しようとする。ところが、
その所要の対応をしていたために今まで何のモードで対
話をしていたか忘れてしまう、ということがしばしば起
こる。

【００３４】このような場合、上記の例では、ディスプ
レイ１８には車のシンボルマークがキャラクタとして表
示されたままであるから、ユーザはこのキャラクタを一
見するだけで元のモードで即座に誤りなく発声すること
ができる。

【００３５】図５は第２の態様のもとでの動作を示すフ
ローチャートである。

【００３６】ステップＳ２１：上記の認識モードがＣＤ
モードあるいはナビモード等に変更になったか否か、イ
メージ提供手段２０が判断する。

【００３７】ステップＳ２２：その判断結果に応じてキ
ャラクタの顔を変更する。ＣＤモードへの変更ならば前
述の図４のようになる。

【００３８】このような変更の方法として、次の
（ｉ）、（ii）および（iii）が考えられる。

【００３９】（ｉ）認識モードに応じて、キャラクタを
変更するためのテーブルを予め例えばイメージ提供手段
２０内に用意しておき、このテーブルを参照して上記の
変更を行う。

【００４０】（ii）プログラムに直接、当該モードを表
すコードを埋め込んでおく。認識モードが変更になる都
度そのコードを読み出して、上記の変更を行う。

【００４１】（iii）音声認識処理部１１による認識結
果データに対して、キャラクタ変更情報を付加してお
く。

【００４２】前述の図４を参照して、限定した音声の認
識対象範囲に絞った認識モードの種別をシンボルマーク
で表すことについて述べたが、このシンボルマークをよ
り一層効果的に修飾するキャラクタについて以下にその
例を述べる。

【００４３】イメージ提供手段２０は、認識モードの種
別をキャラクタにより表すため、（１）キャラクタをな
す顔の表情によって表現し、（２）キャラクタをなす顔
の色によって表現し、（３）キャラクタをなす背景の色
によって表現し、（４）キャラクタをなす背景の画風に
よって表現し、（５）キャラクタをなす服装のスタイル
によって表現し、（６）キャラクタをなす服装の色によ
って表現し、（７）キャラクタをなす人物の上半身の表
情によって表現すること、のいずれか１つ、または、そ
れらの少なくとも２つの組み合わせをもって直感的にイ
メージさせるキャラクタをディスプレイ１８の一部に表
示させるようにする。その例のいくつかを図６に示す。

【００４４】図６はキャラクタの各種形態の例を表す図
である。

【００４５】図６の（ａ）は、認識モードに応じてキャ
ラクタの顔の色を変化させる形態である。例えば、ナビ
ゲーションモードなら青色、ＣＤモードなら黄色であ
る。

【００４６】図６の（ｂ）は、認識モードに応じてキャ
ラクタの背景色を変化させる形態である。例えばナビゲ
ーションモードなら青色の背景、ＣＤモードなら黄色の
背景である。

【００４７】図６の（ｃ）は、認識モードに応じてキャ
ラクタの背景の画風を変化させる形態である。例えばＧ
ＰＳモードなら山の絵を背景として表示する。

【００４８】図６の（ｄ）は、認識モードに応じてキャ
ラクタの服装を変化させる形態である。例えばＶＩＣＳ
モードならドライブ中のカジュアルな服装で人物を表示
する。

【００４９】図６の（ｅ）は、認識モードに応じてキャ
ラクタの服装の色を変化させる形態である。例えばＣＤ
モードなら落ちついた色のフォーマルウェアで人物を表
示する。

【００５０】上述した第２の態様をさらに発展させた第
１例が第３の態様である。

【００５１】この第３の態様は、認識モードが一連の認
識工程によって実行されるとき、対話システム１０が今
いずれの認識工程にあるかを、各認識工程を直感的にイ
メージさせるキャラクタの動作によってディスプレイ１
８の一部に表示させることを特徴とするものである。

【００５２】図７は第３の態様でのキャラクタの形態の
例を表す図である。

【００５３】対話システム１０の上記の認識工程がマイ
クＭＣからの音声取込み中であれば、図７（ａ）のごと
く、耳を大きくして聞き取り中の雰囲気を表現する。

【００５４】またその認識工程がデータベース検索中な
らば、図７（ｂ）のごとく、虫めがねでデータを探す雰
囲気を表現する。

【００５５】さらにまた、音声認識処理中ならば、図示
を省略するが、“ロダンの考える人”を模した表現とす
ることもできる。

【００５６】図８は第３の態様のもとでの動作を示すフ
ローチャートである。

【００５７】ステップＳ３１：システム状態に関するイ
ベント例えば上記の“音声取込み中”が発生したか否か
判断する。

【００５８】ステップＳ３２：その判断結果に応じたシ
ステム状態（この例では音声取込み中）を表現した、上
記図７（ａ）のキャラクタをディスプレイ１８に表示す
る。

【００５９】具体的には、上記イベントが発生したら、
例えばイメージ提供手段２０内のキャラクタ表示テーブ
ルを参照して、対応するキャラクタ表示（図７）を行
う。

【００６０】あるいは、上記イベントが発生したら、当
該キャラクタ表示を行うように、対応するプログラムの
始めにそのためのコードを予め埋め込んでおいて、これ
をイベント発生時に読み出す。

【００６１】既述した第２の態様をさらに発展させた第
２例が第４の態様である。

【００６２】この第４の態様は、認識モードにおける対
話システム１０において認識異常が発生したとき、複数
の要因のうちその認識異常を引き起こしたのがいずれの
要因であるかを、各要因を直感的にイメージさせるキャ
ラクタの動作によってディスプレイ１８の一部に表示さ
せることを特徴とするものである。

【００６３】図９は第４の態様でのキャラクタの形態の
一例を表す図である。

【００６４】対話システム１０における上記認識異常の
要因としてはいろいろある。例えば、ユーザの声が大き
い（または小さい）、周囲の騒音がうるさい、発声のタ
イミングが早過ぎる（または遅過ぎる）、発声した言葉
が長過ぎる（または短か過ぎる）、認識結果なし、等々
である。

【００６５】上記の種々の要因のうち、上記図９は、ユ
ーザの声が大きいことをキャラクタ表示したものであ
る。電話の受話器を耳から遠去ける雰囲気を表現する。

【００６６】図１０は第４の態様のもとでの動作を示す
フローチャートである。

【００６７】ステップＳ４１：上記の認識異常に関する
イベント（“騒音がうるさい”等）が発生したか否か判
断する。

【００６８】ステップＳ４２：その判断結果に応じて対
応するキャラクタをディスプレイ１８に表示する。

【００６９】既述した第２の態様をさらに発展させた第
３例が第５の態様である。

【００７０】この第５の態様は、認識モードにおいて対
話システム１０の認識結果に誤認識があることをユーザ
から指摘されたとき、その誤認識を、誤認識であること
を直感的にイメージさせるキャラクタの動作によってデ
ィスプレイ１８の一部に表示させることを特徴とするも
のである。

【００７１】図１１は第５の態様でのキャラクタの形態
の一例を表す図である。

【００７２】対話システム１０側からユーザに、誤認識
してしまったことをお詫びする雰囲気を表現したもので
ある。

【００７３】図１２は第５の態様のもとでの動作を示す
フローチャートである。

【００７４】ステップＳ５１：上記の誤認識というイベ
ントが発生したか判断する。

【００７５】ステップＳ５２：その判断結果に応じて、
例えば上記図１１に示すキャラクタ表示に変更する。

【００７６】再び上記ステップＳ５１を参照すると、こ
のステップでの判断は、例えばイメージ提供手段２０が
次の（ｉ）および（ii）のような情報を例えば既述のＭ
ＰＵから通知されたか否かにより行うことができる。

【００７７】（ｉ）対話システム１０に付属のスイッチ
類（図１のＳＷ参照）の中の所定の１つが長押しまたは
短押しされた。

【００７８】（ii）ユーザからマイクＭＣを通して、
“間違い”、“違う”等の発声が入力された。

【００７９】また上記ステップＳ５２については、例え
ば次の（ａ），（ｂ）および（ｃ）によりその変更を行
うことができる。

【００８０】（ａ）上記誤認識が発生したら、例えばイ
メージ提供手段２０内のキャラクタ表示テーブルを参照
して、対応するキャラクタ表示（図１１）を行う。

【００８１】（ｂ）上記誤認識が発生したら、当該キャ
ラクタ表示を行うように、対応するプログラムの始めに
そのためのコードを予め埋め込んでおいて、これをその
発生時に読み出す。

【００８２】（ｃ）上記誤認識を通知する情報に、当該
キャラクタデータを付加しておく。

【００８３】既述した第２の態様をさらに発展させた第
４例が第６の態様である。

【００８４】この第６の態様は、認識モードにおいてユ
ーザが所期の応答を返すことができないことから対話シ
ステム１０がユーザのさらなる発声を助けるアシスト対
話に入ったとき、該対話システム１０がそのアシスト対
話に入ったことを、これを直感的にイメージさせるキャ
ラクタの動作によってディスプレイ１８の一部に表示さ
せることを特徴とするものである。具体的には、ユーザ
から発声しなければならない場面でありながら、ユーザ
が発声できないとき等にそのアシスト対話に入る。ただ
しこのアシスト対話自体は公知である。

【００８５】図１３は第６の態様でのキャラクタの形態
の一例を表す図である。

【００８６】対話システム１０が、ユーザに対して、教
師になったような雰囲気を表現したものである。

【００８７】図１４は第６の態様のもとでの動作を示す
フローチャートである。

【００８８】ステップＳ６１：上記のアシスト対話とい
うイベントが発生したか判断する。

【００８９】ステップＳ６２：その判断結果に応じて、
例えば上記図１３に示すキャラクタ表示に変更する。

【００９０】再び上記ステップＳ６１を参照すると、こ
のステップでの判断は、例えばイメージ提供手段２０が
次の（ｉ），（ii），（iii）および（iv）のような情
報を例えば既述のＭＰＵから通知されたか否かにより行
うことができる。

【００９１】（ｉ）前述したスイッチ類ＳＷの中の所定
の１つが長押しまたは短押しされた。

【００９２】（ii）ユーザからマイクＭＣを通して、
“分からない”、“ヘルプ”、“教えて”等の発声が入
力された。

【００９３】（iii）音声認識処理部１１が、マイクＭ
Ｃからの音声の切り出しに例えば５秒以上を要し、タイ
ムアウトになった。

【００９４】（iv）各対話に付与されている対話ＩＤの
一部に、アシスト対話であることを表すコードが付与さ
れていて、このコードを読み出したとき。

【００９５】また上記ステップＳ６２については、例え
ば次の（ａ），（ｂ）および（ｃ）によりその変更を行
うことができる。

【００９６】（ａ）上記アシスト対話が発生したら、例
えばイメージ提供手段２０内のキャラクタ表示テーブル
を参照して、対応するキャラクタ表示（図１３）を行
う。

【００９７】（ｂ）上記アシスト対話が発生したら、当
該キャラクタ表示を行うように、対応するプログラムの
始めにそのためのコードを予め埋め込んでおいて、これ
をその発生時に読み出す。

【００９８】（ｃ）上記アシスト対話を通知する情報
に、当該キャラクタデータを付加しておく。

【００９９】次に第７の態様について説明する。この第
７の態様は、上述の第２〜第６の態様を実行するプログ
ラムのバージョンを更新する場合についてのものであ
る。

【０１００】すなわち、対話システム１０のシステム機
能がバージョンアップしたとき、イメージ提供手段２０
は、そのバージョンアップを直感的にイメージさせるキ
ャラクタをディスプレイ１８の一部に表示させる。

【０１０１】図１５は第７の態様でのキャラクタの形態
の一例を表す図である。

【０１０２】本図の左はバージョン１、中央はバージョ
ン２、右はバージョン３であることを表現している。

【０１０３】上述したバージョンアップは実際には、記
憶媒体を介在させて、または、伝送路を経由して外部か
らのダウンロードにより行うことができる。

【０１０４】図１６はバージョンアップの仕方を示す図
である。

【０１０５】本図において、参照番号１０はこれまで述
べてきた対話システムである。

【０１０６】この対話システム１０でのプログラムのバ
ージョンアップは、ＣＤ−ＲＯＭあるいはＤＶＤ等の記
憶媒体３１からのインストールにより行うことができ
る。あるいは、外部の例えばソフトウェアセンター３３
と、携帯電話３２ならびに有線または無線の伝送路を介
して、交信することによって、バージョンアップしたプ
ログラムを対話システム１０にダウンロードすることが
できる。

【０１０７】バージョンアップについて限定して説明し
たが、同様に春夏秋冬の季節感を表現したり（夏の水着
や冬のコート等の着衣）、朝昼晩の時間帯感を表現した
り（パジャマや普段着等の着衣、その他日の出、日の入
り、月や星および太陽のイメージ）することもできる。

【０１０８】

【発明の効果】以上説明したように本発明によれば、・キャラクタ表示を見ることによって、一見してシステ
ムの接続状態を理解することができる。

【０１０９】・キャラクタ表示を見ることによって、現
在の認識モードを把握することができ、ユーザは適切な
言葉を発声することが可能となる。

【０１１０】・キャラクタ表示を見ることによって、現
在のシステム状態を理解することができる。ユーザにと
ってシステムが何をやっているのか分からないといった
使い難い要素をなくすことができ、したがってユーザに
分かりやすいインタフェース（ＨＭＩ）を提供すること
ができる。

【０１１１】・ユーザが行った行動がシステムに受け付
けられたかを、キャラクタ表示にて確認することがで
き、したがって正しく受け付けられたかを、即座に判断
することが可能となる。

【０１１２】・機能のみがバージョンアップされること
がなく、機能のバージョンアップと共に、キャラクタ表
示もバージョンアップされる。したがってキャラクタ表
示に対応すべき全ての機能に対して対応することが可能
となる。

【０１１３】・季節あるいは、日時が経過した時に、最
新のキャラクタ表示に更新することができる。したがっ
て常に最新のキャラクタが表示され、ユーザにとって、
新鮮さがあり、快適性の向上につながる。

【図面の簡単な説明】

【図１】本発明に係る対話システムの基本的構成を示す
図である。

【図２】本発明に基づくキャラクタの第１の態様を示す
図である。

【図３】第１の態様のもとでの動作を示すフローチャー
トである。

【図４】本発明に基づくキャラクタの第２の態様の一例
を示す図である。

【図５】第２の態様のもとでの動作を示すフローチャー
トである。

【図６】キャラクタの各種形態の例を表す図である。

【図７】第３の態様でのキャラクタの形態の例を表す図
である。

【図８】第３の態様のもとでの動作を示すフローチャー
トである。

【図９】第４の態様でのキャラクタの形態の一例を表す
図である。

【図１０】第４の態様のもとでの動作を示すフローチャ
ートである。

【図１１】第５の態様でのキャラクタの形態の一例を表
す図である。

【図１２】第５の態様のもとでの動作を示すフローチャ
ートである。

【図１３】第６の態様でのキャラクタの形態の一例を表
す図である。

【図１４】第６の態様のもとでの動作を示すフローチャ
ートである。

【図１５】第７の態様でのキャラクタの形態の一例を表
す図である。

【図１６】バージョンアップの仕方を示す図である。

【符号の説明】

１０…対話システム１１…音声認識処理部１２…認識辞書１３…対話エンジン１４…アプリケーション１５…対話データベース１６…音声合成部１７…キャラクタ表示制御部１８…ディスプレイ２０…イメージ提供手段ＭＣ…マイクＳＰ…スピーカＳＷ…スイッチ類

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｇ１０Ｌ 15/28 Ｇ１０Ｌ 3/00 ５５１Ｇ // Ｇ０１Ｃ 21/00 ５５１Ｑ５６１Ｃ５６１Ａ (72)発明者神谷昌宏兵庫県神戸市兵庫区御所通１丁目２番28号富士通テン株式会社内 (72)発明者山田みか兵庫県神戸市兵庫区御所通１丁目２番28号富士通テン株式会社内Ｆターム(参考） 2F029 AA02 AB07 AC02 AC13 AC18 5D015 KK01 KK02 LL03 LL05 LL10 5E501 AA23 AC16 BA03 BA09 CA04 CB15 FA15 FA32 FA46 FB28

Claims

【特許請求の範囲】

【請求項１】ユーザが発声した音声を認識する音声認
識処理部と、その認識結果に適合する対話の流れを指示
する対話エンジン部と、その対話に応じた応答を音声に
てユーザに返す音声合成部と、その対話に応じたキャラ
クタをディスプレイに出力するキャラクタ表示制御部
と、を少なくとも有する対話システムにおいて、該対話システムの置かれている現在の状況を、その状況
の種別に応じてその状況毎にユーザに対して直感的にイ
メージさせる複数種のキャラクタを格納し前記ディスプ
レイの一部に表示させるイメージ提供手段を備えること
を特徴とする対話システム。
【請求項２】前記対話システムの置かれている現在の
状況が、該対話システムが連係して動作すべき複数種の
ユニットのいずれかと接続状態にあるとき、前記イメー
ジ提供手段は、当該ユニットを直感的にイメージさせる
キャラクタを前記ディスプレイの一部に表示させること
を特徴とする請求項１に記載の対話システム。
【請求項３】前記対話システムが連係して動作すべき
１つのユニットが特定されたとき、前記音声認識処理部
がそのユニットの操作に限定した音声の認識対象範囲に
絞って音声認識処理を行う場合、前記イメージ提供手段
は、そのユニットを直感的にイメージさせるキャラクタ
を前記ディスプレイの一部に表示させることを特徴とす
る請求項１に記載の対話システム。
【請求項４】前記の限定した音声の認識対象範囲に絞
った認識モードの種別を、前記イメージ提供手段は、（１）前記キャラクタをなす顔の表情によって表現し、（２）前記キャラクタをなす顔の色によって表現し、（３）前記キャラクタをなす背景の色によって表現し、（４）前記キャラクタをなす背景の画風によって表現
し、（５）前記キャラクタをなす服装のスタイルによって表
現し、（６）前記キャラクタをなす服装の色によって表現し、（７）前記キャラクタをなす人物の上半身の表情によっ
て表現すること、のいずれか１つ、または、それらの少
なくとも２つの組み合わせをもって直感的にイメージさ
せるキャラクタを前記ディスプレイの一部に表示させる
ことを特徴とする請求項３に記載の対話システム。
【請求項５】前記認識モードが一連の認識工程によっ
て実行されるとき、前記対話システムが今いずれの認識
工程にあるかを、各該認識工程を直感的にイメージさせ
るキャラクタの動作によって前記ディスプレイの一部に
表示させることを特徴とする請求項４に記載の対話シス
テム。
【請求項６】前記認識モードにおける前記対話システ
ムにおいて認識異常が発生したとき、複数の要因のうち
その認識異常を引き起こしたのがいずれの要因であるか
を、各該要因を直感的にイメージさせるキャラクタの動
作によって前記ディスプレイの一部に表示させることを
特徴とする請求項４に記載の対話システム。
【請求項７】前記認識モードにおいて前記対話システ
ムの認識結果に誤認識があることを前記ユーザから指摘
されたとき、その誤認識を、誤認識であることを直感的
にイメージさせるキャラクタの動作によって前記ディス
プレイの一部に表示させることを特徴とする請求項４に
記載の対話システム。
【請求項８】前記認識モードにおいて前記ユーザが所
期の応答を返すことができないことから前記対話システ
ムが該ユーザのさらなる発声を助けるアシスト対話に入
ったとき、該対話システムがそのアシスト対話に入った
ことを、これを直感的にイメージさせるキャラクタの動
作によって前記ディスプレイの一部に表示させることを
特徴とする請求項４に記載の対話システム。
【請求項９】前記対話システムのシステム機能がバー
ジョンアップしたとき、前記イメージ提供手段は、その
バージョンアップを直感的にイメージさせるキャラクタ
を前記ディスプレイの一部に表示させることを特徴とす
る請求項１に記載の対話システム。
【請求項１０】前記バージョンアップを、記憶媒体を
介在させて、または、伝送路を経由して外部からのダウ
ンロードにより行うことを特徴とする請求項９に記載の
対話システム。