JP2002123289A - 音声対話装置 - Google Patents

Abstract

(57)【要約】 【課題】 システムとユーザーとの対話において、人間
同士のように自然な対話を実現できる音声対話装置を提
供する。 【解決手段】 ユーザーの発話した音声を入力する音声
入力部１０１、音声を単語列に変換する音声認識部１０
２、単語列を概念信号に変換する言語理解部１０３、感
情情報を抽出する感情情報抽出部１０４、前記感情情報
と前記概念信号とに基づいてユーザー感情パラメータを
生成するユーザー感情パラメータ生成部１０５、システ
ム感情パラメータを生成するシステム感情パラメータ生
成部１０６、システムの応答文を生成する応答文生成部
１０７、応答辞書を格納する応答辞書格納部１０８、お
よびシステムの応答音声を出力する音声出力部１０９を
備える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、システムとユーザ
ーが音声を利用して対話するための音声対話装置に関す
る。

【０００２】

【従来の技術】近年、音声認識技術を用いた音声入力機
器や音声出力機器の開発が急速に進み、これらの機器が
自動販売機や自動翻訳システムなどのさまざまな機器や
システムに音声対話装置として組み込まれるようになっ
た。その結果、ユーザーと対話することのできる音声対
話装置を有するシステムが急激に増加した。ところが、
これらの音声対話装置との対話は、感情を持っているユ
ーザーと、感情を持っていないシステムとの対話である
ので、ユーザーはシステムに話しかけることに違和感を
覚えていた。その結果、従来の音声対話装置は、人間に
とって操作し易い音声入力を実現しているが扱いにく
い、と評価されることが少なくなかった。

【０００３】そのような点を改良する提案の一つとし
て、特開平８−３３９４４６号公報には、ユーザーの多
様な感情を検出し、システム側から検出したユーザーの
感情に応じた音声情報を出力する音声対話装置が開示さ
れている。この先行例の音声対話装置について、図１６
の従来の音声対話装置のブロック図を参照しつつ説明す
る。図１６において、音声入力部２０１にユーザーが発
声した音声が入力されると音声信号が特徴抽出部２０２
に出力される。特徴抽出部２０２では、入力された音声
信号から音声の高低（以下ピッチという）、音声の大き
さ、発話の速度、および音声の休止期間（以下、ポーズ
と言う）の長さなどの特徴量が抽出される。

【０００４】感情判定部２０３では、特徴抽出部２０２
で抽出された特徴量に基づいて、ユーザーの感情が判定
される。例えば、特徴量が、１フレーム毎の平均ピッチ
における先行フレームからの変化量［％］だとすると、
その値が＋２０［％］ならば、ユーザーの感情が「楽し
い」と判定される。応答生成部２０４では、感情判定部
２０３において判定されたユーザーの感情に応じて、シ
ステムの応答文が生成される。例えば、ユーザーの感情
が「楽しい」であった場合、音声の大きさ、発話の速度
などが「楽しい」に対応した応答文が生成される。音声
出力部２０５では、応答生成部２０４で生成された応答
文が音声として出力される。

【０００５】

【発明が解決しようとする課題】従来の音声対話装置で
は、入力した音声信号の特徴量からユーザーの感情を判
定し、判定された感情に基づいて応答を出力している。
つまり、ユーザーの入力音声の音響的特徴のみに基づい
て感情判定をするものであって、ユーザーの発声した単
語の意味には基づいていなかった。ところが感情という
ものは、言葉にも表れるものであり、言葉の意味を理解
せずに正確な感情判定が行えるはずはなく、ユーザーの
満足は得られるものではない。そこで、ユーザーが発声
した音声から抽出した音響的特徴と、認識した言葉の意
味とに基づいて感情を判定し、ユーザーが感情を素直に
言葉にした時や、言葉とは裏腹な感情を抱いた時など、
どんな時でも正確にユーザー感情を認識して対話するこ
とのできる、より人間に近い音声対話装置が求められて
いる。

【０００６】また、従来の音声対話装置では、システム
の応答を生成する際に、感情判定部で判定されたユーザ
ーの感情を用いているが、システム自身に発生させた感
情を用いてはいなかった。人間同士の対話では、相手の
感情に対して必ず自分の感情が存在し、相手の言葉と感
情から生成される自分の感情と言葉とに基づいて応答を
返している。つまり、従来の音声対話装置は、ユーザー
の感情に対するシステム自身の感情に基づいて応答して
いないため、人間同士の対話に近いシステムとは言えな
かった。その結果、ユーザーは音声対話装置は扱いにく
いものだと言う印象を強く抱いていた。

【０００７】本発明の目的は、人間同士の対話のよう
に、自然で親しみ易く、飽きがこない音声対話装置を提
供することにある。

【０００８】

【課題を解決するための手段】本発明の音声対話装置
は、システムとユーザーとの対話を実現する音声対話装
置であって、ユーザーの発話した音声を入力して音声信
号を出力する音声入力手段、前記音声入力手段から出力
される音声信号を認識し、単語列として出力する音声認
識手段、前記音声認識手段から出力される前記単語列を
前記ユーザーの発話の意味を表す概念信号に変換する言
語理解手段、前記音声入力手段から出力される音声信号
から前記ユーザーの感情を抽出し感情情報として出力す
る感情情報抽出手段、前記感情情報抽出手段から出力さ
れる前記感情情報と、前記言語理解手段から出力される
前記概念信号とから前記ユーザーの感情を表すユーザー
感情パラメータを生成するユーザー感情パラメータ生成
手段、前記ユーザー感情パラメータ、もしくは、前記ユ
ーザー感情パラメータと前記概念信号との両者に基づい
て前記システムの感情を表すシステム感情パラメータを
生成するシステム感情パラメータ生成手段、前記概念信
号、前記ユーザー感情パラメータ、または前記システム
感情パラメータに基づいてシステムの応答文を生成する
応答文生成手段、および前記応答文を音声として出力す
る音声出力手段を備えている。

【０００９】この構成の音声対話装置によれば、ユーザ
ー感情パラメータを、音声の音響的特徴だけでなく言葉
の意味にも基づいて生成するため、ユーザーの感情をよ
り正確に判定することができる。また、ユーザーの感情
だけでなくシステムの感情をも生成して応答を返すた
め、ユーザーとシステムの間で、まるで人間同士のよう
な対話を実現することができる。その結果、ユーザーは
システムに対してより親しみを感じることができ、ユー
ザーの音声対話装置は扱いにくいという印象を取り除く
ことができる。

【００１０】上記構成の音声対話装置であって、前記感
情情報抽出手段が、前記音声入力手段から出力される音
声信号における前記音声の継続時間、発話速度、ポーズ
の有無、振幅、基本周波数等の音声の状態を表す数値に
基づいてユーザーの感情情報を生成するのが好ましい。
また、前記感情情報、前記ユーザー感情パラメータ及び
前記システム感情パラメータが、「喜」、「怒」、
「哀」、「楽」等の少なくとも１つ以上の感情変数から
構成されているのが好ましい。また、前記ユーザー感情
パラメータ生成手段が、前記言語理解手段から出力され
た前記概念信号に基づいて概念感情情報を生成し、前記
概念感情情報と前記感情情報抽出手段から出力された前
記感情情報とに基づいてユーザー感情パラメータを生成
するのが好ましい。また、前記概念感情情報が、予め用
意してある前記概念信号に対応する感情変数テーブルに
基づいて生成するのが好ましい。

【００１１】本発明の他の観点による音声対話装置は、
上記構成の音声対話装置であって、前記ユーザー感情パ
ラメータ生成手段が、前記ユーザー感情パラメータを記
憶するユーザー感情パラメータ記憶手段と、新たに生成
したユーザー感情パラメータと前記ユーザー感情パラメ
ータ記憶手段に記憶されているユーザー感情パラメータ
とを比較して、その変化量が予め定められた値以上の場
合にはユーザー感情変化信号を出力するユーザー感情変
化信号出力手段、および前記ユーザー感情変化信号が連
続出力される回数をカウントしてその回数が予め定めら
れた値以上の場合に前記ユーザー感情パラメータ記憶手
段に記憶されているユーザー感情パラメータを更新する
ユーザー感情パラメータ更新手段を備えている。

【００１２】この構成の音声対話装置によれば、ユーザ
ー感情パラメータが予め定められた回数以上連続して変
化した場合や、予め定めた変化量以上に変化した場合に
ユーザーの感情が変化したと判断した場合には、ユーザ
ー感情パラメータ更新手段がユーザー感情パラメータを
更新する。これにより、突然音声入力手段から入力され
た雑音等から誤ったユーザー感情パラメータが生成さ
れ、それに応じて誤ったシステム感情パラメータが生成
されて応答が出力されることを防止できる。つまり、雑
音等の影響により、音声の継続時間、発話速度、ポーズ
の有無、振幅、基本周波数等から抽出されるユーザーの
感情情報が急激に変化した場合でも、ユーザー感情パラ
メータやシステム感情パラメータは急激に変化しない。
その結果、対話内容にまとまりのある高性能なシステム
を実現でき、ユーザーのシステムに対する信頼度を向上
することができる。

【００１３】本発明のさらに他の観点による音声対話装
置は、上記構成の音声対話装置であって、前記言語理解
手段から出力される前記概念信号が予め設定されている
特定の概念信号に一致している場合に特定感情パラメー
タを出力する特定感情パラメータ出力手段、および前記
特定感情パラメータが入力されると前記システム感情パ
ラメータの値を前記特定感情パラメータの値に変更する
システム感情パラメータ生成手段を備えている。

【００１４】この構成によれば、ユーザーのある一言に
よってシステムの感情を急激に変化させることができ、
ユーザーに対して、システムが感情を持っているという
印象をより強く与え、より親しみ易いシステムを実現す
ることができる。その結果、ユーザーのシステムに対す
る拒絶反応をより少なくできる。また、対話に意外性を
持たすことができるため、ユーザーを飽きさせないシス
テムを実現できる。

【００１５】本発明のさらに他の観点による音声対話装
置は、前記応答文生成手段が、前記ユーザー感情パラメ
ータ生成手段から出力されるユーザー感情パラメータ、
および前記システム感情パラメータ生成手段から出力さ
れるシステム感情パラメータの変化情報を抽出し、それ
ぞれの変化情報に基づいて前記システムの応答文を生成
する。

【００１６】この構成によれば、ユーザーやシステムの
感情の変化に応じてシステム応答を変化させることがで
き、ユーザーとシステムの間で、より自然な対話を実現
することができる。

【００１７】

【発明の実施の形態】以下、本発明の音声対話装置の好
適な実施例について添付の図面を参照しつつ説明する。

【００１８】《実施例１》図１は、本発明の実施例１の
音声対話装置の構成を示すブロック図である。図１に示
すように、実施例１の音声対話装置は、音声入力部１０
１、音声認識部１０２、言語理解部１０３、感情情報抽
出部１０４、ユーザー感情パラメータ生成部１０５、シ
ステム感情パラメータ生成部１０６、応答文生成部１０
７、応答辞書格納部１０８、及び音声出力部１０９を有
している。

【００１９】音声入力部１０１はユーザーの発話した音
声が入力されると、その音声を音声信号に変換して音声
認識部１０２と感情情報抽出部１０４にそれぞれ出力す
る。音声認識部１０２は、音声入力部１０１から入力さ
れた音声信号を単語列として言語理解部１０３に出力す
る。言語理解部１０３は、音声認識部１０２から出力さ
れた単語列を単語の意味を表す概念信号に変換する。感
情情報抽出部１０４は、音声入力部１０１から入力され
た音声信号から感情情報を抽出する。ユーザー感情パラ
メータ生成部１０５は、感情情報抽出部１０４から出力
された感情情報と、言語理解部１０３から出力された概
念信号とからユーザー感情を表すユーザー感情パラメー
タを生成する。

【００２０】システム感情パラメータ生成部１０６は、
ユーザー感情パラメータ生成部１０４から出力されたユ
ーザー感情パラメータに基づいてシステムの感情を表す
システム感情パラメータを生成する。応答文生成部１０
７は、言語理解部１０３から出力された概念信号と、シ
ステム感情パラメータ生成部１０６から出力されたシス
テム感情パラメータとに基づいて応答辞書格納部１０８
を検索し、システムの応答文を生成する。音声出力部１
０９は、応答文生成部１０７から出力されたシステムの
応答文が音声として出力する。

【００２１】以上のように構成された本発明の実施例１
の音声対話装置の動作について図１〜図６を参照しつつ
説明する。図１において、音声入力部１０１に、ユーザ
ーが、疲れていて不機嫌な様子で、「ただいま」と発声
したとする。音声入力部１０１へ入力された音声「ただ
いま」は、音声信号に変換され、それぞれ音声認識部１
０２と感情情報抽出部１０４とへ出力される。音声認識
部１０２では、入力された音声信号「ただいま」が、単
語列“ただいま”に変換され、言語理解部１０３へ出力
される。言語理解部１０３では、単語列“ただいま”
が、“応答、帰宅の知らせ”という概念信号に変換さ
れ、ユーザー感情パラメータ生成部１０５へ出力され
る。

【００２２】一方、感情情報抽出部１０４では、まず、
入力された音声「ただいま」から、発話速度と音声レベ
ルが抽出される。音声「ただいま」から抽出された発話
速度と音声レベルは、それぞれ予め格納されていた標準
パターンと比較され、それらの比較結果から、それぞれ
４つの感情変数（喜、怒、哀、楽）で表される感情情報
が抽出される。この抽出方法について、図２および図３
を参照して説明する。図２は、発話速度が標準パターン
と比較された結果から、発話速度由来の感情情報Ｖ１が
抽出される処理例を示す図である。図３は、音声レベル
が標準パターンと比較された結果から、発話レベル由来
の感情情報Ｌ１が抽出される処理例を示す図である。図
２において、左側のグラフは入力音声信号の発話速度
と、予め定められている標準パターンとのずれの割合
［％］の時間的変化を図示したものである。右側の表
は、左側のグラフのずれの割合に対応して求められる速
度由来の感情情報Ｖ１の１１段階の各感情変数の値を示
したものである。また、図３において、左側のグラフは
入力音声信号の音声レベルと、予め定められている標準
パターンとのずれの割合［％］の時間的変化を図示した
ものである。右側の表は左側のグラフのずれの割合
［％］に対応して求められるレベル由来の感情情報Ｌ１
の１１段階の各感情変数を示したものである。ここで
は、発話速度の標準パターンとのずれの割合の時間的変
化の平均値から感情情報Ｖ１が、音声レベルの標準パタ
ーンとのずれの割合の時間的変化の平均値から感情情報
Ｌ１がそれぞれ求められるものとする。

【００２３】まず、図２において、音声信号「ただい
ま」から抽出される感情情報Ｖ１は、発話速度と標準パ
ターンのずれの割合の時間的変化の平均値がＮｏ.９の
感情情報Ｖ１に相当する領域に属しているため、感情情
報Ｖ１はＮｏ.９に決定される。次に、図３において、
音声信号「ただいま」から抽出される感情情報Ｌ１は、
音声レベルと標準パターンのずれの割合の時間的変化の
平均値がＮｏ.９の感情情報Ｌ１に相当する領域に属し
ているため、感情情報Ｌ１はＮｏ.９に決定される。こ
のようにして、感情情報抽出部１０４において生成され
た感情情報Ｖ１、感情情報Ｌ１は、ユーザー感情パラメ
ータ生成部１０５へ出力される。

【００２４】図４は、図１のユーザー感情パラメータ生
成部１０５において、ユーザー感情パラメータが生成さ
れる方法を表すフローチャートである。以下、感情情報
の（）の中でコンマで区切って示す４つの数字のそれぞ
れは[喜]、[怒]、[哀]、[楽]の４つの感情変数の値を示
す。図４において、ユーザー感情パラメータ生成部１０
５では、まず、感情情報抽出部１０４から出力された感
情情報Ｖ１（２０,６０,８０,２０）と感情情報Ｌ１
（２０,２０,８０,２０）との平均値感情情報Ａ１（２
０,４０,８０,２０）が計算される。

【００２５】次に、図１の言語理解部１０３から出力さ
れた概念信号“応答、帰宅の知らせ”に対応する概念感
情情報Ｇ１（＋５，＋０，＋０，＋０）が、ユーザー感
情パラメータ生成部１０５に予め用意されている概念信
号に対応した概念感情情報テーブル１０５０を用いて生
成される。そして、感情情報Ｖ１と感情情報Ｌ１との平
均値感情情報Ａ１に概念感情情報Ｇ１が加算されてユー
ザー感情パラメータＥ１が生成される。以上の計算処理
の結果、音声「ただいま」におけるユーザー感情パラメ
ータＥ１は、（２５，４０，８０，２０）という値に決
定される。ただし、それぞれの感情変数における加算結
果が１００を超えた場合は１００とし、０より小さい場
合は０とする。図１のシステム感情パラメータ生成部１
０６は、ユーザー感情パラメータ生成部１０５からユー
ザー感情パラメータＥ１（２５，４０，８０，２０）が
入力されると、ユーザー感情パラメータＥ１に対応した
４つの感情変数[ねたみ]、[怒]、[慰め]、[喜]から構成
されるシステム感情パラメータＥ１’を生成する。

【００２６】ここでは、システム感情パラメータＥ１’
の各感情変数の値は、ユーザー感情パラメータＥ１の各
感情変数の値と同じ値、（２５［ねたみ］，４０
［怒］，８０［慰め］，２０［喜］）に設定するものと
する。システム感情パラメータＥ１’の生成において
は、ユーザー感情パラメータＥ１の各感情変数[喜]、
[怒]、[哀]、[楽]に対して、[ねたみ]、[怒]、[慰め]、
[喜]という異なる感情変数を使用している。そして、各
感情変数の値をユーザー感情パラメータの各感情変数と
同一の値に設定している。「喜」に対して「ねたみ」と
云う異なる感情変数を使用したのは、システムを少し悪
い性格にして人間的な反応をするよう設計したためであ
る。なお、システム感情パラメータにおいて使用する感
情変数をユーザー感情パラメータＥ１の各感情変数と同
一にして、別に用意したユーザー感情パラメータＥ１と
システム感情パラメータＥ１’との変換テーブル等を用
いて異なる値に設定しても良い。

【００２７】次ぎに、図１の応答文生成部１０７の動作
について図５及び図６を参照して説明する。図５は、応
答文生成部１０７に保持されている応答辞書対応座標面
を示す図である。図５に示すように、応答文生成部１０
７では、システム感情パラメータＥ１’の４つの感情変
数[ねたみ]、[怒]、[慰め]、[喜]で表される座標軸を持
つ、応答辞書対応座標面が保持されている。応答辞書対
応座標面の各領域には、応答辞書格納部１０８に格納さ
れている複数の応答辞書名が対応付けられている。シス
テム感情パラメータＥ１’の４つの感情変数からこの座
標面の水平軸の[喜]と[慰め]の値の差、垂直軸の[ねた
み]と[怒]値の差の組、すなわち（[喜]−[慰め]＝−６
０，[ねたみ]−[怒]＝−１５）が計算され、システム感
情パラメータＥ１’の座標（−６０，−１５）の位置
（図５に黒い楕円で示す）が求められる。そして、応答
辞書対応座標面上における座標（−６０，−１５）にシ
ステム感情パラメータＥ１’がプロットされる。このＥ
１’から応答辞書名は次のようにして決定される。即ち
システム感情パラメータＥ１’がプロットされた図５に
示す応答辞書対応座標面上の座標位置Ｅ１’（図５の黒
い楕円で示す）の属する領域である応答辞書上の「慰め
怒２」が応答辞書名として決定されるのである。

【００２８】このように、システム感情パラメータＥ
１’（２５，４０，８０，２０）の座標位置から応答辞
書格納部１０８内の応答辞書名「慰め怒２」が求められ
これを使用して、図１の応答文生成部１０７で、言語理
解部１０３から出力された概念信号“応答、帰宅の知ら
せ”に基づいたシステムの応答文が生成される。図１の
応答文生成部１０７における応答文生成方法について図
６を参照しつつ説明する。図６は、応答文生成部１０７
において、応答文が生成される方法を表すフローチャー
トである。図１の応答文生成部１０７では、まず、図６
においてシステム感情パラメータ生成部１０６から入力
されたシステム感情パラメータＥ１’をもって応答辞書
格納部１０８を探し（図６のステップ６０１）応答辞書
対応座標面上にプロットした位置Ｅ１’の領域に相当す
る応答辞書格納部１０８内の応答辞書名「慰め怒２」を
求める（図６のステップ６０２）。次ぎに、図１の言語
理解部１０３から出力された概念信号“応答、帰宅の知
らせ”に対応する応答辞書格納部１０８の応答辞書名
「慰め怒２」に格納されている応答文を検索する（図６
のステップ６０３）。このようにして、システム側の応
答文「おかえり、元気ないね、どうしちゃったのよ？」
が生成される（図６のステップ６０４）。そして、この
応答文が図１の音声出力部１０９へ出力され、音声出力
部１０９では、システム側の応答「おかえり、元気ない
ね、どうしちゃたのよ？」が音声として出力される。

【００２９】このように、本実施例１の音声対話装置に
よれば、図１の音声入力部１０１へのユーザーの音声入
力に対して、ユーザー感情パラメータ生成部１０５が、
感情情報抽出部１０４から出力された感情情報と、言語
理解部１０３から出力された概念信号とに基づいてユー
ザーの感情を表すユーザー感情パラメータＥ１を生成す
る。その結果、本発明の音声対話装置が音声の速度やレ
ベルのみならず言語の概念信号を用いることにより、ユ
ーザーの感情を従来のものより正確に判定することがで
きる。また、システム感情パラメータ生成部１０６が、
ユーザー感情パラメータＥ１に対してシステム自身の感
情を表すシステム感情パラメータＥ１’を生成する。さ
らに、応答文生成部１０７が、システム感情パラメータ
Ｅ１’と概念信号とに基づいてシステム応答を生成す
る。その結果、システムはあたかも感情を有しているよ
うに応答をすることができ、ユーザーとシステムの間
で、まるで人間同士のような対話を実現することができ
る。このことにより、ユーザーはシステムに対してより
親しみを感じることができ、ユーザーの音声対話装置は
扱いにくいという印象を取り除くことができる。

【００３０】《実施例２》図７は、本発明の実施例２の
音声対話装置におけるユーザー感情パラメータ生成部１
０５’の構成を示すブロック図である。この実施例２の
音声対話装置は、実施例１のものと比較すると図１のユ
ーザー感情パラメータ生成部１０５の代わりに用いられ
る図７の１０５’の構成のみが異なる。その全体構成を
図９に示す。したがって、実施例１と同一部分には同一
参照符号を付して重複する説明は省略する。

【００３１】図７に示すように、この実施例２の音声対
話装置におけるユーザ感情パラメータ生成部１０５’
は、ユーザー感情パラメータ記憶部１０５ａ、ユーザー
感情変化信号出力部１０５ｂ、及びユーザー感情パラメ
ータ更新部１０５ｃを備えている。ユーザー感情パラメ
ータ記憶部１０５ａは、パラメータ生成部１０５ｄで生
成されたユーザー感情パラメータを記憶する。ユーザー
感情変化信号出力部１０５ｂは、新たに入力された音声
の感情情報と概念信号とに基づいてパラメータ生成部１
０５ｄで生成されたユーザー感情パラメータと、ユーザ
ー感情パラメータ記憶部１０５ａに記憶されているユー
ザー感情パラメータとを比較する。そして、新たに入力
された音声に基づいて生成されたユーザー感情パラメー
タと記憶されているユーザー感情パラメータとの変化量
が予め定められた値以上の場合にユーザー感情変化信号
を出力する。ユーザー感情パラメータ更新部１０５ｃ
は、ユーザー感情変化信号出力部１０５ｂから出力され
たユーザー感情変化信号が連続して出力される回数をカ
ウントして、その回数が予め定められた値以上の場合
に、ユーザー感情パラメータ記憶部１０５ａに記憶され
ているユーザー感情パラメータを新たに入力されたユー
ザー感情パラメータに更新する。

【００３２】この実施例２の音声対話装置の動作につい
て図７〜図１０を参照しつつ説明する。以下の説明にお
いて、新たに生成されたユーザー感情パラメータＥ２
と、記憶してあるユーザー感情パラメータＥ１との予め
定められた変化量の値を２０、ユーザー感情変化信号の
連続して出力される回数の予め定められた回数を５とす
る。

【００３３】図７及び図９において、まず、実施例１と
同様に、ユーザーの１回目の発話「ただいま」が、図９
の音声入力部１０１に入力されると、このユーザー感情
パラメータ生成部１０５’では、パラメータ生成部１０
５ｄで生成されたユーザー感情パラメータＥ１（２５，
４０，８０，２０）がユーザー感情パラメータ記憶部１
０５ａに記憶される。さらに、そのユーザー感情パラメ
ータＥ１がシステム感情パラメータ生成部１０６へ出力
される。その後、システムから「おかえり、元気ない
ね、どうしちゃったのよ？」と応答が出される。

【００３４】次に、システム応答の「おかえり、元気な
いね、どうしちゃったのよ？」に対して、ユーザーが、
１回目の発話と同様に疲れていて不機嫌な様子で「失敗
した」と発声したとする。ユーザーの２回目の発話「失
敗した」が図９の音声入力部１０１に入力された時の処
理について、以下に説明する。図９の言語理解部１０３
と感情情報抽出部１０４では、実施例１と同様の処理が
行われ、言語理解部１０３から概念信号“応答、失敗し
た”が出力される。また、感情情報抽出部１０４から感
情情報Ｖ２（２０，６０，８０，２０）と感情情報Ｌ２
（１０，１０，９０，１０）とがそれぞれ出力される。

【００３５】図８は、ユーザー感情パラメータ生成部１
０５’における処理の流れを表すフローチャートであ
る。図７の、ユーザー感情パラメータ生成部１０５’で
は、図８に示すステップＳ１で、パラメータ生成部１０
５ｄ（図７）は、実施例１と同様に、図９の言語理解部
１０３から出力された概念信号“応答、失敗した”に対
応する概念感情情報Ｇ２（０，０，＋５，−２５）と、
感情情報抽出部１０４から出力された感情情報Ｖ２（２
０，６０，８０，２０）と感情情報Ｌ２（１０，１０，
９０，１０）とに基づいて、ユーザー感情パラメータＥ
２（１５，３５，９０，１５）を生成する。図８のステ
ップＳ２で、パラメータ生成部１０５ｄで生成されたユ
ーザー感情パラメータＥ２は、ユーザー感情変化信号出
力部１０５ｂへ入力され、ユーザー感情パラメータ記憶
部１０５ａ（図７）に記憶されていたユーザー感情パラ
メータＥ１（２５，４０，８０，２０）からの変化量
が、各感情変数について、２０以上であるかどうかが判
定される。

【００３６】ユーザー感情パラメータの少なくとも１つ
の感情変数の変化量が２０以上であれば、ステップＳ３
（図８）で、ユーザー感情変化信号出力部１０５ｂから
ユーザー感情変化信号が出力される。ユーザー感情パラ
メータのすべての感情変数の変化量が２０未満であれ
ば、ユーザー感情変化信号は出力されず、ステップＳ２
のＮｏからステップＳ１に戻りパラメータ生成部１０５
ｄで次のユーザー感情パラメータが生成される。

【００３７】ユーザーが２回発話したこの例の状態で
は、ユーザー感情パラメータＥ１とユーザー感情パラメ
ータＥ２の各感情変数の変化量は最大値が１０であると
仮定する。その場合は、ユーザー感情パラメータの変化
量は予め定められた値２０より小さいので、ユーザー感
情変化信号は出力されない。そして、ユーザー感情パラ
メータ記憶部１０５ａに記憶されているユーザー感情パ
ラメータＥ１が、ユーザー感情パラメータ生成部１０
５’から図９のシステム感情パラメータ１０６へ出力さ
れる。

【００３８】その後は、実施例１と同様にして、図９の
システム感情パラメータ生成部１０６からシステム感情
パラメータＥ１’が出力される。それによって、図５の
システム感情パラメータＥ１’に対応した応答辞書「慰
め怒２」を使用して応答文生成部１０７（図９）で概念
“応答、失敗した”に対するシステム応答「失敗は成功
のもと。いつまでもくよくよしないの！」が生成され、
音声出力部１０９から音声として出力される。ユーザー
の２回目の発話「失敗した」に対するシステムの応答
「失敗は成功のもと。いつまでもくよくよしないの！」
が出力された後、疲れていて不機嫌な様子であったユー
ザーが、少し元気を取り戻した様子でシステムとの対話
を続けたとする。

【００３９】そして、ユーザーの１回目の発話「ただい
ま」から数えて７回目に、ユーザーが「元気だよ」と発
声したとする。ユーザーの７回目の発話「元気だよ」が
図９の音声入力部１０１に入力された時の処理について
図７〜図１０を参照しつつ説明する。図９の言語理解部
１０３と感情情報抽出部１０４では、実施例１と同様の
処理が行われ、言語理解部１０３においては概念信号
“応答、元気”が、感情情報抽出部１０４においては、
感情情報Ｖ３（５０，０，５０，５０）とＬ３（５０，
５０，５０，５０）とがそれぞれ出力される。

【００４０】図７において、ユーザー感情パラメータ生
成部１０５’では、図８のフローチャートのステップＳ
１で、パラメータ生成部１０５’ｄは、実施例１と同様
に、言語理解部１０３から出力された概念信号“応答、
元気”に対応する概念感情情報Ｇ３（＋５，０，−１
０，+５）と、感情情報抽出部１０４から出力された感
情情報Ｖ３（５０，０，５０，５０）および感情情報Ｌ
３（５０，５０，５０，５０）とに基づいて、ユーザー
感情パラメータＥ３（５５，２５，４０，５５）を生成
する。ステップＳ２では、パラメータ生成部１０５ｄ
（図７）で生成されたユーザー感情パラメータＥ３は、
ユーザー感情変化信号出力部１０５ｂへ入力され、ユー
ザー感情パラメータ記憶部１０５ａで記憶されていたユ
ーザー感情パラメータＥ１（２５，４０，８０，２０）
からの変化量が、各感情変数について、２０以上である
かどうかが判定される。

【００４１】ユーザー感情パラメータＥ１とユーザー感
情パラメータＥ３の[哀]の感情変数の変化量は４０であ
り、ユーザー感情パラメータの変化量が予め定められた
値２０より大きいので、ステップＳ３でユーザー感情変
化信号出力部１０５ｂからユーザー感情変化信号が出力
される。ステップＳ４で、出力されたユーザー感情変化
信号は、ユーザー感情パラメータ更新部１０５ｃで５回
連続で出力されたかどうか判定される。もし、ユーザー
感情変化信号が５回連続で出力されているならば、ユー
ザー感情パラメータ更新部１０５ｃは、ユーザー感情パ
ラメータ記憶部１０５ａに作用して、そこに記憶されて
いるユーザー感情パラメータＥ１をＥ３に更新（変更）
させる。

【００４２】ユーザー感情パラメータ記憶部１０５ａ
は、ステップＳ５でユーザー感情パラメータＥ３をシス
テム感情パラメータ生成部１０６へ出力する。図９のシ
ステム感情パラメータ生成部１０６では、ユーザー感情
パラメータ生成部１０５から出力されたユーザー感情パ
ラメータＥ３に対応するシステム感情パラメータＥ３’
（５５,２５,４０,５５）が生成される。応答文生成部
１０７では、図１０に示すように、システム感情パラメ
ータＥ３’に対応する応答辞書対応座標面上にシステム
感情パラメータＥ３’の座標（５５−４０＝１５, ５
５−２５＝３０、黒の楕円の位置）をプロットする。そ
して、プロットした位置の領域に対応する応答辞書「ね
たみ喜１」を使用して概念“応答、元気”に対応するシ
ステム応答「元気が一番！」が生成され、音声出力部１
０９から音声として出力される。

【００４３】このように、本発明の実施例２の音声対話
装置によれば、通常、対話におけるユーザーの感情が１
度のやりとりで急激に変化しないことに注目し、ユーザ
ーとシステムのやりとりが一時に複数回繰り返される場
合に次のように動作する。すなわち、ユーザー感情パラ
メータ更新部１０５ｃ（図７）が、ユーザー感情パラメ
ータが予め定められた回数以上連続して変化した場合に
のみ、ユーザーの感情が変化したと判断してユーザー感
情パラメータを更新するようにソフトウェアを構成して
ある。このような構成をとることにより、突然音声入力
手段から入力された雑音等から、誤ったユーザー感情パ
ラメータが生成され、それによって誤ったシステム感情
パラメータが生成されて応答が出力されるような事態を
避けることができる。

【００４４】上記の構成により、雑音等の影響により、
音声の継続時間、発話速度、ポーズの有無、振幅、基本
周波数等から抽出されるユーザーの感情情報が急激に変
化した場合でも、ユーザー感情パラメータやシステム感
情パラメータは急激に変化しない。こうして対話内容に
まとまりのある、高性能なシステムを実現できる。その
結果、ユーザーのシステムに対する信頼度を向上するこ
とができる。

【００４５】《実施例３》図１１は、本発明の実施例３
の音声対話装置の構成を示すブロック図である。この実
施例３の音声対話装置の実施例１との相違点は、特定感
情パラメータ生成部１０３ａを設けた点である。この特
定感情パラメータ生成部１０３ａは、言語理解部１０３
から予め設定されている特定の概念信号が入力される
と、特定感情パラメータをシステム感情パラメータ生成
部１０６に出力する。この実施例３は他の点では、実施
例１と実質同様なので同一部分には同一参照符号を付し
て重複する説明は省略する。

【００４６】図１１において、特定感情パラメータ出力
部１０３ａでは、言語理解部１０３から予め設定されて
いる特定の概念信号が入力されると、その概念信号に対
応する特定感情パラメータＥ４がシステム感情パラメー
タ生成部１０６に出力される。システム感情パラメータ
生成部１０６では、特定感情パラメータ出力部１０３ａ
から特定感情パラメータＥ４が入力されると、システム
感情パラメータの値が特定感情パラメータの値Ｅ４’に
変更される。

【００４７】以上のように構成された本発明の実施例３
の音声対話装置について、以下、予め設定されている特
定の概念に“応答、バカ”が含まれているものとして、
その動作を図１１〜図１３を参照しつつ説明する。図１
１において、ユーザーが、システムとの対話において、
「バカじゃないの！」と発声したとすると、ユーザーの
発話「バカじゃないの！」が音声入力部１０１に入力さ
れる。音声認識部１０２および言語理解部１０３では、
実施例１と同様の処理が行われ、言語理解部１０３から
概念信号“応答、バカ”が特定感情パラメータ出力部１
０３ａに出力される。

【００４８】図１２は、言語理解部１０３から概念信号
“応答、バカ”が出力された時の処理の流れを表すフロ
ーチャートである。図１２において、ステップＳ６で、
図１１の言語理解部１０３から概念“応答、バカ”が出
力されると、特定感情パラメータ出力部１０３ａは、図
１２のフローチャートのステップＳ７において入力され
た概念信号“応答、バカ”が予め設定されている複数の
特定の概念信号であるかどうを検証する。検証した結
果、入力された概念信号が特定の概念信号であれば、そ
の特定の概念信号に対応する特定感情パラメータＥ４が
フローチャートの、ステップＳ８で示すように、特定感
情パラメータ出力部１０３ａから出力される。入力され
た概念信号が特定の概念信号でなければ、特定感情パラ
メータは出力されず、言語理解部１０３に戻り、ステッ
プＳ１１において言語理解部１０３からユーザー感情パ
ラメータ生成部１０５へ概念信号が出力される。そし
て、ステップＳ１２で実施例１と同様の処理が行われ
る。

【００４９】しかしこの例では、入力された概念信号は
“応答、バカ”であり、“応答、バカ”は特定の概念信
号であるので、ステップＳ８で、図１１の特定感情パラ
メータ出力部１０３ａから特定感情パラメータＥ４
（０，１００，０，０）がシステム感情パラメータ生成
部１０６へ出力される。システム感情パラメータ生成部
１０６においては、ステップＳ９でユーザーが「バカじ
ゃないの！」と発話する前に記憶していたシステム感情
パラメータの値が、特定感情パラメータＥ４’（０，１
００，０，０）に変更される。

【００５０】変更されたシステム感情パラメータＥ４’
は、ステップＳ１０で応答文生成部１０７へ出力され
る。図１３は、応答文生成部１０７に保持されている応
答辞書対応座標面の例である。図１３に示すように、シ
ステム感情パラメータ生成部１０６から出力されたシス
テム感情パラメータＥ４’（０，１００，０，０）は、
応答辞書対応座標面上の座標（０−０＝０，０−１００
＝−１００）にプロットされる。プロットされた領域が
応答辞書名「怒」に相当するので、応答辞書格納部１０
８内の応答辞書名「怒」を使用して概念信号“応答、バ
カ”に対応するシステム応答「なんだと！もう許さん
！」が生成され、音声出力部１０９から音声として出力
される。

【００５１】このように、本発明の実施例３の音声対話
装置によれば、特定の概念に相当する言葉をユーザーが
発声した場合に、特定感情パラメータ出力部１０３ａで
特定感情パラメータを出力してシステムの感情を急激に
変化させることより、ユーザーに対して、システムが感
情を持っているという印象を強く与え、より親しみ易い
システムを実現することができる。その結果、ユーザー
のシステムに対する拒絶反応を無くすことができる。ま
た、対話に意外性を持たすことができるため、ユーザー
を飽きさせないシステムを実現することができる。

【００５２】《実施例４》図１４は、この実施例４の音
声対話装置において、図９の実施例の応答文生成部１０
７をこの実施例用として変更した、応答文生成部１０
７’の構成を示すブロック図である。この実施例４の音
声対話装置の、実施例２のものとの相違点は、応答文生
成部１０７’の構成にある。したがって、それ以外の実
施例２と実質同一の部分には同一参照符号を付して重複
する説明は省略する。

【００５３】図１４において、応答文生成部１０７’の
記憶部１０７ａでは、常に、図９のユーザー感情パラメ
ータ生成部１０５’から出力されたユーザー感情パラメ
ータおよびシステム感情パラメータ生成部１０６から出
力されたシステム感情パラメータが保持される。そし
て、応答文生成部１０７’のパラメータ変化情報抽出部
１０７ｂでは、ユーザー感情パラメータ生成部１０５’
（図９）から出力されたユーザー感情パラメータの値
と、記憶部１０７ａに保持されているユーザー感情パラ
メータの値との間の変化情報が抽出される。同様に、パ
ラメータ変化情報抽出部１０７ｂでは、システム感情パ
ラメータ生成部１０６から出力されたシステム感情パラ
メータと、応答文生成部１０７’の記憶部１０７ａに保
持されているシステム感情パラメータとの変化情報が抽
出される。

【００５４】それぞれの感情パラメータ変化情報が抽出
されると、入力されたユーザー感情パラメータおよびシ
ステム感情パラメータが、それまで記憶部１０７ａに保
持されていたユーザー感情パラメータおよびシステム感
情パラメータに代わって保持される。そして、言語理解
部１０３から出力された概念信号と、システム感情パラ
メータ生成部１０６から出力されたシステム感情パラメ
ータと、抽出された変化情報とに基づいてシステムの応
答文が生成される。

【００５５】以上のように構成されたこの実施例４の音
声対話装置における応答文生成部１０７’の動作につい
て説明する。但し以下の説明は、前述した実施例２の動
作説明におけるユーザーの７回目の発話「元気だよ」が
音声入力部１０１に入力され、その後、ユーザー感情パ
ラメータ更新部１０５ｃによってユーザー感情パラメー
タ記憶部１０５ａに記憶されているユーザー感情パラメ
ータＥ１がＥ３に更新された時を例にとっている。

【００５６】応答文生成部１０７’では、図９のユーザ
ー感情パラメータ生成部１０５’から出力されたユーザ
ー感情パラメータＥ３（５５，２５，４０，５５）と記
憶部１０７ａに保持されているユーザー感情パラメータ
Ｅ１（２５，４０，８０，２０）とがパラメータ変化情
報抽出部１０７ｂで比較される。図１５に示すように、
各ユーザー感情パラメータＥ１、Ｅ３を応答辞書対応座
標面の座標に変換すると、それぞれユーザー感情パラメ
ータＥ１の座標の位置は（−６０，−１５，図１５の左
下側の黒楕円）、ユーザー感情パラメータＥ３の座標に
位置は（１５，３０，図１５の右上側の黒楕円）とな
る。したがって、ユーザー感情パラメータＥ１からＥ３
に変化することで、座標上の位置がプラス方向に変化し
ているので、ユーザー感情パラメータにおける変化情報
“良くなった”がパラメータ変化情報抽出部１０７ｂ
（図１４）で抽出される。

【００５７】同様に、システム感情パラメータ生成部１
０６（図１１）から出力されたシステム感情パラメータ
Ｅ３’（５５，２５，４０，５５）と、応答文生成部１
０７’の記憶部１０７ａ（図１４）に保持されているシ
ステム感情パラメータＥ１’（２５，４０，８０，２
０）とがパラメータ変化情報抽出部１０７ｂ（図１４）
で比較される。図１５に示すように、各システム感情パ
ラメータを応答辞書対応座標面の座標に変換すると、そ
れぞれシステム感情パラメータＥ１’の座標の位置は
（−６０，−１５）、システム感情パラメータＥ３’の
座標の位置は（１５，３０）となる。したがって、シス
テム感情パラメータＥ１’がＥ３’に変化することで座
標上の位置がプラス方向に変化している。それ故システ
ム感情パラメータにおける変化情報“良くなった”がパ
ラメータ変化情報抽出部１０７ｂで抽出される。

【００５８】そして、応答辞書格納部１０８内のシステ
ム感情パラメータＥ３’の座標上の位置に対応する応答
辞書「ねたみ喜１」を使用して、言語理解部１０３から
出力された概念“応答、元気”と、抽出されたユーザー
感情パラメータの変化情報“良くなった”、システム感
情パラメータの変化情報“良くなった”とに基づいて、
システム応答「よかった！心配したんだからね！」が生
成される。そして、その応答「よかった！心配したんだ
からね！」が音声出力部１０９（図1４）から音声とし
て出力される。

【００５９】このように、本発明の実施例４の音声対話
装置によれば、応答文生成部１０７’において、ユーザ
ー感情パラメータおよびシステム感情パラメータの変化
情報を抽出してシステムの応答に反映させる。このこと
により、ユーザーやシステムの感情の変化に応じてシス
テム応答を変化させることができる。その結果、ユーザ
ーとシステムの間で、より自然な対話を実現することが
できる。

【００６０】なお、感情情報抽出部１０４における感情
情報の抽出について、実施例１〜４の説明では、発話速
度と音声レベルを用いた例で説明したが、音声の継続時
間、発話速度、ポーズの有無、振幅、基本周波数等の
内、何れかを単独で使用しても良いし、すべてを使用し
ても良いし、複数組み合わせたものを使用しても良い。
また、システム感情パラメータ生成部１０６におけるシ
ステム感情パラメータの生成について、ここでは、ユー
ザー感情パラメータ生成部１０５で生成されたユーザー
感情パラメータを使用しているが、ユーザー感情パラメ
ータと言語理解部１０３から出力された概念信号との両
者を使用しても良い。

【００６１】また、応答文生成部１０７におけるシステ
ムの応答文の生成について、上記実施例では、言語理解
部１０３から出力された概念信号、システム感情パラメ
ータ生成部１０６で生成されたシステム感情パラメー
タ、およびその変化情報を使用している。しかし、図１
或いは図９に点線で示すように、ユーザー感情パラメー
タ生成部１０５又は１０５’で生成されたユーザー感情
パラメータ、およびその変化情報を使用しても良い。さ
らに、これらの内、何れかを単独で使用しても良いし、
すべてを使用しても良いし、複数組み合わせて使用して
も良い。

【００６２】

【発明の効果】以上実施例で詳細に説明したように、本
発明の音声対話装置によれば、下記の効果が得られる。
すなわち、ユーザー感情パラメータを、音声の特徴だけ
でなく言葉の意味つまり概念にも基づいて生成するた
め、ユーザーの感情をより正確に判定することができ
る。また、ユーザーの感情だけでなくシステムの感情を
も生成して応答を返すため、ユーザーとシステムの間
で、まるで人間同士のような対話を実現することができ
る。その結果、ユーザーはシステムに対してより親しみ
を感じることができ、ユーザーの音声対話装置は扱いに
くいという印象を取り除くことができる。

【００６３】さらに、対話におけるユーザーの感情が１
度のやりとりで急激に変化することが殆どないことに注
目して、突然音声入力手段から入力された雑音等から誤
ったユーザー感情パラメータが生成され、それに応じて
誤ったシステム感情パラメータが生成されて応答が出力
されるといった事態を避けることができる。その結果、
雑音等の影響により、音声の継続時間、発話速度、ポー
ズの有無、振幅、基本周波数等から抽出されるユーザー
の感情情報が急激に変化した場合でも、対話内容にまと
まりのある、高性能なシステムを実現できる。その結
果、ユーザーのシステムに対する信頼度をさらに向上す
ることができる。

【００６４】さらに、特定感情パラメータを生成するこ
とにより、ユーザーのある一言によってシステムの感情
を急激に変化させることができ、ユーザーに対して、シ
ステムが感情を持っているという印象を強く与え、より
親しみ易いシステムを実現することができる。その結
果、ユーザーのシステムに対する拒絶反応を無くすこと
ができる。また、対話に意外性を持たすことができるた
め、ユーザーを飽きさせないシステムを実現することが
できる。さらに、ユーザーやシステムの感情の変化に応
じてシステム応答を変化させることができ、ユーザーと
システムの間で、より自然な対話を実現することができ
る。

【図面の簡単な説明】

【図１】本発明の実施例１の音声対話装置の構成を示す
ブロック図。

【図２】実施例１の感情情報抽出部１０４における発話
速度を標準パターンと比較した結果から感情情報Ｖ１が
抽出される処理例を示す図。

【図３】実施例１の感情情報抽出部１０４における音声
レベルを標準パターンと比較した結果から感情情報Ｌ１
が抽出される処理例を示す図。

【図４】実施例１のユーザー感情パラメータ生成部１０
５における、ユーザー感情パラメータが生成される方法
を表すフローチャート。

【図５】実施例１の応答文生成部１０７に保持されてい
る応答辞書対応座標面。

【図６】実施例１の応答文生成部１０７における、応答
文が生成される方法を表すフローチャート。

【図７】本発明の実施例２の音声対話装置におけるユー
ザー感情パラメータ生成部１０５’の構成を示すブロッ
ク図。

【図８】実施例２のユーザー感情パラメータ生成部１０
５’における処理の流れを表すフローチャート。

【図９】本発明の実施例２の音声対話装置における各パ
ラメータの出力例を示すブロック図。

【図１０】実施例２の応答文生成部１０７に保持されて
いる応答辞書対応座標面の例。

【図１１】本発明の実施例３の音声対話装置の構成を示
すブロック図。

【図１２】実施例３の言語理解部１０３ａから特定の概
念信号が出力された時の処理の流れを表すフローチャー
ト。

【図１３】実施例３の応答文生成部１０７’に保持され
ている応答辞書対応座標面の例。

【図１４】実施例４の音声対話装置における応答文生成
部１０７’の構成を示すブロック図。

【図１５】実施例４の応答文生成部１０７に保持されて
いる応答辞書対応座標面の例。

【図１６】従来の音声対話装置の構成を示すブロック
図。

【符号の説明】

１０１ 音声入力部 １０２ 音声認識部 １０３ 言語理解部 １０３ａ 特定感情パラメータ出力部 １０４ 感情情報抽出部 １０５、１０５’ ユーザー感情パラメータ生成部 １０５ａ ユーザー感情パラメータ記憶部 １０５ｂ ユーザー感情変化信号出力部 １０５ｃ ユーザー感情パラメータ更新部 １０６ システム感情パラメータ生成部 １０７、１０７’ 応答文生成部 １０７ａ 記憶部 １０７ｂ パラメータ変化情報抽出部 １０８ 応答辞書格納部 １０９ 音声出力部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 朝山 砂子 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 Ｆターム(参考） 5D015 AA01 AA05 AA06 BB01 HH04 LL06 5D045 AB30

Claims (8)

【特許請求の範囲】
1. 【請求項１】 システムとユーザーとの対話を実現する
   音声対話装置であって、 前記ユーザーの発話した音声を入力して音声信号を出力
   する音声入力手段、 前記音声入力手段から出力される音声信号を認識し、単
   語列として出力する音声認識手段、 前記音声認識手段から出力される前記単語列を前記ユー
   ザーの発話の意味を表す概念信号に変換する言語理解手
   段、 前記音声入力手段から出力される音声信号から前記ユー
   ザーの感情を抽出し、感情情報として出力する感情情報
   抽出手段、 前記感情情報抽出手段から出力される前記感情情報と、
   前記言語理解手段から出力される前記概念信号とに基づ
   いて前記ユーザーの感情を表すユーザー感情パラメータ
   を生成するユーザー感情パラメータ生成手段、 前記ユーザー感情パラメータ、もしくは、前記ユーザー
   感情パラメータと前記概念との両者に基づいて前記シス
   テムの感情を表すシステム感情パラメータを生成するシ
   ステム感情パラメータ生成手段、 前記概念信号、前記ユーザー感情パラメータ、または前
   記システム感情パラメータに基づいて前記システムの応
   答文を生成する応答文生成手段、および前記応答文を音
   声として出力する音声出力手段、 を備えたことを特徴とする音声対話装置。
2. 【請求項２】 前記感情情報抽出手段は、前記音声入力
   手段から出力される音声信号における前記音声の継続時
   間、発話速度、音声の休止期間（以下、ポーズと言う）
   の有無、振幅、および基本周波数等の音声の状態を表す
   数値に基づいて前記感情情報を生成する、ことを特徴と
   する請求項１記載の音声対話装置。
3. 【請求項３】 前記感情情報、前記ユーザー感情パラメ
   ータ、及び前記システム感情パラメータは、「喜」、
   「怒」、「哀」、「楽」等の少なくとも１つ以上の感情
   変数から構成されている、ことを特徴とする請求項１ま
   たは請求項２記載の音声対話装置。
4. 【請求項４】 前記ユーザー感情パラメータ生成手段
   は、前記言語理解手段から出力される前記概念信号に基
   づいて概念感情情報を生成し、前記概念感情情報と、前
   記感情情報抽出手段から出力された前記感情情報とに基
   づいてユーザー感情パラメータを生成する、ことを特徴
   とする請求項１〜３のいずれかに記載の音声対話装置。
5. 【請求項５】 前記概念感情情報は、予め用意してある
   前記概念信号に対応する感情変数テーブルに基づいて生
   成される、ことを特徴とする請求項４記載の音声対話装
   置。
6. 【請求項６】 前記ユーザー感情パラメータ生成手段
   （１０５’）は、 前記ユーザー感情パラメータを記憶するユーザー感情パ
   ラメータ記憶手段、 新たに生成した前記ユーザー感情パラメータと前記ユー
   ザー感情パラメータ記憶手段に記憶されているユーザー
   感情パラメータとを比較して、その変化量が予め定めら
   れた値以上の場合にはユーザー感情変化信号を出力する
   ユーザー感情変化信号出力手段、および前記ユーザー感
   情変化信号が連続出力される回数をカウントしてその回
   数が予め定められた値以上の場合に前記ユーザー感情パ
   ラメータ記憶手段に記憶されているユーザー感情パラメ
   ータを更新するユーザー感情パラメータ更新手段、 を備えたことを特徴とする請求項１〜５のいずれかに記
   載の音声対話装置。
7. 【請求項７】 前記言語理解手段から出力される前記概
   念信号が予め設定されている特定の概念信号に一致して
   いる場合に特定感情パラメータを出力する特定感情パラ
   メータ出力手段、および前記特定感情パラメータが入力
   されると前記システム感情パラメータの値を前記特定感
   情パラメータの値に変更するシステム感情パラメータ生
   成手段を備えたことを特徴とする請求項１〜６のいずれ
   かに記載の音声対話装置。
8. 【請求項８】 前記応答文生成手段は、前記ユーザー感
   情パラメータ生成手段から出力される前記ユーザー感情
   パラメータ、および前記システム感情パラメータ生成手
   段から出力されるシステム感情パラメータのそれぞれの
   変化情報を抽出し、それぞれの変化情報に基づいて前記
   システムの応答文を生成することを特徴とする請求項１
   から８のいずれかに記載の音声対話装置。（図１４）