JP2016080981A - 応答生成装置、応答生成方法及び応答生成プログラム - Google Patents

応答生成装置、応答生成方法及び応答生成プログラム Download PDF

Info

Publication number
JP2016080981A
JP2016080981A JP2014214616A JP2014214616A JP2016080981A JP 2016080981 A JP2016080981 A JP 2016080981A JP 2014214616 A JP2014214616 A JP 2014214616A JP 2014214616 A JP2014214616 A JP 2014214616A JP 2016080981 A JP2016080981 A JP 2016080981A
Authority
JP
Japan
Prior art keywords
response
voice
verb
noun
keyword
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014214616A
Other languages
English (en)
Inventor
生聖 渡部
Seisho Watabe
生聖 渡部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2014214616A priority Critical patent/JP2016080981A/ja
Publication of JP2016080981A publication Critical patent/JP2016080981A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Machine Translation (AREA)

Abstract

【課題】画一的な応答パターンによる対話の違和感を緩和すること。【解決手段】応答生成装置は、ユーザ音声を認識する音声認識手段と、認識された音声の構造を解析する構造解析手段と、認識された音声から名詞又は動詞を抽出する品詞抽出手段と、繰返生成手段と、解析された音声の構造に基づいて随意応答文を生成し繰返応答文を出力した後、随意応答文を出力する応答出力手段と、複数のキーワードに該各キーワードに関連する関連ワード及び付加語を夫々対応付けた情報を記憶する記憶手段と、を備える。繰返生成手段は、品詞抽出手段により抽出された名詞又は動詞と一致する記憶手段のキーワードを選択し、選択したキーワードに対応する付加語を、抽出された名詞又は動詞に対して付加し、名詞又は動詞を、選択した記憶手段のキーワードに対応する関連ワードに、置き換えて、繰返応答文を生成する。【選択図】図1

Description

本発明は、ユーザに対して応答を行う応答生成装置、応答生成方法及び応答生成プログラムに関するものである。
ユーザの音声を認識する音声認識手段と、音声認識手段により認識された音声の構造を解析する構造解析手段と、構造解析手段により解析された音声の構造に基づいて、ユーザの音声に対する応答文を生成し、該生成した応答文を出力する応答出力手段と、を備える応答生成装置が知られている(例えば、特許文献1参照)。
特開2010−157081号公報
上記のような応答生成装置は、音声の構造解析、及びその応答文の生成に時間を要し、応答待ちが生じる。このため、対話に違和感が生じる虞がある。そこで、例えば、その応答待ちの間に音声認識手段により認識したユーザの音声を繰返し応答文として用い簡易に応答を行うことが考えられる。この場合、応答待ちが短くなり対話の違和感が緩和されるが、画一的な応答パターンとなり対話としての不自然さが残る。
本発明は、このような問題点を解決するためになされたものであり、画一的な応答パターンによる対話の違和感を緩和することができる応答生成装置、応答生成方法及び応答生成プログラムを提供することを主たる目的とする。
上記目的を達成するための本発明の一態様は、ユーザの音声を認識する音声認識手段と、前記音声認識手段により認識された音声の構造を解析する構造解析手段と、前記音声認識手段により認識された音声から名詞又は動詞を抽出する品詞抽出手段と、前記品詞抽出手段により抽出された名詞又は動詞を、前記ユーザの音声を繰り返すための繰返し応答文として生成する繰返生成手段と、前記構造解析手段により解析された音声の構造に基づいて、前記ユーザの音声に対する随意の応答文を生成し、前記繰返生成手段により生成された繰返し応答文を出力した後、前記生成した随意の応答文を出力する応答出力手段と、を備える応答生成装置であって、複数のキーワードに該各キーワードに関連する関連ワード及び付加語を夫々対応付けた情報を記憶する記憶手段を備え、前記繰返生成手段は、前記品詞抽出手段により抽出された名詞又は動詞と一致する前記記憶手段のキーワードを選択し、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加し、該名詞又は動詞を、該選択した記憶手段のキーワードに対応する関連ワードに、置き換えて、前記繰返し応答文を生成する、ことを特徴とする応答生成装置である。
この一態様において、前記ユーザの音声の音韻を分析する音韻分析手段と、前記音韻分析手段により分析された音韻の分析結果に基づいて、前記ユーザの音声に対する相槌の応答を生成する相槌生成手段と、を更に含み、前記繰返生成手段により生成される繰返しの応答文を出力する前に、前記相槌生成手段により生成された相槌の応答を出力してもよい。
上記目的を達成するための本発明の一態様は、ユーザの音声を認識するステップと、前記認識された音声の構造を解析するステップと、前記認識された音声から名詞又は動詞を抽出するステップと、前記抽出された名詞又は動詞を、前記ユーザの音声を繰り返すための繰返し応答文として生成するステップと、前記解析された音声の構造に基づいて、前記ユーザの音声に対する随意の応答文を生成し、前記生成された繰返し応答文を出力した後、前記生成した随意の応答文を出力するステップと、を含む応答生成方法であって、複数のキーワードに該各キーワードに関連する関連ワード及び付加語を夫々対応付けた情報が記憶されており、前記抽出された名詞又は動詞と一致する前記キーワードを選択し、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加し、該名詞又は動詞を、該選択したキーワードに対応する関連ワードに、置き換えて、前記繰返し応答文を生成する、ことを特徴とする応答生成方法であってもよい。
上記目的を達成するための本発明の一態様は、ユーザの音声を認識する処理と、前記認識された音声の構造を解析する処理と、前記認識された音声から名詞又は動詞を抽出する処理と、前記抽出された名詞又は動詞を、前記ユーザの音声を繰り返すための繰返し応答文として生成する処理と、前記解析された音声の構造に基づいて、前記ユーザの音声に対する随意の応答文を生成し、前記生成された繰返し応答文を出力した後、前記生成した随意の応答文を出力する処理と、をコンピュータに実行させる応答生成プログラムであって、複数のキーワードに該各キーワードに関連する関連ワード及び付加語を夫々対応付けた情報が記憶されており、前記抽出された名詞又は動詞と一致する前記キーワードを選択し、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加し、該名詞又は動詞を、該選択したキーワードに対応する関連ワードに、置き換えて、前記繰返し応答文を生成する処理をコンピュータに実行させることを特徴とする応答生成プログラムであってもよい。
本発明によれば、画一的な応答パターンによる対話の違和感を緩和することができる応答生成装置、応答生成方法及び応答生成プログラムを提供することができる。
本発明の実施形態1に係る応答生成装置の概略的なシステム構成を示すブロック図である。 本発明の実施形態1に係る応答生成装置の概略的なハードウェア構成を示すブロック図である。 本発明の実施形態1に係る応答生成方法の処理フローを示すフローチャートである。 本発明の実施形態2に係る応答生成装置の概略的なシステム構成を示すブロック図である。
実施形態1
以下、図面を参照して本発明の実施の形態について説明する。図1は、本発明の実施形態1に係る応答生成装置の概略的なシステム構成を示すブロック図である。本実施形態1に係る応答生成装置1は、ユーザの音声を認識する音声認識部2と、音声の構造を解析する構造解析部と3、ユーザの音声に対する応答文を生成し、出力する応答出力部4と、繰返しの応答文を生成する繰返生成部5と、品詞抽出部9と、を備えている。
なお、応答生成装置1は、例えば、演算処理等と行うCPU(Central Processing Unit)1a、CPU1aによって実行される演算プログラム、制御プログラム等が記憶されたROM(Read Only Memory)やRAM(Random Access Memory)からなるメモリ1b、外部と信号の入出力を行うインターフェイス部(I/F)1c、などからなるマイクロコンピュータを中心にして、ハードウェア構成されている(図2)。CPU1a、メモリ1b、及びインターフェイス部1cは、データバス1dなどを介して相互に接続されている。
音声認識部2は、マイク6により取得されたユーザの音声情報に基づいて音声認識処理を行い、ユーザの音声情報をテキスト化し文字列情報として認識する。音声認識部2は、音声認識手段の一具体例である。音声認識部2は、マイク6から出力されるユーザの音声情報から発話区間を検出し、検出した発話区間の音声情報に対して、例えば、統計言語モデルを参照してパターンマッチングを行うことで音声認識を行う。ここで、統計言語モデルは、例えば、単語の出現分布やある単語の次に出現する単語の分布等、言語表現の出現確率を計算するための確率モデルであり、形態素単位で連結確率を学習したものである。統計言語モデルは、メモリ1bなどに予め記憶されている。なお、音声認識部2は、ユーザの音声情報の各形態素に対してその品詞種類(名詞、形容詞、動詞、副詞など)を付加した品詞情報付き形態素情報を生成する。音声認識部2は、認識したユーザの音声情報を構造解析部3及び品詞抽出部9に出力する。
構造解析部3は、音声認識部2により認識された音声情報の構造を解析する。構造解析部3は、構造解析手段の一具体例である。構造解析部3は、例えば、一般的な形態素解析器を用いて音声認識されたユーザの音声情報を示す文字列情報に対して形態素解析などを行い、文字列情報の意味解釈を行う。構造解析部3は、文字列情報の解析結果を応答出力部4に出力する。
応答出力部4は、構造解析部3により解析された音声情報の構造に基づいて、ユーザの音声情報に対する応答文(以下、随意応答文と称す)を生成し、該生成した随意応答文を出力する。応答出力部4は、応答出力手段の一具体例である。応答出力部4は、例えば、構造解析部3から出力される文字列情報の解析結果に基づいて、ユーザの音声情報に対する随意応答文を生成する。そして、応答出力部4は、生成した応答文をスピーカ7を用いて出力する。
より、具体的には、構造解析部3は、文字列情報「トンカツ を 食べる」において、述語項構造を抽出し、述語「食べる」と格助詞「を」を特定する。そして、応答出力部4は、構造解析部3により特定された述語「食べる」に係り得る格助詞の種類を、述語と格助詞との対応関係が記憶された不足格辞書データベース8の中から抽出する。なお、不足格辞書データベース8は、例えば、メモリ1bに構築されている。
応答出力部4は、例えば、「何 を 食べる」、「どこ で 食べる」、「いつ に 食べる」、「誰 と 食べる」とういう述語項構造を、随意応答文として生成する。さらに、応答出力部4は、上記生成した述語項構造の中で、ユーザの音声と一致しない表層格「を」を除いた、他の述語項構造の中からランダムに選択し、選択した述語項構造を随意応答文とする。応答出力部4は、例えば、「誰と食べたの?」という述語項構造を選択し、随意応答文として出力する。なお、上述した随意応答文の生成方法は一例であり、これに限定されず、任意の生成方法を用いることができる。
品詞抽出部9は、音声認識部2から出力された音声情報の品詞情報付き形態素情報に基づいて、認識されたユーザの音声情報から名詞及び/又は動詞を抽出する。品詞抽出部9は、品詞抽出手段の一具体例である。品詞抽出部9は、例えば、音声認識部2から出力された音声情報の品詞情報付き形態素情報「トンカツ(名詞)を(助詞)食べた(動詞)よ(助詞)」から、「トンカツ(名詞)」又は「食べた(動詞)」を抽出する。品詞抽出部9は、上記名詞として、例えば、トンカツ(一般名詞)、矢場トン(固有名詞)、投票する=>投票(サ変名詞)(但し、数詞などの一部の名詞を除く)などを抽出する。また、品詞抽出部9は、上記動詞として、例えば、投票する(サ変動詞)、泳ぐ、などを抽出する。品詞抽出部9は、抽出した名詞又は動詞を繰返生成部5に出力する。
ところで、上述したような、音声情報の構造解析、及びその応答文の生成には時間を要し(例えば、3秒程度)、処理コストが高い。このため、応答待ちが生じ、対話に違和感が生じる虞がある。
これに対し、本実施の形態1に係る応答生成装置1において、繰返生成部5は、音声認識部2により認識されたユーザの音声から、繰返しの応答文(以下、繰返応答文と称す)を簡易に生成する。そして、応答出力部4は、繰返生成部5により生成された繰返応答文した後、音声の構造に基づいた随意応答文を出力する。
これにより、繰返応答文は、認識されたユーザの音声をオウム返しで繰り返すだけなので生成時間を要せず(例えば、1秒程度)、処理コストが低い。したがって、上記処理コストが高い随意応答文を出力するまでの応答待ちの間に、処理コストが低い繰返応答文を出力することができる。したがって、応答待ちによって生じる対話の間が大きいことによる対話の違和感を緩和することができる。
繰返生成部5は、上述の如く、音声認識部2により認識された音声情報を、オウム返しを行うための繰返応答文として生成する。ここで、ユーザの音声を全く変えずにそのままオウム返しするよりも、ユーザの音声情報の名詞又は動詞に特定の付加語を付加してオウム返しをした方が、より対話の自然性が向上する。例えば、ユーザの発話「海に行ったよ」に対して、応答生成装置1が単にそのまま「海に行ったよ」と応答するよりも、「海かぁ」あるいは「お、海かぁ」と応答した方がより対話の自然性が向上する。
したがって、本実施の形態1に係る繰返生成部5は、品詞抽出部9により抽出された名詞又は動詞に対して特定の付加語を付加することで、繰返応答文を生成する。これにより、オオム返しの繰返応答文の語感に多様性を持たせることができるため、画一的な応答パターンにならず、対話の違和感をより緩和することができる。
メモリ1bには、例えば、複数のキーワードと、複数の付加語(語頭、語尾など)と、を夫々対応付けた付加情報(テーブル情報など)が記憶されている。繰返生成部5は、品詞抽出部9から出力される名詞又は動詞と、メモリ1bに記憶された付加情報と、に基づいて、その名詞又は動詞と一致する付加情報のキーワードを選択する。そして、繰返生成部5は、選択したキーワードに対応する付加語を選択する。繰返生成部5は、品詞抽出部9から出力される名詞又は動詞に、選択した付加語を、付加することで繰返応答文を生成する。
より具体的には、繰返生成部5は、品詞抽出部9から出力される名詞「ラーメン」と、メモリ1bに記憶された付加情報と、に基づいて、その名詞「ラーメン」に対応する付加語「かぁ」を選択する。繰返生成部5は、品詞抽出部9から出力される名詞「ラーメン」に選択した付加語「かぁ」を付加することで、繰返応答文「ラーメンかぁ」を生成する。
さらに、画一的な応答パターンを改善し対話としての自然さをより向上させるために、本実施形態1に係る応答生成装置1において、繰返生成部5は、上記名詞又は動詞に特定の付加語を付加するだけでなく、その名詞又は動詞を、関連する関連ワードに置き換えて、繰返応答文を生成する。これにより、オオム返しの繰返応答文の語感に対しより多様性を持たせることができ、対話の違和感をより緩和することができる。
メモリ1bには、例えば、下記に示すような、複数のキーワードに該各キーワードに関連する関連ワードに夫々対応付けた関連ワード情報(テーブル情報など)が記憶されている。
キーワード「トンカツ」 関連ワード「豚肉」、
キーワード「ステーキ」 関連ワード「牛肉」、
キーワード「A型」 関連ワード「慎重型」、
キーワード「O型」 関連ワード「おおらか型」
キーワード「牛肉」 関連ワード「お肉」
キーワード「矢場トン」 関連ワード「味噌カツ」
キーワード「投票する」 関連ワード「国民の義務」
キーワード「泳ぐ」 関連ワード「スイミング」
・・・・・
なお、関連ワードは、例えば、キーワードに類似するワード、あるいは、キーワードの上位概念に相当するワードなどの、ユーザがそのキーワードに基づいて連想するワードである。また、関連ワード情報は、キーワードと関連ワードとを一対一で対応付けたテーブル情報となっているが、これに限定されない。関連ワード情報は、例えば、ツリー状のオントロジー情報であってもよい。さらに、関連ワード情報および上記付加情報は、一体(両者が対応付けられたテーブル情報など)で構成されていてもよい。
繰返生成部5は、品詞抽出部9から出力される名詞又は動詞と、メモリ1bに記憶された関連ワード情報と、に基づいて、その名詞又は動詞と一致する関連ワード情報のキーワードを選択する。繰返生成部5は、選択したキーワードに対応する関連ワードを選択する。繰返生成部5は、品詞抽出部9により抽出された名詞又は動詞を、該選択した関連ワードに、置き換えて繰返応答文を生成する。
なお、上述した繰返応答文を生成する処理は、音声情報から名詞又は動詞を抽出し、抽出した名詞又は動詞に対して、対応する付加語を付加し、対応する関連ワードに置き換えて出力するだけの簡易な処理である。したがって、この繰返応答文を生成する処理コストは、音声情報の構造解析を行って随意応答文を生成する処理コストと比較して、低くなる。
図3は、本実施形態1に係る応答生成方法の処理フローを示すフローチャートである。
音声認識部2は、マイク6により取得されたユーザの音声情報の音声認識を行い(ステップS101)、認識したユーザの音声情報を構造解析部3、及び品詞抽出部9に出力する。
品詞抽出部9は、音声認識部2から出力された音声情報の品詞情報付き形態素情報に基づいて、認識されたユーザの音声情報から名詞又は動詞を抽出する(ステップS102)。品詞抽出部9は、抽出した名詞又は動詞を繰返生成部5に出力する。
繰返生成部5は、品詞抽出部9から出力された名詞又は動詞と、メモリ1bの付加情報と、に基づいて、品詞抽出部9から出力された名詞又は動詞と一致する付加情報のキーワードを選択する。そして、繰返生成部5は、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加する(ステップS103)。
繰返生成部5は、品詞抽出部9から出力された名詞又は動詞と、メモリ1bの関連ワード情報と、に基づいて、品詞抽出部9から出力された名詞又は動詞と一致する関連ワード情報のキーワードを選択する。そして、繰返生成部5は、品詞抽出部9から出力された名詞又は動詞を、該選択したキーワードに対応する関連ワードに、置き換えて(ステップS104)、繰返応答文を生成する(ステップS105)。
繰返生成部5は、生成した繰返応答文を応答出力部4に出力する。応答出力部4は、繰返生成部5から出力される繰返応答文をスピーカ7から出力する(ステップS106)。
上記(ステップ102)及び(ステップ106)と平行して、構造解析部3は、音声認識部2により認識された音声情報の構造を解析し(ステップS107)、その文字列情報の解析結果を応答出力部4に出力する。
応答出力部4は、構造解析部3から出力される文字列情報の解析結果に基づいて随意応答文を生成し(ステップS108)、生成した随意応答文をスピーカ7から出力する(ステップS109)。ここで、応答出力部4は、処理時間の低い繰返応答文を出力した後、処理時間の高い随意応答文を出力することとなる。
以上、本実施形態1に係る応答生成装置1において、繰返生成部5は、品詞抽出部9により抽出された名詞又は動詞と一致するメモリ1bのキーワードを選択し、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加する。さらに、繰返生成部5は、該抽出された名詞又は動詞を、該選択したメモリ1bのキーワードに対応する関連ワードに、置き換えて、繰返し応答文を生成する。これより、オオム返しの繰返応答文の語感に多様性を持たせることができ、対話の違和感をより緩和することができる。
実施形態2.
図4は、本発明の実施形態2に係る応答生成装置の概略的なシステム構成を示すブロック図である。本実施形態2に係る応答生成装置20は、上記実施形態1に係る応答生成装置1の構成に加えて、ユーザの音声情報の音韻を分析する音韻分析部21と、ユーザの音声情報に対する相槌の応答を生成する相槌生成部22と、を更に備える点を特徴とする。
音韻分析部21は、マイク6により取得されたユーザの音声情報に基づいてユーザの音声情報の音韻を分析する。音韻分析部21は、音韻分析手段の一具体例である。例えば、音韻分析部21は、音声情報の音量レベル変化や周波数変化(基本周波数等)を検出することで、ユーザの音声の切れ目を推定する。音韻分析部21は、音韻の分析結果を相槌生成部22に出力する。
相槌生成部22は、音韻分析部21から出力される音韻の分析結果に基づいて、ユーザの音声に対する相槌の応答(以下、相槌応答と称す)を生成する。相槌生成部22は、相槌生成手段の一具体例である。例えば、相槌生成部22は、音声情報の音量レベルが閾値以下となったとき、相槌のパターンが記憶された定型応答データベース23を検索する。そして、相槌生成部22は、定型応答データベース23からランダムに相槌応答を選択する。定型応答データベース23は、「うん。うん。」などの相槌に用いられる複数のパターンが記憶されている。定型応答データベース23は、上記メモリ1bなどに構築されている。相槌生成部22は、生成した相槌応答を応答出力部4に出力する。
応答出力部4は、繰返生成部5により生成された繰返応答文の前に、相槌生成部22により生成された相槌応答をスピーカ7から出力させる。なお、音韻分析部21は、処理コストの低い特徴量を用いて音韻分析を行っている。このため、その相槌応答の生成時間は、上記繰返応答文の生成時間より短く、処理コストがより低い。
したがって、上記繰返応答文を出力するまでの間に、より処理コストが低い相槌応答を出力することができる。これにより、対話間の繋がりがよりスムーズになり、対話の違和感をより緩和することができる。さらに、処理コストの異なるより多くの応答及び応答文を並列で生成し、その生成順に出力する。これにより、対話の連続性をより滑らかに維持しそのテンポ感を損なわないより自然な対話を実現できる。
なお、相槌生成部22は、相槌応答を定型的に生成しており、繰返生成部5は、音声認識結果の表層的な解釈のみを行って繰返応答文を生成している。したがって、応答出力部4は、相槌生成部22により生成された相槌応答および繰返生成部5により生成された繰返応答と同様の随意応答候補を生成することが想定される。
これに対し、応答出力部4は、随意応答候補の中から、相槌生成部22により生成された相槌応答および繰返生成部5により生成された繰返応答と重複する随意応答候補を除外する。そして、応答出力部4は、その除外された随意応答候補の中から最適な候補を選択し、随意応答文とする。これにより、重複する無駄な言葉を排除できより自然な対話を実現できる。
例えば、ユーザの発話「今日は暑いね」に対して、相槌生成部22が相槌応答「うん」を生成する。続いて、繰返生成部5は、繰返応答文「暑いね」を生成する。これに対し、応答出力部4は、随意応答候補「嫌だね」、「いつまで暑いのかな?」、「暑いね」、「そうだね」等を生成する。応答出力部4は、生成した随意応答候補の中から繰返生成部5により生成された繰返応答文と重複する「暑いね」を排除する。そして、応答出力部4は、その除外された随意応答候補の中から、例えば「いつまで暑いのかな?」を選択し、随意応答文とする。
なお、本実施形態2に係る応答生成装置20において、上記実施形態1に係る応答生成装置1と同一部分に同一符号を付して詳細な説明は省略する。
以下、応答生成装置20とユーザとの対話の一例を示す。下記一例において、Mは、応答生成装置20の応答文及び応答であり、Uはユーザの発話である。
M(話題提供):お昼何を食べたの?
U:トンカツを食べたよ。
M(相槌応答):うん。うん。
M(繰返応答文):豚肉、豚肉かぁ。(「かぁ」を付加、「トンカツ」を「豚肉」に置き換え)
M(随意応答文):誰と食べたのかな?
U:友達と食べたよ。
M(相槌応答):そうなんだ。
M(繰返応答文):友達なんだぁ。(「なんだぁ」を付加)
M(随意応答文):どこで食べたのかな?
U:矢場とんで食べたよ。
M(相槌応答):なるほど。
M(繰返応答文):味噌カツだね。(「だね」を付加、「矢場トン」を「味噌カツ」に置き換え)
M(随意応答文):食べたね。
U:美味しかったよ。
M(相槌応答):ふーん。
M(繰返応答文):美味しかったのか。(「のか」を付加)
M(随意応答文):それはいいね。○○さん。
上記対話の一例が示すように、ユーザが発話すると、この発話に対して、応答生成装置20の相槌応答、繰返応答文、及び随意応答文がテンポよく連続し、対話間の繋がりがよりスムーズになることが分かる。また、動詞又は名詞に付加語を付加し関連ワードへ置き換えることにより、繰返応答文に多様性を持たせることで、対話の自然性がより向上していることが分かる。
なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。
上記実施形態において、繰返生成部5は、品詞抽出部9から出力された名詞又は動詞にメモリ1bの付加情報の付加語を付加した後、該名詞又は動詞をメモリ1bの関連ワード情報の関連ワードに、置き換えているが、これに限定されない。繰返生成部5は、品詞抽出部9から出力された名詞又は動詞を、メモリ1bの関連ワード情報の関連ワードに、置き換えた後、該置き換えた関連ワードにメモリ1bの付加情報の付加語を付加してもよい。
例えば、繰返生成部5は、品詞抽出部9から出力された名詞又は動詞と、メモリ1bの関連ワード情報と、に基づいて、品詞抽出部9から出力された名詞又は動詞と一致する関連ワード情報のキーワードを選択する。繰返生成部5は、品詞抽出部9から出力された名詞又は動詞を、該選択したキーワードに対応する関連ワードに、置き換える。繰返生成部5は、品詞抽出部9から出力された名詞又は動詞と、メモリ1bの付加情報と、に基づいて、品詞抽出部9から出力された名詞又は動詞と一致する付加情報のキーワードを選択する。繰返生成部5は、該選択したキーワードに対応する付加語を、上記置き換えられた関連ワードに対して付加することで、繰返応答文を生成する。
上記実施形態において、応答出力部4は相槌生成部22により生成された相槌応答をスピーカ7から出力させているが、これに限られない。応答出力部4は、相槌生成部22により生成された相槌応答に基づいて、処理負荷の低い任意の応答を行っても良い。例えば、応答出力部4は、振動装置の振動、ライト装置の点灯/点滅、表示装置の表示、ロボットの手足、頭部、胴体など各部の動作などをおこなってもよく、これらを任意に組み合わせて行ってもよい。
上記実施形態において、応答出力部4は、繰返生成部5により生成された繰返応答文をスピーカ7から出力させているが、これに限らない。応答出力部4は、繰返生成部5により生成された繰返応答文に基づいて、処理負荷の低い任意の繰返応答文を出力しても良い。例えば、応答出力部4は、表示装置の表示などを用いて繰返応答文を出力してもよく、任意に手段を組み合わせて出力してもよい。この場合、例えば、応答出力部4の出力態様は、文字の大きさ、輝度、形状などの設定であってもよい。
また、本発明は、例えば、図3に示す処理を、CPU1aにコンピュータプログラムを実行させることにより実現することも可能である。
プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD−ROM(Read Only Memory)、CD−R、CD−R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(random access memory))を含む。
また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
1 応答生成装置、2 音声認識部、3 構造解析部、4 応答出力部、5 繰返生成部、6 マイク、7 スピーカ、8 不足格辞書データベース、9 品詞抽出部、21 音韻分析部、22 相槌生成部、23 定型応答データベース

Claims (4)

  1. ユーザの音声を認識する音声認識手段と、
    前記音声認識手段により認識された音声の構造を解析する構造解析手段と、
    前記音声認識手段により認識された音声から名詞又は動詞を抽出する品詞抽出手段と、
    前記品詞抽出手段により抽出された名詞又は動詞を、前記ユーザの音声を繰り返すための繰返し応答文として生成する繰返生成手段と、
    前記構造解析手段により解析された音声の構造に基づいて、前記ユーザの音声に対する随意の応答文を生成し、前記繰返生成手段により生成された繰返し応答文を出力した後、前記生成した随意の応答文を出力する応答出力手段と、
    を備える応答生成装置であって、
    複数のキーワードに該各キーワードに関連する関連ワード及び付加語を夫々対応付けた情報を記憶する記憶手段を備え、
    前記繰返生成手段は、前記品詞抽出手段により抽出された名詞又は動詞と一致する前記記憶手段のキーワードを選択し、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加し、該名詞又は動詞を、該選択した記憶手段のキーワードに対応する関連ワードに、置き換えて、前記繰返し応答文を生成する、ことを特徴とする応答生成装置。
  2. 請求項1記載の応答生成装置であって、
    前記ユーザの音声の音韻を分析する音韻分析手段と、
    前記音韻分析手段により分析された音韻の分析結果に基づいて、前記ユーザの音声に対する相槌の応答を生成する相槌生成手段と、を更に含み、
    前記繰返生成手段により生成される繰返しの応答文を出力する前に、前記相槌生成手段により生成された相槌の応答を出力する、ことを特徴とする応答生成装置。
  3. ユーザの音声を認識するステップと、
    前記認識された音声の構造を解析するステップと、
    前記認識された音声から名詞又は動詞を抽出するステップと、
    前記抽出された名詞又は動詞を、前記ユーザの音声を繰り返すための繰返し応答文として生成するステップと、
    前記解析された音声の構造に基づいて、前記ユーザの音声に対する随意の応答文を生成し、前記生成された繰返し応答文を出力した後、前記生成した随意の応答文を出力するステップと、
    を含む応答生成方法であって、
    複数のキーワードに該各キーワードに関連する関連ワード及び付加語を夫々対応付けた情報が記憶されており、
    前記抽出された名詞又は動詞と一致する前記キーワードを選択し、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加し、該名詞又は動詞を、該選択したキーワードに対応する関連ワードに、置き換えて、前記繰返し応答文を生成する、ことを特徴とする応答生成方法。
  4. ユーザの音声を認識する処理と、
    前記認識された音声の構造を解析する処理と、
    前記認識された音声から名詞又は動詞を抽出する処理と、
    前記抽出された名詞又は動詞を、前記ユーザの音声を繰り返すための繰返し応答文として生成する処理と、
    前記解析された音声の構造に基づいて、前記ユーザの音声に対する随意の応答文を生成し、前記生成された繰返し応答文を出力した後、前記生成した随意の応答文を出力する処理と、
    をコンピュータに実行させる応答生成プログラムであって、
    複数のキーワードに該各キーワードに関連する関連ワード及び付加語を夫々対応付けた情報が記憶されており、
    前記抽出された名詞又は動詞と一致する前記キーワードを選択し、該選択したキーワードに対応する付加語を、該抽出された名詞又は動詞に対して付加し、該名詞又は動詞を、該選択したキーワードに対応する関連ワードに、置き換えて、前記繰返し応答文を生成する処理をコンピュータに実行させることを特徴とする応答生成プログラム。
JP2014214616A 2014-10-21 2014-10-21 応答生成装置、応答生成方法及び応答生成プログラム Pending JP2016080981A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014214616A JP2016080981A (ja) 2014-10-21 2014-10-21 応答生成装置、応答生成方法及び応答生成プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014214616A JP2016080981A (ja) 2014-10-21 2014-10-21 応答生成装置、応答生成方法及び応答生成プログラム

Publications (1)

Publication Number Publication Date
JP2016080981A true JP2016080981A (ja) 2016-05-16

Family

ID=55958704

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014214616A Pending JP2016080981A (ja) 2014-10-21 2014-10-21 応答生成装置、応答生成方法及び応答生成プログラム

Country Status (1)

Country Link
JP (1) JP2016080981A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017200078A1 (ja) * 2016-05-20 2017-11-23 日本電信電話株式会社 対話方法、対話システム、対話装置、およびプログラム
WO2018123139A1 (ja) * 2016-12-27 2018-07-05 シャープ株式会社 応答装置、応答装置の制御方法、および制御プログラム
EP3489951A1 (en) * 2017-11-28 2019-05-29 Toyota Jidosha Kabushiki Kaisha Voice dialogue apparatus, voice dialogue method, and program

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62293298A (ja) * 1986-06-13 1987-12-19 株式会社東芝 マンマシン対話装置
JP2004145541A (ja) * 2002-10-23 2004-05-20 Inosu:Kk チャットシステム
JP2004191407A (ja) * 2002-12-06 2004-07-08 Casio Comput Co Ltd 会話システム及び会話処理プログラム
JP2007328283A (ja) * 2006-06-09 2007-12-20 Kenwood Corp 対話装置、プログラム、及び対話方法
JP2009193448A (ja) * 2008-02-15 2009-08-27 Oki Electric Ind Co Ltd 対話システム、方法及びプログラム
JP2010157081A (ja) * 2008-12-26 2010-07-15 Toyota Central R&D Labs Inc 応答生成装置及びプログラム
JP2010224608A (ja) * 2009-03-19 2010-10-07 Toyota Central R&D Labs Inc 応答生成装置及びプログラム
JP2014048443A (ja) * 2012-08-31 2014-03-17 Nippon Telegr & Teleph Corp <Ntt> 音声合成システム、音声合成方法及び音声合成プログラム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62293298A (ja) * 1986-06-13 1987-12-19 株式会社東芝 マンマシン対話装置
JP2004145541A (ja) * 2002-10-23 2004-05-20 Inosu:Kk チャットシステム
JP2004191407A (ja) * 2002-12-06 2004-07-08 Casio Comput Co Ltd 会話システム及び会話処理プログラム
JP2007328283A (ja) * 2006-06-09 2007-12-20 Kenwood Corp 対話装置、プログラム、及び対話方法
JP2009193448A (ja) * 2008-02-15 2009-08-27 Oki Electric Ind Co Ltd 対話システム、方法及びプログラム
JP2010157081A (ja) * 2008-12-26 2010-07-15 Toyota Central R&D Labs Inc 応答生成装置及びプログラム
JP2010224608A (ja) * 2009-03-19 2010-10-07 Toyota Central R&D Labs Inc 応答生成装置及びプログラム
JP2014048443A (ja) * 2012-08-31 2014-03-17 Nippon Telegr & Teleph Corp <Ntt> 音声合成システム、音声合成方法及び音声合成プログラム

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
三宅 梨帆 外3名: "音声対話システムにおける相槌認識/生成機能の言語情報と韻律情報の利用による実現", 日本音響学会 2005年 秋季研究発表会講演論文集, JPN6016040481, 20 September 2005 (2005-09-20), JP, pages 191 - 192, ISSN: 0003701615 *
岡登 洋平 外4名: "相槌を打つ音声対話システムの評価", 第25回 言語・音声理解と対話処理研究会資料, JPN6016040491, 26 February 1999 (1999-02-26), JP, pages 7 - 12, ISSN: 0003661724 *
永井 洋介 外3名: "対話型キャラクタエージェントを用いた高齢者向け生活行動記録支援", FIT2014 第13回情報科学技術フォーラム 講演論文集 第3分冊, JPN6016040479, 19 August 2014 (2014-08-19), JP, pages 343 - 346, ISSN: 0003701614 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017200078A1 (ja) * 2016-05-20 2017-11-23 日本電信電話株式会社 対話方法、対話システム、対話装置、およびプログラム
JPWO2017200078A1 (ja) * 2016-05-20 2019-03-28 日本電信電話株式会社 対話方法、対話システム、対話装置、およびプログラム
US11232789B2 (en) 2016-05-20 2022-01-25 Nippon Telegraph And Telephone Corporation Dialogue establishing utterances without content words
WO2018123139A1 (ja) * 2016-12-27 2018-07-05 シャープ株式会社 応答装置、応答装置の制御方法、および制御プログラム
EP3489951A1 (en) * 2017-11-28 2019-05-29 Toyota Jidosha Kabushiki Kaisha Voice dialogue apparatus, voice dialogue method, and program
JP2019101065A (ja) * 2017-11-28 2019-06-24 トヨタ自動車株式会社 音声対話装置、音声対話方法及びプログラム
CN110033762A (zh) * 2017-11-28 2019-07-19 丰田自动车株式会社 语音对话设备、语音对话方法和程序
US10825455B2 (en) 2017-11-28 2020-11-03 Toyota Jidosha Kabushiki Kaisha Voice dialogue apparatus, voice dialogue method, and non-transitory computer readable media
CN110033762B (zh) * 2017-11-28 2023-04-07 丰田自动车株式会社 语音对话设备、语音对话方法和程序

Similar Documents

Publication Publication Date Title
JP6696923B2 (ja) 音声対話装置、その処理方法及びプログラム
KR102161579B1 (ko) 응답문 생성 장치, 방법 및 프로그램, 그리고 음성 대화 시스템
Johar Emotion, affect and personality in speech: The Bias of language and paralanguage
JP6390264B2 (ja) 応答生成方法、応答生成装置及び応答生成プログラム
JP2012118723A (ja) 形態素解析装置、音声合成装置、形態素解析方法、形態素解析プログラム及び対応辞書の作成方法
JP6299563B2 (ja) 応答生成方法、応答生成装置及び応答生成プログラム
JP6828667B2 (ja) 音声対話装置、音声対話方法及びプログラム
JP5073024B2 (ja) 音声対話装置
Cohen Context and paradigms: Two patterns of probabilistic pronunciation variation in Russian agreement suffixes
JP2016080981A (ja) 応答生成装置、応答生成方法及び応答生成プログラム
KR20210051523A (ko) 도메인 자동 분류 대화 시스템
JP6295869B2 (ja) 応答生成装置、応答生成方法及びプログラム
Tsiakoulis et al. Dialogue context sensitive HMM-based speech synthesis
Favaro et al. ITAcotron 2: transfering English speech synthesis architectures and speech features to Italian
JP6287754B2 (ja) 応答生成装置、応答生成方法及び応答生成プログラム
CN114974218A (zh) 语音转换模型训练方法及装置、语音转换方法及装置
Charfuelan MARY TTS HMMbased voices for the Blizzard Challenge 2012
Sarkar et al. Modeling pauses for synthesis of storytelling style speech using unsupervised word features
Ochi et al. Control of prosodic focus in corpus-based generation of fundamental frequency contours of Japanese based on the generation process model
Anumanchipalli et al. Accent group modeling for improved prosody in statistical parameteric speech synthesis
JP6773074B2 (ja) 応答生成方法、応答生成装置及び応答生成プログラム
Rallabandi et al. Submission from CMU for blizzard challenge 2019
JP6538399B2 (ja) 音声処理装置、音声処理方法およびプログラム
Rakov Analyzing Prosody With Legendre Polynomial Coefficients
JP2010224152A (ja) 音声対話装置及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161122

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171010

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171108

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20171219