JP2013073355A - 対話支援装置、方法及びプログラム - Google Patents
対話支援装置、方法及びプログラム Download PDFInfo
- Publication number
- JP2013073355A JP2013073355A JP2011211006A JP2011211006A JP2013073355A JP 2013073355 A JP2013073355 A JP 2013073355A JP 2011211006 A JP2011211006 A JP 2011211006A JP 2011211006 A JP2011211006 A JP 2011211006A JP 2013073355 A JP2013073355 A JP 2013073355A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- information
- language
- dialogue
- speaker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
【解決手段】実施形態によれば、入力部、音声認識部、対話履歴データベース、推定部、判定部、生成部、選択部、提示部を含む。入力部は、話者間の対話の音声を入力する。音声認識部は、入力音声を音声認識して、対応するテキスト情報に変換する。対話履歴データベースは、テキスト情報の全部又は一部を対話履歴として記憶する。推定部は、テキスト情報に基づいて、発話行為を推定する。判定部は、推定された発話行為に基づいて、補足情報を提示するかどうか判定する。生成部は、補足情報を提示すると判定された場合に、補足情報の候補を生成する。選択部は、対話履歴を利用して、補足情報の候補のうちから、提示すべきものを選択する。提示部は、選択された補足情報を提示する。
【選択図】図2
Description
対話しようとする二人の話者が、共通の言語(自然言語)を使用できない場合(例えば、それらの話者が、いずれも、母国語のみを使用し且つ相手の母国語を理解できない場合、あるいは、それらの話者の一方又は両方は、複数の言語を使用できるが、それらの話者が共通して使用できる言語がない場合など)において、そのような話者の間に翻訳器を介在させることによって、それら話者が異なる言語(例えばそれぞれの母国語等)を使用して対話をすることを支援することができる。しかし、一般に、話者同士の背景知識には差があることも多い。それゆえ、翻訳器が一方の話者により発せられた情報を他方の話者向けに正しく翻訳しさえすれば、一方の話者から他方の話者へ情報が正しく伝わる、ということが必ずしも期待できないことがある。これは、背景知識に差がある二人の話者が、共通の言語で会話をする場合にも、同様に生じ得る。
図4に、音声認識部102の処理の例を示す。
図6に、機械翻訳部103の処理の例を示す。
図7は、発話行為推定部104の処理の例を示す。
図9に、提示要否判定部105の処理の例を示す。
図11に、提示候補生成部106の処理の例を示す。
図13に、候補選択部107の処理の例を示す。
提示部108は、前述したように、少なくとも補足情報を所定のタイミングで提示する。
図16に、ボタンにより言語選択を行う場合の構成例を示す。この場合、これまで説明した構成において、入力部101の前に、言語選択入力部111を設け、言語選択入力部111により入力する言語を指定あるいは選択する。
図17に、提示内容判定する場合の構成例を示す。この場合、提示要否判定部105の代わりに提示内容判定部112を設ける。また、補足説明データベース123に加えて、所定数の他のデータベースを設ける。ここでは、一例として、たとえば各料理に関する推奨情報を保持する商品情報データベース125と、たとえば各料理の残り数のような管理情報を保持する管理情報データベース126を設けるものとする。
以下では、第2の実施形態について、第1の実施形態と相違する点を中心に説明する。
また、記録媒体からコンピュータや組み込みシステムにインストールされたプログラムの指示に基づきコンピュータ上で稼働しているOS(オペレーティングシステム)や、データベース管理ソフト、ネットワーク等のMW(ミドルウェア)等が本実施形態を実現するための各処理の一部を実行してもよい。
さらに、本実施形態における記録媒体は、コンピュータあるいは組み込みシステムと独立した媒体に限らず、LANやインターネット等により伝達されたプログラムをダウンロードして記憶または一時記憶した記録媒体も含まれる。
また、記録媒体は1つに限られず、複数の媒体から本実施形態における処理が実行される場合も、本実施形態における記録媒体に含まれ、媒体の構成は何れの構成であってもよい。
また、本実施形態におけるコンピュータとは、パソコンに限らず、情報処理機器に含まれる演算処理装置、マイコン等も含み、プログラムによって本実施形態における機能を実現することが可能な機器、装置を総称している。
Claims (15)
- 複数の話者による対話に係る音声を入力する入力部と、
入力された前記音声を音声認識して、対応するテキスト情報に変換する音声認識部と、
前記テキスト情報の全部又は一部を対話履歴として記憶する対話履歴データベースと、
前記テキスト情報に基づいて、発話行為を推定する推定部と、
推定された前記発話行為に基づいて、補足情報を提示するかどうか判定する判定部と、
前記補足情報を提示すると判定された場合に、補足情報の候補を生成する生成部と、
前記対話履歴を利用して、前記補足情報の候補のうちから、提示すべきものを選択する選択部と、
選択された前記補足情報を提示する提示部とを備えたことを特徴とする対話支援装置。 - 前記テキスト情報に対する話者を特定する話者特定部を更に備え、
前記判定部は、推定された前記発話行為及び特定された前記話者に基づいて、補足情報を提示するかどうか判定することを特徴とする請求項1に記載の対話支援装置。 - 前記入力部は、第一話者の第一言語による音声又は第一話者の第二言語による音声を入力し、
前記音声認識部は、前記第一言語又は前記第二言語による音声を音声認識して、前記第一言語又は前記第二言語による翻訳前のテキスト情報に変換し、
前記対話支援装置は、前記第一言語又は前記第二言語による前記テキスト情報を翻訳して、前記第二言語又は前記第一言語による翻訳後のテキスト情報を生成する機械翻訳部を更に備え、
前記対話履歴データベースは、前記第一言語又は前記第二言語による翻訳前又は翻訳後のテキスト情報の全部又は一部を記憶することを特徴とする請求項1に記載の対話支援装置。 - 前記判定部は、前記テキスト情報に対する話者を特定するか又は話者特定結果を取得し、推定された前記発話行為及び特定された前記話者に基づいて、補足情報を提示するかどうか判定することを特徴とする請求項3に記載の対話支援装置。
- 前記判定部は、特定の一人の話者についてのみ、前記補足情報を提示するかどうか判定することを特徴とする請求項1ないし4のいずれか1項に記載の対話支援装置。
- 前記判定部は、いずれの話者についても、前記補足情報を提示するかどうか判定することを特徴とする請求項1ないし5のいずれか1項に記載の対話支援装置。
- 前記選択部は、前記補足情報の候補のうちで、既に対応する内容が前記対話履歴に含まれているものは、候補から除外することを特徴とする請求項1ないし6のいずれか1項に記載の対話支援装置。
- 前記生成部は、前記補足情報を提示すると判定されるもととなった前記テキスト情報に、予め未知情報として登録されているキーワードが存在する場合に、前記補足情報の候補を生成することを特徴とする請求項1ないし7のいずれか1項に記載の対話支援装置。
- 音声の入力に使用する言語を選択する言語選択部を更に備えることを特徴とする請求項1ないし8のいずれか1項に記載の対話支援装置。
- 前記生成部は、参照データベースを参照して前記生成を実行するものであり、
前記判定部は、前記生成部が、予め定められた複数の参照データベースのうちのいずれの参照データベースを参照すべきかを判定することを特徴とする請求項1ないし9のいずれか1項に記載の対話支援装置。 - 前記推定部は、前記対話履歴をも利用して、前記発話行為を推定することを特徴とする請求項1ないし10のいずれか1項に記載の対話支援装置。
- 前記対話履歴データベースは、推定された前記発話行為を示す情報を、そのもととなった前記テキスト情報とともに記憶することを特徴とする請求項1ないし11のいずれか1項に記載の対話支援装置。
- 前記選択部は、前記発話行為を含む前記対話履歴を利用して、前記補足情報の候補のうちから、提示すべきものを選択する請求項12に記載の対話支援装置。
- 入力部、音声認識部、対話履歴データベース、推定部、判定部、生成部、選択部及び、提示部を備えた対話支援装置の対話支援方法であって、
前記入力部が、話者間の対話の音声を入力するステップと、
前記音声認識部が、入力音声を音声認識して、対応するテキスト情報に変換するステップと、
前記対話履歴データベースが、テキスト情報の全部又は一部を対話履歴として記憶するステップと、
前記推定部が、テキスト情報に基づいて、発話行為を推定するステップと、
前記判定部が、推定された発話行為に基づいて、補足情報を提示するかどうか判定するステップと、
前記生成部が、補足情報を提示すると判定された場合に、補足情報の候補を生成するステップと、
前記選択部が、対話履歴を利用して、補足情報の候補のうちから、提示すべきものを選択するステップと、
前記提示部が、選択された補足情報を提示するステップとを有することを特徴とする対話支援方法。 - 入力部、音声認識部、対話履歴データベース、推定部、判定部、生成部、選択部及び、提示部を備えた対話支援装置としてコンピュータを機能させるためのプログラムであって、
複数の話者による対話に係る音声を入力する入力部と、
入力された前記音声を音声認識して、対応するテキスト情報に変換する音声認識部と、
前記テキスト情報の全部又は一部を対話履歴として記憶する対話履歴データベースと、
前記テキスト情報に基づいて、発話行為を推定する推定部と、
推定された前記発話行為に基づいて、補足情報を提示するかどうか判定する判定部と、
前記補足情報を提示すると判定された場合に、補足情報の候補を生成する生成部と、
前記対話履歴を利用して、前記補足情報の候補のうちから、提示すべきものを選択する選択部と、
選択された前記補足情報を提示する提示部とをコンピュータに実現させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011211006A JP5684082B2 (ja) | 2011-09-27 | 2011-09-27 | 対話支援装置、方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011211006A JP5684082B2 (ja) | 2011-09-27 | 2011-09-27 | 対話支援装置、方法及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015003544A Division JP2015118710A (ja) | 2015-01-09 | 2015-01-09 | 対話装置、方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013073355A true JP2013073355A (ja) | 2013-04-22 |
JP5684082B2 JP5684082B2 (ja) | 2015-03-11 |
Family
ID=48477828
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011211006A Active JP5684082B2 (ja) | 2011-09-27 | 2011-09-27 | 対話支援装置、方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5684082B2 (ja) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015022448A (ja) * | 2013-07-17 | 2015-02-02 | Kddi株式会社 | 言語体系の間で同義語句に対する特定の感情を推定するプログラム、装置及び方法 |
WO2016151700A1 (ja) * | 2015-03-20 | 2016-09-29 | 株式会社 東芝 | 意図理解装置、方法およびプログラム |
JP2017126042A (ja) * | 2016-01-15 | 2017-07-20 | シャープ株式会社 | コミュニケーション支援システム、コミュニケーション支援方法、およびプログラム |
JP2018055689A (ja) * | 2017-10-04 | 2018-04-05 | シャープ株式会社 | 表示装置、表示方法及びプログラム |
CN108093653A (zh) * | 2016-09-13 | 2018-05-29 | 松下知识产权经营株式会社 | 语音提示方法、语音提示程序、语音提示系统及终端装置 |
CN108231070A (zh) * | 2016-12-14 | 2018-06-29 | 松下知识产权经营株式会社 | 语音对话装置、语音对话方法、语音对话程序以及机器人 |
US10216732B2 (en) | 2016-09-07 | 2019-02-26 | Panasonic Intellectual Property Management Co., Ltd. | Information presentation method, non-transitory recording medium storing thereon computer program, and information presentation system |
CN109830231A (zh) * | 2018-12-17 | 2019-05-31 | 北京百度网讯科技有限公司 | 会话处理方法、装置和存储介质 |
CN110246491A (zh) * | 2018-03-08 | 2019-09-17 | 松下知识产权经营株式会社 | 装置、机器人、方法及程序 |
WO2020054244A1 (ja) * | 2018-09-13 | 2020-03-19 | 株式会社Nttドコモ | 対話情報生成装置 |
JP2020149264A (ja) * | 2019-03-13 | 2020-09-17 | 株式会社日立ビルシステム | 音声案内システム及び音声案内方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09292971A (ja) * | 1996-04-26 | 1997-11-11 | Sony Corp | 翻訳装置 |
JP2001251429A (ja) * | 2000-03-03 | 2001-09-14 | Net Teimento:Kk | 携帯電話を使用した音声翻訳システムおよび携帯電話 |
JP2004118740A (ja) * | 2002-09-27 | 2004-04-15 | Toshiba Corp | 質問応答システム、質問応答方法、質問応答プログラム |
JP2004220416A (ja) * | 2003-01-16 | 2004-08-05 | Toshiba Corp | 機械翻訳装置、方法、プログラム及びプログラムを格納したサーバ装置 |
JP2006277119A (ja) * | 2005-03-28 | 2006-10-12 | Toshiba Corp | コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム |
JP2007220045A (ja) * | 2006-02-20 | 2007-08-30 | Toshiba Corp | コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム |
JP2009110420A (ja) * | 2007-10-31 | 2009-05-21 | Sharp Corp | 電子機器、その制御方法およびコンピュータプログラム |
-
2011
- 2011-09-27 JP JP2011211006A patent/JP5684082B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09292971A (ja) * | 1996-04-26 | 1997-11-11 | Sony Corp | 翻訳装置 |
JP2001251429A (ja) * | 2000-03-03 | 2001-09-14 | Net Teimento:Kk | 携帯電話を使用した音声翻訳システムおよび携帯電話 |
JP2004118740A (ja) * | 2002-09-27 | 2004-04-15 | Toshiba Corp | 質問応答システム、質問応答方法、質問応答プログラム |
JP2004220416A (ja) * | 2003-01-16 | 2004-08-05 | Toshiba Corp | 機械翻訳装置、方法、プログラム及びプログラムを格納したサーバ装置 |
JP2006277119A (ja) * | 2005-03-28 | 2006-10-12 | Toshiba Corp | コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム |
JP2007220045A (ja) * | 2006-02-20 | 2007-08-30 | Toshiba Corp | コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム |
JP2009110420A (ja) * | 2007-10-31 | 2009-05-21 | Sharp Corp | 電子機器、その制御方法およびコンピュータプログラム |
Cited By (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015022448A (ja) * | 2013-07-17 | 2015-02-02 | Kddi株式会社 | 言語体系の間で同義語句に対する特定の感情を推定するプログラム、装置及び方法 |
US10360903B2 (en) | 2015-03-20 | 2019-07-23 | Kabushiki Kaisha Toshiba | Spoken language understanding apparatus, method, and program |
WO2016151700A1 (ja) * | 2015-03-20 | 2016-09-29 | 株式会社 東芝 | 意図理解装置、方法およびプログラム |
JPWO2016151700A1 (ja) * | 2015-03-20 | 2017-07-06 | 株式会社東芝 | 意図理解装置、方法およびプログラム |
JP2017126042A (ja) * | 2016-01-15 | 2017-07-20 | シャープ株式会社 | コミュニケーション支援システム、コミュニケーション支援方法、およびプログラム |
US10216732B2 (en) | 2016-09-07 | 2019-02-26 | Panasonic Intellectual Property Management Co., Ltd. | Information presentation method, non-transitory recording medium storing thereon computer program, and information presentation system |
CN108093653B (zh) * | 2016-09-13 | 2023-03-28 | 松下知识产权经营株式会社 | 语音提示方法、记录介质及语音提示系统 |
CN108093653A (zh) * | 2016-09-13 | 2018-05-29 | 松下知识产权经营株式会社 | 语音提示方法、语音提示程序、语音提示系统及终端装置 |
US10650815B2 (en) | 2016-12-14 | 2020-05-12 | Panasonic Intellectual Property Management Co., Ltd. | Voice interaction device, voice interaction method, voice interaction program, and robot |
CN108231070A (zh) * | 2016-12-14 | 2018-06-29 | 松下知识产权经营株式会社 | 语音对话装置、语音对话方法、语音对话程序以及机器人 |
CN108231070B (zh) * | 2016-12-14 | 2023-04-18 | 松下知识产权经营株式会社 | 语音对话装置、语音对话方法、记录介质以及机器人 |
JP2018055689A (ja) * | 2017-10-04 | 2018-04-05 | シャープ株式会社 | 表示装置、表示方法及びプログラム |
US10923140B2 (en) | 2018-03-08 | 2021-02-16 | Panasonic Intellectual Property Management Co., Ltd. | Device, robot, method, and recording medium |
CN110246491A (zh) * | 2018-03-08 | 2019-09-17 | 松下知识产权经营株式会社 | 装置、机器人、方法及程序 |
CN110246491B (zh) * | 2018-03-08 | 2024-05-07 | 松下知识产权经营株式会社 | 与用户交流的装置及其方法、机器人及计算机程序产品 |
JPWO2020054244A1 (ja) * | 2018-09-13 | 2021-09-09 | 株式会社Nttドコモ | 対話情報生成装置 |
JP7087095B2 (ja) | 2018-09-13 | 2022-06-20 | 株式会社Nttドコモ | 対話情報生成装置 |
WO2020054244A1 (ja) * | 2018-09-13 | 2020-03-19 | 株式会社Nttドコモ | 対話情報生成装置 |
CN109830231A (zh) * | 2018-12-17 | 2019-05-31 | 北京百度网讯科技有限公司 | 会话处理方法、装置和存储介质 |
CN109830231B (zh) * | 2018-12-17 | 2021-03-16 | 北京百度网讯科技有限公司 | 会话处理方法、装置和存储介质 |
JP2020149264A (ja) * | 2019-03-13 | 2020-09-17 | 株式会社日立ビルシステム | 音声案内システム及び音声案内方法 |
CN111687831A (zh) * | 2019-03-13 | 2020-09-22 | 株式会社日立大厦系统 | 声音引导系统以及声音引导方法 |
JP7026066B2 (ja) | 2019-03-13 | 2022-02-25 | 株式会社日立ビルシステム | 音声案内システム及び音声案内方法 |
CN111687831B (zh) * | 2019-03-13 | 2023-01-03 | 株式会社日立大厦系统 | 声音引导系统以及声音引导方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5684082B2 (ja) | 2015-03-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5684082B2 (ja) | 対話支援装置、方法及びプログラム | |
US11355098B1 (en) | Centralized feedback service for performance of virtual assistant | |
US10713289B1 (en) | Question answering system | |
US7949523B2 (en) | Apparatus, method, and computer program product for processing voice in speech | |
JP2015118710A (ja) | 対話装置、方法及びプログラム | |
US20130110511A1 (en) | System, Method and Program for Customized Voice Communication | |
WO2015037073A1 (ja) | 音声検索システム、音声検索方法、及びコンピュータ読み取り可能な記憶媒体 | |
JP2016197227A (ja) | 対話方法、対話プログラム及び対話システム | |
KR20060110787A (ko) | 회화 지원 장치 | |
JP2009175336A (ja) | コールセンターのデータベースシステム、その情報管理方法及び情報管理プログラム | |
KR20100111164A (ko) | 사용자의 발화의도를 파악하는 음성 대화 처리장치 및 음성 대화 처리방법 | |
JP2018128869A (ja) | 検索結果表示装置、検索結果表示方法、及びプログラム | |
JP2020077159A (ja) | 対話システム、対話装置、対話方法、及びプログラム | |
JPWO2018066258A1 (ja) | 対話装置、対話装置の制御方法、および制御プログラム | |
JP7160778B2 (ja) | 評価システム、評価方法、及びコンピュータプログラム。 | |
JP2011217018A (ja) | 音声応答装置及びプログラム | |
JP6254504B2 (ja) | 検索サーバ、及び検索方法 | |
JP2019197221A (ja) | 用件判定装置、用件判定方法およびプログラム | |
JP4079275B2 (ja) | 会話支援装置 | |
KR101891495B1 (ko) | 사용자 발화 입력에 대한 대화 응답 후보를 표시하도록 하는 디스플레이 제어 방법, 컴퓨터 판독가능 기록 매체 및 컴퓨터 장치 | |
JP2003030187A (ja) | 自動通訳システム、会話学習装置、自動通訳装置及びその方法並びにそのプログラム | |
WO2020196743A1 (ja) | 評価システム及び評価方法 | |
JP2019207647A (ja) | 対話型業務支援システム | |
JP4760452B2 (ja) | 発話訓練装置、発話訓練システム、発話訓練支援方法およびプログラム | |
JP2006301967A (ja) | 会話支援装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131001 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131205 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131212 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131219 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131226 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20140109 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140417 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140507 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140707 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141216 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150114 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5684082 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 Free format text: JAPANESE INTERMEDIATE CODE: R313114 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |