JP2010102163A - 車室内音声対話装置 - Google Patents
車室内音声対話装置 Download PDFInfo
- Publication number
- JP2010102163A JP2010102163A JP2008274124A JP2008274124A JP2010102163A JP 2010102163 A JP2010102163 A JP 2010102163A JP 2008274124 A JP2008274124 A JP 2008274124A JP 2008274124 A JP2008274124 A JP 2008274124A JP 2010102163 A JP2010102163 A JP 2010102163A
- Authority
- JP
- Japan
- Prior art keywords
- voice
- driver
- output
- unit
- text information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Navigation (AREA)
Abstract
【解決手段】自動車内における乗員の乗車位置を検知する乗員検知部と、テキスト情報を音声に変換して出力する音声出力部と、前記テキスト情報を画像に変換して表示する画像表示部と、前記乗員検知部の検知結果に基づいて、前記音声出力部又は前記画像表示部のいずれか一方を選択し、前記選択された前記音声出力部又は前記画像表示部に前記テキスト情報を出力させる切り替え部と、を備える。
【選択図】図1
Description
102、202 音源分離部
103、203 音声認識部
104、204 認識結果棄却判定部
105、205 分離範囲設定部
106、206 選択肢提示手段判定部
107、207 対話制御部
108、208 認識辞書生成部
109、209 機能制御部
110、210 質問文生成部
111、211 表示画像生成部
112、214 音声出力部
113、215 画像表示部
114、216 対話スクリプトDB
115、217 認識語彙DB
212 質問文出力タイミング決定部
213 画像表示タイミング決定部
218 走行状況判定部
S301 コマンド名称
S302 目的地設定
S303 自動車機器操作
S304 周辺施設検索
S305 時間周波数分解
S701 同乗者判定
S702 タスク終了時間判定
S703 最短終了時間手段選択
S801 助手席座席センサチェック
S802 名前認識
S803 後部座席センサチェック
S804 名前認識
S901 目的音範囲設定
S902 音源分離
1001 DFT
1002 周波数毎ベクトル化
1003 音源定位
1004 音源分離
1005 逆DFT
S1101 目的音範囲かどうか
S1102 目的音共分散更新
S1103 雑音共分散更新
S1104 フィルタ生成
S1105 フィルタリング
S1106 ポストフィルタリング
1201 マイクロホンアレイ
1202 AD変換装置
1203、1603 中央演算装置
1204 揮発性メモリ
1205、1602 記憶媒体
S1501 経路設定コマンド
S1502 エアコン操作コマンド
S1503 スピーカ制御コマンド
1601 スピーカ
1604 座席センサ
1605 ディスプレイ
1606 マイクロホン
1607 速度センサ
Claims (16)
- 自動車内における乗員の乗車位置を検知する乗員検知部と、
テキスト情報を音声に変換して出力する音声出力部と、
前記テキスト情報を画像に変換して表示する画像表示部と、
前記乗員検知部の検知結果に基づいて、前記音声出力部又は前記画像表示部のいずれか一方を選択し、前記選択された前記音声出力部又は前記画像表示部に前記テキスト情報を出力させる切り替え部と、を備えることを特徴とする音声対話装置。 - 運転者以外の乗員が乗車している場合、前記テキスト情報を前記画像表示部に出力させることを選択し、前記運転者以外の乗員が乗車していない場合、前記テキスト情報を前記音声出力部に出力させることを選択することを特徴とする請求項1に記載の音声対話装置。
- 前記音声対話装置は、
さらに、複数のマイクロホンを備え、
前記運転者以外の乗員が乗車していると判定された場合、前記運転者以外の乗員が応答するように促す音声を前記音声出力部から出力し、
前記運転者以外の乗員が応答するように促す音声が出力された後、前記複数のマイクロホンが音声を受信すると、前記受信した音声の音源方向を特定し、
前記特定された音源方向が、前記複数のマイクロホンから前記運転者以外の乗員への方向を含む所定の範囲内であるか否かを判定し、
前記特定された音源方向が前記所定の範囲内である場合、前記受信した音声を、前記画像表示部に表示されたテキスト情報に対する応答として処理することを特徴とする請求項2に記載の音声対話装置。 - 前記音声対話装置は、
前記運転者以外の乗員が乗車している場合、前記テキスト情報の前記画像表示部への表示に要する第1時間、及び、前記テキスト情報を読み上げる音声の前記音声出力部からの出力に要する第2時間を推定し、
前記第1時間が前記第2時間より短い場合、前記テキスト情報を前記画像表示部に出力させることを選択し、前記第2時間が前記第1時間より短い場合、前記テキスト情報を前記音声出力部に出力させることを選択し、
前記運転者以外の乗員が乗車していない場合、前記テキスト情報を前記音声出力部に出力させることを選択することを特徴とする請求項1に記載の音声対話装置。 - 前記自動車は、さらに、前記自動車が走行中であるか否かを示す情報を出力する速度センサを備え、
前記音声対話装置は、
前記速度センサからの出力に基づいて、前記自動車が走行中であるか否かを判定し、
前記自動車が走行中であると判定された場合、前記運転者に自動車の停止を促す音声を前記音声出力部から出力し、
前記自動車が停止中であると判定された場合、前記テキスト情報を含む画像を前記画像表示部に表示することを特徴とする請求項1に記載の音声対話装置。 - 前記音声対話装置は、前記運転者以外の乗員が乗車していない場合、前記自動車が走行中であるか否かを判定し、前記運転者以外の乗員が乗車している場合、前記自動車が走行中であるか否かを判定しないことを特徴とする請求項5に記載の音声対話装置。
- 前記自動車は、さらに、前記自動車の現在位置情報を取得する測位装置を備え、
前記音声対話装置は、
前記測位装置が取得した前記自動車の現在位置情報に基づいて、前記自動車を停止させることができるか否かを判定し、
前記自動車を停止させることができると判定された場合、前記運転者に自動車の停止を促す音声を前記音声出力部から出力し、
前記自動車を停止させることができないと判定された場合、前記テキスト情報を読み上げる音声を前記音声出力部から出力することを特徴とする請求項5に記載の音声対話装置。 - 前記音声対話装置は、前記現在位置情報に基づいて、前記自動車が高速道路を走行中であると判定された場合、前記自動車を停止させることができないと判定することを特徴とする請求項7に記載の音声対話装置。
- テキスト情報を音声に変換して出力する音声出力部と、前記テキスト情報を画像に変換して出力する画像表示部と、を備える音声対話装置による音声対話方法において、
自動車内における乗員の乗車位置を検知する乗員検知手順と、
前記乗員検知手順によって検出された乗員の位置に基づいて、前記音声出力部又は前記画像表示部のいずれか一方を選択し、選択された前記音声出力部又は前記画像表示部が前記テキスト情報を出力する切り替え手順と、を含むことを特徴とする音声対話方法。 - 前記切り替え手順は、運転者以外の乗員が乗車している場合、前記テキスト情報を前記画像表示部に出力させることを選択し、前記運転者以外の乗員が乗車していない場合、前記テキスト情報を前記音声出力部に出力させることを選択する手順を含むことを特徴とする請求項9に記載の音声対話方法。
- 前記音声対話装置は、さらに、複数のマイクロホンを備え、
前記音声対話方法は、さらに、
前記運転者以外の乗員が乗車していると判定された場合、前記運転者以外の乗員が応答するように促す音声を前記音声出力部から出力する手順と、
前記運転者以外の乗員が応答するように促す音声が出力された後、前記複数のマイクロホンが音声を受信すると、前記受信した音声の音源方向を特定する手順と、
前記特定された音源方向が、前記複数のマイクロホンから前記運転者以外の乗員への方向を含む所定の範囲内であるか否かを判定する手順と、
前記特定された音源方向が前記所定の範囲内である場合、前記受信した音声を、前記画像表示部に表示されたテキスト情報に対する応答として処理する手順と、を含むことを特徴とする請求項10に記載の音声対話方法。 - 前記切り替え手順は、前記運転者以外の乗員が乗車している場合、前記テキスト情報の前記画像表示部への表示に要する第1時間、及び、前記テキスト情報を読み上げる音声の前記音声出力部からの出力に要する第2時間を推定し、前記第1時間が前記第2時間より短い場合、前記テキスト情報を前記画像表示部に出力させることを選択し、前記第2時間が前記第1時間より短い場合、前記テキスト情報を前記音声出力部に出力させることを選択し、前記運転者以外の乗員が乗車していない場合、前記テキスト情報を前記音声出力部に出力させることを選択する手順を含むことを特徴とする請求項9に記載の音声対話方法。
- 前記自動車は、さらに、前記自動車が走行中であるか否かを示す情報を出力する速度センサを備え、
前記音声対話方法は、さらに、
前記速度センサからの出力に基づいて、前記自動車が走行中であるか否かを判定する手順と、
前記自動車が走行中であると判定された場合、前記運転者に自動車の停止を促す音声を前記音声出力部から出力する手順と、
前記自動車が停止中であると判定された場合、前記テキスト情報を含む画像を前記画像表示部に表示する手順と、を含むことを特徴とする請求項9に記載の音声対話方法。 - 前記自動車が走行中であるか否かを判定する手順は、前記運転者以外の乗員が乗車していない場合に実行され、前記運転者以外の乗員が乗車している場合には実行されないことを特徴とする請求項13に記載の音声対話方法。
- 前記自動車は、さらに、前記自動車の現在位置情報を取得する測位装置を備え、
前記音声対話方法は、さらに、
前記測位装置が取得した前記自動車の現在位置情報に基づいて、前記自動車を停止させることができるか否かを判定する手順と、
前記自動車を停止させることができると判定された場合、前記運転者に自動車の停止を促すメッセージを前記音声出力部から出力する手順と、
前記自動車を停止させることができないと判定された場合、前記テキスト情報を読み上げる音声を前記音声出力部から出力する手順と、を含むことを特徴とする請求項13に記載の音声対話方法。 - 前記自動車を停止させることができるか否かを判定する手順は、前記現在位置情報に基づいて、前記自動車が高速道路を走行中であると判定された場合、前記自動車を停止させることができないと判定する手順を含むことを特徴とする請求項15に記載の音声対話方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008274124A JP5154363B2 (ja) | 2008-10-24 | 2008-10-24 | 車室内音声対話装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008274124A JP5154363B2 (ja) | 2008-10-24 | 2008-10-24 | 車室内音声対話装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010102163A true JP2010102163A (ja) | 2010-05-06 |
JP5154363B2 JP5154363B2 (ja) | 2013-02-27 |
Family
ID=42292857
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008274124A Active JP5154363B2 (ja) | 2008-10-24 | 2008-10-24 | 車室内音声対話装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5154363B2 (ja) |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013015601A (ja) * | 2011-07-01 | 2013-01-24 | Dainippon Printing Co Ltd | 音源の識別装置および音源に連動する情報処理装置 |
JP2015052539A (ja) * | 2013-09-06 | 2015-03-19 | 株式会社ユピテル | システム及びプログラム |
JP2015515701A (ja) * | 2012-04-25 | 2015-05-28 | コピン コーポレーション | Asrおよびht入力を有する補助ディスプレイとしてのヘッドセットコンピュータ(hsc) |
JP2016177045A (ja) * | 2015-03-19 | 2016-10-06 | 株式会社レイトロン | 音声認識装置および音声認識プログラム |
JP2018068697A (ja) * | 2016-10-31 | 2018-05-10 | 株式会社デンソー | 診断支援装置及び診断支援システム |
US10013976B2 (en) | 2010-09-20 | 2018-07-03 | Kopin Corporation | Context sensitive overlays in voice controlled headset computer displays |
JP2018155896A (ja) * | 2017-03-17 | 2018-10-04 | ヤマハ株式会社 | 制御方法及び制御装置 |
US10474418B2 (en) | 2008-01-04 | 2019-11-12 | BlueRadios, Inc. | Head worn wireless computer having high-resolution display suitable for use as a mobile internet device |
US10627860B2 (en) | 2011-05-10 | 2020-04-21 | Kopin Corporation | Headset computer that uses motion and voice commands to control information display and remote devices |
CN111816189A (zh) * | 2020-07-03 | 2020-10-23 | 斑马网络技术有限公司 | 一种车辆用多音区语音交互方法及电子设备 |
CN113206861A (zh) * | 2020-01-31 | 2021-08-03 | 丰田自动车株式会社 | 信息处理装置、信息处理方法和记录介质 |
JP2021523465A (ja) * | 2018-05-07 | 2021-09-02 | グーグル エルエルシーGoogle LLC | 様々な接続デバイスを制御するための複合グラフィカルアシスタントインターフェースの提供 |
CN114954168A (zh) * | 2021-08-05 | 2022-08-30 | 长城汽车股份有限公司 | 座椅通风和加热的方法、装置、存储介质及车辆 |
US12039150B2 (en) | 2023-02-13 | 2024-07-16 | Google Llc | Providing composite graphical assistant interfaces for controlling various connected devices |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7052630B2 (ja) * | 2018-08-08 | 2022-04-12 | 富士通株式会社 | 音源方向推定プログラム、音源方向推定方法、および音源方向推定装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004004239A (ja) * | 2002-05-31 | 2004-01-08 | Nec Corp | 音声認識対話装置およびプログラム |
JP2006199228A (ja) * | 2005-01-24 | 2006-08-03 | Pioneer Electronic Corp | インターフェイス設定装置及びインターフェイス設定方法等 |
JP2007219207A (ja) * | 2006-02-17 | 2007-08-30 | Fujitsu Ten Ltd | 音声認識装置 |
JP2007302223A (ja) * | 2006-04-12 | 2007-11-22 | Hitachi Ltd | 車載装置の非接触入力操作装置 |
JP2008196998A (ja) * | 2007-02-14 | 2008-08-28 | Denso Corp | ナビゲーション装置 |
-
2008
- 2008-10-24 JP JP2008274124A patent/JP5154363B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004004239A (ja) * | 2002-05-31 | 2004-01-08 | Nec Corp | 音声認識対話装置およびプログラム |
JP2006199228A (ja) * | 2005-01-24 | 2006-08-03 | Pioneer Electronic Corp | インターフェイス設定装置及びインターフェイス設定方法等 |
JP2007219207A (ja) * | 2006-02-17 | 2007-08-30 | Fujitsu Ten Ltd | 音声認識装置 |
JP2007302223A (ja) * | 2006-04-12 | 2007-11-22 | Hitachi Ltd | 車載装置の非接触入力操作装置 |
JP2008196998A (ja) * | 2007-02-14 | 2008-08-28 | Denso Corp | ナビゲーション装置 |
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10474418B2 (en) | 2008-01-04 | 2019-11-12 | BlueRadios, Inc. | Head worn wireless computer having high-resolution display suitable for use as a mobile internet device |
US10579324B2 (en) | 2008-01-04 | 2020-03-03 | BlueRadios, Inc. | Head worn wireless computer having high-resolution display suitable for use as a mobile internet device |
US10013976B2 (en) | 2010-09-20 | 2018-07-03 | Kopin Corporation | Context sensitive overlays in voice controlled headset computer displays |
US11237594B2 (en) | 2011-05-10 | 2022-02-01 | Kopin Corporation | Headset computer that uses motion and voice commands to control information display and remote devices |
US11947387B2 (en) | 2011-05-10 | 2024-04-02 | Kopin Corporation | Headset computer that uses motion and voice commands to control information display and remote devices |
US10627860B2 (en) | 2011-05-10 | 2020-04-21 | Kopin Corporation | Headset computer that uses motion and voice commands to control information display and remote devices |
JP2013015601A (ja) * | 2011-07-01 | 2013-01-24 | Dainippon Printing Co Ltd | 音源の識別装置および音源に連動する情報処理装置 |
JP2015515701A (ja) * | 2012-04-25 | 2015-05-28 | コピン コーポレーション | Asrおよびht入力を有する補助ディスプレイとしてのヘッドセットコンピュータ(hsc) |
JP2017188156A (ja) * | 2012-04-25 | 2017-10-12 | コピン コーポレーション | Asrおよびht入力を有する補助ディスプレイとしてのヘッドセットコンピュータ(hsc) |
JP2015052539A (ja) * | 2013-09-06 | 2015-03-19 | 株式会社ユピテル | システム及びプログラム |
JP2016177045A (ja) * | 2015-03-19 | 2016-10-06 | 株式会社レイトロン | 音声認識装置および音声認識プログラム |
JP2018068697A (ja) * | 2016-10-31 | 2018-05-10 | 株式会社デンソー | 診断支援装置及び診断支援システム |
JP2018155896A (ja) * | 2017-03-17 | 2018-10-04 | ヤマハ株式会社 | 制御方法及び制御装置 |
JP2021523465A (ja) * | 2018-05-07 | 2021-09-02 | グーグル エルエルシーGoogle LLC | 様々な接続デバイスを制御するための複合グラフィカルアシスタントインターフェースの提供 |
US11579749B2 (en) | 2018-05-07 | 2023-02-14 | Google Llc | Providing composite graphical assistant interfaces for controlling various connected devices |
US11693533B2 (en) | 2018-05-07 | 2023-07-04 | Google Llc | Providing composite graphical assistant interfaces for controlling various connected devices |
JP7346455B2 (ja) | 2018-05-07 | 2023-09-19 | グーグル エルエルシー | 様々な接続デバイスを制御するための複合グラフィカルアシスタントインターフェースの提供 |
CN113206861A (zh) * | 2020-01-31 | 2021-08-03 | 丰田自动车株式会社 | 信息处理装置、信息处理方法和记录介质 |
CN113206861B (zh) * | 2020-01-31 | 2024-02-27 | 丰田自动车株式会社 | 信息处理装置、信息处理方法和记录介质 |
CN111816189A (zh) * | 2020-07-03 | 2020-10-23 | 斑马网络技术有限公司 | 一种车辆用多音区语音交互方法及电子设备 |
CN111816189B (zh) * | 2020-07-03 | 2023-12-26 | 斑马网络技术有限公司 | 一种车辆用多音区语音交互方法及电子设备 |
CN114954168A (zh) * | 2021-08-05 | 2022-08-30 | 长城汽车股份有限公司 | 座椅通风和加热的方法、装置、存储介质及车辆 |
US12039150B2 (en) | 2023-02-13 | 2024-07-16 | Google Llc | Providing composite graphical assistant interfaces for controlling various connected devices |
Also Published As
Publication number | Publication date |
---|---|
JP5154363B2 (ja) | 2013-02-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5154363B2 (ja) | 車室内音声対話装置 | |
US8442833B2 (en) | Speech processing with source location estimation using signals from two or more microphones | |
US8024184B2 (en) | Speech recognition device, speech recognition method, computer-executable program for causing computer to execute recognition method, and storage medium | |
JP4497834B2 (ja) | 音声認識装置及び音声認識方法並びに音声認識用プログラム及び情報記録媒体 | |
JP4260788B2 (ja) | 音声認識機器制御装置 | |
EP3061086B1 (en) | Text-to-speech performance evaluation | |
JP4859982B2 (ja) | 音声認識装置 | |
WO2013005248A1 (ja) | 音声認識装置およびナビゲーション装置 | |
US20070239455A1 (en) | Method and system for managing pronunciation dictionaries in a speech application | |
US20200152203A1 (en) | Agent device, agent presentation method, and storage medium | |
JP2006317573A (ja) | 情報端末 | |
JP2009251388A (ja) | 母国語発話装置 | |
Kawaguchi et al. | Multimedia data collection of in-car speech communication | |
JP2016061888A (ja) | 音声認識装置、音声認識対象区間設定方法、及び音声認識区間設定プログラム | |
JP2020060861A (ja) | エージェントシステム、エージェント方法、およびプログラム | |
KR20220073513A (ko) | 대화 시스템, 차량 및 대화 시스템의 제어 방법 | |
JP2000322074A (ja) | 音声入力区間判定装置,音声データ抽出装置,音声認識装置,車両用ナビゲーション装置及び入力用マイク | |
JP4437047B2 (ja) | 音声対話装置 | |
Kawaguchi et al. | Multimedia corpus of in-car speech communication | |
US20110218809A1 (en) | Voice synthesis device, navigation device having the same, and method for synthesizing voice message | |
JP5375612B2 (ja) | 周波数軸伸縮係数推定装置とシステム方法並びにプログラム | |
JP2007248529A (ja) | 音声認識装置、音声認識プログラム、及び音声動作可能な装置 | |
JP2005157166A (ja) | 音声認識装置、音声認識方法及びプログラム | |
JP2007206239A (ja) | 音声認識装置および音声認識方法 | |
JP7274376B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20110711 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110916 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120808 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120814 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120814 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121012 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121113 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121205 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151214 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5154363 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |