JP6677126B2 - 車両用対話制御装置 - Google Patents
車両用対話制御装置 Download PDFInfo
- Publication number
- JP6677126B2 JP6677126B2 JP2016164998A JP2016164998A JP6677126B2 JP 6677126 B2 JP6677126 B2 JP 6677126B2 JP 2016164998 A JP2016164998 A JP 2016164998A JP 2016164998 A JP2016164998 A JP 2016164998A JP 6677126 B2 JP6677126 B2 JP 6677126B2
- Authority
- JP
- Japan
- Prior art keywords
- utterance
- unit
- driver
- vehicle
- balance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000002452 interceptive effect Effects 0.000 title claims description 12
- 206010041349 Somnolence Diseases 0.000 claims description 92
- 230000007704 transition Effects 0.000 claims description 78
- 238000012545 processing Methods 0.000 claims description 44
- 230000006399 behavior Effects 0.000 claims description 33
- 238000012423 maintenance Methods 0.000 claims description 29
- 230000037007 arousal Effects 0.000 claims description 18
- 230000004044 response Effects 0.000 claims description 10
- 230000003993 interaction Effects 0.000 claims description 8
- 206010062519 Poor quality sleep Diseases 0.000 claims description 7
- 230000036626 alertness Effects 0.000 claims description 7
- 238000013459 approach Methods 0.000 claims description 4
- 230000009471 action Effects 0.000 claims description 2
- 230000001939 inductive effect Effects 0.000 claims 2
- 238000004458 analytical method Methods 0.000 description 27
- 238000000034 method Methods 0.000 description 22
- 230000008569 process Effects 0.000 description 19
- 238000004891 communication Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 17
- 230000001755 vocal effect Effects 0.000 description 17
- 238000012544 monitoring process Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 230000001133 acceleration Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 230000002093 peripheral effect Effects 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 239000012141 concentrate Substances 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000002474 experimental method Methods 0.000 description 3
- 208000032140 Sleepiness Diseases 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000037321 sleepiness Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
Images
Landscapes
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
- Traffic Control Systems (AREA)
Description
<車両システム1の概略構成>
以下、本実施形態について図面を用いて説明する。図1に示す車両システム1は、車両で用いられるものであり、対話制御装置10、通信機20、ロケータ30、車両制御ECU40、周辺監視センサ50、運転支援ECU60、DSM(Driver Status Monitor)70、マイク80、及び音声出力装置90を含んでいる。一例として、対話制御装置10、ロケータ30、車両制御ECU40、及び運転支援ECU60は、車内LANに接続されているものとする。車両システム1を搭載している車両を以降では自車と呼ぶ。
続いて、図2を用いて、対話制御装置10の概略構成について説明を行う。対話制御装置10は、運転難度特定部101、眠気特定部102、支援指示部103、記憶部104、音声認識部105、発話解析部106、バランス特定部107、比較部108、遷移候補選定部109、カテゴリ選定部110、発話内容選定部111、発話処理部112、及び学習部113を備えている。また、記憶部104、音声認識部105、発話解析部106、バランス特定部107、比較部108、遷移候補選定部109、カテゴリ選定部110、発話内容選定部111、及び発話処理部112が対話処理部100を構成している。なお、対話制御装置10が実行する機能の一部または全部を、一つあるいは複数のIC等によりハードウェア的に構成してもよい。
続いて、図11及び図12のフローチャートを用いて、対話制御装置10での処理(以下、対話関連処理)の流れの一例について説明を行う。図11のフローチャートは、例えば、自車のイグニッション電源がオンになったときに開始する構成とすればよい。
実施形態1の構成によれば、発話処理部112で行わせる発話によって、実VRMバランスを、ドライバの覚醒状態を維持させると推測される覚醒維持バランスに近づけることが可能になるので、ドライバの覚醒を維持することがより確実に可能となる。また、覚醒維持バランスとしては、本発明者が覚醒維持に有効であることを見出した、ドライバが能動的に多くの発話を行うVRMバランスを用いることからも、ドライバの覚醒状態を維持することがより確実に可能となる。
実施形態1では、学習部113が、ドライバの特性に合わせて覚醒維持に有効な遷移態様を学習し、遷移候補DB104dを更新する構成を示したが、必ずしもこれに限らない。例えば、学習部113が、ドライバの特性に合わせて覚醒維持に有効な覚醒維持バランスや言語的項目や非言語的項目を学習し、理想VRMバランスDB104cや言語的項目DB104eや非言語的項目DB104fを更新する構成としてもよい。
実施形態1では、発話内容選定部111が、運転難度特定部101で特定した運転難度及び眠気特定部102で特定した眠気レベルに対応する言語的項目を選定する構成を示したが、必ずしもこれに限らない。例えば、対話制御装置10に運転難度特定部101を備えず、発話内容選定部111が、運転難度に関わらずに、眠気特定部102で特定した眠気レベルに対応する言語的項目を選定する構成としてもよい。他にも、発話内容選定部111が、運転難度及び眠気レベルに関わらずに、カテゴリ選定部110で選定した出力VRMに合致した発話の言語的項目を選定する構成としてもよい。
実施形態1では、発話内容選定部111が、運転難度特定部101で特定した運転難度及び眠気特定部102で特定した眠気レベルに対応する非言語的項目を選定する構成を示したが、必ずしもこれに限らない。例えば、対話制御装置10に運転難度特定部101を備えず、発話内容選定部111が、運転難度に関わらずに、眠気特定部102で特定した眠気レベルに対応する非言語的項目を選定する構成としてもよい。他にも、発話内容選定部111が、運転難度及び眠気レベルに関わらずに、カテゴリ選定部110で選定した出力VRMに合致した発話の非言語的項目を選定する構成としてもよい。
実施形態1では、実VRMバランスを覚醒維持バランスに近づけるために有効な発話行動の遷移態様をもとに出力VRMを選定する構成を示したが、必ずしもこれに限らない。例えば、実VRMバランスと覚醒維持バランスとを照合して比較し、覚醒維持バランスと比較して最も足りない出力VRMを選定する処理を逐次繰り返すことで、実VRMバランスを覚醒維持バランスに近づける構成としてもよい。
実施形態1では、支援指示部103が、運転難度特定部101で特定した運転難度及び眠気特定部102で特定した眠気レベルがそれぞれの閾値を超えたか否かで、運転支援ECU60でのドライバの運転支援と対話処理部100で対話を行わせることによるドライバの覚醒維持の支援とを切り替える構成を示したが、必ずしもこれに限らない。例えば、運転難度及び眠気レベルがそれぞれの閾値を超えた場合にも、対話処理部100で対話を行わせることによるドライバの覚醒維持の支援を実行させる構成としてもよい。また、運転難度及び眠気レベルのいずれか一方について、閾値を超えた場合にも、運転支援ECU60でのドライバの運転支援を実行させない構成としてもよい。他にも、運転難度及び眠気レベルに関わらず、運転支援ECU60でのドライバの運転支援を行わない構成としてもよい。
実施形態では、DSM70でドライバの眠気レベルを検知する構成を示したが、必ずしもこれに限らない。例えば、ドライバの生体情報を計測する計測装置で計測した計測結果からドライバの眠気レベルを検知する構成としてもよい。眠気の検知に用いる生体情報の一例としては、脳波計で計測した脳波、心拍計で計測した心拍数,心拍ゆらぎ、脈波計で計測した脈波、皮膚電気活動計で計測した皮膚コンダクタンス等がある。また、計測結果からの眠気の検知方法については、公知の方法を用いればよい。なお、計測装置は、ドライバに装着されて生体情報を計測するウェアラブルデバイスであってもよいし、車両のステアリングホイール等に設けられたものであってもよい。
Claims (9)
- 車両で用いられ、
前記車両のドライバに向けて発話を行わせる発話処理部(112)を備え、
前記発話処理部で前記ドライバに向けて発話を行わせることで前記ドライバとの対話を行わせる車両用対話制御装置であって、
前記対話におけるお互いの発話行動を所定の分類に分けた、分類別の発話行動の構成バランスである対話バランスのうちの、前記ドライバの覚醒状態を維持させると推測される対話バランスである覚醒維持バランスを記憶しているバランス記憶部(104c)を備え、
前記発話処理部は、実際の前記対話バランスを前記覚醒維持バランスに近づけるよう誘導する発話を行わせる車両用対話制御装置。 - 請求項1において、
前記ドライバの発話内容をもとに、前記ドライバの発話行動を前記所定の分類に分ける分類部(106)と、
前記発話処理部で逐次行わせる発話についての前記所定の分類と、前記ドライバの発話について前記分類部で逐次分類した結果とをもとに、実際の前記対話バランスを特定するバランス特定部(107)とを備える車両用対話制御装置。 - 請求項1又は2において、
前記対話におけるお互いの間での発話行動の遷移態様のうちの、前記ドライバの覚醒状態を維持させると推測される遷移態様の候補を、実際の前記対話バランスと前記覚醒維持バランスとの乖離のパターン別に記憶している候補記憶部(104d)を備え、
前記発話処理部は、実際の前記対話バランスを前記覚醒維持バランスに近づけるよう誘導する発話を行わせる場合に、前記候補記憶部に記憶されている前記遷移態様の候補のうちの実際の前記対話バランスと前記覚醒維持バランスとの乖離のパターンに応じた前記遷移態様に沿った発話行動の遷移が行われるよう誘導する発話を行わせる車両用対話制御装置。 - 請求項3において、
前記候補記憶部は、前記パターン別にそれぞれ複数種類の遷移態様の候補を記憶しており、
前記発話処理部で行わせた発話によって前記ドライバの覚醒状態を維持できたか否かに応じて、前記候補記憶部に記憶している前記パターン別のそれぞれ複数種類の遷移態様の候補のうちから、前記ドライバの覚醒状態の維持に好ましい候補を選択する学習を逐次行う学習部(113)を備え、
前記発話処理部は、前記パターンに応じた前記遷移態様の候補に沿った発話行動の遷移が行われるよう誘導する発話を行わせる場合に、前記学習部での前記学習で選択した候補に沿った発話行動の遷移が行われるよう誘導する発話を行わせる車両用対話制御装置。 - 請求項1〜4のいずれか1項において、
前記ドライバの眠気レベルを逐次特定する眠気特定部(102)と、
前記発話処理部で発話を行わせる際の発話内容の言語的項目を、前記眠気特定部で特定する前記眠気レベルに応じて選定する発話内容選定部(111)とを備える車両用対話制御装置。 - 請求項5において、
前記発話内容選定部は、前記発話処理部で発話を行わせる際の発話が、何らかの返答を求める発話である場合に、前記眠気特定部で特定する前記眠気レベルが高くなるほど、前記ドライバが肯定否定で返答をするか内容を述べる返答をするか明確な形式の言語的項目よりも、前記ドライバが肯定否定で返答をするか内容を述べる返答をするか曖昧な形式の言語的項目を優先して選定する車両用対話制御装置。 - 請求項5又は6において、
前記車両の周辺環境に応じた前記ドライバの運転難度を逐次特定する運転難度特定部(101)を備え、
前記発話内容選定部は、前記発話処理部で発話を行わせる際の発話内容の言語的項目を、前記眠気特定部で特定する前記眠気レベルと前記運転難度特定部で特定する前記運転難度とに応じて選定する車両用対話制御装置。 - 請求項7において、
前記発話内容選定部は、前記発話処理部で発話を行わせる際の発話内容の言語的項目に加え、その発話内容に追加する非言語的項目も、前記眠気特定部で特定する前記眠気レベルと前記運転難度特定部で特定する前記運転難度とに応じて選定する車両用対話制御装置。 - 請求項1〜8のいずれか1項において、
前記ドライバの眠気レベルを逐次特定する眠気特定部(102)と、
前記車両の周辺環境に応じた前記ドライバの運転難度を逐次特定する運転難度特定部(101)とを備えるものであって、
前記眠気特定部で特定する前記眠気レベル若しくは前記運転難度特定部で特定する前記運転難度が閾値を超えた場合に、前記車両の運転支援を行わせる支援指示部(103)をさらに備える車両用対話制御装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016164998A JP6677126B2 (ja) | 2016-08-25 | 2016-08-25 | 車両用対話制御装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016164998A JP6677126B2 (ja) | 2016-08-25 | 2016-08-25 | 車両用対話制御装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018031918A JP2018031918A (ja) | 2018-03-01 |
JP6677126B2 true JP6677126B2 (ja) | 2020-04-08 |
Family
ID=61304080
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016164998A Active JP6677126B2 (ja) | 2016-08-25 | 2016-08-25 | 車両用対話制御装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6677126B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6387173B1 (ja) * | 2017-10-30 | 2018-09-05 | ダイキン工業株式会社 | 眠気推定装置 |
CN108725340B (zh) * | 2018-03-30 | 2022-04-12 | 斑马网络技术有限公司 | 车辆语音处理方法及其系统 |
JP7063779B2 (ja) * | 2018-08-31 | 2022-05-09 | 国立大学法人京都大学 | 音声対話システム、音声対話方法、プログラム、学習モデル生成装置及び学習モデル生成方法 |
JP7200664B2 (ja) * | 2018-12-26 | 2023-01-10 | 日本精機株式会社 | 車両用計器 |
CN109887493B (zh) * | 2019-03-13 | 2021-08-31 | 安徽声讯信息技术有限公司 | 一种文字音频推送方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000118260A (ja) * | 1998-10-09 | 2000-04-25 | Honda Motor Co Ltd | 車両用乗員対話装置 |
JP2001014599A (ja) * | 1999-06-25 | 2001-01-19 | Toshiba Corp | 覚醒度管理装置、覚醒度管理方法および覚醒度管理プログラムを格納するコンピュータ読み取り可能な記録媒体 |
JP6358071B2 (ja) * | 2014-12-10 | 2018-07-18 | 株式会社デンソー | 車両用対話制御装置 |
-
2016
- 2016-08-25 JP JP2016164998A patent/JP6677126B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018031918A (ja) | 2018-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6677126B2 (ja) | 車両用対話制御装置 | |
JP6575934B2 (ja) | 車両運転支援システム及び車両運転支援方法 | |
KR102426171B1 (ko) | 대화 시스템, 이를 포함하는 차량 및 대화 서비스 처리 방법 | |
JP4380541B2 (ja) | 車両用エージェント装置 | |
JP4534925B2 (ja) | 車両用情報提供装置 | |
KR20190140558A (ko) | 대화 시스템, 그를 가지는 차량 및 차량의 제어 방법 | |
JP5677647B2 (ja) | ナビゲーション装置 | |
JP7190952B2 (ja) | 制御装置、制御方法およびプログラム | |
JP6575932B2 (ja) | 車両運転支援システム | |
JP6173477B2 (ja) | ナビゲーション用サーバ、ナビゲーションシステムおよびナビゲーション方法 | |
JP6202041B2 (ja) | 車両用音声対話システム | |
JP6075577B2 (ja) | 運転支援装置 | |
JP6612707B2 (ja) | 情報提供装置 | |
JP2016007989A (ja) | 車両制御装置及び車両制御方法 | |
JP2018169706A (ja) | 車両運転支援システム | |
JP7235441B2 (ja) | 音声認識装置及び音声認識方法 | |
JP2015089697A (ja) | 車両用音声認識装置 | |
CN109102801A (zh) | 语音识别方法和语音识别装置 | |
KR102403355B1 (ko) | 차량, 그와 통신하는 모바일 기기 및 차량의 제어 방법 | |
JP2018167647A (ja) | 車両運転支援システム | |
KR20200004054A (ko) | 대화 시스템 및 대화 처리 방법 | |
US11404075B1 (en) | Vehicle voice user interface | |
US11273778B1 (en) | Vehicle voice user interface | |
JP2020154996A (ja) | 情報処理システム、エージェントシステム、情報処理方法、およびプログラム | |
CN113135190A (zh) | 自动驾驶辅助装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190618 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200225 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6677126 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |