JP2018081561A - 移動体を利用するユーザの対話型教師データ管理システム - Google Patents
移動体を利用するユーザの対話型教師データ管理システム Download PDFInfo
- Publication number
- JP2018081561A JP2018081561A JP2016224234A JP2016224234A JP2018081561A JP 2018081561 A JP2018081561 A JP 2018081561A JP 2016224234 A JP2016224234 A JP 2016224234A JP 2016224234 A JP2016224234 A JP 2016224234A JP 2018081561 A JP2018081561 A JP 2018081561A
- Authority
- JP
- Japan
- Prior art keywords
- user
- behavior
- vehicle
- teacher data
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 40
- 238000013523 data management Methods 0.000 title claims abstract description 29
- 238000007726 management method Methods 0.000 claims abstract description 50
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 3
- 230000006399 behavior Effects 0.000 claims description 73
- 238000001514 detection method Methods 0.000 claims description 64
- 238000012545 processing Methods 0.000 claims description 50
- 230000015572 biosynthetic process Effects 0.000 claims description 43
- 238000003786 synthesis reaction Methods 0.000 claims description 43
- 230000003993 interaction Effects 0.000 claims description 5
- 238000009825 accumulation Methods 0.000 claims description 2
- 230000004044 response Effects 0.000 claims description 2
- 238000003384 imaging method Methods 0.000 claims 1
- 230000010365 information processing Effects 0.000 abstract 1
- 238000004891 communication Methods 0.000 description 138
- 238000000034 method Methods 0.000 description 53
- 230000008569 process Effects 0.000 description 43
- 230000006870 function Effects 0.000 description 33
- 238000012544 monitoring process Methods 0.000 description 23
- 238000012795 verification Methods 0.000 description 20
- 238000013480 data collection Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 12
- 238000012546 transfer Methods 0.000 description 9
- 230000005856 abnormality Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000004913 activation Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Traffic Control Systems (AREA)
Abstract
【解決手段】実施形態の移動体を利用するユーザの対話型教師データ管理システムは、移動体内に設けられる車載ゲートウェイ装置と、情報管理装置と、音声認識・合成装置とを含む。情報管理装置は、移動体内のユーザの挙動又は/及び移動体の挙動に関する情報に基づいて、ユーザへの対話フレーズを決定し、車載ゲートウェイ装置を介して音声出力させるように制御する。移動体内で再生された対話フレーズに対するユーザの回答を車載ゲートウェイ装置から受信し、ユーザの挙動又は/及び移動体の挙動とユーザの回答とを関連付けて教師データを生成する。車載ゲートウェイ装置は、対話フレーズの音声データを移動体内のスピーカから出力する出力制御及びユーザの回答に関する音声データを移動体内のマイクで集音するユーザの発話収集制御を行う。
【選択図】図5
Description
図1は、第1実施形態の移動体を利用するユーザの対話型教師データ管理システム(以下、対話型システムという)の概略図である。本実施形態の対話型システムは、移動体を利用するユーザに対して発話形式の音声対話で教師データを収集し、収集された教師データを用いた学習処理(教師あり学習)を提供する。なお、本実施形態では、移動体として車両を一例に説明するが、他の移動体(電車、自動で又は無線により遠隔操作されるロボットや飛行体など)にも適用可能である。
図2は、車載GW装置100が適用された移動体の車内及び車外のネットワーク構成図である。車載GW装置100は、車内のデータソースと直接接続されたり、データソースが接続される車載ネットワークと接続されたりする車載器である。車載GW装置100は、車外ネットワークと接続することができ、車内と車外を中継するネットワークノードとして構成される。車載GW装置100は、アクセスポイントを経由したWi−Fiなどの無線LAN規格に準拠する無線通信、及び基地局を中継した3GやLTE(LongTerm Evolution)などの携帯電話通信の各通信インターフェースを備えている。車載GW装置100は、車両外部の車外ネットワークと複数の通信経路(外部通信方式)で接続することができる。
本実施形態の対話型システムは、教師データの収集機能と、収集された教師データに基づく学習処理を行い、移動体を利用するユーザをアシストする(運行支援)機能と、を提供する。図4は、学習装置200及び音声認識・合成装置300の構成ブロックを示す図である。図5は、対話型システムの各種機能を説明するための図である。
図8は、本実施形態の対話型システムを適用した第1ユースケースを示す図である。図8の例は、対話型教師データの収集処理と学習処理を示すフローチャートである。
図10は、本実施形態の対話型システムを適用した第2ユースケースを示す図である。図10の例は、対話型教師データの収集処理と学習処理を示すフローチャートである。
図12は、本実施形態の対話型システムを適用した第3ユースケースを示す図である。図12の例は、対話型教師データの収集処理と学習処理を示すフローチャートである。
図14は、本実施形態の対話型システムを適用した第4ユースケースを示す図である。図14の例は、対話型教師データの収集処理と学習処理を示すフローチャートである。
12 スピーカ
13 車載カメラ
14 センサ機器
15 車載情報端末
16 車載LAN
100 車載ゲートウェイ装置(車載GW装置)
110 通信デバイス
111 車内通信インターフェース
112 車外通信インターフェース
120 制御デバイス
121 車内通信制御部
122 車外通信制御部
123 ゲートウェイ制御部(GW制御部)
123A ネットワーク制御部
1231 ルーティング制御部
1232 プロトコル変換部
1233 セキュリティ部
123B 通信制御部
1234 通信状態監視部
1235 通信経路選択部
1236 監視制御部
1237 Config設定制御部
124 情報収集部
125 対話処理部
126 学習管理部
127 記憶部
200 学習装置
210 通信装置
220 制御装置
221 対話制御部
222 教師データ管理部
223 ルール制御部
230 記憶装置
300 音声認識・合成装置
310 通信装置
320 制御装置
321 音声合成部
322 音声認識部
330 記憶装置
VCS 車両制御システム
Claims (5)
- 移動体を利用するユーザの対話型教師データ管理システムであって、
移動体内に設けられ、ネットワークを介して情報管理装置と接続される車載ゲートウェイ装置と、前記情報管理装置と接続される音声認識・合成装置と、を含み、
前記情報管理装置は、
前記車載ゲートウェイ装置から送信される移動体内でのユーザの挙動又は/及び移動体の挙動に関する情報に基づいて、ユーザに対する対話フレーズを決定するルール制御部と、
前記音声認識・合成装置で生成される前記決定された対話フレーズの音声データを、前記車載ゲートウェイ装置に伝送するとともに、前記車載ゲートウェイ装置を介して移動体内で再生された前記対話フレーズに対するユーザの回答に関する音声データを前記車載ゲートウェイ装置から受信する対話制御部と、
ユーザの挙動又は/及び移動体の挙動とユーザの前記回答とを関連付けて教師データを生成する教師データ管理部と、を有し、
前記車載ゲートウェイ装置は、
前記情報管理装置から受信する前記対話フレーズの音声データを移動体内のスピーカから出力する出力制御及び前記情報管理装置に送信されるユーザの前記回答に関する音声データを移動体内のマイクで集音するユーザの発話収集制御を行う対話処理部を、有することを特徴とする対話型教師データ管理システム。 - 前記車載ゲートウェイ装置は、
移動体内のユーザの挙動を取得する撮影装置と、移動体を制御する所定のシステムとに接続され、ユーザの挙動又は/及び移動体の挙動に関する情報を収集する情報収集部と、
前記教師データに対するユーザの挙動又は/及び移動体の挙動を検知するために予め規定された検知ルールを記憶する記憶部と、
ユーザの挙動又は/及び移動体の挙動と前記検知ルールとをマッチングし、前記検知ルールにマッチングしたユーザの挙動又は/及び移動体の挙動に関する情報を含む検知データを生成して、前記情報管理装置に送信する学習管理部と、
をさらに有することを特徴とする請求項1に記載の対話型教師データ管理システム。 - 前記情報管理装置は、前記教師データに対するユーザの挙動又は/及び移動体の挙動を検知するために予め規定された検知ルールを記憶するとともに、前記検知ルール毎に複数の前記教師データを記憶し、
前記教師データ管理部は、前記車載ゲートウェイ装置から送信されるユーザの挙動又は/及び移動体の挙動に関する情報それぞれを該当する前記検知ルールに分類して前記教師データを蓄積し、
前記ルール制御部は、前記検知ルールに対する前記教師データの蓄積量に応じて異なる前記対話フレーズを選択することを特徴とする請求項1又は2に記載の対話型教師データ管理システム。 - 前記情報管理装置は、前記教師データに対するユーザの挙動又は/及び移動体の挙動を検知するために予め規定された検知ルールを記憶するとともに、前記検知ルール毎に複数の前記教師データを記憶し、
前記教師データ管理部は、前記車載ゲートウェイ装置から送信されるユーザの挙動又は/及び移動体の挙動に関する情報それぞれを前記検知ルールに分類して前記教師データを蓄積し、
前記ルール制御部は、前記検知ルールに対する前記教師データの蓄積量が所定の閾値よりも大きい場合、前記検知ルール毎に予め設定された、検知されたユーザの挙動又は/及び移動体の挙動に対するアシストフレーズを選択し、前記アシストフレーズに対応する音声データを、前記対話制御部及び前記車載ゲートウェイ装置を介して移動体内の前記スピーカから出力させるように制御することを特徴とする請求項1から3のいずれか1つに記載の対話型教師データ管理システム。 - 前記車載ゲートウェイ装置は、移動体を運転操作中のユーザの挙動又は/及び移動体の挙動に関する情報を前記情報管理装置に送信するとともに、
前記対話処理部は、運転操作中のユーザへの前記出力制御及び運転操作中のユーザの発話に対する前記発話収集制御を行うことを特徴とする請求項1から4のいずれか1つに記載の対話型教師データ管理システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016224234A JP6884557B2 (ja) | 2016-11-17 | 2016-11-17 | 移動体を利用するユーザの対話型教師データ管理システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016224234A JP6884557B2 (ja) | 2016-11-17 | 2016-11-17 | 移動体を利用するユーザの対話型教師データ管理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018081561A true JP2018081561A (ja) | 2018-05-24 |
JP6884557B2 JP6884557B2 (ja) | 2021-06-09 |
Family
ID=62197807
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016224234A Active JP6884557B2 (ja) | 2016-11-17 | 2016-11-17 | 移動体を利用するユーザの対話型教師データ管理システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6884557B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114971803A (zh) * | 2022-06-02 | 2022-08-30 | 支付宝(杭州)信息技术有限公司 | 服务处理方法及装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003281375A (ja) * | 2002-03-26 | 2003-10-03 | Fujitsu Ltd | 保険料設定方法、保険料設定プログラムおよび保険料設定装置 |
JP2015018503A (ja) * | 2013-07-12 | 2015-01-29 | 住友電気工業株式会社 | 情報提供システム、情報提供装置、コンピュータプログラム及び情報提供方法 |
JP2016136332A (ja) * | 2015-01-23 | 2016-07-28 | 沖電気工業株式会社 | 情報処理装置、情報処理方法及び記憶媒体 |
-
2016
- 2016-11-17 JP JP2016224234A patent/JP6884557B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003281375A (ja) * | 2002-03-26 | 2003-10-03 | Fujitsu Ltd | 保険料設定方法、保険料設定プログラムおよび保険料設定装置 |
JP2015018503A (ja) * | 2013-07-12 | 2015-01-29 | 住友電気工業株式会社 | 情報提供システム、情報提供装置、コンピュータプログラム及び情報提供方法 |
JP2016136332A (ja) * | 2015-01-23 | 2016-07-28 | 沖電気工業株式会社 | 情報処理装置、情報処理方法及び記憶媒体 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114971803A (zh) * | 2022-06-02 | 2022-08-30 | 支付宝(杭州)信息技术有限公司 | 服务处理方法及装置 |
CN114971803B (zh) * | 2022-06-02 | 2024-05-10 | 支付宝(杭州)信息技术有限公司 | 服务处理方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6884557B2 (ja) | 2021-06-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6652682B1 (ja) | 車載ゲートウェイ装置及び車載ゲートウェイシステム | |
US12073654B1 (en) | Method for identifying a user entering an autonomous vehicle | |
JP5823517B2 (ja) | 走行路上で車両を運転する際の車両の運転者を支援する方法、システム、および携帯通信装置 | |
JP6862629B2 (ja) | 見守り送迎システムにおける車両管理サーバ、車載端末、見守り方法、及びプログラム | |
US9608952B2 (en) | Systems and methods for user device interaction | |
CN111971647A (zh) | 语音识别设备、语音识别设备的协作系统和语音识别设备的协作方法 | |
US8618920B2 (en) | Mobile device for providing announcement information | |
JP2016224477A (ja) | 車載装置、運転モード制御システム、及び運転モード制御方法 | |
CN103144598A (zh) | 汽车碰撞报警方法和装置 | |
JP2019009498A (ja) | 情報出力システム、情報出力方法、及びプログラム | |
JP2021189737A (ja) | 情報処理装置、プログラム、および情報処理方法 | |
CN106408682A (zh) | 提示方法和装置 | |
JP6884557B2 (ja) | 移動体を利用するユーザの対話型教師データ管理システム | |
JP3897946B2 (ja) | 緊急情報送信システム | |
CN106384174A (zh) | 确定应答车辆的方法及装置 | |
JP2014048760A (ja) | 車両の運転者に情報を提示する情報提示システム、情報提示装置、および情報センター | |
JP2022156121A (ja) | 認識度指数設定装置 | |
JP2018060248A (ja) | 処理結果異常検出装置、処理結果異常検出プログラム、処理結果異常検出方法及び移動体 | |
JP2016133963A (ja) | 通信型ドライブレコーダ及び緊急通報システム | |
US10338886B2 (en) | Information output system and information output method | |
WO2024135049A1 (ja) | 情報処理装置、受信装置、情報処理方法及びプログラム | |
JP2018055590A (ja) | 情報提供システムおよび情報提供方法 | |
WO2023062817A1 (ja) | 音声認識装置、制御方法、プログラム及び記憶媒体 | |
JP2018167737A (ja) | 車両に積載され、車両に乗車しているユーザとコミュニケーションが可能な車載コミュニケーション装置、コミュニケーション方法及びプログラム | |
JP2021082215A (ja) | 駐車支援装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20170906 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20170912 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171018 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191008 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200717 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210413 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210512 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6884557 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |