JP2019200548A - 車載装置、車載装置の制御方法、及び予備動作推定システム - Google Patents
車載装置、車載装置の制御方法、及び予備動作推定システム Download PDFInfo
- Publication number
- JP2019200548A JP2019200548A JP2018094088A JP2018094088A JP2019200548A JP 2019200548 A JP2019200548 A JP 2019200548A JP 2018094088 A JP2018094088 A JP 2018094088A JP 2018094088 A JP2018094088 A JP 2018094088A JP 2019200548 A JP2019200548 A JP 2019200548A
- Authority
- JP
- Japan
- Prior art keywords
- information
- occupant
- vehicle
- controller
- posture information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 230000033001 locomotion Effects 0.000 claims abstract description 98
- 230000008569 process Effects 0.000 claims abstract description 41
- 238000012545 processing Methods 0.000 claims abstract description 35
- 238000001514 detection method Methods 0.000 claims description 28
- 238000003384 imaging method Methods 0.000 claims description 7
- 210000003127 knee Anatomy 0.000 claims description 4
- 230000006870 function Effects 0.000 description 40
- 230000007704 transition Effects 0.000 description 20
- 238000004891 communication Methods 0.000 description 19
- 238000013459 approach Methods 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 210000004247 hand Anatomy 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 239000000523 sample Substances 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000037237 body shape Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
Images
Abstract
Description
図1は、本実施形態に係る予備動作推定システムの構成を示す図である。図1に示すように、本実施形態に係る予備動作推定システムは、複数の車両に搭載された複数の車載システム100と、車両の外部に設けられたデータセンタ200とから構成される。図1では、一台の車両に搭載された車載システム100を示しているが、予備動作推定システムは、車載システム100を複数備える構成とすることができる。なお、コントローラ170を、本実施形態に係る車載装置して説明する。また、本実施形態では、ドア110を車両の外装部品として、ドア110の開操作を車両の外装部品に対する操作として説明する。
次に、第2実施形態に係る車載装置について説明する。本実施形態の車載装置は、
コントローラ170が備える機能が上述した実施形態の機能と異なる点以外は、上述した実施形態と同様の構成を有しているため、繰り返しの説明は省略して、上述の実施形態においてした説明を援用する。
次に、第3実施形態に係る車載装置について説明する。本実施形態の車載装置は、ナビゲーション装置(不図示)を備えている点と、コントローラ170が備える機能が上述した2つの実施形態の機能と異なる点以外は、上述した実施形態と同様の構成を有しているため、繰り返しの説明は省略して、上述の実施形態においてした説明を援用する。
110…ドア
111…ドア本体
112…ドアセンサ
113…室内ドアハンドル
114…ドアノブ
120…周囲検出装置
121…車載カメラ
122…レーダー
130…乗員検出装置
131…室内カメラ
140…出力装置
141…ディスプレイ
142…スピーカ
150…車載データベース
160…車載通信装置
170…コントローラ
200…データセンタ
210…通信装置
220…サーバ
230…データベース
Claims (14)
- 車両の乗員を経時的に撮像する撮像装置と、
前記車両の周辺に存在する障害物を検出する周囲検出センサと、
前記撮像装置により撮像された撮像画像及び前記周囲検出センサの検出結果に基づく処理を実行するコントローラと、を備え、
前記車両は、前記乗員の操作に応じて部位が移動可能な外装部品を搭載し、
前記コントローラは、
前記撮像画像に基づいて、前記外装部品を操作するための操作動線の情報を含む前記乗員の姿勢情報を生成し、
前記姿勢情報に基づいて、前記乗員が前記外装部品を操作しようとする予備動作を推定し、
前記予備動作及び前記障害物の情報に基づいて、前記乗員に対しての警告処理、及び前記車両の車両制御処理のうち少なくとも何れか一方の処理を実行する車載装置。 - 請求項1記載の車載装置であって、
前記コントローラは、
前記予備動作及び前記障害物の情報に基づいて、前記処理の要否を判定し、
前記処理が必要と判定した場合、前記処理を実行する車載装置。 - 請求項1又は2記載の車載装置であって、
前記コントローラは、
過去に前記外装部品が操作された時点を基準として、前記基準の時点よりも前の前記姿勢情報に基づいて、前記外装部品が操作される前の前記姿勢情報の傾向を特定し、
現在の前記姿勢情報と前記傾向とを比較し、
現在の前記姿勢情報が前記傾向に該当する場合、現在の前記乗員の動作を前記予備動作として推定する車載装置。 - 請求項3記載の車載装置であって、
前記コントローラは、
実際に前記外装部品が前記乗員により操作されたか否かを判定し、
前記乗員ごとに、前記外装部品が操作された場合の前記姿勢情報と、前記外装部品が操作されなかった場合の前記姿勢情報に分類することで、前記乗員ごとの前記傾向を学習する車載装置。 - 請求項3又は4記載の車載装置であって、
前記基準の時点よりも前の前記姿勢情報、前記基準の時点での前記姿勢情報、及び前記基準の時点よりも後の前記姿勢情報を含む一連の前記姿勢情報と、前記外装部品の状態とを関連付けた情報を、前記乗員ごとに記憶する記憶装置を、さらに備え
前記コントローラは、前記外装部品の部位が移動開始する前の前記姿勢情報に基づいて、前記傾向を学習する車載装置。 - 請求項3〜5の何れか一項に記載の車載装置であって、
前記基準の時点よりも前の前記姿勢情報、前記基準の時点での前記姿勢情報、及び前記基準の時点よりも後の前記姿勢情報を含む一連の前記姿勢情報と、前記外装部品の状態とを関連付けた情報を、前記乗員ごとに記憶する記憶装置を、さらに備え
前記コントローラは、
前記記憶装置に記憶された前記姿勢情報及び前記外装部品の状態に基づいて、前記乗員ごとに、現在の前記姿勢情報が前記傾向に該当するか否かを判定するための閾値を設定する車載装置。 - 請求項3〜6の何れか一項に記載の車載装置であって、
前記姿勢情報は、前記外装部品の操作を実行可能な操作機器の位置又は前記外装部品の位置を基準とした際の、前記乗員の腕の位置情報、前記乗員の手の位置情報、前記乗員の肘の位置情報、前記乗員の足の位置情報、前記乗員の膝の位置情報、前記乗員の顔の向きの情報、及び前記乗員の視線の向きの情報のうち少なくとも一つの情報を含み、
前記コントローラは、前記姿勢情報に含まれる情報の種別ごとに、前記傾向を学習する車載装置。 - 請求項7記載の車載装置であって、
前記位置情報は、位置、向き、移動方向、移動速度、及び移動距離を含む車載装置。 - 請求項7又は8記載の車載装置であって、
前記コントローラは、前記姿勢情報に含まれる前記情報の種別ごとに、現在の前記姿勢情報と前記傾向を比較する車載装置。 - 請求項7〜9の何れか一項に記載の車載装置であって、
前記コントローラは、前記姿勢情報に含まれる前記情報の種別ごとに、現在の前記姿勢情報が前記傾向に該当するか否かを判定するための閾値を設定する車載装置。 - 請求項5又は6記載の車載装置であって、
前記記憶装置は、前記外装部品の形状及び可動範囲を含む前記外装部品の情報を、さらに記憶し、
前記コントローラは、前記外装部品の情報に基づいて、前記処理を実行する車載装置。 - 請求項1〜11の何れか一項に記載の車載装置であって、
前記コントローラは、前記乗員の身体状態を含む乗員情報、前記車両の車種情報、前記乗員の着座位置情報に基づいて、前記予備動作を推定する車載装置。 - 請求項1〜12の何れか一項に記載の車載装置と、
複数の車両から取得した、前記姿勢情報を記憶するデータベースと、
前記データベースに記憶された前記姿勢情報を分析するサーバと、を備え、
前記サーバは、
前記データベースに記憶された前記姿勢情報に基づいて、現在の前記姿勢情報が、前記外装部品が操作される前の前記姿勢情報の傾向に該当するか否かを判定するための閾値を設定し、
前記閾値の情報を前記車載装置に送信する予備動作推定システム。 - 乗員の操作に応じて部位が移動可能な外装部品が搭載された車両の乗員を経時的に撮像する撮像装置と、前記車両の周辺に存在する障害物を検出する周囲検出センサと、コントローラとを備えた車載装置の制御方法であって、
前記撮像装置により撮像された撮像画像に基づいて、前記外装部品を操作するための操作動線の情報を含む前記乗員の姿勢情報を生成し、
前記姿勢情報に基づいて、前記乗員が前記外装部品を操作しようとする予備動作を推定し、
前記予備動作及び前記障害物の情報に基づいて、前記乗員に対しての警告処理、及び前記車両の車両制御処理のうち少なくとも何れか一方の処理を実行する車載装置の制御方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018094088A JP7147259B2 (ja) | 2018-05-15 | 2018-05-15 | 車載装置、車載装置の制御方法、及び予備動作推定システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018094088A JP7147259B2 (ja) | 2018-05-15 | 2018-05-15 | 車載装置、車載装置の制御方法、及び予備動作推定システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019200548A true JP2019200548A (ja) | 2019-11-21 |
JP7147259B2 JP7147259B2 (ja) | 2022-10-05 |
Family
ID=68612408
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018094088A Active JP7147259B2 (ja) | 2018-05-15 | 2018-05-15 | 車載装置、車載装置の制御方法、及び予備動作推定システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7147259B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114013442A (zh) * | 2021-10-27 | 2022-02-08 | 株式会社Iat | 一种车辆的起步方法、装置以及系统 |
US20220144200A1 (en) * | 2020-11-12 | 2022-05-12 | Toyoda Gosei Co., Ltd. | Vehicle occupant protection system |
CN114655083A (zh) * | 2020-12-22 | 2022-06-24 | 丰田自动车株式会社 | 下车动作判定装置、车辆、下车动作判定法以及存储有程序的非临时性存储介质 |
EP4343719A1 (en) * | 2022-09-23 | 2024-03-27 | Aptiv Technologies Limited | Monitoring method for determining passenger´s intention to unbuckle a seatbelt and/or open a door |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013093013A (ja) * | 2011-10-06 | 2013-05-16 | Ricoh Co Ltd | 画像処理装置、車両 |
JP2015209154A (ja) * | 2014-04-28 | 2015-11-24 | 矢崎総業株式会社 | 車載警報装置 |
JP2016110449A (ja) * | 2014-12-08 | 2016-06-20 | 富士通テン株式会社 | 運転支援システムおよび運転支援方法 |
US20170041816A1 (en) * | 2015-08-05 | 2017-02-09 | Lg Electronics Inc. | Mobile terminal and controlling method thereof |
WO2017056401A1 (ja) * | 2015-09-30 | 2017-04-06 | ソニー株式会社 | 制御装置、制御方法及びプログラム |
JP2017129973A (ja) * | 2016-01-19 | 2017-07-27 | 富士通テン株式会社 | 運転支援装置および運転支援方法 |
JP2018022229A (ja) * | 2016-08-01 | 2018-02-08 | 株式会社デンソーテン | 安全運転行動通知システム及び安全運転行動通知方法 |
-
2018
- 2018-05-15 JP JP2018094088A patent/JP7147259B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013093013A (ja) * | 2011-10-06 | 2013-05-16 | Ricoh Co Ltd | 画像処理装置、車両 |
JP2015209154A (ja) * | 2014-04-28 | 2015-11-24 | 矢崎総業株式会社 | 車載警報装置 |
JP2016110449A (ja) * | 2014-12-08 | 2016-06-20 | 富士通テン株式会社 | 運転支援システムおよび運転支援方法 |
US20170041816A1 (en) * | 2015-08-05 | 2017-02-09 | Lg Electronics Inc. | Mobile terminal and controlling method thereof |
WO2017056401A1 (ja) * | 2015-09-30 | 2017-04-06 | ソニー株式会社 | 制御装置、制御方法及びプログラム |
JP2017129973A (ja) * | 2016-01-19 | 2017-07-27 | 富士通テン株式会社 | 運転支援装置および運転支援方法 |
JP2018022229A (ja) * | 2016-08-01 | 2018-02-08 | 株式会社デンソーテン | 安全運転行動通知システム及び安全運転行動通知方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20220144200A1 (en) * | 2020-11-12 | 2022-05-12 | Toyoda Gosei Co., Ltd. | Vehicle occupant protection system |
CN114475437A (zh) * | 2020-11-12 | 2022-05-13 | 丰田合成株式会社 | 车辆用乘员保护系统 |
JP7400697B2 (ja) | 2020-11-12 | 2023-12-19 | 豊田合成株式会社 | 車両用乗員保護システム |
CN114655083A (zh) * | 2020-12-22 | 2022-06-24 | 丰田自动车株式会社 | 下车动作判定装置、车辆、下车动作判定法以及存储有程序的非临时性存储介质 |
CN114013442A (zh) * | 2021-10-27 | 2022-02-08 | 株式会社Iat | 一种车辆的起步方法、装置以及系统 |
EP4343719A1 (en) * | 2022-09-23 | 2024-03-27 | Aptiv Technologies Limited | Monitoring method for determining passenger´s intention to unbuckle a seatbelt and/or open a door |
Also Published As
Publication number | Publication date |
---|---|
JP7147259B2 (ja) | 2022-10-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11461636B2 (en) | Neural network applications in resource constrained environments | |
JP7147259B2 (ja) | 車載装置、車載装置の制御方法、及び予備動作推定システム | |
US10970747B2 (en) | Access and control for driving of autonomous vehicle | |
US10011216B1 (en) | Auto turn signal initiation based on lane change and driver history | |
US10565460B1 (en) | Apparatuses, systems and methods for classifying digital images | |
CN110997418A (zh) | 车辆占用管理系统和方法 | |
CN110682913B (zh) | 监视系统 | |
EP3239900B1 (en) | Identification device, identification method, and recording medium recording identification program | |
EP4220327A1 (en) | Improving safety of autonomous vehicles by remote support request | |
US20180304806A1 (en) | Driver state sensing system, driver state sensing method, and vehicle including the same | |
CN110103878A (zh) | 用于控制无人车的方法和装置 | |
JP6207089B2 (ja) | 車両ドア制御装置 | |
EP3023943B1 (en) | Controller, control method, and computer-readable recording medium | |
JP2019153219A (ja) | 車両管理システム、車両管理方法、およびプログラム | |
CN108216033A (zh) | 车辆外围监视装置 | |
KR101946746B1 (ko) | 차량에서 비-차량 오브젝트의 위치 결정 | |
JP2020057139A (ja) | 機器制御装置 | |
JP7107157B2 (ja) | 操作支援方法及び操作支援装置 | |
CN111976595A (zh) | 车门开启辅助系统、包括其的车辆及相应的方法和介质 | |
JP4683123B2 (ja) | 行動推定装置、プログラム | |
JP7410764B2 (ja) | 車両制御装置、車両制御方法、及び車両制御用プログラム | |
US11897406B2 (en) | Systems and methods for a moveable cover panel of an autonomous vehicle | |
JP2020093575A (ja) | 制御装置及び制御システム | |
US20220306071A1 (en) | Vehicle and vehicle operation system | |
JP7478592B2 (ja) | 車両制御システム、及び車両制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210301 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220113 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220331 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220823 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220905 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7147259 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |