JP2017136922A - 車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法 - Google Patents

車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法 Download PDF

Info

Publication number
JP2017136922A
JP2017136922A JP2016018268A JP2016018268A JP2017136922A JP 2017136922 A JP2017136922 A JP 2017136922A JP 2016018268 A JP2016018268 A JP 2016018268A JP 2016018268 A JP2016018268 A JP 2016018268A JP 2017136922 A JP2017136922 A JP 2017136922A
Authority
JP
Japan
Prior art keywords
vehicle
driver
emotion
passenger
biological information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016018268A
Other languages
English (en)
Inventor
悟 池田
Satoru Ikeda
悟 池田
智史 曽田
Tomohito Soda
智史 曽田
愛弓 重松
Ayumi SHIGEMATSU
愛弓 重松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP2016018268A priority Critical patent/JP2017136922A/ja
Publication of JP2017136922A publication Critical patent/JP2017136922A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

【課題】運転者や同乗者の感情の変化に配慮した走行制御または車載装置制御を実現する新規な技術を提供する。【解決手段】本発明に係る運転制御装置は、車両の運転者又は同乗者の生体情報を測定する生体センサから、生体情報を取得する生体情報取得部と、生体情報取得部が取得した生体情報を用いて、運転者又は同乗者の感情を推定する感情推定部と、感情推定部が推定した感情に基づいて車両の走行を制御する車両制御部とを備える。【選択図】図3

Description

本発明は、車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法に関する。
従来、所定の条件を満たす場合に、同乗者が見ている景観を撮像するという技術が提案されている(例えば、特許文献1)。当該技術においては、同乗者の表情が特定感情を表す場合に撮像するという態様も提案されている。
また、自動運転車両において、運転者の睡眠状態を検知した場合に、車速や走行レーンの変更頻度を上げるという技術も提案されている(例えば、特許文献2)。
特開2014−96632号公報 特開2008−120271号公報
従来、運転者の睡眠状態に基づいて車両の走行を制御したり、同乗者の特定感情を検知して車載機器の動作を制御したりする技術は提案されていた。しかしながら、閾値との関係で特定の感情を検知するだけでは、たとえば閾値を超えた状態が継続する場合等に適切な制御ができず、運転者や同乗者の感情に配慮した処理を提供することはできない。
そこで、本発明は、運転者や同乗者の感情の変化に配慮した走行制御または車載装置制御を実現する新規な技術を提供することを目的とする。
本発明に係る運転制御装置は、車両の運転者又は同乗者の生体情報を測定する生体センサから、生体情報を取得する生体情報取得部と、生体情報取得部が取得した生体情報を用いて、運転者又は同乗者の感情を推定する感情推定部と、感情推定部が推定した感情に基づいて車両の走行を制御する車両制御部とを備える。
また、車両は自動運転を行う車両であり、感情推定部が、運転者又は同乗者の恐怖心を検知した場合、車両制御部は、車両の速度を低下させる速度規制処理を行うようにしてもよい。
また、車両は自動運転を行う車両であり、感情推定部が、運転者又は同乗者の焦り又は苛立ちを検知した場合、車両制御部は、車両の速度を上昇させるようにしてもよい。
また、感情推定部が、恐怖心を抱いていた運転者及び同乗者のすべてが睡眠状態に移行したことを検知した場合、車両制御部は、速度規制処理を停止するようにしてもよい。
また、車両制御部は、速度規制処理の停止前における車両の速度を記憶部に保持させておき、感情推定部が、恐怖心を抱いていた運転者及び同乗者の少なくとも一部が覚醒したことを検知した場合、車両制御部は、車両の速度を、記憶部に保持させた速度に戻すよう
にしてもよい。
本発明の他の側面に係る車載機器制御装置は、車両の運転者又は同乗者の生体情報を測定する生体センサから、生体情報を取得する生体情報取得部と、生体情報取得部が取得した生体情報を用いて、運転者又は同乗者の感情の程度を示す値の変化の大きさを求める感情推定部と、感情推定部が求めた値の変化の大きさが所定の閾値を超えた場合、車両が備える車載機器の動作を制御する車載機器制御部とを備える。
また、車載機器は、車両の内部及び外部に設けられた複数の撮像装置であり、感情推定部は、運転者又は同乗者の興味の対象が車両の内外のいずれにあるか判断し、車載機器制御部は、興味の対象が撮像されるように車載機器を制御するようにしてもよい。
また、撮像装置は、直近の所定期間に係る録画を保持し、車載機器制御部は、運転者及び同乗者の感情について、感情推定部が求めた値の変化の大きさが所定の閾値を超えた最先の時点を含むように、遡って録画の始点を決めるようにしてもよい。
また、運転者又は同乗者の生体情報を用いて推定した、運転者又は同乗者の感情を示す情報と当該地点の位置情報とを車両から受信し、受信した感情を示す情報を地図と関連付けて蓄積する地図情報を用いて、感情推定部は、運転者又は同乗者の興味の対象が車両の内外のいずれにあるか判断するようにしてもよい。
本発明の他の側面に係る地図情報生成装置は、運転者又は同乗者の生体情報を用いて推定した、運転者又は同乗者の感情を示す情報と当該地点の位置情報とを車両から受信し、受信した感情を示す情報に基づいて、運転者又は同乗者が危険を感じた位置を地図情報と関連付けて蓄積する。
なお、課題を解決するための手段に記載の内容は、本発明の課題や技術的思想を逸脱しない範囲で可能な限り組み合わせることができる。また、課題を解決するための手段の内容は、コンピュータが実行する方法やプログラムとして提供するようにしてもよい。
本発明によれば、運転者や同乗者の感情の変化に配慮した走行制御または車載装置制御を実現する新規な技術を提供することができる。
実施形態に係る車載装置を搭載した車両の構成を模式的に示す図である。 コンピュータの一例を示す装置構成図である。 車載装置の一例を示す機能ブロック図である。 恐怖感情優先制御の一例を示す処理フロー図である。 焦り・苛立ち感情優先制御の一例を示す処理フロー図である。 実施形態2に係るシステムの概要を説明するための図である。 車載装置を搭載した車両の構成を模式的に示す図である。 車載装置の一例を示す機能ブロック図である。 撮影制御の一例を示す処理フローである。
以下、添付図面を参照して説明する。図面に本発明の好ましい実施形態を示すが、本発明は多くの異なる形態で実施することが可能であり、本明細書に記載する実施形態には限定されない。
[実施形態1]
<装置構成>
図1は、本実施形態に係る車載装置を搭載した車両の構成を模式的に示す図である。図1では、細い破線で車両1を示し、実線で車両1が備える構成要素を示している。また、太い破線は、運転者2a及び同乗者2b〜2d(総称して「ユーザ」とも呼ぶ)を示している。車両1は、車載装置11と、生体センサ12とを備えている。なお、車載装置11と、生体センサ12とは、相互に無線又は有線で接続されているものとする。本実施形態に係る車載装置11は、生体センサ12が取得した生体情報に基づいてユーザの感情を推測し、ユーザの感情に応じた車両の走行制御を行う車両制御装置である。
車載装置11は、いわゆるコンピュータである。図2は、コンピュータの一例を示す装置構成図である。図2に示すコンピュータ1000は、CPU(Central Processing Unit)1001、主記憶装置1002、補助記憶装置1003、通信IF(Interface)1004、入出力IF(Interface)1005、通信バス1006を備えている。CPU10
01は、プログラム(「ソフトウェア」又は「アプリケーション」とも呼ぶ)を実行することにより本実施の形態に係る処理等を行う。主記憶装置1002は、CPU1001が読み出したプログラムやデータをキャッシュしたり、CPUの作業領域を確保したりする。主記憶装置は、具体的には、RAM(Random Access Memory)やROM(Read Only Memory)等である。補助記憶装置1003は、CPU1001により実行されるプログラムや、動作の設定情報などを記憶する。補助記憶装置1003は、具体的には、HDD(Hard-disk Drive)やSSD(Solid State Drive)、eMMC(embedded Multi-Media Card)、フラッシュメモリ等である。通信IF1004は、ネットワークを介して他のコン
ピュータと通信を行う。通信IF1004は、具体的には、所定の規格に基づいて通信を行う無線通信モジュールである。入出力IF1005は、他のセンサや装置と接続され、データの入出力を行う。そして、以上のような構成要素が、通信バス1006で接続されている。なお、これらの構成要素はそれぞれ複数設けられていてもよいし、一部の構成要素を設けないようにしてもよい。そして、CPU1001がプログラムを実行することにより、図2のコンピュータを車載装置11として働かせる。
生体センサ12は、車両1の運転者2a及び同乗者2b〜2dの生体情報を取得する。本実施形態に係る生体センサ12は、脳波センサ、心拍計を含む。また、生体センサ12は、例えばウェアラブルデバイスであり、運転者2a及び同乗者2b〜2dの各々が生体センサ12を装着する。また、生体センサ12と車載装置11とは所定の無線通信方式で接続され、生体センサ12は車載装置11へ、運転者2a又は同乗者2b〜2dの脳波や心拍数を表す情報を継続的に送信する。
<機能構成>
図3は、車載装置11の一例を示す機能ブロック図である。車載装置11は、生体情報取得部111と、状態推定部112と、車両制御部113と、記憶部115と、設定変更部116とを備えている。なお、車載装置11の上述したCPU1001が所定のプログラムを実行することにより、車載装置11を図3に示した各機能部として働かせることができる。
生体情報取得部111は、生体センサ12から、運転者2a又は同乗者2b〜2dの脳波や心拍数を表す生体情報を取得する。状態推定部112は、生体情報取得部111が取得した生体情報を用いて、運転者2a又は同乗者2b〜2dの感情を推定する。車両制御部113は、いわゆる自動運転において、エンジン出力や操舵等、車両の走行に関する制御を行う。なお、車両制御部113は、車両の走行状態を状態推定部112に出力し、状態推定部112は走行状態と生体情報とを組み合わせて感情を推定するようにしてもよい。記憶部115は、本実施形態において用いるデータを一時的又は永続的に保持する。設
定変更部116は、ユーザの操作に基づき、例えば本実施形態に係る制御の実施・不実施を切り替えるための設定を、記憶部115に記憶させる。
<恐怖感情優先制御>
図4は、本実施形態に係る恐怖感情優先制御の一例を示す処理フロー図である。恐怖感情優先制御は、いわゆる自動運転を行う車両に搭載された車載装置11によって実行されるものとする。
ここで、例えば内閣府の「自動走行システム研究開発計画」によれば、自動運転をレベル1からレベル4に区分して説明している。「安全運転支援システム」であるレベル1は、加速・操舵・制動のいずれかをシステムが行う状態と定義されている。また、「自動走行システム」のうち「準自動走行システム」であるレベル2は、加速・操舵・制動のうち複数の操作をシステムが行う状態と定義されている。同様に「自動走行システム」のうち「準自動走行システム」であるレベル3は、加速・操舵・制動を全てシステムが行い、システムが要請したときはドライバーが対応する状態と定義されている。また、「完全自動走行システム」であるレベル4は、加速・操舵・制動を全てドライバー以外が行い、ドライバーが全く関与しない状態と定義されている。本実施形態では、レベル1からレベル4を含めて、自動運転と呼ぶものとする。
自動運転を行う場合、コンピュータが安全と判断した速度であったり、法定速度以内であったとしても、加速時や高速走行時にユーザが恐怖を感じる可能性がある。本実施形態に係る車載装置11は、ユーザの恐怖心を検知し、例えば車両の速度や加速度が低下するように車両の制御を行う。
車載装置11の生体情報取得部111は、生体センサ12から生体情報を取得する(図4:S101)。本ステップでは、生体情報取得部111は、例えば、脳波センサからα波、β波等の周波数帯域を含む基礎律動を示すデータを取得したり、心拍計から心拍数を示すデータを取得したりする。取得したデータは、記憶部115に保持される。
また、車載装置11の状態推定部112は、S101で取得した生体情報に基づいてユーザが睡眠状態であるか判断する(S102)。本ステップでは、例えば脳波から睡眠紡錘波が検知されると、ユーザが睡眠状態であると判断する。また、車両1に複数のユーザが乗っている場合、例えば全員が睡眠状態であるか判断する。睡眠を検知したと判断した場合(S102:Yes)、S101に戻って処理を繰り返す。
一方、睡眠を検知できなかった場合(S102:No)、状態推定部112は、S101で取得した生体情報に基づいてユーザが恐怖を感じているか判断する(S103)。本ステップでは、脳波又は心拍数を用いて、既存の技術に基づいて恐怖心を検知する。例えば、脳波のうちα波とβ波との比率に基づいてユーザが緊張した状態であるかリラックスした状態であるか判断する。そして、加速や高速走行に相関して緊張の度合いが高まる場合、ユーザが加速や高速走行に対して恐怖を感じていると判断する。また、他の既存技術に基づいて、脳波や心拍数その他の生体情報のみから恐怖を検知するようにしてもよい。なお、車両1に複数のユーザが乗っている場合、少なくとも1人が恐怖を感じていると判断された場合、本ステップでは恐怖を検知したと判断する。恐怖心を検知できなかった場合(S103:No)、S101に戻って処理を繰り返す。
一方、いずれかのユーザの恐怖心を検知した場合(S103:Yes)、車載装置11の車両制御部113は、車両の速度を低下させる(S104)。その後、S101に戻って処理を繰り返す。恐怖感情優先制御に係る処理を繰り返す過程で、ユーザの恐怖心を検知できなくなった場合(S103:No)、車両の速度を低下させる処理が停止されるた
め、ユーザにとって適切な速度での走行が実現される。また、処理を繰り返す過程で、恐怖を感じていたユーザが睡眠に入った場合も、車両の速度を低下させる処理は停止される。このようにすれば、ユーザに恐怖心を与えることなく、適切な速度で走行することができる。
以上のような恐怖感情優先制御によれば、自動運転を行う場合において、加速時や高速走行時に発生するユーザの恐怖の感情への対応を優先させ、ユーザの感情に配慮した走行を実現することができるようになる。すなわち、運転者や同乗者の感情の変化に配慮した走行制御を実現することができる。
<焦り・苛立ち感情優先制御>
図5は、本実施形態に係る焦り・苛立ち感情優先制御の一例を示す処理フロー図である。焦り・苛立ち感情優先制御も、いわゆる自動運転を行う車両に搭載された車載装置11によって実行されるものとする。
車載装置11の生体情報取得部111は、生体センサ12から生体情報を取得する(図5:S201)。本ステップでも、生体情報取得部111は、例えば、脳波センサから基礎律動を示すデータを取得したり、心拍計から心拍数を示すデータを取得したりする。取得したデータは、記憶部115に保持される。
また、状態推定部112は、S101で取得した生体情報に基づいてユーザが焦り・苛立ちを感じているか判断する(S202)。本ステップでは、脳波又は心拍数を用いて、既存の技術に基づいて焦り又は苛立ちを検知する。例えば、脳波を用いてユーザが緊張した状態であるかリラックスした状態であるか判断すると共に、信号等での停車時や低速走行時に緊張の程度が高まる場合、ユーザが焦り又は苛立ちを感じていると判断するようにしてもよい。また、既存の技術を用いて、生体情報のみから焦り又は苛立ちを検知するようにしてもよい。なお、車両1に複数のユーザが乗っている場合、少なくとも1人が焦り・苛立ちを感じていると判断された場合、本ステップでは焦り・苛立ちを検知したと判断する。焦り・苛立ちを検知できなかった場合(S202:No)、S201に戻って処理を繰り返す。
一方、ユーザの焦り・苛立ちを検知した場合(S202:Yes)、車載装置11の車両制御部113は、車両の速度を上昇させる(S203)。なお、速度の上限は、コンピュータが安全と判断する速度且つ法定速度以下に制限される。その後、S201に戻って処理を繰り返す。処理を繰り返す過程で、ユーザの焦り・苛立ちを検知できなくなった場合、車両の速度を上昇させる処理が停止されるため、適切な速度での走行が実現される。
以上のような焦り・苛立ち感情優先制御によれば、自動運転を行う場合において、停車時又は低速走行時に発生するユーザの焦り又は苛立ちの感情への対応を優先させ、可能な範囲で速度を上げた走行を実現できるようになる。
<変形例>
恐怖を検知した場合の走行と、焦り・苛立ちを検知した場合の走行とは、いずれを優先させてもよい。すなわち、運転者及び複数の同乗者の間で、恐怖と、焦り・苛立ちとがそれぞれ検知された場合、いずれの制御を優先して行うようにしてもよい。
また、恐怖を検知する処理や、焦り・苛立ちを検知する処理は、例えば車載装置11に対するユーザのボタン操作や音声操作等によって実行の有無を切り替えられるようにしてもよい。切り替えの設定は記憶部115に保持され、設定に基づいて図4や図5に示した処理自体の起動が制御される。
また、S104の処理で速度を制限した後において、S102の処理において睡眠を検知したと判断された場合、制限されていた速度を記憶部115に記憶しておくようにしてもよい。そして、ユーザが覚醒した場合、速やかに制限されていた速度まで車速を低下させるようにする。このようにすれば、覚醒直後にユーザが再度恐怖心を抱くことを防止できる。
また、S104においては、車両の走行に関して速度以外の要素を感情に基づいて変更するようにしてもよい。例えば、走行ルートや、加速若しくは減速のタイミング、ステアリング操作のタイミング、合流や追い越しのタイミング、ライトや方向指示器の点灯タイミング、車間距離等を変更するようにしてもよい。
[実施形態2]
次に、他の実施形態に係るシステム、車載装置及び車載装置が実行する処理について説明する。なお、上述した実施形態1と対応する内容については同一の符号を付し、説明を省略する。
<システム構成>
図6は、本実施形態に係るシステムの概要を説明するための図である。図6のシステムは、車両1に搭載された車載装置と、地図作成サーバ3とがインターネット等のネットワーク4を介して接続されている。なお、車両1は複数存在するものとする。地図作成サーバ3は、車両1から受信したデータを用いて、運転者や同乗者の感情に変化のある地点を記憶させた地図を作成する。
<装置構成>
図7は、本実施形態に係る車載装置を搭載した車両の構成を模式的に示す図である。図7でも、細い破線で車両1を示し、実線で車両1が備える構成要素を示している。また、太い破線は、運転者2a及び同乗者2b〜2dを示している。車両1は、車載装置11と、生体センサ12と、車内カメラ13及び車内マイク14と、車外カメラ15と、測位モジュール16とを備えている。なお、車載装置11と、生体センサ12、車内カメラ13及び車内マイク14、車外カメラ15、並びに測位モジュール16の各々とは、相互に無線又は有線で接続されているものとする。本実施形態に係る車載装置11は、ユーザの感情に基づいて車載機器を制御する車載機器制御装置である。
車内カメラ13は、いわゆる撮像装置であり、動画又は静止画を生成し、車載装置11へ出力する。また、図7に示した一点鎖線は、車内カメラ13のおおよその撮影範囲(すなわち、視野角)を示している。本実施形態では、車内カメラ13はその撮影範囲に運転席の運転者並びに助手席及び後部座席の同乗者を含む。車内マイク14は、マイクロフォン等の入力装置であり、例えば運転者又は同乗者の声を取得して車載装置11に出力する。また、車外カメラ15もいわゆる撮像装置であり、動画又は静止画を生成し、車載装置11へ出力する。本実施形態では、車外カメラ15はその撮影範囲に車外の全方位を含むものとする。測位モジュール16は、例えばGPS(Global Positioning System)衛星
から送信される信号を受信する受信機を備え、受信した信号に基づいて当該測位モジュール16の位置(すなわち、車両1の位置)を算出する。
<機能構成>
図8は、車載装置11の一例を示す機能ブロック図である。車載装置11は、生体情報取得部111と、状態推定部112と、車両制御部113と、車載機器制御部114と、記憶部115と、設定変更部116と、データ通信部117とを備えている。なお、コンピュータである車載装置11の上述したCPU1001が所定のプログラムを実行するこ
とにより、車載装置11を図8に示した各機能部として働かせることができる。
生体情報取得部111は、生体センサ12から、運転者2a又は同乗者2b〜2dの脳波や心拍数を表す生体情報を取得する。状態推定部112は、生体情報取得部111が取得した生体情報を用いて、運転者2a又は同乗者2b〜2dの感情を推定する。また、車載機器制御部114は、例えば車内カメラ13や車外カメラ15等の車載機器の動作を制御する。記憶部115は、本実施形態において用いるデータを一時的又は永続的に保持する。設定変更部116は、ユーザの操作に基づき、例えば本実施形態に係る制御の実施・不実施を切り替えるための設定を、記憶部115に記憶させる。また、データ通信部117は、ネットワーク4を介して通信を行う。
<撮影制御>
図9は、本実施形態に係る撮影制御の一例を示す処理フローである。本実施形態では、運転者又は同乗者の感情を検知すると共に、検知した感情に基づいて機器の操作を行う。具体的には、車載装置11は、車内に備える車内カメラ13又は車外に備える車外カメラ15を用いて撮影を行う。
まず、車載装置11の生体情報取得部111は、生体センサ12から生体情報を取得する(図9:S301)。本ステップでは、生体情報取得部111は、例えば、脳波センサから基礎律動を示すデータを取得したり、心拍計から心拍数を示すデータを取得したりする。取得したデータは、記憶部115に保持される。
また、車載装置11の状態推定部112は、S301で取得した生体情報に基づいて感情を表す所定のスコアの時間微分(平均変化率)を算出する(S302)。本ステップでは、例えば、ユーザが緊張している程度を示すスコアや、リラックスしている程度を示すスコア、眠気を示すスコア等を所定の数式に基づいて算出すると共に、当該スコアの時間微分を求める。これらのスコアは脳波の基礎律動を用いて算出してもよいし、心拍数そのものをスコアとしてもよい。また、スコアの時間微分を求めることにより、ユーザの感情の変化の大きさを検知することができる。単純な閾値とスコアとの比較だけでは、スコアが閾値を超えることなく変化した場合に車載機器の制御を行うことができないところ、本実施形態のようにスコアの時間微分を用いることで、ユーザの感情の変化の大きさに基づいた制御ができるようになる。すなわち、運転者や同乗者の感情の変化に配慮した車載装置制御を実現することができる。
そして、状態推定部112は、求めたスコアの時間微分が所定の閾値を超えたか否か判断する(S303)。スコアの時間微分が所定の閾値を超えていないと判断された場合(S303:No)、S301に戻り処理を繰り返す。
一方、スコアの時間微分が所定の閾値を超えたと判断された場合(S303:Yes)、ユーザの感情が急激に変化したものと推定し、ユーザの興味の対象を特定する(S304)。本ステップでは、例えば既存の画像認識技術を用いて、車内カメラ13によって撮影されたユーザの動作を認識し、興味の対象を特定する。具体的には、ユーザの視線の方向を特定し、車外を見ているのか、複数のユーザが互いを見ているのかによって興味の対象が車外にあるのか、車内にあるのかを判断するようにしてもよい。同様に、ユーザの姿勢に基づいてユーザの興味の対象が車外にあるのか、車内にあるのかを判断するようにしてもよい。また、ユーザが車外を指さす動作を認識した場合、興味の対象は車外にあると判断してもよい。また、車内マイク14を介してユーザの発言を取得すると共に既存の音声認識技術を用いて、「あれ」等の代名詞や建物又は風景等の固有名詞を検知した場合に、興味の対象は車外にあると判断してもよい。興味の対象を特定することで、録画すべき対象を適切に判断することができる。
また、車載装置11の車載機器制御部114は、車内カメラ13又は車外カメラ15の動作を制御し、例えば所定期間遡って録画データを記憶させる(S305)。なお、S304で特定されたユーザの興味の対象に応じて、車内カメラ13又は車外カメラ15が用いられる。また、車内カメラ13及び車外カメラ15は、直近の所定期間分の録画データを保持すると共に、直近の所定期間以前の録画データを削除する、ループ録画を行うものとする。本実施形態では、所定期間前から録画データを記憶させることにより、ユーザの感情が急激に変化したタイミングを含む動画を残すことができる。なお、記憶させるデータの始点は、例えば複数のユーザのうち感情の変化の程度が所定の閾値を超えた最先のタイミングとしてもよい。このようにすれば、複数のユーザにおける感情の盛り上がりの起点を録画に収めることができ、エンターテイメント性が向上する。
また、車載装置11のデータ通信部117は、測位モジュール16から取得した位置情報と、上述した感情の大きさを示すスコアとを関連付けて地図作成サーバ3へ送信する(S306)。一方、地図作成サーバ3は、位置情報と感情の大きさを示すスコアとを関連付けて地図上に記録し、危険な地点を保持する地図を作成する。
従来のいわゆるヒヤリハット地点は、例えば運転者が危険を感じた後にステアリングを操作したりブレーキを踏んだりする動作があり、当該動作による車両の挙動に基づいて位置を特定していた。一方、本実施形態に係る感情が変化するタイミングの認識によれば、運転者が危険を感じた地点を精確に特定することができ、危険地点の精度が向上する。また、本実施形態に係る感情の検知によれば、車両の挙動には表れない、運転者の眠気や緊張感の低下を認識することができるため、従来は特定することができなかった危険地点を反映した地図を作成できる。
<変形例>
S304の興味の対象の特定において、地図作成サーバ3が作成する地図を用いるようにしてもよい。この場合、地図にはユーザが危険を感じた位置だけでなく、ユーザが景観に興味を示す等して感情を示すスコアを大きく変化させた位置を蓄積するようにしてもよい。例えば、統計的に所定の基準よりも多くのユーザが感情の大きさを変化させるような地点は車外に興味の対象となるものが存在すると判断し、当該地点においてS304の処理を行う場合、興味の対象は車外に存在すると判断する。このようにすれば、興味の対象の特定精度を向上させることができる。
本発明は、上述した実施の形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において変更したり組み合わせたりすることができる。
1 :車両
2 :レベル
2a :運転者
2b〜2d :同乗者
3 :地図作成サーバ
4 :ネットワーク
11 :車載装置
12 :生体センサ
13 :車内カメラ
14 :車内マイク
15 :車外カメラ
16 :測位モジュール
17 :データ通信部
111 :生体情報取得部
112 :状態推定部
113 :車両制御部
114 :車載機器制御部
115 :記憶部
116 :設定変更部
117 :データ通信部

Claims (12)

  1. 車両の運転者又は同乗者の生体情報を測定する生体センサから、前記生体情報を取得する生体情報取得部と、
    前記生体情報取得部が取得した前記生体情報を用いて、前記運転者又は前記同乗者の感情を推定する感情推定部と、
    前記感情推定部が推定した感情に基づいて前記車両の走行を制御する車両制御部と、
    を備える車両制御装置。
  2. 前記車両は自動運転を行う車両であり、
    前記感情推定部が、前記運転者又は前記同乗者の恐怖心を検知した場合、前記車両制御部は、前記車両の速度を低下させる速度規制処理を行う
    請求項1に記載の車両制御装置。
  3. 前記車両は自動運転を行う車両であり、
    前記感情推定部が、前記運転者又は前記同乗者の焦り又は苛立ちを検知した場合、前記車両制御部は、前記車両の速度を上昇させる
    請求項1に記載の車両制御装置。
  4. 前記感情推定部が、恐怖心を抱いていた前記運転者及び前記同乗者のすべてが睡眠状態に移行したことを検知した場合、前記車両制御部は、前記速度規制処理を停止する
    請求項2に記載の車両制御装置。
  5. 前記車両制御部は、前記速度規制処理の停止前における前記車両の速度を記憶部に保持させておき、
    前記感情推定部が、前記恐怖心を抱いていた運転者及び同乗者の少なくとも一部が覚醒したことを検知した場合、前記車両制御部は、前記車両の速度を、前記記憶部に保持させた速度に戻す
    請求項4に記載の車両制御装置。
  6. 車両の運転者又は同乗者の生体情報を測定する生体センサから、前記生体情報を取得する生体情報取得部と、
    前記生体情報取得部が取得した前記生体情報を用いて、前記運転者又は前記同乗者の感情の程度を示す値の変化の大きさを求める感情推定部と、
    前記感情推定部が求めた値の変化の大きさが所定の閾値を超えた場合、前記車両が備える車載機器の動作を制御する車載機器制御部と、
    を備える車載機器制御装置。
  7. 前記車載機器は、前記車両の内部及び外部に設けられた複数の撮像装置であり、
    前記感情推定部は、前記運転者又は前記同乗者の興味の対象が前記車両の内外のいずれにあるか判断し、
    前記車載機器制御部は、前記興味の対象が録画されるように前記車載機器を制御する
    請求項6に記載の車載機器制御装置。
  8. 前記撮像装置は、直近の所定期間に係る録画を保持し、
    前記車載機器制御部は、前記運転者及び前記同乗者の感情について、前記感情推定部が求めた値の変化の大きさが所定の閾値を超えた最先の時点を含むように、遡って録画の始点を決める
    請求項7に記載の車載機器制御装置。
  9. 前記運転者又は前記同乗者の前記生体情報を用いて推定した、前記運転者又は前記同乗者の感情を示す情報と当該地点の位置情報とを車両から受信し、受信した感情を示す情報を地図と関連付けて蓄積する地図情報を用いて、前記感情推定部は、前記運転者又は前記同乗者の興味の対象が前記車両の内外のいずれにあるか判断する
    請求項7又は8に記載の車載機器制御装置。
  10. 運転者又は同乗者の生体情報を用いて推定した、前記運転者又は前記同乗者の感情を示す情報と当該地点の位置情報とを車両から受信し、
    受信した感情を示す情報に基づいて、前記運転者又は前記同乗者が危険を感じた位置を地図情報と関連付けて蓄積する、
    地図情報生成装置。
  11. 車両の運転者又は同乗者の生体情報を測定する生体センサから、前記生体情報を取得する生体情報取得ステップと、
    前記生体情報取得ステップにおいて取得した前記生体情報を用いて、前記運転者又は前記同乗者の感情を推定する感情推定ステップと、
    前記感情推定ステップにおいて推定された感情に基づいて前記車両の走行を制御する車両制御ステップと、
    をコンピュータが実行する車両制御方法。
  12. 車両の運転者又は同乗者の生体情報を測定する生体センサから、前記生体情報を取得する生体情報取得ステップと、
    前記生体情報取得ステップにおいて取得した前記生体情報を用いて、前記運転者又は前記同乗者の感情の程度を示す値の変化の大きさを求める感情推定ステップと、
    前記感情推定ステップにおいて求められた値の変化の大きさが所定の閾値を超えた場合、前記車両が備える車載機器の動作を制御する車載機器制御ステップと、
    をコンピュータが実行する車載機器制御方法。
JP2016018268A 2016-02-02 2016-02-02 車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法 Pending JP2017136922A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016018268A JP2017136922A (ja) 2016-02-02 2016-02-02 車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016018268A JP2017136922A (ja) 2016-02-02 2016-02-02 車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法

Publications (1)

Publication Number Publication Date
JP2017136922A true JP2017136922A (ja) 2017-08-10

Family

ID=59565439

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016018268A Pending JP2017136922A (ja) 2016-02-02 2016-02-02 車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法

Country Status (1)

Country Link
JP (1) JP2017136922A (ja)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108501956A (zh) * 2018-03-13 2018-09-07 深圳市海派通讯科技有限公司 一种基于情绪识别的智能刹车方法
KR20190030042A (ko) * 2017-09-13 2019-03-21 (주)유양디앤유 차량용 헬스 케어 서비스 제공 방법 및 그 장치
JP2019053655A (ja) * 2017-09-19 2019-04-04 トヨタ自動車株式会社 自動運転システム
CN109606386A (zh) * 2018-12-12 2019-04-12 北京车联天下信息技术有限公司 智能车内座舱
WO2019082234A1 (ja) * 2017-10-23 2019-05-02 三菱電機株式会社 運転支援装置および運転支援方法
JP2019131147A (ja) * 2018-02-02 2019-08-08 本田技研工業株式会社 制御装置
JP2020013438A (ja) * 2018-07-20 2020-01-23 株式会社Jvcケンウッド 記録制御装置、記録制御方法および記録制御プログラム
JP2020042642A (ja) * 2018-09-12 2020-03-19 トヨタ自動車株式会社 運転評価装置、運転評価システム、運転評価方法、及び運転評価用コンピュータプログラム
JP2020071766A (ja) * 2018-11-01 2020-05-07 コベルコ建機株式会社 感性フィードバック制御装置
JP2020075586A (ja) * 2018-11-06 2020-05-21 日産自動車株式会社 運転支援方法及び運転支援装置
CN111325087A (zh) * 2018-12-13 2020-06-23 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
CN111382662A (zh) * 2018-12-28 2020-07-07 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
CN111382665A (zh) * 2018-12-28 2020-07-07 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
KR20200102307A (ko) * 2019-02-21 2020-08-31 한국전자통신연구원 운전자 감성 인식 방법 및 장치
CN111611330A (zh) * 2019-02-26 2020-09-01 丰田自动车株式会社 信息处理系统、程序、以及控制方法
CN111731280A (zh) * 2019-03-25 2020-10-02 株式会社斯巴鲁 车辆的控制装置、车辆的控制方法及存储介质
JP2021019977A (ja) * 2019-07-30 2021-02-18 富士通株式会社 情報処理装置、ヒヤリハット検出方法およびヒヤリハット検出システム
JP2021046154A (ja) * 2019-09-20 2021-03-25 株式会社Subaru 車両制御計画生成装置及び車両の制御装置
JP2021071498A (ja) * 2019-10-29 2021-05-06 株式会社デンソー 記録装置
US11117586B2 (en) 2017-11-07 2021-09-14 Toyota Jidosha Kabushiki Kaisha Information processing apparatus and information processing method
JPWO2022018781A1 (ja) * 2020-07-20 2022-01-27
CN114084160A (zh) * 2020-07-29 2022-02-25 奥迪股份公司 驾驶辅助装置以及相应的车辆、方法、计算机设备和介质
WO2022244128A1 (ja) * 2021-05-19 2022-11-24 三菱電機株式会社 運転支援情報生成装置、運転支援装置および運転支援情報生成方法
US11697431B2 (en) 2020-01-17 2023-07-11 Subaru Corporation Automated driving assistance apparatus

Cited By (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190030042A (ko) * 2017-09-13 2019-03-21 (주)유양디앤유 차량용 헬스 케어 서비스 제공 방법 및 그 장치
KR102002304B1 (ko) * 2017-09-13 2019-07-22 (주)유양디앤유 차량용 헬스 케어 서비스 제공 방법 및 그 장치
JP2019053655A (ja) * 2017-09-19 2019-04-04 トヨタ自動車株式会社 自動運転システム
WO2019082234A1 (ja) * 2017-10-23 2019-05-02 三菱電機株式会社 運転支援装置および運転支援方法
US11117586B2 (en) 2017-11-07 2021-09-14 Toyota Jidosha Kabushiki Kaisha Information processing apparatus and information processing method
US11654916B2 (en) 2017-11-07 2023-05-23 Toyota Jidosha Kabushiki Kaisha Information processing apparatus and information processing method
JP2019131147A (ja) * 2018-02-02 2019-08-08 本田技研工業株式会社 制御装置
CN108501956A (zh) * 2018-03-13 2018-09-07 深圳市海派通讯科技有限公司 一种基于情绪识别的智能刹车方法
JP2020013438A (ja) * 2018-07-20 2020-01-23 株式会社Jvcケンウッド 記録制御装置、記録制御方法および記録制御プログラム
JP7124510B2 (ja) 2018-07-20 2022-08-24 株式会社Jvcケンウッド 記録制御装置、記録制御方法および記録制御プログラム
JP2020042642A (ja) * 2018-09-12 2020-03-19 トヨタ自動車株式会社 運転評価装置、運転評価システム、運転評価方法、及び運転評価用コンピュータプログラム
JP7172321B2 (ja) 2018-09-12 2022-11-16 トヨタ自動車株式会社 運転評価装置、運転評価システム、運転評価方法、及び運転評価用コンピュータプログラム
WO2020090659A1 (ja) * 2018-11-01 2020-05-07 コベルコ建機株式会社 感性フィードバック制御装置
JP2020071766A (ja) * 2018-11-01 2020-05-07 コベルコ建機株式会社 感性フィードバック制御装置
JP7154954B2 (ja) 2018-11-01 2022-10-18 コベルコ建機株式会社 感性フィードバック制御装置
US11926991B2 (en) 2018-11-01 2024-03-12 Kobelco Construction Machinery Co., Ltd. Sensibility feedback control device
JP2020075586A (ja) * 2018-11-06 2020-05-21 日産自動車株式会社 運転支援方法及び運転支援装置
JP7429498B2 (ja) 2018-11-06 2024-02-08 日産自動車株式会社 運転支援方法及び運転支援装置
CN109606386A (zh) * 2018-12-12 2019-04-12 北京车联天下信息技术有限公司 智能车内座舱
CN111325087A (zh) * 2018-12-13 2020-06-23 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
CN111325087B (zh) * 2018-12-13 2023-10-27 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
CN111382665A (zh) * 2018-12-28 2020-07-07 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
CN111382665B (zh) * 2018-12-28 2024-03-01 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
CN111382662B (zh) * 2018-12-28 2024-05-17 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
CN111382662A (zh) * 2018-12-28 2020-07-07 本田技研工业株式会社 信息处理装置以及计算机可读存储介质
KR20200102307A (ko) * 2019-02-21 2020-08-31 한국전자통신연구원 운전자 감성 인식 방법 및 장치
KR102579371B1 (ko) * 2019-02-21 2023-09-18 한국전자통신연구원 운전자 감성 인식 방법 및 장치
CN111611330B (zh) * 2019-02-26 2023-09-26 丰田自动车株式会社 信息处理系统、程序、以及控制方法
CN111611330A (zh) * 2019-02-26 2020-09-01 丰田自动车株式会社 信息处理系统、程序、以及控制方法
US11345354B2 (en) 2019-03-25 2022-05-31 Subaru Corporation Vehicle control device, vehicle control method and computer-readable medium containing program
CN111731280A (zh) * 2019-03-25 2020-10-02 株式会社斯巴鲁 车辆的控制装置、车辆的控制方法及存储介质
JP7234846B2 (ja) 2019-07-30 2023-03-08 富士通株式会社 情報処理装置、ヒヤリハット検出方法およびヒヤリハット検出システム
JP2021019977A (ja) * 2019-07-30 2021-02-18 富士通株式会社 情報処理装置、ヒヤリハット検出方法およびヒヤリハット検出システム
JP7384604B2 (ja) 2019-09-20 2023-11-21 株式会社Subaru 車両制御計画生成装置
JP2021046154A (ja) * 2019-09-20 2021-03-25 株式会社Subaru 車両制御計画生成装置及び車両の制御装置
JP7279612B2 (ja) 2019-10-29 2023-05-23 株式会社デンソー 記録装置
JP2021071498A (ja) * 2019-10-29 2021-05-06 株式会社デンソー 記録装置
US11697431B2 (en) 2020-01-17 2023-07-11 Subaru Corporation Automated driving assistance apparatus
JP7361929B2 (ja) 2020-07-20 2023-10-16 三菱電機株式会社 車両制御装置、プログラム及び車両制御方法
WO2022018781A1 (ja) * 2020-07-20 2022-01-27 三菱電機株式会社 車両制御装置、プログラム及び車両制御方法
JPWO2022018781A1 (ja) * 2020-07-20 2022-01-27
CN114084160A (zh) * 2020-07-29 2022-02-25 奥迪股份公司 驾驶辅助装置以及相应的车辆、方法、计算机设备和介质
WO2022244128A1 (ja) * 2021-05-19 2022-11-24 三菱電機株式会社 運転支援情報生成装置、運転支援装置および運転支援情報生成方法

Similar Documents

Publication Publication Date Title
JP2017136922A (ja) 車両制御装置、車載機器制御装置、地図情報生成装置、車両制御方法及び車載機器制御方法
US11027608B2 (en) Driving assistance apparatus and driving assistance method
US20230219580A1 (en) Driver and vehicle monitoring feedback system for an autonomous vehicle
JP6287728B2 (ja) 車載システム、車両制御装置、および車両制御装置用のプログラム
WO2020054458A1 (ja) 情報処理装置、移動装置、および方法、並びにプログラム
US20190227547A1 (en) Drive mode switch controller, method, and program
WO2016035268A1 (ja) 車両の走行制御システム
US20160023662A1 (en) Method and device for ascertaining a fatigue degree of a driver of a vehicle, and vehicle
JP2009213768A (ja) 運転者状態判定装置
JP2008070965A (ja) 車両制御装置および車両制御方法
US11738773B2 (en) System for controlling autonomous vehicle for reducing motion sickness
CN112689587A (zh) 考虑到在要求接管驾驶任务时驾驶员的非驾驶任务活动的可中断性而分类非驾驶任务活动的方法及因要求接管驾驶任务而中断非驾驶任务活动后重新释放非驾驶任务活动的方法
US9886034B2 (en) Vehicle control based on connectivity of a portable device
JP2018165070A (ja) 乗員状態推定装置及び乗員状態推定方法
CN115179955A (zh) 清醒状态判断系统及自动驾驶装置
US11383640B2 (en) Techniques for automatically reducing annoyance levels of drivers when using driver monitoring systems
JP6627810B2 (ja) 運転モード切替制御装置、方法およびプログラム
JP4882420B2 (ja) 覚醒度推定装置及び方法
JP5688809B2 (ja) 運転者状態推定装置
JP2020103704A (ja) 情報処理装置及びプログラム
CN114074669B (zh) 信息处理装置、信息处理方法以及计算机可读存储介质
WO2018163536A1 (ja) 運転者身体コンディション回復支援装置、方法およびプログラム
JP7501658B2 (ja) 車両制御装置、車両制御方法及びプログラム
JP5688810B2 (ja) 運転者状態推定装置
JP2024141440A (ja) 情報処理システム、及び、情報処理方法