JP2017109708A - Vehicle travel support device - Google Patents
Vehicle travel support device Download PDFInfo
- Publication number
- JP2017109708A JP2017109708A JP2015247773A JP2015247773A JP2017109708A JP 2017109708 A JP2017109708 A JP 2017109708A JP 2015247773 A JP2015247773 A JP 2015247773A JP 2015247773 A JP2015247773 A JP 2015247773A JP 2017109708 A JP2017109708 A JP 2017109708A
- Authority
- JP
- Japan
- Prior art keywords
- state
- unit
- emotion
- occupant
- travel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本発明は、車両走行支援装置に関する。 The present invention relates to a vehicle travel support device.
運転者の感情を認識し、認識された感情に基づき運転者が操作する機器を制御する車両の運転支援装置が提案されている(例えば特許文献1)。 There has been proposed a vehicle driving assistance device that recognizes a driver's emotion and controls a device operated by the driver based on the recognized emotion (for example, Patent Document 1).
特許文献1では、運転者の感情を認識し、認識された感情に基づき運転者が操作する機器の特性を制御しているが、運転者の感情の変化が、車両がどのような状態の時、すなわち、どのような走行状態の時のものなのか、感情変化の要因を特定し、その変化の要因となった機器の特性を制御するものでない。
本発明は、乗員の感情変化の要因となり得る特定の走行状態での感情情報に応じて、特定された走行状態を制御することで、乗員の感情に対応した運転支援を可能にする。
In Patent Document 1, the driver's emotion is recognized, and the characteristics of the device operated by the driver are controlled based on the recognized emotion. However, when the driver's emotion changes, That is, it does not control the characteristics of the equipment that causes the change of emotion by identifying the cause of the emotion change in what kind of running state it is.
The present invention enables driving support corresponding to an occupant's emotion by controlling the identified traveling state according to emotion information in a specific traveling state that may cause a change in the occupant's emotion.
本発明に係る車両の運転支援装置は、車両の走行情報を検出する走行情報検出部と、走行情報検出部で検出された走行情報に基づき走行状態を特定する走行状態特定部と、走行状態特定部で特定された走行状態の際の乗員の感情を認識する感情認識部と、感情認識部での認識結果に応じた走行状態に制御する制御部を備えることを特徴としている。 A driving support apparatus for a vehicle according to the present invention includes a driving information detection unit that detects driving information of a vehicle, a driving state specification unit that specifies a driving state based on driving information detected by the driving information detection unit, and a driving state specification. An emotion recognition unit for recognizing an occupant's emotion in the running state specified by the unit and a control unit for controlling the running state according to the recognition result in the emotion recognition unit are provided.
本発明によれば、走行状態特定部で特定された乗員の感情変化の要因となり得る走行状態の乗員の感情の認識結果に応じて、感情認識した際の走行状態に制御するので、乗員の感情に対応した運転支援を可能にすることができる。 According to the present invention, since the control is performed to the traveling state when the emotion is recognized according to the recognition result of the passenger's emotion in the traveling state that can be a factor of the passenger's emotion change specified by the traveling state specifying unit, It is possible to provide driving support corresponding to.
以下、本発明の実施形態について図面を用いて説明する。実施形態中、同一部材や同一の機能を有する部材には同一の符号を付し、重複説明は省略する。
本実施形態に係る車両運転支援装置1は、車両1に搭載されている。車両運転支援装置1が搭載される車両1としては、内燃機関を走行駆動源とするもの、モータを走行駆動源とするもの、内燃機関とモータを備え、少なくとも一方が走行駆動源となる何れであってもよい。車両1としては、運転者が自らステアリング、アクセルペダル、ブレーキペダルなどの走行状態を変化させる操作部を操作することで走行状態を制御するための機器を制御するアクチュエータを作動して運転走行するものや、ステアリング操作、車速の加減速、ブレーキ作動等の各アクチュエータを、車両の走行情報に応じて適宜制御部が制御して自律走行させる自動運転可能なものでもよい。
Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the embodiments, the same members and members having the same functions are denoted by the same reference numerals, and redundant description is omitted.
A vehicle driving support device 1 according to the present embodiment is mounted on a vehicle 1. The vehicle 1 on which the vehicle driving support device 1 is mounted includes any one that uses an internal combustion engine as a travel drive source, one that uses a motor as a travel drive source, and includes an internal combustion engine and a motor, at least one of which serves as a travel drive source. There may be. As the vehicle 1, the driver operates and operates an actuator that controls a device for controlling the traveling state by operating an operation unit that changes the traveling state such as a steering, an accelerator pedal, and a brake pedal. Alternatively, it may be capable of automatic driving in which each actuator such as steering operation, acceleration / deceleration of vehicle speed, and brake operation is autonomously driven by the control unit appropriately controlled according to the vehicle travel information.
図1に示すように、車両運転支援装置1は、車両1の走行情報を検出する走行情報検出部11と、走行情報検出部11で検出された走行情報に基づき走行状態を特定する走行状態特定部12と、走行状態と、走行状態を変化させる強度レベルが予め設定された記憶部13と、走行状態特定部で特定された走行状態の際の乗員の感情を認識する感情認識部14と、制御部30を備える。
制御部30は、CPU31、RAM32、ROM33を備えたコンピュータで構成されていて、走行情報検出部11、走行状態特定部12、記憶部13、感情認識部14が信号線を介して接続されている。制御部30は、感情認識部14での認識結果に応じて(基づき)、感情認識した際の走行状態を制御する。制御部30による走行状態を制御するに際し、走行状態特定部12は、走行情報検出部11で検出された走行状態に該当する走行状態を、記憶部13に設定された走行状態から特定する。そして、制御部30は、感情認識部14での認識結果に応じて、感情認識した際の走行状態を制御する。
As shown in FIG. 1, the vehicle driving support device 1 includes a travel
The
このような構成であると、走行状態特定部12で特定された乗員の感情変化の要因となり得る走行状態の乗員の感情の認識結果に応じて、感情認識した際の走行状態に制御することができるため、乗員の感情に対応した運転支援を可能にすることができる。
With such a configuration, it is possible to control the traveling state when the emotion is recognized according to the recognition result of the passenger's emotion in the traveling state that can be a factor of the passenger's emotion change specified by the traveling
次に車両運転支援装置1について詳細に説明する。
車両1の走行情報とは、例えば車速情報V、加速情報K、減速情報G、旋回情報Pである。車速情報Vは、例えば車両1の車輪の回転速度などから車速情報を検出する車速検出センサ111から取得する情報である。加速情報Kは、車両1の加速度の情報を検出する加速度検出センサ112から取得する情報である。減速情報Gは、車両1の減速度の情報を検出する減速度検出センサ113から取得する情報である。減速情報Gは、ブレーキペダルの踏込み量の情報や踏込み速度情報をセンサで検出したものであっても良い。あるいは車両1に搭載されている油圧ブレーキ装置のブレーキラインの油圧情報を油圧センサで検出したものであっても良い。旋回情報P1は、車両1の操作部であり操舵部であるステアリングの回転量や回転角速度の情報を検出する旋回情報検出センサ114から取得する情報である。つまり、本実施形態において、走行情報検出部11としては、車速検出センサ111、加速度検出センサ112、減速度検出センサ113、旋回情報検出センサ114が挙げられる、これらは車両1に搭載されている。
Next, the vehicle driving support device 1 will be described in detail.
The traveling information of the vehicle 1 is, for example, vehicle speed information V, acceleration information K, deceleration information G, and turning information P. The vehicle speed information V is information acquired from a vehicle
走行状態特定部12は、走行情報検出部11である車速検出センサ111、加速度検出センサ112、減速度検出センサ113、旋回情報検出センサ114からの検出情報から推定される走行状態が、記憶部13に設定されている走行状態に該当するか否かを判定し、該当する場合には、該当した走行状態を特定するものである。ここでは車両1が加速状態か、減速状態か、旋回状態であるか、高速走行状態であるかを判定して特定する。走行状態は走行シーンともいう。
The traveling
記憶部13は、例えばデータテーブルが記憶された記憶装置(データベース)で構成されている。記憶部13には、図2に示すように、加速情報K、減速情報G、旋回情報P、車速情報Vと、感情認識するための車両の走行状態(走行シーン)とが関連付けて記憶されていると共の、各走行状態を変化させる強度レベルとが記憶されている。走行状態としては、加速情報Kと関連付けられた加速状態、減速情報Gと関連付けられた減速状態、旋回情報Pと関連付けられた旋回状態、車速情報Vと関連付けられた高速状態である。これら走行状態は例示に過ぎず、他の走行状態であっても良い。この場合、その走行状態を特定するための情報を検出する検出部を走行情報検出部11とすればよい。
本実施形態において、各走行状態を調整する各強度レベルは、それぞれレベル1〜レベル5までの5段階として設定可能とされている。無論、走行状態毎に強度レベルの段階を違えて設定しても良く、5段階に限定するものでもない。強度レベルは、レベル5からレベル1に向かうに従い、走行状態を弱める(低下)させるように設定されている。逆に言えば、強度レベルは、レベル1からレベル5に向かうに従い、走行状態を強める(上昇させる)ように設定されている。強度レベルは、車両1の速度、加速度、減速度、旋回の各状態をコントロールするアクチュエータを制御する制御値でもある。
The
In the present embodiment, each strength level for adjusting each traveling state can be set in five stages from level 1 to level 5 respectively. Of course, the strength level may be set differently for each traveling state, and the strength level is not limited to five. The intensity level is set so as to weaken (decrease) the running state as it goes from level 5 to level 1. In other words, the strength level is set so as to increase (increase) the running state as it goes from level 1 to level 5. The intensity level is also a control value that controls an actuator that controls each state of the speed, acceleration, deceleration, and turning of the vehicle 1.
図3は、走行状態と強度レベルの設定内容を示した図である。
走行状態が加速状態の時の、強度レベルがレベル1とは、緩やかに加速(弱い)が行えるアクセル開度とするようにスロットル弁の開度を調整する制御値であり、強度レベルがレベル5とは、速い加速度(強い)が行えるアクセル開度となるようにスロットル弁の開度を調整する制御値である。
走行状態が減速状態の時の、強度レベルがレベル1とは、緩やかに制動(弱い)が行えるブレーキ油圧を発生させる制御値であり、強度レベルがレベル5とは、強い制動が行えるブレーキ油圧を発生させる制御値である。
走行状態が旋回状態の時の、強度レベルがレベル1とは、緩やかな旋回が行えるステアリン操作とするようにパワーステアリングの舵角を制御する油圧を調整する制御値であり、強度レベルがレベル5とは、素早い旋回が行えるステアリン操作とするようにパワーステアリングの舵角を制御する油圧を調整する制御値である。
走行状態が高速走行状態の時の、強度レベルがレベル1とは、車速を低下させる方向(ゆっくり)にスロットル弁の開度を調整する制御値であり、走行シーンが高速状態の強度レベルがレベル5とは、車速を上昇させる方向(速い)にスロットル弁の開度を調整する制御値である。
FIG. 3 is a diagram showing the setting contents of the running state and the strength level.
When the running state is the acceleration state, the strength level is level 1, which is a control value for adjusting the throttle valve opening so that the accelerator opening can be gradually accelerated (weak), and the strength level is level 5. Is a control value that adjusts the opening of the throttle valve so as to achieve an accelerator opening that allows fast acceleration (strong).
When the running state is a deceleration state, the strength level is level 1 is a control value that generates a brake hydraulic pressure that can be gently braked (weak), and the strength level is level 5 that is a brake hydraulic pressure that can be strongly braked. Control value to be generated.
When the traveling state is the turning state, the strength level is level 1, which is a control value for adjusting the hydraulic pressure for controlling the steering angle of the power steering so that the steering operation can be performed gently, and the strength level is level 5. Is a control value that adjusts the hydraulic pressure that controls the steering angle of the power steering so that the steer operation can be performed quickly.
When the driving state is a high-speed driving state, the intensity level is level 1 is a control value for adjusting the opening of the throttle valve in the direction of slowing down the vehicle speed (slowly). 5 is a control value for adjusting the opening of the throttle valve in the direction of increasing the vehicle speed (fast).
感情認識部14は、例えば乗員の表情の変化から乗員の感情を認識する周知の感情認識装置であっても良いし、乗員の発する言葉の種類や大きさ、音声の抑揚などから乗員の感情を認識する音声による周知の感情認識装置であっても良い。
これら感情認識部14としては、少なくとも乗員の表情や音声などの乗員の基礎情報を検出して取得する取得部141としてカメラやマイクを備えているとともに、カメラで撮影された表情や、マイクで入力された音声などの基礎情報から感情を認識するための感情認識エンジン142を備えている。感情認識エンジン142としては、例えば予め特定の感情の際の表情の画像データや音声データを感情毎に記憶しておき、入力された基礎情報である表情の画像データや音声のデータと、記憶されている各データとを比較することで感情を認識するようにするもので、既に公知のものである。本実施形態において、感情認識部14では、乗員の感情として驚きと恐れを認識するものとする。感情認識部14は、驚きや恐れを認識した場合には、感情認識信号Sを制御部30に対して送信する機能を備えている。
The
The
制御部30は、感情認識部14で認識された感情に応じて、記憶部13に設定されている強度レベルを調整する。すなわち、感情を認識された際の走行状態での強度レベルを感情に応じて更新あるいは維持するようにして調整する。具体的には、車両1の特定された走行状態におけて乗員の感情が変化した場合、すなわち、制御部30は、感情認識部14で乗員の驚きや恐れが認識されて感情認識信号Sが出力されると、その感情認識信号Sが出力された走行シーンに関与するアクチュエータの作動を制御する強度レベルを増減制御する。
The
(第1の実施形態)
車両運転支援装置1による制御の一形態を図4に示すフローチャートを基に説明する。
本実施形態では、乗員を車両1の運転者として説明する。また、感情認識部14としては、運転者の表情による感情認識装置を用いるものとする。このため、感情認識部14は、取得部141となるカメラを備え、運転席に座って運転姿勢をしている(正面を見ている)運転者の顔全体を撮影できる位置に設置されているものとする。なお、車両1は既に走行を開始しているものとする。
車両運転支援装置1は、ステップST1において、走行情報検出部11で車両1の走行情報を検出し、ステップST2に進む。ステップST2では、走行状態特定部12において、走行情報検出部11で検出された走行情報と記憶部13内の走行状態とを参照し、ステップST3において、検出された走行情報に対応する走行状態が記憶部13に設定されている走行状態であるか否かを判定する。すなわち、現在の走行状態が感情認識する走行状態であるか否かを特定してステップST4に進む。ステップST4では、感情認識部14による運転者の感情認識が行われ、ステップST5において、感情認識結果に応じて、感情認識した走行状態(走行シーン)の強度レベルを制御する。
(First embodiment)
One form of control by the vehicle driving assistance device 1 will be described based on the flowchart shown in FIG.
In this embodiment, an occupant will be described as a driver of the vehicle 1. In addition, as the
In step ST1, the vehicle driving support device 1 detects the travel information of the vehicle 1 by the travel
例えば、検出された走行状態が加速状態であった場合、当該加速状態は記憶部13に強度レベルと関連つけて設定されているので、感情認識する走行状態であり、この時の記憶部13に設定されている強度レベルがレベル3であったとする。そして、感情認識部14で認識された運転者の感情が、驚きや恐れを示す場合には、感情認識部14から感情認識信号Sが出力される。これにより、制御部30は、運転者の感情変化は、現在の走行状態(加速状態)を要因としたものであると見做し、現在よりも緩やかな加速状態となるレベル2へと強度レベルを変更して、この制御を終える。
For example, when the detected driving state is the acceleration state, the acceleration state is set in the
このような制御が、車両1が走行していて、特定の走行状態の際には、感情認識部14による運転者の感情認識がなされる。このため、レベル2へと強度レベルが変更(更新)されて調整された場合、次の制御サイクルに入って走行状態が加速状態を示す場合、前回の加速状態よりも緩やかな加速状態となっている。ここで、再度、感情認識部14で運転者の感情認識をして乗員の感情を認識する。そして、感情認識する走行状態(走行シーン)ではあるが、感情認識部14で認識された運転者の感情が、驚きや恐れを示さない場合、感情認識部14から感情認識信号Sは出力されない。このため、制御部30は、現在の走行状態は、運転者が驚きや恐れを感じない適切な走行状態(加速状態)であると見做し、強度レベルは変更しないで、この制御を終える。
このように、感情変化の要因となり得る走行状態での運転者の感情の認識結果に応じて、感情認識した際の走行状態を制御するので、運転者の感情に対応した運転支援を可能にすることができ、予防安全にも貢献することができる。
Such control is performed when the vehicle 1 is traveling and in a specific traveling state, the
In this way, the driving state when the emotion is recognized is controlled according to the recognition result of the driver's emotion in the driving state that can be a factor of emotion change, thus enabling driving support corresponding to the driver's emotion. Can also contribute to preventive safety.
なお、本実施形態において、感情認識する走行状態ではあるが、感情認識部14で認識された運転者の感情が、驚きや恐れを示さない場合、強度レベルは変更(更新)されない(調整されない)ため、このような状態が続くことは安定した運転を行えるので好ましい。しかし、場合によっては、単調で変化のない運転にもなり得る。このため、感情認識する走行状態の際の、感情認識部14で認識された運転者の感情として、驚きや恐れを示さない回数が複数回連続して検出された場合には、その走行状態における強度レベルを高める方向に変更(更新)する(調整する)ようにしても良い。この場合には、単調な走行状態での運転を防止することで、眠気などの抑止につながることが期待でき、予防安全に貢献することができる。また、感情の変化に応じて強度レベルが変更(更新)して調整されるため、使うほどに運転者の感情にマッチした運転支援を行うことができ、ドライバビリティ―の向上につながる。
In the present embodiment, although the driving state recognizes the emotion but the driver's emotion recognized by the
(第2の実施形態)
本実施形態は、車両1に乗員が複数いた場合、例えば運転者と助手席に同乗者がいる場合を想定したもので、特定された走行状態における運転者と助手席同乗者の双方の感情を認識し、認識された感情の内、より感情の変化の強い方に合わせて強度レベルを変更しようとするものである。このため、本実施形態に係る車両運転支援装置1Aは、図5に示すように、運転者と助手席同乗者の表情を認識するために、取得部141として運転席側と助手席側とにそれぞれカメラを複数設置している。本実施形態において、感情認識部14で認識される乗員は、車両1の運転者と同乗者である。
(Second Embodiment)
In the present embodiment, when there are a plurality of passengers in the vehicle 1, for example, it is assumed that there are passengers in the driver and the passenger seat, and the emotions of both the driver and the passenger in the specified driving state are expressed. Recognize and try to change the intensity level in accordance with the emotion that has been recognized. For this reason, as shown in FIG. 5, the vehicle driving support apparatus 1A according to the present embodiment provides an
車両運転支援装置1Aによる制御の一形態を図6に示すフローチャートを基に説明する。
車両1は既に走行を開始しているものとする。また、第1の実施形態と同様の内容のステップについては、その説明を簡略あるいは省略するものとする。
車両運転支援装置1Aは、ステップST21において、走行情報検出部11で車両1の走行情報を検出し、ステップST22、ステップST23において、走行状態特定部12で、現在の走行状態が感情認識する走行状態であるか否かを特定してステップST24に進む。
ステップST24では、双方のカメラで撮影した運転者と助手席同乗者の表情から感情を認識が行われ、ステップST25において、感情認識結果に応じて、感情認識した走行状態での強度レベルを制御する。
One form of control by the vehicle driving assistance device 1A will be described based on the flowchart shown in FIG.
It is assumed that the vehicle 1 has already started traveling. The description of steps having the same contents as those in the first embodiment will be simplified or omitted.
In step ST21, the vehicle driving support device 1A detects the travel information of the vehicle 1 by the travel
In step ST24, emotions are recognized from the facial expressions of the driver and passenger seated by both cameras, and in step ST25, the intensity level in the running state in which emotions are recognized is controlled according to the emotion recognition results. .
例えば、検出された走行状態が減速状態であったち場合、当該減速状態は記憶部13に強度レベルと関連付けて設定されているので、感情認識する走行状態であり、この時の記憶部13に設定されている強度レベルがレベル3であったとする。そして、感情認識部14で認識された運転者と助手席同乗者うち、何れか一方から驚きや恐れを示す感情が認識された場合には、感情認識部14から感情認識信号Sが出力される。これにより、制御部30は、運転者又は同乗者の感情変化は、現在の走行状態(減速状態)を要因としたものであると見做し、現在よりも緩やかな減速状態となるレベル2へと強度レベルを変更して、この制御を終える。つまり、本実施形態において、制御部30は、感情認識部14でそれぞれ認識された感情結果の内、もっとも感情変化の大きな認識結果に応じて、感情認識した際の走行状態での強度レベルを調整するように制御する。
For example, if the detected traveling state is a deceleration state, the deceleration state is set in the
このような制御が、車両1が走行していて、特定の走行状態の際には、感情認識部14による運転者の感情認識がなされる。このため、レベル2へと強度レベルが変更(更新)して調整された場合、次の制御サイクルに入って走行状態が減速状態を示す場合、前回の減速状態よりも緩やかな減速状態となっている。ここで、再度、感情認識部14で運転者の感情認識をして乗員の感情を認識する。そして、感情認識する走行状態ではあるが、感情認識部14で認識された運転者や助手席同乗者の感情が、驚きや恐れを示さない場合、感情認識部14から感情認識信号Sは出力ない。このため、制御部30は、現在の走行状態は、運転者が驚きや恐れを感じない適切な走行状態(減速状態)であると見做し、強度レベルは変更しないで、この制御を終える。
Such control is performed when the vehicle 1 is traveling and in a specific traveling state, the
このように、感情変化の要因となり得る走行状態において、乗員として運転者だけでなく同乗者の感情の認識結果を考慮し、乗員が驚きや恐れを感じた走行状態を制御するので、運転者ばかりでなく助手席同乗者の感情に対応した運転支援を可能にすることができ、予防安全にも貢献することができる。
車両1が運転者の操作によって走行している場合、運転者は、自らの判断でブレーキ操作、アクセル操作、ステアリング操作をするので、車両1の走行状態(挙動変化)に対しては、ある程度の予測がつくので驚きや恐怖の感情が出難い。これに対し、同乗者、特に助手席同乗者は、運転者がいつブレーキ操作やアクセル操作等をするか予測がつき難く、車両1の走行状態(挙動変化)が予期しないで起こるため、驚きや恐怖の感情が出易いと考えられる。また予想がついたとしても、自分が想像する操作タイミングや操作度合とは異なっていると、視覚的な情報から驚きや恐怖を抱きやすいとも考えられる。このような場合、車両1の同乗者の中で驚きや恐怖の感情を出した者を基準に走行状態が穏やかになる方向に制御されるので、同乗者に配慮した運転支援を可能にすることができる。
In this way, in driving conditions that can cause emotional changes, not only the driver but also the passenger's emotion recognition results are taken into account, and the driving state in which the passenger feels surprise and fear is controlled. In addition, driving assistance corresponding to the passenger's passenger's feelings can be made possible, which can contribute to preventive safety.
When the vehicle 1 is traveling by the driver's operation, the driver performs a brake operation, an accelerator operation, and a steering operation at his / her own judgment. Prediction is so difficult to be surprised or scared. On the other hand, passengers, especially passengers in the passenger seat, are difficult to predict when the driver will operate the brake or accelerator, and the driving state (behavior change) of the vehicle 1 occurs unexpectedly. It is thought that the feeling of fear is easy to come out. Even if an expectation is made, it is thought that it is easy to have surprises and fears from the visual information if it is different from the operation timing and the degree of operation imagined by me. In such a case, the driving state is controlled in a direction that makes the driving state calmer with respect to the passengers who are surprised or feared among the passengers of the vehicle 1, so that driving assistance in consideration of the passengers is made possible. Can do.
さらに、車両1が自動運転で操作されている場合、同乗者ばかりでなく、運転者も自分が操作する場合と自動運転時の操作タイミングや操作度合が異なっていると、驚きや恐怖を抱きやすいと考えられる。よって、車両1の同乗者の中で恐怖の感情を出した者を基準に走行状態が穏やかになる方向に制御されることは、自動運転時においても運転者や同乗者に配慮した運転支援を可能にすることができる。 Furthermore, when the vehicle 1 is operated by automatic driving, not only the passenger but also the driver is likely to be surprised and frightened if the operation timing and the operating level at the time of automatic driving differ from the case where the driver operates himself / herself. it is conceivable that. Therefore, the control in such a direction that the running state becomes calm with respect to the person who gives fear feeling among the passengers of the vehicle 1 provides driving assistance in consideration of the driver and passengers even during the automatic driving. Can be possible.
(第3の実施形態)
上記実施形態では、車両1の乗員を運転者と同乗者とに大別し、それぞれの感情を感情認識部14で認識するようにした。この場合、同一の乗員だけ車両1に乗車して運転するのであれば、感情学習は進み、乗員の感情にマッチした運転支援が可能となる。しかし、別の乗員が車両1に乗車した場合、別な乗員の感情に応じた走行状態での強度レベルは設定されていない。このため、乗員が入れ替わる度に、それぞれ異なる乗員の感情に応じた運転支援がなされるため、乗員の感情にマッチした運転支援までには時間を要してしまう。
(Third embodiment)
In the above embodiment, the occupant of the vehicle 1 is roughly divided into a driver and a passenger, and each emotion is recognized by the
そこで、本実施形態に係る車両運転支援装置1Bでは、図7に示すように、感情認識部14によって感情を認識される乗員を、走行状態と強度レベルと関連付けて記憶部13に設定する乗員設定部16と、乗員設定部16で設定された乗員を選択する乗員選択部17を備えている。
そして、走行状態特定部12では、走行情報検出部11で検出された走行状態に該当する走行状態及び強度レベルを、乗員選択部17で選択された乗員の走行状態と強度レベルから特定し、制御部30は、乗員選択部17で選択された乗員に対する、感情認識部14での認識結果に応じて、感情認識した乗員の走行状態での強度レベルを調整するように制御するようにした。
Therefore, in the vehicle driving support device 1B according to the present embodiment, as shown in FIG. 7, the occupant setting in which the occupant whose emotion is recognized by the
Then, the traveling
本実施形態では、3人も乗員の情報が登録可能とされているものする。このため、乗員設定部16は、複数設けられたスイッチ16A、16B、16Cで構成されている。スイッチの数は3つに限定するものではなく、1つのスイッチの操作で切替えができるタイプのものであれば1つであっても良い。
スイッチ16A、16B、16Cは信号線を介して、制御部30に接続されていて、登録操作がなされると、乗員を登録したデータテーブルが記憶部13内に設定される。このデータテーブルには、第1の実施形態と同様に、感情認識するための車両の走行状態(走行シーン)と各走行状態を変化させる強度レベルとが記憶されている。
In the present embodiment, it is assumed that three passengers can register information. For this reason, the
The switches 16A, 16B, and 16C are connected to the
乗員選択部17は、記憶部13に登録された個人別のデータテーブルを読み出すためのスイッチであって、ここでは、スイッチ17A、17B、17Cで構成されている。スイッチの数は3つに限定するものではなく、1つのスイッチの操作で切替えができるタイプのものであれば1つであっても良い。スイッチ17A、17B、17Cは、信号線を介して制御部30に接続されていて、各スイッチが操作されると、スイッチごとに割れたてられた乗員のデータベースが選択されるように構成されている。
本実施形態では、スイッチ16Aで登録された乗員のデータテーブルは、スイッチ17Aを操作することで選択されて変更(更新)して調整可能とされている。スイッチ16Bで登録された乗員のデータテーブルは、スイッチ17Bを操作することで選択されて変更(更新)して調整可能とされ、スイッチ16Cで登録された乗員のデータテーブルは、スイッチ17Cを操作することで選択されて変更(更新)して調整可能とされている。また、登録された乗員は、運転者であるものとする。
The
In the present embodiment, the occupant data table registered by the switch 16A is selected and changed (updated) by operating the switch 17A and can be adjusted. The occupant data table registered with the switch 16B is selected and changed (updated) by adjusting the switch 17B, and can be adjusted. The occupant data table registered with the switch 16C operates the switch 17C. Can be adjusted by changing (updating). The registered occupant is assumed to be a driver.
車両運転支援装置1Bによる制御の一形態を図8に示すフローチャートを基に説明する。
第1の実施形態と同様の内容のステップについては、その説明を簡略あるいは省略するものとする。なお、乗員の登録は既にスイッチ16A〜16Cの登録操作によってそれぞれ設定が終了しているものとする。また車両1は既に走行を開始しているものとする。
車両運転支援装置1Bは、ステップST31において、登録乗員の識別を行なう。ここでは、スイッチ17A〜17Cの何加に対してスイッチ操作が行われると、スイッチ操作されたスイッチに対応した乗員のデータテーブルが選択される。
車両運転支援装置1Bは、ステップST32において、走行情報検出部11で車両1の走行情報を検出し、ステップST33、ステップST34において、現在の走行状態が感情認識する走行状態であるか否かを、走行情報と選択された個人のデータテーブルに記憶されている走行状態とから走行状態特定部12で特定してステップST35に進む。
ステップST35では、カメラで撮影した登録者である運転者表情から感情を認識が行われ、ステップST36において、感情認識結果に応じて、登録者のデータテーブル上に記憶されている感情認識した走行シーンでの強度レベルを制御(変更/更新)する。
One form of control by the vehicle driving assistance device 1B will be described based on the flowchart shown in FIG.
The description of steps having the same contents as in the first embodiment will be simplified or omitted. It is assumed that the occupant registration has already been completed by the registration operation of the switches 16A to 16C. Further, it is assumed that the vehicle 1 has already started traveling.
In step ST31, the vehicle driving support apparatus 1B identifies a registered occupant. Here, when a switch operation is performed on any of the switches 17A to 17C, an occupant data table corresponding to the switch operated is selected.
In step ST32, the vehicle driving support device 1B detects the travel information of the vehicle 1 by the travel
In step ST35, an emotion is recognized from the driver's facial expression as a registrant photographed by the camera. In step ST36, the emotion-recognized running scene stored on the registrant's data table is determined according to the emotion recognition result. Control (change / update) intensity level at.
このように本実施形態では、登録された乗員毎に走行状態に応じて変化した感情に対応して、強度レベルが調整されるので、登録されている乗員は、車両1に乗車して自らが登録されているスイッチ17A〜17Cの何れを操作することで、自らの感情にマッチした運転支援を運転当初から受けることができ、ドライバビリティ―の向上につながる。 As described above, in the present embodiment, the intensity level is adjusted corresponding to the emotion that changes according to the traveling state for each registered occupant, so that the registered occupant gets on the vehicle 1 and himself / herself By operating any of the registered switches 17A to 17C, it is possible to receive driving support that matches his / her feelings from the beginning of driving, leading to improved drivability.
以上、本発明の好ましい実施形態について説明したが、本発明は係る特定の実施形態に限定されるものではなく、上述の説明で特に限定していない限り、特許請求の範囲に記載された本発明の趣旨の範囲内において、種々の変形・変更が可能である。
例えば、車両1に乗車する乗員が複数の場合、運転者と助手席同乗者を例示したが、後部座席に乗車する同乗者の感情も認識するようにして、何れかの乗員の感情認識結果(驚きや恐れ)に基づき、強度レベルを変更して調整するようにしても良い。また、複数の乗員から同一の走行状態の際に、恐れと驚きの異なる感情認識がそれぞれ認識された場合、認識される感情に優先順位や重みづけをしておき、優先順位や重みづけの高い感情に基づいて強度レベルを制御(調整)するようにしても良い。
As mentioned above, although preferable embodiment of this invention was described, this invention is not limited to the specific embodiment which concerns, This invention as described in the claim unless it limited in particular by the above-mentioned description. Various modifications and changes are possible within the scope of the above.
For example, when there are a plurality of passengers who ride in the vehicle 1, the driver and the passenger on the passenger seat are illustrated, but the emotion recognition result of any one of the passengers can be recognized by recognizing the emotion of the passenger on the rear seat ( The intensity level may be changed and adjusted based on surprise or fear. Also, when different emotion recognitions of different fears and surprises are recognized by multiple passengers in the same driving state, priorities and weights are given to the recognized emotions, and the priorities and weights are high. The intensity level may be controlled (adjusted) based on the emotion.
本発明の実施の形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施の形態に記載されたものに限定されるものではない。 The effects described in the embodiments of the present invention are only the most preferable effects resulting from the present invention, and the effects of the present invention are limited to those described in the embodiments of the present invention. is not.
1・・・車両、10・・・車両運転支援装置、11・・・走行情報検出部、12・・・走行状態特定部、13・・・記憶部、14・・・感情認識部、16・・・乗員設定部、17・・・乗員選択部、30・・・制御部、141・・・取得部、G・・・走行情報(減速情報)、K・・・走行情報(加速情報)、P・・・走行情報(旋回情報)、V・・・走行情報(車速情報) DESCRIPTION OF SYMBOLS 1 ... Vehicle, 10 ... Vehicle driving assistance device, 11 ... Driving information detection part, 12 ... Driving state specific | specification part, 13 ... Memory | storage part, 14 ... Emotion recognition part, 16. .. occupant setting unit, 17 ... occupant selection unit, 30 ... control unit, 141 ... acquisition unit, G ... travel information (deceleration information), K ... travel information (acceleration information), P: Travel information (turning information), V: Travel information (vehicle speed information)
Claims (5)
前記走行情報検出部で検出された走行情報に基づき走行状態を特定する走行状態特定部と、
前記走行状態特定部で特定された走行状態の際の乗員の基礎情報を取得して、当該乗員の感情を認識する感情認識部と、
前記感情認識部での認識結果に応じた走行状態に制御する制御部を備えることを特徴とする車両運転支援装置。 A travel information detection unit for detecting travel information of the vehicle;
A driving state specifying unit for specifying a driving state based on the driving information detected by the driving information detection unit;
An emotion recognition unit that acquires basic information of an occupant in the traveling state specified by the traveling state identification unit, and recognizes the emotion of the occupant;
A vehicle driving support device comprising a control unit that controls a running state according to a recognition result in the emotion recognition unit.
前記走行状態特定部は、前記走行情報検出部で検出された走行状態に該当する走行状態を、前記設定部に設定された走行状態から特定し、
前記制御部は、前記感情認識部での認識結果に応じて、前記感情認識した際の走行状態に対応した強度レベルを調整するように制御することを特徴とする請求項1に記載の車両運転支援装置。 The driving state and a setting unit in which an intensity level for changing the driving state is set in advance,
The travel state identification unit identifies a travel state corresponding to the travel state detected by the travel information detection unit from the travel state set in the setting unit,
2. The vehicle driving according to claim 1, wherein the control unit performs control so as to adjust an intensity level corresponding to a running state when the emotion is recognized according to a recognition result in the emotion recognition unit. Support device.
前記制御部は、前記複数の取得部からの情報に基づき前記感情認識部でそれぞれ認識された感情結果に応じて、前記感情認識した際の走行状態での強度レベルを調整するように制御することを特徴とする請求項2に記載の車両運転支援装置。 The emotion recognition unit has a plurality of acquisition units for acquiring basic information of the occupant,
The control unit performs control so as to adjust an intensity level in a running state when the emotion is recognized according to an emotion result recognized by the emotion recognition unit based on information from the plurality of acquisition units. The vehicle driving support device according to claim 2, wherein:
前記設定部に設定された乗員を選択する乗員選択部を有し、
前記走行状態特定部は、前記走行情報検出部で検出された走行状態に該当する走行状態及び強度レベルを、前記乗員選択部で選択された乗員の走行状態と強度レベルから特定し、
前記制御部は、前記乗員選択部で選択された乗員に対する、前記感情認識部での認識結果に応じて、前記感情認識した乗員の走行状態の強度レベルを調整するように制御することを特徴とする請求項2に記載の車両運転支援装置。 An occupant whose emotion is recognized by the emotion recognition unit, an occupant setting unit that sets the setting unit in association with the running state and the strength level;
An occupant selection unit for selecting an occupant set in the setting unit;
The traveling state identification unit identifies a traveling state and an intensity level corresponding to the traveling state detected by the traveling information detection unit from a traveling state and an intensity level of the occupant selected by the occupant selection unit,
The control unit controls the occupant selected by the occupant selection unit to adjust the intensity level of the traveling state of the occupant who has recognized the emotion according to the recognition result of the emotion recognition unit. The vehicle driving support device according to claim 2.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015247773A JP2017109708A (en) | 2015-12-18 | 2015-12-18 | Vehicle travel support device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015247773A JP2017109708A (en) | 2015-12-18 | 2015-12-18 | Vehicle travel support device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017109708A true JP2017109708A (en) | 2017-06-22 |
Family
ID=59080391
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015247773A Pending JP2017109708A (en) | 2015-12-18 | 2015-12-18 | Vehicle travel support device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2017109708A (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019098779A (en) * | 2017-11-28 | 2019-06-24 | 株式会社Subaru | Driving advice device and driving advice method |
JP2019116214A (en) * | 2017-12-27 | 2019-07-18 | パイオニア株式会社 | Excitement degree determination device |
JP2019131147A (en) * | 2018-02-02 | 2019-08-08 | 本田技研工業株式会社 | Controller |
JP2020075586A (en) * | 2018-11-06 | 2020-05-21 | 日産自動車株式会社 | Drive support method and drive support device |
JP2020095538A (en) * | 2018-12-13 | 2020-06-18 | 本田技研工業株式会社 | Information processor and program |
WO2020250082A1 (en) * | 2019-06-14 | 2020-12-17 | 株式会社半導体エネルギー研究所 | Information processing device which performs actions depending on user's emotions |
CN113815625A (en) * | 2020-06-19 | 2021-12-21 | 广州汽车集团股份有限公司 | Vehicle auxiliary driving control method and device and intelligent steering wheel |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008062852A (en) * | 2006-09-08 | 2008-03-21 | Fujitsu Ten Ltd | Vehicle controller |
JP2008070966A (en) * | 2006-09-12 | 2008-03-27 | Fujitsu Ten Ltd | Vehicle control device and vehicle control method |
WO2013171970A1 (en) * | 2012-05-18 | 2013-11-21 | 日産自動車株式会社 | Travel assistance device for vehicle |
JP2015128989A (en) * | 2015-01-08 | 2015-07-16 | マツダ株式会社 | Driver emotion-based drive support device |
-
2015
- 2015-12-18 JP JP2015247773A patent/JP2017109708A/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008062852A (en) * | 2006-09-08 | 2008-03-21 | Fujitsu Ten Ltd | Vehicle controller |
JP2008070966A (en) * | 2006-09-12 | 2008-03-27 | Fujitsu Ten Ltd | Vehicle control device and vehicle control method |
WO2013171970A1 (en) * | 2012-05-18 | 2013-11-21 | 日産自動車株式会社 | Travel assistance device for vehicle |
JP2015128989A (en) * | 2015-01-08 | 2015-07-16 | マツダ株式会社 | Driver emotion-based drive support device |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019098779A (en) * | 2017-11-28 | 2019-06-24 | 株式会社Subaru | Driving advice device and driving advice method |
JP2019116214A (en) * | 2017-12-27 | 2019-07-18 | パイオニア株式会社 | Excitement degree determination device |
JP2022132318A (en) * | 2017-12-27 | 2022-09-08 | パイオニア株式会社 | Excitement degree determination device |
JP2019131147A (en) * | 2018-02-02 | 2019-08-08 | 本田技研工業株式会社 | Controller |
JP2020075586A (en) * | 2018-11-06 | 2020-05-21 | 日産自動車株式会社 | Drive support method and drive support device |
JP7429498B2 (en) | 2018-11-06 | 2024-02-08 | 日産自動車株式会社 | Driving support method and driving support device |
JP2020095538A (en) * | 2018-12-13 | 2020-06-18 | 本田技研工業株式会社 | Information processor and program |
WO2020250082A1 (en) * | 2019-06-14 | 2020-12-17 | 株式会社半導体エネルギー研究所 | Information processing device which performs actions depending on user's emotions |
CN113815625A (en) * | 2020-06-19 | 2021-12-21 | 广州汽车集团股份有限公司 | Vehicle auxiliary driving control method and device and intelligent steering wheel |
CN113815625B (en) * | 2020-06-19 | 2024-01-19 | 广州汽车集团股份有限公司 | Vehicle auxiliary driving control method and device and intelligent steering wheel |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2017109708A (en) | Vehicle travel support device | |
CN108688677B (en) | Vehicle driving support system and vehicle driving support method | |
CN108688676B (en) | Vehicle driving support system and vehicle driving support method | |
CN108688673B (en) | Vehicle driving support system | |
CN109835346B (en) | Driving advice device and driving advice method | |
CN109263645A (en) | For adjusting the method and system and motor vehicle of the operating parameter of motor vehicle | |
WO2019044427A1 (en) | Assist method, and assist system and assist device using same | |
CN108688675B (en) | Vehicle driving support system | |
US20180275652A1 (en) | Driving assistance device | |
WO2017168955A1 (en) | Automatic brake control device and computer program | |
JP6575933B2 (en) | Vehicle driving support system | |
JP7116540B2 (en) | Driving advice device and driving advice method | |
US20230143515A1 (en) | Driving assistance apparatus | |
JP7452726B2 (en) | Change operation support device | |
CN114228647A (en) | Vehicle control method, vehicle terminal and vehicle | |
JP2019008777A (en) | Driving support device, recording apparatus, driving support system, driving support method and program | |
JP2018169703A (en) | Vehicle driving support system and vehicle driving support method | |
CN111731319A (en) | Control system for vehicle and notification method in vehicle | |
CN110015300B (en) | Vehicle control device | |
CN113157080A (en) | Instruction input method for vehicle, storage medium, system and vehicle | |
JP7115062B2 (en) | vehicle controller | |
JP2018020590A (en) | Travel support system | |
JP2020010865A (en) | Driver state determining device and driver state determination method | |
JP7232094B2 (en) | VEHICLE CONTROL DEVICE, VEHICLE CONTROL METHOD AND PROGRAM | |
JP7376893B2 (en) | Vehicle braking control device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190903 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200303 |