JP2021012409A - On-vehicle system - Google Patents
On-vehicle system Download PDFInfo
- Publication number
- JP2021012409A JP2021012409A JP2019124510A JP2019124510A JP2021012409A JP 2021012409 A JP2021012409 A JP 2021012409A JP 2019124510 A JP2019124510 A JP 2019124510A JP 2019124510 A JP2019124510 A JP 2019124510A JP 2021012409 A JP2021012409 A JP 2021012409A
- Authority
- JP
- Japan
- Prior art keywords
- occupant
- stimulus
- vehicle system
- state
- mental
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本開示は、車両の乗員に複数の刺激を与えるための処理を行う車載システムに関する。 The present disclosure relates to an in-vehicle system that performs processing for giving a plurality of stimuli to a vehicle occupant.
乗員の居眠りを防止する装置が知られている。特許文献1には、検知装置が検知した乗員の状態に基づいて、乗員の眠気レベル及び心理状態が推定され、該推定の結果に基づいて、注意を喚起するための警報を乗員に対して発する装置が開示されている。また、該装置では、警報の前後における乗員の心理状態が推定され、該推定の結果に基づいて、警報の方法や強さが調整される。 Devices that prevent occupants from falling asleep are known. In Patent Document 1, the drowsiness level and psychological state of the occupant are estimated based on the occupant's condition detected by the detection device, and an alarm for calling attention is issued to the occupant based on the estimation result. The device is disclosed. Further, in the device, the psychological state of the occupant before and after the alarm is estimated, and the method and intensity of the alarm are adjusted based on the estimation result.
ここで、特許文献1に記載の装置においては、覚醒度及び快適度を指標として用いて乗員の心理状態が推定される。そして、該装置は、乗員の心理状態の推定の結果に応じて、複数の警報の中から乗員に対して発する警報を選択する。しかしながら、選択された警報が乗員に発せられた際に、乗員の心理状態を示す各指標がどの程度変化するのかについては把握されていなかった。そのため、乗員にとって、不快な警報が何回も発せられたり、最適の心理状態に至らなかったりする場合があった。 Here, in the device described in Patent Document 1, the psychological state of the occupant is estimated using the arousal level and the comfort level as indexes. Then, the device selects an alarm to be issued to the occupant from a plurality of alarms according to the result of estimating the psychological state of the occupant. However, it was not known how much each index indicating the occupant's psychological state would change when the selected alarm was issued to the occupant. Therefore, the occupant may be issued an unpleasant alarm many times or may not reach the optimum psychological state.
本開示の1つの局面は、乗員の状態を好適に改善する技術を提供する。 One aspect of the present disclosure provides a technique for suitably improving the condition of an occupant.
本開示の一態様は、車両の乗員に複数の刺激を与えるための処理を行うように構成された車載システム(100)であって、検出部(2,3)と、推定部(S210)と、選択部(S220)と、処理部(S230)と、を備える。検出部は、乗員の状態を検出する。推定部は、乗員の状態に基づいて、乗員の心身状態を示す複数の指標の値を推定する。選択部は、複数の刺激の各々に対応する感情ベクトル(7)と、推定部により推定された複数の指標の値とに基づいて、複数の刺激の中から、乗員に与えられる少なくとも1つの刺激を選択する。感情ベクトルは、乗員に対して当該感情ベクトルに対応する刺激が与えられた際に、乗員の心身状態を示す複数の指標の各々の値がどの程度変化するのかを示す。処理部は、選択部により選択された少なくとも1つの刺激を乗員に与えるための処理を行う。 One aspect of the present disclosure is an in-vehicle system (100) configured to perform processing for giving a plurality of stimuli to a vehicle occupant, and includes a detection unit (2, 3) and an estimation unit (S210). A selection unit (S220) and a processing unit (S230) are provided. The detection unit detects the state of the occupant. The estimation unit estimates the values of a plurality of indicators indicating the physical and mental condition of the occupant based on the condition of the occupant. The selection unit selects at least one stimulus given to the occupant from among the plurality of stimuli based on the emotional vector (7) corresponding to each of the plurality of stimuli and the values of the plurality of indexes estimated by the estimation unit. Select. The emotional vector indicates how much the value of each of the plurality of indicators indicating the physical and mental state of the occupant changes when the occupant is given a stimulus corresponding to the emotional vector. The processing unit performs processing for giving the occupant at least one stimulus selected by the selection unit.
このような構成によれば、車載システムは、乗員の心身状態を示す複数の指標の値の推定結果、及び、各刺激に対応する感情ベクトルに基づいて、乗員に与えられる少なくとも1つの刺激を選択する。そのため、車載システムは、選択された各々の刺激が乗員に与えられた際に、複数の指標の各々の値がどの程度変化するのかを予め把握できる。これにより、乗員に不適切な刺激等が与えられることを抑制できるため、乗員の状態を好適に改善できる。 According to such a configuration, the in-vehicle system selects at least one stimulus given to the occupant based on the estimation result of the values of a plurality of indicators indicating the mental and physical condition of the occupant and the emotional vector corresponding to each stimulus. To do. Therefore, the in-vehicle system can grasp in advance how much each value of the plurality of indicators changes when each selected stimulus is given to the occupant. As a result, it is possible to prevent the occupant from being given an inappropriate stimulus or the like, so that the condition of the occupant can be suitably improved.
なお、この欄及び請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本開示の技術的範囲を限定するものではない。 In addition, the reference numerals in parentheses described in this column and the scope of claims indicate the correspondence with the specific means described in the embodiment described later as one embodiment, and limit the technical scope of the present disclosure. It is not something to do.
以下、図面を参照しながら、本開示の実施形態を説明する。
[1.構成]
図1に示す車載システム100は、車両に搭載され、改善装置1、カメラ2、心拍センサ3を備える。以後、車載システム100が搭載された車両を、自車両と記載する。カメラ2及び心拍センサ3は、車内LAN又は専用の通信ラインを介して、改善装置1に接続されている。なお、カメラ2及び心拍センサ3は、改善装置1の一部として構成されていても良い。また、改善装置1には、車内LAN又は専用の通信ラインを介して、自動運転制御装置4、表示装置51、空調装置52、振動装置53、香り発生装置54、及び、対話部55が接続されていても良い。なお、車内LANとは、例えば、CAN(登録商標)であっても良い。
Hereinafter, embodiments of the present disclosure will be described with reference to the drawings.
[1. Constitution]
The in-vehicle system 100 shown in FIG. 1 is mounted on a vehicle and includes an improvement device 1, a camera 2, and a heart rate sensor 3. Hereinafter, the vehicle equipped with the in-vehicle system 100 will be referred to as the own vehicle. The camera 2 and the heart rate sensor 3 are connected to the improvement device 1 via an in-vehicle LAN or a dedicated communication line. The camera 2 and the heart rate sensor 3 may be configured as a part of the improvement device 1. Further, the automatic operation control device 4, the display device 51, the air conditioner 52, the vibration device 53, the scent generator 54, and the dialogue unit 55 are connected to the improvement device 1 via an in-vehicle LAN or a dedicated communication line. You may be. The in-vehicle LAN may be, for example, CAN (registered trademark).
カメラ2は、自車両の乗員の身体を撮影し、撮影データを改善装置1に出力する。なお、乗員とは、運転手であっても良いし、助手席又は後部座席に着席している者であっても良い。カメラ2は、乗員の身体の一部(例えば、乗員の顔)を撮影しても良いし、乗員の全身(例えば、乗員の姿勢)を撮影しても良い。 The camera 2 photographs the body of the occupant of the own vehicle and outputs the captured data to the improvement device 1. The occupant may be a driver, or may be a person seated in the passenger seat or the rear seat. The camera 2 may capture a part of the occupant's body (for example, the occupant's face) or the entire occupant's body (for example, the occupant's posture).
心拍センサ3は、乗員の心拍数を計測し、計測データを改善装置1に出力する。
自動運転制御装置4は、自車両の加減速及び操舵等の全部又は一部を自動で制御する自動運転制御を行う。自動運転制御により、運転手による運転操作の全部又は一部が不要となる。自動運転制御装置4は、自動運転レベルに応じた範囲で、自車両の加減速及び操舵等を制御する。自動運転レベルが高くなるに従い、自動運転制御装置4による自車両の加減速及び操舵等の制御の度合いが高まる。自動運転レベルが最も高い場合、自動運転制御装置4は、加減速及び操舵等を完全に制御する。
The heart rate sensor 3 measures the heart rate of the occupant and outputs the measurement data to the improvement device 1.
The automatic driving control device 4 performs automatic driving control that automatically controls all or part of acceleration / deceleration and steering of the own vehicle. The automatic driving control eliminates the need for all or part of the driving operation by the driver. The automatic driving control device 4 controls acceleration / deceleration, steering, and the like of the own vehicle within a range corresponding to the automatic driving level. As the automatic driving level increases, the degree of control such as acceleration / deceleration and steering of the own vehicle by the automatic driving control device 4 increases. When the automatic driving level is the highest, the automatic driving control device 4 completely controls acceleration / deceleration, steering, and the like.
表示装置51は、乗員の前方に画像や文字を表示したり、乗員に対して光を発したりする。表示装置51は、例えば、メータ、センターディスプレイ、ヘッドアップディスプレイ、及び照明装置として構成されている。 The display device 51 displays an image or characters in front of the occupant, or emits light to the occupant. The display device 51 is configured as, for example, a meter, a center display, a head-up display, and a lighting device.
空調装置52は、乗員に対して、冷風又は温風を送風する。空調装置52は、一例として、エアコンディショナーとして構成されている。
振動装置53は、乗員の身体の一部を押圧したり、振動させたりする。振動装置53は、例えば、乗員のシート、シートベルト、ステアリング、フットレスト、ウェアラブル機器等に取り付けられ、乗員の触覚を刺激するように構成されている。
The air conditioner 52 blows cold air or hot air to the occupants. The air conditioner 52 is configured as an air conditioner as an example.
The vibrating device 53 presses or vibrates a part of the occupant's body. The vibrating device 53 is attached to, for example, an occupant's seat, seat belt, steering wheel, footrest, wearable device, or the like, and is configured to stimulate the occupant's tactile sensation.
香り発生装置54は、乗員に対して、リラックス効果や集中力を高める効果のある香りを発生させる。香り発生装置54は、一例として、アロマディフューザとして構成されている。 The scent generator 54 generates a scent that has a relaxing effect and an effect of enhancing concentration on the occupant. The scent generator 54 is configured as an aroma diffuser as an example.
対話部55は、乗員に対して、複数の対話刺激を与えるように構成されている。また、複数の対話刺激の各々は、乗員に対して対話を行うため、固有の内容を有する少なくとも1つのメッセージを提示するように構成されている。なお、対話部55は、メッセージに対する乗員の反応を受けとり、該反応に応じて、さらに少なくとも1つのメッセージを提示するように構成されていても良い。これらのメッセージは、例えば、乗員との日常会話を行うためのメッセージ、又は乗員への質問や問題を示すメッセージであっても良い。 The dialogue unit 55 is configured to give a plurality of dialogue stimuli to the occupant. In addition, each of the plurality of dialogue stimuli is configured to present at least one message having a unique content in order to interact with the occupant. The dialogue unit 55 may be configured to receive the reaction of the occupant to the message and present at least one further message according to the reaction. These messages may be, for example, messages for conducting daily conversations with the occupants, or messages indicating questions or problems to the occupants.
対話部55は、様々な方法により、これらのメッセージを提示し、又はメッセージに対する反応を受け取っても良い。対話部55は、例えば、スピーカー及びマイクを備え、これらのメッセージをスピーカーから発し、該メッセージに対する乗員の反応をマイクで集音しても良い。また、対話部55は、これらのメッセージを表示装置51に出力し、表示装置51により該メッセージを提示しても良い。さらに、対話部55は、タッチパネル等の操作部を介して、これらのメッセージに対する乗員の手動の入力を受け取るように構成されていても良い。 The dialogue unit 55 may present these messages or receive a response to the messages in various ways. The dialogue unit 55 may include, for example, a speaker and a microphone, emit these messages from the speaker, and collect the reaction of the occupant to the message with the microphone. Further, the dialogue unit 55 may output these messages to the display device 51 and present the messages on the display device 51. Further, the dialogue unit 55 may be configured to receive the manual input of the occupant for these messages via an operation unit such as a touch panel.
なお、この他にも、改善装置1は、車内LAN等の通信ラインを介して、インパネ等に設けられた他の装置に接続されていても良い。そして、改善装置1は、通信ラインを介してこれらの装置と通信を行うことで、これらの装置に各種処理を実行させても良い。 In addition to this, the improvement device 1 may be connected to another device provided on the instrument panel or the like via a communication line such as an in-vehicle LAN. Then, the improvement device 1 may cause these devices to execute various processes by communicating with these devices via the communication line.
また、改善装置1は、CPU10と、RAM、ROM、フラッシュメモリ等の半導体メモリ(以後、メモリ11とする)と、車内通信部12と、車外通信部13と、を有するマイクロコンピュータを備える。CPU10は、メモリ11に保存されているプログラムを実行する。CPU10が非遷移的実体的記憶媒体に格納されたプログラムを実行することにより、改善装置1の各機能が実現される。この例では、メモリ11が、プログラムを格納した非遷移的実体的記憶媒体に該当する。また、このプログラムが実行されることで、プログラムに対応する方法が実行される。なお、改善装置1は、1つのマイクロコンピュータを備えてもよいし、複数のマイクロコンピュータを備えてもよい。また、改善装置1の機能を実現する手法はソフトウェアに限るものではなく、その一部又は全部の機能は、電子回路を用いて実現されても良い。この場合、電子回路は、デジタル回路、又は、アナログ回路、あるいはこれらの組み合わせとして構成されていても良い。 Further, the improvement device 1 includes a microcomputer having a CPU 10, semiconductor memories such as RAM, ROM, and flash memory (hereinafter referred to as memory 11), an in-vehicle communication unit 12, and an external communication unit 13. The CPU 10 executes a program stored in the memory 11. Each function of the improvement device 1 is realized by the CPU 10 executing the program stored in the non-transitional substantive storage medium. In this example, the memory 11 corresponds to a non-transitional substantive storage medium in which a program is stored. Moreover, when this program is executed, the method corresponding to the program is executed. The improvement device 1 may include one microcomputer or a plurality of microcomputers. Further, the method for realizing the function of the improvement device 1 is not limited to software, and some or all of the functions may be realized by using an electronic circuit. In this case, the electronic circuit may be configured as a digital circuit, an analog circuit, or a combination thereof.
車内通信部12は、車内LAN等の通信ラインと接続され、他の装置と通信を行う。車内通信部12は、一例として、自動運転制御装置4と通信を行い、自動運転制御装置4によって設定された自動運転レベルを受信する。 The in-vehicle communication unit 12 is connected to a communication line such as an in-vehicle LAN and communicates with other devices. As an example, the in-vehicle communication unit 12 communicates with the automatic driving control device 4 and receives the automatic driving level set by the automatic driving control device 4.
[2.改善装置の機能]
車載システム100は、乗員の心身状態を改善させるために、乗員に対して、視覚、嗅覚、聴覚、及び触覚のうちの少なくとも1つを介して、複数の刺激を与えるための処理を行うように構成されている。本実施形態において、乗員の心身状態は、乗員の快適さの度合いを示す値である快適度、及び、乗員が覚醒した度合いを示す値である覚醒度の2つの指標の値を用いて表される。なお、乗員の心身状態は、快適度及び覚醒度に加えて他の指標を用いて表されても良い。また、乗員の心身状態は、快適度及び覚醒度のうちの双方又は一方に代えて、別の指標を用いて表されても良い。
[2. Function of improvement device]
The in-vehicle system 100 is to perform a process for giving a plurality of stimuli to the occupant via at least one of visual, olfactory, auditory, and tactile senses in order to improve the physical and mental condition of the occupant. It is configured. In the present embodiment, the mental and physical condition of the occupant is expressed by using two index values, a comfort degree which is a value indicating the degree of comfort of the occupant and an arousal degree which is a value indicating the degree of awakening of the occupant. To. The mental and physical condition of the occupant may be expressed by using other indexes in addition to the comfort level and the alertness level. In addition, the mental and physical condition of the occupant may be expressed by using another index instead of both or one of the comfort level and the alertness level.
CPU10は、カメラ2によって出力された撮影データ、及び、心拍センサ3によって出力された心拍数の計測データのうちの双方又は一方に基づき、乗員の快適度及び覚醒度を推定する。具体的には、CPU10は、乗員の表情又は姿勢に基づいて、乗員の快適度及び覚醒度を推定しても良い。快適度及び覚醒度は、一例として、図2に示すように、2次元グラフ(以後、グラフ)上にプロットされ得る。また、該値は、例えば、段階的に定められても良い。グラフのx軸は快適度を、グラフのy軸は覚醒度を示す。快適度は、負の値の場合は不快であることを示し、正の値の場合は快適であることを示す。覚醒度は、負の値の場合は睡眠状態を示し、正の値の場合は過覚醒状態を示し、値が0の場合は最適の覚醒状態であることを示す。 The CPU 10 estimates the occupant's comfort level and arousal level based on both or one of the photographing data output by the camera 2 and the heart rate measurement data output by the heart rate sensor 3. Specifically, the CPU 10 may estimate the occupant's comfort level and arousal level based on the occupant's facial expression or posture. The comfort level and the alertness level can be plotted on a two-dimensional graph (hereinafter referred to as a graph) as shown in FIG. 2 as an example. Moreover, the value may be determined stepwise, for example. The x-axis of the graph shows comfort and the y-axis of the graph shows alertness. A negative value indicates unpleasantness, and a positive value indicates comfortableness. A negative value indicates a sleep state, a positive value indicates a hypervigilance state, and a value of 0 indicates an optimal arousal state.
[3.感情ベクトルについて]
乗員に与えられる複数の刺激には、それぞれ感情ベクトル7が設定されている(図2参照)。以後、これらの各刺激に対応する感情ベクトル7の集合体を、感情ベクトルDB70と記載する。詳細は後述するが、車載システム100は、乗員の心身状態を改善させるため、感情ベクトルDB70における感情ベクトル7に基づき、乗員に与える刺激を選択する。
[3. About emotional vector]
An emotional vector 7 is set for each of the plurality of stimuli given to the occupant (see FIG. 2). Hereinafter, the aggregate of the emotional vectors 7 corresponding to each of these stimuli will be referred to as the emotional vector DB70. Although the details will be described later, the in-vehicle system 100 selects a stimulus to be given to the occupant based on the emotion vector 7 in the emotion vector DB 70 in order to improve the mental and physical condition of the occupant.
感情ベクトル7の各成分は、該感情ベクトル7に対応する刺激が乗員に与えられた際に、乗員の心身状態を示す各指標の値が、どの程度変化するのかを示す。換言すると、感情ベクトル7は、該感情ベクトル7に対応する刺激が乗員に与えられた際に、グラフ上において、乗員の心身状態が変化する方向を示す。以後、刺激が乗員に与えられた際の乗員の快適度の変化を示す成分を快適度成分と、覚醒度の変化を示す成分を覚醒度成分と記載する。そして、刺激が与えられた乗員の心身状態の変化を示す経路(以後、刺激経路)が、該刺激に対応する感情ベクトル7と同方向に延びる経路としてグラフ上に表される。なお、刺激経路の長さは、例えば、与えられた刺激の強さ、又は、刺激が与えられる期間等に応じて定められ得る。 Each component of the emotion vector 7 indicates how much the value of each index indicating the mental and physical state of the occupant changes when the stimulus corresponding to the emotion vector 7 is given to the occupant. In other words, the emotional vector 7 indicates the direction in which the mental and physical state of the occupant changes on the graph when the stimulus corresponding to the emotional vector 7 is given to the occupant. Hereinafter, the component indicating the change in the comfort level of the occupant when the stimulus is given to the occupant will be referred to as the comfort level component, and the component indicating the change in the alertness level will be referred to as the arousal level component. Then, a path indicating a change in the mental and physical state of the occupant to which the stimulus is given (hereinafter, a stimulus path) is represented on the graph as a path extending in the same direction as the emotion vector 7 corresponding to the stimulus. The length of the stimulation pathway can be determined according to, for example, the intensity of the given stimulation, the period during which the stimulation is given, or the like.
車載システム100は、共通の感情ベクトルDB70を用いて各乗員に与える刺激を選択しても良い。この場合、感情ベクトルDB70に含まれる各感情ベクトル7は、該感情ベクトル7に対応する刺激が乗員に与えられた際に生じ得る平均的な心身状態の変化を示しても良い。このような感情ベクトル7は、複数の者に該感情ベクトル7に対応する刺激を与えたときにおける、心身状態の変化の測定結果の平均値に基づき定められても良い。 The in-vehicle system 100 may select a stimulus to be given to each occupant by using the common emotion vector DB 70. In this case, each emotion vector 7 included in the emotion vector DB 70 may indicate a change in the average mental and physical state that can occur when a stimulus corresponding to the emotion vector 7 is given to the occupant. Such an emotional vector 7 may be determined based on the average value of the measurement results of changes in the mental and physical states when a plurality of persons are given a stimulus corresponding to the emotional vector 7.
また、車載システム100は、複数の感情ベクトルDB70を用いて刺激を選択しても良い。具体的には、例えば、各乗員の心身状態の変化を反映した各感情ベクトルDB70は、該乗員に対応して設けられていても良い。そして、車載システム100は、乗員に対応する感情ベクトルDB70を用いて、該乗員に与える刺激を選択しても良い。 Further, the in-vehicle system 100 may select a stimulus by using a plurality of emotional vectors DB 70. Specifically, for example, each emotion vector DB 70 reflecting a change in the mental and physical state of each occupant may be provided corresponding to the occupant. Then, the in-vehicle system 100 may select the stimulus to be given to the occupant by using the emotion vector DB 70 corresponding to the occupant.
また、この他にも、感情ベクトルDB70と共に、該感情ベクトルDB70に対応する乗員の特性(例えば、年齢、性別、体型等)を示す特性情報が設けられていても良い。そして、車載システム100は、対応する感情ベクトルDB70が設けられていない乗員に刺激を与える場合には、カメラ2等により、該乗員の特性を検出しても良い。そして、車載システム100は、検出した該乗員の特性と、感情ベクトルDB70に設けられた特性情報とに基づき、該乗員と同一又は類似の特性を示す乗員に対応して設けられた感情ベクトルDB70をサーチしても良い。そして、サーチにより見つかった感情ベクトルDB70が、該乗員に与える刺激の選択に用いられても良い。 In addition to this, the emotion vector DB 70 may be provided with characteristic information indicating the characteristics (for example, age, gender, body type, etc.) of the occupant corresponding to the emotion vector DB 70. Then, when the in-vehicle system 100 stimulates an occupant who is not provided with the corresponding emotion vector DB 70, the characteristics of the occupant may be detected by a camera 2 or the like. Then, the in-vehicle system 100 obtains the emotion vector DB 70 provided corresponding to the occupant showing the same or similar characteristics as the occupant based on the detected characteristics of the occupant and the characteristic information provided in the emotion vector DB 70. You may search. Then, the emotion vector DB 70 found by the search may be used for selecting the stimulus to be given to the occupant.
また、例えば、年齢、性別、体型等により乗員を複数の種類に分類し、乗員の各種類に対応して、該種類に分類された乗員において典型的に生じ得る心身状態の変化を反映した感情ベクトルDB70を設けても良い。そして、車載システム100は、カメラ2等により、刺激を与える対象となる乗員の種類を判別し、判別した種類に対応する感情ベクトルDB70を用いて、該乗員に与える刺激を選択しても良い。 In addition, for example, occupants are classified into a plurality of types according to age, gender, body type, etc., and emotions reflecting changes in the mental and physical condition that can typically occur in the occupants classified into the types corresponding to each type of occupants. The vector DB 70 may be provided. Then, the in-vehicle system 100 may determine the type of the occupant to be stimulated by the camera 2 or the like, and select the stimulus to be given to the occupant by using the emotion vector DB 70 corresponding to the determined type.
また、例えば、車外環境(例えば、天候又は外気温)の状態に対応して、各状態における自車両の乗員において典型的に生じ得る心身状態の変化を反映した感情ベクトルDB70を設けても良い。そして、車載システム100は、現在の車外環境を示す各状態に対応する感情ベクトルDB70を用いて、乗員に与える刺激を選択しても良い。また、例えば、自車両の制御状態(例えば、自動運転レベル)に対応して、各制御状態における自車両の乗員において典型的に生じ得る心身状態の変化を反映した感情ベクトルDB70を設けても良い。そして、車載システム100は、現在の自車両の制御状態に対応する感情ベクトルDB70を用いて、乗員に与える刺激を選択しても良い。 Further, for example, an emotional vector DB 70 may be provided that reflects a change in the mental and physical state that can typically occur in the occupant of the own vehicle in each state in response to the state of the outside environment (for example, weather or outside air temperature). Then, the in-vehicle system 100 may select the stimulus to be given to the occupant by using the emotion vector DB 70 corresponding to each state indicating the current vehicle exterior environment. Further, for example, an emotion vector DB 70 may be provided corresponding to the control state of the own vehicle (for example, the automatic driving level) and reflecting the change in the mental and physical state that can typically occur in the occupant of the own vehicle in each control state. .. Then, the in-vehicle system 100 may select a stimulus to be given to the occupant by using the emotion vector DB 70 corresponding to the current control state of the own vehicle.
なお、上述した各感情ベクトルDB70は、改善装置1内(例えば、メモリ11内)に保存されていても良い。また、各感情ベクトルDB70は、クラウドのサーバ6に保存されていても良い。そして、車外通信部13が、無線通信を介して、インターネットへアクセスすることによって、サーバ6から現在の乗員に刺激を与えるために用いられる感情ベクトルDB70を取得しても良い。 Each emotion vector DB 70 described above may be stored in the improvement device 1 (for example, in the memory 11). Further, each emotion vector DB 70 may be stored in the cloud server 6. Then, the out-of-vehicle communication unit 13 may acquire the emotion vector DB 70 used to stimulate the current occupant from the server 6 by accessing the Internet via wireless communication.
[4.刺激パターンについて]
ここで、CPU10により推定された快適度及び覚醒度により示される心身状態を、開始状態Aとする(図3参照)。また、快適度及び覚醒度の各々が予め定められた適正な範囲となった時の心身状態を、目標状態Bとする。CPU10は、開始状態A、目標状態B、及び、各刺激に対応する感情ベクトル7に基づき、乗員に与える少なくとも1つの刺激を、刺激パターンとして選択する。なお、刺激パターンは、複数の刺激から構成されていても良い。この場合には、これらの刺激を乗員に与える際の順番が設定される。つまり、仮に、A、B、Cの3つの刺激からなる刺激パターンが複数存在したとしても、3つの刺激が乗員に与えられる順番が異なっていれば、これらの刺激パターンは異なるものとなる。また、感情ベクトルDB70が乗員ごとに設けられている場合には、少なくとも1つの刺激が与えられる乗員に対応する感情ベクトルDB70に基づき、刺激パターンが選択されても良い。
[4. About stimulation pattern]
Here, the mental and physical state indicated by the comfort level and the arousal level estimated by the CPU 10 is defined as the start state A (see FIG. 3). In addition, the mental and physical state when each of the comfort level and the arousal level is within a predetermined appropriate range is defined as the target state B. The CPU 10 selects at least one stimulus to be given to the occupant as a stimulus pattern based on the start state A, the target state B, and the emotion vector 7 corresponding to each stimulus. The stimulus pattern may be composed of a plurality of stimuli. In this case, the order in which these stimuli are given to the occupants is set. That is, even if there are a plurality of stimulus patterns composed of the three stimuli A, B, and C, if the order in which the three stimuli are given to the occupant is different, these stimulus patterns will be different. Further, when the emotion vector DB 70 is provided for each occupant, the stimulus pattern may be selected based on the emotion vector DB 70 corresponding to the occupant to which at least one stimulus is given.
また、刺激パターンである少なくとも1つの刺激が与えられる期間を、刺激期間とする。刺激パターンとは、当該刺激パターンである少なくとも1つの刺激が乗員に与えられると、刺激期間の開始時に開始状態Aであった心身状態が目標状態Bまで変化することを、該少なくとも1つの刺激に対応する感情ベクトル7が示すものである。 Further, the period during which at least one stimulus, which is a stimulus pattern, is given is defined as a stimulus period. The stimulus pattern means that when at least one stimulus, which is the stimulus pattern, is given to the occupant, the mental and physical state that was the start state A at the start of the stimulus period changes to the target state B. This is what the corresponding emotional vector 7 shows.
より詳しくは、刺激パターンである少なくとも1つの刺激は、刺激パターンに設定された順番に従い乗員に与えられる。そして、図2のグラフ上において、該順番に従い、該少なくとも1つの刺激の各々に対応する刺激経路を組み合わせると、図3に示すように、開始状態Aから目標状態Bに到達する経路(以後、刺激パターン経路71)が形成される。つまり、該少なくとも1つの刺激が該順番に乗員に与えられると、開始状態Aであった乗員の心身状態が該刺激パターン経路71に沿って変化し、目標状態Bになると推測される。 More specifically, at least one stimulus, which is a stimulus pattern, is given to the occupant in the order set in the stimulus pattern. Then, on the graph of FIG. 2, when the stimulus pathways corresponding to each of the at least one stimulus are combined according to the order, as shown in FIG. 3, the pathway from the start state A to the target state B (hereinafter, hereafter). A stimulation pattern pathway 71) is formed. That is, when the at least one stimulus is given to the occupant in this order, it is presumed that the mental and physical state of the occupant, which was the start state A, changes along the stimulus pattern path 71 and becomes the target state B.
なお、CPU10は、乗員の開始状態Aと目標状態Bとの乖離を、乗員に対して視覚的に表示しても良い。CPU10は、例えば、乗員の開始状態Aと目標状態Bとの乖離を示す図として、図3に示すグラフを、表示装置51を介して表示しても良い。これにより、乗員は、開始状態Aと目標状態Bとがどれだけ乖離しているのか、視覚的に容易に認識できる。 The CPU 10 may visually display the difference between the start state A and the target state B of the occupant to the occupant. For example, the CPU 10 may display the graph shown in FIG. 3 via the display device 51 as a diagram showing the deviation between the start state A and the target state B of the occupant. As a result, the occupant can easily visually recognize how much the start state A and the target state B are separated from each other.
CPU10は、刺激パターンに基づいて、乗員に対して刺激を与える処理を行う。なお、表示装置51による、乗員の前方における画像や文字の表示、又は乗員に対する発光が、乗員に対して与えられる刺激の1つに対応する。また、空調装置52による、乗員への冷風又は温風の送風が、乗員に対して与えられる刺激の1つに対応する。さらに、振動装置53による、乗員の身体の一部に対する押圧や振動が、乗員に対して与えられる刺激の1つに対応する。また、香り発生装置54による、乗員に対する香りの発生が、乗員に対して与えられる刺激の1つに対応する。さらに、対話部55による対話刺激が、乗員に対して与えられる刺激の1つに対応する。また、その他にも、例えば、ブザー発生装置(図示なし)による乗員に対するブザー音、又は、音楽再生装置(図示なし)による音楽の再生が、乗員に対して与えられる刺激の1つに対応する。 The CPU 10 performs a process of stimulating the occupant based on the stimulus pattern. The display of images and characters in front of the occupant by the display device 51, or the light emission to the occupant corresponds to one of the stimuli given to the occupant. Further, the blowing of cold air or hot air to the occupant by the air conditioner 52 corresponds to one of the stimuli given to the occupant. Further, the pressing or vibration of the vibration device 53 on a part of the occupant's body corresponds to one of the stimuli given to the occupant. Further, the generation of the scent to the occupant by the scent generator 54 corresponds to one of the stimuli given to the occupant. Further, the dialogue stimulus by the dialogue unit 55 corresponds to one of the stimuli given to the occupant. In addition, for example, a buzzer sound for an occupant by a buzzer generator (not shown) or music reproduction by a music playback device (not shown) corresponds to one of the stimuli given to the occupant.
[5.改善処理]
次に、乗員の心身状態の改善処理について、図4のフローチャートを用いて説明する。改善処理は、車載システム100のCPU10により定期的に実行されても良い。
[5. Improvement process]
Next, the process of improving the physical and mental condition of the occupant will be described with reference to the flowchart of FIG. The improvement process may be periodically executed by the CPU 10 of the in-vehicle system 100.
S200では、CPU10は、目標状態Bを設定する。目標状態Bは、予め定められた領域(以後、目標領域C)に含まれても良い。目標領域Cは、一例として、快適度が正の値であり、かつ、覚醒度が0付近の値である領域であっても良い。 In S200, the CPU 10 sets the target state B. The target state B may be included in a predetermined area (hereinafter, target area C). As an example, the target region C may be a region in which the comfort level is a positive value and the arousal level is a value near 0.
また、目標状態Bは、一例として、車内通信部12により受信した自動運転レベルに応じて設定されてもよい。例えば、自動運転レベルが低い場合、すなわち、自車両の加減速及び操舵の大部分が運転手の操作により行われる場合、目標状態Bは、覚醒度が0付近の正の値となるように設定されても良い。一方、自動運転レベルが高い場合、すなわち、自車両の加減速及び操舵の全部又は大部分が自動運転制御装置4によって制御される場合、自動運転レベルが低い場合と比較すると、覚醒度は多少低くても良い。そのため、目標状態Bは、目標領域Cに含まれ、かつ、自動運転レベルが低い場合よりも目標状態Bを示す覚醒度の範囲が広くなるように設定されても良い。一例として、目標状態Bは、覚醒度が0付近の負の値となるように設定されても良い。 Further, the target state B may be set according to the automatic driving level received by the in-vehicle communication unit 12, as an example. For example, when the automatic driving level is low, that is, when most of the acceleration / deceleration and steering of the own vehicle are performed by the driver's operation, the target state B is set so that the arousal degree is a positive value near 0. May be done. On the other hand, when the automatic driving level is high, that is, when all or most of the acceleration / deceleration and steering of the own vehicle are controlled by the automatic driving control device 4, the degree of arousal is slightly lower than when the automatic driving level is low. You may. Therefore, the target state B may be set so as to be included in the target area C and the range of the arousal degree indicating the target state B is wider than when the automatic driving level is low. As an example, the target state B may be set so that the arousal level is a negative value near 0.
また、例えば、CPU10は、操作部を介して、目標状態Bを示す快適度及び覚醒度の範囲の設定を行うための乗員の手動の入力を受け付けても良い。
なお、CPU10は、S200において、前回の改善処理で設定された目標状態Bとは異なる目標状態を設定しても良い。該目標状態は、目標領域Cに含まれても良い。なお、該目標状態と目標状態Bとは、各指標の値の全部又は一部が異なっていても良い。
Further, for example, the CPU 10 may accept the manual input of the occupant for setting the range of the comfort level and the arousal level indicating the target state B via the operation unit.
In S200, the CPU 10 may set a target state different from the target state B set in the previous improvement process. The target state may be included in the target area C. The target state and the target state B may be different in all or part of the values of each index.
すなわち、CPU10は、各回の改善処理のS200において、前回からx回前までの改善処理で設定された目標状態とは異なり、かつ、目標領域Cに含まれる目標状態を設定しても良い。なお、xは、例えば、2以上の正の整数であっても良い。 That is, in S200 of each improvement process, the CPU 10 may set a target state that is different from the target state set in the improvement process from the previous time to x times before and is included in the target area C. Note that x may be, for example, a positive integer of 2 or more.
S205では、CPU10は、カメラ2及び心拍センサ3の少なくとも一方によって、乗員の状態を検出する。
S210では、CPU10は、S205での検出結果に基づいて、乗員の現在の心身状態を示す快適度及び覚醒度を推定する。なお、推定した快適度及び覚醒度により示される心身状態は、上述した開始状態Aに相当する。
In S205, the CPU 10 detects the state of the occupant by at least one of the camera 2 and the heart rate sensor 3.
In S210, the CPU 10 estimates the comfort level and the arousal level indicating the current mental and physical state of the occupant based on the detection result in S205. The mental and physical states indicated by the estimated comfort and arousal levels correspond to the above-mentioned starting state A.
S215では、CPU10は、乗員の心身状態が開始状態Aから目標状態Bに到達しているか判定する。肯定判定が得られた場合には(S215:Yes)、乗員の心身状態が適正であり、改善の必要はないとみなして、本処理を終了する。否定判定が得られた場合には(S215:No)、S220に移行する。 In S215, the CPU 10 determines whether the mental and physical state of the occupant has reached the target state B from the start state A. If an affirmative judgment is obtained (S215: Yes), it is considered that the physical and mental condition of the occupant is appropriate and no improvement is necessary, and this process is terminated. If a negative determination is obtained (S215: No), the process proceeds to S220.
S220では、CPU10は、乗員の心身状態を開始状態Aから目標状態Bまで変化させ得る上述した刺激パターンを選択する。なお、このような刺激パターンが複数存在する場合、以下のようにして、これらの刺激パターン(以後、選択対象)のうちの1つが選択されても良い。なお、該選択を行うためには、選択対象である少なくとも1つの刺激が与えられた際の乗員の快適度及び/又は覚醒度の変化を把握する必要がある。該変化は、該選択対象に対応する刺激パターン経路71に基づき、換言すれば、該選択対象を構成する少なくとも1つの刺激に対応する各感情ベクトル7に基づき把握される。 In S220, the CPU 10 selects the above-mentioned stimulation pattern capable of changing the mental and physical state of the occupant from the start state A to the target state B. When a plurality of such stimulation patterns exist, one of these stimulation patterns (hereinafter, selection target) may be selected as follows. In order to make the selection, it is necessary to grasp the change in the comfort level and / or the arousal level of the occupant when at least one stimulus to be selected is given. The change is grasped based on the stimulus pattern pathway 71 corresponding to the selection target, in other words, based on each emotion vector 7 corresponding to at least one stimulus constituting the selection target.
例えば、CPU10は、車内通信部12により受信した自動運転レベルに基づいて、複数の選択対象のうちのいずれかを選択しても良い。すなわち、自動運転レベルが低い場合、覚醒度が最も早く0付近の値の範囲となり、その後、刺激期間が終了するまで覚醒度が該範囲に維持される選択対象が選択されても良い。一方、自動運転レベルが高い場合、覚醒度の悪化が抑制され、かつ、刺激期間の大半において、快適度が正の値である選択対象が選択されても良い。 For example, the CPU 10 may select one of a plurality of selection targets based on the automatic driving level received by the in-vehicle communication unit 12. That is, when the automatic driving level is low, the selection target may be selected in which the arousal level is the earliest in the range of values near 0, and then the arousal level is maintained in this range until the end of the stimulation period. On the other hand, when the automatic driving level is high, the selection target may be selected in which the deterioration of the arousal level is suppressed and the comfort level is a positive value for most of the stimulation period.
また、例えば、CPU10は、複数の選択対象のうち、刺激期間における快適度及び覚醒度の増減の度合いが最も小さいものを選択しても良い。つまり、複数の選択対象のうち、刺激パターン経路71が最も短いものが選択されても良い。なお、このような刺激パターン経路71は、一般的な経路探索方法(例えば、ダイクストラ法又はA*探索アルゴリズム)によってサーチされても良い。 Further, for example, the CPU 10 may select a plurality of selection targets having the smallest degree of increase / decrease in comfort and arousal during the stimulation period. That is, among the plurality of selection targets, the one with the shortest stimulation pattern path 71 may be selected. The stimulation pattern path 71 may be searched by a general path search method (for example, Dijkstra's algorithm or A * search algorithm).
また、快適度及び覚醒度のうち、優先すべき一方の指標を特定指標とする。例えば、CPU10は、複数の選択対象のうち、特定指標の値が最も早く予め定められた範囲(以後、第1範囲)に到達し、刺激期間が終了するまで特定指標の値が該第1範囲に維持されるものを選択しても良い。なお、第1範囲は、一例として、快適度が特定指標である場合は快適度が正の値である範囲であり、覚醒度が特定指標である場合は覚醒度が0付近の値である範囲であっても良い。 In addition, one of the comfort and alertness indexes that should be prioritized is set as the specific index. For example, in the CPU 10, the value of the specific index reaches the predetermined range (hereinafter, the first range) earliest among the plurality of selection targets, and the value of the specific index is in the first range until the stimulation period ends. You may choose the one that is maintained in. The first range is, for example, a range in which the comfort level is a positive value when the comfort level is a specific index, and a range in which the arousal level is a value near 0 when the arousal level is a specific index. It may be.
また、例えば、快適度を特定指標とし、快適度が正の値となる範囲を第1範囲としても良い。この場合、CPU10は、同一の刺激により構成される選択対象が複数存在するときに、これらのうちから、快適度を正の値に近づける刺激をより早期に乗員に与える刺激パターンを選択しても良い。 Further, for example, the comfort level may be used as a specific index, and the range in which the comfort level is a positive value may be set as the first range. In this case, when there are a plurality of selection targets composed of the same stimulus, the CPU 10 may select a stimulus pattern that gives the occupant a stimulus that brings the comfort level closer to a positive value earlier. good.
また、例えば、CPU10は、複数の選択対象のうち、刺激期間に、乗員の心身状態が予め定められた特定の範囲(以後、第2範囲)に到達しないものを選択しても良い。なお、第2範囲は、乗員の運転に不適切な状態を示していても良い。より詳しくは、第2範囲は、例えば、快適度が負の値である範囲であっても良いし、覚醒度が負の値である範囲であっても良いし、快適度が負の値であり、かつ、覚醒度が負の値である範囲であっても良い。なお、第2範囲は、車内通信部12により受信した自動運転レベルに応じて、設定されても良い。具体的には、例えば、自動運転レベルが低い場合、第2範囲は、自動運転レベルが高い場合と比較して、該第2範囲を構成する覚醒度の範囲が広げられても良い。これにより、乗員にとって、自車両の運転に不適切な状態となることが抑制され得る。 Further, for example, the CPU 10 may select a plurality of selection targets in which the mental and physical condition of the occupant does not reach a predetermined specific range (hereinafter, the second range) during the stimulation period. The second range may indicate a state inappropriate for the driving of the occupant. More specifically, the second range may be, for example, a range in which the comfort level is a negative value, a range in which the arousal level is a negative value, or a range in which the comfort level is a negative value. There may be a range in which the arousal level is a negative value. The second range may be set according to the automatic driving level received by the in-vehicle communication unit 12. Specifically, for example, when the automatic driving level is low, the range of the arousal degree constituting the second range may be expanded in the second range as compared with the case where the automatic driving level is high. As a result, it is possible to prevent the occupant from being in an inappropriate state for driving his / her own vehicle.
さらに、例えば、CPU10は、複数の選択対象のうち、刺激期間に、乗員の心身状態が予め定められた特定の範囲(以後、第3範囲)に到達するものを選択しても良い。なお、第3範囲は、一例として、目標領域Cの付近にある範囲であっても良い。 Further, for example, the CPU 10 may select a plurality of selection targets in which the mental and physical state of the occupant reaches a predetermined specific range (hereinafter, the third range) during the stimulation period. As an example, the third range may be a range near the target area C.
また、例えば、CPU10は、表示装置51を介して、複数の選択対象を乗員に対して表示しても良い。そして、CPU10は、操作部を介して、表示された複数の選択対象のうちのいずれかを選択するための乗員の手動の入力を受け付けても良い。 Further, for example, the CPU 10 may display a plurality of selection targets to the occupant via the display device 51. Then, the CPU 10 may accept the manual input of the occupant for selecting one of the plurality of displayed selection targets via the operation unit.
S225では、CPU10は、S210と同様にして、乗員の心身状態(以後、第1心身状態)を示す快適度及び覚醒度を推定する。
S230では、CPU10は、S220で選択された刺激パターンを構成する、未だ乗員に与えられていない刺激のうちのいずれかの刺激を、乗員に与える処理を行う。これにより、CPU10は、刺激パターンに設定された順番に従い、各刺激を乗員に与える。CPU10による処理に基づいて、表示装置51、空調装置52、振動装置53、香り発生装置54、及び対話部55のいずれかによって、刺激が乗員に与えられても良い。
In S225, the CPU 10 estimates the comfort level and the arousal level indicating the mental and physical state of the occupant (hereinafter, the first mental and physical state) in the same manner as in S210.
In S230, the CPU 10 performs a process of giving the occupant any stimulus that has not yet been given to the occupant, which constitutes the stimulus pattern selected in S220. As a result, the CPU 10 gives each stimulus to the occupant according to the order set in the stimulus pattern. The stimulus may be given to the occupant by any of the display device 51, the air conditioner 52, the vibration device 53, the scent generator 54, and the dialogue unit 55 based on the processing by the CPU 10.
S235では、CPU10は、S210と同様にして、乗員の心身状態(以後、第2心身状態)を示す快適度及び覚醒度を推定する。そして、CPU10は、第1心身状態と第2心身状態とを示す快適度及び覚醒度の推定結果に基づいて、第1及び第2心身状態間における快適度の差分値及び覚醒度の差分値を算出する。算出された各指標の差分値は、S230で乗員に与えられた刺激と対応付けられてメモリ11内に保存される。また、CPU10は、各指標について、S235で算出された差分値と、S220で刺激パターンの選択に用いられた感情ベクトルDB70と同一のものが用いられた過去の改善処理で算出された同一の刺激における差分値と、の平均値を算出しても良い。 In S235, the CPU 10 estimates the comfort level and the arousal level indicating the mental and physical state of the occupant (hereinafter, the second mental and physical state) in the same manner as in S210. Then, the CPU 10 determines the difference value of the comfort level and the difference value of the arousal level between the first and second mental and physical states based on the estimation result of the comfort level and the arousal level indicating the first mental and physical state and the second mental and physical state. calculate. The calculated difference value of each index is stored in the memory 11 in association with the stimulus given to the occupant in S230. Further, the CPU 10 uses the difference value calculated in S235 and the same emotion vector DB70 used for selecting the stimulus pattern in S220 for each index, and the same stimulus calculated in the past improvement process. You may calculate the average value with the difference value in.
S240では、S220で選択された刺激パターンを構成する全ての刺激が乗員に与えられたか判定する。肯定判定が得られた場合には(S240:Yes)、再度、S215に移行する。一方、否定判定が得られた場合には(S240:No)、S225に移行し、S225〜S240を繰り返す。 In S240, it is determined whether all the stimuli constituting the stimulus pattern selected in S220 have been given to the occupant. If an affirmative determination is obtained (S240: Yes), the process proceeds to S215 again. On the other hand, when a negative determination is obtained (S240: No), the process proceeds to S225, and S225 to S240 are repeated.
S245では、CPU10は、S220で刺激パターンの選択に用いられた感情ベクトルDB70における感情ベクトル7のうち、該刺激パターンを構成する各々の刺激に対応する感情ベクトル7の補正を行う。具体的には、CPU10は、S220で選択された刺激パターンを構成する各々の刺激について、S235で算出した快適度及び覚醒度の差分値の平均値に基づいて、該刺激に対応する感情ベクトル7の快適度成分及び覚醒度成分を補正する。一例として、CPU10は、感情ベクトル7における各指標の成分を、該感情ベクトル7が対応する刺激における該指標についての差分値の平均値に置き換えても良いし、近づけても良い。なお、感情ベクトルDB70が乗員ごとに設けられている場合、S245において、刺激が与えられた乗員に対応する感情ベクトルDB70における感情ベクトル7の快適度成分及び覚醒度成分が補正されることにより、該乗員の感情ベクトル7が更新され得る。 In S245, the CPU 10 corrects the emotion vector 7 corresponding to each stimulus constituting the stimulus pattern among the emotion vectors 7 in the emotion vector DB 70 used for selecting the stimulus pattern in S220. Specifically, the CPU 10 receives the emotion vector 7 corresponding to the stimulus based on the average value of the difference values of the comfort level and the arousal level calculated in S235 for each stimulus constituting the stimulus pattern selected in S220. Corrects the comfort and alertness components of. As an example, the CPU 10 may replace the component of each index in the emotion vector 7 with the average value of the difference values for the index in the stimulus to which the emotion vector 7 corresponds, or may bring them closer to each other. When the emotion vector DB 70 is provided for each occupant, in S245, the comfort component and the alertness component of the emotion vector 7 in the emotion vector DB 70 corresponding to the stimulated occupant are corrected. The occupant's emotional vector 7 can be updated.
[6.効果]
以上詳述した実施形態によれば、以下の効果を奏する。
(6a)上記実施形態によれば、車載システム100は、乗員の心身状態を示す快適度及び覚醒度の推定結果、及び、各刺激に対応する感情ベクトル7に基づいて、乗員に与えられる少なくとも1つの刺激を選択する。そのため、車載システム100は、選択された各々の刺激が乗員に与えられた際に、快適度及び覚醒度がどの程度変化するのかを予め把握できる。これにより、乗員に不適切な刺激等が与えられることを抑制できるため、乗員の状態を好適に改善できる。
[6. effect]
According to the embodiment described in detail above, the following effects are obtained.
(6a) According to the above embodiment, the in-vehicle system 100 is given to the occupant at least 1 based on the estimation result of the comfort level and the arousal level indicating the mental and physical state of the occupant and the emotion vector 7 corresponding to each stimulus. Select one stimulus. Therefore, the in-vehicle system 100 can grasp in advance how much the comfort level and the arousal level change when each of the selected stimuli is given to the occupant. As a result, it is possible to prevent the occupant from being given an inappropriate stimulus or the like, so that the condition of the occupant can be suitably improved.
(6b)また、車載システム100は、乗員の心身状態が開始状態Aから目標状態Bに変化し得る上述した少なくとも1つの刺激を、刺激パターンとして選択する。また、該刺激が与えられたことにより乗員の心身状態が開始状態Aから目標状態Bに到達する過程は、刺激パターン経路71によって表される。このため、車載システム100は、刺激パターンを構成する少なくとも1つの刺激が乗員に与えられたときの乗員の心身状態の変化を予め把握できる。これにより、好適に乗員の状態を改善できる。 (6b) Further, the in-vehicle system 100 selects at least one stimulus described above in which the mental and physical state of the occupant can change from the start state A to the target state B as the stimulus pattern. Further, the process in which the mental and physical state of the occupant reaches the target state B from the start state A by being given the stimulus is represented by the stimulus pattern path 71. Therefore, the in-vehicle system 100 can grasp in advance the change in the mental and physical state of the occupant when at least one stimulus constituting the stimulus pattern is given to the occupant. Thereby, the condition of the occupant can be preferably improved.
(6c)また、車載システム100は、車両の自動運転レベルに基づき、刺激パターンを選択しても良い。すなわち、例えば、自動運転レベルが低い場合は、車載システム100は、覚醒度が早期に適正となり、かつ、乗員の心身状態を開始状態Aから目標状態Bまで変化させ得る刺激パターンを選択しても良い。また、例えば、自動運転レベルが高い場合は、車載システム100は、快適度を良好に維持しつつ、乗員の心身状態を開始状態Aから目標状態Bに変化させ得る刺激パターンを選択しても良い。これにより、効果的に乗員の状態を改善できる。 (6c) Further, the in-vehicle system 100 may select a stimulation pattern based on the automatic driving level of the vehicle. That is, for example, when the automatic driving level is low, the in-vehicle system 100 may select a stimulation pattern in which the arousal level becomes appropriate at an early stage and the mental and physical state of the occupant can be changed from the start state A to the target state B. good. Further, for example, when the automatic driving level is high, the in-vehicle system 100 may select a stimulation pattern capable of changing the mental and physical state of the occupant from the start state A to the target state B while maintaining good comfort. .. As a result, the condition of the occupants can be effectively improved.
(6d)また、乗員の心身状態を開始状態Aから目標状態Bまで変化させ得る刺激パターンが、複数存在する場合が想定される。この場合、例えば、車載システム100は、最短の刺激パターン経路71を形成する刺激パターンを選択しても良い。これにより、早期に乗員の心身状態を開始状態Aから目標状態Bまで変化させることができる。 (6d) Further, it is assumed that there are a plurality of stimulation patterns that can change the mental and physical state of the occupant from the start state A to the target state B. In this case, for example, the in-vehicle system 100 may select a stimulation pattern that forms the shortest stimulation pattern path 71. As a result, the mental and physical condition of the occupant can be changed from the start state A to the target state B at an early stage.
また、上述の場合、快適度及び覚醒度のうち、優先すべき一方の指標を特定指標としても良い。そして、例えば、車載システム100は、刺激期間において特定指標の値が最も早く第1範囲に到達し、刺激期間が終了するまで該値が第1範囲に維持される刺激パターンを選択しても良い。これにより、特定指標を優先的に良好な値に変化させながら、乗員の心身状態を開始状態Aから目標状態Bまで変化させることができる。 Further, in the above case, one of the comfort and alertness indexes that should be prioritized may be used as the specific index. Then, for example, the in-vehicle system 100 may select a stimulation pattern in which the value of the specific index reaches the first range earliest in the stimulation period and the value is maintained in the first range until the stimulation period ends. .. As a result, the mental and physical state of the occupant can be changed from the start state A to the target state B while preferentially changing the specific index to a good value.
さらに、例えば、車載システム100は、乗員の心身状態が、刺激期間に、第2範囲に到達しない刺激パターンを選択しても良い。これにより、乗員の心身状態の悪化を抑制しながら、乗員の心身状態を開始状態Aから目標状態Bまで変化させることができる。 Further, for example, the in-vehicle system 100 may select a stimulation pattern in which the mental and physical condition of the occupant does not reach the second range during the stimulation period. As a result, the mental and physical condition of the occupant can be changed from the start state A to the target state B while suppressing the deterioration of the mental and physical condition of the occupant.
また、例えば、車載システム100は、乗員の心身状態が、刺激期間に、第3範囲に到達する刺激パターンを選択しても良い。これにより、乗員の心身状態を好適に開始状態Aから目標状態Bまで変化させることができる。 Further, for example, the in-vehicle system 100 may select a stimulation pattern in which the mental and physical condition of the occupant reaches the third range during the stimulation period. As a result, the mental and physical condition of the occupant can be suitably changed from the start state A to the target state B.
(6e)また、車載システム100は、改善処理において、前回の改善処理で設定された目標状態Bとは異なり、かつ、目標領域Cに含まれる目標状態を設定する。これにより、前回の改善処理で選択された刺激パターンとは異なるものが選択され得る。このため、刺激に対する乗員の慣れを抑制できる。 (6e) Further, in the improvement process, the in-vehicle system 100 sets a target state that is different from the target state B set in the previous improvement process and is included in the target area C. As a result, a stimulus pattern different from the stimulus pattern selected in the previous improvement process can be selected. Therefore, it is possible to suppress the occupant's accustomed to the stimulus.
(6f)また、車載システム100は、刺激パターンを構成する刺激の各々について、刺激が与えられる前の第1心身状態と刺激が与えられた後の第2心身状態との間における、快適度の差分値及び覚醒度の差分値を算出する。そして、車載システム100は、これらの差分値に基づいて、該刺激に対応する感情ベクトル7の快適度成分及び覚醒度成分を補正する。これにより、該刺激に対応する感情ベクトル7の精度が向上する。 (6f) Further, in the in-vehicle system 100, for each of the stimuli constituting the stimulus pattern, the comfort level between the first mental and physical state before the stimulus is given and the second mental and physical state after the stimulus is given. Calculate the difference value and the difference value of the arousal level. Then, the in-vehicle system 100 corrects the comfort component and the alertness component of the emotion vector 7 corresponding to the stimulus based on these difference values. As a result, the accuracy of the emotion vector 7 corresponding to the stimulus is improved.
(6g)また、車載システム100は、車両の自動運転レベルに基づいて、目標状態Bを設定する。具体的には、車載システム100は、自動運転レベルに応じて、目標状態Bを示す覚醒度の範囲を変化させる。このため、好適に乗員の状態を改善できる。 (6g) Further, the in-vehicle system 100 sets the target state B based on the automatic driving level of the vehicle. Specifically, the in-vehicle system 100 changes the range of the arousal degree indicating the target state B according to the automatic driving level. Therefore, the condition of the occupant can be preferably improved.
(6h)また、乗員の状態はカメラ2及び心拍センサ3の少なくとも一方によって検出される。そして、乗員の状態の検出結果に基づいて、乗員の心身状態を示す快適度及び覚醒度が推定される。このため、好適に乗員の心身状態を把握できる。 (6h) Further, the state of the occupant is detected by at least one of the camera 2 and the heart rate sensor 3. Then, based on the detection result of the occupant's state, the comfort level and the arousal level indicating the mental and physical state of the occupant are estimated. Therefore, the mental and physical condition of the occupant can be suitably grasped.
(6i)また、乗員の状態を改善するために、対話部55による対話刺激が乗員に対して与えられる。このため、好適に乗員の心身状態を変化させることができる。
(6j)また、乗員の心身状態は、快適度及び覚醒度の2つの指標の値を用いて表される。このため、好適に乗員の心身状態を把握できる。
(6i) Further, in order to improve the condition of the occupant, a dialogue stimulus by the dialogue unit 55 is given to the occupant. Therefore, the mental and physical condition of the occupant can be preferably changed.
(6j) Further, the mental and physical condition of the occupant is expressed by using the values of two indexes, the comfort level and the alertness level. Therefore, the mental and physical condition of the occupant can be suitably grasped.
[7.他の実施形態]
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
[7. Other embodiments]
Although the embodiments of the present disclosure have been described above, the present disclosure is not limited to the above-described embodiments, and can be implemented in various modifications.
(7a)上記実施形態では、車載システム100は、カメラ2及び心拍センサ3を備えている構成を例示した。しかし、車載システム100は、カメラ2及び心拍センサ3の双方又は一方に代えて、心電センサ、IRセンサ、外気温センサ、及び、室温センサ等の他のセンサを用いて、乗員の快適度及び覚醒度を推定しても良い。 (7a) In the above embodiment, the vehicle-mounted system 100 illustrates a configuration including a camera 2 and a heart rate sensor 3. However, the in-vehicle system 100 uses other sensors such as an electrocardiographic sensor, an IR sensor, an outside temperature sensor, and a room temperature sensor in place of both or one of the camera 2 and the heart rate sensor 3, to provide occupant comfort and comfort. The degree of arousal may be estimated.
(7b)また、乗車中の乗員の操作に応じて、自車両の各装置により、感情ベクトルDB70における各感情ベクトル7に対応する刺激と同様に、乗員の心身状態を改善させる処理が行われる場合があり得る。この場合、車載システム100は、該処理を刺激として設定すると共に、該処理による乗員の心身状態の変化を示す感情ベクトル7を新たに感情ベクトルDB70に登録しても良い。 (7b) Further, in the case where each device of the own vehicle performs a process of improving the mental and physical condition of the occupant in accordance with the operation of the occupant while riding, as in the case of the stimulus corresponding to each emotion vector 7 in the emotion vector DB 70. There can be. In this case, the in-vehicle system 100 may set the process as a stimulus and newly register the emotion vector 7 indicating the change in the mental and physical state of the occupant due to the process in the emotion vector DB 70.
すなわち、車載システム100は、通信ラインを介して、入力信号を受信することで、上記処理(例えば、所定の楽曲又は映像を出力させる処理)を行うための乗員による操作を検出しても良い。そして、車載システム100は、該操作が行われた時の乗員の快適度及び覚醒度を推定しても良い。また、車載システム100は、通信ラインを介して、上記処理が終了したこと(例えば、楽曲又は映像の出力が終了したこと)を検出すると、再度、乗員の快適度及び覚醒度を推定しても良い。そして、車載システム100は、これらの推定の結果を比較して、快適度及び覚醒度の変化を検出すると、上記処理を新たな刺激として設定しても良い。さらに、車載システム100は、該処理による乗員の快適度及び覚醒度の変化を新たな感情ベクトル7として、感情ベクトルDB70に登録しても良い。 That is, the in-vehicle system 100 may detect an operation by an occupant to perform the above processing (for example, a processing for outputting a predetermined music or video) by receiving an input signal via a communication line. Then, the in-vehicle system 100 may estimate the comfort level and the arousal level of the occupant when the operation is performed. Further, when the in-vehicle system 100 detects that the above processing is completed (for example, the output of music or video is completed) via the communication line, the occupant's comfort level and arousal level can be estimated again. good. Then, when the in-vehicle system 100 compares the results of these estimations and detects a change in the comfort level and the arousal level, the above process may be set as a new stimulus. Further, the in-vehicle system 100 may register the change in the comfort level and the arousal level of the occupant due to the process as a new emotional vector 7 in the emotional vector DB 70.
(7c)また、上記実施形態では、自動運転レベルに応じて、目標状態Bを設定したり、刺激パターンを選択したりする構成を例示した。しかし、車載システム100は、自動運転レベルに代えて、例えば、車速等の車両の他の制御状態に基づいて、目標状態Bを設定しても良いし、刺激パターンを選択しても良い。 (7c) Further, in the above-described embodiment, a configuration in which the target state B is set or the stimulation pattern is selected according to the automatic driving level is illustrated. However, the in-vehicle system 100 may set the target state B or select the stimulation pattern based on other control states of the vehicle such as the vehicle speed instead of the automatic driving level.
(7d)また、改善処理において、S245が省略されても良い。
(7e)また、上記実施形態では、1人の乗員の心身状態を改善する処理について例示したが、車載システム100は、自車両の複数の乗員に対して心身状態を改善する処理を行うように構成されていても良い。具体的には、車載システム100は、改善処理のS205において、自車両における複数の乗員の状態を検出しても良い。また、車載システム100は、S210において、該検出の結果に基づいて、各乗員の心身状態を示す快適度及び覚醒度を推定し、快適度及び覚醒度それぞれの平均値を算出しても良い。また、車載システム100は、該平均値を複数の乗員全体の開始状態Aを示す指標の値として用いても良い。
(7d) Further, S245 may be omitted in the improvement process.
(7e) Further, in the above embodiment, the process of improving the mental and physical condition of one occupant is illustrated, but the in-vehicle system 100 is configured to perform the process of improving the mental and physical condition of a plurality of occupants of the own vehicle. It may be configured. Specifically, the in-vehicle system 100 may detect the states of a plurality of occupants in the own vehicle in S205 of the improvement process. Further, in S210, the in-vehicle system 100 may estimate the comfort level and the arousal level indicating the mental and physical states of each occupant based on the detection result, and calculate the average value of each of the comfort level and the arousal level. Further, the in-vehicle system 100 may use the average value as an index value indicating the start state A of the entire plurality of occupants.
なお、車載システム100は、例えば、複数の乗員の特性を検出しても良い。また、車載システム100は、検出した各乗員の特性のうち最も多数の乗員に共通する特性を乗員全体の特性としても良い。さらに、検出した各乗員の特性から平均的な特性を算出し、該特性を乗員全体の特性としても良い。そして、車載システム100は、乗員全体の特性と同一又は類似の特性を示す乗員に対応して設けられた感情ベクトルDB70をサーチしても良い。そして、サーチにより見つかった感情ベクトルDB70が、該乗員全体に与える刺激の選択に用いられても良い。 The in-vehicle system 100 may detect the characteristics of a plurality of occupants, for example. Further, in the in-vehicle system 100, the characteristic common to the largest number of occupants among the detected characteristics of each occupant may be the characteristic of the entire occupant. Further, an average characteristic may be calculated from the detected characteristics of each occupant, and the characteristics may be used as the characteristics of the entire occupant. Then, the in-vehicle system 100 may search the emotion vector DB 70 provided corresponding to the occupant showing the same or similar characteristics as the characteristics of the entire occupant. Then, the emotion vector DB 70 found by the search may be used for selecting the stimulus to be given to the entire occupant.
車載システム100は、S220において、該感情ベクトルDB70を用いて、複数の乗員全体の心身状態を開始状態Aから目標状態Bまで変化させ得る刺激パターンを選択しても良い。そして、選択した刺激パターンを構成する少なくとも1つの刺激は、S230において、乗員全体に対して与えられても良い。 In S220, the in-vehicle system 100 may select a stimulation pattern that can change the mental and physical states of the entire plurality of occupants from the start state A to the target state B by using the emotion vector DB 70. Then, at least one stimulus constituting the selected stimulus pattern may be given to the entire occupant in S230.
また、車載システム100は、S225及びS235において、各乗員の心身状態を示す快適度及び覚醒度を推定し、快適度及び覚醒度それぞれの平均値を算出しても良い。そして、車載システム100は、S225における該平均値を複数の乗員全体の第1心身状態を示す指標の値とし、S235における該平均値を複数の乗員全体の第2心身状態を示す指標の値として用いても良い。 Further, in S225 and S235, the in-vehicle system 100 may estimate the comfort level and the arousal level indicating the mental and physical states of each occupant, and calculate the average value of the comfort level and the arousal level. Then, the in-vehicle system 100 uses the average value in S225 as the value of the index indicating the first mental and physical condition of the entire plurality of occupants, and the average value in S235 as the value of the index indicating the second mental and physical condition of the entire plurality of occupants. You may use it.
(7f)上記実施形態における1つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、1つの構成要素が有する1つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、1つの構成要素によって実現したり、複数の構成要素によって実現される1つの機能を、1つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。 (7f) A plurality of functions possessed by one component in the above embodiment may be realized by a plurality of components, or one function possessed by one component may be realized by a plurality of components. .. Further, a plurality of functions possessed by the plurality of components may be realized by one component, or one function realized by the plurality of components may be realized by one component. Further, a part of the configuration of the above embodiment may be omitted. In addition, at least a part of the configuration of the above embodiment may be added or replaced with the configuration of the other above embodiment.
(7g)上述した車載システム100の他、該車載システム100としてコンピュータを機能させるためのプログラム、車載システム100による最適化の方法など、種々の形態で本開示を実現することもできる。 (7g) In addition to the above-described in-vehicle system 100, the present disclosure can be realized in various forms such as a program for operating a computer as the in-vehicle system 100 and an optimization method by the in-vehicle system 100.
[5.文言の対応関係]
本実施形態において、カメラ2及び心拍センサ3が、検出部の一例に相当する。また、車内通信部12が、特定部の一例に相当する。さらに、改善処理におけるS200が、設定部に相当する。また、S210、S225、及びS235が、推定部に相当する。また、S220が、選択部に相当する。さらに、S230が、処理部に相当する。また、S245が、補正部に相当する。
[5. Correspondence of wording]
In the present embodiment, the camera 2 and the heart rate sensor 3 correspond to an example of the detection unit. Further, the in-vehicle communication unit 12 corresponds to an example of a specific unit. Further, S200 in the improvement process corresponds to the setting unit. Further, S210, S225, and S235 correspond to the estimation unit. Further, S220 corresponds to the selection unit. Further, S230 corresponds to the processing unit. Further, S245 corresponds to the correction unit.
1…改善装置、2…カメラ、3…心拍センサ、4…自動運転制御装置、6…サーバ、7…感情ベクトル、10…CPU、11…メモリ、12…車内通信部、13…車外通信部、51…表示装置、52…空調装置、53…振動装置、54…香り発生装置、55…対話部、70…感情ベクトルDB、71…刺激パターン経路、100…車載システム。 1 ... improvement device, 2 ... camera, 3 ... heart rate sensor, 4 ... automatic driving control device, 6 ... server, 7 ... emotion vector, 10 ... CPU, 11 ... memory, 12 ... in-vehicle communication unit, 13 ... out-of-vehicle communication unit, 51 ... Display device, 52 ... Air conditioner, 53 ... Vibration device, 54 ... Fragrance generator, 55 ... Dialogue unit, 70 ... Emotion vector DB, 71 ... Stimulation pattern path, 100 ... In-vehicle system.
Claims (13)
前記乗員の状態を検出する検出部(2,3)と、
前記乗員の状態に基づいて、前記乗員の心身状態を示す複数の指標の値を推定する推定部(S210)と、
前記複数の刺激の各々に対応する感情ベクトル(7)と、前記推定部により推定された前記複数の指標の値とに基づいて、前記複数の刺激の中から、前記乗員に与えられる少なくとも1つの刺激を選択する選択部(S220)と、
前記選択部により選択された前記少なくとも1つの刺激を前記乗員に与えるための処理を行う処理部(S230)と、
を備え、
前記感情ベクトルは、前記乗員に対して当該感情ベクトルに対応する前記刺激が与えられた際に、前記乗員の前記心身状態を示す前記複数の指標の各々の値がどの程度変化するのかを示す、
車載システム。 An in-vehicle system (100) configured to perform processing for giving a plurality of stimuli to a vehicle occupant.
The detection unit (2, 3) that detects the state of the occupant and
An estimation unit (S210) that estimates values of a plurality of indicators indicating the mental and physical condition of the occupant based on the condition of the occupant, and an estimation unit (S210).
Based on the emotional vector (7) corresponding to each of the plurality of stimuli and the values of the plurality of indexes estimated by the estimation unit, at least one of the plurality of stimuli is given to the occupant. A selection unit (S220) for selecting a stimulus and
A processing unit (S230) that performs a process for giving the occupant at least one stimulus selected by the selection unit, and a processing unit (S230).
With
The emotion vector indicates how much the value of each of the plurality of indicators indicating the mental and physical states of the occupant changes when the stimulus corresponding to the emotion vector is given to the occupant.
In-vehicle system.
前記推定部により推定された前記複数の指標の値により示される前記心身状態を、開始状態(A)とし、
前記複数の指標の各々の値が予め定められた範囲となる前記心身状態を、目標状態(B)とし、
前記選択部は、前記目標状態をさらに加味して、前記少なくとも1つの刺激を刺激パターンとして選択し、
前記刺激パターンである前記少なくとも1つの刺激が与えられる期間を、刺激期間とし、
前記刺激パターンとは、前記少なくとも1つの刺激が前記乗員に与えられると、前記刺激期間の開始時に前記開始状態であった前記心身状態が前記目標状態まで変化することを、当該少なくとも1つの刺激に対応する前記感情ベクトルが示すものである、
車載システム。 The in-vehicle system according to claim 1.
The mental and physical state indicated by the values of the plurality of indexes estimated by the estimation unit is defined as the start state (A).
The mental and physical state in which the value of each of the plurality of indexes is within a predetermined range is defined as the target state (B).
The selection unit further takes into account the target state and selects at least one stimulus as the stimulus pattern.
The period during which the at least one stimulus, which is the stimulus pattern, is given is defined as a stimulus period.
The stimulation pattern means that when the at least one stimulus is given to the occupant, the mental and physical state that was the starting state at the start of the stimulating period changes to the target state. The corresponding sentimental vector indicates,
In-vehicle system.
前記車両の制御状態を特定する特定部(12)をさらに備え、
前記選択部は、前記特定部によって特定された前記車両の制御状態に基づき、前記刺激パターンを選択する、
車載システム。 The in-vehicle system according to claim 2.
A specific unit (12) for specifying the control state of the vehicle is further provided.
The selection unit selects the stimulation pattern based on the control state of the vehicle specified by the specific unit.
In-vehicle system.
前記選択部は、前記刺激パターンに含まれる前記少なくとも1つの刺激に対応する前記感情ベクトルに基づき把握される、前記刺激期間におけるそれぞれの前記指標の値の増減の度合いが最も小さい前記刺激パターンを選択する、
車載システム。 The in-vehicle system according to claim 2.
The selection unit selects the stimulus pattern having the smallest degree of increase / decrease in the value of each of the indexes during the stimulus period, which is grasped based on the emotion vector corresponding to the at least one stimulus included in the stimulus pattern. To do,
In-vehicle system.
前記選択部は、予め定められた順番で前記乗員に与えられる前記少なくとも1つの刺激を、前記刺激パターンとして選択し、
前記複数の指標のうちの一部を特定指標とし、
前記選択部は、前記刺激期間において、前記特定指標の値が最も早く予め定められた第1範囲に到達し、前記刺激期間が終了するまで前記特定指標の値が前記第1範囲に維持されることを、前記少なくとも1つの刺激に対応する前記感情ベクトルが示している前記刺激パターンを選択する、
車載システム。 The in-vehicle system according to claim 2.
The selection unit selects at least one stimulus given to the occupant in a predetermined order as the stimulus pattern.
A part of the plurality of indicators is used as a specific index.
In the stimulation period, the selection unit reaches the value of the specific index earliest in the predetermined first range, and the value of the specific index is maintained in the first range until the stimulation period ends. That is, the stimulus pattern indicated by the emotional vector corresponding to the at least one stimulus is selected.
In-vehicle system.
前記選択部は、前記刺激期間に前記心身状態が予め定められた第2範囲に到達しないことを、前記少なくとも1つの刺激に対応する前記感情ベクトルが示している前記刺激パターンを選択する、
車載システム。 The in-vehicle system according to claim 2.
The selection unit selects the stimulus pattern indicated by the emotional vector corresponding to the at least one stimulus that the mental and physical state does not reach a predetermined second range during the stimulus period.
In-vehicle system.
前記目標状態を設定する設定部(S200)をさらに備える、
車載システム。 The in-vehicle system according to any one of claims 2 to 6.
A setting unit (S200) for setting the target state is further provided.
In-vehicle system.
前記複数の指標の各々の値が予め定められた範囲となる領域を、目標領域(C)とし、
前記設定部は、前記目標領域に含まれる前記目標状態を繰り返し設定し、
前記選択部は、前記設定部により新たに前記目標状態が設定されると、該目標状態をさらに加味して、前記少なくとも1つの刺激を前記刺激パターンとして選択し、
前記処理部は、前記選択部により新たに前記少なくとも1つの刺激が選択されると、該少なくとも1つの刺激を前記乗員に与えるための処理を行い、
前記設定部は、前記刺激パターンである前記少なくとも1つの刺激が前記乗員に与えられた後に、当該刺激パターンが選択された際に加味された前記目標状態とは異なり、かつ、前記目標領域に含まれる前記目標状態を設定する、
車載システム。 The in-vehicle system according to claim 7.
A region in which the values of each of the plurality of indexes are within a predetermined range is defined as a target region (C).
The setting unit repeatedly sets the target state included in the target area, and sets the target state repeatedly.
When the target state is newly set by the setting unit, the selection unit further takes into account the target state and selects at least one stimulus as the stimulus pattern.
When the at least one stimulus is newly selected by the selection unit, the processing unit performs a process for giving the at least one stimulus to the occupant.
The setting unit is different from the target state added when the stimulus pattern is selected after the at least one stimulus which is the stimulus pattern is given to the occupant, and is included in the target region. Set the target state
In-vehicle system.
前記車両の制御状態を特定する特定部をさらに備え、
前記設定部は、前記特定部によって特定された前記車両の制御状態に応じて、前記目標状態を設定する、
車載システム。 The in-vehicle system according to claim 7.
Further provided with a specific unit for specifying the control state of the vehicle,
The setting unit sets the target state according to the control state of the vehicle specified by the specific unit.
In-vehicle system.
前記感情ベクトルを補正する補正部(S245)をさらに備え、
前記推定部(S225,S235)は、前記刺激が与えられる前の前記乗員の前記心身状態である第1心身状態を示す前記複数の指標の値を推定し、前記刺激が与えられた後の前記乗員の前記心身状態である第2心身状態を示す前記複数の指標の値を推定し、
前記補正部は、前記第1心身状態を示す前記複数の指標の値と、前記第2心身状態を示す前記複数の指標の値との差異に基づいて、前記第1心身状態と前記第2心身状態とを示す前記複数の指標の値を推定する際に前記乗員に与えられた前記刺激に対応する前記感情ベクトルを補正する、
車載システム。 The in-vehicle system according to any one of claims 1 to 9.
A correction unit (S245) for correcting the emotion vector is further provided.
The estimation unit (S225, S235) estimates the values of the plurality of indicators indicating the first mental and physical state of the occupant before the stimulus is applied, and after the stimulus is applied, the estimation unit (S225, S235) estimates the values of the plurality of indexes indicating the first mental and physical state. The values of the plurality of indicators indicating the second mental and physical condition, which is the mental and physical condition of the occupant, are estimated.
The correction unit has the first mind-body state and the second mind-body state based on the difference between the values of the plurality of indicators indicating the first mind-body state and the values of the plurality of indicators indicating the second mind-body state. Correcting the emotional vector corresponding to the stimulus given to the occupant when estimating the values of the plurality of indicators indicating the state.
In-vehicle system.
前記検出部は、前記乗員の画像及び前記乗員の心拍数のうちの少なくとも一方を用いて、前記乗員の状態を検出する、
車載システム。 The in-vehicle system according to any one of claims 1 to 10.
The detection unit detects the state of the occupant by using at least one of the image of the occupant and the heart rate of the occupant.
In-vehicle system.
前記複数の刺激の少なくとも一部は、複数の対話刺激であり、
前記複数の対話刺激には、各々に対応する前記感情ベクトルが設けられており、
前記複数の対話刺激の各々は、前記乗員に対し対話を行うため、固有の内容を有する少なくとも1つのメッセージを提示する、
車載システム。 The in-vehicle system according to any one of claims 1 to 11.
At least a part of the plurality of stimuli is a plurality of dialogue stimuli.
The plurality of dialogue stimuli are provided with the emotional vectors corresponding to each of the plurality of dialogue stimuli.
Each of the plurality of dialogue stimuli presents at least one message having a unique content in order to interact with the occupant.
In-vehicle system.
前記複数の指標のうちの1つは、前記乗員の快適さの度合いを示す快適度であり、前記複数の指標のうちのもう1つは、前記乗員が覚醒した度合いを示す覚醒度である、
車載システム。 The in-vehicle system according to any one of claims 1 to 12.
One of the plurality of indicators is the comfort level indicating the degree of comfort of the occupant, and the other of the plurality of indicators is the arousal level indicating the degree of awakening of the occupant.
In-vehicle system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019124510A JP2021012409A (en) | 2019-07-03 | 2019-07-03 | On-vehicle system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019124510A JP2021012409A (en) | 2019-07-03 | 2019-07-03 | On-vehicle system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021012409A true JP2021012409A (en) | 2021-02-04 |
Family
ID=74228003
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019124510A Ceased JP2021012409A (en) | 2019-07-03 | 2019-07-03 | On-vehicle system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2021012409A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022201364A1 (en) * | 2021-03-24 | 2022-09-29 | 日本電気株式会社 | Information processing device, control method, and storage medium |
JP2022189185A (en) * | 2021-06-10 | 2022-12-22 | 株式会社ソケッツ | Suggestion device and method |
WO2023276636A1 (en) * | 2021-06-29 | 2023-01-05 | パナソニックIpマネジメント株式会社 | Environment control apparatus, environment control method, and environment control program |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007130454A (en) * | 2005-10-14 | 2007-05-31 | Mitsubishi Chemicals Corp | Device for regulating psychosomatic situation of transfer boarding person and method for controlling the device for regulating psychosomatic situation |
JP2018025870A (en) * | 2016-08-08 | 2018-02-15 | 株式会社デンソー | Driving support system |
JP2018086135A (en) * | 2016-11-29 | 2018-06-07 | マツダ株式会社 | Operation support system |
JP2018169906A (en) * | 2017-03-30 | 2018-11-01 | パナソニックIpマネジメント株式会社 | Dozing prevention device, doze prevention method, and program |
JP2018206198A (en) * | 2017-06-07 | 2018-12-27 | トヨタ自動車株式会社 | Awakening support device and awakening support method |
JP2019016971A (en) * | 2017-07-10 | 2019-01-31 | パイオニア株式会社 | Sound output device |
-
2019
- 2019-07-03 JP JP2019124510A patent/JP2021012409A/en not_active Ceased
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007130454A (en) * | 2005-10-14 | 2007-05-31 | Mitsubishi Chemicals Corp | Device for regulating psychosomatic situation of transfer boarding person and method for controlling the device for regulating psychosomatic situation |
JP2018025870A (en) * | 2016-08-08 | 2018-02-15 | 株式会社デンソー | Driving support system |
JP2018086135A (en) * | 2016-11-29 | 2018-06-07 | マツダ株式会社 | Operation support system |
JP2018169906A (en) * | 2017-03-30 | 2018-11-01 | パナソニックIpマネジメント株式会社 | Dozing prevention device, doze prevention method, and program |
JP2018206198A (en) * | 2017-06-07 | 2018-12-27 | トヨタ自動車株式会社 | Awakening support device and awakening support method |
JP2019016971A (en) * | 2017-07-10 | 2019-01-31 | パイオニア株式会社 | Sound output device |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022201364A1 (en) * | 2021-03-24 | 2022-09-29 | 日本電気株式会社 | Information processing device, control method, and storage medium |
JP2022189185A (en) * | 2021-06-10 | 2022-12-22 | 株式会社ソケッツ | Suggestion device and method |
JP7427177B2 (en) | 2021-06-10 | 2024-02-05 | 株式会社ソケッツ | Proposed device and method |
WO2023276636A1 (en) * | 2021-06-29 | 2023-01-05 | パナソニックIpマネジメント株式会社 | Environment control apparatus, environment control method, and environment control program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11195405B2 (en) | Dozing alert apparatus | |
CN108569233B (en) | Sleep assistance device for vehicle, system comprising sleep assistance device, and method for sleep assistance for vehicle | |
US9260013B2 (en) | Awareness level improvement device | |
JP2021012409A (en) | On-vehicle system | |
JP4907443B2 (en) | Driving position control device for vehicle | |
JP5152570B2 (en) | Automotive user hospitality system | |
JP2010186276A (en) | Doze prevention device | |
JP2009048605A (en) | Drowsy driving-preventing device | |
WO2020066757A1 (en) | Dangerous driving prevention device | |
JP7262002B2 (en) | Arousal induction system | |
WO2018179631A1 (en) | Doze prevention device, doze prevention method, and program | |
JP2011159108A (en) | Awakening support device | |
JP4621983B2 (en) | Automotive user hospitality system | |
JP7183782B2 (en) | Emotion estimation device, environment providing system, vehicle, emotion estimation method, and information processing program | |
JP4858072B2 (en) | Information presentation device for drivers | |
JP2011118831A (en) | Awakening support device | |
CN111032135B (en) | Autonomic nerve control device, autonomic nerve control system, and autonomic nerve control method | |
JP2020169956A (en) | Vehicle destination proposal system | |
JP7087286B2 (en) | Awakening maintenance device | |
JP7117221B2 (en) | Sleep suggestion method and sleep suggestion device | |
JP2006031475A (en) | Information providing device and information providing method | |
JP2020100351A (en) | Control device, and device setting change system | |
JP2019012501A (en) | Driving support apparatus, driving support method, and driving support program | |
JP7151603B2 (en) | awakening device | |
US20240217433A1 (en) | Multi-alert posture assisting system in a vehicle seat |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221026 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221213 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230407 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230425 |
|
A045 | Written measure of dismissal of application [lapsed due to lack of payment] |
Free format text: JAPANESE INTERMEDIATE CODE: A045 Effective date: 20230829 |