JP2018120267A - On-vehicle display method and on-vehicle display device - Google Patents

On-vehicle display method and on-vehicle display device Download PDF

Info

Publication number
JP2018120267A
JP2018120267A JP2017009250A JP2017009250A JP2018120267A JP 2018120267 A JP2018120267 A JP 2018120267A JP 2017009250 A JP2017009250 A JP 2017009250A JP 2017009250 A JP2017009250 A JP 2017009250A JP 2018120267 A JP2018120267 A JP 2018120267A
Authority
JP
Japan
Prior art keywords
display
image
vehicle
occupant
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017009250A
Other languages
Japanese (ja)
Other versions
JP6965520B2 (en
Inventor
清水 俊行
Toshiyuki Shimizu
俊行 清水
ルチアン ギョルゲ
Lucian Gheorghe
ルチアン ギョルゲ
義治 紙透
Yoshiharu Kamisuke
義治 紙透
泰宏 松下
Yasuhiro Matsushita
泰宏 松下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2017009250A priority Critical patent/JP6965520B2/en
Publication of JP2018120267A publication Critical patent/JP2018120267A/en
Application granted granted Critical
Publication of JP6965520B2 publication Critical patent/JP6965520B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Navigation (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Instrument Panels (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an on-vehicle display method and an on-vehicle display device that can suppress a degradation of convenience.SOLUTION: An on-vehicle display device comprise: a brain wave sensor 60 for detecting a brain activity of a crew; a display DP visible to the crew; and a controller 10 for determining whether or not the crew feels discomfort on the basis of the brain activity detected by the brain wave sensor 60 when an image is displayed on the display DP, and changes the image displayed on the display DP when it is determined that the crew feels discomfort.SELECTED DRAWING: Figure 1

Description

本発明は、車両の乗員へ提供する画像を制御する、車載用表示方法及び車載用表示装置に関する。   The present invention relates to an in-vehicle display method and an in-vehicle display device that control an image provided to a vehicle occupant.

従来、車両の乗員へ提供する画像を制御する技術として、例えば、特許文献1に記載されている技術がある。特許文献1に記載されている技術では、ディスプレイにナビゲーション画像として表示している情報量が相対的に少なく、且つ画面変化も相対的に少ないときに、ナビゲーション画像に代えて、情報を提供する画像をディスプレイに表示する。   Conventionally, as a technique for controlling an image provided to a vehicle occupant, for example, there is a technique described in Patent Document 1. In the technique described in Patent Document 1, when the amount of information displayed as a navigation image on the display is relatively small and the screen change is relatively small, an image that provides information instead of the navigation image Appears on the display.

特開2005−009991号公報JP 2005-009991 A

しかしながら、ディスプレイに表示する情報量は、運転負荷等によって見やすさが変わる。このため、特許文献1に記載されている技術では、乗員の状態によっては情報が煩雑になり、利便性が低下する場合があるという問題点があった。
本発明は、上記のような問題点に着目してなされたもので、利便性の低下を抑制することが可能な、車載用表示方法及び車載用表示装置を提供することを目的とする。
However, the amount of information displayed on the display changes depending on the driving load and the like. For this reason, in the technique described in Patent Document 1, there is a problem that information becomes complicated depending on the state of the occupant, and convenience may be reduced.
The present invention has been made paying attention to the above-described problems, and an object thereof is to provide an in-vehicle display method and an in-vehicle display device that can suppress a decrease in convenience.

本発明の一態様によれば、車両の乗員が視認可能なディスプレイに画像を表示しているときに検出した乗員の脳活動から、乗員の違和感が有ると判定すると、ディスプレイに表示している画像を変更する。   According to one aspect of the present invention, when it is determined that there is a sense of incongruity of the occupant from the brain activity of the occupant detected when the image is displayed on a display that is visible to the occupant of the vehicle, the image displayed on the display To change.

本発明によれば、ディスプレイに表示している画像に対して乗員の違和感が有ると、ディスプレイに表示している画像を変更することで、利便性の低下を抑制することが可能な、車載用表示方法及び車載用表示装置を提供することが可能となる。   According to the present invention, when there is a sense of incongruity with an occupant with respect to an image displayed on the display, the deterioration of convenience can be suppressed by changing the image displayed on the display. It becomes possible to provide a display method and a vehicle-mounted display device.

本発明の第一実施形態の車載用表示装置の構成を表すブロック図である。It is a block diagram showing the structure of the vehicle-mounted display apparatus of 1st embodiment of this invention. 脳波測定の一例を表す説明図である。It is explanatory drawing showing an example of an electroencephalogram measurement. 眼球近くの皮膚に置いた電極で測定した電位の変化を表す図である。It is a figure showing the change of the electric potential measured with the electrode put on the skin near the eyeball. 情報量を減少させる処理を行う前の画像を表す図である。It is a figure showing the image before performing the process which reduces information amount. 図4Aに表す画像に対して、情報量を減少させる処理を行った画像を表す図である。It is a figure showing the image which performed the process which reduces information amount with respect to the image shown to FIG. 4A. 本発明の第一実施形態の表示制御処理を表すフローチャートである。It is a flowchart showing the display control process of 1st embodiment of this invention. 本発明の第一実施形態の変形例を表す図であり、情報量を減少させる処理を行う前の画像を表す図である。It is a figure showing the modification of 1st embodiment of this invention, and is a figure showing the image before performing the process which reduces information content. 本発明の第一実施形態の変形例を表す図であり、図6Aに表す画像に対して、情報量を減少させる処理を行った画像を表す図である。It is a figure showing the modification of 1st embodiment of this invention, and is a figure showing the image which performed the process which reduces information amount with respect to the image shown to FIG. 6A. 本発明の第二実施形態の車載用表示装置の構成を表すブロック図である。It is a block diagram showing the structure of the vehicle-mounted display apparatus of 2nd embodiment of this invention. 本発明の第二実施形態の表示制御処理を表すフローチャートである。It is a flowchart showing the display control process of 2nd embodiment of this invention. 本発明の第三実施形態の表示制御処理を表すフローチャートである。It is a flowchart showing the display control process of 3rd embodiment of this invention. 視認性調整処理を表すフローチャートである。It is a flowchart showing visibility adjustment processing. 情報量調整処理を表すフローチャートである。It is a flowchart showing an information amount adjustment process. 表示内容調整処理を表すフローチャートである。It is a flowchart showing a display content adjustment process.

以下に、図面を参照して、本発明の実施形態を説明する。以下の図面の記載において、同一または類似の部分には、同一または類似の符号を付与している。ただし、図面は模式的なものである。また、図面相互間においても、互いの寸法の関係や比率が異なる部分が含まれていることは勿論である。また、以下に示す実施形態は、本発明の技術的思想を具体化するための装置や方法を例示するものであって、本発明の技術的思想は、構成部品の材質、形状、構造、配置等を下記のものに特定するものではない。本発明の技術的思想は、特許請求の範囲に記載された請求項が規定する技術的範囲内において、種々の変更を加えることが可能である。   Embodiments of the present invention will be described below with reference to the drawings. In the following description of the drawings, the same or similar reference numerals are given to the same or similar parts. However, the drawings are schematic. Moreover, it is a matter of course that the drawings include portions having different dimensional relationships and ratios. Further, the following embodiments exemplify apparatuses and methods for embodying the technical idea of the present invention, and the technical idea of the present invention is the material, shape, structure, and arrangement of components. Etc. are not specified as follows. The technical idea of the present invention can be variously modified within the technical scope defined by the claims described in the claims.

(第一実施形態)
以下、本発明の第一実施形態について、図面を参照しつつ説明する。
(車載用表示装置の構成)
図1から図4を用いて、車載用表示装置1の構成について説明する。
車載用表示装置1は、車両に搭載されており、図1に表すように、周囲状況センサ2と、運転状態センサ4と、生体情報センサ6と、ディスプレイDPと、スピーカSPと、コントローラ10と、を備える。
周囲状況センサ2は、車両の周囲状況を検出し、検出した周囲状況を示す情報を、逐次、コントローラ10に出力する。周囲状況センサ2は、例えば、車両の周囲状況の情報をそれぞれ取得する複数のセンサを備える。第一実施形態では、一例として、周囲状況センサ2が、地図データベース20と、GPS受信機22と、通信機24と、を備える場合について説明する。
(First embodiment)
Hereinafter, a first embodiment of the present invention will be described with reference to the drawings.
(Configuration of in-vehicle display device)
The configuration of the in-vehicle display device 1 will be described with reference to FIGS.
The in-vehicle display device 1 is mounted on a vehicle, and as shown in FIG. 1, an ambient condition sensor 2, an operation state sensor 4, a biological information sensor 6, a display DP, a speaker SP, a controller 10, and the like. .
The ambient condition sensor 2 detects the ambient condition of the vehicle, and sequentially outputs information indicating the detected ambient condition to the controller 10. The ambient condition sensor 2 includes, for example, a plurality of sensors that respectively acquire information on the ambient condition of the vehicle. In the first embodiment, as an example, a case will be described in which the ambient condition sensor 2 includes a map database 20, a GPS receiver 22, and a communication device 24.

地図データベース20は、地図データを格納する記憶装置である。地図データベース20は、例えば、半導体メモリやディスクメディア等の記憶媒体から構成される。地図データベース20は、曲率や幅を含む道路形状、道路種別、車線数等の一般的なカーナビゲーション装置における地図データに加えて、車線境界線の位置、通行帯区分、道路周辺の地物の位置及び形状等に関する情報を含む高精細な地図データを格納する。
GPS受信機22は、人工衛星から受信する電波に基づいて、車両の緯度、経度及び高度を算出し、地図データベース20に格納される地図データと整合させることにより、地図データにおける車両の現在位置を取得する。すなわち、GPS受信機22は、地図データベース20と共に、地図データにおける車両の現在位置を検出する測位装置を構成する。
The map database 20 is a storage device that stores map data. The map database 20 is composed of a storage medium such as a semiconductor memory or a disk medium, for example. In addition to map data in a general car navigation system such as a road shape including curvature and width, road type, number of lanes, etc., the map database 20 includes the position of the lane boundary, the traffic zone classification, and the position of the features around the road. In addition, high-definition map data including information on the shape and the like is stored.
The GPS receiver 22 calculates the latitude, longitude, and altitude of the vehicle based on the radio wave received from the artificial satellite, and matches the map data stored in the map database 20 to determine the current position of the vehicle in the map data. get. That is, the GPS receiver 22 and the map database 20 constitute a positioning device that detects the current position of the vehicle in the map data.

通信機24は、無線通信により、外部から車両の周囲状況を取得する通信インターフェースである。通信機24は、例えば、車線単位の渋滞情報、交通規制情報等の交通情報や、天気情報等をリアルタイムに送信する高度道路交通システム(ITS)から、種々の情報を受信し得る。ITSは、車々間通信、路車間通信、VICS(登録商標)(Vehicle Information and Communication System)、テレマティクス等を含む。通信機24は、例えば、車々間通信により、車両の周囲の他車両の加減速度や、車両に対する相対位置等を検出する。   The communicator 24 is a communication interface that acquires the surrounding situation of the vehicle from the outside by wireless communication. The communication device 24 can receive various information from, for example, an intelligent road traffic system (ITS) that transmits traffic information such as traffic congestion information and traffic regulation information in lane units, weather information, and the like in real time. ITS includes inter-vehicle communication, road-to-vehicle communication, VICS (registered trademark) (Vehicle Information and Communication System), telematics, and the like. The communicator 24 detects the acceleration / deceleration of other vehicles around the vehicle, the relative position with respect to the vehicle, and the like, for example, by inter-vehicle communication.

運転状態センサ4は、車両の運転状態を検出し、検出した運転状態を示す情報を、逐次、コントローラ10に出力する。運転状態センサ4は、例えば、車両の運転状態の情報をそれぞれ取得する複数のセンサから構成される。第一実施形態では、一例として、運転状態センサ4が、アクセル開度センサ40と、ブレーキスイッチ42と、ステアリング操作量センサ44と、を備える場合について説明する。
アクセル開度センサ40は、例えば車両のアクセルペダルの踏み込み量から、車両のアクセル開度を検出する。ブレーキスイッチ42は、運転者による車両のブレーキの操作状態、すなわち、ブレーキの作動状態を検出する。ステアリング操作量センサ44は、車両のステアリングホイールの操作角、または、操向輪の操舵角を検出する。
The driving state sensor 4 detects the driving state of the vehicle, and sequentially outputs information indicating the detected driving state to the controller 10. The driving state sensor 4 is composed of, for example, a plurality of sensors that respectively acquire information on the driving state of the vehicle. In the first embodiment, as an example, a case in which the driving state sensor 4 includes an accelerator opening sensor 40, a brake switch 42, and a steering operation amount sensor 44 will be described.
The accelerator opening sensor 40 detects the accelerator opening of the vehicle from the amount of depression of the accelerator pedal of the vehicle, for example. The brake switch 42 detects the operating state of the vehicle brake by the driver, that is, the operating state of the brake. The steering operation amount sensor 44 detects the operation angle of the steering wheel of the vehicle or the steering angle of the steering wheel.

生体情報センサ6は、車両の乗員(運転者)の生体情報を検出し、検出した生体情報を、逐次、コントローラ10に出力する。乗員の生体情報は、脳の活動情報を含み、乗員が感じる違和感を推定可能な生体情報である。なお、乗員の生体情報は、乗員の脳波、脳血流、心拍数、呼吸、発汗量及び顔画像のうち少なくとも一つに基づいて、検出することが可能である。これらの生体情報のうち、脳波や脳血流より乗員の脳活動を検出する。第一実施形態では、一例として、生体情報センサ6が、脳波センサ60と、カメラ62と、心拍センサ64と、を備える場合について説明する。   The biological information sensor 6 detects biological information of a vehicle occupant (driver) and sequentially outputs the detected biological information to the controller 10. The occupant's biological information is biological information that includes brain activity information and can estimate a sense of discomfort felt by the occupant. The biometric information of the occupant can be detected based on at least one of the occupant's brain wave, cerebral blood flow, heart rate, respiration, perspiration, and face image. Among these biological information, the brain activity of the occupant is detected from the electroencephalogram and cerebral blood flow. In the first embodiment, a case where the biological information sensor 6 includes an electroencephalogram sensor 60, a camera 62, and a heart rate sensor 64 will be described as an example.

脳波センサ60は、乗員の脳波を、車両の運転中にリアルタイムで検出するセンサである。また、脳波センサ60は、乗員の頭部に取り付ける複数の電極を備える。複数の電極は、例えば、国際10−20法に準拠し、図2中に表すように、乗員の頭頂部のうち、認知機能に関わる位置である、Fz,Fcz,Cz,CPzに配置する。図2中では、Fz,Fcz,Cz,CPzに配置した電極8を、それぞれ、電極8Fz,電極8Fcz,電極8Cz,電極8CPzと表す。なお、複数の電極8は、乗員の頭部に配置しやすいように、例えば、装着型の電極帽子やヘッドホンで形成してもよく、また、ヘッドレストに設けられた複数の電極で形成してもよい。   The electroencephalogram sensor 60 is a sensor that detects an occupant's electroencephalogram in real time during driving of the vehicle. The electroencephalogram sensor 60 includes a plurality of electrodes attached to the head of the occupant. The plurality of electrodes are arranged at Fz, Fcz, Cz, CPz, which are positions related to the cognitive function, in the top of the occupant as shown in FIG. 2, for example, in accordance with the International 10-20 Law. In FIG. 2, the electrodes 8 arranged on Fz, Fcz, Cz, and CPz are represented as an electrode 8Fz, an electrode 8Fcz, an electrode 8Cz, and an electrode 8CPz, respectively. The plurality of electrodes 8 may be formed of, for example, a wearable electrode cap or headphones, or may be formed of a plurality of electrodes provided on the headrest so as to be easily placed on the head of the passenger. Good.

カメラ62は、車両Pの車室内において、乗員(運転者)の顔を正面から撮影する位置に配置され、例えば、CCDカメラや、近赤外LEDと赤外線カメラとの組み合わせ等を用いることが可能である。カメラ62は、乗員の視線、表情、動作等を検出するために、乗員の画像を撮像する。
心拍センサ64は、心拍数センサは、乗員の心拍数を、車両の運転中にリアルタイムで測定するセンサであり、車両が備えるステアリングや座席に取り付ける電極を備える。また、心拍センサ64は、車両の乗員に対し、乗員(運転者)が受ける運転負荷(運転ワークロード)を推定可能な生体情報として、乗員の心拍数を測定する。
The camera 62 is disposed at a position where the face of the occupant (driver) is photographed from the front in the passenger compartment of the vehicle P. For example, a CCD camera or a combination of a near infrared LED and an infrared camera can be used. It is. The camera 62 captures an image of the occupant in order to detect the sight line, facial expression, movement, etc. of the occupant.
The heart rate sensor 64 is a sensor that measures the occupant's heart rate in real time during driving of the vehicle, and includes an electrode attached to a steering and a seat provided in the vehicle. The heart rate sensor 64 measures the occupant's heart rate as biometric information that can estimate the driving load (driving workload) received by the occupant (driver) with respect to the occupant of the vehicle.

ディスプレイDPは、コントローラ10に接続されており、乗員が視認可能となるように、車室内のコンソール等に配置されている。なお、ディスプレイDPとしては、例えば、ナビゲーションシステムが備えるディスプレイや、インストルメントパネルに配置されたディスプレイを用いる。また、ディスプレイDPは、コントローラ10から出力画像信号(後述)の入力を受けると、出力画像信号が含む画像(ナビゲーション画像等)を表示する。
スピーカSPは、コントローラ10に接続されており、車室内のコンソール等に配置されている。また、スピーカSPは、出力画像信号が含む画像(ナビゲーション画像等)に応じた音声を出力する。
The display DP is connected to the controller 10 and is disposed on a console or the like in the vehicle cabin so that the occupant can visually recognize the display DP. As the display DP, for example, a display provided in the navigation system or a display arranged on the instrument panel is used. Further, when receiving an output image signal (described later) from the controller 10, the display DP displays an image (navigation image or the like) included in the output image signal.
The speaker SP is connected to the controller 10 and is disposed on a console or the like in the vehicle interior. The speaker SP outputs sound corresponding to an image (navigation image or the like) included in the output image signal.

コントローラ10は、例えば、マイクロコンピュータで構成する。マイクロコンピュータは、例えば、CPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)等を備えた構成である。
なお、図1にはコントローラ10の機能構成例を示す。コントローラ10は、ROMに格納されたコンピュータプログラムをCPUで実現することにより、脳情報取得部10Aと、注意状態取得部10Bと、違和感データベース10Cと、違和感判定部10Dと、表示状態取得部10Eと、情報量判定部10Fと、画像制御部10Gの機能を実現する。
The controller 10 is composed of a microcomputer, for example. The microcomputer has, for example, a configuration including a CPU (Central Processing Unit), a RAM (Random Access Memory), a ROM (Read Only Memory), and the like.
FIG. 1 shows a functional configuration example of the controller 10. The controller 10 implements a computer program stored in the ROM with a CPU, thereby providing a brain information acquisition unit 10A, a caution state acquisition unit 10B, a discomfort database 10C, a discomfort determination unit 10D, and a display state acquisition unit 10E. The functions of the information amount determination unit 10F and the image control unit 10G are realized.

脳情報取得部10Aは、生体情報センサ6から入力を受けた生体情報を用いて、乗員の脳情報を取得する。乗員の脳情報を取得した脳情報取得部10Aは、取得した脳情報を含む情報信号(以降の説明では、「脳情報信号」と記載する場合がある)を、違和感判定部10Dへ出力する。第一実施形態では、乗員の生体情報として、複数の電極8で測定した、乗員の脳波のパターンを取得する場合について説明する。したがって、脳情報信号は、複数の電極8で測定した脳波のパターンを含む。
注意状態取得部10Bは、乗員の注意状態を測定する。乗員の注意状態を測定した注意状態取得部10Bは、測定した注意状態を含む情報信号(以降の説明では、「注意状態信号」と記載する場合がある)を、違和感判定部10Dへ出力する。乗員の注意状態は、乗員の注意がディスプレイDPの画面へ向いたことを推定可能な生体情報である。また、乗員の注意状態は、乗員の脳波に応じた眼電図及び顔画像のうち少なくとも一方を用いて、検出することが可能である。
The brain information acquisition unit 10 </ b> A acquires the brain information of the occupant using the biological information received from the biological information sensor 6. The brain information acquisition unit 10A that has acquired the brain information of the occupant outputs an information signal including the acquired brain information (may be described as “brain information signal” in the following description) to the discomfort determination unit 10D. 1st embodiment demonstrates the case where the pattern of the brain wave of a passenger | crew measured with the some electrode 8 is acquired as a biological information of a passenger | crew. Therefore, the brain information signal includes an electroencephalogram pattern measured by the plurality of electrodes 8.
The attention state acquisition unit 10B measures the attention state of the occupant. The attention state acquisition unit 10B that measures the attention state of the occupant outputs an information signal including the measured attention state (in the following description, may be described as “attention state signal”) to the uncomfortable feeling determination unit 10D. The occupant's attention state is biological information that can be estimated that the occupant's attention is directed to the screen of the display DP. The caution state of the occupant can be detected using at least one of an electrooculogram and a face image corresponding to the occupant's brain wave.

眼電図は、眼球前後間で発生する定常電位の記録や、眼球運動に相関する電位の変化を表す図であり、眼球近くの皮膚に配置した電極(例えば、図2中で位置Fzに配置した電極8Fz)で測定する。第一実施形態では、一例として、注意状態取得部10Bの構成を、脳波センサ60により検出した脳波に応じた眼電図を用いて、乗員の注意状態を測定する構成とした場合を説明する。眼電図を用いて注意状態を測定する際には、例えば、図3中に表すように、電極8Fzで測定した電位Vの変化を計測し、混入する眼電図の動きから、眼球が停留していることを表す電位Vを検出する。なお、図3中には、眼球が停留していることを表す電位Vを検出した時点を、符号PTで表す。   The electrooculogram is a diagram showing a recording of a steady potential generated between before and after the eyeball and a change in potential correlated with eye movement, and an electrode placed on the skin near the eyeball (for example, placed at a position Fz in FIG. 2). Electrode 8Fz). In the first embodiment, as an example, the case where the configuration of the attention state acquisition unit 10B is configured to measure the attention state of the occupant using an electrocardiogram corresponding to the electroencephalogram detected by the electroencephalogram sensor 60 will be described. When the attention state is measured using an electrooculogram, for example, as shown in FIG. 3, the change in the potential V measured by the electrode 8Fz is measured, and the eyeball is stopped from the movement of the mixed electrooculogram. A potential V indicating that the current is being detected is detected. In FIG. 3, the point in time when the potential V indicating that the eyeball is stationary is detected by the symbol PT.

違和感データベース10Cには、乗員の違和感を検出するために使用される脳波パターンが記憶されている。違和感データベース10Cに記憶されている脳波パターンは、過去に乗員の違和感が有ると判定したときの脳波パターンである。すなわち、違和感データベース10Cには、過去に違和感が有ると判定したときの脳活動を蓄積しておく。
違和感判定部10Dは、脳情報信号と注意状態信号の入力を受ける。そして、時点PTの注意状態を含む注意状態信号の入力を受けたタイミングで、脳情報信号が含む脳波のパターン、すなわち、リアルタイムで測定された脳波のパターンのうち、時点PTにおける脳波のパターンを参照する。さらに、時点PTにおける脳波のパターンを、違和感データベース10Cに記憶されている脳波パターンに照合することで、乗員が受ける違和感の有無(違和感を覚えているか否か)を判定する。違和感の有無を判定した違和感判定部10Dは、判定結果を含む情報信号(以降の説明では、「違和感判定信号」と記載する場合がある)を、情報量判定部10Fと画像制御部10Gへ出力する。なお、違和感判定部10Dは、例えば、時点PTにおける脳波のパターンと、違和感データベース10Cに記憶されている脳波パターンとの合致度が、予め設定した合致度閾値よりも高い場合に、違和感が有ると判定する。
In the discomfort database 10C, an electroencephalogram pattern used for detecting the discomfort of the occupant is stored. The electroencephalogram pattern stored in the sense of incongruity database 10C is an electroencephalogram pattern when it is determined that the passenger has a sense of discomfort in the past. That is, the brain activity when it is determined that there is a sense of discomfort in the past is stored in the discomfort database 10C.
The discomfort determination unit 10D receives the brain information signal and the attention state signal. Then, at the timing of receiving the attention state signal including the attention state at the time point PT, refer to the brain wave pattern included in the brain information signal, that is, the brain wave pattern at the time point PT among the brain wave patterns measured in real time. To do. Further, by comparing the electroencephalogram pattern at the time point PT with the electroencephalogram pattern stored in the uncomfortable feeling database 10C, it is determined whether or not the occupant feels uncomfortable (whether or not the uncomfortable feeling is felt). The discomfort determination unit 10D that has determined whether or not there is a discomfort outputs an information signal including the determination result (may be described as “discomfort determination signal” in the following description) to the information amount determination unit 10F and the image control unit 10G. To do. The discomfort determination unit 10D determines that there is discomfort, for example, when the degree of match between the brain wave pattern at the time point PT and the brain wave pattern stored in the discomfort database 10C is higher than a preset match degree threshold. judge.

すなわち、違和感データベース10Cには、過去に違和感が有ると判定したときの脳活動を蓄積しておく。そして、違和感判定部10Dは、脳情報取得部10Aで検出した脳情報と違和感データベース10Cに蓄積している脳情報との比較に応じて、違和感の有無を判定する。
表示状態取得部10Eは、ディスプレイDPに表示されている画像の表示状態を取得する。表示状態を取得した表示状態取得部10Eは、取得した表示状態を含む情報信号(以降の説明では、「表示状態信号」と記載する場合がある)を、情報量判定部10Fへ出力する。第一実施形態では、一例として、表示状態取得部10Eが取得する表示状態を、ディスプレイDPに表示されている画像が含む文字数とした場合について説明する。
That is, the brain activity when it is determined that there is a sense of discomfort in the past is stored in the discomfort database 10C. Then, the discomfort determination unit 10D determines the presence or absence of discomfort according to the comparison between the brain information detected by the brain information acquisition unit 10A and the brain information stored in the discomfort database 10C.
The display state acquisition unit 10E acquires the display state of the image displayed on the display DP. The display state acquisition unit 10E that acquired the display state outputs an information signal including the acquired display state (may be described as “display state signal” in the following description) to the information amount determination unit 10F. In the first embodiment, as an example, a case will be described in which the display state acquired by the display state acquisition unit 10E is the number of characters included in the image displayed on the display DP.

情報量判定部10Fは、予め設定した情報量閾値α1を記憶している。第一実施形態では、表示状態を文字数とするため、情報量閾値α1は、予め設定した文字数である。また、情報量判定部10Fは、違和感判定結果信号と表示状態信号の入力を受ける。そして、違和感判定結果信号が、違和感が有るとの判定結果を含む場合、表示状態信号が含む文字数が、情報量閾値α1を超えているか否かを判定する。文字数が情報量閾値α1を超えているか否かを判定した情報量判定部10Fは、判定結果を含む情報信号(以降の説明では、「情報量判定信号」と記載する場合がある)を、画像制御部10Gへ出力する。   The information amount determination unit 10F stores a preset information amount threshold value α1. In the first embodiment, since the display state is the number of characters, the information amount threshold α1 is a preset number of characters. Further, the information amount determination unit 10F receives an input of the uncomfortable feeling determination result signal and the display state signal. Then, when the uncomfortable feeling determination result signal includes a determination result that there is an uncomfortable feeling, it is determined whether or not the number of characters included in the display state signal exceeds the information amount threshold value α1. The information amount determination unit 10F that has determined whether or not the number of characters exceeds the information amount threshold value α1 uses the information signal including the determination result (in the following description, may be described as “information amount determination signal”) as an image. Output to the control unit 10G.

なお、情報量閾値α1の設定は、例えば、以下の手順で行う。
当初(出荷時等)は、一般的に表示される全国平均のデータ等の情報量(文字数)を設定しておく。そして、違和感が有るとの判定結果を取得した時点で、その時点の情報量(文字数)に情報量閾値α1を加算した値の平均値を、次回以降に情報量判定部10Fで用いる情報量閾値α1として設定(更新)する。
画像制御部10Gは、違和感判定信号と情報量判定信号の入力を受け、入力装置IFから指令信号の入力を受ける。そして、違和感判定信号、情報量判定信号、指令信号に応じて出力画像信号を生成し、生成した出力画像信号を、ディスプレイDPに出力する。
入力装置IFは、例えば、ナビゲーションシステムのタッチパネル(ディスプレイDPと兼用)である。また、入力装置IFとしては、例えば、リモコン等を用いることも可能である。指令信号は、例えば、乗員が目的地を入力した場合に、現在地から目的地へのナビゲーション画像をディスプレイDPに出力させるための信号である。
The information amount threshold value α1 is set by the following procedure, for example.
Initially (at the time of shipment, etc.), an information amount (number of characters) such as nationwide average data generally displayed is set. Then, when the determination result that there is a sense of incongruity is acquired, the average value of the value obtained by adding the information amount threshold value α1 to the information amount (number of characters) at that time is the information amount threshold value used in the information amount determination unit 10F after the next time. Set (update) as α1.
The image control unit 10G receives a sense of incongruity determination signal and an information amount determination signal, and receives a command signal from the input device IF. Then, an output image signal is generated according to the unnaturalness determination signal, the information amount determination signal, and the command signal, and the generated output image signal is output to the display DP.
The input device IF is, for example, a navigation system touch panel (also used as a display DP). Further, as the input device IF, for example, a remote controller or the like can be used. The command signal is, for example, a signal for causing the display DP to output a navigation image from the current location to the destination when the occupant inputs the destination.

出力画像信号の生成は、以下の手順で行う。
違和感判定結果信号が、違和感が無いとの判定結果を含む場合、指令信号に応じて、例えば、ナビゲーション画像等をディスプレイDPに表示させるための出力画像信号を生成する。
違和感判定結果信号が、違和感が有るとの判定結果を含む場合、情報量判定信号に応じて、ディスプレイDPに表示されている画像の情報量を制御するための出力画像信号を生成する。具体的には、情報量判定信号が、表示状態信号が含む文字数が情報量閾値α1を超えているとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を減少させる出力画像信号を生成する。第一実施形態では、表示状態を文字数とするため、ディスプレイDPに表示されている画像の情報量を減少させる処理は、例えば、図4中に表すように、ディスプレイDPに表示されている画像が含む文字数を減少させる処理である。なお、図4Aは、情報量を減少させる処理を行う前の画像(処理前の画像)を表す図である。また、図4Bは、図4Aに表す画像に対して、情報量を減少させる処理を行った画像(処理後の画像)を表す図である。一方、情報量判定信号が、表示状態信号が含む文字数が情報量閾値α1以下であるとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を増加させる出力画像信号を生成する。第一実施形態では、表示状態を文字数とするため、ディスプレイDPに表示されている画像の情報量を増加させる処理は、ディスプレイDPに表示されている画像が含む文字数を増加させる処理である。
The output image signal is generated in the following procedure.
When the uncomfortable feeling determination result signal includes a determination result that there is no uncomfortable feeling, for example, an output image signal for displaying a navigation image or the like on the display DP is generated according to the command signal.
When the uncomfortable feeling determination result signal includes a determination result that there is a sense of incongruity, an output image signal for controlling the information amount of the image displayed on the display DP is generated according to the information amount determining signal. Specifically, when the information amount determination signal includes a determination result that the number of characters included in the display state signal exceeds the information amount threshold value α1, an output image that reduces the information amount of the image displayed on the display DP. Generate a signal. In the first embodiment, since the display state is the number of characters, the process of reducing the information amount of the image displayed on the display DP is, for example, as shown in FIG. This is a process to reduce the number of characters included. FIG. 4A is a diagram illustrating an image (an image before the process) before performing the process of reducing the information amount. FIG. 4B is a diagram illustrating an image (processed image) obtained by performing a process of reducing the information amount on the image illustrated in FIG. 4A. On the other hand, when the information amount determination signal includes a determination result that the number of characters included in the display state signal is equal to or less than the information amount threshold value α1, an output image signal that increases the information amount of the image displayed on the display DP is generated. . In the first embodiment, since the display state is the number of characters, the process of increasing the information amount of the image displayed on the display DP is a process of increasing the number of characters included in the image displayed on the display DP.

(車載用表示装置1が行う処理)
図1から図4を参照しつつ、図5を用いて、車載用表示装置1が行う処理の一例を説明する。なお、以降の説明では、車載用表示装置1が行う処理を、「表示制御処理」と記載する場合がある。
図2中に表すように、表示制御処理を開始(START)すると、まず、ステップS100の処理を行う。
ステップS100では、乗員が要求する情報を提供するために、ディスプレイDPに、ナビゲーション画像等を表示する処理(図に表す「ディスプレイ表示」)を行う。ステップS100の処理を行うと、表示制御処理は、ステップS102へ移行する。ステップS102では、違和感の有無を判定するために、違和感判定部10Dにより、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する処理(図に表す「表示中に違和感有り」)を行う。
(Processing performed by the in-vehicle display device 1)
One example of processing performed by the in-vehicle display device 1 will be described with reference to FIGS. 1 to 4 and FIG. In the following description, the process performed by the in-vehicle display device 1 may be referred to as “display control process”.
As shown in FIG. 2, when the display control process is started (START), first, the process of step S100 is performed.
In step S100, in order to provide information required by the occupant, a process of displaying a navigation image or the like on the display DP ("display display" shown in the figure) is performed. When the process of step S100 is performed, the display control process proceeds to step S102. In step S102, in order to determine whether or not there is a sense of discomfort, the discomfort determination unit 10D determines whether or not the occupant feels discomfort with respect to the image displayed on the display DP ("display" shown in the figure). I feel uncomfortable inside ”).

ステップS102において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS104へ移行する。一方、ステップS102において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS100へ移行する。
ステップS104では、画像を変更するためのパラメータを取得するために、表示状態取得部10Eにより、ディスプレイDPに表示されている画像に対し、情報量を取得する処理(図に表す「情報量を取得」)を行う。ステップS104の処理を行うと、表示制御処理は、ステップS106へ移行する。ステップS106では、画像を変更するためのパラメータを取得するために、情報量判定部10Fにより、ステップS104で取得した文字数である情報量が、情報量閾値α1を超えているか否かを判定する処理(図に表す「情報量>情報量閾値α1」)を行う。
If it is determined in step S102 that the occupant is feeling uncomfortable (“Yes” shown in the figure), the display control process proceeds to step S104. On the other hand, if it is determined in step S102 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S100.
In step S104, in order to obtain parameters for changing the image, the display state obtaining unit 10E obtains an information amount for the image displayed on the display DP ("acquire information amount" shown in the figure). ")I do. When the process of step S104 is performed, the display control process proceeds to step S106. In step S106, in order to acquire the parameter for changing the image, the information amount determination unit 10F determines whether the information amount that is the number of characters acquired in step S104 exceeds the information amount threshold α1. ("Information amount> Information amount threshold value α1" shown in the figure) is performed.

ステップS106において、情報量が情報量閾値α1を超えている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS108へ移行する。一方、ステップS106において、情報量が情報量閾値α1以下である(図に表す「No」)と判定した場合、表示制御処理は、ステップS110へ移行する。
ステップS108では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を減少させる処理(図に表す「情報量を減少」)を行う(例えば、図4Aの状態から図4Bの状態へ移行)。これにより、ステップS108では、乗員に提供する情報が煩雑となることを抑制する。ステップS108の処理を行うと、表示制御処理は、ステップS100の処理へ復帰(RETURN)する。
ステップS110では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を増加させる処理(図に表す「情報量を増加」)を行う(例えば、図4Bの状態から図4Aの状態へ移行)。これにより、ステップS110では、運転中の情報取得における利便性を向上させることが可能となる。ステップS110の処理を行うと、表示制御処理は、ステップS100の処理へ復帰(RETURN)する。
If it is determined in step S106 that the information amount exceeds the information amount threshold value α1 (“Yes” shown in the figure), the display control process proceeds to step S108. On the other hand, when it is determined in step S106 that the information amount is equal to or less than the information amount threshold value α1 (“No” shown in the figure), the display control process proceeds to step S110.
In step S108, the image control unit 10G performs a process of reducing the information amount of the image displayed on the display DP ("decrease information amount" shown in the figure) (for example, from the state of FIG. 4A to the state of FIG. 4B). To). Thereby, in step S108, it is suppressed that the information provided to a passenger | crew becomes complicated. If the process of step S108 is performed, the display control process returns to the process of step S100 (RETURN).
In step S110, the image control unit 10G performs a process of increasing the information amount of the image displayed on the display DP ("increase the information amount" shown in the figure) (for example, from the state of FIG. 4B to the state of FIG. 4A). To). Thereby, in step S110, it is possible to improve the convenience in obtaining information during driving. When the process of step S110 is performed, the display control process returns to the process of step S100 (RETURN).

(動作)
図1から図5を参照して、第一実施形態の車載用表示装置1を用いて行なう動作の一例を説明する。
車両の走行時には、脳波センサ60により、乗員の脳波を測定する。これに加え、車両の走行時には、例えば、乗員による入力装置IFの操作に応じて、現在地から目的地までの移動経路を表すナビゲーション画像を、ディスプレイDPに表示する。ディスプレイDPに画像が表示されている状態で、電極8Fzが、眼球が停留していることを表す電位Vを検出すると、違和感判定部10Dが、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する。なお、ディスプレイDPに表示する画像は、乗員による入力装置IFの操作に応じた、手動で提供する画像に限定するものではなく、例えば、観光施設の情報を表す画像等、地図データと車両の現在位置に応じて自動的に提供される画像であってもよい。
(Operation)
With reference to FIGS. 1 to 5, an example of an operation performed using the vehicle-mounted display device 1 of the first embodiment will be described.
When the vehicle is running, the brain wave of the occupant is measured by the brain wave sensor 60. In addition to this, when the vehicle travels, for example, a navigation image representing a travel route from the current location to the destination is displayed on the display DP in accordance with the operation of the input device IF by the occupant. When the electrode 8Fz detects the potential V indicating that the eyeball is stationary in the state where the image is displayed on the display DP, the discomfort determination unit 10D detects the occupant with respect to the image displayed on the display DP. It is determined whether or not the user feels uncomfortable. The image displayed on the display DP is not limited to an image provided manually according to the operation of the input device IF by the occupant. For example, the map data and the current vehicle information such as an image showing information on tourist facilities are displayed. The image may be automatically provided according to the position.

そして、違和感判定部10Dが、乗員が違和感を受けていると判定すると、情報量判定部10Fが、表示状態取得部10Eが取得した情報量が情報量閾値α1を超えているか否かを判定する。情報量判定部10Fが、表示状態取得部10Eが取得した情報量が情報量閾値α1を超えていると判定すると、画像制御部10Gが、ディスプレイDPに表示されている画像の情報量を減少させる処理(図4A、図4Bを参照)を行う。
すなわち、第一実施形態の車載用表示装置1では、コントローラ10により、ディスプレイDPに画像を表示しているときに脳波センサ60が検出した脳活動から乗員の違和感の有無を判定し、違和感が有ると判定すると、表示している画像を変更する。
When the uncomfortable feeling determination unit 10D determines that the occupant feels uncomfortable, the information amount determination unit 10F determines whether the information amount acquired by the display state acquisition unit 10E exceeds the information amount threshold value α1. . When the information amount determination unit 10F determines that the information amount acquired by the display state acquisition unit 10E exceeds the information amount threshold value α1, the image control unit 10G decreases the information amount of the image displayed on the display DP. Processing (see FIGS. 4A and 4B) is performed.
That is, in the in-vehicle display device 1 according to the first embodiment, the controller 10 determines whether or not the passenger feels uncomfortable from the brain activity detected by the electroencephalogram sensor 60 when an image is displayed on the display DP. If determined, the displayed image is changed.

したがって、第一実施形態の車載用表示装置1であれば、ディスプレイDPに表示されている画像に対し、運転者等の乗員が違和感を受けていると判定すると、乗員が違和感を受けている画像を変更することが可能となる。なお、上述した脳波センサ60は、乗員の脳活動を検出するセンサに対応する。
また、上述したように、第一実施形態の車載用表示装置1の動作で実施する車載用表示方法では、ディスプレイDPに画像を表示しているときに乗員の脳活動を検出し、検出した脳活動から乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、ディスプレイDPに表示している画像を変更する。
Therefore, in the case of the in-vehicle display device 1 according to the first embodiment, when it is determined that an occupant such as a driver feels uncomfortable with respect to the image displayed on the display DP, the occupant feels uncomfortable. Can be changed. The above-described electroencephalogram sensor 60 corresponds to a sensor that detects the occupant's brain activity.
Further, as described above, in the in-vehicle display method implemented by the operation of the in-vehicle display device 1 of the first embodiment, the brain activity of the occupant is detected when an image is displayed on the display DP, and the detected brain Judgment of occupant discomfort from activities. If it is determined that there is a sense of discomfort, the image displayed on the display DP is changed.

また、第一実施形態の車載用表示方法では、乗員の注意状態を検出し、ディスプレイDPに表示している画像に対する注意状態を検出した時点で、違和感の有無を判定する。
さらに、第一実施形態の車載用表示方法では、ディスプレイDPに表示している画像の表示状態(文字数)を変更(減少、増加)することで、ディスプレイDPに表示している画像を変更する。
また、第一実施形態の車載用表示方法では、過去に違和感が有ると判定したときの脳活動を蓄積しておき、検出した脳活動と蓄積している脳活動との比較に応じて、違和感の有無を判定する。
なお、上述した第一実施形態は、本発明の一例であり、本発明は、上述した第一実施形態に限定されることはなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能である。
In the in-vehicle display method of the first embodiment, the caution state of the occupant is detected, and when the caution state with respect to the image displayed on the display DP is detected, it is determined whether or not there is a sense of discomfort.
Furthermore, in the vehicle-mounted display method according to the first embodiment, the image displayed on the display DP is changed by changing (decreasing or increasing) the display state (number of characters) of the image displayed on the display DP.
In addition, in the in-vehicle display method of the first embodiment, brain activity when it is determined that there is a sense of incongruity in the past is accumulated, and the sense of incongruity is determined according to the comparison between the detected brain activity and the accumulated brain activity. The presence or absence of is determined.
The above-described first embodiment is an example of the present invention, and the present invention is not limited to the above-described first embodiment, and the present invention may be applied to other forms than this embodiment. Various modifications can be made according to the design or the like as long as they do not depart from the technical idea.

(第一実施形態の効果)
第一実施形態の車載用表示装置1を用いた車載用表示方法であれば、以下に記載する効果を奏することが可能となる。
(1)ディスプレイDPに画像を表示しているときに乗員の脳活動を検出し、検出した脳活動から乗員の違和感の有無を判定し、違和感が有ると判定すると、ディスプレイDPに表示している画像を変更する。
このため、ディスプレイDPに表示している画像に対して乗員の違和感が有ると、ディスプレイDPに表示している画像を変更することで、乗員の状態に応じた画像を、ディスプレイDPに表示することが可能となる。その結果、乗員に提供する情報が煩雑となることを抑制することが可能となり、利便性の低下を抑制することが可能な、車載用表示方法を提供することが可能となる。
(Effects of the first embodiment)
If it is the vehicle-mounted display method using the vehicle-mounted display apparatus 1 of 1st embodiment, it will become possible to show the effect described below.
(1) When an image is displayed on the display DP, the occupant's brain activity is detected, the presence / absence of the occupant's discomfort is determined from the detected brain activity, and when it is determined that there is a discomfort, the display DP displays Change the image.
For this reason, if there is a sense of incongruity with the passenger on the image displayed on the display DP, the image displayed on the display DP can be displayed on the display DP by changing the image displayed on the display DP. Is possible. As a result, it is possible to prevent the information provided to the passenger from becoming complicated, and it is possible to provide an in-vehicle display method capable of suppressing a decrease in convenience.

(2)乗員の注意状態を検出し、ディスプレイDPに表示している画像に対する注意状態を検出した時点で、違和感の有無を判定する。その結果、ディスプレイDPに表示している画像に対する乗員の違和感の有無を、適切なタイミングで判定することが可能となり、違和感の有無を判定する精度を向上させることが可能となる。
(3)ディスプレイDPに表示している画像の表示状態を変更することで、ディスプレイDPに表示している画像を変更する。その結果、複雑な処理を必要とせずに、乗員の状態に応じた画像を、ディスプレイDPに表示することが可能となる。
(2) When the caution state of the passenger is detected and the caution state with respect to the image displayed on the display DP is detected, it is determined whether or not there is a sense of discomfort. As a result, it is possible to determine whether or not the passenger feels uncomfortable with respect to the image displayed on the display DP at an appropriate timing, and it is possible to improve the accuracy of determining the presence or absence of the uncomfortable feeling.
(3) The image displayed on the display DP is changed by changing the display state of the image displayed on the display DP. As a result, an image corresponding to the occupant's state can be displayed on the display DP without requiring complicated processing.

(4)過去に違和感が有ると判定したときの脳活動を蓄積しておき、検出した脳活動と蓄積している脳活動との比較に応じて、違和感の有無を判定する。その結果、過去に判定した実績の有るデータと、現時点で検出したデータとの比較により、違和感の有無を判定することが可能となり、違和感の有無を判定する精度を向上させることが可能となる。
また、第一実施形態の車載用表示装置1であれば、以下に記載する効果を奏することが可能となる。
(5)乗員が視認可能なディスプレイDPに画像を表示しているときに、乗員の脳活動を検出する脳波センサ60が検出した脳活動から乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、ディスプレイDPに表示している画像を変更するコントローラ10を備える。
(4) The brain activity when it is determined that there is a sense of discomfort in the past is accumulated, and the presence or absence of discomfort is determined according to the comparison between the detected brain activity and the accumulated brain activity. As a result, it is possible to determine whether or not there is a sense of incompatibility by comparing the data with a past record determined in the past and the data detected at the present time, and it is possible to improve the accuracy of determining whether or not there is a sense of discomfort.
Moreover, if it is the vehicle-mounted display apparatus 1 of 1st embodiment, it will become possible to show the effect described below.
(5) When an image is displayed on the display DP visible to the occupant, the presence or absence of the occupant's discomfort is determined from the brain activity detected by the brain wave sensor 60 that detects the occupant's brain activity. And if it determines with a sense of incongruity, the controller 10 which changes the image currently displayed on the display DP is provided.

このため、ディスプレイDPに表示している画像に対して乗員の違和感が有ると、ディスプレイDPに表示している画像を変更することで、乗員の状態に応じた画像を、ディスプレイDPに表示することが可能となる。その結果、乗員に提供する情報が煩雑となることを抑制することが可能となり、利便性の低下を抑制することが可能な、車載用表示装置1を提供することが可能となる。   For this reason, if there is a sense of incongruity with the passenger on the image displayed on the display DP, the image displayed on the display DP can be displayed on the display DP by changing the image displayed on the display DP. Is possible. As a result, it is possible to prevent the information provided to the occupant from being complicated, and it is possible to provide the vehicle-mounted display device 1 that can suppress a decrease in convenience.

(第一実施形態の変形例)
(1)第一実施形態では、ディスプレイDPに表示している画像の表示状態を変更することで、ディスプレイDPに表示している画像を変更したが、これに限定するものではない。すなわち、ディスプレイDPに表示している画像の視認性を変更することで、ディスプレイDPに表示している画像を変更してもよい。また、ディスプレイDPに表示している画像の表示内容を変更することで、ディスプレイDPに表示している画像を変更してもよい。したがって、ディスプレイDPに表示している画像の視認性、表示状態及び表示内容のうち少なくとも一つを変更することで、ディスプレイDPに表示している画像を変更する構成であればよい。
(Modification of the first embodiment)
(1) In the first embodiment, the image displayed on the display DP is changed by changing the display state of the image displayed on the display DP. However, the present invention is not limited to this. That is, the image displayed on the display DP may be changed by changing the visibility of the image displayed on the display DP. Further, the image displayed on the display DP may be changed by changing the display content of the image displayed on the display DP. Therefore, the image displayed on the display DP may be changed by changing at least one of the visibility, display state, and display content of the image displayed on the display DP.

(2)第一実施形態では、ディスプレイDPに表示している画像に対して乗員の違和感が有ると、乗員の違和感が有ると判定したタイミングで、ディスプレイDPに表示している画像を変更したが、これに限定するものではない。すなわち、ディスプレイDPに表示している画像を変更した時点で乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更するタイミングを変化させる構成としてもよい。なお、ディスプレイDPに表示している画像を変更した時点とは、例えば、図4A中に表す、情報量を減少させる処理を行う前の画像から、図4B中に表す、図4Aに表す画像に対して、情報量を減少させる処理を行った画像に変更した時点である。
この場合、ディスプレイDPに表示している画像を変更するタイミングを、乗員の違和感が有ると判定したタイミングよりも遅らせることで、違和感を受けた画像が含む情報を乗員が視認する時間を確保することが可能となる。
(2) In the first embodiment, the image displayed on the display DP is changed at the timing when it is determined that there is an uncomfortable feeling of the occupant when the occupant feels uncomfortable with respect to the image displayed on the display DP. However, the present invention is not limited to this. That is, if it is determined that the passenger feels uncomfortable when the image displayed on the display DP is changed, the timing for changing the image displayed on the display DP may be changed. Note that the time point when the image displayed on the display DP is changed is, for example, from the image before the process of reducing the amount of information shown in FIG. 4A to the image shown in FIG. 4A shown in FIG. 4B. On the other hand, it is the time when the image is changed to the image on which the processing for reducing the information amount is performed.
In this case, the time for changing the image displayed on the display DP is delayed from the timing at which it is determined that there is a sense of incongruity of the occupant, thereby ensuring time for the occupant to visually recognize the information included in the image that has experienced the sense of discomfort. Is possible.

(3)第一実施形態では、表示状態を文字数とし、ディスプレイDPに表示されている画像の情報量を変化させる処理を、画像が含む文字数を変化させる処理としたが、これに限定するものではない。すなわち、例えば、図6中に表すように、画像の情報量を変化させる処理を、ナビゲーション画像が含む地図の拡大率を変化させる処理としてもよい。なお、図6Aは、情報量を減少させる処理を行う前の画像(処理前の画像)を表す図である。また、図6Bは、図6Aに表す画像に対して、情報量を減少させる処理を行った画像(処理後の画像)を表す図である。
この場合、情報量閾値α1は、予め設定した地図の拡大率や、予め設定した地図上に表示されているアイコンの数等としてもよい。
(3) In the first embodiment, the display state is the number of characters, and the process of changing the information amount of the image displayed on the display DP is the process of changing the number of characters included in the image. However, the present invention is not limited to this. Absent. That is, for example, as shown in FIG. 6, the process of changing the information amount of the image may be a process of changing the enlargement ratio of the map included in the navigation image. FIG. 6A is a diagram illustrating an image before the process of reducing the information amount (an image before the process). FIG. 6B is a diagram illustrating an image (processed image) obtained by performing a process of reducing the information amount on the image illustrated in FIG. 6A.
In this case, the information amount threshold α1 may be a preset map enlargement ratio, the number of icons displayed on the preset map, or the like.

(4)第一実施形態では、注意状態取得部10Bの構成を、脳波センサ60により検出した脳波に応じた眼電図を用いて、乗員の注意状態を測定する構成としたが、これに限定するものではない。すなわち、注意状態取得部10Bの構成を、カメラ62により撮影した乗員の顔画像から、乗員の視線を検出することで、乗員の注意がディスプレイDPの画面へ向いたことを推定し、乗員の注意状態を測定する構成としてもよい。
(5)第一実施形態では、ディスプレイDPに表示されている画像の表示状態(画像が含む文字数)が、情報量閾値α1未満である場合、ディスプレイDPに表示されている画像の情報量を増加させるが、これに限定するものではない。すなわち、ディスプレイDPに表示されている画像の表示状態が情報量閾値α1未満である場合に、ディスプレイDPに表示されている画像の情報量を維持してもよい。
(4) In the first embodiment, the configuration of the attention state acquisition unit 10B is configured to measure the caution state of the occupant using an electrocardiogram corresponding to the electroencephalogram detected by the electroencephalogram sensor 60, but is not limited thereto. Not what you want. That is, the configuration of the caution state acquisition unit 10B is detected from the occupant's line of sight from the occupant's face image captured by the camera 62, thereby estimating that the occupant's attention is directed to the screen of the display DP. It is good also as a structure which measures a state.
(5) In the first embodiment, when the display state of the image displayed on the display DP (the number of characters included in the image) is less than the information amount threshold α1, the information amount of the image displayed on the display DP is increased. However, the present invention is not limited to this. That is, when the display state of the image displayed on the display DP is less than the information amount threshold α1, the information amount of the image displayed on the display DP may be maintained.

(第二実施形態)
以下、本発明の第二実施形態について、図面を参照しつつ説明する。
(車載用表示装置の構成)
図1から図6を参照しつつ、図7を用いて、第二実施形態の構成を説明する。なお、図中及び以降の説明では、上述した第一実施形態と同様の構成について、同一の符合を付して示す。また、以降の説明では、上述した第一実施形態と同様の構成については、説明を省略する場合がある。
(Second embodiment)
Hereinafter, a second embodiment of the present invention will be described with reference to the drawings.
(Configuration of in-vehicle display device)
The configuration of the second embodiment will be described with reference to FIGS. 1 to 6 and FIG. In the drawings and the following description, the same components as those in the first embodiment described above are denoted by the same reference numerals. Moreover, in the following description, description may be abbreviate | omitted about the structure similar to 1st embodiment mentioned above.

図7に表すように、車載用表示装置1は、周囲状況センサ2と、運転状態センサ4と、生体情報センサ6と、ディスプレイDPと、スピーカSPと、コントローラ10と、を備える。なお、コントローラ10以外の構成は、上述した第一実施形態と同様であるため、説明を省略する。
コントローラ10は、脳情報取得部10Aと、注意状態取得部10Bと、違和感データベース10Cと、違和感判定部10Dと、表示状態取得部10Eと、運転負荷検出部10Hと、画像制御部10Gと、を備える。なお、脳情報取得部10Aと、注意状態取得部10Bと、違和感データベース10Cの構成は、上述した第一実施形態と同様である。
As shown in FIG. 7, the in-vehicle display device 1 includes an ambient condition sensor 2, an operation state sensor 4, a biological information sensor 6, a display DP, a speaker SP, and a controller 10. Since the configuration other than the controller 10 is the same as that of the first embodiment described above, the description thereof is omitted.
The controller 10 includes a brain information acquisition unit 10A, a caution state acquisition unit 10B, a discomfort database 10C, a discomfort determination unit 10D, a display state acquisition unit 10E, a driving load detection unit 10H, and an image control unit 10G. Prepare. The configurations of the brain information acquisition unit 10A, the attention state acquisition unit 10B, and the discomfort database 10C are the same as those in the first embodiment described above.

違和感判定部10Dは、脳情報信号と、注意状態信号と、出力画像信号の入力を受ける。そして、出力画像信号の入力を受けたタイミングで、脳情報信号が含む脳波のパターンを参照する。さらに、出力画像信号の入力を受けたタイミングにおける脳波のパターンを、違和感データベース10Cに記憶されている脳波パターンに照合することで、乗員が受ける違和感の有無を判定する。違和感の有無を判定した違和感判定部10Dは、違和感判定信号を、運転負荷検出部10Hと画像制御部10Gへ出力する。なお、出力画像信号の入力を受けたタイミングとは、例えば、乗員が入力装置IFを用いて目的地を入力し、現在地から目的地へのナビゲーション画像をディスプレイDPに出力させるための出力画像信号の入力を受けたタイミングである。   The uncomfortable feeling determination unit 10D receives input of a brain information signal, a caution state signal, and an output image signal. Then, the brain wave pattern included in the brain information signal is referenced at the timing of receiving the output image signal. Furthermore, the presence or absence of discomfort experienced by the occupant is determined by comparing the electroencephalogram pattern at the timing of receiving the output image signal with the electroencephalogram pattern stored in the discomfort database 10C. The discomfort determination unit 10D that has determined whether or not there is a discomfort outputs a discomfort determination signal to the driving load detection unit 10H and the image control unit 10G. Note that the timing of receiving the output image signal is, for example, an output image signal for the passenger to input a destination using the input device IF and to output a navigation image from the current location to the destination on the display DP. It is the timing of receiving the input.

表示状態取得部10Eは、ディスプレイDPに表示されている画像の表示状態を取得し、表示状態信号を、画像制御部10Gへ出力する。
運転負荷検出部10Hは、違和感判定結果信号の入力を受ける。そして、違和感判定結果信号が、違和感が有るとの判定結果を含む場合、乗員(運転者)による車両の運転状態を取得する。さらに、取得した運転状態を用いて、乗員(運転者)が受ける運転負荷を検出する。運転負荷を検出した運転負荷検出部10Hは、検出した運転負荷を含む情報信号(以降の説明では、「運転負荷信号」と記載する場合がある)を、画像制御部10Gへ出力する。
The display state acquisition unit 10E acquires the display state of the image displayed on the display DP, and outputs a display state signal to the image control unit 10G.
The driving load detection unit 10H receives an input of the uncomfortable feeling determination result signal. And when the discomfort determination result signal includes a determination result that there is discomfort, the driving state of the vehicle by the occupant (driver) is acquired. Furthermore, the driving load which a passenger | crew (driver | operator) receives is detected using the acquired driving | running state. The driving load detection unit 10H that has detected the driving load outputs an information signal including the detected driving load (may be described as “driving load signal” in the following description) to the image control unit 10G.

乗員による運転状態は、例えば、ステアリングの操舵角、乗員の心拍数、乗員の脳波のうち少なくとも一つを用いて取得することが可能である。
ステアリングの操舵角を用いて運転負荷を検出する場合には、操作状態信号が含む操舵角と、ステアリングのふらつきを定量化したステアリングエントロピー(例えば、特開平11−227491号公報を参照)等を用いる。この場合、ステアリング操作(操舵角)の滑らかさから運転者の不安定度を算出するステアリングエントロピー法を用いて、運転負荷の高低を検出する。
The driving state by the occupant can be acquired using, for example, at least one of the steering angle of the steering wheel, the occupant's heart rate, and the occupant's brain wave.
When the driving load is detected using the steering angle of the steering, the steering angle included in the operation state signal, the steering entropy obtained by quantifying the steering fluctuation (for example, see Japanese Patent Application Laid-Open No. 11-227491), and the like are used. . In this case, the level of the driving load is detected using a steering entropy method for calculating the degree of instability of the driver from the smoothness of the steering operation (steering angle).

乗員の心拍数を用いて運転負荷を検出する場合には、心拍数信号が含む心拍数を参照し、心拍数の増加や減少によって、運転負荷を検出する。この場合、心拍数が増加すると運転負荷が高いと検出し、心拍数が減少すると運転負荷が低いと検出する。
乗員の脳波を用いて運転負荷を検出する場合には、脳波信号が含む脳波の周波数分析を行う。そして、β波の出現頻度が高いほど、運転に集中しており、運転負荷が高いと検出する。一方、β波の出現頻度が低いほど、運転に集中する必要性が低く、運転負荷が低いと検出する。
When the driving load is detected using the occupant's heart rate, the driving load is detected by referring to the heart rate included in the heart rate signal and by increasing or decreasing the heart rate. In this case, when the heart rate increases, it is detected that the driving load is high, and when the heart rate decreases, it is detected that the driving load is low.
When detecting the driving load using the occupant's brain wave, frequency analysis of the brain wave included in the brain wave signal is performed. Then, the higher the appearance frequency of the β wave, the more concentrated on driving, and it is detected that the driving load is high. On the other hand, the lower the appearance frequency of the β wave, the lower the necessity of concentrating on driving and detecting that the driving load is low.

第二実施形態では、一例として、運転負荷検出部10Hの構成を、予め設定した運転負荷閾値α2を記憶しており、取得した運転状態と運転負荷閾値α2との比較により、運転負荷の高低を検出する場合について説明する。したがって、第二実施形態では、運転負荷閾値α2を、舵角エントロピー(例えば、特開平11−227491号公報を参照)、予め設定した心拍数、予め設定したβ波の出現頻度とする。そして、取得した運転状態に応じて、対応する運転負荷閾値α2を用いる。
画像制御部10Gは、違和感判定信号と、運転負荷信号と、表示状態信号の入力を受け、入力装置IFから指令信号の入力を受ける。そして、違和感判定信号、運転負荷信号、表示状態信号、指令信号に応じて出力画像信号を生成し、生成した出力画像信号を、違和感判定部10DとディスプレイDPに出力する。なお、入力装置IFの構成は、上述した第一実施形態と同様である。
In the second embodiment, as an example, the configuration of the driving load detector 10H stores a preset driving load threshold value α2, and the level of the driving load is determined by comparing the acquired driving state with the driving load threshold value α2. A case of detection will be described. Therefore, in the second embodiment, the driving load threshold value α2 is set to the steering angle entropy (see, for example, JP-A-11-227491), a preset heart rate, and a preset β wave appearance frequency. And according to the acquired driving | running state, the corresponding driving load threshold value (alpha) 2 is used.
The image control unit 10G receives the input of the uncomfortable feeling determination signal, the driving load signal, and the display state signal, and receives the command signal from the input device IF. Then, an output image signal is generated according to the uncomfortable feeling determination signal, the driving load signal, the display state signal, and the command signal, and the generated output image signal is output to the unnatural feeling determination unit 10D and the display DP. The configuration of the input device IF is the same as that of the first embodiment described above.

出力画像信号の生成は、以下の手順で行う。
違和感判定結果信号が、違和感が無いとの判定結果を含む場合、指令信号に応じて、例えば、ナビゲーション画像等をディスプレイDPに表示させるための出力画像信号を生成する。
違和感判定結果信号が、違和感が有るとの判定結果を含む場合、運転負荷信号と表示状態信号に応じて、ディスプレイDPに表示されている画像の情報量を制御するための出力画像信号を生成する。具体的には、運転負荷信号が、取得した運転負荷が運転負荷閾値α2を超えているとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を減少させる出力画像信号を生成する(例えば、図4A及び図4B、図6A及び図6Bを参照)。一方、運転負荷信号が、取得した運転負荷が運転負荷閾値α2以下であるとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を増加させる出力画像信号を生成する(例えば、図4A及び図4B、図6A及び図6Bを参照)。
The output image signal is generated in the following procedure.
When the uncomfortable feeling determination result signal includes a determination result that there is no uncomfortable feeling, for example, an output image signal for displaying a navigation image or the like on the display DP is generated according to the command signal.
When the uncomfortable feeling determination result signal includes a determination result that there is uncomfortable feeling, an output image signal for controlling the information amount of the image displayed on the display DP is generated according to the driving load signal and the display state signal. . Specifically, when the driving load signal includes a determination result that the acquired driving load exceeds the driving load threshold α2, an output image signal that reduces the information amount of the image displayed on the display DP is generated. (See, eg, FIGS. 4A and 4B, FIGS. 6A and 6B). On the other hand, when the driving load signal includes a determination result that the acquired driving load is equal to or less than the driving load threshold α2, an output image signal that increases the information amount of the image displayed on the display DP is generated (for example, (See FIGS. 4A and 4B and FIGS. 6A and 6B).

(車載用表示装置1が行う処理)
図1から図7を参照しつつ、図8を用いて、車載用表示装置1が行う表示制御処理の一例を説明する。
図8中に表すように、表示制御処理を開始(START)すると、まず、ステップS200の処理を行う。ステップS200からステップS204の処理は、上述した第一実施形態におけるステップS100からステップS104の処理と同様であるため、説明を省略する。
(Processing performed by the in-vehicle display device 1)
An example of the display control process performed by the in-vehicle display device 1 will be described with reference to FIGS. 1 to 7 and FIG.
As shown in FIG. 8, when the display control process is started (START), first, the process of step S200 is performed. Since the processing from step S200 to step S204 is the same as the processing from step S100 to step S104 in the first embodiment described above, description thereof will be omitted.

ステップS206では、運転負荷を検出するためのパラメータを取得するために、運転負荷検出部10Hにより、運転者による車両の運転状態を取得する処理(図に表す「運転状態を取得」)を行う。ステップS206の処理を行うと、表示制御処理は、ステップS208へ移行する。ステップS208では、運転負荷検出部10Hにより、ステップS206で取得した運転状態を用いて検出した運転負荷が、運転負荷閾値α2を超えているか否かを判定する処理(図に表す「運転負荷>運転負荷閾値α2」)を行う。
ステップS208において、運転負荷が運転負荷閾値α2を超えている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS210へ移行する。一方、ステップS208において、運転負荷が運転負荷閾値α2以下である(図に表す「No」)と判定した場合、表示制御処理は、ステップS212へ移行する。
In step S206, in order to acquire a parameter for detecting the driving load, the driving load detection unit 10H performs a process of acquiring the driving state of the vehicle by the driver ("Acquire driving state" shown in the figure). When the process of step S206 is performed, the display control process proceeds to step S208. In step S208, the operation load detection unit 10H determines whether or not the operation load detected using the operation state acquired in step S206 exceeds the operation load threshold α2 (“operation load> operation” shown in the figure). Load threshold α2 ").
If it is determined in step S208 that the driving load exceeds the driving load threshold value α2 (“Yes” shown in the figure), the display control process proceeds to step S210. On the other hand, if it is determined in step S208 that the driving load is equal to or less than the driving load threshold α2 (“No” shown in the figure), the display control process proceeds to step S212.

ステップS210では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を減少させる処理(図に表す「情報量を減少」)を行う(例えば、図4Aの状態から図4Bの状態へ移行)。これにより、ステップS210では、乗員に提供する情報が煩雑となることを抑制する。ステップS210の処理を行うと、表示制御処理は、ステップS200の処理へ復帰(RETURN)する。
ステップS212では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を増加させる処理(図に表す「情報量を増加」)を行う(例えば、図4Bの状態から図4Aの状態へ移行)。これにより、ステップS212では、運転中の情報取得における利便性を向上させることが可能となる。ステップS212の処理を行うと、表示制御処理は、ステップS200の処理へ復帰(RETURN)する。
In step S210, the image control unit 10G performs a process of reducing the information amount of the image displayed on the display DP ("decrease information amount" shown in the figure) (for example, from the state of FIG. 4A to the state of FIG. 4B). To). Thereby, in step S210, it suppresses that the information provided to a passenger | crew becomes complicated. When the process of step S210 is performed, the display control process returns to the process of step S200 (RETURN).
In step S212, the image control unit 10G performs a process of increasing the information amount of the image displayed on the display DP ("increase the information amount" shown in the figure) (for example, from the state of FIG. 4B to the state of FIG. 4A). To). Thereby, in step S212, it is possible to improve convenience in obtaining information during driving. When the process of step S212 is performed, the display control process returns to the process of step S200 (RETURN).

(動作)
図1から図8を参照して、第二実施形態の車載用表示装置1を用いて行なう動作の一例を説明する。
車両の走行時には、脳波センサ60により、乗員の脳波を測定する。これに加え、車両の走行時には、例えば、乗員による入力装置IFの操作に応じて、現在地から目的地までの移動経路を表すナビゲーション画像を、ディスプレイDPに表示する。ディスプレイDPにナビゲーション画像が表示されたタイミングで、違和感判定部10Dが、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する。
そして、違和感判定部10Dが、乗員が違和感を受けていると判定すると、運転負荷検出部10Hが、運転者による車両の運転状態を取得し、さらに、運転者の運転負荷を検出する。これに加え、検出した運転負荷が運転負荷閾値α2を超えているか否かを判定する。
(Operation)
With reference to FIGS. 1-8, an example of the operation | movement performed using the vehicle-mounted display apparatus 1 of 2nd embodiment is demonstrated.
When the vehicle is running, the brain wave of the occupant is measured by the brain wave sensor 60. In addition to this, when the vehicle travels, for example, a navigation image representing a travel route from the current location to the destination is displayed on the display DP in accordance with the operation of the input device IF by the occupant. At the timing when the navigation image is displayed on the display DP, the discomfort determination unit 10D determines whether or not the occupant feels discomfort with respect to the image displayed on the display DP.
When the uncomfortable feeling determination unit 10D determines that the occupant feels uncomfortable, the driving load detection unit 10H acquires the driving state of the vehicle by the driver, and further detects the driving load of the driver. In addition, it is determined whether or not the detected driving load exceeds the driving load threshold value α2.

運転負荷検出部10Hが、運転負荷が運転負荷閾値α2を超えていると判定すると、画像制御部10Gが、ディスプレイDPに表示されている画像の情報量を減少させる処理(図4A、図4Bを参照)を行う。これにより、運転負荷が高く、運転操作が忙しい状況であっても、ディスプレイDPに表示される情報を見やすくすることが可能となる。一方、運転負荷検出部10Hが、運転負荷が運転負荷閾値α2以下であると判定すると、画像制御部10Gが、ディスプレイDPに表示されている画像の情報量を増加させる処理(図4A、図4Bを参照)を行う。これにより、運転負荷が低い状況では、運転中の情報取得における利便性を向上させることが可能となる。   When the driving load detection unit 10H determines that the driving load exceeds the driving load threshold α2, the image control unit 10G reduces the information amount of the image displayed on the display DP (see FIGS. 4A and 4B). See). As a result, even when the driving load is high and the driving operation is busy, the information displayed on the display DP can be easily viewed. On the other hand, when the driving load detection unit 10H determines that the driving load is equal to or less than the driving load threshold α2, the image control unit 10G increases the information amount of the image displayed on the display DP (FIGS. 4A and 4B). (See). As a result, it is possible to improve convenience in obtaining information during driving in a situation where the driving load is low.

すなわち、第二実施形態の車載用表示装置1では、コントローラ10により、ディスプレイDPに画像を表示しているときに脳波センサ60が検出した脳活動から、乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、乗員が受ける運転負荷に応じて、ディスプレイDPに表示している画像を変更する。
上述したように、第二実施形態の車載用表示装置1の動作で実施する車載用表示方法では、ディスプレイDPに画像を表示しているときに乗員の違和感が有ると判定すると、乗員が受ける運転負荷に応じて、ディスプレイDPに表示している画像を変更する。
That is, in the vehicle-mounted display device 1 according to the second embodiment, the controller 10 determines whether or not the passenger feels uncomfortable from the brain activity detected by the electroencephalogram sensor 60 when an image is displayed on the display DP. If it is determined that there is a sense of incongruity, the image displayed on the display DP is changed according to the driving load received by the occupant.
As described above, in the in-vehicle display method implemented by the operation of the in-vehicle display device 1 according to the second embodiment, when it is determined that there is an uncomfortable feeling of the occupant when an image is displayed on the display DP, the driving received by the occupant The image displayed on the display DP is changed according to the load.

また、第二実施形態の車載用表示方法では、ディスプレイDPに表示した画像の情報量を検出し、ディスプレイDPに画像を表示したタイミングで乗員の違和感が有ると判定すると、検出した情報量に応じて、ディスプレイDPに表示している画像を変更する。
なお、上述した第二実施形態は、本発明の一例であり、本発明は、上述した第二実施形態に限定されることはなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能である。
Further, in the in-vehicle display method of the second embodiment, when the information amount of the image displayed on the display DP is detected and it is determined that there is a sense of incongruity of the passenger at the timing when the image is displayed on the display DP, The image displayed on the display DP is changed.
The above-described second embodiment is an example of the present invention, and the present invention is not limited to the above-described second embodiment, and the present invention may be applied to other forms than this embodiment. Various modifications can be made according to the design or the like as long as they do not depart from the technical idea.

(第二実施形態の効果)
第一実施形態の車載用表示装置1を用いた車載用表示方法であれば、以下に記載する効果を奏することが可能となる。
(1)ディスプレイDPに表示した画像の情報量を検出し、ディスプレイDPに画像を表示したタイミングで、乗員の違和感が有ると判定すると、検出した情報量に応じて、ディスプレイDPに表示している画像を変更する。その結果、乗員がディスプレイDPに表示した画像を視認している可能性がある状況において、乗員の違和感が有ると判定すると、ディスプレイDPに表示した画像の情報量に応じて、ディスプレイDPに表示している画像を変更することが可能となる。
(Effect of the second embodiment)
If it is the vehicle-mounted display method using the vehicle-mounted display apparatus 1 of 1st embodiment, it will become possible to show the effect described below.
(1) When the information amount of the image displayed on the display DP is detected, and it is determined that the passenger feels uncomfortable at the timing when the image is displayed on the display DP, the information is displayed on the display DP according to the detected information amount. Change the image. As a result, if there is a possibility that the occupant is visually recognizing the image displayed on the display DP, it is displayed on the display DP according to the amount of information of the image displayed on the display DP. It is possible to change the image.

(2)乗員(運転者)が受ける運転負荷を検出し、検出した運転負荷に応じて、ディスプレイDPに表示している画像を変更する。その結果、運転負荷によって変わる見やすさに応じて、ディスプレイDPに表示している画像を変更するため、ディスプレイDPに表示される情報を見やすくすることが可能となるとともに、運転中の情報取得における利便性を向上させることが可能となる。 (2) The driving load received by the occupant (driver) is detected, and the image displayed on the display DP is changed according to the detected driving load. As a result, since the image displayed on the display DP is changed according to the visibility that changes depending on the driving load, it is possible to make the information displayed on the display DP easier to see and the convenience in obtaining information during driving. It becomes possible to improve the property.

(第二実施形態の変形例)
(1)第二実施形態では、ディスプレイDPに画像を表示したタイミングで、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更したが、これに限定するものではない。すなわち、ディスプレイDPに画像を表示してから予め設定した閾値時間が経過した後に、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更する構成としてもよい。
この場合、乗員がディスプレイDPに表示した画像を視認している可能性がある時間が、閾値時間まで経過した状況において、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更することが可能となる。なお、ディスプレイDPに表示している画像の変更には、ディスプレイDPに表示している画像の消去も含む。
(Modification of the second embodiment)
(1) In the second embodiment, the image displayed on the display DP is changed when it is determined that the passenger feels uncomfortable at the timing when the image is displayed on the display DP. However, the present invention is not limited to this. In other words, the image displayed on the display DP may be changed when it is determined that the passenger feels uncomfortable after a predetermined threshold time has elapsed since the image was displayed on the display DP.
In this case, if it is determined that there is a sense of incongruity of the occupant in a situation in which the occupant may be viewing the image displayed on the display DP until the threshold time has elapsed, the image displayed on the display DP is changed. It becomes possible to do. Note that changing the image displayed on the display DP includes erasing the image displayed on the display DP.

(第三実施形態)
以下、本発明の第三実施形態について、図面を参照しつつ説明する。
(車載用表示装置の構成)
図1から図8を参照して、第三実施形態の構成を説明する。なお、以降の説明では、上述した第一実施形態と同様の構成について、同一の符合を付して示す。また、以降の説明では、上述した第一実施形態と同様の構成については、説明を省略する場合がある。
第三実施形態の車載用表示装置1は、画像制御部10Gの構成を除き、上述した第一実施形態と同様である。このため、画像制御部10G以外の構成については、説明を省略する。
(Third embodiment)
Hereinafter, a third embodiment of the present invention will be described with reference to the drawings.
(Configuration of in-vehicle display device)
The configuration of the third embodiment will be described with reference to FIGS. In the following description, the same components as those in the first embodiment described above are shown with the same reference numerals. Moreover, in the following description, description may be abbreviate | omitted about the structure similar to 1st embodiment mentioned above.
The in-vehicle display device 1 of the third embodiment is the same as that of the first embodiment described above except for the configuration of the image control unit 10G. For this reason, description of components other than the image control unit 10G is omitted.

画像制御部10Gは、違和感判定信号と、情報量判定信号と、指令信号の入力を受ける。そして、違和感判定信号、情報量判定信号、指令信号に応じて出力画像信号を生成し、生成した出力画像信号を、ディスプレイDPに出力する。また、画像制御部10Gは、輝度、彩度、色相、拡大率、文字数、フォントサイズのパラメータを、数段階で設定することが可能である。また、画像制御部10Gは、違和感判定信号に応じて、画像の内容に係らず、ディスプレイDPに表示されている画像の視認性、ディスプレイDPに表示されている画像の表示状態、ディスプレイDPに表示されている画像の表示内容を調整する。   The image control unit 10G receives an input of an uncomfortable feeling determination signal, an information amount determination signal, and a command signal. Then, an output image signal is generated according to the unnaturalness determination signal, the information amount determination signal, and the command signal, and the generated output image signal is output to the display DP. In addition, the image control unit 10G can set parameters of brightness, saturation, hue, enlargement ratio, number of characters, and font size in several stages. In addition, the image control unit 10G displays the visibility of the image displayed on the display DP, the display state of the image displayed on the display DP, and the display on the display DP, regardless of the content of the image, according to the sense of incongruity determination signal. Adjust the display content of the displayed image.

なお、以降の説明では、画像の視認性を調整する処理を、「視認性調整処理」と記載する場合がある。また、画像の表示状態を調整する処理を、「表示状態調整処理」と記載する場合がある。さらに、画像の表示内容を調整する処理を、「表示内容調整処理」と記載する場合がある。   In the following description, the process for adjusting the visibility of an image may be referred to as a “visibility adjustment process”. In addition, the process for adjusting the display state of an image may be referred to as “display state adjustment process”. Further, the process of adjusting the display content of the image may be described as “display content adjustment process”.

(視認性調整処理)
視認性調整処理では、まず、輝度のパラメータを、現在の輝度値から明るくなるように段階を上げる。輝度のパラメータの段階を上げた状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、輝度のパラメータを、現在の輝度値から暗くなるように段階を下げる。輝度のパラメータの段階を上げた状態でも、輝度のパラメータの段階を下げた状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、輝度値を最初の状態に戻し、次に、彩度の調整を行う。
(Visibility adjustment processing)
In the visibility adjustment process, first, the level of the brightness parameter is increased so as to become brighter than the current brightness value. When an input of an uncomfortable feeling determination result signal including a determination result that there is a sense of incongruity is received in a state where the brightness parameter level is raised, the brightness parameter is lowered so that the brightness parameter becomes darker than the current brightness value. When receiving a discomfort determination result signal including a determination result that there is a sense of incongruity in either a state where the brightness parameter level is raised or a state where the brightness parameter level is lowered, the brightness value is set to the initial state. Next, adjust the saturation.

彩度の調整は、まず、画像の鮮やかさを増加させる方向に調整する。そして、画像の鮮やかさを増加させる方向に彩度を調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、彩度を、画像の鮮やかさを減少させる方向に調整する。画像の鮮やかさを増加させる方向に彩度を調整した状態でも、画像の鮮やかさを減少させる方向に彩度を調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、彩度を最初の状態に戻し、次に、色相の調整を行う。   The saturation is first adjusted in the direction of increasing the vividness of the image. And, in the state where the saturation is adjusted in the direction to increase the vividness of the image, upon receiving an input of the uncomfortable determination result signal including the determination result that there is an uncomfortable feeling, the saturation is reduced in the direction of decreasing the vividness of the image Adjust to. Input the discomfort judgment result signal including the judgment result that there is a sense of incongruity whether the saturation is adjusted to increase the vividness of the image or the saturation is adjusted to decrease the vividness of the image. When receiving, the saturation is returned to the initial state, and then the hue is adjusted.

色相の調整は、まず、画像を暖色系とする方向に調整する。そして、画像を暖色系とする方向に色相を調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、色相を、画像を寒色系とする方向に調整する。画像を暖色系とする方向に色相を調整した状態でも、画像を寒色系とする方向に色相を調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、色相を最初の状態に戻し、視認性調整処理を終了する。
すなわち、輝度、彩度、色相のパラメータを調整した状況であっても、乗員の違和感が有ると判定される状態では、視認性には違和感が無いと判断し、視認性調整処理を終了して、表示状態調整処理へ移行する。
To adjust the hue, first, the image is adjusted in the direction of making the color warm. Then, in the state where the hue is adjusted in the direction in which the image is in the warm color system, upon receiving an input of the unnatural feeling determination result signal including the determination result that there is a sense of incongruity, the hue is adjusted in the direction in which the image is in the cold color system. When receiving a discomfort judgment result signal including a judgment result that there is a sense of incongruity in either a state in which the hue is adjusted in the direction to make the image warm, or a state in which the hue is adjusted in the direction to make the image cool The hue is returned to the initial state, and the visibility adjustment process is terminated.
In other words, even when the parameters of brightness, saturation, and hue are adjusted, it is determined that there is no sense of incongruity in the state where it is determined that there is a sense of incongruity of the occupant, and the visibility adjustment processing is terminated. The process proceeds to the display state adjustment process.

(表示状態調整処理)
表示状態調整処理では、まず、画像の拡大率を、現在の拡大率から大きくする。現在の拡大率から大きくした状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、画像の拡大率を、現在の拡大率から小さくする。画像の拡大率を現在の拡大率から大きくした状態でも、画像の拡大率を現在の拡大率から小さくした状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、画像の拡大率を最初の状態に戻し、次に、文字数の調整を行う。
(Display state adjustment processing)
In the display state adjustment process, first, the enlargement ratio of the image is increased from the current enlargement ratio. When an uncomfortable feeling determination result signal including a determination result that there is a sense of incongruity is received in a state where the current enlargement ratio is increased, the enlargement ratio of the image is reduced from the current enlargement ratio. When receiving a discomfort judgment result signal including a judgment result that there is a sense of incongruity even when the enlargement ratio of the image is increased from the current enlargement ratio or the enlargement ratio of the image is reduced from the current enlargement ratio The image enlargement ratio is returned to the initial state, and then the number of characters is adjusted.

文字数の調整は、まず、文字数を減少させる方向に調整する。そして、文字数を減少させる方向に彩度を調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、文字数を増加させる方向に調整する。文字数を減少させる方向に調整した状態でも、文字数を増加させる方向に調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、文字数を最初の状態に戻し、次に、フォントサイズの調整を行う。   The adjustment of the number of characters is first adjusted in the direction of decreasing the number of characters. When the input of a sense of incongruity determination result including a determination result that there is a sense of incongruity is received in a state where the saturation is adjusted in the direction of decreasing the number of characters, the number of characters is adjusted in the direction of increasing. If you receive a discomfort judgment result signal that includes the judgment result that there is a sense of incongruity, whether you are adjusting the direction to decrease the number of characters or adjusting the number of characters, return the number of characters to the initial state. Next, the font size is adjusted.

フォントサイズの調整は、まず、フォントサイズを大きくする方向に調整する。そして、フォントサイズを大きくする方向に調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、フォントサイズを小さくする方向に調整する。フォントサイズを大きく方向に調整した状態でも、フォントサイズを小さくする方向に調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、フォントサイズを最初の状態に戻し、表示状態調整処理を終了する。
すなわち、拡大率、文字数、フォントサイズのパラメータを調整した状況であっても、乗員の違和感が有ると判定される状態では、表示状態には違和感が無いと判断し、表示状態調整処理を終了して、表示内容調整処理へ移行する。
The font size is first adjusted in the direction of increasing the font size. Then, when an input of an uncomfortable feeling determination result signal including a result of determining that there is a sense of incongruity is received in a state where the font size is adjusted to increase, the font size is adjusted to decrease. Whether the font size is adjusted to a larger direction or the font size is adjusted to a smaller size, if you receive a discomfort judgment result signal that includes the judgment result that there is a sense of discomfort, change the font size to the initial state. The display state adjustment process is terminated.
That is, even when the parameters of the enlargement ratio, the number of characters, and the font size are adjusted, if it is determined that the passenger feels uncomfortable, it is determined that the display state is not uncomfortable, and the display state adjustment process is terminated. To display content adjustment processing.

(表示内容調整処理)
表示内容調整処理では、まず、表示内容を蓄積しているデータベース(図示せず)から取得した画像をディスプレイDPに表示することで、表示内容を調整する。データベースから取得した画像をディスプレイDPに表示する際には、例えば、一般的に人気の高い表示を順番に提示する。また、例えば、カテゴリー毎に分類された情報の内容を表す画像を順番に提示することで、違和感のない情報を確定し、類似情報を提示してもよい。データベースから取得した画像をディスプレイDPに表示している状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、画像の表示を停止し、表示内容調整処理を終了する。
(Display content adjustment processing)
In the display content adjustment process, first, the display content is adjusted by displaying an image acquired from a database (not shown) that stores the display content on the display DP. When displaying the image acquired from the database on the display DP, for example, generally popular displays are presented in order. Further, for example, by presenting images representing the contents of information classified for each category in order, information that does not feel uncomfortable may be determined and similar information may be presented. When an image obtained from the database is displayed on the display DP and an input of an uncomfortable feeling determination result signal including a result of determining that there is an uncomfortable feeling is received, the display of the image is stopped and the display content adjustment process is ended.

(車載用表示装置1が行う処理)
図1から図8を参照しつつ、図9から図12を用いて、車載用表示装置1が行う表示制御処理の一例を説明する。
図9中に表すように、表示制御処理を開始(START)すると、まず、ステップS300の処理を行う。
ステップS300では、乗員が要求する情報を提供するために、ディスプレイDPに、ナビゲーション画像等を表示する処理(図に表す「ディスプレイ表示」)を行う。ステップS100の処理を行うと、表示制御処理は、ステップS400へ移行する。ステップS400では、違和感の有無を判定するために、違和感判定部10Dにより、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する処理(図に表す「表示中に違和感有り」)を行う。
(Processing performed by the in-vehicle display device 1)
An example of display control processing performed by the in-vehicle display device 1 will be described with reference to FIGS. 1 to 8 and FIGS. 9 to 12.
As shown in FIG. 9, when the display control process is started (START), first, the process of step S300 is performed.
In step S300, in order to provide information required by the occupant, a process of displaying a navigation image or the like on the display DP ("display display" shown in the figure) is performed. When the process of step S100 is performed, the display control process proceeds to step S400. In step S400, in order to determine whether or not there is a sense of incongruity, the discomfort determination unit 10D determines whether or not the occupant feels a sense of discomfort with respect to the image displayed on the display DP ("display" shown in the figure). I feel uncomfortable inside ”).

ステップS400において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS500へ移行する。一方、ステップS400において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS300へ移行する。
ステップS500では、画像制御部10Gにより、視認性調整処理(図に表す「視認性調整処理」)を行う。ステップS500の処理を行うと、表示制御処理は、ステップS600へ移行する。
If it is determined in step S400 that the occupant is feeling uncomfortable ("Yes" shown in the figure), the display control process proceeds to step S500. On the other hand, if it is determined in step S400 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S300.
In step S500, the image control unit 10G performs visibility adjustment processing (“visibility adjustment processing” shown in the drawing). When the process of step S500 is performed, the display control process proceeds to step S600.

図10中に表すように、視認性調整処理を開始(START)すると、まず、ステップS510の処理を行う。
ステップS510では、ディスプレイDPに表示されている画像の輝度を変更するために、輝度のパラメータを調整する処理(図に表す「輝度調整」)を行う。ステップS510の処理を行った状態で、乗員が違和感を受けていると判定した場合、視認性調整処理は、ステップS520へ移行する。ステップS520では、ディスプレイDPに表示されている画像の彩度を変更するために、彩度のパラメータを調整する処理(図に表す「彩度調整」)を行う。ステップS520の処理を行った状態で、乗員が違和感を受けていると判定した場合、視認性調整処理は、ステップS530へ移行する。ステップS530では、ディスプレイDPに表示されている画像の色相を変更するために、色相のパラメータを調整する処理(図に表す「色相調整」)を行う。ステップS530の処理を行うと、視認性調整処理を終了(END)する。
As shown in FIG. 10, when the visibility adjustment process is started (START), first, the process of step S510 is performed.
In step S510, in order to change the luminance of the image displayed on the display DP, processing for adjusting the luminance parameter ("luminance adjustment" shown in the figure) is performed. When it is determined that the occupant feels uncomfortable in the state where the process of step S510 is performed, the visibility adjustment process proceeds to step S520. In step S520, in order to change the saturation of the image displayed on the display DP, a process for adjusting the saturation parameter ("saturation adjustment" shown in the figure) is performed. When it is determined that the occupant has a sense of discomfort in the state where the process of step S520 is performed, the visibility adjustment process proceeds to step S530. In step S530, in order to change the hue of the image displayed on the display DP, a process for adjusting the hue parameter ("hue adjustment" shown in the drawing) is performed. When the process of step S530 is performed, the visibility adjustment process is ended (END).

ステップS600では、ステップS400と同様の処理(図に表す「表示中に違和感有り」)を行う。ステップS600において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS700へ移行する。一方、ステップS600において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS300へ移行する。
ステップS700では、画像制御部10Gにより、表示状態調整処理(図に表す「表示状態調整処理」)を行う。ステップS700の処理を行うと、表示制御処理は、ステップS800へ移行する。
In step S600, processing similar to that in step S400 ("discomfort during display" shown in the figure) is performed. If it is determined in step S600 that the occupant is feeling uncomfortable ("Yes" shown in the figure), the display control process proceeds to step S700. On the other hand, if it is determined in step S600 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S300.
In step S700, the image control unit 10G performs display state adjustment processing (“display state adjustment processing” shown in the figure). When the process of step S700 is performed, the display control process proceeds to step S800.

図11中に表すように、表示状態調整処理を開始(START)すると、まず、ステップS710の処理を行う。
ステップS710では、ディスプレイDPに表示されている画像の拡大率を変更するために、画像の拡大率を調整する処理(図に表す「拡大率調整」)を行う。ステップS710の処理を行った状態で、乗員が違和感を受けていると判定した場合、表示状態調整処理は、ステップS720へ移行する。ステップS720では、ディスプレイDPに表示されている画像の文字数を変更するために、画像が含む文字数を調整する処理(図に表す「文字数調整」)を行う。ステップS720の処理を行った状態で、乗員が違和感を受けていると判定した場合、表示状態調整処理は、ステップS730へ移行する。ステップS730では、ディスプレイDPに表示されている画像が含む文字のフォントサイズを変更するために、画像が含む文字のフォントサイズを調整する処理(図に表す「フォントサイズ調整」)を行う。ステップS730の処理を行うと、表示状態調整処理を終了(END)する。
As shown in FIG. 11, when the display state adjustment process is started (START), first, the process of step S710 is performed.
In step S710, in order to change the enlargement ratio of the image displayed on the display DP, a process of adjusting the enlargement ratio of the image (“enlargement ratio adjustment” shown in the figure) is performed. When it is determined that the occupant feels uncomfortable in the state where the process of step S710 is performed, the display state adjustment process proceeds to step S720. In step S720, in order to change the number of characters of the image displayed on the display DP, a process of adjusting the number of characters included in the image ("character number adjustment" shown in the figure) is performed. When it is determined that the occupant feels uncomfortable in the state where the process of step S720 is performed, the display state adjustment process proceeds to step S730. In step S730, in order to change the font size of the character included in the image displayed on the display DP, a process of adjusting the font size of the character included in the image ("font size adjustment" shown in the drawing) is performed. When the process of step S730 is performed, the display state adjustment process is ended (END).

ステップS800では、ステップS400と同様の処理(図に表す「表示中に違和感有り」)を行う。ステップS800において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS900へ移行する。一方、ステップS800において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS300へ移行する。
ステップS900では、画像制御部10Gにより、表示内容調整処理(図に表す「表示内容調整処理」)を行う。ステップS900の処理を行うと、表示制御処理は、ステップS300の処理へ復帰(RETURN)する。
In step S800, the same processing as in step S400 ("discomfort during display" shown in the figure) is performed. If it is determined in step S800 that the occupant is feeling uncomfortable ("Yes" shown in the figure), the display control process proceeds to step S900. On the other hand, when it is determined in step S800 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S300.
In step S900, display content adjustment processing ("display content adjustment processing" shown in the figure) is performed by the image control unit 10G. When the process of step S900 is performed, the display control process returns to the process of step S300 (RETURN).

図12中に表すように、表示内容調整処理を開始(START)すると、まず、ステップS910の処理を行う。
ステップS910では、需要の高い画像を提供するために、ディスプレイDPへ、データベースから取得した画像のうち、一般的に人気の高い表示を順番に表示する処理(図に表す「人気の高い画像を表示」)を行う。ステップS910の処理を行った状態で、乗員が違和感を受けていると判定した場合、表示内容調整処理は、ステップS920へ移行する。ステップS920では、乗員の違和感を解消するために、ディスプレイDPへの画像の表示を停止する処理(図に表す「表示の停止」)を行う。ステップS920の処理を行うと、表示内容調整処理を終了(END)する。
As shown in FIG. 12, when the display content adjustment process is started (START), first, the process of step S910 is performed.
In step S910, in order to provide a high-demand image, a process of displaying generally popular displays in order from the images acquired from the database on the display DP ("display popular images" shown in the figure). ")I do. When it is determined that the occupant feels uncomfortable in the state where the process of step S910 is performed, the display content adjustment process proceeds to step S920. In step S920, a process of stopping the display of the image on the display DP ("stop display" shown in the figure) is performed in order to eliminate the discomfort of the passenger. When the process of step S920 is performed, the display content adjustment process is ended (END).

(動作)
図1から図12を参照して、第三実施形態の車載用表示装置1を用いて行なう動作の一例を説明する。
車両の走行時には、脳波センサ60により、乗員の脳波を測定する。これに加え、車両の走行時には、例えば、乗員による入力装置IFの操作に応じて、現在地から目的地までの移動経路を表すナビゲーション画像を、ディスプレイDPに表示する。ディスプレイDPにナビゲーション画像が表示されている状態で、違和感判定部10Dが、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する。
(Operation)
With reference to FIGS. 1-12, an example of the operation | movement performed using the vehicle-mounted display apparatus 1 of 3rd embodiment is demonstrated.
When the vehicle is running, the brain wave of the occupant is measured by the brain wave sensor 60. In addition to this, when the vehicle travels, for example, a navigation image representing a travel route from the current location to the destination is displayed on the display DP in accordance with the operation of the input device IF by the occupant. In a state where the navigation image is displayed on the display DP, the uncomfortable feeling determination unit 10D determines whether or not the occupant feels uncomfortable with respect to the image displayed on the display DP.

そして、違和感判定部10Dが、乗員が違和感を受けていると判定すると、画像制御部10Gが、画像の内容に係らず、視認性調整処理を行う。視認性調整処理を行った状態で、乗員が違和感を受けていると判定すると、画像制御部10Gが、画像の内容に係らず、表示状態調整処理を行う。表示状態調整処理を行った状態で、乗員が違和感を受けていると判定すると、画像制御部10Gが、画像の内容に係らず、表示内容調整処理を行う。
すなわち、第三実施形態の車載用表示装置1では、コントローラ10により、ディスプレイDPに画像を表示しているときに脳波センサ60が検出した脳活動から、乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、画像制御部10Gが、画像の内容に係らず、違和感が有るか否かの判定結果に応じて、視認性調整処理、表示状態調整処理、表示内容調整処理を順番に行う。
When the uncomfortable feeling determination unit 10D determines that the occupant feels uncomfortable, the image control unit 10G performs the visibility adjustment process regardless of the content of the image. If it is determined that the occupant feels uncomfortable in the state in which the visibility adjustment processing is performed, the image control unit 10G performs the display state adjustment processing regardless of the content of the image. If it is determined that the passenger feels uncomfortable with the display state adjustment process being performed, the image control unit 10G performs the display content adjustment process regardless of the content of the image.
That is, in the in-vehicle display device 1 according to the third embodiment, the controller 10 determines whether or not the passenger feels uncomfortable from the brain activity detected by the electroencephalogram sensor 60 when an image is displayed on the display DP. If it is determined that there is a sense of incongruity, the image control unit 10G performs a visibility adjustment process, a display state adjustment process, and a display content adjustment process in accordance with the determination result of whether or not there is a sense of discomfort regardless of the content of the image. Do in order.

上述したように、第三実施形態の車載用表示装置1の動作で実施する車載用表示方法では、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の視認性を調整する。そして、画像の視認性を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示状態を調整する。さらに、画像の表示状態を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示内容を調整する。
なお、上述した第三実施形態は、本発明の一例であり、本発明は、上述した第三実施形態に限定されることはなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能である。
As described above, in the in-vehicle display method implemented by the operation of the in-vehicle display device 1 according to the third embodiment, when it is determined that the passenger feels uncomfortable, the visibility of the image displayed on the display DP is adjusted. If it is determined that the passenger feels uncomfortable after adjusting the visibility of the image, the display state of the image displayed on the display DP is adjusted. Further, if it is determined that the passenger feels uncomfortable after adjusting the display state of the image, the display content of the image displayed on the display DP is adjusted.
The above-described third embodiment is an example of the present invention, and the present invention is not limited to the above-described third embodiment, and the present invention is not limited to the above-described third embodiment. Various modifications can be made according to the design or the like as long as they do not depart from the technical idea.

(第三実施形態の効果)
第三実施形態の車載用表示装置1を用いた車載用表示方法であれば、以下に記載する効果を奏することが可能となる。
(1)ディスプレイDPに画像を表示しているときに乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の視認性を調整する。そして、画像の視認性を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示状態を調整する。さらに、画像の表示状態を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示内容を調整する。
(Effect of the third embodiment)
If it is a vehicle-mounted display method using the vehicle-mounted display device 1 of the third embodiment, the following effects can be achieved.
(1) If it is determined that the passenger feels uncomfortable when an image is displayed on the display DP, the visibility of the image displayed on the display DP is adjusted. If it is determined that the passenger feels uncomfortable after adjusting the visibility of the image, the display state of the image displayed on the display DP is adjusted. Further, if it is determined that the passenger feels uncomfortable after adjusting the display state of the image, the display content of the image displayed on the display DP is adjusted.

このため、ディスプレイDPに画像を表示しているときに乗員の違和感が有ると判定すると、画像の内容に係らず、違和感が有るか否かの判定結果に応じて、ディスプレイDPに表示している画像を、乗員の違和感の有無に応じて調整することが可能となる。その結果、乗員が違和感を受けている画像に対し、視認性、表示状態、表示内容を順番に調整することで、乗員が受けている違和感を低減させることが可能となり、利便性の低下を抑制することが可能な、車載用表示方法を提供することが可能となる。   For this reason, when it is determined that there is a sense of incongruity when the image is displayed on the display DP, the image is displayed on the display DP according to the determination result of whether or not there is a sense of incongruity regardless of the content of the image. The image can be adjusted according to the presence or absence of the passenger's discomfort. As a result, it is possible to reduce the sense of incongruity experienced by passengers by adjusting the visibility, display status, and display content in order for images in which the passenger feels uncomfortable, and suppress the deterioration in convenience. It is possible to provide an in-vehicle display method that can be performed.

(第三実施形態の変形例)
(1)第三実施形態では、視認性調整処理において、輝度、彩度、色相のパラメータを調整したが、これに限定するものではない。すなわち、例えば、ディスプレイDPの構成が、角度を変化させることが可能な構成である場合、ディスプレイDPの角度を調整可能な装置等を用いて、視認性調整処理を行ってもよい。なお、ディスプレイDPの角度を調整可能な装置としては、例えば、特開平7−319398号公報に開示されているように、ステップモータ等を備える構成を用いることが可能である。
(Modification of the third embodiment)
(1) In the third embodiment, the parameters of brightness, saturation, and hue are adjusted in the visibility adjustment process, but the present invention is not limited to this. That is, for example, when the configuration of the display DP is a configuration that can change the angle, the visibility adjustment processing may be performed using a device that can adjust the angle of the display DP. As an apparatus that can adjust the angle of the display DP, for example, as disclosed in Japanese Patent Laid-Open No. 7-319398, a configuration including a step motor or the like can be used.

以上説明したように、本発明は、ここでは記載していない様々な実施の形態等を含むことは勿論である。したがって、本発明の技術的範囲は、上記の説明から妥当な特許請求の範囲に係る発明特定事項によってのみ定められるものである。   As described above, the present invention naturally includes various embodiments that are not described herein. Accordingly, the technical scope of the present invention is defined only by the invention specifying matters according to the scope of claims reasonable from the above description.

1…車載用表示装置、2…周囲状況センサ、4…運転状態センサ、6…生体情報センサ、8…電極、10…コントローラ、10A…脳情報取得部、10B…注意状態取得部、10C…違和感データベース、10D…違和感判定部、10E…表示状態取得部、10F…情報量判定部、10G…画像制御部、10H…運転負荷検出部、20…地図データベース、22…GPS受信機22…通信機、40…アクセル開度センサ、42…ブレーキスイッチ、44…ステアリング操作量センサ、60…脳波センサ、62…カメラ、64…心拍センサ、DP…ディスプレイ、SP…スピーカ、IF…入力装置   DESCRIPTION OF SYMBOLS 1 ... Vehicle-mounted display apparatus, 2 ... Ambient condition sensor, 4 ... Driving state sensor, 6 ... Biological information sensor, 8 ... Electrode, 10 ... Controller, 10A ... Brain information acquisition part, 10B ... Attention state acquisition part, 10C ... Discomfort Database, 10D ... Discomfort determination unit, 10E ... Display state acquisition unit, 10F ... Information amount determination unit, 10G ... Image control unit, 10H ... Driving load detection unit, 20 ... Map database, 22 ... GPS receiver 22 ... Communication device, 40 ... accelerator opening sensor, 42 ... brake switch, 44 ... steering operation sensor, 60 ... brain wave sensor, 62 ... camera, 64 ... heart rate sensor, DP ... display, SP ... speaker, IF ... input device

Claims (10)

車両の乗員が視認可能なディスプレイに画像を表示しているときに前記乗員の脳活動を検出し、
前記検出した脳活動から前記乗員の違和感の有無を判定し、
前記違和感が有ると判定すると、前記ディスプレイに表示している画像を変更することを特徴とする車載用表示方法。
Detecting the occupant's brain activity while displaying an image on a display that is visible to the occupant of the vehicle,
From the detected brain activity to determine the presence or absence of the passenger discomfort,
An on-vehicle display method characterized by changing an image displayed on the display when it is determined that the discomfort is present.
前記乗員の注意状態を検出し、
前記表示している画像に対する前記注意状態を検出した時点で、前記違和感の有無を判定することを特徴とする請求項1に記載した車載用表示方法。
Detecting the occupant's attention state;
The vehicle-mounted display method according to claim 1, wherein the presence or absence of the uncomfortable feeling is determined when the attention state with respect to the displayed image is detected.
前記ディスプレイに表示した画像の情報量を検出し、
前記違和感が有ると判定すると、前記検出した情報量に応じて前記表示している画像を変更することを特徴とする請求項1または請求項2に記載した車載用表示方法。
Detecting the amount of information in the image displayed on the display;
The in-vehicle display method according to claim 1 or 2, wherein when it is determined that there is a sense of incongruity, the displayed image is changed according to the detected amount of information.
前記乗員が受ける運転負荷を検出し、
前記検出した運転負荷に応じて、前記表示している画像を変更することを特徴とする請求項1から請求項3のうちいずれか1項に記載した車載用表示方法。
Detecting the driving load received by the passenger,
The in-vehicle display method according to any one of claims 1 to 3, wherein the displayed image is changed according to the detected driving load.
前記表示している画像の視認性、表示状態及び表示内容のうち少なくとも一つを変更することで、前記表示している画像を変更することを特徴とする請求項1から請求項4のうちいずれか1項に記載した車載用表示方法。   5. The method according to claim 1, wherein the displayed image is changed by changing at least one of visibility, display state, and display content of the displayed image. The on-vehicle display method described in item 1. 前記ディスプレイに画像を表示してから予め設定した閾値時間が経過した後に前記違和感が有ると判定すると、前記表示している画像を変更することを特徴とする請求項1から請求項5のうちいずれか1項に記載した車載用表示方法。   6. The method according to claim 1, wherein the image displayed is changed when it is determined that the user feels uncomfortable after a predetermined threshold time has elapsed since the image was displayed on the display. The on-vehicle display method described in item 1. 前記表示している画像を変更した時点で前記違和感が有ると判定すると、前記表示している画像を変更するタイミングを変化させることを特徴とする請求項1から請求項6のうちいずれか1項に記載した車載用表示方法。   The timing for changing the displayed image is changed when it is determined that the discomfort is present at the time when the displayed image is changed. The in-vehicle display method described in 1. 前記違和感が有ると判定すると前記表示している画像の視認性を調整し、
前記視認性を調整した後に前記違和感が有ると判定すると前記表示している画像の表示状態を調整し、
前記表示状態を調整した後に前記違和感が有ると判定すると前記表示している画像の表示内容を調整することを特徴とする請求項1から請求項7のうちいずれか1項に記載した車載用表示方法。
When it is determined that there is a sense of incongruity, the visibility of the displayed image is adjusted,
When it is determined that there is the uncomfortable feeling after adjusting the visibility, the display state of the displayed image is adjusted,
The in-vehicle display according to any one of claims 1 to 7, wherein when the display state is adjusted, the display content of the displayed image is adjusted when it is determined that the discomfort is present. Method.
過去に前記違和感が有ると判定したときの前記脳活動を蓄積しておき、
前記検出した脳活動と前記蓄積している脳活動との比較に応じて前記違和感の有無を判定することを特徴とする請求項1から請求項8のうちいずれか1項に記載した車載用表示方法。
Accumulating the brain activity when it is determined that there is a sense of discomfort in the past,
The vehicle-mounted display according to any one of claims 1 to 8, wherein the presence or absence of the uncomfortable feeling is determined according to a comparison between the detected brain activity and the accumulated brain activity. Method.
乗員の脳活動を検出するセンサと、
前記乗員が視認可能なディスプレイと、
前記ディスプレイに画像を表示しているときに前記センサが検出した脳活動から前記乗員の違和感の有無を判定し、前記違和感が有ると判定すると前記表示している画像を変更するコントローラと、を備えることを特徴とする車載用表示装置。
A sensor that detects the occupant's brain activity;
A display visible to the occupant;
A controller that determines whether or not the passenger feels uncomfortable from the brain activity detected by the sensor when an image is displayed on the display, and changes the displayed image when it is determined that the discomfort is present. A vehicle-mounted display device.
JP2017009250A 2017-01-23 2017-01-23 In-vehicle display method and in-vehicle display device Active JP6965520B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017009250A JP6965520B2 (en) 2017-01-23 2017-01-23 In-vehicle display method and in-vehicle display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017009250A JP6965520B2 (en) 2017-01-23 2017-01-23 In-vehicle display method and in-vehicle display device

Publications (2)

Publication Number Publication Date
JP2018120267A true JP2018120267A (en) 2018-08-02
JP6965520B2 JP6965520B2 (en) 2021-11-10

Family

ID=63043762

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017009250A Active JP6965520B2 (en) 2017-01-23 2017-01-23 In-vehicle display method and in-vehicle display device

Country Status (1)

Country Link
JP (1) JP6965520B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020062963A (en) * 2018-10-17 2020-04-23 日産自動車株式会社 Parking assisting method and parking assisting device
JP2020062962A (en) * 2018-10-17 2020-04-23 日産自動車株式会社 Parking assisting method and parking assisting device
JP2020062990A (en) * 2018-10-18 2020-04-23 日産自動車株式会社 Parking assisting method and parking assisting device
JP2020093621A (en) * 2018-12-11 2020-06-18 日産自動車株式会社 Automatic parking control method and automatic parking control device
JP2020104734A (en) * 2018-12-27 2020-07-09 日産自動車株式会社 Vehicle control method and vehicle control device
US11856355B2 (en) 2019-12-03 2023-12-26 Agama-X Co., Ltd. Information processing system and non-transitory computer readable medium storing program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003248541A (en) * 2002-02-22 2003-09-05 Mitsubishi Electric Corp Control device using brain wave signal and control method
JP2005098912A (en) * 2003-09-26 2005-04-14 Mazda Motor Corp On-vehicle information providing apparatus
JP2008282224A (en) * 2007-05-10 2008-11-20 Toyota Motor Corp Onboard information retrieval device
JP2011180873A (en) * 2010-03-02 2011-09-15 Panasonic Corp Driving support device and driving support method
US20210319869A1 (en) * 2019-12-06 2021-10-14 Meghana Kaipa Methods and Systems for Interactive Children's Medication and Wellness Tracking

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003248541A (en) * 2002-02-22 2003-09-05 Mitsubishi Electric Corp Control device using brain wave signal and control method
JP2005098912A (en) * 2003-09-26 2005-04-14 Mazda Motor Corp On-vehicle information providing apparatus
JP2008282224A (en) * 2007-05-10 2008-11-20 Toyota Motor Corp Onboard information retrieval device
JP2011180873A (en) * 2010-03-02 2011-09-15 Panasonic Corp Driving support device and driving support method
US20210319869A1 (en) * 2019-12-06 2021-10-14 Meghana Kaipa Methods and Systems for Interactive Children's Medication and Wellness Tracking

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020062963A (en) * 2018-10-17 2020-04-23 日産自動車株式会社 Parking assisting method and parking assisting device
JP2020062962A (en) * 2018-10-17 2020-04-23 日産自動車株式会社 Parking assisting method and parking assisting device
JP7206785B2 (en) 2018-10-17 2023-01-18 日産自動車株式会社 Parking assistance method and parking assistance device
JP7206786B2 (en) 2018-10-17 2023-01-18 日産自動車株式会社 Parking assistance method and parking assistance device
JP2020062990A (en) * 2018-10-18 2020-04-23 日産自動車株式会社 Parking assisting method and parking assisting device
JP7268321B2 (en) 2018-10-18 2023-05-08 日産自動車株式会社 Parking assistance method and parking assistance device
JP2020093621A (en) * 2018-12-11 2020-06-18 日産自動車株式会社 Automatic parking control method and automatic parking control device
JP7155978B2 (en) 2018-12-11 2022-10-19 日産自動車株式会社 AUTOMATIC PARKING CONTROL METHOD AND AUTOMATIC PARKING CONTROL DEVICE
JP2020104734A (en) * 2018-12-27 2020-07-09 日産自動車株式会社 Vehicle control method and vehicle control device
JP7188072B2 (en) 2018-12-27 2022-12-13 日産自動車株式会社 Vehicle control method and vehicle control device
US11856355B2 (en) 2019-12-03 2023-12-26 Agama-X Co., Ltd. Information processing system and non-transitory computer readable medium storing program

Also Published As

Publication number Publication date
JP6965520B2 (en) 2021-11-10

Similar Documents

Publication Publication Date Title
JP6965520B2 (en) In-vehicle display method and in-vehicle display device
US10317900B2 (en) Controlling autonomous-vehicle functions and output based on occupant position and attention
US10398368B2 (en) Onboard system, vehicle control device, and program product for vehicle control device
US10723365B2 (en) Driving assistance device
US9956963B2 (en) Apparatus for assessing, predicting, and responding to driver fatigue and drowsiness levels
JP6323549B2 (en) Vehicle information presentation device
US9855945B2 (en) System and method for responding to driver behavior
US8593519B2 (en) Field watch apparatus
CN111048171B (en) Method and device for solving motion sickness
US20160107653A1 (en) Coordinated vehicle response system and method for driver behavior
JP2014167438A (en) Information notification device
US20180326850A1 (en) Responsive human machine interface
DE102015101560A1 (en) Systems and methods for a vehicle-based display projection of a mobile device
JP6756174B2 (en) Vehicle control device
CN115923832A (en) Handover assistant for machine-to-driver transition
JP6776681B2 (en) Driver status determination device and driver status determination program
US20240043031A1 (en) Presentation control device, autonomous driving control device, and storage mediums
KR102417514B1 (en) Vehicle, and control method for the same
JP6673070B2 (en) Driver state guidance device and driver state guidance program
JP5664202B2 (en) Driving assistance device
JP7253708B2 (en) Information processing device, vehicle, and information processing method
JP6648788B1 (en) Operation control adjustment device and operation control adjustment method
US11801858B1 (en) System and method for monitoring cervical measurement of a driver and modifying vehicle functions based on changes in the cervical measurement of the driver
US20230419751A1 (en) Vehicle display device, vehicle display system, and vehicle display method
US20240210193A1 (en) Information processing device, information processing system, information processing method, and non-transitory storage medium storing information processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190913

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200928

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201006

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201029

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210323

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210416

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210921

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211004

R151 Written notification of patent or utility model registration

Ref document number: 6965520

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151