JP2018156173A - 車両の表示システム及び車両の表示システムの制御方法 - Google Patents

車両の表示システム及び車両の表示システムの制御方法 Download PDF

Info

Publication number
JP2018156173A
JP2018156173A JP2017050345A JP2017050345A JP2018156173A JP 2018156173 A JP2018156173 A JP 2018156173A JP 2017050345 A JP2017050345 A JP 2017050345A JP 2017050345 A JP2017050345 A JP 2017050345A JP 2018156173 A JP2018156173 A JP 2018156173A
Authority
JP
Japan
Prior art keywords
driver
display
passenger
vehicle
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017050345A
Other languages
English (en)
Other versions
JP6470334B2 (ja
Inventor
武史 鳥居
Takeshi Torii
武史 鳥居
能英瑠 佐藤
Noeru Sato
能英瑠 佐藤
瑠一 澄川
Ryuichi Sumikawa
瑠一 澄川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Subaru Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Subaru Corp filed Critical Subaru Corp
Priority to JP2017050345A priority Critical patent/JP6470334B2/ja
Priority to CN201810139443.7A priority patent/CN108621794B/zh
Priority to DE102018103263.3A priority patent/DE102018103263A1/de
Priority to US15/898,255 priority patent/US10346698B2/en
Publication of JP2018156173A publication Critical patent/JP2018156173A/ja
Application granted granted Critical
Publication of JP6470334B2 publication Critical patent/JP6470334B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/113—Scrolling through menu items
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/115—Selection of menu items
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/151—Instrument output devices for configurable output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/186—Displaying information according to relevancy
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/186—Displaying information according to relevancy
    • B60K2360/1868—Displaying information according to relevancy according to driving situations
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/011—Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ophthalmology & Optometry (AREA)
  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Instrument Panels (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

【課題】運転者と同乗者の覚醒度に応じて、表示装置による表示を最適に制御する。【解決手段】車両のフロントガラスに表示を行うＨＵＤ装置５００と、ドライバと同乗者のそれぞれの覚醒状態を判定するドライバ状態判定部４０６及び同乗者状態判定部４０７と、ＨＵＤ装置５００による表示を制御し、ドライバと同乗者のそれぞれの覚醒状態に応じて、ＨＵＤ装置５００による表示を変更するＨＵＤ制御部４１４と、を備える、車両の表示システムが提供される。【選択図】図１

Description

本発明は、車両の表示システム及び車両の表示システムの制御方法に関する。
従来、下記の特許文献１には、車内の既存の表示装置から出力される表示を、運転者の覚醒度に併せて最適な出力にして、より安全性の高い運転作業を可能にする車両用表示装置を提供することが記載されている。
また、近時では、顔の画像情報に基づいて人の状態を認識する技術が一般的となっている。例えば、下記の非特許文献１には、顔認識により運転中のドライバの状態を監視する技術が記載されている。
特開２００４−３１８２６６号公報
丸山 勇人、松岡 敦子、"ドライバーモニタシステムの紹介"、２０１２年１１月、ＯＫＩテクニカルレビュー 第２２０号 Ｖｏｌ．７９ Ｎｏ．２
しかしながら、上記特許文献１に記載された技術では、運転者の覚醒度が低下している場合に表示の出力を最適化したとしても、運転者が表示を確実に認識することが困難になることが想定される。特に、運転者の覚醒度が著しく低下している場合は、運転者が表示を認識することができないため、所望の車両操作を行うことが出来なくなる問題がある。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、運転者と同乗者の覚醒度に応じて、表示装置による表示を最適に制御することが可能な、新規かつ改良された車両の表示システム及び車両の表示システムの制御方法を提供することにある。
上記課題を解決するために、本発明のある観点によれば、車両の窓部に表示を行う表示装置と、ドライバと同乗者のそれぞれの覚醒状態を判定する判定部と、前記表示装置による表示を制御し、前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示を変更する表示制御部と、を備える、車両の表示システムが提供される。
前記表示制御部は、前記ドライバの覚醒度が低下していない場合は、前記窓部に前記ドライバに向けた表示を行うように制御するものであっても良い。
また、前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度も低下している場合は、前記窓部に前記ドライバに向けた表示を行うように制御するものであっても良い。
また、前記表示制御部は、前記窓部の前記ドライバの正面に表示を行うように制御するものであっても良い。
また、前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、前記表示制御部は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御し、前記歪補正処理部は、前記ドライバに向けて前記表示の歪みを補正するものであっても良い。
また、前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度が低下していない場合は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御するものであっても良い。
また、前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、前記歪補正処理部は、前記同乗者に向けて前記表示の歪みを補正するものであっても良い。
また、前記表示制御部は、前記ドライバが覚醒していない場合は、前記窓部の前記ドライバと前記同乗者の正面にそれぞれ表示を行うように制御するものであっても良い。
また、前記ドライバ及び前記同乗者の状態を撮像するカメラと、前記カメラから前記ドライバ及び前記同乗者の画像情報を取得する画像情報取得部と、を備え、前記判定部は、前記画像情報に基づいて前記ドライバ及び前記同乗者の前記覚醒状態を判定するものであっても良い。
また、上記課題を解決するために、本発明の別の観点によれば、車両の窓部に表示を行う表示装置を有する車両の表示システムの制御方法であって、ドライバと同乗者のそれぞれの覚醒状態を判定するステップと、前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示内容を変更するステップと、を備える、車両の表示システムの制御方法が提供される。
以上説明したように本発明によれば、運転者と同乗者の覚醒度に応じて、表示装置による表示を最適に制御することが可能となる。
本発明の一実施形態に係る車両システムの構成を示す模式図である。 自発光中間膜を用いたＨＵＤ装置を示す模式図である。 ドライバセンサがドライバを撮影している状態を示す模式図である。 ドライバの顔領域に基づいて、顔が向いている角度等を算出する様子を示す模式図である。 ドライバの口が開いているか否かを判定する開口検知を示す模式図である。 ドライバの目が閉じているか否かを判定する様子を示す模式図である。 ドライバ向けに表示を行った例を示す模式図である。 ドライバと同乗者の双方から見易い位置に表示を行った例を示す模式図である。 ドライバと同乗者のそれぞれに向けて表示を行った例を示す模式図である。 ドライバに適合した歪み補正を行う例を示す模式図である。 ドライバと同乗者の両方に適合した歪み補正を行う例を示す模式図である。 同乗者に適合した歪み補正を行う例を示す模式図である。 本実施形態に係る車両システムで行われる処理を示すフローチャートである。 ドライバに適合した表示変形を行う例を示す模式図である。 同乗者に適合した表示変形を行う例を示す模式図である。
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
図１は、本発明の一実施形態に係る車両システム１０００の構成を示す模式図である。車両システム１０００は、基本的には自動車などの車両に構成されるシステムである。図１に示すように、車両システム１０００は、車外センサ１００、ドライバセンサ２００、同乗者センサ２１０、着座センサ３００、制御装置４００、ＨＵＤ装置５００、スピーカ６００、シート振動部７００を有して構成されている。
車外センサ１００は、ステレオカメラ、単眼カメラ、ミリ波レーダ、赤外線センサ等から構成され、自車両周辺の人や車両などの位置、速度を測定する。車外センサ１００がステレオカメラから構成される場合、ステレオカメラは、ＣＣＤセンサ、ＣＭＯＳセンサ等の撮像素子を有する左右１対のカメラを有して構成され、車両外の外部環境を撮像し、撮像した画像情報を制御装置４００へ送る。一例として、ステレオカメラは、色情報を取得可能なカラーカメラから構成され、車両のフロントガラスの上部に設置される。
ＨＵＤ（Ｈｅａｄ−ｕｐ Ｄｉｓｐｌａｙ）装置５００は、人間の視野に直接情報を映し出す表示装置であって、自動車のフロントガラスやリアガラスなどのガラス上に実像を表示する。ＨＵＤは虚像を表示する装置が一般的に知られているが、本実施形態では、実像を映し出す表示装置を用いる。ＨＵＤ装置５００は、実像を表示しているため、視野角がほぼ３６０°あり、車内外から表示を視認することが可能である。
ＨＵＤ装置５００として、より具体的には、図２に示すような自発光中間膜５１０を用いる装置を用いることができる。この場合、車両のフロントガラス、リアガラス等において、表裏の２枚のガラス５２０で挟むように自発光中間膜５１０を配置する。自発光中間膜５１０には発光材料が含まれており、車内に設置するプロジェクター５３０からレーザ光を照射すると、照射された部分が発光し、文字や画像が表示される。表示物は全角度からの視認性を有し、運転席以外の席や、車両外部からも視認することができる。なお、ＨＵＤ装置５００は、自発光タイプのデバイスを車両のガラスに配置することで構成することもできる。この場合、例えば有機ＥＬ素子を用いた透明スクリーン、または透過型液晶装置等を用いることもできる。また、表示デバイスとして、ＨＵＤ装置５００以外のデバイスを用いても良く、例えばインパネに設置した大型液晶装置やＬＥＤ表示装置などを用いても良い。なお、以下では、表示装置として車両の窓部（ガラス）に表示を行うＨＵＤ装置５００を例に挙げて説明するが、本発明に係る表示装置はこれに限定されるものではなく、車両の内部又は外部に設けられた表示装置の全ての態様を含む。例えば、本実施形態に係る表示装置は、車両外部の窓部以外（ボディーなど）に設けられていても良く、車両内部の窓部以外（インパネ、座席など）に設けられていても良い。また、車両の内部に設けられた表示装置と車両の外部に設けられた表示装置は一体であっても良いし、別体であっても良い。
ドライバセンサ２００は、カメラ、視線センサ、モーションセンサ等から構成され、ドライバ（運転者）の頭や腕の動き、視線方向などを測定する。ドライバセンサ２００がカメラから構成される場合、カメラが撮像した画像を画像処理することで、頭や腕の動き、視線方向などを取得する。ドライバセンサ２００が視線センサから構成される場合、角膜反射法などの方法により視線検出を行う。着座センサ３００は、車両内の各座席に設けられ、座席に人が座ったか否かを判定する。スピーカ６００は、ＨＵＤ装置５００によって車両の内外へ警告を表示する際に、車両の内外へ警告音を発生させる。シート振動部７００は、車両の座席に設けられ、ＨＵＤ装置５００によって車両内へ警告を表示する際に、座席を振動することでドライバ、同乗者へ警告を行う。
制御装置４００は、車外センサ１００、ドライバセンサ２００等が検出した情報に基づいて、ＨＵＤ装置５００による表示を制御する。このため、制御装置４００は、環境情報取得部４０２、ドライバ情報取得部（画像情報取得部）４０４、同乗者情報取得部（画像情報取得部）４０５、ドライバ状態判定部４０６、同乗者状態判定部４０７、環境状態判定部４０８、歪補正処理部４１０、ＨＵＤ制御部（表示制御部）４１４を有している。なお、制御装置４００の各構成要素は、回路（ハードウェア）、またはＣＰＵなどの中央演算処理装置とこれを機能させるためのプログラム（ソフトウェア）によって構成されることができる。
環境情報取得部４０２は、車外センサ１００を構成するステレオカメラの左右１組のカメラによって撮像した左右１組のステレオ画像対に対し、対応する位置のずれ量から三角測量の原理によって対象物までの距離情報を生成して取得することができる。同時に、環境情報取得部４０２は、画像情報から被写体の位置情報を取得することができる。また、環境情報取得部３０２は、三角測量の原理によって生成した距離情報に対して、周知のグルーピング処理を行い、グルーピング処理した距離情報を予め設定しておいた三次元的な立体物データ等と比較することにより、立体物データや白線データ等を検出する。これにより、制御装置３００は、人物、他車両、一時停止の標識、停止線、ＥＴＣゲートなどを認識することもできる。
また、環境情報取得部４０２は、三角測量の原理によって生成した人物、他車両との距離情報を用いて、人物や他車両との距離の変化量、相対速度を算出することができる。距離の変化量は、単位時間ごとに検知されるフレーム画像間の距離を積算することにより求めることができる。また、相対速度は、単位時間ごとに検知される距離を当該単位時間で割ることにより求めることができる。
このように、環境情報取得部４０２は、車外センサ１００から得られる車両外の画像情報を取得して画像分析処理を行い、画像情報を分析して車両外の環境情報を取得する。
図３は、ドライバセンサ２００がカメラから構成される場合に、ドライバセンサ２００がドライバを撮影している状態を示す模式図である。図３に示すように、ドライバセンサ２００は、一例としてステアリングコラムの上部に設置される。
ドライバセンサ２００がカメラから構成される場合、ドライバセンサ２００によって撮影された画像は、制御装置４００に入力される。ドライバ情報取得部４０４は、入力画像からエッジ検出、顔検出等の画像処理技術を用いてドライバの顔領域を取得し、顔領域に基づいて顔向きを取得する。ドライバ状態判定部４０６は、顔向きに基づいてドライバが脇見をしているか否かを判定する。また、ドライバ情報取得部４０４は、目、鼻、口など顔の各部位の特徴点の位置情報を検知し、ドライバ状態判定部４０６は、位置情報に基づいて眠気、居眠りなど前方不注意の可能性などドライバの状態を判定する。
図４は、検出されたドライバの顔領域１０に基づいて、顔が向いている角度等を算出する様子を示す模式図である。画像情報から得られるドライバの顔領域１０に基づいて、ドライバの顔向きが予め定めた領域を外れているか否かをモニタリングすることで、脇見の可能性を判定することができる。なお、ドライバの顔領域１０は、目、鼻、口など顔の各部位の特徴点の位置情報から設定できる。また、顔向きは、一例として、正面から見た時の目の間隔を基準とし、この基準と画像情報から得られる目の間隔とを比較することで推定することができる。画像情報から得られる目の間隔が基準値よりも小さい程、顔向きが正面から横向きにずれていると判断できる。
図４の右下には、検知結果２０を示している。検知結果２０には、縦軸に「顔の上下方向の角度」、横軸に「顔の左右方向の角度」を表示しており、×印３０は検知された顔向きを示している。検知結果２０において斜線を付した中央部の矩形は、ドライバが正面を向いていると判断する正面領域２２を示し、検知された顔向き（×印３０）が正面領域２２から左右の脇見領域２４に変化した場合、脇見の可能性があると判定する。正面領域２２と脇見領域２４を区別するしきい値は左右±２０°程度とすることができるが、適宜変更可能である。脇見をしているか否かの判定は、例えば基準時間に対して顔向きが脇見領域２４になった時間の比率が所定のしきい値を超えたか否かによって判定することができる。また、例えば顔向き角度が予め設定した範囲を一定時間連続して超えた場合、もしくは連続して顔の検出ができない場合は、脇見と判定することも可能である。
図５は、ドライバの口が開いているか否かを判定する開口検知を示す模式図である。図５に示すように、口の上下の特徴点間の距離Ｄ１から口の開閉状態を判定し、特徴点間の距離Ｄ１が所定値を超える場合（図５に示す開口状態）では、ドライバの口が開いている可能性があり、あくびの可能性があると判定することができる。また、例えば開口状態のまま一定時間が経過する状況が複数回検知される場合は、居眠りの危険性が増大していると判断できる。
図６は、ドライバの目が閉じているか否かを判定する様子を示す模式図である。図６に示すように、目の上下の特徴点間の距離Ｄ２から目が閉じていることを検知し、特徴点間の距離Ｄ２が所定値以下の場合（図６に示す目閉じ状態）では、居眠りの可能性があると判定することができる。居眠りをしているか否かの判定は、例えば基準時間に対して目が閉じている時間の比率（閉眼率）が所定のしきい値を超えたか否かによって判定することができる。また、目閉じ検知が複数回検知されると居眠りの危険性が増大していると判断できる。また、画像処理により瞬きを検出し、瞬きの回数に基づいて居眠りをしているか否かの判定を行っても良い。図５、図６に示す判定は、ドライバ状態判定部４０６によって行われる。
制御装置４００の環境状態判定部４０８は、環境情報取得部４０２が取得した環境情報に基づいて、車両外の環境情報を判定する。特に、環境状態判定部４０８は、車両外の対象として人物の状態を判定することができる。
同乗者センサ２１０は、同乗者の正面（助手席の場合、ダッシュボード上など）に設置される。同乗者センサ２１０は、ドライバセンサ２００と同様の手法で同乗者の画像を撮像する。同乗者情報取得部４０５は、入力画像からエッジ検出、顔検出等の画像処理技術を用いて同乗者の顔領域を取得し、顔領域に基づいて顔向きを取得する。同乗者状態判定部４０７は、顔向きに基づいて同乗者が脇見をしているか否かを判定する。また、同乗者情報取得部４０６は、目、鼻、口など顔の各部位の特徴点の位置情報からドライバの状態を検知し、同乗者状態判定部４０７は、これに基づいて眠気、居眠りなど前方不注意の可能性を判定する。
なお、同乗者センサ２１０はドライバセンサ２００と共通に構成されていても良い。この場合、同乗者情報取得部４０５はドライバ情報取得部４０４と共通に構成され、同乗者状態判定部４０７はドライバ状態判定部４０６と共通に構成される。
ＨＵＤ制御部（表示制御部）４１４は、ＨＵＤ装置５００による表示を制御する。ＨＵＤ制御部（表示制御部）４１４は、ドライバ状態判定部４０６、同乗者状態判定部４０７等の判定結果に基づいて、ＨＵＤ装置５００による表示を制御することができる。
本実施形態では、車外センサ１００により、車両周辺に人物や車両などが存在することが検出された場合、ＨＵＤ装置５００を用いてドライバに対して警告表示を行う。例えば、車両の走行中に進行方向前方に人物や車両などが存在する場合、ＨＵＤ装置５００による警告表示を行うことで、ドライバに対して警告を行うことができる。警告表示は車両外からも認識することができるため、警告表示を車両外部の人物、車両等に対して行うこともできる。この際、本実施形態では、ドライバ状態取得部４０４がドライバセンサ２００からドライバの状態を取得し、ドライバ状態判定部４０６によるドライバが正常であるか否かの判定結果に応じてＨＵＤ装置５００による表示を制御する。また、本実施形態では、同乗者情報取得部４０５が同乗者センサ２１０から同乗者の状態を取得し、同乗者状態判定部４０７による同乗者が正常であるか否かの判定結果に応じてＨＵＤ装置５００による表示を制御する。
ドライバ及び同乗者が正常であるか否かの判定では、脇見をしているか否かの判定結果、眠気、居眠りなど前方不注意の可能性の判定結果に基づいて、ドライバ及び同乗者の覚醒状態を判定する。そして、ドライバ及び同乗者の覚醒状態に応じてＨＵＤ装置５００による表示を最適に制御する。なお、覚醒度の判定は、眠気のレベルや病気起因の体調異常を基に行っても良い。
具体的には、ドライバと同乗者の覚醒度に応じて、以下のように表示を切り替え、ドライバの覚醒度及び同乗者の覚醒度に応じて、ドライバ向けか同乗者向けかの表示を行う。これにより、同乗者にとって煩わしい表示がされることを回避しつつ、ドライバの覚醒度が低下した場合であっても、できるだけ危険な状態を回避することが可能となる。
Figure 2018156173
ドライバ状態判定部４０６及び同乗者状態判定部４０７は、脇見をしているか否かの判定、眠気、居眠りなど前方不注意の可能性の判定を行う際に、所定のしきい値を用いて覚醒度を上記表のように３つに分類する。上記表において、最左列はドライバの覚醒度を示している。判定のしきい値を２つ用いることで、ドライバが覚醒している状態（○）、覚醒度が低下している状態（△）、覚醒度していない状態（覚醒度が著しく低下している状態（×））の３つに分類される。また、上記表の１行目は同乗者の覚醒度を示している。同乗者についても、判定のしきい値を２つ用いることで、覚醒度が３つに分類される。
そして、覚醒度に基づいて、上記表に従って表示の切り替えが行われる。例えば、フロントガラス前面に表示する場合には、表示位置として、ドライバ正面位置、ドライバと助手席の間、ドライバと助手席のそれぞれ正面に表示する。これらの表示を切り替えることで、上記表のように「ドライバ向け提示」、「ドライバと同乗者の中央に提示」、「ドライバと同乗者の両者それぞれに提示」を切り替えることができる。
図７〜図９は、ドライバと同乗者の覚醒度に応じた表示例を示す模式図である。図７は、ドライバ向けに表示を行った例を示す模式図である。この場合、フロントガラス８０２上のドライバの正面に警告表示として「前方注意」が表示される。図８は、ドライバと同乗者の双方から見易い位置に表示を行った例を示す模式図である。この場合、フロントガラス８０２上のドライバと同乗者の中間に警告表示が行われる。図９は、ドライバと同乗者のそれぞれに向けて表示を行った例を示す模式図である。この場合、フロントガラス８０２上のドライバと同乗者のそれぞれの正面に警告表示が行われる。
上記表に示したように、ドライバが運転できるような覚醒度の場合は、できるだけドライバ向けに提示を行なう。同乗者の覚醒度が低下している場合は、無理に同乗者の覚醒度を上げる（眠い場合に起こす）のではなく、ドライバ向けに表示を行なう。ドライバが意識喪失などで覚醒度が著しく低下している場合は、同乗者にも提示することで、同乗者に対し、ドライバの運転サポートや危険回避のための準備行動を促すことができる。
警告表示は、予め定めた正面位置ではなく、対象者の顔向きや視線方向を考慮することもできる。フロントガラス８０２に表示する場合、フロントガラス８０２の曲率に応じた歪みが生じるが、覚醒度のレベルに応じて歪み補正を行い、ドライバ、助手席のそれぞれに表示を適合させるか、両者に表示を適合させるかを調整してもよい。
図１０〜図１２は、ドライバと同乗者の覚醒度に応じた歪み補正の例を示す模式図である。歪み補正は、歪補正処理部４１０によって行われる。ここで、図１０は、ドライバに適合した歪み補正を行う例を示す模式図である。図１０の例では、表示の右側の高さが左側に対して小さく設定される。これにより、ドライバ側から表示を見た場合に、表示の左右の高さが均等に視認される。また、図１１は、ドライバと同乗者の両方に適合した歪み補正を行う例を示す模式図である。図１１の例では、表示の左右の高さが均等とされる。また、図１２は、同乗者に適合した歪み補正を行う例を示す模式図である。図１２の例では、表示の左側の高さが右側に対して小さく設定される。これにより、同乗者側から表示を見た場合に、表示の左右の高さが均等に視認される。
図１４及び図１５は、ドライバと同乗者の覚醒度に応じた表示変形の例を示す模式図である。ここで、図１４は、ドライバに適合した表示変形を行う例を示す模式図である。図１４の例では、表示の右側の文字のサイズが左側の文字のサイズに対して小さく設定される。これにより、表示がドライバ方向を向いているように視認される。また、図１５は、同乗者に適合した表示変形を行う例を示す模式図である。図１５の例では、表示の左側の文字のサイズが右側の文字のサイズに対して小さく設定される。これにより、表示が同乗者方向を向いているように視認される。
次に、図１３のフローチャートに基づいて、本実施形態に係る車両システム１０００で行われる処理について説明する。図１３に示す処理は、制御装置４００の各構成要素によって行われ、所定の制御周期毎に繰り返し行われる。先ず、ステップＳ１０では、ドライバ情報取得部４０４がドライバの情報を取得し、ドライバ状態判定部４０６が、ドライバの覚醒度が低下しているか否かを判定し、ドライバの覚醒度が低下している場合は、ステップＳ１２へ進む。ステップＳ１２では、ドライバの覚醒度が著しく低下しているか否かを判定し、ドライバの覚醒度が著しく低下している場合は、ステップＳ１４へ進む。この場合、上記表の「ドライバが覚醒していない状態」に相当するため、ステップＳ１４では、図９に示したように、ドライバと同乗者の双方に向けた表示を行う。これにより、同乗者に対し、ドライバの運転サポートや危険回避のための準備行動を促すことができる。ステップＳ１０でドライバの覚醒度が低下していない場合は、図７に示したようにドライバ向けに表示を行う。
ステップＳ１２でドライバの覚醒度が著しく低下していない場合は、ステップＳ１６へ進む。ステップＳ１６では、同乗者の覚醒度が低下しているか否かを判定し、同乗者の覚醒度が低下している場合はステップＳ１８へ進む。この場合、上記表の「ドライバの覚醒度が低下している状態」であり、且つ「同乗者の覚醒度が低下している状態」又は「同乗者が覚醒していない状態」に相当するため、ステップＳ１８では、図７に示したように、ドライバ向けに表示を行う。この場合、同乗者の覚醒度が低下しているため、ドライバ向けに表示を行うことでドライバを覚醒させるようにする。スピーカ６００、シート振動部７００による警告を併用することが望ましい。
また、ステップＳ１６で同乗者の覚醒度が低下していない場合は、ステップＳ２０へ進む。この場合、上記表の「ドライバの覚醒度が低下している状態」であり、且つ「同乗者が覚醒している状態」に相当するため、ステップＳ２０では、図８に示したように、ドライバと同乗者の中央に表示を行う。これにより、ドライバと同乗者の双方を覚醒させるようにする。この場合もスピーカ６００、シート振動部７００による警告を併用することが望ましい。
ステップＳ１４，Ｓ１８，Ｓ２０の後はステップＳ２２へ進む。ステップＳ２２では、ドライバの覚醒度が正常になったか否かを判定し、ドライバの覚醒度が正常になった場合はステップＳ２４へ進む。ステップＳ２４では、ＨＵＤ装置５００による表示を終了し、本制御周期での処理を終了する（ＥＮＤ）。また、ステップＳ２２でドライバの覚醒度が正常になっていない場合は、ＨＵＤ装置５００による表示を終了することなく、本制御周期での処理を終了する（ＥＮＤ）。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
１００ 車外センサ
４００ 制御装置
４０６ ドライバ状態判定部
４０７ 同乗者状態判定部
４１４ ＨＵＤ制御部
５００ ＨＵＤ装置

Claims (10)

  1. 車両の窓部に表示を行う表示装置と、
    ドライバと同乗者のそれぞれの覚醒状態を判定する判定部と、
    前記表示装置による表示を制御し、前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示を変更する表示制御部と、
    を備えることを特徴とする、車両の表示システム。
  2. 前記表示制御部は、前記ドライバの覚醒度が低下していない場合は、前記窓部に前記ドライバに向けた表示を行うように制御することを特徴とする、請求項１に記載の車両の表示システム。
  3. 前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度も低下している場合は、前記窓部に前記ドライバに向けた表示を行うように制御することを特徴とする、請求項１に記載の車両の表示システム。
  4. 前記表示制御部は、前記窓部の前記ドライバの正面に表示を行うように制御することを特徴とする、請求項２又は３に記載の車両の表示システム。
  5. 前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、
    前記表示制御部は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御し、
    前記歪補正処理部は、前記ドライバに向けて前記表示の歪みを補正することを特徴とする、請求項２又は３に記載の車両の表示システム。
  6. 前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度が低下していない場合は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御することを特徴とする、請求項１に記載の車両の表示システム。
  7. 前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、
    前記歪補正処理部は、前記同乗者に向けて前記表示の歪みを補正することを特徴とする、請求項６に記載の車両の表示システム。
  8. 前記表示制御部は、前記ドライバが覚醒していない場合は、前記窓部の前記ドライバと前記同乗者の正面にそれぞれ表示を行うように制御することを特徴とする、請求項１に記載の車両の表示システム。
  9. 前記ドライバ及び前記同乗者の状態を撮像するカメラと、
    前記カメラから前記ドライバ及び前記同乗者の画像情報を取得する画像情報取得部と、を備え、
    前記判定部は、前記画像情報に基づいて前記ドライバ及び前記同乗者の前記覚醒状態を判定することを特徴とする、請求項１〜８のいずれかに記載の車両の表示システム。
  10. 車両の窓部に表示を行う表示装置を有する車両の表示システムの制御方法であって、
    ドライバと同乗者のそれぞれの覚醒状態を判定するステップと、
    前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示内容を変更するステップと、
    を備えることを特徴とする、車両の表示システムの制御方法。
JP2017050345A 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法 Active JP6470334B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017050345A JP6470334B2 (ja) 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法
CN201810139443.7A CN108621794B (zh) 2017-03-15 2018-02-11 车辆的显示系统及车辆的显示系统的控制方法
DE102018103263.3A DE102018103263A1 (de) 2017-03-15 2018-02-14 Fahrzeug-displaysystem und verfahren zur steuerung eines fahrzeug-displaysystems
US15/898,255 US10346698B2 (en) 2017-03-15 2018-02-16 Vehicle display system and method of controlling vehicle display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017050345A JP6470334B2 (ja) 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法

Publications (2)

Publication Number Publication Date
JP2018156173A true JP2018156173A (ja) 2018-10-04
JP6470334B2 JP6470334B2 (ja) 2019-02-13

Family

ID=63372446

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017050345A Active JP6470334B2 (ja) 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法

Country Status (4)

Country Link
US (1) US10346698B2 (ja)
JP (1) JP6470334B2 (ja)
CN (1) CN108621794B (ja)
DE (1) DE102018103263A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019215620A (ja) * 2018-06-11 2019-12-19 日産自動車株式会社 情報提示方法及び情報提示装置
CN111634232A (zh) * 2019-03-01 2020-09-08 丰田自动车株式会社 控制装置
JP2021026131A (ja) * 2019-08-06 2021-02-22 三菱自動車工業株式会社 車両の報知システム

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7005112B2 (ja) * 2018-03-05 2022-01-21 矢崎総業株式会社 表示システム、及び、車載システム
JP7180228B2 (ja) * 2018-09-20 2022-11-30 いすゞ自動車株式会社 車両用監視装置
JP7053440B2 (ja) * 2018-11-29 2022-04-12 本田技研工業株式会社 生成装置、生成装置の制御方法及びプログラム
FR3100077A1 (fr) * 2019-08-20 2021-02-26 Psa Automobiles Sa Alerte d’un conducteur d’un détournement prolongé d’attention pendant une phase de conduite manuelle d’un véhicule
US11194008B2 (en) 2019-10-25 2021-12-07 Toyota Motor Engineering And Manufacturing North America, Inc. Triangulation and calibration of electronic control units
JP7262382B2 (ja) * 2019-12-27 2023-04-21 本田技研工業株式会社 情報提供装置
CN114056344A (zh) * 2020-08-03 2022-02-18 奥迪股份公司 车内信息显示系统及相应车辆、方法、计算机设备和介质
JP2022175039A (ja) * 2021-05-12 2022-11-25 トヨタ自動車株式会社 車両利用料金決定システム及び車両利用料金決定方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008209212A (ja) * 2007-02-26 2008-09-11 Denso Corp 表示歪み測定装置及び表示歪み補正方法
JP2014092965A (ja) * 2012-11-05 2014-05-19 Denso Corp 乗員監視装置
JP2015178318A (ja) * 2014-03-19 2015-10-08 矢崎総業株式会社 車両用表示装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0655582B2 (ja) 1989-07-31 1994-07-27 株式会社小糸製作所 車輌用表示装置
JPH11110697A (ja) 1997-09-30 1999-04-23 Mazda Motor Corp 車両用障害物検出装置
US7046245B2 (en) * 2001-10-10 2006-05-16 Sony Computer Entertainment America Inc. System and method for environment mapping
JP2004082835A (ja) 2002-08-26 2004-03-18 Mitsubishi Electric Corp 車載表示装置
JP2004318266A (ja) * 2003-04-11 2004-11-11 Denso Corp 車両用表示装置
JP4583883B2 (ja) 2004-11-08 2010-11-17 パナソニック株式会社 車両用周囲状況表示装置
JP4740689B2 (ja) * 2005-08-19 2011-08-03 エイディシーテクノロジー株式会社 車載用画像表示装置及び車載用装置
JP2007331506A (ja) 2006-06-14 2007-12-27 Alpine Electronics Inc リアウィンドウ表示装置
DE102008040149A1 (de) * 2008-07-03 2010-01-07 Robert Bosch Gmbh Vorrichtung und Verfahren zur Freigabe einer automatischen Führung eines Fahrzeugs
US8344894B2 (en) * 2009-04-02 2013-01-01 GM Global Technology Operations LLC Driver drowsy alert on full-windshield head-up display
DE102010040694A1 (de) * 2010-09-14 2012-03-15 Robert Bosch Gmbh Head-up-Display
CN104325937A (zh) * 2013-07-22 2015-02-04 北汽福田汽车股份有限公司 一种显示屏风窗
JP6390057B2 (ja) 2014-03-26 2018-09-19 株式会社日本総合研究所 車両状態を報知する自動走行移動体及び車両状態報知方法
CN105974583B (zh) * 2015-03-11 2019-06-18 现代摩比斯株式会社 用于车辆的抬头显示器及其控制方法
CN116373879A (zh) * 2015-04-03 2023-07-04 株式会社电装 行驶控制装置以及行驶控制方法
US9942522B2 (en) * 2015-08-19 2018-04-10 Faraday&Future Inc. In-vehicle camera system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008209212A (ja) * 2007-02-26 2008-09-11 Denso Corp 表示歪み測定装置及び表示歪み補正方法
JP2014092965A (ja) * 2012-11-05 2014-05-19 Denso Corp 乗員監視装置
JP2015178318A (ja) * 2014-03-19 2015-10-08 矢崎総業株式会社 車両用表示装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019215620A (ja) * 2018-06-11 2019-12-19 日産自動車株式会社 情報提示方法及び情報提示装置
JP7101053B2 (ja) 2018-06-11 2022-07-14 日産自動車株式会社 情報提示方法及び情報提示装置
CN111634232A (zh) * 2019-03-01 2020-09-08 丰田自动车株式会社 控制装置
JP2021026131A (ja) * 2019-08-06 2021-02-22 三菱自動車工業株式会社 車両の報知システム
JP7334529B2 (ja) 2019-08-06 2023-08-29 三菱自動車工業株式会社 車両の報知システム

Also Published As

Publication number Publication date
DE102018103263A1 (de) 2018-09-20
CN108621794A (zh) 2018-10-09
US20180268230A1 (en) 2018-09-20
JP6470334B2 (ja) 2019-02-13
US10346698B2 (en) 2019-07-09
CN108621794B (zh) 2023-04-14

Similar Documents

Publication Publication Date Title
JP6470334B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
JP6454368B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
US10311735B2 (en) Vehicle display system and method of controlling vehicle display system
JP6554131B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
JP6445607B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
US10227002B2 (en) Vehicle display system and method of controlling vehicle display system
JP5109750B2 (ja) 運転者状態検出装置、意識状態検出方法
US20180264945A1 (en) Vehicle display system and method of controlling vehicle display system
US20180239136A1 (en) Head mounted display device
JP2016210212A (ja) 情報提供装置、情報提供方法及び情報提供用制御プログラム
JP2009183473A (ja) 視線方向検出装置及び視線方向検出方法
JP6587254B2 (ja) 輝度制御装置、輝度制御システム及び輝度制御方法
JP2009248812A (ja) 運転支援装置
JP2009099028A (ja) 視覚情報呈示装置及び視覚情報呈示方法
WO2019073598A1 (ja) 車両用表示システム
JP6415968B2 (ja) 通信装置、警告装置、表示装置、制御方法、プログラム、及び記憶媒体
JP2017103627A (ja) 車両後方表示装置
WO2023187949A1 (ja) 乗り物酔い抑制装置及び乗り物酔い抑制方法
JP2023004326A (ja) 運転支援装置、運転支援方法及び運転支援プログラム
JP2016134077A (ja) 覚醒維持装置及びプログラム
CN116301366A (zh) 一种基于眼球追踪的空气投影控制方法及系统

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181121

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181225

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190117

R150 Certificate of patent or registration of utility model

Ref document number: 6470334

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190208

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250