JP6470334B2 - 車両の表示システム及び車両の表示システムの制御方法 - Google Patents

車両の表示システム及び車両の表示システムの制御方法 Download PDF

Info

Publication number
JP6470334B2
JP6470334B2 JP2017050345A JP2017050345A JP6470334B2 JP 6470334 B2 JP6470334 B2 JP 6470334B2 JP 2017050345 A JP2017050345 A JP 2017050345A JP 2017050345 A JP2017050345 A JP 2017050345A JP 6470334 B2 JP6470334 B2 JP 6470334B2
Authority
JP
Japan
Prior art keywords
driver
display
passenger
vehicle
window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017050345A
Other languages
English (en)
Other versions
JP2018156173A (ja
Inventor
武史 鳥居
武史 鳥居
能英瑠 佐藤
能英瑠 佐藤
瑠一 澄川
瑠一 澄川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Subaru Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Subaru Corp filed Critical Subaru Corp
Priority to JP2017050345A priority Critical patent/JP6470334B2/ja
Priority to CN201810139443.7A priority patent/CN108621794B/zh
Priority to DE102018103263.3A priority patent/DE102018103263A1/de
Priority to US15/898,255 priority patent/US10346698B2/en
Publication of JP2018156173A publication Critical patent/JP2018156173A/ja
Application granted granted Critical
Publication of JP6470334B2 publication Critical patent/JP6470334B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11Instrument graphical user interfaces or menu aspects
    • B60K2360/113Scrolling through menu items
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11Instrument graphical user interfaces or menu aspects
    • B60K2360/115Selection of menu items
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/151Instrument output devices for configurable output
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • B60K2360/1868Displaying information according to relevancy according to driving situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/011Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Emergency Alarm Devices (AREA)
  • Instrument Panels (AREA)

Description

本発明は、車両の表示システム及び車両の表示システムの制御方法に関する。
従来、下記の特許文献1には、車内の既存の表示装置から出力される表示を、運転者の覚醒度に併せて最適な出力にして、より安全性の高い運転作業を可能にする車両用表示装置を提供することが記載されている。
また、近時では、顔の画像情報に基づいて人の状態を認識する技術が一般的となっている。例えば、下記の非特許文献1には、顔認識により運転中のドライバの状態を監視する技術が記載されている。
特開2004−318266号公報
丸山 勇人、松岡 敦子、"ドライバーモニタシステムの紹介"、2012年11月、OKIテクニカルレビュー 第220号 Vol.79 No.2
しかしながら、上記特許文献1に記載された技術では、運転者の覚醒度が低下している場合に表示の出力を最適化したとしても、運転者が表示を確実に認識することが困難になることが想定される。特に、運転者の覚醒度が著しく低下している場合は、運転者が表示を認識することができないため、所望の車両操作を行うことが出来なくなる問題がある。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、運転者と同乗者の覚醒度に応じて、表示装置による表示を最適に制御することが可能な、新規かつ改良された車両の表示システム及び車両の表示システムの制御方法を提供することにある。
上記課題を解決するために、本発明のある観点によれば、車両の窓部に表示を行う表示装置と、ドライバと同乗者のそれぞれの覚醒状態を判定する判定部と、前記表示装置による表示を制御し、前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示を変更する表示制御部と、を備え、前記表示制御部は、前記ドライバの覚醒度が低下していない場合は、前記窓部に前記ドライバに向けた表示を行うように制御し、前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、前記表示制御部は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御し、前記歪補正処理部は、前記ドライバに向けて前記表示の歪みを補正する、車両の表示システムが提供される。
前記表示制御部は、前記ドライバの覚醒度が低下していない場合は、前記窓部に前記ドライバに向けた表示を行うように制御するものであっても良い。
また、前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度も低下している場合は、前記窓部に前記ドライバに向けた表示を行うように制御するものであっても良い。
また、前記表示制御部は、前記窓部の前記ドライバの正面に表示を行うように制御するものであっても良い。
また、前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、前記表示制御部は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御し、前記歪補正処理部は、前記ドライバに向けて前記表示の歪みを補正するものであっても良い。
また、前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度が低下していない場合は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御するものであっても良い。
また、前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、前記歪補正処理部は、前記同乗者に向けて前記表示の歪みを補正するものであっても良い。
また、前記表示制御部は、前記ドライバが覚醒していない場合は、前記窓部の前記ドライバと前記同乗者の正面にそれぞれ表示を行うように制御するものであっても良い。
また、前記ドライバ及び前記同乗者の状態を撮像するカメラと、前記カメラから前記ドライバ及び前記同乗者の画像情報を取得する画像情報取得部と、を備え、前記判定部は、前記画像情報に基づいて前記ドライバ及び前記同乗者の前記覚醒状態を判定するものであっても良い。
また、上記課題を解決するために、本発明の別の観点によれば、車両の窓部に表示を行う表示装置を有する車両の表示システムの制御方法であって、ドライバと同乗者のそれぞれの覚醒状態を判定するステップと、前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示内容を変更するステップであって、ドライバの覚醒度が低下していない場合は、前記窓部に前記ドライバに向けた表示を行い、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御するステップと、前記表示装置により表示する画像の歪みを補正し、前記ドライバに向けて前記表示の歪みを補正するステップと、を備える、車両の表示システムの制御方法が提供される。
以上説明したように本発明によれば、運転者と同乗者の覚醒度に応じて、表示装置による表示を最適に制御することが可能となる。
本発明の一実施形態に係る車両システムの構成を示す模式図である。 自発光中間膜を用いたHUD装置を示す模式図である。 ドライバセンサがドライバを撮影している状態を示す模式図である。 ドライバの顔領域に基づいて、顔が向いている角度等を算出する様子を示す模式図である。 ドライバの口が開いているか否かを判定する開口検知を示す模式図である。 ドライバの目が閉じているか否かを判定する様子を示す模式図である。 ドライバ向けに表示を行った例を示す模式図である。 ドライバと同乗者の双方から見易い位置に表示を行った例を示す模式図である。 ドライバと同乗者のそれぞれに向けて表示を行った例を示す模式図である。 ドライバに適合した歪み補正を行う例を示す模式図である。 ドライバと同乗者の両方に適合した歪み補正を行う例を示す模式図である。 同乗者に適合した歪み補正を行う例を示す模式図である。 本実施形態に係る車両システムで行われる処理を示すフローチャートである。 ドライバに適合した表示変形を行う例を示す模式図である。 同乗者に適合した表示変形を行う例を示す模式図である。
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
図1は、本発明の一実施形態に係る車両システム1000の構成を示す模式図である。車両システム1000は、基本的には自動車などの車両に構成されるシステムである。図1に示すように、車両システム1000は、車外センサ100、ドライバセンサ200、同乗者センサ210、着座センサ300、制御装置400、HUD装置500、スピーカ600、シート振動部700を有して構成されている。
車外センサ100は、ステレオカメラ、単眼カメラ、ミリ波レーダ、赤外線センサ等から構成され、自車両周辺の人や車両などの位置、速度を測定する。車外センサ100がステレオカメラから構成される場合、ステレオカメラは、CCDセンサ、CMOSセンサ等の撮像素子を有する左右1対のカメラを有して構成され、車両外の外部環境を撮像し、撮像した画像情報を制御装置400へ送る。一例として、ステレオカメラは、色情報を取得可能なカラーカメラから構成され、車両のフロントガラスの上部に設置される。
HUD(Head−up Display)装置500は、人間の視野に直接情報を映し出す表示装置であって、自動車のフロントガラスやリアガラスなどのガラス上に実像を表示する。HUDは虚像を表示する装置が一般的に知られているが、本実施形態では、実像を映し出す表示装置を用いる。HUD装置500は、実像を表示しているため、視野角がほぼ360°あり、車内外から表示を視認することが可能である。
HUD装置500として、より具体的には、図2に示すような自発光中間膜510を用いる装置を用いることができる。この場合、車両のフロントガラス、リアガラス等において、表裏の2枚のガラス520で挟むように自発光中間膜510を配置する。自発光中間膜510には発光材料が含まれており、車内に設置するプロジェクター530からレーザ光を照射すると、照射された部分が発光し、文字や画像が表示される。表示物は全角度からの視認性を有し、運転席以外の席や、車両外部からも視認することができる。なお、HUD装置500は、自発光タイプのデバイスを車両のガラスに配置することで構成することもできる。この場合、例えば有機EL素子を用いた透明スクリーン、または透過型液晶装置等を用いることもできる。また、表示デバイスとして、HUD装置500以外のデバイスを用いても良く、例えばインパネに設置した大型液晶装置やLED表示装置などを用いても良い。なお、以下では、表示装置として車両の窓部(ガラス)に表示を行うHUD装置500を例に挙げて説明するが、本発明に係る表示装置はこれに限定されるものではなく、車両の内部又は外部に設けられた表示装置の全ての態様を含む。例えば、本実施形態に係る表示装置は、車両外部の窓部以外(ボディーなど)に設けられていても良く、車両内部の窓部以外(インパネ、座席など)に設けられていても良い。また、車両の内部に設けられた表示装置と車両の外部に設けられた表示装置は一体であっても良いし、別体であっても良い。
ドライバセンサ200は、カメラ、視線センサ、モーションセンサ等から構成され、ドライバ(運転者)の頭や腕の動き、視線方向などを測定する。ドライバセンサ200がカメラから構成される場合、カメラが撮像した画像を画像処理することで、頭や腕の動き、視線方向などを取得する。ドライバセンサ200が視線センサから構成される場合、角膜反射法などの方法により視線検出を行う。着座センサ300は、車両内の各座席に設けられ、座席に人が座ったか否かを判定する。スピーカ600は、HUD装置500によって車両の内外へ警告を表示する際に、車両の内外へ警告音を発生させる。シート振動部700は、車両の座席に設けられ、HUD装置500によって車両内へ警告を表示する際に、座席を振動することでドライバ、同乗者へ警告を行う。
制御装置400は、車外センサ100、ドライバセンサ200等が検出した情報に基づいて、HUD装置500による表示を制御する。このため、制御装置400は、環境情報取得部402、ドライバ情報取得部(画像情報取得部)404、同乗者情報取得部(画像情報取得部)405、ドライバ状態判定部406、同乗者状態判定部407、環境状態判定部408、歪補正処理部410、HUD制御部(表示制御部)414を有している。なお、制御装置400の各構成要素は、回路(ハードウェア)、またはCPUなどの中央演算処理装置とこれを機能させるためのプログラム(ソフトウェア)によって構成されることができる。
環境情報取得部402は、車外センサ100を構成するステレオカメラの左右1組のカメラによって撮像した左右1組のステレオ画像対に対し、対応する位置のずれ量から三角測量の原理によって対象物までの距離情報を生成して取得することができる。同時に、環境情報取得部402は、画像情報から被写体の位置情報を取得することができる。また、環境情報取得部302は、三角測量の原理によって生成した距離情報に対して、周知のグルーピング処理を行い、グルーピング処理した距離情報を予め設定しておいた三次元的な立体物データ等と比較することにより、立体物データや白線データ等を検出する。これにより、制御装置300は、人物、他車両、一時停止の標識、停止線、ETCゲートなどを認識することもできる。
また、環境情報取得部402は、三角測量の原理によって生成した人物、他車両との距離情報を用いて、人物や他車両との距離の変化量、相対速度を算出することができる。距離の変化量は、単位時間ごとに検知されるフレーム画像間の距離を積算することにより求めることができる。また、相対速度は、単位時間ごとに検知される距離を当該単位時間で割ることにより求めることができる。
このように、環境情報取得部402は、車外センサ100から得られる車両外の画像情報を取得して画像分析処理を行い、画像情報を分析して車両外の環境情報を取得する。
図3は、ドライバセンサ200がカメラから構成される場合に、ドライバセンサ200がドライバを撮影している状態を示す模式図である。図3に示すように、ドライバセンサ200は、一例としてステアリングコラムの上部に設置される。
ドライバセンサ200がカメラから構成される場合、ドライバセンサ200によって撮影された画像は、制御装置400に入力される。ドライバ情報取得部404は、入力画像からエッジ検出、顔検出等の画像処理技術を用いてドライバの顔領域を取得し、顔領域に基づいて顔向きを取得する。ドライバ状態判定部406は、顔向きに基づいてドライバが脇見をしているか否かを判定する。また、ドライバ情報取得部404は、目、鼻、口など顔の各部位の特徴点の位置情報を検知し、ドライバ状態判定部406は、位置情報に基づいて眠気、居眠りなど前方不注意の可能性などドライバの状態を判定する。
図4は、検出されたドライバの顔領域10に基づいて、顔が向いている角度等を算出する様子を示す模式図である。画像情報から得られるドライバの顔領域10に基づいて、ドライバの顔向きが予め定めた領域を外れているか否かをモニタリングすることで、脇見の可能性を判定することができる。なお、ドライバの顔領域10は、目、鼻、口など顔の各部位の特徴点の位置情報から設定できる。また、顔向きは、一例として、正面から見た時の目の間隔を基準とし、この基準と画像情報から得られる目の間隔とを比較することで推定することができる。画像情報から得られる目の間隔が基準値よりも小さい程、顔向きが正面から横向きにずれていると判断できる。
図4の右下には、検知結果20を示している。検知結果20には、縦軸に「顔の上下方向の角度」、横軸に「顔の左右方向の角度」を表示しており、×印30は検知された顔向きを示している。検知結果20において斜線を付した中央部の矩形は、ドライバが正面を向いていると判断する正面領域22を示し、検知された顔向き(×印30)が正面領域22から左右の脇見領域24に変化した場合、脇見の可能性があると判定する。正面領域22と脇見領域24を区別するしきい値は左右±20°程度とすることができるが、適宜変更可能である。脇見をしているか否かの判定は、例えば基準時間に対して顔向きが脇見領域24になった時間の比率が所定のしきい値を超えたか否かによって判定することができる。また、例えば顔向き角度が予め設定した範囲を一定時間連続して超えた場合、もしくは連続して顔の検出ができない場合は、脇見と判定することも可能である。
図5は、ドライバの口が開いているか否かを判定する開口検知を示す模式図である。図5に示すように、口の上下の特徴点間の距離D1から口の開閉状態を判定し、特徴点間の距離D1が所定値を超える場合(図5に示す開口状態)では、ドライバの口が開いている可能性があり、あくびの可能性があると判定することができる。また、例えば開口状態のまま一定時間が経過する状況が複数回検知される場合は、居眠りの危険性が増大していると判断できる。
図6は、ドライバの目が閉じているか否かを判定する様子を示す模式図である。図6に示すように、目の上下の特徴点間の距離D2から目が閉じていることを検知し、特徴点間の距離D2が所定値以下の場合(図6に示す目閉じ状態)では、居眠りの可能性があると判定することができる。居眠りをしているか否かの判定は、例えば基準時間に対して目が閉じている時間の比率(閉眼率)が所定のしきい値を超えたか否かによって判定することができる。また、目閉じ検知が複数回検知されると居眠りの危険性が増大していると判断できる。また、画像処理により瞬きを検出し、瞬きの回数に基づいて居眠りをしているか否かの判定を行っても良い。図5、図6に示す判定は、ドライバ状態判定部406によって行われる。
制御装置400の環境状態判定部408は、環境情報取得部402が取得した環境情報に基づいて、車両外の環境情報を判定する。特に、環境状態判定部408は、車両外の対象として人物の状態を判定することができる。
同乗者センサ210は、同乗者の正面(助手席の場合、ダッシュボード上など)に設置される。同乗者センサ210は、ドライバセンサ200と同様の手法で同乗者の画像を撮像する。同乗者情報取得部405は、入力画像からエッジ検出、顔検出等の画像処理技術を用いて同乗者の顔領域を取得し、顔領域に基づいて顔向きを取得する。同乗者状態判定部407は、顔向きに基づいて同乗者が脇見をしているか否かを判定する。また、同乗者情報取得部406は、目、鼻、口など顔の各部位の特徴点の位置情報からドライバの状態を検知し、同乗者状態判定部407は、これに基づいて眠気、居眠りなど前方不注意の可能性を判定する。
なお、同乗者センサ210はドライバセンサ200と共通に構成されていても良い。この場合、同乗者情報取得部405はドライバ情報取得部404と共通に構成され、同乗者状態判定部407はドライバ状態判定部406と共通に構成される。
HUD制御部(表示制御部)414は、HUD装置500による表示を制御する。HUD制御部(表示制御部)414は、ドライバ状態判定部406、同乗者状態判定部407等の判定結果に基づいて、HUD装置500による表示を制御することができる。
本実施形態では、車外センサ100により、車両周辺に人物や車両などが存在することが検出された場合、HUD装置500を用いてドライバに対して警告表示を行う。例えば、車両の走行中に進行方向前方に人物や車両などが存在する場合、HUD装置500による警告表示を行うことで、ドライバに対して警告を行うことができる。警告表示は車両外からも認識することができるため、警告表示を車両外部の人物、車両等に対して行うこともできる。この際、本実施形態では、ドライバ状態取得部404がドライバセンサ200からドライバの状態を取得し、ドライバ状態判定部406によるドライバが正常であるか否かの判定結果に応じてHUD装置500による表示を制御する。また、本実施形態では、同乗者情報取得部405が同乗者センサ210から同乗者の状態を取得し、同乗者状態判定部407による同乗者が正常であるか否かの判定結果に応じてHUD装置500による表示を制御する。
ドライバ及び同乗者が正常であるか否かの判定では、脇見をしているか否かの判定結果、眠気、居眠りなど前方不注意の可能性の判定結果に基づいて、ドライバ及び同乗者の覚醒状態を判定する。そして、ドライバ及び同乗者の覚醒状態に応じてHUD装置500による表示を最適に制御する。なお、覚醒度の判定は、眠気のレベルや病気起因の体調異常を基に行っても良い。
具体的には、ドライバと同乗者の覚醒度に応じて、以下のように表示を切り替え、ドライバの覚醒度及び同乗者の覚醒度に応じて、ドライバ向けか同乗者向けかの表示を行う。これにより、同乗者にとって煩わしい表示がされることを回避しつつ、ドライバの覚醒度が低下した場合であっても、できるだけ危険な状態を回避することが可能となる。
Figure 0006470334
ドライバ状態判定部406及び同乗者状態判定部407は、脇見をしているか否かの判定、眠気、居眠りなど前方不注意の可能性の判定を行う際に、所定のしきい値を用いて覚醒度を上記表のように3つに分類する。上記表において、最左列はドライバの覚醒度を示している。判定のしきい値を2つ用いることで、ドライバが覚醒している状態(○)、覚醒度が低下している状態(△)、覚醒度していない状態(覚醒度が著しく低下している状態(×))の3つに分類される。また、上記表の1行目は同乗者の覚醒度を示している。同乗者についても、判定のしきい値を2つ用いることで、覚醒度が3つに分類される。
そして、覚醒度に基づいて、上記表に従って表示の切り替えが行われる。例えば、フロントガラス前面に表示する場合には、表示位置として、ドライバ正面位置、ドライバと助手席の間、ドライバと助手席のそれぞれ正面に表示する。これらの表示を切り替えることで、上記表のように「ドライバ向け提示」、「ドライバと同乗者の中央に提示」、「ドライバと同乗者の両者それぞれに提示」を切り替えることができる。
図7〜図9は、ドライバと同乗者の覚醒度に応じた表示例を示す模式図である。図7は、ドライバ向けに表示を行った例を示す模式図である。この場合、フロントガラス802上のドライバの正面に警告表示として「前方注意」が表示される。図8は、ドライバと同乗者の双方から見易い位置に表示を行った例を示す模式図である。この場合、フロントガラス802上のドライバと同乗者の中間に警告表示が行われる。図9は、ドライバと同乗者のそれぞれに向けて表示を行った例を示す模式図である。この場合、フロントガラス802上のドライバと同乗者のそれぞれの正面に警告表示が行われる。
上記表に示したように、ドライバが運転できるような覚醒度の場合は、できるだけドライバ向けに提示を行なう。同乗者の覚醒度が低下している場合は、無理に同乗者の覚醒度を上げる(眠い場合に起こす)のではなく、ドライバ向けに表示を行なう。ドライバが意識喪失などで覚醒度が著しく低下している場合は、同乗者にも提示することで、同乗者に対し、ドライバの運転サポートや危険回避のための準備行動を促すことができる。
警告表示は、予め定めた正面位置ではなく、対象者の顔向きや視線方向を考慮することもできる。フロントガラス802に表示する場合、フロントガラス802の曲率に応じた歪みが生じるが、覚醒度のレベルに応じて歪み補正を行い、ドライバ、助手席のそれぞれに表示を適合させるか、両者に表示を適合させるかを調整してもよい。
図10〜図12は、ドライバと同乗者の覚醒度に応じた歪み補正の例を示す模式図である。歪み補正は、歪補正処理部410によって行われる。ここで、図10は、ドライバに適合した歪み補正を行う例を示す模式図である。図10の例では、表示の右側の高さが左側に対して小さく設定される。これにより、ドライバ側から表示を見た場合に、表示の左右の高さが均等に視認される。また、図11は、ドライバと同乗者の両方に適合した歪み補正を行う例を示す模式図である。図11の例では、表示の左右の高さが均等とされる。また、図12は、同乗者に適合した歪み補正を行う例を示す模式図である。図12の例では、表示の左側の高さが右側に対して小さく設定される。これにより、同乗者側から表示を見た場合に、表示の左右の高さが均等に視認される。
図14及び図15は、ドライバと同乗者の覚醒度に応じた表示変形の例を示す模式図である。ここで、図14は、ドライバに適合した表示変形を行う例を示す模式図である。図14の例では、表示の右側の文字のサイズが左側の文字のサイズに対して小さく設定される。これにより、表示がドライバ方向を向いているように視認される。また、図15は、同乗者に適合した表示変形を行う例を示す模式図である。図15の例では、表示の左側の文字のサイズが右側の文字のサイズに対して小さく設定される。これにより、表示が同乗者方向を向いているように視認される。
次に、図13のフローチャートに基づいて、本実施形態に係る車両システム1000で行われる処理について説明する。図13に示す処理は、制御装置400の各構成要素によって行われ、所定の制御周期毎に繰り返し行われる。先ず、ステップS10では、ドライバ情報取得部404がドライバの情報を取得し、ドライバ状態判定部406が、ドライバの覚醒度が低下しているか否かを判定し、ドライバの覚醒度が低下している場合は、ステップS12へ進む。ステップS12では、ドライバの覚醒度が著しく低下しているか否かを判定し、ドライバの覚醒度が著しく低下している場合は、ステップS14へ進む。この場合、上記表の「ドライバが覚醒していない状態」に相当するため、ステップS14では、図9に示したように、ドライバと同乗者の双方に向けた表示を行う。これにより、同乗者に対し、ドライバの運転サポートや危険回避のための準備行動を促すことができる。ステップS10でドライバの覚醒度が低下していない場合は、図7に示したようにドライバ向けに表示を行う。
ステップS12でドライバの覚醒度が著しく低下していない場合は、ステップS16へ進む。ステップS16では、同乗者の覚醒度が低下しているか否かを判定し、同乗者の覚醒度が低下している場合はステップS18へ進む。この場合、上記表の「ドライバの覚醒度が低下している状態」であり、且つ「同乗者の覚醒度が低下している状態」又は「同乗者が覚醒していない状態」に相当するため、ステップS18では、図7に示したように、ドライバ向けに表示を行う。この場合、同乗者の覚醒度が低下しているため、ドライバ向けに表示を行うことでドライバを覚醒させるようにする。スピーカ600、シート振動部700による警告を併用することが望ましい。
また、ステップS16で同乗者の覚醒度が低下していない場合は、ステップS20へ進む。この場合、上記表の「ドライバの覚醒度が低下している状態」であり、且つ「同乗者が覚醒している状態」に相当するため、ステップS20では、図8に示したように、ドライバと同乗者の中央に表示を行う。これにより、ドライバと同乗者の双方を覚醒させるようにする。この場合もスピーカ600、シート振動部700による警告を併用することが望ましい。
ステップS14,S18,S20の後はステップS22へ進む。ステップS22では、ドライバの覚醒度が正常になったか否かを判定し、ドライバの覚醒度が正常になった場合はステップS24へ進む。ステップS24では、HUD装置500による表示を終了し、本制御周期での処理を終了する(END)。また、ステップS22でドライバの覚醒度が正常になっていない場合は、HUD装置500による表示を終了することなく、本制御周期での処理を終了する(END)。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
100 車外センサ
400 制御装置
406 ドライバ状態判定部
407 同乗者状態判定部
414 HUD制御部
500 HUD装置

Claims (8)

  1. 車両の窓部に表示を行う表示装置と、
    ドライバと同乗者のそれぞれの覚醒状態を判定する判定部と、
    前記表示装置による表示を制御し、前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示を変更する表示制御部と、
    を備え
    前記表示制御部は、前記ドライバの覚醒度が低下していない場合は、前記窓部に前記ドライバに向けた表示を行うように制御し、
    前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、
    前記表示制御部は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御し、
    前記歪補正処理部は、前記ドライバに向けて前記表示の歪みを補正することを特徴とする、車両の表示システム。
  2. 前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度も低下している場合は、前記窓部に前記ドライバに向けた表示を行うように制御することを特徴とする、請求項1に記載の車両の表示システム。
  3. 前記表示制御部は、前記窓部の前記ドライバの正面に表示を行うように制御することを特徴とする、請求項1又は2に記載の車両の表示システム。
  4. 前記表示制御部は、前記ドライバの覚醒度が低下しており、前記同乗者の覚醒度が低下していない場合は、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御することを特徴とする、請求項1に記載の車両の表示システム。
  5. 前記表示装置により表示する画像の歪みを補正する歪補正処理部を備え、
    前記歪補正処理部は、前記同乗者に向けて前記表示の歪みを補正することを特徴とする、請求項4に記載の車両の表示システム。
  6. 前記表示制御部は、前記ドライバが覚醒していない場合は、前記窓部の前記ドライバと前記同乗者の正面にそれぞれ表示を行うように制御することを特徴とする、請求項1に記載の車両の表示システム。
  7. 前記ドライバ及び前記同乗者の状態を撮像するカメラと、
    前記カメラから前記ドライバ及び前記同乗者の画像情報を取得する画像情報取得部と、を備え、
    前記判定部は、前記画像情報に基づいて前記ドライバ及び前記同乗者の前記覚醒状態を判定することを特徴とする、請求項1〜6のいずれかに記載の車両の表示システム。
  8. 車両の窓部に表示を行う表示装置を有する車両の表示システムの制御方法であって、
    ドライバと同乗者のそれぞれの覚醒状態を判定するステップと、
    前記ドライバと前記同乗者のそれぞれの覚醒状態に応じて、前記表示装置による表示内容を変更するステップであって、ドライバの覚醒度が低下していない場合は、前記窓部に前記ドライバに向けた表示を行い、前記窓部の前記ドライバと前記同乗者の中間に表示を行うように制御するステップと、
    前記表示装置により表示する画像の歪みを補正し、前記ドライバに向けて前記表示の歪みを補正するステップと、
    を備えることを特徴とする、車両の表示システムの制御方法。
JP2017050345A 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法 Active JP6470334B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017050345A JP6470334B2 (ja) 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法
CN201810139443.7A CN108621794B (zh) 2017-03-15 2018-02-11 车辆的显示系统及车辆的显示系统的控制方法
DE102018103263.3A DE102018103263A1 (de) 2017-03-15 2018-02-14 Fahrzeug-displaysystem und verfahren zur steuerung eines fahrzeug-displaysystems
US15/898,255 US10346698B2 (en) 2017-03-15 2018-02-16 Vehicle display system and method of controlling vehicle display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017050345A JP6470334B2 (ja) 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法

Publications (2)

Publication Number Publication Date
JP2018156173A JP2018156173A (ja) 2018-10-04
JP6470334B2 true JP6470334B2 (ja) 2019-02-13

Family

ID=63372446

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017050345A Active JP6470334B2 (ja) 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法

Country Status (4)

Country Link
US (1) US10346698B2 (ja)
JP (1) JP6470334B2 (ja)
CN (1) CN108621794B (ja)
DE (1) DE102018103263A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7005112B2 (ja) * 2018-03-05 2022-01-21 矢崎総業株式会社 表示システム、及び、車載システム
JP7101053B2 (ja) * 2018-06-11 2022-07-14 日産自動車株式会社 情報提示方法及び情報提示装置
JP7180228B2 (ja) * 2018-09-20 2022-11-30 いすゞ自動車株式会社 車両用監視装置
JP7053440B2 (ja) * 2018-11-29 2022-04-12 本田技研工業株式会社 生成装置、生成装置の制御方法及びプログラム
JP7215228B2 (ja) * 2019-03-01 2023-01-31 トヨタ自動車株式会社 制御装置、制御方法、制御プログラム
JP7334529B2 (ja) * 2019-08-06 2023-08-29 三菱自動車工業株式会社 車両の報知システム
FR3100077A1 (fr) * 2019-08-20 2021-02-26 Psa Automobiles Sa Alerte d’un conducteur d’un détournement prolongé d’attention pendant une phase de conduite manuelle d’un véhicule
US11194008B2 (en) 2019-10-25 2021-12-07 Toyota Motor Engineering And Manufacturing North America, Inc. Triangulation and calibration of electronic control units
JP7262382B2 (ja) * 2019-12-27 2023-04-21 本田技研工業株式会社 情報提供装置
CN114056344A (zh) * 2020-08-03 2022-02-18 奥迪股份公司 车内信息显示系统及相应车辆、方法、计算机设备和介质
JP7528776B2 (ja) 2020-12-22 2024-08-06 株式会社Jvcケンウッド 脇見判定装置および脇見判定方法
JP2022175039A (ja) * 2021-05-12 2022-11-25 トヨタ自動車株式会社 車両利用料金決定システム及び車両利用料金決定方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0655582B2 (ja) 1989-07-31 1994-07-27 株式会社小糸製作所 車輌用表示装置
JPH11110697A (ja) 1997-09-30 1999-04-23 Mazda Motor Corp 車両用障害物検出装置
US7046245B2 (en) * 2001-10-10 2006-05-16 Sony Computer Entertainment America Inc. System and method for environment mapping
JP2004082835A (ja) 2002-08-26 2004-03-18 Mitsubishi Electric Corp 車載表示装置
JP2004318266A (ja) * 2003-04-11 2004-11-11 Denso Corp 車両用表示装置
JP4583883B2 (ja) 2004-11-08 2010-11-17 パナソニック株式会社 車両用周囲状況表示装置
JP4740689B2 (ja) * 2005-08-19 2011-08-03 エイディシーテクノロジー株式会社 車載用画像表示装置及び車載用装置
JP2007331506A (ja) 2006-06-14 2007-12-27 Alpine Electronics Inc リアウィンドウ表示装置
JP4867709B2 (ja) * 2007-02-26 2012-02-01 株式会社デンソー 表示歪み測定装置及び表示歪み測定方法
DE102008040149A1 (de) * 2008-07-03 2010-01-07 Robert Bosch Gmbh Vorrichtung und Verfahren zur Freigabe einer automatischen Führung eines Fahrzeugs
US8344894B2 (en) * 2009-04-02 2013-01-01 GM Global Technology Operations LLC Driver drowsy alert on full-windshield head-up display
DE102010040694A1 (de) * 2010-09-14 2012-03-15 Robert Bosch Gmbh Head-up-Display
JP2014092965A (ja) * 2012-11-05 2014-05-19 Denso Corp 乗員監視装置
CN104325937A (zh) * 2013-07-22 2015-02-04 北汽福田汽车股份有限公司 一种显示屏风窗
JP6278769B2 (ja) * 2014-03-19 2018-02-14 矢崎総業株式会社 車両用表示装置
JP6390057B2 (ja) 2014-03-26 2018-09-19 株式会社日本総合研究所 車両状態を報知する自動走行移動体及び車両状態報知方法
DE102016203789A1 (de) * 2015-03-11 2016-09-15 Hyundai Mobis Co., Ltd. Frontscheibenanzeige für ein Fahrzeug und Steuerverfahren dafür
CN116373879A (zh) * 2015-04-03 2023-07-04 株式会社电装 行驶控制装置以及行驶控制方法
US9942522B2 (en) * 2015-08-19 2018-04-10 Faraday&Future Inc. In-vehicle camera system

Also Published As

Publication number Publication date
CN108621794A (zh) 2018-10-09
US10346698B2 (en) 2019-07-09
JP2018156173A (ja) 2018-10-04
DE102018103263A1 (de) 2018-09-20
US20180268230A1 (en) 2018-09-20
CN108621794B (zh) 2023-04-14

Similar Documents

Publication Publication Date Title
JP6470334B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
JP6454368B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
JP6445607B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
US10311735B2 (en) Vehicle display system and method of controlling vehicle display system
JP6554131B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
US10227002B2 (en) Vehicle display system and method of controlling vehicle display system
JP4888838B2 (ja) 運転者撮像装置および運転者撮像方法
US20180264945A1 (en) Vehicle display system and method of controlling vehicle display system
JP5109750B2 (ja) 運転者状態検出装置、意識状態検出方法
JP2016210212A (ja) 情報提供装置、情報提供方法及び情報提供用制御プログラム
JP2015085719A (ja) 注視対象物推定装置
JP6587254B2 (ja) 輝度制御装置、輝度制御システム及び輝度制御方法
JP2009248812A (ja) 運転支援装置
JP6504382B2 (ja) 表示制御装置、表示システム、表示制御方法、表示制御プログラム、および投影装置
JP6649063B2 (ja) 車両後方表示装置及び表示制御装置
WO2019073598A1 (ja) 車両用表示システム
WO2023187949A1 (ja) 乗り物酔い抑制装置及び乗り物酔い抑制方法
JP2023004326A (ja) 運転支援装置、運転支援方法及び運転支援プログラム
JP2016134077A (ja) 覚醒維持装置及びプログラム

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181121

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181225

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190117

R150 Certificate of patent or registration of utility model

Ref document number: 6470334

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190208

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250