CN107399327B - 信息显示装置 - Google Patents

信息显示装置 Download PDF

Info

Publication number
CN107399327B
CN107399327B CN201710289451.5A CN201710289451A CN107399327B CN 107399327 B CN107399327 B CN 107399327B CN 201710289451 A CN201710289451 A CN 201710289451A CN 107399327 B CN107399327 B CN 107399327B
Authority
CN
China
Prior art keywords
attention
display
unit
display content
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710289451.5A
Other languages
English (en)
Other versions
CN107399327A (zh
Inventor
岸浩司
熊田孝恒
中岛亮一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN107399327A publication Critical patent/CN107399327A/zh
Application granted granted Critical
Publication of CN107399327B publication Critical patent/CN107399327B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B60K35/285Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver for improving awareness by directing driver's gaze direction or eye points
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634Warning indications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/191Highlight information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/334Projection means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/107Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using stereoscopic cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0183Adaptation to parameters characterising the motion of the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261Obstacle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Instrument Panels (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

本公开提供一种信息显示装置(1),其具有:注意对象识别部(21),其识别多个注意对象;行驶状态识别部(22),其识别车辆的车速;HUD(30),其显示注意显示内容;注意程度计算部(23),其基于注意对象识别部(21)及行驶状态识别部(22)的识别结果,计算出TTC,并且基于TTC计算出针对注意对象的注意程度;显示信息生成部(24),其确定多个注意对象中的注意程度最高的第1注意对象,并且生成与强调显示第1注意对象的第1注意显示内容相关的第1显示信息、以及与包围第1注意对象和多个注意对象中除了第1注意对象之外的第2注意对象的线条即第2注意显示内容相关的第2显示信息;以及显示控制部(25),其使HUD(30)显示第1注意显示内容及第2注意显示内容。

Description

信息显示装置
本申请基于在2016年5月6日向日本专利厅提交的日文专利申请第2016-093448号,其内容通过引用并入本文。
技术领域
本公开涉及信息显示装置。
背景技术
作为现有技术,在专利文献1(日本特开2013-242763号公报)中记载有与驾驶车辆的驾驶员进行对话的对话装置。该对话装置具有存储部,其将与驾驶员进行对话的对话内容的候选、示出驾驶员的驾驶集中度的提高程度的对话效果、以及驾驶员的嗜好相关联地进行存储。该对话装置通过以基于对话效果及嗜好选出的候选相应的对话内容实施与驾驶员之间的对话,从而提高驾驶员的驾驶集中度。
在车辆搭载有自动驾驶系统的情况下,设想为驾驶员在通常的交通场景中任由自动驾驶系统进行驾驶,在紧急躲避场景等中采取行动进行车辆的驾驶操作。因此,在利用自动驾驶系统进行自动驾驶中,优选即使驾驶员不进行车辆的驾驶操作,也要关注自动驾驶的内容,监视车辆的周围。但专利文献1记载的装置所实现的对话,是基于驾驶员的嗜好(例如音乐)确定的。因此,有可能导致驾驶员的意识无法足够转向车辆的驾驶。
发明内容
本公开的一个目的在于,提供一种信息显示装置,其能够对驾驶员进行影响而使得驾驶员的意识转向由自动驾驶系统进行的驾驶。
为了解决上述课题,本发明人反复进行研究而发现了图6所示的基本原理。图6是表示信息显示装置的基本原理的示意图。如图6所示,本发明人考虑在自动驾驶系统和驾驶员之间成立“共同关注”的情况下,使驾驶员理解由自动驾驶系统进行的车辆驾驶(操作)的意图,从而共享意图。并且,本发明人考虑通过该意图的共享,从而即使在由自动驾驶系统进行自动驾驶中,驾驶员也能够把意识转向驾驶,并保持对该驾驶的意识。此外,“共同关注”是指,例如基于车辆的外部传感器等获取的与物体相关的信息,经由显示部等向驾驶员报告自动驾驶系统正在对车辆周围的物体中的哪一个物体进行识别及监视。
本发明的发明人为了验证上述认知而进行了心理实验。在心理实验中,对于画面上移动的球体,指示多个实验者(健康成人20人)在球体移动中的任意位置处进行用于使球体停止的按键操作(“按压按键”)。作为实验条件,变更球体的停止方式(正常停止/急剧停止)、球体的移动速度(低速/高速)以及注意对象(预定停止位置即终点)的显示方式(显示/不显示)。图7A、图7B及图8A、图8B是心理实验所使用的画面100的例子。在图7A所示的例子中,球体101从画面100的左侧开始移动,在“按压按键”后开始缓慢减速,在不显示的终点102附近停止。即,进行球体停止条件为正常停止且注意对象不显示的状况下的实验。在图7B所示的例子中,球体101从画面100的左侧开始移动,在“按压按键”后开始缓慢减速,在显示的终点102附近停止。即,进行球体停止条件为正常停止且注意对象显示的状况下的实验。在图8A所示的例子中,球体101从画面100的左侧开始移动,在“按压按键”后急剧减速,在不显示的终点102附近停止。即,进行球体停止条件为急剧停止且注意对象不显示的状况下的实验。在图8B所示的例子中,球体101从画面100的左侧开始移动,在“按压按键”后急剧减速,在显示的终点102附近停止。即,进行球体停止条件为急剧停止且注意对象显示的状况下的实验。
此外,全部心理实验的75%对球体101进行自动控制,即,与实验者的“按压按键”无关地而球体101在终点102处自动停止。该自动控制模拟了车辆的自动驾驶。此时的终点102相当于自动驾驶系统的监视对象(驾驶员的注意对象)。
实验者在进行使球体101停止的按键操作后,以从0至100的数字回答针对球体101的停止操作的作为操作主体的感觉。其结果如图9所示。图9是表示图7A、图7B、图8A及图8B的心理实验的结果的图。如图9所示,可以确认到,与球体的停止方式(正常停止/急剧停止)无关地,显示终点102的情况与不显示终点102的情况相比,实验者作为操作主体的感觉增加。
根据上述认知,本发明人发现通过显示注意对象,能够有效地帮助驾驶员的意识转向由自动驾驶系统进行的车辆驾驶,从而完成本发明。
本公开的一个方面所涉及的信息显示装置,其在车辆的自动驾驶中显示注意显示内容,其具有:注意对象识别部,其对车辆周围存在的多个注意对象进行识别;行驶状态识别部,其识别车辆的行驶状态;显示部,其显示注意显示内容;注意程度计算部,其基于注意对象识别部的识别结果及行驶状态识别部的识别结果,计算出到车辆与注意对象接触为止的预测时间,并且基于预测时间,计算出对注意对象的注意程度;显示信息生成部,其确定多个注意对象中的注意程度最高的第1注意对象,并且基于注意对象识别部的识别结果及行驶状态识别部的识别结果,生成与强调显示第1注意对象的第1注意显示内容相关的第1显示信息、以及与包围第1注意对象和多个注意对象中除第1注意对象之外的第2注意对象的线即第2注意显示内容相关的第2显示信息;以及显示控制部,其基于第1显示信息及第2显示信息,使显示部显示第1注意显示内容及第2注意显示内容。
根据本公开的一个方面,能够提供一种信息显示装置,其能够对驾驶员进行影响而使得驾驶员的意识转向由自动驾驶系统进行的驾驶。
附图说明
图1是显示一个实施方式所涉及的信息显示装置的结构概要的框图。
图2是显示图1的信息显示装置的注意显示内容的例子的图。
图3是显示图1的信息显示装置进行的显示控制处理的流程图。
图4是显示图1的信息显示装置的注意显示内容的其他例子的图。
图5是显示图1的信息显示装置的注意显示内容的其它例子的图。
图6是显示信息显示装置的基本原理的示意图。
图7A是心理实验所使用的画面的显示例。
图7B是心理实验所使用的画面的显示例。
图8A是心理实验所使用的画面的显示例。
图8B是心理实验所使用的画面的显示例。
图9是显示图7及图8的心理实验的结果的图。
具体实施方式
以下,参照附图说明本公开的实施方式。此外,在以下的说明中,对于相同或相当的要素,标注相同的标号,省略重复说明。
图1是本实施方式所涉及的信息显示装置1的结构概要图。在图1中,本实施方式所涉及的信息显示装置1搭载于具有自动驾驶系统3的车辆2中。信息显示装置1在由自动驾驶系统3进行车辆2的自动驾驶中,将注意显示内容投影在前车窗W上而进行显示。自动驾驶中是指利用自动驾驶系统3使车辆2自动行驶的驾驶状态。自动驾驶包括速度控制和转向控制。自动驾驶系统3经由外部传感器(例如后述的毫米波雷达10、前方照相机11等)识别车辆2的周围,使致动器4动作而进行车辆2的自动驾驶。
由信息显示装置1所显示的注意显示内容,是用于对驾驶员(乘客)进行影响而使得驾驶员的意识转向由自动驾驶系统3进行的驾驶的显示内容。作为一个具体例子,注意显示内容是能够视觉识别的文字·符号·图形等对象,包括与注意对象相关的显示。注意对象表示在自动驾驶中经由外部传感器(例如后述的毫米波雷达10、前方照相机11等)而由自动驾驶系统3识别出并进行监视的物体。作为一个具体例子,注意对象可以是自动驾驶系统3的追随对象的前方行驶车辆、或作为躲避对象的障碍物等。
信息显示装置1具有毫米波雷达(Radar)10、前方照相机11、车速传感器12、ECU(Electronic Control Unit)20和HUD(Head Up Display)30。
毫米波雷达10是对车辆2的周边信息即外部状况进行检测的检测设备。毫米波雷达10利用电波(毫米波)检测车辆2外部的注意对象。作为毫米波雷达10可以采用公知的结构。毫米波雷达10将检测出的注意对象的检测信息向ECU 20发送。
前方照相机11是对车辆2的外部状况进行拍摄的摄像设备。前方照相机11检测车辆2外部的注意对象。前方照相机11设置在车辆2的前车窗W的内侧。前方照相机11可以是单镜头照相机、也可以是立体照相机。前方照相机11将检测出的注意对象的摄像信息向ECU20发送。
车速传感器12是检测车辆2的行驶状态即车辆2的速度(车速)的检测设备。作为车速传感器12,可以采用公知的结构。车速传感器12将检测出的车速向ECU 20输出。信息显示装置1并不一定必须具有车速传感器12。
ECU 20是进行针对车辆2的乘客的信息显示的相关控制的电子控制单元。ECU 20以含有CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random AccessMemory)的计算机为主体而构成。ECU 20分别与毫米波雷达10、前方照相机11、车速传感器12及HUD 30连接。
HUD 30是显示注意显示内容的显示部。HUD 30这一设备是用于通过以向驾驶员反射的方式向前车窗W照射光,从而在驾驶员的视界内投影各种信息相关的注意显示内容(包括图像)。HUD 30例如设置在车辆2的仪表板内。HUD 30与来自ECU 20的控制信号对应地,将注意显示内容投影在前车窗W上。HUD 30与来自ECU 20的控制信号对应地,将后述的第1注意显示内容C1及第2注意显示内容C2投影在前车窗W上。
下面,说明ECU 20的功能性结构。此外,ECU 20的功能的一部分可以由能够与车辆2通信的信息管理中心等的设备的计算机实施,也可以由能够与车辆2通信的移动信息终端执行。ECU 20具有注意对象识别部21、行驶状态识别部22、注意程度计算部23、显示信息生成部24以及显示控制部25。
注意对象识别部21对存在于车辆2周围的多个注意对象进行识别。注意对象识别部21基于毫米波雷达10及前方照相机11的检测结果(例如由毫米波雷达10得到的注意对象的检测信息及由前方照相机11得到的注意对象的摄像信息),识别注意对象相对于车辆2的位置、车辆2和注意对象之间的相对距离及相对速度。另外,注意对象识别部21利用公知的方法,推定出与车辆2外部的注意对象的位置对应的车辆2的前车窗W上的位置。行驶状态识别部22基于车速传感器12的检测结果,识别作为车辆2的行驶状态的车速。
注意程度计算部23基于注意对象识别部21的识别结果及行驶状态识别部22的识别结果(车辆2和注意对象之间的相对速度及相对距离),计算出由注意对象识别部21识别出的注意对象的TTC(Time To Collision)。TTC是到车辆2与注意对象接触为止的预测时间。注意程度计算部23基于计算出的TTC,计算出对于由注意对象识别部21识别出的注意对象的注意程度。注意程度是指对于由注意对象识别部21识别出的注意对象而在自动驾驶控制中的注意的程度。具体地说,注意程度计算部23通过计算TTC的倒数而计算出注意程度。
显示信息生成部24为了对驾驶员进行影响而使得驾驶员针对由自动驾驶系统3进行的驾驶的意识得到提升,而生成使HUD 30显示注意显示内容的显示信息。具体地说,如图2所示,显示信息生成部24基于由注意程度计算部23计算出的注意程度,将多个注意对象V1~V3中的注意程度最高的注意对象确定为第1注意对象V1。并且,显示信息生成部24基于注意对象识别部21的识别结果及行驶状态识别部22的识别结果,生成与前车窗W上的第1注意显示内容C1相关的第1显示信息、以及与前车窗W上的第2注意显示内容C2相关的第2显示信息。作为注意对象V1~V3并没有特别限定,例如是在存在于车辆2前方的交叉路口附近行驶的其它车辆。
第1注意显示内容C1是使得前车窗W上强调显示第1注意对象V1的注意显示内容。第1注意显示内容C1是配置在由注意对象识别部21推定的、位于车辆2的前车窗W上的第1注意对象V1的位置(注意位置)处的图形。第1注意显示内容C1例如是包围第1注意对象的椭圆等图形。通过将例如椭圆等图形的线的粗细程度与注意程度相应地设定而强调第1注意显示内容C1。也可以通过将例如椭圆等图形的填涂颜色浓度与注意程度相应地设定而强调第1注意显示内容C1。第1显示信息包括第1注意对象V1在前车窗W上的位置、颜色及外观形状相关的信息。
第2注意显示内容C2是在前车窗W上包围第1注意对象V1、和多个注意对象V1~V3中除了第1注意对象V1之外的第2注意对象V2、V3的线条。第2注意显示内容C2例如是通过由注意对象识别部21推定出的车辆2的前车窗W上的注意对象V1~V3各个位置的外侧的曲线(注意对象V1~V3的包络线)。在第2注意显示内容C2中,注意对象V1~V3的位置彼此分离得越远,包络线的面积就越大。第2显示信息包括进行显示的线条的位置、颜色及外观形状相关的信息。
显示控制部25通过基于由显示信息生成部24生成的、与第1注意显示内容C1相关的第1显示信息及与第2注意显示内容C2相关的第2显示信息,向HUD 30发送控制信号,从而使得HUD 30显示第1注意显示内容C1及第2注意显示内容C2。
下面,说明本实施方式所涉及的信息显示装置1的动作。图3是表示本实施方式所涉及的信息显示装置1进行的显示控制处理的流程图。显示控制处理例如通过自动驾驶开始操作等而开始,在自动驾驶中由ECU 20执行。
如图3所示,首先,进行注意对象的识别(步骤S1)。在该处理中,通过注意对象识别部21读入毫米波雷达10及前方照相机11的检测信息、以及车速传感器12的检测信息。通过注意对象识别部21,基于该检测信息识别注意对象相对于车辆2的位置、车辆2和注意对象之间的相对距离及相对速度。然后,计算出识别到的注意对象的TTC(步骤S2)。在该处理中,通过注意程度计算部23,基于在上述步骤S1中计算出的相对距离及相对速度,计算出识别到的注意对象的TTC。另外,通过注意程度计算部23,基于计算出的TTC,计算出与识别到的注意对象相对的注意程度(步骤S3)。
然后,通过显示信息生成部24,基于计算出的注意程度,将多个注意对象V1~V3中注意程度最高的注意对象确定为第1注意对象V1(步骤S4)。然后,通过显示信息生成部24,针对第1注意对象V1生成与包括注意位置及注意程度的第1注意显示内容C1相关的第1显示信息(步骤S5)。另外,针对除了第1注意对象V1之外的第2注意对象V2、V3,生成与包括注意广度的第2注意显示内容C2相关的第2显示信息(步骤S6)。最后,通过显示控制部25,基于上述步骤S5及S6中生成的第1显示信息及第2显示信息,使得HUD 30显示第1注意显示内容C1及第2注意显示内容C2(步骤S7)。
如以上说明所示,根据本实施方式所涉及的信息显示装置1,通过注意程度计算部23基于TTC的倒数,计算出与注意对象V1~V3相对的注意程度。由此,TTC越小,则计算出的注意程度越高,从而能够提高TTC较小的注意对象V1的注意程度。通常来说,TTC越小,碰撞的风险就越大。通过采用TTC的倒数作为注意程度,从而TTC越小,与TTC的变化相应的注意程度的变化就越大。即,通过采用TTC的倒数作为注意程度,从而能够在碰撞风险增加的范围内,表现出自动驾驶系统3强化了监视。根据该信息显示装置1,通过显示信息生成部24,确定多个注意对象V1~V3中的注意程度最高的第1注意对象V1,并且基于注意对象识别部21的识别结果及行驶状态识别部22的识别结果,生成与用于强调显示第1注意对象V1的第1注意显示内容C1相关的第1显示信息,以及与包围第1注意对象V1和多个注意对象V1~V3中除了第1注意对象V1之外的第2注意对象V2、V3的线条即第2注意显示内容C2相关的第2显示信息。并且,通过显示控制部25,将配置在前车窗W上的第1注意对象V1的位置(注意位置)处且与注意程度相应地进行强调的第1注意显示内容C1显示在HUD 30上,将具有与注意对象V1~V3的位置对应的广度(线条位置、面积等)的包络线即第2注意显示内容C2显示在HUD30上。因此,通过使驾驶员识别到注意位置、注意程度及注意广度,从而能够对驾驶员进行影响而使得驾驶员的意识转向由自动驾驶系统进行的驾驶。
此外,本公开所涉及的信息显示装置并不限定于上述实施方式中记载的内容。例如,在上述实施方式中,第2注意显示内容C2是与包围第1注意对象V1和多个注意对象V1~V3中除了第1注意对象V1之外的第2注意对象V2、V3的线条相关的注意显示内容,但也可以是与包围多个注意对象V1~V3中除了第1注意对象V1之外的第2注意对象V2、V3的线条相关的注意显示内容。在此情况下,由于第2注意显示内容C2是包围除了第1注意对象V1之外的第2注意对象V2、V3的线条,所以第1注意对象V1也可以位于第2注意显示内容C2的线条的外侧(参照图4)。另外,在图5的例子中,第2注意显示内容C2是包围除了第1注意对象V1之外的第2注意对象V2~V4的线,其结果,第1注意对象V1也可以位于第2注意显示内容C2的线条的内侧。
本公开的主题例如可以以下述项目表示。
(项目1)
一种信息显示装置,其在车辆的自动驾驶中显示注意显示内容,其具有:
注意对象识别部,其对存在于所述车辆周围的多个注意对象进行识别;
行驶状态识别部,其识别所述车辆的行驶状态;
显示部(例如HUD 30),其显示注意显示内容;
注意程度计算部,其基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果计算出到所述车辆与所述注意对象接触为止的预测时间(例如TTC),并且基于所述预测时间计算出针对所述注意对象的注意程度;
显示信息生成部,其确定所述多个注意对象中的所述注意程度最高的第1注意对象,并且基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果,生成与强调显示所述第1注意对象的第1注意显示内容(例如第1注意显示内容C1)相关的第1显示信息、以及与包围所述第1注意对象和所述多个注意对象中除了所述第1注意对象之外的第2注意对象的线条即第2注意显示内容(例如第2注意显示内容C2)相关的第2显示信息;以及
显示控制部,其基于所述第1显示信息及所述第2显示信息,使所述显示部显示所述第1注意显示内容及所述第2注意显示内容。
根据该公开,通过显示信息生成部,确定多个注意对象中的注意程度最高的第1注意对象,并且基于注意对象识别部的识别结果及行驶状态识别部的识别结果,生成与用于强调显示第1注意对象的第1注意显示内容相关的第1显示信息,以及与包围第1注意对象和多个注意对象中除了第1注意对象之外的第2注意对象的线条即第2注意显示内容相关的第2显示信息。并且,通过显示控制部,将配置在前车窗上的第1注意对象的位置(注意位置)处且与注意程度相应地进行强调的第1注意显示内容显示在显示部上。通过显示控制部,将具有与注意对象的位置对应的广度(例如线条位置、面积等)的第2注意显示内容显示在显示部上。因此,通过使驾驶员识别到注意位置、注意程度及注意广度,从而能够对驾驶员进行影响而使得驾驶员的意识转向由自动驾驶系统进行的驾驶。
(项目2)
根据项目1所示的信息显示装置,所述第2注意显示内容是通过由所述注意对象识别部推定出的所述车辆的前车窗上的所述多个注意对象的各个位置的外侧的包络线。
根据该公开,例如多个注意对象的位置彼此分离得越远,包络线的面积就越大。如上所述,通过使第2注意显示内容为包络线,从而能够使得驾驶员易于识别与注意对象的位置对应的广度。
(项目3)
一种信息显示装置,其在车辆的自动驾驶中显示注意显示内容,其具有:
注意对象识别部,其对存在于所述车辆周围的多个注意对象进行识别;
行驶状态识别部,其识别所述车辆的行驶状态;
显示部,其显示注意显示内容;
注意程度计算部,其基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果计算出到所述车辆与所述注意对象接触为止的预测时间,并且基于所述预测时间计算出针对所述注意对象的注意程度;
显示信息生成部,其确定所述多个注意对象中的所述注意程度最高的第1注意对象,并且基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果,生成与强调显示所述第1注意对象的第1注意显示内容相关的第1显示信息、以及与包围所述多个注意对象中除了所述第1注意对象之外的第2注意对象的线条即第3注意显示内容相关的第3显示信息;以及
显示控制部,其基于所述第1显示信息及所述第3显示信息,使所述显示部显示所述第1注意显示内容及所述第3注意显示内容。
根据该公开,通过显示信息生成部,确定多个注意对象中的注意程度最高的第1注意对象,并且基于注意对象识别部的识别结果及行驶状态识别部的识别结果,生成与用于强调显示第1注意对象的第1注意显示内容相关的第1显示信息,以及与包围多个注意对象中除了第1注意对象之外的第2注意对象的线条即第3注意显示内容相关的第3显示信息。并且,通过显示控制部,将配置在前车窗上的第1注意对象的位置(注意位置)处且与注意程度相应地进行强调的第1注意显示内容显示在显示部上。通过显示控制部,将具有与注意对象的位置对应的广度(例如线条位置、面积等)的第3注意显示内容显示在显示部上。因此,通过使驾驶员识别到注意位置、注意程度及注意广度,从而能够对驾驶员进行影响而使得驾驶员的意识转向由自动驾驶系统进行的驾驶。
(项目4)
根据项目1至3中任一项所示的信息显示装置,所述注意程度计算部通过计算所述预测时间的倒数而计算出所述注意程度。
根据该公开,由于通过注意程度计算部基于预测时间(例如TTC)的倒数计算出针对注意对象的注意程度,所以预测时间越小,计算出的注意程度就越高。由此,能够提高预测时间较小的注意对象的注意程度。通常来说,预测时间越小,碰撞的风险就越大。通过采用预测时间的倒数作为注意程度,从而预测时间越小,与预测时间的变化相应的注意程度的变化就越大。即,通过采用预测时间的倒数作为注意程度,从而能够在碰撞风险增加的范围内,表现出自动驾驶系统强化了监视。
(项目5)
根据项目1至4中任一项所示的信息显示装置,所述第1注意显示内容是包围所述第1注意对象的图形。
根据该公开,使得驾驶员易于识别显示部中的第1注意对象的位置。
(项目6)
根据项目5所述的信息显示装置,所述第1注意显示内容通过与所述第1注意对象的所述注意程度的高低对应地变更所述图形的线条粗细、或者所述图形的填涂颜色的浓淡,从而强调显示所述第1注意对象。
根据该公开,使得驾驶员易于识别显示部中的第1注意对象的注意程度的高低。
标号的说明
1…信息显示装置,21…注意对象识别部,22…行驶状态识别部,23…注意程度计算部,24…显示信息生成部,25…显示控制部,30…HUD(显示部)。

Claims (6)

1.一种信息显示装置,其在车辆自动驾驶中显示注意显示内容,
其具有:
注意对象识别部,其对存在于所述车辆周围的多个注意对象进行识别;
行驶状态识别部,其识别所述车辆的行驶状态;
显示部,其显示注意显示内容;
注意程度计算部,其基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果计算出到所述车辆与所述注意对象接触为止的预测时间,并且基于所述预测时间计算出针对所述注意对象的注意程度;
显示信息生成部,其确定所述多个注意对象中的所述注意程度最高的第1注意对象,并且基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果,生成与强调显示所述第1注意对象的第1注意显示内容相关的第1显示信息、以及与包围所述第1注意对象和所述多个注意对象中除了所述第1注意对象之外的第2注意对象的线条即第2注意显示内容相关的第2显示信息;以及
显示控制部,其基于所述第1显示信息及所述第2显示信息,使所述显示部显示所述第1注意显示内容及所述第2注意显示内容。
2.根据权利要求1所述的信息显示装置,其中,
所述第2注意显示内容是通过由所述注意对象识别部推定出的所述车辆的前车窗上的所述多个注意对象的各个位置的外侧的包络线。
3.一种信息显示装置,其在车辆的自动驾驶中显示注意显示内容,其具有:
注意对象识别部,其对存在于所述车辆周围的多个注意对象进行识别;
行驶状态识别部,其识别所述车辆的行驶状态;
显示部,其显示注意显示内容;
注意程度计算部,其基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果计算出到所述车辆与所述注意对象接触为止的预测时间,并且基于所述预测时间计算出针对所述注意对象的注意程度;
显示信息生成部,其确定所述多个注意对象中的所述注意程度最高的第1注意对象,并且基于所述注意对象识别部的识别结果及所述行驶状态识别部的识别结果,生成与强调显示所述第1注意对象的第1注意显示内容相关的第1显示信息、以及与包围所述多个注意对象中除了所述第1注意对象之外的、作为所述注意对象的2个以上的第2注意对象的线条即第3注意显示内容相关的第3显示信息;以及
显示控制部,其基于所述第1显示信息及所述第3显示信息,使所述显示部显示所述第1注意显示内容及所述第3注意显示内容。
4.根据权利要求1至3中任一项所述的信息显示装置,其中,
所述注意程度计算部通过计算所述预测时间的倒数而计算出所述注意程度。
5.根据权利要求1或3所述的信息显示装置,其中,
所述第1注意显示内容是包围所述第1注意对象的图形。
6.根据权利要求5所述的信息显示装置,其中,
所述第1注意显示内容通过与所述第1注意对象的所述注意程度的高低对应地变更所述图形的线条粗细、或者所述图形的填涂颜色的浓淡,从而强调显示所述第1注意对象。
CN201710289451.5A 2016-05-06 2017-04-27 信息显示装置 Active CN107399327B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016093448A JP6516298B2 (ja) 2016-05-06 2016-05-06 情報表示装置
JP2016-093448 2016-05-06

Publications (2)

Publication Number Publication Date
CN107399327A CN107399327A (zh) 2017-11-28
CN107399327B true CN107399327B (zh) 2020-08-07

Family

ID=60119252

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710289451.5A Active CN107399327B (zh) 2016-05-06 2017-04-27 信息显示装置

Country Status (4)

Country Link
US (1) US10102438B2 (zh)
JP (1) JP6516298B2 (zh)
CN (1) CN107399327B (zh)
DE (1) DE102017109073B4 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6661883B2 (ja) * 2015-02-09 2020-03-11 株式会社デンソー 車両用表示制御装置及び車両用表示制御方法
JP2019089394A (ja) * 2017-11-13 2019-06-13 矢崎総業株式会社 自動運転時情報伝達方法および車両用情報提示装置
JP7217874B2 (ja) * 2018-09-12 2023-02-06 国立大学法人 奈良先端科学技術大学院大学 評価装置、制御装置、操作主体感向上システム、評価方法、及びコンピュータプログラム
JP6702390B2 (ja) 2018-10-09 2020-06-03 トヨタ自動車株式会社 車両用駆動装置の制御装置、車載電子制御ユニット、学習済みモデル、機械学習システム、車両用駆動装置の制御方法、電子制御ユニットの製造方法及び出力パラメータ算出装置
JP7151393B2 (ja) * 2018-11-08 2022-10-12 トヨタ自動車株式会社 車両情報提供装置、車両情報提供方法及びプログラム
JP2020112698A (ja) 2019-01-11 2020-07-27 株式会社リコー 表示制御装置、表示装置、表示システム、移動体、プログラム、画像生成方法
JP7177413B2 (ja) * 2019-03-25 2022-11-24 三菱自動車工業株式会社 表示装置
JP7151633B2 (ja) * 2019-06-12 2022-10-12 トヨタ自動車株式会社 情報表示装置
CN110816543B (zh) * 2019-10-28 2021-04-06 东南大学 一种车辆转弯和变道场景下驾驶员分神驾驶检测和预警系统及方法
JP2022094063A (ja) * 2020-12-14 2022-06-24 パナソニックIpマネジメント株式会社 安全確認支援システム及び安全確認支援方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6327536B1 (en) * 1999-06-23 2001-12-04 Honda Giken Kogyo Kabushiki Kaisha Vehicle environment monitoring system
CN1363484A (zh) * 2001-01-10 2002-08-14 本田技研工业株式会社 车辆用仪表装置
CN101243230A (zh) * 2005-08-05 2008-08-13 株式会社小松制作所 作业用车辆安装的显示装置及该显示装置的显示方法
CN101802886A (zh) * 2007-10-12 2010-08-11 三菱电机株式会社 车载信息提供装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5023872B2 (ja) * 2007-08-06 2012-09-12 株式会社デンソー 画像表示制御装置及び画像表示制御システム
JP4480755B2 (ja) 2007-12-04 2010-06-16 カルソニックカンセイ株式会社 車両用ヘッドアップディスプレイ装置
US8704653B2 (en) * 2009-04-02 2014-04-22 GM Global Technology Operations LLC Enhanced road vision on full windshield head-up display
WO2011108218A1 (ja) * 2010-03-01 2011-09-09 本田技研工業株式会社 車両の周辺監視装置
JP5510202B2 (ja) 2010-09-01 2014-06-04 トヨタ自動車株式会社 車両用視覚能力訓練装置
JP5459154B2 (ja) * 2010-09-15 2014-04-02 トヨタ自動車株式会社 車両用周囲画像表示装置及び方法
DE112012005852T5 (de) * 2012-02-10 2014-11-27 Mitsubishi Electric Corporation Fahrerassistenzvorrichtung und Fahrerassistenzverfahren
JP2013242763A (ja) 2012-05-22 2013-12-05 Clarion Co Ltd 対話装置、対話システム、および対話制御方法
US20150042799A1 (en) * 2013-08-07 2015-02-12 GM Global Technology Operations LLC Object highlighting and sensing in vehicle image display systems
JP2015049842A (ja) * 2013-09-04 2015-03-16 トヨタ自動車株式会社 注意喚起表示装置及び注意喚起表示方法
JP6476546B2 (ja) 2014-01-22 2019-03-06 株式会社豊田中央研究所 覚醒維持装置及びプログラム
JP6252316B2 (ja) * 2014-03-31 2017-12-27 株式会社デンソー 車両用表示制御装置
US20150339589A1 (en) * 2014-05-21 2015-11-26 Brain Corporation Apparatus and methods for training robots utilizing gaze-based saliency maps
JP6149824B2 (ja) * 2014-08-22 2017-06-21 トヨタ自動車株式会社 車載装置、車載装置の制御方法及び車載装置の制御プログラム
JP6382695B2 (ja) 2014-11-17 2018-08-29 株式会社ニューギン 遊技機

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6327536B1 (en) * 1999-06-23 2001-12-04 Honda Giken Kogyo Kabushiki Kaisha Vehicle environment monitoring system
CN1363484A (zh) * 2001-01-10 2002-08-14 本田技研工业株式会社 车辆用仪表装置
CN101243230A (zh) * 2005-08-05 2008-08-13 株式会社小松制作所 作业用车辆安装的显示装置及该显示装置的显示方法
CN101802886A (zh) * 2007-10-12 2010-08-11 三菱电机株式会社 车载信息提供装置

Also Published As

Publication number Publication date
US10102438B2 (en) 2018-10-16
JP6516298B2 (ja) 2019-05-22
JP2017200808A (ja) 2017-11-09
DE102017109073B4 (de) 2021-01-28
DE102017109073A1 (de) 2017-11-09
CN107399327A (zh) 2017-11-28
US20170323164A1 (en) 2017-11-09

Similar Documents

Publication Publication Date Title
CN107399327B (zh) 信息显示装置
US11787408B2 (en) System and method for controlling vehicle based on condition of driver
CN108068698B (zh) 车辆系统以及车辆
US10380438B2 (en) System and method for vehicle control based on red color and green color detection
JP4517393B2 (ja) 運転支援装置
WO2010098449A1 (ja) 移動軌跡生成装置
JP2004362586A (ja) 車両用画像処理システム
US20230415735A1 (en) Driving support apparatus, control method of vehicle, and non-transitory computer-readable storage medium
CN113022441B (zh) 一种车辆盲区的检测方法、装置、电子设备及存储介质
JP4751894B2 (ja) 自動車の前方にある障害物を検知するシステム
DE102021214417A1 (de) Systeme und Verfahren zur Bereitstellung eines vorgeschlagenen Lenkhandlungs-Indikators an eine Benutzerschnittstelle des Fahrzeugs
JP2008302741A (ja) 運転支援装置
EP3403896A1 (de) System und verfahren zur handhabung von ausnahmeszenarien
CN109416887B (zh) 识别控制对象车辆报知装置
US11420639B2 (en) Driving assistance apparatus
CN115465283A (zh) 自适应信任校准
CN113147748A (zh) 一种基于ar实景导航的adas显示方法及系统
CN114454891B (zh) 汽车的控制方法、装置及计算机存储介质
Takahashi Key Technology Analysis for Driver Support Systems in Japan
US20230175304A1 (en) Vehicle for recognizing road sign using at least one sensor and method thereof
KR20230130949A (ko) 고속 도로 톨게이트를 주행하는 차량 및 그 제어 방법
KR20230071575A (ko) 차량 충돌 방지 시스템 및 이를 구비한 차량 및 충돌 방지 방법
KR20230155147A (ko) 사각지대 위험 물체에 대응하는 운전자 알림 방법 및 시스템
KR20230133994A (ko) 표지판 정보를 인식하는 차량 및 그 제어 방법
KR20230159773A (ko) 차량 충돌 방지 시스템 및 이를 구비한 차량 및 충돌 방지 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant