CN113631411A - 显示控制装置、显示控制方法及显示控制程序 - Google Patents

显示控制装置、显示控制方法及显示控制程序 Download PDF

Info

Publication number
CN113631411A
CN113631411A CN201980094695.5A CN201980094695A CN113631411A CN 113631411 A CN113631411 A CN 113631411A CN 201980094695 A CN201980094695 A CN 201980094695A CN 113631411 A CN113631411 A CN 113631411A
Authority
CN
China
Prior art keywords
information
driver
display control
display
driving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980094695.5A
Other languages
English (en)
Other versions
CN113631411B (zh
Inventor
菊田勇人
中村芳知
漥田悟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN113631411A publication Critical patent/CN113631411A/zh
Application granted granted Critical
Publication of CN113631411B publication Critical patent/CN113631411B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/161Explanation of functions, e.g. instructions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/177Augmented reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/178Warnings
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/179Distances to obstacles or vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/184Displaying the same information on different displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/221Physiology, e.g. weight, heartbeat, health or special needs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/225Direction of gaze
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/10Historical data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Instrument Panels (AREA)

Abstract

显示控制装置(100)具有:环境信息取得部(103),其取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息(D3);技能估计部(101),其估计驾驶员的驾驶技能,生成表示驾驶技能的驾驶技能信息(D1);视线检测部(102),其检测驾驶员的视线的方向,生成表示视线的方向的视线方向信息(D2);视觉识别度计算部(104),其基于视线方向信息(D2)、行驶环境信息(D3)及驾驶技能信息(D1)中的至少一方,计算表示驾驶员能够视觉识别的区域的视野范围及视野范围内的多个区段各自的视觉识别度(D4),该视觉识别度(D4)表示驾驶员通过视觉进行识别的容易度;以及显示控制部(105),其接受向驾驶员提示的显示信息(D0),基于显示信息(D0)、视野范围及视觉识别度,控制基于显示信息的影像的显示位置和显示方法中的至少一个。

Description

显示控制装置、显示控制方法及显示控制程序
技术领域
本发明涉及显示控制装置、显示控制方法及显示控制程序。
背景技术
提出有如下装置:在检测到位于车辆的驾驶席的驾驶员的视线的移动时,基于移动后的驾驶员的视线方向,测定能够由驾驶员视觉确认的范围即视野范围,在前窗(windshield)的视野范围内投影影像。例如参照专利文献1。
现有技术文献
专利文献
专利文献1:日本特开2010-18201号公报
发明内容
发明要解决的问题
但是,驾驶员的视野范围根据驾驶员的视线方向以外的原因而发生变化。例如,在驾驶员的驾驶技能(即,驾驶熟练度)较低的情况下或者正在行驶的车辆周围的环境(例如拥挤度)较高的情况下,驾驶员的视野范围趋向于变窄。因此,在仅基于视线方向而决定了视野范围的情况下,驾驶员可能看漏显示在视野范围内的影像。
本发明是为了解决上述以往的问题而完成的,其目的在于,提供一种能够控制显示装置使得在对驾驶员来说适当的位置显示影像的显示控制装置、显示控制方法及显示控制程序。
用于解决问题的手段
本发明的一方案的显示控制装置的特征在于,所述显示控制装置具有:环境信息取得部,其取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息;技能估计部,其估计所述驾驶员的驾驶技能,生成表示所述驾驶技能的驾驶技能信息;视线检测部,其检测所述驾驶员的视线的方向,生成表示所述视线的方向的视线方向信息;视觉识别度计算部,其基于所述视线方向信息、以及所述行驶环境信息和所述驾驶技能信息中的至少一方,计算表示所述驾驶员能够视觉识别的区域的视野范围和所述视野范围内的多个区段各自的视觉识别度,该视觉识别度表示所述驾驶员通过视觉进行识别的容易度;以及显示控制部,其接受向所述驾驶员提示的显示信息,基于所述显示信息、所述视野范围及所述视觉识别度,来控制基于所述显示信息的影像的显示位置和显示方法中的至少一个。
本发明的另一方案的显示控制方法的特征在于,所述显示控制方法具有如下步骤:取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息;估计所述驾驶员的驾驶技能,生成表示所述驾驶技能的驾驶技能信息;检测所述驾驶员的视线的方向,生成表示所述视线的方向的视线方向信息;基于所述视线方向信息、以及所述行驶环境信息和所述驾驶技能信息中的至少一方,计算表示所述驾驶员能够视觉识别的区域的视野范围和所述视野范围内的多个区段各自的视觉识别度,该视觉识别度表示所述驾驶员通过视觉进行识别的容易度;以及接受向所述驾驶员提示的显示信息,基于所述显示信息、所述视野范围及所述视觉识别度,来控制基于所述显示信息的影像的显示位置和显示方法中的至少一个。
发明的效果
根据本发明,能够进行显示控制,使得在对驾驶员来说适当的位置显示影像。
附图说明
图1是示出具备本发明的实施方式1的显示控制装置的驾驶支援装置的硬件结构例的图。
图2是示出基于由实施方式1的显示控制装置执行的控制而显示的影像的例子的图。
图3是概要地示出实施方式1的显示控制装置的结构的功能框图。
图4是示出实施方式1的显示控制装置的动作的流程图。
图5是示出由实施方式1的显示控制装置使用的表示视觉识别度的识别度图(map)的例子的图。
图6是示出基于由实施方式1的显示控制装置执行的控制而显示的影像的例子的图。
图7是示出基于由实施方式1的显示控制装置执行的控制而显示的影像的例子的图。
图8是示出基于由本发明的实施方式2的显示控制装置执行的控制而显示的影像的例子的图。
图9是示出基于由实施方式2的显示控制装置执行的控制而显示的影像的例子的图。
图10是示出基于由本发明的实施方式3的显示控制装置执行的控制而显示的影像的例子的图。
具体实施方式
以下,参照附图对本发明的实施方式的显示控制装置、显示控制方法及显示控制程序进行说明。以下的实施方式只不过是例子,能够在本发明的范围内进行各种变更。
《1》实施方式1
《1-1》驾驶支援装置1
图1是示出具备本发明的实施方式1的显示控制装置100的驾驶支援装置1的硬件结构例的图。如图1所示,驾驶支援装置1搭载在由驾驶员驾驶的车辆即汽车上。驾驶支援装置1具备平视显示器(HUD)装置11、仪表盘显示装置12、电子侧视镜显示装置13、14、电子后视镜显示装置15、车内摄像头21、车外摄像头22、以及显示控制装置100。驾驶支援装置1也可以具备检测车辆内的会话声音的麦克风(未图示)。显示控制装置100具备处理器31和存储器32。HUD装置11例如与通过前窗10而视觉确认的景色重叠地显示各种信息。HUD装置11例如显示半透明的影像。仪表盘显示装置12是速度计等仪表面板,也称为面板显示装置12。电子侧视镜显示装置13、14例如是显示由车外摄像头22拍摄到的左右后方的影像的显示装置,也称为侧视镜显示装置14、15。电子后视镜显示装置15例如是显示由车外摄像头22拍摄到的后方的影像的显示装置,也称为后视镜显示装置15。取代车外摄像头22或者在车外摄像头22的基础上,驾驶支援装置1也可以具备检测或计测车外环境的红外线传感器等传感器。
HUD装置11是与通过车辆的前窗而视觉确认的车外的景色重叠地显示影像的显示装置。面板显示装置12是配置在前窗的下部的仪表盘内的显示装置。侧视镜显示装置13是在面板显示装置12的左侧显示车外的影像的显示装置。侧视镜显示装置14是在面板显示装置12的右侧显示车外的影像的显示装置。后视镜显示装置15是显示车辆的后方的环境的显示装置。在图1中示出5个显示装置,但显示装置的数量不限于5。
车内摄像头21是拍摄落座于车辆的驾驶席的驾驶员的摄像装置。车外摄像头22是拍摄车辆的外侧即车辆周围的摄像装置。在图1中,示出1台车内摄像头21,但车内摄像头的数量也可以为2台以上。此外,在具备检测驾驶员的视线的其他单元的情况下,也可以不具备车内摄像头21。此外,在图1中示出1台车外摄像头22,但车外摄像头的数量也可以为2台以上。
显示控制装置100控制HUD装置11、面板显示装置12、侧视镜显示装置13、14、后视镜显示装置15、车内摄像头21及车外摄像头22的动作。此外,显示控制装置100从控制车辆的运行的运行控制装置(未图示)取得与车辆的运行相关的信息、与驾驶员的驾驶操作相关的信息等。与车辆的运行相关的信息包括行驶速度、行驶距离、燃料剩余量等。与驾驶操作相关的信息包括由驾驶员进行的制动操作的状况、转向操作的状况等。
显示控制装置100具有作为信息处理部的处理器31和作为存储信息的存储部的存储器32。显示控制装置100例如是计算机。在存储器32中,安装有用于执行显示控制方法的显示控制程序。例如,经由网络或者从存储信息的存储介质安装显示控制程序。处理器31通过执行存储于存储器32的显示控制程序来控制驾驶支援装置1的整体的动作。显示控制装置100的整体或一部分也可以由控制电路构成,该控制电路由半导体集成电路构成。存储器32也可以包括半导体存储装置、硬盘装置、向可取出的记录介质记录信息的装置等各种存储装置。
图2是示出基于由实施方式1的显示控制装置100执行的控制而显示的影像的例子的图。图2示出从位于车辆的驾驶席的驾驶员观察时显示在正面方向上的影像的位置。HUD装置11与通过车辆的前窗10而视觉确认的车外的景色重叠地显示影像。面板显示装置12配置在前窗10的下侧。侧视镜显示装置13、14配置在面板显示装置12的左右。后视镜显示装置15配置在前窗10的上部。但是,这些显示装置的配置及形状不限于图2的例子。
《1-2》显示控制装置100
图3是概要地示出实施方式1的显示控制装置100的结构的功能框图。显示控制装置100控制通过图2所示的各种显示装置向驾驶员提示的影像的显示内容、显示位置及显示方法。如图3所示,显示控制装置100具备技能估计部101、视线检测部102、环境信息取得部103、视觉识别度计算部104、以及显示控制部105。
环境信息取得部103取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息D3。技能估计部101估计驾驶车辆的驾驶员的驾驶技能,生成表示驾驶技能的驾驶技能信息D1。视线检测部102检测驾驶车辆的驾驶员的视线方向,生成表示视线方向的视线方向信息D2。
视觉识别度计算部104基于视线方向信息D2、以及行驶环境信息D3和驾驶技能信息D1中的至少一方,计算表示驾驶员在当前时间点能够视觉识别的区域的视野范围及视野范围内的多个区段(即多个小区域)各自的视觉识别度D4。视觉识别度D4是表示驾驶员在视觉上以何种程度容易识别视野范围内的多个区段的各个区段、视觉上的识别容易性的值。之后使用图5来叙述视野范围、多个区段及视觉识别度D4。另外,在以下的说明中,说明如下例子:视觉识别度计算部104基于视线方向信息D2、行驶环境信息D3和驾驶技能信息D1来计算视野范围及视野范围内的多个区段各自的视觉识别度D4。
显示控制部105接受向驾驶员提示的显示信息D0,基于显示信息D0和表示视野范围内的视觉识别度的信息D4,控制基于显示信息的影像的显示位置及显示方法中的至少一个。显示控制部105进行用于在对各驾驶员来说适当的位置向各驾驶员提示包含显示信息D0的影像的显示控制。显示信息D0包括从控制车辆的运行的运行控制装置(未图示)提供的信息、从搭载于车辆的导航装置提供的信息、由搭载于车辆的通信装置接收到的信息等。
图4是示出实施方式1的显示控制装置100的动作的流程图。首先,在步骤S1中,显示控制装置100取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息D3。在步骤S2中,显示控制装置100估计驾驶车辆的驾驶员的驾驶技能,生成表示驾驶技能的驾驶技能信息D1。在步骤S3中,显示控制装置100检测驾驶车辆的驾驶员的视线方向,生成表示视线方向的视线方向信息D2。步骤S1至S3的处理顺序不限于该顺序。步骤S1至S3的处理也可以并行地进行。
在步骤S4中,显示控制装置100基于视线方向信息D2、以及行驶环境信息D3及驾驶技能信息D1中的至少一方,来计算表示驾驶员在当前时间点能够视觉识别的区域的视野范围及视野范围内的多个区段各自的视觉识别度D4。
在步骤S5中,显示控制装置100接受向驾驶员提示的显示信息D0,基于显示信息D0和视野范围内的多个区段各自的视觉识别度D4,来控制显示信息D0的显示位置及显示方法中的至少一个。显示控制装置100进行用于在对各驾驶员来说适当的位置提示包含显示信息D0的影像的显示控制。
《1-3》技能估计部101
技能估计部101基于驾驶员的驾驶行动来估计驾驶员的驾驶技能,生成表示驾驶技能的驾驶技能信息D1。即,技能估计部101基于驾驶员进行的驾驶操作,估计驾驶员的驾驶技能即驾驶熟练度,生成表示该驾驶技能的驾驶技能信息D1。由于驾驶技能依赖于驾驶经验的量,因此,也称为驾驶经验值。用于估计驾驶技能的驾驶操作例如是紧急制动的操作、或者转向的操作、或者变速齿轮的切换操作、或者这些操作内的2个以上的组合。但是,用于估计驾驶技能的驾驶操作不限于上述操作及上述组合。
技能估计部101在制动的踏入量为根据驾驶速度而决定的踏入量的阈值以上时,判定为由驾驶员进行了紧急制动的操作。技能估计部101在紧急制动操作的次数相对于驾驶中的制动操作的次数的比率比预先决定的基准的比率大时,能够估计为驾驶员的驾驶技能低,在紧急制动操作的次数的比率为所述基准的比率以下时,能够估计为驾驶员的驾驶技能高。但是,基于制动操作的驾驶技能的估计方法不限于该方法。在上述例子中,基于制动操作将驾驶技能分类为2个组,但也可以基于制动操作将驾驶技能分类为3个以上的组。
此外,技能估计部101在转向操作中的方向盘的旋转速度比预先决定的基准速度快时,能够估计为驾驶员的驾驶技能高,在方向盘的旋转速度为所述预先决定的基准速度以下时,能够估计为驾驶员的驾驶技能低。但是,基于转向操作的驾驶技能的估计方法不限于该方法。在上述例子中,基于转向操作将驾驶技能分类为2个组,但也可以基于转向操作将驾驶技能分类为3个以上的组。
此外,技能估计部101能够针对车辆的行驶速度的被预先决定的各速度范围而蓄积变速齿轮的切换操作的历史,通过参照所蓄积的操作历史来估计驾驶员的驾驶技能。例如,技能估计部101在进行适合于所述各速度范围的变速齿轮的切换的次数相对于变速齿轮的切换合计次数的比率比预先决定的基准的比率高时,能够估计为驾驶员的驾驶技能高,在上述比率为所述基准的比率以下时,能够估计为驾驶员的驾驶技能低。
此外,技能估计部101也能够将驾驶员的驾驶行驶距离的合计值、与驾驶员驾驶中的车辆发生的过去的驾驶事故相关的信息、驾驶员的过去的违反交通的记录等过去的驾驶员信息预先存储于存储部,通过参照这些信息来估计驾驶技能。存储部例如是图1所示的存储器32。关于技能估计部101向存储部的驾驶员信息的事前输入,考虑如下方法等:基于用户的手动操作进行的输入、基于通过读卡装置读入记录于IC卡等的数据而进行的输入、根据从拍摄车辆的内部的车内摄像头21输出的信息进行驾驶员的单独识别并基于驾驶员的单独识别信息而取得网络上的数据或车内数据。存储部也可以是显示控制装置100的外部的存储装置或者以能够通过网络进行通信的方式与显示控制装置100连接的外部的存储装置。
此外,驾驶技能信息D1根据驾驶员的状态而变化。例如,技能估计部101能够根据驾驶员的脉搏、脸色、视线的运动等生物体信息,估计驾驶员的当前的健康状态,基于当前的健康状态,将估计出的驾驶技能校正为驾驶员的原本的驾驶技能。此外,技能估计部101也能够检测驾驶员与同乘者的会话、驾驶员的漫不经心等驾驶行动以外的驾驶员的行动,基于驾驶行动以外的驾驶员的行动来校正驾驶技能。
此外,技能估计部101也能够通过从IC卡的读入或手动输入等,将驾驶员具有的慢性病或视力信息等事前判明的驾驶员的健康状态保持为驾驶技能信息D1,由此,进行特定条件下的校正。
技能估计部101也可以通过以上各种驾驶技能的估计方法的任意2个以上的组合来估计驾驶技能。例如,技能估计部101也可以基于驾驶员的驾驶经验、驾驶历史、健康状态或视力信息中的任意1个以上来决定驾驶技能信息。
《1-4》视线检测部102
视线检测部102取得表示驾驶员的视线方向的视线方向信息D2。视线检测部102取得表示驾驶员目视的方向的视线方向信息D2。驾驶员目视的方向是驾驶员用眼睛观察的方向。目视的方向也称为“视线方向”。视线检测部102基于由车内摄像头21拍摄到的驾驶员的面部或眼睛的图像来检测驾驶员的视线方向。视线检测部102能够基于由车内摄像头21拍摄到的摄像图像中的相对于驾驶员的面部位置的驾驶员的两眼的瞳孔位置,使用三维测量,三维地检测驾驶员的视线方向。视线检测部102也可以是驾驶员佩戴的装置的一部分。视线检测部102例如也可以是作为驾驶员佩戴的眼镜的一部分而配备的装置。
《1-5》环境信息取得部103
环境信息取得部103基于由车外摄像头22拍摄到的图像,取得表示车辆周围的环境的行驶环境信息D3。行驶环境信息D3包含表示存在于驾驶员所驾驶的车辆周围的物体及车辆周围的状况的信息。环境信息取得部103从设置于车辆的车外摄像头22取得与存在于车辆周围的物体相关的信息。存在于车辆周围的物体例如是其他车辆、行人、动物、障碍物等。车辆周围的状况例如包括基于车辆的位置信息及时间信息而取得的表示天气的信息、表示日照方向的信息、基于车辆的位置信息及时间信息而取得的道路的拥挤信息等。环境信息取得部103也可以经由网络从信息提供用的服务器等取得天气、道路环境(例如,拥挤状况)。此外,环境信息取得部103也可以从GPS(Global Positioning System:全球定位系统)等测位系统取得所驾驶的车辆的位置信息。
《1-6》视觉识别度计算部104
图5是示出视觉识别度图40的例子的图,该视觉识别度图40表示由实施方式1的显示控制装置100的视觉识别度计算部104生成的视觉识别度D4。视觉识别度D4是将表示驾驶员的视野范围内的各区段的视觉识别的容易度的性质定量化的信息。视野范围内的多个区段各自的视觉识别度D4能够由视觉识别度图40表示。视觉识别度图40由配置成格子状的多个矩形的区段和多个矩形的区段各自的视觉识别度构成。图5所示的视觉识别度图40通过多个区段的浓度及填充图案的不同来表示当驾驶员在当前的视线方向的状态下观察前方时能够视觉识别的信息量。例如,在视觉识别度图40中越是颜色浓的区段,驾驶员越容易取得视觉信息,另一方面,也越容易产生视线的引导。即,颜色浓的区段是感知灵敏度高的区域,朝向该区段引导视线的能力高。视觉识别度图40中的区段的颜色越淡,驾驶员在驾驶行动中越难以产生障碍,另一方面,越容易看漏所显示的影像。即,颜色淡的区段是感知灵敏度低的区域,朝向该区段引导驾驶员的视线的能力低。
视觉识别度计算部104基于视线方向信息D2、驾驶技能信息D1及行驶环境信息D3来计算视觉识别度D4。视觉识别度计算部104在计算视觉识别度D4时,能够使用人类视觉认知工程领域中的估计中央视场和周边视场的区域的方法。中央视场的区域是在视野范围内接近视线的区域,是容易被驾驶员感知的区域。即,中央视场的区域是感知灵敏度高的视觉区域。周边视场的区域是在视野范围内离开视线的区域,是难以被驾驶员感知的区域。即,周边视场的区域虽然是能够被驾驶员观察到的区域,但是为感知灵敏度低的视觉区域。另外,视野范围内的中央视场的区域与周边视场的区域的边界及各区域中的感知灵敏度的高度根据身体的个体差异、驾驶员的周围的环境等而变化。
视觉识别度计算部104基于驾驶技能信息D1及视线方向信息D2,进行视野范围的估计。在驾驶员的驾驶经验丰富的情况下,即在驾驶员具有较高的驾驶熟练度的情况下,驾驶员具有较宽的视野,因此,视野范围宽。视野范围宽是因为,具有较高的熟练度的驾驶员在经验方面熟知驾驶行动所需的视觉信息,因此,不会过于将意识集中于驾驶操作。反之,在驾驶员的驾驶经验少的情况下,即在驾驶员具有较低的驾驶熟练度的情况下,驾驶员的视野窄,因此视野范围窄。视野范围窄是因为,具有较低的熟练度的驾驶员由于意识的紧张或者意识过于集中于驾驶操作,因此,面向视觉的意识的比例少。此外,视觉识别度在接近视线的区域高,随着从视线朝向视野范围的端部而下降。根据以上的原因,视觉识别度计算部104能够基于驾驶员的驾驶技能,来估计以驾驶员的视线方向信息D2所示的视线为中心的视野范围和该视野范围内的各区段中的驾驶员的视觉识别度。
此外,与视线方向相关的驾驶员的信息处理能力是通过在时间轴空间内被积分的信息量来评价的。因此,视觉识别度计算部104在确认到驾驶员连续地观察视野范围的中心位置以外的相同方向的情况下,认为针对视野范围的中心位置的意识的集中下降,视野范围的中心位置处的视觉识别度下降。因此,视觉识别度计算部104在确认到驾驶员连续地观察视野范围的中心位置以外的相同方向的情况下,能够基于驾驶员连续长时间地观察的方向和视线方向,来校正多个区段各自的视觉识别度。
此外,确认到驾驶员的视野范围及视觉识别度根据驾驶员的健康状态或驾驶行动以外的行动而变化。因此,视觉识别度计算部104也可以根据驾驶员的状态,来校正通过驾驶技能取得的视野范围及视觉识别度。
此外,例如,在由行驶环境信息D3示出的行驶环境是交通阻塞等车辆密集的环境的情况下,相邻的车辆或人的冲出等驾驶行动中的应考虑的事象较多,因此,认为视觉识别度在视野范围的整个区域下降。因此,视觉识别度计算部104也可以基于行驶环境信息D3,来校正所述估计出的视野范围及视觉识别度。
此外,在相对于日照的方向或者车辆在弯道上行驶时等特定的方向而观察到意识的干扰或集中的环境中,视觉识别度计算部104也可以基于视野范围内的日照的方向、车辆的行驶方向等,来校正所述估计出的视野范围及视觉识别度。
如图5所示,视觉识别度图40所示的视觉识别度按照在从驾驶员观察的前方的视野范围内配置成格子状的多个矩形区段的每个矩形区段,被表示为数值(在图5中是浓度)。首先,视觉识别度计算部104从视线方向信息D2中取得驾驶员的视点位置的中心,计算视线中心的方向的三维直线与前方的视野范围的交点。视线中心根据视线方向信息D2的取得方法而改变。例如,在根据两眼各自的瞳孔而求出视线方向的情况下,连结两眼的视线向量的交点与两眼的三维位置的中点的直线的方向是视线中心的方向。此外,视线中心的方向的向量是视线中心向量。
接着,视觉识别度计算部104计算位于前方的视野范围与视线中心的方向的直线的交点的位置处的矩形区段的视觉识别度。计算各区段的视觉识别度的方法基于如下处理来实现:从视觉识别度的最大值减去将行驶环境或驾驶员的状态作为变量的视觉识别度的下降成分。例如,在作为行驶环境的周围的道路状况拥挤的情况下,驾驶员应观察的对象变多,因此,视觉识别度的下降成分的值成为较大的值。此外,例如,在驾驶员为焦躁的精神状态的情况下、在驾驶员的身体的健康状态差的情况下、或者在驾驶员与同乘者正在会话的情况下等集中力下降的环境下,视觉识别度的下降成分的值成为较大的值。此外,例如,在驾驶员的驾驶技能低的情况下,驾驶员不太注意周边,因此,视觉识别度的下降成分的值变小,视线中心的方向的区段中的视觉识别度变高。
接着,视觉识别度计算部104基于视野范围的中心位置的区段的视觉识别度,依次计算中心位置的区段的周围区段的视觉识别度。人的视野范围内的视觉识别度随着离开中心位置而呈同心圆状下降。因此,中心位置的区段的周围区段的视觉识别度是以中心位置为同心圆的中心,根据中心位置的区段的视觉识别度的值并通过以同心圆的半径为变量的函数的计算式而计算出的。此外,该计算式根据行驶环境或驾驶员的状态等而变化。例如,如果行驶环境为拥挤的状态,则驾驶员大多注意周围,因此,与半径的增加相伴的视觉识别度的减少的比例变低。此外,例如由于驾驶员的精神状态或身体状态对驾驶员的集中力造成影响,因此,视觉识别度的减少的比例根据驾驶员的状态而变化。此外,例如,在驾驶员的驾驶技能低的情况下,驾驶员无法注意周边,因此,周边的视觉识别度的减少的比例变大。
此外,视觉识别度计算部104也可以在以视线中心为圆心且具有预先决定的半径的同心圆的内侧和外侧,使用不同的视觉识别度的值。在人的视觉特性中,中央视场的区域通常以视线中心为基准左右约为30度,大于30度的角度的视野范围被称为周边视场的区域。通常,普遍认为在中央视场的区域和周边视场的区域中,人的状态判别等的视觉识别度产生较大的差异。于是,视觉识别度计算部104也可以分开处理从三维空间内的视线方向起位于中央视场的区域的区段和位于周边视场的区域的区段,使相减的计算式(即,表示视觉识别度的下降成分的计算式)变化,由此,进行与驾驶员的视觉特性匹配的视觉识别度的计算。
此外,视觉识别度计算部104也可以基于车外的环境,进行视觉识别度的校正处理。例如,在逆光、夜晚的街灯、通道内的照明等来自特定方向的强光进入视野内的情况下,强光的周边区域内的视觉识别度大幅减少。视觉识别度计算部104基于车外的物体的检测结果或车辆周围的环境的检测结果等行驶环境信息D3,进行从通过计算式求出的视觉识别度减去视觉识别度的下降成分的校正,由此,能够对行驶环境进行鲁棒(robust)的视觉识别度的计算。
《1-7》显示控制部105
显示控制部105基于显示信息D0和视觉识别度D4,生成用于进行对驾驶员来说合适的显示控制的影像信息D5。显示信息D0是与驾驶行动相关的视觉上的提示信息。显示信息D0例如包括面板显示装置12中的速度显示、表示车辆状态的信息、导航信息、驾驶时的警报信息等。此外,显示信息D0也可以包括表示在显示控制中使用的每个提示信息的重要度的信息。
显示控制部105向各种显示装置即HUD装置11、面板显示装置12、侧视镜显示装置13、14及后视镜显示装置15提供显示信号。显示控制部105基于显示信息D0和视觉识别度D4,进行对驾驶员来说合适的显示控制。显示控制是通过基于HUD装置11、面板显示装置12、侧视镜显示装置13、14及后视镜显示装置15的显示位置处的视觉识别度D4进行显示内容及显示方法的控制处理从而实现的。显示控制部105例如根据重要度,在视觉识别度高的位置配置多个显示信息D0的影像。此外,显示控制部105例如也可以根据重要度来变更多个显示信息D0的显示位置、颜色、时间、内容。
显示控制部105也可以将影像配置为,能够使驾驶员直观地知晓显示信息D0所包含的与方向相关的信息或者显示信息D0与其他信息的关联性等。例如,也可以是,在某个方向上存在驾驶员应注意的物体的情况下,显示控制部105在与该方向相同的方向上配置基于显示信息D0的影像。此外,显示控制部105也可以将显示信息D0以及与该显示信息D0关联的其他信息以在影像上相关联的方式显示。在该情况下,显示控制部105能够使驾驶员适当地感知在视觉识别度低的位置处显示的影像。
此外,当在视觉识别度高的位置配置基于显示信息D0的影像时,可能阻碍驾驶行动中的视觉上的注意。因此,显示控制部105也可以对能够显示于视觉识别度D4为预先决定的阈值以上的区域的显示区域的面积设定上限。在该情况下,驾驶行动中的视觉上的注意难以被显示在视觉识别度高的位置处的影像阻碍。
此外,显示控制部105根据显示信息D0的重要度,使显示的影像的颜色变化,由此,能够促进驾驶员进行直观的识别。此外,显示控制部105在通过HUD装置11显示影像的情况下,根据车外的环境,使用与车外风景的颜色的差较大的颜色,从而能够容易感知影像。此外,由于驾驶员观察到的外界的颜色根据车外的日照环境及道路环境而变化,因此,显示控制部105通过使用与驾驶员观察到的外界的颜色差异较大的颜色显示影像,从而能够显示对驾驶员来说容易感知的影像。
此外,显示控制部105在长时间显示基于重要度高的显示信息D0的影像的情况下,即便是重要度高的显示信息D0,也能够显示在视觉识别度低的位置。此外,显示控制部105在显示基于需要紧急度的显示信息D0的影像的情况下,通过在能够识别的时间的范围内显示于视觉识别度高的场所,从而能够提高警报效果。此外,显示控制部105根据显示时间和视线方向,计算视觉上的感知量蓄积为何种程度,由此,能够取得使警报效果充分高的最短的显示时间。
此外,显示控制部105通过使用箭头、插图、图标等图形作为显示内容,从而与文字显示相比,能够缩短驾驶员进行识别所需的时间。此外,显示控制部105根据显示信息D0的内容来判别必要等级,如果必要等级低,则将插图或图标等能够一目了然的图形的影像配置在视觉识别度低的位置,如果必要等级高,则将文章等的影像配置在视觉识别度高的位置,其中,所述必要等级表示对驾驶员来说是何种程度的必要信息。
图6是示出基于由实施方式1的显示控制装置100执行的控制而显示的影像的例子的图。图6示出设想了驾驶技能低的驾驶员的显示控制内容的例子。通常,在驾驶技能低的驾驶员的情况下,视野范围窄。图6示出将车辆的行进方向即驾驶方向的中央作为视线中心且HUD装置11或面板显示装置12的一部分能够作为周边视场来感知的情况。因此,显示控制部105在如与需要引起注意的物体相关的信息等那样显示信息D0的重要度高的情况下,通过在HUD装置11中的接近视线方向的位置配置影像来提高视觉识别度。
此外,显示控制部105相比于文字显示而增大了基于图标等图形的显示比例,成为能够直观识别的显示。此外,显示控制部105针对显示信息D0中的重要度低的信息,进行配置于周边视场的区域的位置控制、或者设定与重要度成比例的显示时间且按照每个时间使显示内容变化等不阻碍驾驶行动的显示控制。
图7是示出基于由实施方式1的显示控制装置100执行的控制而显示的影像的例子的图。图7示出设想了驾驶技能高的驾驶员的显示控制内容。通常,在驾驶技能高的驾驶员的情况下,视野范围宽。图7示出将驾驶方向的中央作为视线中心、且HUD装置11及面板显示装置12的上部半部分能够作为中央视场来感知、且侧视镜显示装置13、14的一部分能够作为周边视场来感知的情况。由于是中心视野宽的视觉识别度,因此,显示控制部105通过在HUD装置11的显示面的端部即视觉识别度低的区域配置导航图标41及目的地显示信息44而进行难以产生视线引导的显示。此外,显示控制部105通过在面板显示装置12的上部、拥挤度显示信息45或侧视镜显示装置14的端部配置警报显示图标43等,从而能够不引导视线而在宽周边视野内感知重要度低的视觉上的信息。
《1-8》效果
如以上说明的那样,如果使用实施方式1的显示控制装置100、显示控制方法或显示控制程序,则能够根据驾驶员的驾驶技能、驾驶员的视线方向及车辆周围的环境来决定向驾驶员提供的影像的显示位置及显示方法,因此,能够以通过适当的方法将影像显示于对各驾驶员来说适当的位置的方式进行显示控制。例如,驾驶技能高的驾驶员不会被所显示的影像妨碍视野,并且,能够准确地识别影像信息。此外,驾驶技能低的驾驶员不会看漏所显示的影像,并且不会被迫进行较大的视线移动,能够使意识集中于驾驶。
《2》实施方式2.
实施方式2的显示控制装置具有与图3所示的实施方式1的显示控制装置100同样的结构。此外,实施方式2的显示控制装置所实施的显示控制方法是与图4所示的实施方式1的显示控制方法同样的处理。因此,在实施方式2的说明中,参照图1至图4。在实施方式2中,对使用了车辆中的显示车外影像的侧视镜显示装置13、14及后视镜显示装置15的驾驶行动时的显示控制方法进行说明。
图8是示出基于由实施方式2的显示控制装置执行的控制而显示的影像的例子的图。图8示出侧视镜显示装置13及HUD装置11的显示控制的例子。图9是示出基于由实施方式2的显示控制装置执行的控制而显示的影像的例子的图。图9是示出后视镜显示装置15及HUD装置11的显示控制的例子。通常,右转弯的驾驶行动时的视野范围根据驾驶状况从右前方变化至侧面的窗的方向。在后退的驾驶行动时,左右的侧视镜显示装置13、14及后视镜显示装置15的周围成为视野范围。此外,这些视野范围根据驾驶员的驾驶技能、或者习惯、或者这两方而变化。
在实施方式2中,视觉识别度计算部104基于作为技能估计部101的估计结果的技能信息D1或者作为视线检测部102的检测结果的视线方向信息D2,预测右转弯的驾驶行动时的视野范围的时间上的运动,计算右转弯的驾驶行动中的视觉识别度D4。这里,视觉识别度计算部104在预测视野范围的时间上的运动时,蓄积表示同样的驾驶行动中的视线方向的移动及驾驶行动的信息,将所蓄积的信息平均化,由此计算视野范围及视觉识别度D4。此外,由于视线方向及驾驶行动根据车外环境而变化,因此,期望视觉识别度计算部104将预先决定的固定次数以上的信息平均化。此外,视觉识别度计算部104为了排除通过细微动作而产生的信息转移的影响,也可以对表示根据车外环境而变化的视线方向的信息及表示驾驶行动的信息进行过滤处理。
由此,即便是在右转弯的驾驶行动中变化的驾驶员的视点位置,显示控制部105也能够在可观察的视野中配置重要度高的信息,将重要度低的信息配置为仅能够在右转弯的驾驶行动中的视点位置观察。
图8示出右转弯的驾驶行动中的显示控制例。导航图标41仅在右转弯的驾驶行动的开始时的视点位置在中央视场的区域能够感知,之后,能够消除遮挡右转弯的驾驶行动中的视线的情况。此外,关于信息的重要度高的警报显示图标43、46,无论是右转弯的驾驶行动时的哪个时间位置,都以进入视野范围的方式进行配置控制,由此,能够加快需要注意的物体的识别时间。
图9是在后退的驾驶行动时观察后视镜显示装置15时的显示控制的例子。警报显示图标43及46是用于在右后方产生了需要注意的物体时使驾驶员认识到该情况的显示信息。在该例中,在视觉确认后视镜显示装置15时,在后视镜显示装置15上配置有不阻碍其他显示信息的图标。在该情况下,以在将视点位置变更为了右方向时在位于周边视野的HUD装置11的显示区域能够进行视觉确认的方式进行图标显示,由此,在后退的驾驶行动时,无需将观察图标作为目的而使身体或视线移动。
《3》实施方式3.
实施方式3的显示控制装置具有与图3所示的实施方式1的显示控制装置100同样的结构。此外,实施方式3的显示控制装置所实施的显示控制方法是与图4所示的实施方式1的显示控制装置100的显示控制方法同样的处理。因此,在实施方式3的说明中,参照图1至图4。在实施方式3中,示出未适当地进行在驾驶行动中需要的视线移动时的显示控制方法。
图10是示出基于由实施方式3的显示控制装置执行的控制而显示的影像的例子的图。图10示出在将驾驶员的视觉识别度D4设为图5中的视觉识别度图40的状态时、用于向在该视觉识别度图40的范围外存在需要注意的物体47的位置的方向引导视线的显示例。
在实施方式3中,在需要将视点位置朝向视觉识别度图40的范围外的情况下,显示控制部105在视野范围内的接近引导方向的位置显示警报显示图标46。这样,不会阻碍驾驶员考虑的驾驶行动和中心视野的感知而能够进行视线的引导显示。
《4》变形例.
此外,能够适当组合上述实施方式1至3的显示控制装置的结构。
标号说明
1驾驶支援装置,10前窗,11 HUD装置,12面板显示装置,13侧视镜显示装置,14侧视镜显示装置,15后视镜显示装置,21车内摄像头,22车外摄像头,31处理器,32存储器,40视觉识别度图,41导航图标,42警报显示图标,43警报显示图标,44目的地显示信息,45拥挤度显示信息,46警报显示图标,100显示控制装置,101技能估计部,102视线检测部,103环境信息取得部,104视觉识别度计算部,105显示控制部,D0显示信息,D1驾驶技能信息,D2视线方向信息,D3行驶环境信息,D4视觉识别度,D5影像信息。

Claims (12)

1.一种显示控制装置,其特征在于,
所述显示控制装置具有:
环境信息取得部,其取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息;
技能估计部,其估计所述驾驶员的驾驶技能,生成表示所述驾驶技能的驾驶技能信息;
视线检测部,其检测所述驾驶员的视线的方向,生成表示所述视线的方向的视线方向信息;
视觉识别度计算部,其基于所述视线方向信息、以及所述行驶环境信息和所述驾驶技能信息中的至少一方,计算表示所述驾驶员能够视觉识别的区域的视野范围和所述视野范围内的多个区段各自的视觉识别度,该视觉识别度表示所述驾驶员通过视觉进行识别的容易度;以及
显示控制部,其接受向所述驾驶员提示的显示信息,基于所述显示信息、所述视野范围及所述视觉识别度,来控制基于所述显示信息的影像的显示位置和显示方法中的至少一个。
2.根据权利要求1所述的显示控制装置,其特征在于,
所述视觉识别度计算部基于所述驾驶员的视线方向信息、所述驾驶技能信息及所述行驶环境信息,计算所述视觉识别度。
3.根据权利要求1或2所述的显示控制装置,其特征在于,
所述视觉识别度计算部蓄积在所述驾驶员的驾驶行动时产生的视线方向的移动及所述驾驶员的驾驶行动信息,基于所蓄积的所述视线方向的移动和所述驾驶行动信息,计算所述驾驶员的驾驶行动时的所述视觉识别度。
4.根据权利要求1至3中的任意一项所述的显示控制装置,其特征在于,
所述显示控制部根据从所述视觉识别度计算部得到的所述视觉识别度及所述显示信息的重要度,编辑显示基于所述显示信息的影像的位置和显示方法。
5.根据权利要求1至4中的任意一项所述的显示控制装置,其特征在于,
所述显示控制部进行用于如下显示的控制:根据从所述视觉识别度计算部得到的所述驾驶员的视野范围和所述视觉识别度、以及所述显示信息所包含的表示应观察的视线方向的信息,从所述驾驶员的视野范围向所述应观察的视线方向进行引导。
6.根据权利要求1至5中的任意一项所述的显示控制装置,其特征在于,
所述环境信息取得部取得所述车辆的位置信息、所述车辆周围的天气及道路环境信息。
7.根据权利要求1至6中的任意一项所述的显示控制装置,其特征在于,
所述环境信息取得部基于从拍摄所述车辆的外部的摄像头或者红外线传感器得到的信息,检测位于所述车辆周围的物体。
8.根据权利要求1至7中的任意一项所述的显示控制装置,其特征在于,
所述技能估计部取得并蓄积所述驾驶员的驾驶行动,根据预先决定的驾驶行动的频度来估计所述驾驶技能。
9.根据权利要求8所述的显示控制装置,其特征在于,
所述技能估计部取得所述驾驶员的生物体信息,基于所述生物体信息来校正所述驾驶技能信息。
10.根据权利要求8或9所述的显示控制装置,其特征在于,
所述技能估计部取得所述驾驶员的驾驶经验、驾驶历史、健康状态或者视力信息,基于所述驾驶经验、所述驾驶历史、所述健康状态及所述视力信息中的任意1个以上,来校正所述驾驶技能信息。
11.一种显示控制方法,其特征在于,
所述显示控制方法具有如下步骤:
取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息;
估计所述驾驶员的驾驶技能,生成表示所述驾驶技能的驾驶技能信息;
检测所述驾驶员的视线的方向,生成表示所述视线的方向的视线方向信息;
基于所述视线方向信息、以及所述行驶环境信息和所述驾驶技能信息中的至少一方,计算表示所述驾驶员能够视觉识别的区域的视野范围和所述视野范围内的多个区段各自的视觉识别度,该视觉识别度表示所述驾驶员通过视觉进行识别的容易度;以及
接受向所述驾驶员提示的显示信息,基于所述显示信息、所述视野范围及所述视觉识别度,来控制基于所述显示信息的影像的显示位置和显示方法中的至少一个。
12.一种显示控制程序,其特征在于,
所述显示控制程序使计算机执行如下处理:
取得表示驾驶员所驾驶的车辆周围的环境的行驶环境信息;
估计所述驾驶员的驾驶技能,生成表示所述驾驶技能的驾驶技能信息;
检测所述驾驶员的视线的方向,生成表示所述视线的方向的视线方向信息;
基于所述视线方向信息、以及所述行驶环境信息和所述驾驶技能信息中的至少一方,计算表示所述驾驶员能够视觉识别的区域的视野范围和所述视野范围内的多个区段各自的视觉识别度,该视觉识别度表示所述驾驶员通过视觉进行识别的容易度;以及
接受向所述驾驶员提示的显示信息,基于所述显示信息、所述视野范围及所述视觉识别度,来控制基于所述显示信息的影像的显示位置和显示方法中的至少一个。
CN201980094695.5A 2019-04-12 2019-04-12 显示控制装置、显示控制方法及记录介质 Active CN113631411B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/015944 WO2020208804A1 (ja) 2019-04-12 2019-04-12 表示制御装置、表示制御方法、及び表示制御プログラム

Publications (2)

Publication Number Publication Date
CN113631411A true CN113631411A (zh) 2021-11-09
CN113631411B CN113631411B (zh) 2024-04-19

Family

ID=72751035

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980094695.5A Active CN113631411B (zh) 2019-04-12 2019-04-12 显示控制装置、显示控制方法及记录介质

Country Status (5)

Country Link
US (1) US11878698B2 (zh)
JP (1) JP7058800B2 (zh)
CN (1) CN113631411B (zh)
DE (1) DE112019007195B4 (zh)
WO (1) WO2020208804A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7158352B2 (ja) * 2019-08-08 2022-10-21 本田技研工業株式会社 運転支援装置、車両の制御方法、およびプログラム
KR20210100241A (ko) * 2020-02-05 2021-08-17 현대모비스 주식회사 내비게이션 연동을 이용한 차선 표시용 램프 시스템 및 이에 의한 차선 표시 방법
KR20220028709A (ko) * 2020-08-31 2022-03-08 현대모비스 주식회사 차량용 주행 제어방법 및 시스템

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002104018A (ja) * 2000-09-28 2002-04-09 Nissan Motor Co Ltd 警報制御装置
CN101512617A (zh) * 2006-09-04 2009-08-19 松下电器产业株式会社 行驶信息提供装置
JP2009274542A (ja) * 2008-05-14 2009-11-26 Honda Motor Co Ltd ヘッドアップディスプレイ装置
JP2010257253A (ja) * 2009-04-24 2010-11-11 Denso Corp 車両用表示装置
JP2012194060A (ja) * 2011-03-16 2012-10-11 Denso Corp 情報提供装置
CN102789719A (zh) * 2012-07-09 2012-11-21 柳州桂通科技有限公司 道路驾驶技能考试过程驾驶人视线识别仪及实现方法
CN105009032A (zh) * 2013-09-11 2015-10-28 歌乐株式会社 信息处理装置、姿势检测方法和姿势检测程序

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7085637B2 (en) * 1997-10-22 2006-08-01 Intelligent Technologies International, Inc. Method and system for controlling a vehicle
US6690268B2 (en) * 2000-03-02 2004-02-10 Donnelly Corporation Video mirror systems incorporating an accessory module
EP1083076A3 (en) * 1999-09-07 2005-01-12 Mazda Motor Corporation Display apparatus for vehicle
GB2396001B (en) * 2002-10-09 2005-10-26 Canon Kk Gaze tracking system
JP4231884B2 (ja) * 2006-09-27 2009-03-04 株式会社デンソーアイティーラボラトリ 注視対象物検出装置および注視対象物検出方法
JP2008178075A (ja) * 2006-12-18 2008-07-31 Sony Corp 表示制御装置、表示制御方法、及びプログラム
JP4547721B2 (ja) * 2008-05-21 2010-09-22 株式会社デンソー 自動車用情報提供システム
JP2010018201A (ja) 2008-07-11 2010-01-28 Fujitsu Ten Ltd 運転者支援装置、運転者支援方法および運転者支援処理プログラム
JP4886751B2 (ja) * 2008-09-25 2012-02-29 株式会社東芝 車載用表示システム及び表示方法
JP5311012B2 (ja) 2008-09-29 2013-10-09 マツダ株式会社 車両用運転支援装置
WO2011075392A1 (en) * 2009-12-18 2011-06-23 Honda Motor Co., Ltd. A predictive human-machine interface using eye gaze technology, blind spot indicators and driver experience
JP5723123B2 (ja) * 2010-09-13 2015-05-27 矢崎総業株式会社 ヘッドアップディスプレイ
US8605009B2 (en) * 2010-12-05 2013-12-10 Ford Global Technologies, Llc In-vehicle display management system
US20130024113A1 (en) * 2011-07-22 2013-01-24 Robert Bosch Gmbh Selecting and Controlling the Density of Objects Rendered in Two-Dimensional and Three-Dimensional Navigation Maps
DE112014002915B4 (de) * 2013-06-21 2018-02-01 Yazaki Corporation Anzeigevorrichtung
JPWO2015025350A1 (ja) 2013-08-19 2017-03-02 三菱電機株式会社 車載表示制御装置
KR20150087985A (ko) * 2014-01-23 2015-07-31 한국전자통신연구원 안전운행정보 표출 장치 및 그 방법
JP6370181B2 (ja) 2014-09-18 2018-08-08 カルソニックカンセイ株式会社 車両用ヘッドアップディスプレイ装置
US10331127B2 (en) * 2014-12-12 2019-06-25 Sony Corporation Automatic driving control device and automatic driving control method, and program
KR101659034B1 (ko) * 2015-01-20 2016-09-23 엘지전자 주식회사 차량의 주행 모드 전환 장치 및 그 방법
US10419655B2 (en) * 2015-04-27 2019-09-17 Snap-Aid Patents Ltd. Estimating and using relative head pose and camera field-of-view
JP6344311B2 (ja) * 2015-05-26 2018-06-20 ソニー株式会社 表示装置、情報処理システム及び制御方法
US9711050B2 (en) * 2015-06-05 2017-07-18 Bao Tran Smart vehicle
JP6342856B2 (ja) * 2015-07-31 2018-06-13 トヨタ自動車株式会社 車両制御装置
US10782687B2 (en) * 2015-09-30 2020-09-22 Sony Corporation Driving control apparatus, driving control method, and program
KR101800508B1 (ko) * 2015-10-06 2017-12-20 엘지전자 주식회사 음주운전 방지 방법 및 이를 제공하는 차량 보조 장치
KR102453858B1 (ko) * 2015-12-23 2022-10-14 한화테크윈 주식회사 영상 처리 장치 및 영상 처리 방법
US10496252B2 (en) * 2016-01-06 2019-12-03 Robert Bosch Gmbh Interactive map informational lens
CN111295699B (zh) * 2017-08-31 2023-03-21 松下知识产权经营株式会社 辅助方法以及利用该辅助方法的辅助系统、辅助装置
US10782776B2 (en) * 2017-09-28 2020-09-22 Nissan North America, Inc. Vehicle display configuration system and method
JP2019095213A (ja) * 2017-11-17 2019-06-20 アイシン・エィ・ダブリュ株式会社 重畳画像表示装置及びコンピュータプログラム
KR102669020B1 (ko) * 2018-02-05 2024-05-29 소니그룹주식회사 정보 처리 장치, 이동 장치, 및 방법, 그리고 프로그램
JP6890306B2 (ja) * 2018-03-20 2021-06-18 パナソニックIpマネジメント株式会社 画像形成システム、画像補正システム、画像表示システム、移動体、画像形成方法、及びプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002104018A (ja) * 2000-09-28 2002-04-09 Nissan Motor Co Ltd 警報制御装置
CN101512617A (zh) * 2006-09-04 2009-08-19 松下电器产业株式会社 行驶信息提供装置
JP2009274542A (ja) * 2008-05-14 2009-11-26 Honda Motor Co Ltd ヘッドアップディスプレイ装置
JP2010257253A (ja) * 2009-04-24 2010-11-11 Denso Corp 車両用表示装置
JP2012194060A (ja) * 2011-03-16 2012-10-11 Denso Corp 情報提供装置
CN102789719A (zh) * 2012-07-09 2012-11-21 柳州桂通科技有限公司 道路驾驶技能考试过程驾驶人视线识别仪及实现方法
CN105009032A (zh) * 2013-09-11 2015-10-28 歌乐株式会社 信息处理装置、姿势检测方法和姿势检测程序

Also Published As

Publication number Publication date
JPWO2020208804A1 (ja) 2021-11-04
US11878698B2 (en) 2024-01-23
US20220169257A1 (en) 2022-06-02
CN113631411B (zh) 2024-04-19
DE112019007195T5 (de) 2022-03-31
WO2020208804A1 (ja) 2020-10-15
JP7058800B2 (ja) 2022-04-22
DE112019007195B4 (de) 2024-07-18

Similar Documents

Publication Publication Date Title
CN109484299B (zh) 控制增强现实显示装置的显示的方法、装置、存储介质
EP3006297B1 (en) Driving characteristics diagnosis device, driving characteristics diagnosis system, driving characteristics diagnosis method, information output device, and information output method
CN102224443B (zh) 车辆显示装置和显示方法
CN103732480B (zh) 用于在行车道上车辆的线路引导中辅助驾驶员的方法和设备
EP3691926A1 (en) Display system in a vehicle
CN109795413B (zh) 驾驶辅助装置和驾驶辅助方法
US20160221502A1 (en) Cognitive displays
EP2546819A1 (en) Device for monitoring vicinity of vehicle
JP2016103249A (ja) 運転支援装置および運転支援方法
EP2580639A1 (en) A vehicle based display system and a method for operating the same
JP7075189B2 (ja) 運転席と少なくとも一つの乗員席とを備える車両、及び、交代運転者及び又は少なくとも一人の同乗者に現在経験されている運転状況についての情報を提供する方法
CN113631411A (zh) 显示控制装置、显示控制方法及显示控制程序
JP2008030729A (ja) 車両用表示装置
KR20190099755A (ko) 차량 및 그 제어 방법
JP2022047580A (ja) 情報処理装置
JP2007008382A (ja) 視覚情報呈示装置及び視覚情報呈示方法
JP4858094B2 (ja) ディスプレイ表示システム
US11390215B2 (en) Assistance system for a vehicle
JP2023017641A (ja) 車両用表示制御装置、車両用表示装置、車両用表示制御方法及び車両用表示制御プログラム
JP2006232199A (ja) 車両用表示装置
JP2007280203A (ja) 情報提示装置、自動車、及び情報提示方法
JP7043795B2 (ja) 運転支援装置、運転状況情報取得システム、運転支援方法及びプログラム
JP6939147B2 (ja) 走行情報案内装置及びコンピュータプログラム
JP2018147479A (ja) 運転支援装置
JP7294483B2 (ja) 運転支援装置、運転支援方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant