CN108621939B - 车辆的显示系统及车辆的显示系统的控制方法 - Google Patents

车辆的显示系统及车辆的显示系统的控制方法 Download PDF

Info

Publication number
CN108621939B
CN108621939B CN201810139544.4A CN201810139544A CN108621939B CN 108621939 B CN108621939 B CN 108621939B CN 201810139544 A CN201810139544 A CN 201810139544A CN 108621939 B CN108621939 B CN 108621939B
Authority
CN
China
Prior art keywords
vehicle
display
authentication
person
target person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810139544.4A
Other languages
English (en)
Other versions
CN108621939A (zh
Inventor
佐藤能英瑠
鸟居武史
澄川瑠一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Subaru Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Subaru Corp filed Critical Subaru Corp
Publication of CN108621939A publication Critical patent/CN108621939A/zh
Application granted granted Critical
Publication of CN108621939B publication Critical patent/CN108621939B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/164—Detection; Localisation; Normalisation using holistic features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/186—Displaying information according to relevancy
    • B60K2360/1868—Displaying information according to relevancy according to driving situations
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/334—Projection means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/741—Instruments adapted for user detection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/50—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the display information being shared, e.g. external display, data transfer to other traffic participants or centralised traffic controller

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

本发明能够在设置于车辆的显示装置上进行面向车辆外的特定的对象人物的显示。本发明提供一种车辆的显示系统及车辆的显示系统的控制方法，车辆的显示系统具备：显示装置(300)，设置于车辆；认证部(410)，对存在于车辆外的对象人物(900)进行认证；以及HUD控制部(414)，根据认证的结果，控制HUD装置(300)以使其进行面向对象人物(900)的显示。通过该构成，能够在设置于车辆的显示装置上进行面向车辆外的特定的对象人物的显示。

Description

车辆的显示系统及车辆的显示系统的控制方法
技术领域
本发明涉及车辆的显示系统及车辆的显示系统的控制方法。
背景技术
以往，例如在下述专利文献1中记载有以能够在显示玻璃面板的双面显示图像的方式，在显示玻璃面板的外侧的面显示用于向车辆的周围进行通知的消息。
现有技术文献
专利文献
专利文献1：日本特开2007-52719号公报
发明内容
技术问题
然而，在上述专利文献所记载的技术中，难以判别在显示玻璃面板的外侧显示的消息是向谁发出的消息。
此外，在假设驾驶员使车辆停车，并直到约见对象到达为止驾驶员在车辆内等待的状况的情况下，如果在约见场所存在较多车辆，则有时约见对象为了找到目标车辆要花费时间。
因此，本发明是鉴于上述问题而完成的，本发明的目的在于提供一种能够在设置于车辆的显示装置上进行面向车辆外的特定的对象人物的显示的新的且经过改进的车辆的显示系统及车辆的显示系统的控制方法。
技术方案
为了解决上述课题，根据本发明的一个观点，提供一种车辆的显示系统，具备：显示装置，设置于车辆；认证部，对存在于车辆外的对象人物进行认证；以及显示控制部，根据所述认证的结果，控制所述显示装置以使其进行面向所述对象人物的显示。
可选地，所述认证部根据所述对象人物所持有的移动终端的标识信息是否与预先注册的注册信息一致来进行所述认证，在所述对象人物所持有的移动终端的标识信息与预先注册的注册信息一致的情况下，所述显示控制部控制所述显示装置以使其进行面向所述对象人物的显示。
此外，可选地，所述车辆的显示系统具备：图像信息获取部，获取存在于车辆外的所述对象人物的图像信息，所述认证部根据所述图像信息是否与预先注册的注册信息一致来进行所述认证，在所述图像信息与预先注册的注册信息一致的情况下，所述显示控制部控制所述显示装置以使其进行面向所述对象人物的显示。
此外，可选地，所述图像信息获取部通过外部服务器获取周边车辆所获取的所述图像信息，所述认证部根据通过所述服务器获取的所述图像信息是否与预先注册的所述注册信息一致来进行所述认证。
此外，可选地，所述显示控制部控制所述显示装置以使其进行从所述对象人物得到许可的显示。
此外，可选地，所述显示控制部控制所述显示装置以使其进行与所述对象人物所持有的移动终端的显示对应的显示。
此外，可选地，所述车辆的显示系统具备：判定部，判定所述对象人物是否注意到本车辆，在判定为所述对象人物注意到本车辆的情况下，所述显示控制部进行变更以使面向所述对象人物的显示变得不引人注目。
此外，为了解决上述课题，根据本发明的另一观点，提供一种车辆的显示系统的控制方法，所述车辆的显示系统具有设置于车辆的显示装置，所述控制方法包括：对存在于车辆外的对象人物进行认证的步骤；以及根据所述认证的结果，控制所述显示装置以使其进行面向所述对象人物的显示的步骤。
技术效果
根据本发明，能够在设置于车辆的显示装置上进行面向车辆外的特定的对象人物的显示。
附图说明
图1是示出本发明的一个实施方式的车辆的显示系统的构成的示意图。
图2是示出使用了自发光中间膜的HUD装置的示意图。
图3是示出基于约见对象的面部区域计算面部所朝向的角度等的情况的示意图。
图4是示出在认证部的认证成功的情况下，利用HUD装置将图像显示在车辆的前窗部的状态的示意图。
图5是示出在认证部的认证成功的情况下，利用HUD装置将图像显示在车辆的前窗部的状态的示意图。
图6是示出在认证部的认证成功的情况下，利用HUD装置将图像显示在车辆的前窗部的状态的示意图。
图7是示出利用了周边车辆的认证的示意图。
图8是示出判定约见对象是否注意到车辆的方法的示意图。
图9是示出在本实施方式的车辆的显示系统中进行的处理的流程图。
符号说明
100：装置
402：环境信息获取部
404：环境状态判定部
410：认证部
420：HUD控制部
500：服务器
600、700：周边车辆
800：车辆
具体实施方式
以下，参照附图对本发明的优选实施方式进行详细说明。应予说明，在本说明书和附图中，对于实质上具有相同的功能结构的构成要素，标记相同的符号，由此省略重复说明。
图1是示出本发明的一个实施方式的车辆的显示系统1000的构成的示意图。车辆的显示系统1000基本上是与汽车等车辆和利用车辆的人有关的系统。如图1所示，车辆的显示系统1000构成为具有车辆800所具备的车外传感器100、操作输入部202、控制装置400和HUD装置300、与车辆800的驾驶员等车辆的乘员约见的约见对象900所持有的移动终端200、服务器500、周边车辆600、700。
车外传感器100由立体相机、单目相机、毫米波雷达、红外传感器等构成，测定本车周边的人和/或车辆等的位置、速度。在车外传感器100由立体相机构成的情况下，立体相机由具有CCD传感器、CMOS传感器等摄像元件的左右一对相机构成，拍摄车辆外的外部环境，并将拍摄得到的图像信息发送给控制装置400。作为一例，立体相机由能够获取颜色信息的彩色相机构成，并设置于车辆的前窗部的上部。
操作输入部202例如由触摸面板等构成，并基于乘员的操作而被输入操作信息。乘员通过对操作输入部202进行操作，能够输入表示约见对象的特征的信息(服装颜色、身高等)。
HUD(Head-up Display：平视显示器)装置300是直接将信息映到人的视野的显示装置，将实像显示在汽车的前窗部和/或后窗部等窗部。通常已知HUD为显示虚像的装置，但在本实施方式中，使用映出实像的显示装置。由于HUD装置300显示实像，所以视角大致为360°，能够从车内外对显示进行视觉确认。在另一实施方式中，HUD装置300也可以显示虚像。
作为HUD装置300，更具体地，可以采用使用图2所示的自发光中间膜1510的装置。在此情况下，在车辆的前窗部、后窗部等，以用表面背面的两块玻璃1520夹住的方式配置自发光中间膜1510。自发光中间膜1510中含有发光材料，如果从设置于车内的投影仪530照射激光，则被照射的部分发光而显示文字和/或图像。显示对象具有从所有角度的可见性，也能够从驾驶座以外的座位和/或车辆外部视觉确认。应予说明，HUD装置300也可以通过将自发光式的器件配置于车辆的窗部而构成。在此情况下，例如还可以采用使用了有机EL元件的透明屏幕或透射型液晶装置等。此外，作为显示装置，可以使用HUD装置300以外的装置，也可以使用设置在例如仪表板的大型液晶装置和/或LED显示装置等。应予说明，以下，以在车辆的窗部(玻璃)进行显示的HUD装置300作为显示装置为例进行说明，但本发明的显示装置并不限于此，包括设置在车辆的内部或外部的显示装置的全部方式。例如，本实施方式的显示装置可以设置在车辆外部的窗部以外(车体等)，也可以设置在车辆内部的窗部以外(仪表板、座椅等)。此外，设置在车辆内部的显示装置与设置在车辆外部的显示装置可以是一体的，也可以是分体的。
车辆800的控制装置400具有环境信息获取部(图像信息获取部)402、环境状态判定部404、认证部410、控制HUD装置300的HUD控制部420、与移动终端200进行通信的通信部430、获取位置信息的位置信息获取部(GPS)440和存储用于认证移动终端200的标识信息的注册信息、和用于认证约见对象的图像信息的注册图像信息等的存储部450。移动终端200具备与控制装置400的通信部430进行通信的通信部210、获取位置信息的位置信息获取部(GPS)220和显示部230。服务器500例如设置在云上，具有与控制装置400的通信部430或周边车辆600、700进行通信的通信部510和数据库520。应予说明，控制装置400的各构成要素可以由电路(硬件)、或CPU等中央处理单元和用于使其发挥功能的程序(软件)构成。
环境信息获取部402可以针对由构成车外传感器100的立体相机的左右一组相机进行拍摄得到的左右一组立体图像对，根据对应位置的偏移量通过三角测量原理生成并获取直到对象物为止的距离信息。同时，环境信息获取部402能够根据图像信息获取被拍摄体的位置信息。此外，环境信息获取部402对通过三角测量原理生成的距离信息进行公知的分组处理，并将分组处理后的距离信息与预先设定的三维立体物数据等进行比较，由此检测出立体物数据和/或白线数据等。由此，控制装置400也能够识别人物、其他车辆、临时停车标识、停车线、ETC站口等。
此外，环境信息获取部402能够利用通过三角测量原理生成的与人物、其他车辆的距离信息来计算出与人物、其他车辆的距离的变化量、相对速度。距离的变化量可以通过累计每单位时间检测的帧图像间的距离来求出。此外，相对速度可以通过将每单位时间检测的距离除以该单位时间来求出。
在车外传感器100由相机构成的情况下，由车外传感器100拍摄的图像被输入到控制装置400。环境信息获取部(图像信息获取部)402利用边缘检测、面部检测等图像处理技术从输入图像中获取约见对象900的面部区域，并基于面部区域获取面部朝向。环境状态判定部404基于面部朝向判定约见对象900是否注意到车辆800。
图3是示出基于检测到的约见对象900的面部区域10计算面部所朝向的角度等的情况的示意图。基于从图像信息得到的约见对象900的面部区域10来监测约见对象900的面部朝向是否偏离预定的区域，由此能够判定约见对象900是否注意到车辆800。应予说明，约见对象900的面部区域10可以根据眼、鼻、口等面部各部位的特征点的位置信息来设定。
在图3的右下部示出了环境信息获取部402的检测结果20。检测结果20中，纵轴表示“面部的上下方向的角度”，横轴表示“面部的左右方向的角度”，×符号30表示检测到的面部朝向。
这样，环境信息获取部402能够获取从车外传感器100得到的车辆外的图像信息并进行图像分析处理，对图像信息进行分析而获取车辆外的环境信息。
例如，存在驾驶员使车辆800停车，并直到约见对象到达为止驾驶员在车辆800内等待的状况。在这样的状况下，有时约见对象为了找到目标车辆800而会花费时间。特别地，在约见对象第一次见该驾驶员的车辆800的情况下、约见对象不记得车辆800的情况下等，需要长时间才能找到目标车辆800。此外，在站前等进行约见的情况等存在多辆停止中的车辆的情况下，约见对象也需要长时间才能找到目标车辆800。进一步地，在车辆800的颜色为白或黑等而存在多辆相同颜色的车辆的情况下，约见对象也需要长时间才能找到目标车辆800。
在本实施方式中，对位于车辆外的人物(约见对象)进行认证，根据认证结果在HUD装置300进行车外显示。更详细地，在认证结果为认证成功，位于车辆外的人物与预先注册的人物相符的情况下，将面向该人物的特定的消息进行车外显示。由此，约见对象通过观察车辆800的窗部，能够容易地且短时间地找到目标车辆800。
约见对象的认证由控制装置400的认证部410来进行。认证部410通过将约见对象的移动终端200所发送的标识信息与预先在控制装置400侧注册的注册信息进行比较，来进行约见对象的认证。此外，认证部410通过将车外传感器100所获取的图像信息与预先在控制装置400侧注册的注册图像信息进行比较，来进行约见对象的认证。此外，认证部410在认证成功了的情况下，还进行约见对象的移动终端200是否位于本车辆800附近的判定。
图4～图6是示出在认证部410的认证成功的情况下，利用HUD装置300将图像540显示在车辆800的前窗部810的状态的示意图。在图4～图6所示的车辆800的图中，左侧所示的图示出了从车外观察图像540的情况，右侧所示的图示出了从车内观察图像540的情况。
如图4所示，如果认证成功，则在约见对象900容易观察的位置显示图像540。由此，如图5所示，约见对象900通过观察图像540，能够容易地且短时间地找到目标车辆800。
在事先从约见对象900得到显示姓氏和/或昵称的许可的情况下，可以如图4所示显示“Taro”等昵称。此外，也可以预先在约见对象900与乘员之间进行约定，而显示只有约见对象900和乘员能够识别含义的图像。
图6是示出变更图像540的位置、尺寸而优先驾驶员的可见性的情况的示意图。通过将图像540缩小显示在前窗部810的一端，能够提高驾驶员坐在座椅上观察前面时的可见性。
图7是示出利用了周边车辆600、700的认证的示意图。周边车辆600、700与车辆800同样地构成，并具备车外传感器100。周边车辆600、700的车外传感器100所获取的图像信息被发送给服务器500，并从服务器500发送给车辆800的控制装置400，由环境信息获取部(图像信息获取部)402获取。控制装置400的认证部410通过将周边车辆600、700的车外传感器100所获取的图像信息与预先在控制装置400侧注册的注册图像信息进行比较，来进行约见对象的认证。通过进行利用了周边车辆600、700的认证，在车辆800无法直接认证约见对象的情况下，也能够可靠地进行约见对象900的认证。
例如，存在约见对象900距离车辆800比较远的情况、约见对象900位于成为车辆800的车外传感器100的死角的位置的情况等车辆800的车外传感器100无法获取约见对象的图像信息的情况。在此情况下，能够基于周边车辆600、700的车外传感器100所获取的图像信息进行认证。
在约见对象900注意到目标车辆800的情况下，变更车外显示的位置、尺寸，使图像540不引人注目。图8是示出判定约见对象900是否注意到车辆800的方法的示意图，示出了从上方观察车辆800及约见对象900的状态。如图8所示，如果利用车外传感器100检测到约见对象900，并检测到约见对象900的面部朝向，则以约见对象的位置W为起始点的表示面部朝向的箭头A1确定。环境状态判定部404在该箭头A1指向车辆800的方向时，能够判定为约见对象900注意到了车辆800。
接下来，基于图9的流程图，对在本实施方式的车辆的显示系统1000中进行的处理进行说明。首先，在步骤S10中，进行约见对象、约见场所的设定等。这里，乘员对操作输入部202进行操作而输入表示约见对象900的特征的信息。表示约见对象900的特征的信息暂时存储在存储部450。
在接下来的步骤S12中，控制装置400的通信部430与约见对象的移动终端200进行通信，认证部410基于移动终端200的标识信息进行认证。此外，在步骤S12中，获取移动终端200的位置信息，并将移动终端200的位置信息与从位置信息获取部440得到的车辆800的位置信息进行比较，判定约见对象的移动终端200是否位于本车辆800附近。
在步骤S12的认证成功，约见对象的移动终端200位于本车辆800附近的情况下，前进至步骤S14。在步骤S14中，判定是否从约见对象900得到显示姓氏和/或昵称的许可，在得到许可的情况下前进至步骤S16。是否得到显示姓氏和/或昵称的许可的信息预先存储在存储部450。此外，该信息也可以在步骤S10由乘员输入。在步骤S16中，进行包括车辆800的乘员或约见对象900的姓氏和/或昵称等能够确定个人的信息的车外显示。
另一方面，在步骤S14中，在未从约见对象900得到显示姓氏和/或昵称的许可的情况下前进至步骤S18。在步骤S18中，进行与约见对象900的移动终端200联动的车外显示。具体地，在步骤S18中，在HUD装置300显示预定的标记，并且将该标记的信息发送给移动终端200，使移动终端200的显示部230显示相同标记。由此，约见对象900将显示在移动终端200的标记与显示在HUD装置300的标记进行比较，在两者一致的情况下，能够发现目标车辆800。
步骤S16、S18之后前进至步骤S20。在步骤S20中，利用图8所示的方法判定约见对象900是否注意到车外显示，在约见对象900注意到车外显示的情况下前进至步骤S22。在步骤S22中，变更车外显示的位置、尺寸，使显示不引人注目。在接下来的步骤S24中，将车外显示持续t3秒，之后取消车外显示。步骤S24之后结束处理(结束)。
在步骤S20中约见对象未注意到车外显示的情况下，前进至步骤S25。在步骤S25中，与约见对象的移动终端200进行通信，向移动终端200进行通知。这里，对约见对象900进行促使其观察停止中的车辆的窗部那样的通知。步骤S25之后前进至步骤S22，变更车外显示的位置、尺寸，使显示不引人注目。
此外，在步骤S12的认证未成功的情况下，前进至步骤S26。在步骤S26中，认证部410将从车外传感器100的信息中得到的人物的图像信息与预先注册的注册图像信息进行比较，对在车辆800的周边是否存在与约见对象900的特征相符的人物进行认证。并且，在车辆800的周边存在与约见对象900的特征相符的人物的情况下，前进至步骤S28。另一方面，在车辆800的周边不存在与约见对象的特征相符的人物的情况下，前进至步骤S30。
在步骤S30中，根据从周边车辆600、700的车外传感器100的信息中得到的图像信息，判定是否存在与约见对象900的特征相符的人物。并且，在根据从周边车辆600、700的车外传感器100的信息中得到的图像信息，存在与约见对象900的特征相符的人物的情况下，前进至步骤S28。另一方面，在根据从周边车辆600、700的车外传感器100的信息中得到的图像信息，不存在与约见对象900的特征相符的人物的情况下，结束处理(结束)。
在步骤S28中，由于根据本车辆800或周边车辆600、700所得到的图像信息，周边存在与约见对象的特征相符的人物，所以判定是否从约见对象得到显示姓氏和/或昵称的许可，在得到许可的情况下前进至步骤S32。在步骤S32中，进行包括车辆800的乘员或约见对象900的姓氏和/或昵称等能够确定个人的信息的车外显示。
另一方面，在步骤S28中，在未从约见对象得到显示姓氏和/或昵称的许可的情况下前进至步骤S34。在步骤S34中，将车辆800的乘员与约见对象相互能够识别的标记进行车外显示。
步骤S32、S34之后前进至步骤S36。在步骤S36中，利用图8所示的方法判定约见对象是否注意到车外显示，在约见对象注意到车外显示的情况下前进至步骤S38。在步骤S38中，变更车外显示的位置、尺寸，使显示不引人注目。
此外，在步骤S36中约见对象未注意到车外显示的情况下，前进至步骤S40。在步骤S40中，将车外显示持续t2秒，之后变更车外显示的位置、尺寸，使显示不引人注目。步骤S38、S40之后前进至步骤S24，将车外显示持续t3秒，之后取消车外显示。步骤S24之后结束处理(结束)。
如以上所说明，根据本实施方式，对车辆外的约见对象900进行认证，在认证成功的情况下利用HUD装置300进行显示。由此，约见对象900能够短时间可靠地发现目标车辆800。
以上，参照附图对本发明的优选实施方式进行了详细说明，但本发明并不限于这样的例子。显然，如果是具有本发明所属技术领域中的通常的知识的人员，则能够在权利要求书所记载的技术思想范畴内想到各种变形例或修改例，应了解，这些变形例或修改例当然也属于本发明的技术范围。

Claims (7)

1.一种车辆的显示系统，其特征在于，具备：
显示装置，设置于车辆；
认证部，对存在于车辆外的对象人物进行认证；
显示控制部，根据所述认证的结果，控制所述显示装置以使其进行面向所述对象人物的显示而使所述对象人物注意到本车辆；以及
判定部，判定所述对象人物是否注意到本车辆，
在判定为所述对象人物注意到本车辆的情况下，所述显示控制部进行变更，以使面向所述对象人物的显示变得不引人注目。
2.根据权利要求1所述的车辆的显示系统，其特征在于，
所述认证部根据所述对象人物所持有的移动终端的标识信息是否与预先注册的注册信息一致来进行所述认证，
在所述对象人物所持有的移动终端的标识信息与预先注册的注册信息一致的情况下，所述显示控制部控制所述显示装置以使其进行面向所述对象人物的显示而使所述对象人物注意到本车辆。
3.根据权利要求1所述的车辆的显示系统，其特征在于，
所述车辆的显示系统具备：图像信息获取部，获取存在于车辆外的所述对象人物的图像信息，
所述认证部根据所述图像信息是否与预先注册的注册信息一致来进行所述认证，
在所述图像信息与预先注册的注册信息一致的情况下，所述显示控制部控制所述显示装置以使其进行面向所述对象人物的显示而使所述对象人物注意到本车辆。
4.根据权利要求3所述的车辆的显示系统，其特征在于，
所述图像信息获取部通过外部服务器获取周边车辆所获取的所述图像信息，
所述认证部根据通过所述服务器获取的所述图像信息是否与预先注册的所述注册信息一致来进行所述认证。
5.根据权利要求1～4中任一项所述的车辆的显示系统，其特征在于，
所述显示控制部控制所述显示装置以使其进行从所述对象人物得到许可的显示。
6.根据权利要求2所述的车辆的显示系统，其特征在于，
所述显示控制部控制所述显示装置以使其进行与所述对象人物所持有的移动终端的显示对应的显示。
7.一种车辆的显示系统的控制方法，其特征在于，所述车辆的显示系统具有设置于车辆的显示装置，
所述控制方法包括：
对存在于车辆外的对象人物进行认证的步骤；
根据所述认证的结果，控制所述显示装置以使其进行面向所述对象人物的显示而使所述对象人物注意到本车辆的步骤；
判定所述对象人物是否注意到本车辆的步骤；以及
在判定为所述对象人物注意到本车辆的情况下，进行变更，以使面向所述对象人物的显示变得不引人注目的步骤。
CN201810139544.4A 2017-03-15 2018-02-11 车辆的显示系统及车辆的显示系统的控制方法 Active CN108621939B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-050346 2017-03-15
JP2017050346A JP6525345B2 (ja) 2017-03-15 2017-03-15 車両の表示システム及び車両の表示システムの制御方法

Publications (2)

Publication Number Publication Date
CN108621939A CN108621939A (zh) 2018-10-09
CN108621939B true CN108621939B (zh) 2023-05-02

Family

ID=63372077

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810139544.4A Active CN108621939B (zh) 2017-03-15 2018-02-11 车辆的显示系统及车辆的显示系统的控制方法

Country Status (4)

Country Link
US (1) US10289904B2 (zh)
JP (1) JP6525345B2 (zh)
CN (1) CN108621939B (zh)
DE (1) DE102018103266A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7422088B2 (ja) * 2018-12-28 2024-01-25 株式会社小糸製作所 車両用灯具
US11312293B2 (en) * 2019-05-02 2022-04-26 Tdisp Inc. Display system for transportation networks
WO2021070765A1 (ja) * 2019-10-08 2021-04-15 日本電気株式会社 案内装置、案内方法、記録媒体
JP7332535B2 (ja) * 2020-05-27 2023-08-23 本田技研工業株式会社 車両制御システム、サーバ、及び車両制御方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4740689B2 (ja) 2005-08-19 2011-08-03 エイディシーテクノロジー株式会社 車載用画像表示装置及び車載用装置
JP2007206934A (ja) * 2006-02-01 2007-08-16 Konica Minolta Holdings Inc 認証システム、認証制御装置およびプログラム
CN1971656A (zh) * 2006-12-21 2007-05-30 李毅 一种能对机动车和驾驶员进行可靠管理的电子检测系统
DE102007012898A1 (de) * 2007-03-17 2008-09-18 Standard Micron Dipl. Ing. W. Schuh Gmbh Einrichtung zur Nutzung von Kraftfahrzeug (Kfz) bezogenen Daten, die durch automatische Auswertung derer Kfz Nummernschilder gewonnen wurden
KR20100053864A (ko) * 2008-11-13 2010-05-24 현대자동차주식회사 도어 아웃사이드 핸들 구조
US8358224B2 (en) * 2009-04-02 2013-01-22 GM Global Technology Operations LLC Point of interest location marking on full windshield head-up display
US9461992B2 (en) * 2013-01-09 2016-10-04 Chris Outwater Smartphone based identification, access control, testing, and evaluation
US9802553B2 (en) * 2013-08-12 2017-10-31 Nissan North America, Inc. Vehicle body structure
KR101586228B1 (ko) * 2014-08-27 2016-01-18 주식회사 켐트로닉스 얼굴인식과 동작인식을 이용한 자동차 제어 장치 및 방법
JP6343248B2 (ja) * 2015-04-13 2018-06-13 パナソニック株式会社 車載端末装置及びこれを備えた歩車間通信システム及び車両待ち合わせ方法
JP6332156B2 (ja) * 2015-06-17 2018-05-30 株式会社デンソー 位置情報共有システム、車載情報端末及びプログラム
US20170148216A1 (en) * 2015-11-25 2017-05-25 Continental Automotive Systems, Inc. Display system adjustable based on background
JP6895743B2 (ja) * 2016-12-12 2021-06-30 三菱電機株式会社 車載認証装置および車載認証方法

Also Published As

Publication number Publication date
JP6525345B2 (ja) 2019-06-05
US20180268209A1 (en) 2018-09-20
US10289904B2 (en) 2019-05-14
JP2018156174A (ja) 2018-10-04
DE102018103266A1 (de) 2018-09-20
CN108621939A (zh) 2018-10-09

Similar Documents

Publication Publication Date Title
CN108621939B (zh) 车辆的显示系统及车辆的显示系统的控制方法
JP6445607B2 (ja) 車両の表示システム及び車両の表示システムの制御方法
CN108621942B (zh) 车辆的显示系统及车辆的显示系统的控制方法
CN111169382B (zh) 驾驶辅助装置、驾驶辅助系统、驾驶辅助方法以及程序
CN108621941B (zh) 车辆的显示系统及车辆的显示系统的控制方法
US20180268701A1 (en) Vehicle display system and method of controlling vehicle display system
US20160193983A1 (en) Image display device, image display system, image display method and program
EP2511893A1 (en) Information display apparatus and information display method
CN108621922B (zh) 车辆的显示系统及车辆的显示系统的控制方法
US11836864B2 (en) Method for operating a display device in a motor vehicle
US20170028917A1 (en) Driving assistance device and driving assistance method
US10248132B2 (en) Method and apparatus for visualization of an environment of a motor vehicle
CN109074151B (zh) 信息显示方法和显示控制装置
JP6669182B2 (ja) 乗員監視装置
JP4856291B1 (ja) 表示装置及び制御方法
US10474912B2 (en) Vehicle display controller, vehicle display system, vehicle display control method, and non-transitory storage medium
WO2019176491A1 (ja) 視線検出装置、該視線検出装置の制御方法、角膜反射像位置の検出方法、コンピュータプログラム、及び記憶媒体
CN105323539A (zh) 车用安全系统及其操作方法
JP2008037118A (ja) 車両用表示装置
JP5517170B2 (ja) 表示装置及び制御方法
JP2018004325A (ja) 注視点検出装置、注視点検出方法、注視点検出システム、及び車両
JP7057893B2 (ja) 視認状態判定装置
JP7037896B2 (ja) 視認補助装置
US20190193634A1 (en) Vehicle
US20240296581A1 (en) Vehicle control device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant