CN111247575A - 车辆驾驶辅助系统、车辆驾驶辅助方法及车辆驾驶辅助程序 - Google Patents

车辆驾驶辅助系统、车辆驾驶辅助方法及车辆驾驶辅助程序 Download PDF

Info

Publication number
CN111247575A
CN111247575A CN201880068246.9A CN201880068246A CN111247575A CN 111247575 A CN111247575 A CN 111247575A CN 201880068246 A CN201880068246 A CN 201880068246A CN 111247575 A CN111247575 A CN 111247575A
Authority
CN
China
Prior art keywords
vehicle
area
image
blind spot
dead angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880068246.9A
Other languages
English (en)
Other versions
CN111247575B (zh
Inventor
坂井孝光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin Corp
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Publication of CN111247575A publication Critical patent/CN111247575A/zh
Application granted granted Critical
Publication of CN111247575B publication Critical patent/CN111247575B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B60K35/285—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver for improving awareness by directing driver's gaze direction or eye points
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3691—Retrieval, searching and output of information related to real-time traffic, weather, or environmental conditions
    • G01C21/3694—Output thereof on a road map
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/166—Navigation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/176—Camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/178—Warnings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Multimedia (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Ecology (AREA)
  • Environmental & Geological Engineering (AREA)
  • Environmental Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Traffic Control Systems (AREA)

Abstract

以实现对于由障碍物造成的从本车辆看的死角，也能唤起驾驶员的注意的技术为课题。车辆驾驶辅助系统、车辆驾驶辅助方法、以及车辆驾驶辅助程序具备：显示部，与实际风景重叠地显示提醒图像(MC)；以及判定死角区域(AB)的死角区域判定部，该死角区域(AB)是由于存在于车辆的行进方向前方侧的前方障碍物(B)造成从该车辆(100)的驾驶员看成为死角的区域。显示部与对象地点(PB)重叠地显示提醒图像MC，该对象地点(PB)是在存在从死角区域(AB)突然出现的移动障碍物(MO)的情况下可能给车辆(100)的行进带来影响的地点。

Description

车辆驾驶辅助系统、车辆驾驶辅助方法及车辆驾驶辅助程序
技术领域
本发明涉及车辆驾驶辅助系统、车辆驾驶辅助方法、以及车辆驾驶辅助程序。
背景技术
例如，在下述的专利文献1(日本特开2005－056372号公报)中，公开了用于辅助避开存在于本车辆的周围的障碍物而行驶的技术。在专利文献1的技术中，将在障碍物的周围扩展的区域作为在行驶中应避开的危险区域、需要防范区域，并与实际风景重叠地显示在监视器(502)上，或者车辆的玻璃上(参照图47、第0273段等)。
专利文献1：日本特开2005－056372号公报
其中，在专利文献1的技术中，将行人、自行车、其他车辆等识别为障碍物，并在这些障碍物的周围，显示有上述的危险区域、需要防范区域。然而，也有障碍物存在于例如拐角、大型车辆的背后等从本车辆看成为死角的场所的情况，车辆的驾驶员也需要注意从这样的死角的障碍物的突然出现。
发明内容
鉴于上述实际情况，希望实现对于由障碍物造成的从本车辆看的死角，也能够唤起驾驶员的注意的技术的实现。
鉴于上述的车辆驾驶辅助系统的特征结构在于以下的点：所述车辆驾驶辅助系统具备：显示部，与实际风景重叠地显示提醒图像；以及判定死角区域的死角区域判定部，所述死角区域是由于存在于车辆的行进方向前方侧的前方障碍物造成从该车辆的驾驶员看成为死角的区域，所述显示部与对象地点重叠地显示所述提醒图像，所述对象地点是在存在从所述死角区域突然出现的移动障碍物的情况下可能给所述车辆的行进带来影响的地点。
另外，鉴于上述的车辆驾驶辅助系统的技术的特征也能够应用于车辆驾驶辅助方法、车辆驾驶辅助程序，因此，本发明也能够将那样的方法、程序作为保护的对象。
该情况下的车辆驾驶辅助方法的特征结构在于以下的点：车辆驾驶辅助方法具有：通过判定部判定死角区域的死角区域判定步骤，所述死角区域是由于存在于车辆的行进方向前方侧的前方障碍物造成从该车辆的驾驶员看成为死角的区域；以及提醒图像显示步骤，按照与对象地点重叠地显示的方式，使提醒图像与实际风景重叠地显示于显示部，所述对象地点是在存在从所述死角区域突然出现的移动障碍物的情况下可能给所述车辆的行进带来影响的地点。
另外，该情况下的车辆驾驶辅助程序的特征结构在于以下的点：用于使计算机实现如下功能：判定死角区域的死角区域判定功能，所述死角区域是由于存在于车辆的行进方向前方侧的前方障碍物造成从该车辆的驾驶员看成为死角的区域；以及提醒图像显示功能，按照与对象地点重叠地显示的方式，使提醒图像与实际风景重叠地显示于显示部，所述对象地点是在存在从所述死角区域突然出现的移动障碍物的情况下可能给所述车辆的行进带来影响的地点。
根据这些结构，由于与因前方障碍物而产生的从车辆看的死角区域对应地与实际风景重叠地显示提醒图像，所以关于从死角突然出现例如行人、自行车、或者其他车辆等移动障碍物的可能性，能够适当地唤起车辆的驾驶员注意。
附图说明
根据参照附图说明的有关实施方式的以下的记载，车辆驾驶辅助系统、车辆驾驶辅助方法、车辆驾驶辅助程序的进一步的特征和优点变得明确。
图1是表示车辆的驾驶席附近的一个例子的立体图。
图2是示意性地表示车辆驾驶辅助系统的系统结构的一个例子的框图。
图3是表示障碍物为建筑物的情况下的提醒图像的显示方式的俯视图。
图4是表示障碍物为建筑物的情况下的提醒图像的显示方式的俯视图。
图5是表示障碍物为对置车辆的情况下的提醒图像的显示方式的俯视图。
图6是表示障碍物为对置车辆的情况下的提醒图像的显示方式的俯视图。
图7是表示障碍物为停放车辆的情况下的提醒图像的显示方式的俯视图。
图8是表示障碍物为停放车辆的情况下的提醒图像的显示方式的俯视图。
图9是表示推荐路径图像的显示方式的俯视图。
图10是表示在实际风景上重叠了提醒图像和推荐路径图像的状态的图。
图11是表示驾驶辅助的过程的流程图。
图12是表示运算死角区域的情况下的步骤的流程图。
图13是表示生成提醒图像的情况下的步骤的流程图。
图14是示意性地表示第二实施方式的车辆驾驶辅助系统的系统结构的一部分的框图。
图15是表示第二实施方式中的运算死角区域的情况下的步骤的流程图。
图16是第二实施方式中的运算死角区域的情况下的说明图。
图17是表示在第二实施方式中在实际风景上重叠了提醒图像的状态的图。
图18是第二实施方式中的运算死角区域的情况下的说明图。
图19是表示在第二实施方式中在实际风景上重叠了提醒图像的状态的图。
具体实施方式
〔第一实施方式〕
以下，基于附图，对车辆驾驶辅助系统(包括车辆驾驶辅助方法以及车辆驾驶辅助程序)的第一实施方式进行说明。
车辆驾驶辅助系统10是对驾驶员提供辅助驾驶的信息的系统，在本实施方式中，与实际风景重叠地显示提醒图像(唤起注意标识)MC。例如，提醒图像MC成为驾驶员安全行驶时的指南。如图3所示，车辆驾驶辅助系统10通过与实际风景重叠地显示提醒图像MC，关于来自从驾驶员观察成为死角的区域(以下，称为死角区域AB。)的行人、自行车等移动障碍物(移动体)MO的突然出现，对驾驶员进行提醒。
在这里，从车辆100观察，死角区域AB产生于建筑物、其他车辆等障碍物，即存在于车辆100的行进方向前方侧的前方障碍物B的后方。换句话说，在从车辆100观察前方障碍物B的情况下，死角区域AB是被前方障碍物B遮挡的区域。更为详细而言，死角区域AB是连结驾驶员所驾驶的车辆100和前方障碍物B的线段的延长线上的前方障碍物B的后方的区域。在这里，作为使死角区域AB产生的前方障碍物B，可举出房屋、围墙等建筑物、行驶中、停放中的其他车辆等。但是，并不限定于这些，前方障碍物B包括可能产生死角区域AB的全部的物体。
此外，车辆驾驶辅助方法例如是利用参照图2等后述的、构成车辆驾驶辅助系统10的硬件、软件执行驾驶辅助的方法。另外，车辆驾驶辅助程序例如是在车辆驾驶辅助系统10所包含的计算机(例如参照图2后述的运算处理单元4等)中执行，实现车辆驾驶辅助功能的程序。
如图1所示，重叠了提醒图像MC的实际风景可以是从驾驶席101透过车辆100的前窗50看到的风景，也可以是由后述的拍摄部(在本例中为前置相机1：参照图2)拍摄并被放映在监视器52上的影像。在实际风景是透过前窗50看到的风景的情况下，提醒图像MC例如被描绘在形成于前窗50的平视显示器51中且与实际风景重叠。在图1中在前窗50上示出的虚线的区域是形成有平视显示器51的区域。另外，在实际风景是在监视器52中放映的影像的情况下，提醒图像MC被重叠于该影像。
如图2所示，车辆驾驶辅助系统10具备对实际风景进行拍摄的前置相机1(CAMERA)、以及与实际风景重叠地显示提醒图像MC的显示装置5(相当于显示部：DISPLAY)。在本实施方式中，车辆驾驶辅助系统10还具备运算处理装置2(CAL)、以及图形控制单元3(GCU)。例如，运算处理装置2和图形控制单元3作为运算处理单元4的一部分而构成，其中，该运算处理单元4构成为一个处理器(系统LSI、DSP(Digital SignalProcessor：数字信号处理器)等)、一个ECU(Electronic Control Unit：电子控制单元)。车辆驾驶辅助系统10具备判定死角区域AB的死角区域判定部20(AB_JD)，该死角区域AB是由于存在于车辆100的行进方向前方侧的前方障碍物B造成从该车辆100的驾驶员看成为死角的区域，在图示的例子中，死角区域判定部20作为运算处理装置2的功能部。此外，当然，在运算处理单元4中，也可以包含有未图示的其他的功能部。另外，显示装置5包括上述平视显示器51以及监视器52。
在本实施方式中，车辆驾驶辅助系统10还具备传感器组6(检测部：SEN)、数据库7(存储部：db)、视点检测装置8(EP_DTCT)。传感器组6能包括声纳、雷达、车速传感器、偏航率传感器、GPS(Global Positioning System：全球定位系统)接收器等。
数据库7中包括导航数据库，且储存有地图信息、道路信息、地物信息(道路标志、道路标识、设施等信息)等。在本实施方式中，在数据库7中，作为道路环境参数Penv储存有作为道路信息的汽车专用道路、郊外、街市、以及市区等的道路环境信息。另外，除了这些信息以外，在数据库7中，作为障碍物参数Pobs储存有前方障碍物B的种类的信息。在本实施方式中，在数据库7中，作为前方障碍物B的种类，储存有房屋、围墙等建筑物、对置车辆、路上处于停放的车辆(以下，称为停放车辆。)等信息。
视点检测装置8例如具有对驾驶员的头部进行拍摄的相机而构成，检测驾驶员的视点(眼睛)。在平视显示器51上描绘的提醒图像MC优选被描绘在与驾驶员的视点相应的位置。
车辆驾驶辅助系统10还具备对车辆100的行进方向前方侧进行拍摄的拍摄部，在图示的例子中，拍摄部作为前置相机1而构成。运算处理装置2通过使用由前置相机1拍摄的拍摄图像的图像识别，来确定存在于车辆100的周围的前方障碍物B(参照图3等)。例如，作为确定的前方障碍物B，除了上述建筑物、其他车辆等以外，还举出行人、自行车、道路标志、电线杆、以及存在于其他的道路上的物体。此外，在本实施方式中，运算处理装置2构成为确定一个或者多个前方障碍物B。例如，运算处理装置2存在能够通过除了拍摄图像以外还使用由声纳、雷达等传感器组6提供的信息而提高识别精度的情况。
而且，运算处理装置2判定已确定的前方障碍物B是否符合产生应唤起驾驶员注意的死角区域AB的物体。更具体而言，运算处理装置2判定已确定的前方障碍物B的大小是否在预先设定出的阈值T以下。这样的判定能够由运算处理装置2所具备的死角区域判定部20来进行。在本实施方式中，显示装置5(显示部)构成为在前方障碍物B的大小为预先设定出的阈值T以下的情况下，不显示提醒图像MC(参照图11)。例如，在前方障碍物B为行人、自行车、道路标志、或者电线杆等的情况下，认为在其后方的区域未产生死角区域AB、或者即使产生死角区域AB而该死角区域AB也充分小。因此，在这样的死角区域AB中难以认为存在其它的行人、自行车等移动障碍物MO。另外，在死角区域AB中出现移动障碍物MO的可能性较低(或者非常低)的情况下，若仍然显示与该死角区域AB对应的提醒图像MC，则存在使驾驶员感觉厌烦的情况。因此，通过如上述结构那样，在前方障碍物B的大小在阈值T以下的情况下不显示提醒图像MC，能够尽量避免对驾驶员的不必要的提醒，而对驾驶员适当地进行提醒。
运算处理装置2计算因前方障碍物B产生的死角区域AB的大小，并基于死角区域AB的大小生成提醒图像MC。而且，例如如图3所示，显示装置5与对象地点PB重叠地显示提醒图像MC，该对象地点PB是在存在从死角区域AB突然出现的移动障碍物MO的情况下可能给车辆100的行进带来影响的地点。在本实施方式中，对象地点PB是死角区域AB的产生基点。提醒图像MC与因前方障碍物B产生的从车辆100看的死角区域AB对应地显示，并且具有从该死角区域AB的产生基点(对象地点PB)向周围扩展的显示区域AC。在这里，提醒图像MC中包括对象地点PB和显示区域AC。即在本例中，如图3等所示，提醒图像MC是具有包括对象地点PB的区域的图像，提醒图像MC至少被显示在车辆100的行进方向前方的车辆100的行驶车道内。
例如，如图10所示，在本例中被设为对象地点PB的死角区域AB的产生基点是表示前方障碍物B的端部的点，且是代表因该前方障碍物B而产生的死角区域AB与车辆100的驾驶员可视觉确认的区域的分界线BL的点。在本实施方式中，例如，如图10所示，对象地点PB为死角区域AB与车辆100的驾驶员可视觉确认的区域的分界线BL或者该分界线BL的延长线与地面的交点。显示区域AC被设定为从对象地点PB至少扩展到驾驶员可视觉确认的区域。此外，在本实施方式中，所谓的驾驶员可视觉确认的区域是指未被前方障碍物B遮挡的区域，即死角区域AB以外的区域。
如图3～图8所示，在本实施方式中，根据以死角区域AB的产生基点(对象地点PB)为中心从车辆100的驾驶员观察向前方障碍物B的后方扩展的死角区域AB的俯视时的基准角度(角度)来确定死角区域AB的大小。在本例中，死角区域判定部20(参照图2)根据该基准角度判定死角区域AB的大小。基准角度例如在图3中，用“α”表示。在本例中，在俯视时，基准角度是指连结车辆100和对象地点PB的线段的延长线(以下，仅称为延长线EL。)、和沿着与车辆100的行进方向正交的方向并且从对象地点PB向远离车辆100的一侧延伸的线(以下，称为正交线IL。)以对象地点PB为中心形成的角度。正交线IL一直不变。另一方面，延长线EL的倾斜度根据车辆100与对象地点PB的相对位置而变动。因此，基准角度根据车辆100的移动而变动，随着基准角度的变动，死角区域AB的大小也发生变动。
随着车辆100靠近产生死角区域AB的前方障碍物B，在延长线EL向正交线IL侧倾斜时，基准角度逐渐变小。例如在图3中，示出前方障碍物B为建筑物的情况下的、俯视时的车辆100与对象地点PB的相对位置关系。在图4中，示出比图3靠后的时刻(例如几秒后)的车辆100与对象地点PB的相对位置关系。在图3中的车辆100的位置，基准角度为α。在图4中，在与图3的状态相比车辆100更靠近对象地点PB，基准角度变为比α小的α′。因此，与图3的状态相比，图4的状态的死角区域AB变小了。像这样，死角区域AB的大小根据车辆100与对象地点PB(前方障碍物B)的相对位置关系而变化。
另外，例如在图5中，示出前方障碍物B为对置车辆的情况下的、俯视时的车辆100与对象地点PB的相对位置关系。在图6中，示出比图5靠后的时刻(例如几秒后)的车辆100与对象地点PB的相对位置关系。在图5中的车辆100的位置，基准角度为β。在图6中，与图5的状态相比车辆100靠近对象地点PB，基准角度变为比β小的β′。因此，与图5的状态相比，图6的状态的死角区域AB变小了。此外，在图5以及图6所示的例子中，以对置车辆B的行进方向为基准，该对置车辆B中的右侧后方的端部为对象地点PB。但是，例如，在由于道路为转弯处等而对置车辆B相对于车辆100倾斜的情况下，对置车辆B的右侧前方的端部可能为驾驶员的可视觉确认的范围内的对置车辆B的端部。此时，对置车辆B的右侧前方的端部被设定为对象地点PB。
另外，例如在图7中，示出前方障碍物B为停放车辆的情况下的、俯视时的车辆100与对象地点PB的相对位置关系。在图8中，示出比图7靠后的时刻(例如几秒后)的车辆100与对象地点PB的相对位置关系。在图7中的车辆100的位置，停放车辆B的右侧后方的端部被认定为对象地点PB，以该对象地点PB为中心形成的基准角度为γ。在图8中的车辆100的位置，停放车辆B的右侧前方的端部被认定为对象地点PB，以该对象地点PB为中心形成的基准角度为δ。在本例中，在图7所示的状态与图8所示的状态之间，在车辆100的视点(驾驶员或者前置相机1)从停放车辆B的侧面向右侧移动时对象地点PB的位置发生变化。此外，虽然省略图示，但随着车辆100靠近在图7以及图8中示出的各个对象地点PB，基准角度变小时，各个死角区域AB也变小。
在本实施方式中，提醒图像MC的显示区域AC的大小根据死角区域AB的大小而变化，其中，死角区域AB根据车辆100与对象地点PB的相对位置关系而变化。在本例中，如图3～图6所示，随着死角区域AB变小，减小提醒图像MC相对于实际风景的显示区域AC。此时，显示区域AC可以以随着死角区域AB变小而连续地变小的方式被显示，也可以以随着死角区域AB变小而阶段性地变小的方式被显示。在本例中，运算处理装置2通过图形控制单元3，将提醒图像MC与实际风景重叠地显示于显示装置5。例如，存在运算处理装置2通过从数据库7中获取地图信息等，而能够提高使提醒图像MC重叠于图形控制单元3的位置的精度的情况。
此外，在上述，对随着死角区域AB变小，减小提醒图像MC相对于实际风景的显示区域AC的例子进行了说明。但是，也可以根据其他的基准减小显示区域AC。例如，也可以随着车辆100靠近死角区域AB，减小提醒图像MC相对于实际风景的显示区域AC。即在本例中，根据车辆100与死角区域AB的距离，使提醒图像MC的显示区域AC的大小变化。其中，在本例中，也与上述相同，车辆100越靠近死角区域AB，死角区域AB越小，车辆100越远离死角区域AB，死角区域AB越大，因此也可以说根据死角区域AB的大小的变化，使提醒图像MC的显示区域AC的大小变化。
另外，在本实施方式中，随着死角区域AB变小，较低地设定提醒图像MC中的唤起注意度X。换言之，随着死角区域AB变大，较高地设定提醒图像MC中的唤起注意度X。
在本例中，所谓的唤起注意度X表示唤起车辆100(驾驶员)注意的程度。而且，在本实施方式中，提醒图像MC以阶段性地表示针对车辆100的唤起注意度X的方式被显示。唤起注意度X在显示区域AC内以视觉表示。例如，如图3等所示，也可以以将显示区域AC划分为以对象地点PB为中心的直径不同的多个圆形的区域的方式，显示唤起注意度X。在这种情况下，也可以越是靠近对象地点PB的区域，将唤起注意度X设定为越高。在图示的例子中，从靠近对象地点PB的一侧开始依次，第一提醒区域AX1、第二提醒区域AX2、以及第三提醒区域AX3被显示为表示唤起注意度X的方式。而且，第一提醒区域AX1、第二提醒区域AX2、以及第三提醒区域AX3按照记载的顺序将唤起注意度X设定为较高。例如，这些第一提醒区域AX1～第三提醒区域AX3也可以使色彩、图案等不同而被显示。此外，这里的“色彩”除了颜色以及饱和度以外，也包含浓淡。在这种情况下，优选第一提醒区域AX1～第三提醒区域AX3的色彩例如是基于认知工程学等，随着唤起注意度X升高而唤起注意的色彩。例如，与白色、黄色相比，橙色、红色通常提醒驾驶员需要注意。或者，也优选随着唤起注意度X升高，提高浓度、饱和度。另外，这些第一提醒区域AX1～第三提醒区域AX3也可以被立体地显示(例如山字形)，并且分别以不同的高度被显示。在该情况下，也可以以随着唤起注意度X升高(随着接近对象地点PB)而显示高度升高的方式被显示。像这样，通过根据色彩、图案、形状等使提醒图像MC的显示方式不同，能够对驾驶员直观地表示唤起注意度X较高的部分(或者较低的部分)。
另外，在本实施方式中，根据车辆100所行驶的道路环境，使提醒图像MC的显示方式不同。具体而言，根据道路环境，以随着从死角区域AB的移动障碍物MO的突然出现的可能性升高唤起注意度X升高的方式，设定有提醒图像MC的显示方式。例如，优选将道路环境分类为市区、街市、郊外、汽车专用道路这4种，并以先记载的地点的唤起注意度X比后记载的地点高的方式，设定显示方式。此时，如上述那样，优选根据色彩、图案、形状等，使提醒图像MC的显示方式不同。另外，如上述那样，优选在提醒图像MC的显示区域AC被划分为如第一提醒区域AX1～第三提醒区域AX3那样的多个区域的情况下，逐个固定阶段地提高这多个区域的每一个区域的唤起注意度X。
此外，在本实施方式中，根据产生死角区域AB的前方障碍物B的种类，使提醒图像MC的显示方式不同。具体而言，根据产生死角区域AB的前方障碍物B的种类，以随着移动障碍物MO从死角区域AB突然出现的可能性升高，唤起注意度X升高的方式，设定提醒图像MC的显示方式。例如，优选将前方障碍物B分类为房屋、围墙等建筑物、停放车辆、对置车辆(参照图3～图8)这3种，并以先记载的物体的唤起注意度X比后记载的物体高的方式，设定显示方式。此时，如上述那样，优选根据色彩、图案、形状等，使提醒图像MC的显示方式不同。另外，如上述那样，优选在提醒图像MC的显示区域AC被划分为如第一提醒区域AX1～第三提醒区域AX3的多个区域的情况下，逐个固定阶段地提高这多个区域的每一个区域的唤起注意度X。
此外，除了上述以外，也可以为根据前方障碍物B的种类，与唤起注意度X无关地、变更色彩、图案、形状等的结构。例如，也可以为提高根据前方障碍物B的种类，如建筑物为红色类、停放车辆为蓝色类等根据前方障碍物B的种类使色彩的系统不同，使车辆100的驾驶员意识各个前方障碍物B的结构。另外，也可以为使提醒图像MC根据前方障碍物B的种类而不同的显示方式。
如以上那样，车辆驾驶辅助系统10与实际风景重叠地显示提醒图像MC。
如图9所示，在本实施方式中，显示部5(显示装置)构成为进一步与实际风景重叠地显示推荐路径图像MR(推荐路径标识)，其中，该推荐路径图像MR表示对车辆100(驾驶员)推荐的行进路径、亦即推荐路径。在本例中，推荐路径图像MR被显示为绕过对象地点PB。在图示的例子中，推荐路径图像MR被连续地显示为绕过一个或者多个提醒图像MC。但是，并不限定于这样的结构，推荐路径图像MR也可以被间歇地显示。
运算处理装置2若确定死角区域AB的对象地点PB，则以绕过该对象地点PB的方式运算推荐路径。换言之，在从死角区域AB突然出现了移动障碍物MO的情况下，运算处理装置2运算干扰该移动障碍物MO的可能性相对较低的路径。因此，在本实施方式中，以与提醒图像MC的显示区域AC重叠的部分减少的方式、即使在与显示区域AC重叠的情况下也尽可能与唤起注意度X较低的区域重叠的方式，运算推荐路径。此时，优选从数据库7获取地图信息等，并考虑道路宽度、交叉点的有无等来运算推荐路径。另外，也可以除了推荐路径图像以外，与实际风景重叠地显示推荐速度图像，该推荐速度图像表示对车辆100推荐的行进速度、亦即推荐速度。推荐速度也由运算处理装置2运算。
运算处理装置2运算在行进方向上车辆100可行驶的范围(例如道路上)内与行驶有关的成本。例如，越是接近对象地点PB的位置，成本越高，越是远离对象地点PB的位置，成本越低。另外，在拍摄图像的范围内设定行进路径上的目的地，并将该目的地的成本设定为最低的值(例如零)。例如，该成本优选通过后述的电位函数进行运算。
运算处理装置2能够通过运算从当前地点到目的地经过成本较低的地点的最短路线，来运算推荐路径。在该运算方法中，由于运算朝向成本较低的方向的路径，所以运算负荷相对地变轻。此外，也有产生死角区域AB的前方障碍物B(对象地点PB)的个数较多，停止车辆100是优选的情况。防备这样的情况，优选也设定有能够切断路径的成本的上限值。
以上，简单地进行了说明，但作为像这样在三维空间中避开对象地点PB自律动作的技术，例如已知有电位法(Potential Method)。由于电位法是公知的，所以省略详细的说明，但例如能够通过在当前值、目标位置(目的地)、对象地点PB定义电位函数，并将其梯度设为行进方向，来运算推荐路径。此外，梯度能够根据每个坐标成分(例如若是三维正交坐标系，则为每个x、y、z轴等。)的偏微分求出。朝向目的值的电位梯度沿激励方向作用，推荐路径的行进方向朝向目的值。另一方面，对象地点PB的电位梯度沿回弹方向作用，推荐路径被设定为避开对象地点PB。电位函数能够基于观测信息(拍摄图像、传感器组6的检测结果等)实时地更新，由此，能够运算各时刻的适当的推荐路径。
在图10中，示出在与图9相同的实际风景上，重叠了提醒图像MC和推荐路径图像MR的一个例子。虽然省略图示，但除此以外，也可以与实际风景重叠地显示上述的推荐速度图像。另外，如上述那样，在图10中示出的影像显示于平视显示器51或者监视器52等。
接下来，参照图11～图13的流程图，对车辆驾驶辅助系统10进行的驾驶辅助的步骤进行说明。
如图11所示，首先，车辆驾驶辅助系统10获取由前置相机1拍摄到的车辆100的行进方向的风景的拍摄图像(#1：拍摄图像获取步骤，拍摄图像获取功能)。然后，车辆驾驶辅助系统10从拍摄图像中图像识别前方障碍物B(#2：障碍物识别步骤，障碍物识别功能)。此时，由车辆驾驶辅助系统10识别的前方障碍物B是建筑物、其他车辆、行人、自行车、道路标志、电线杆、以及其他的存在于道路上的物体。如上所述，前方障碍物B并不仅限于图像识别，也可以使用利用传感器组6的检测结果的其他的方式来检测。因此，障碍物识别步骤也可以称为障碍物检测步骤。
然后，车辆驾驶辅助系统10判定识别出的前方障碍物B的大小是否比预先设定的阈值T大(#3：障碍物判定步骤，障碍物判定功能)。在判定为识别出的前方障碍物B为阈值T以下的情况下(#3；否)，车辆驾驶辅助系统10作为在该前方障碍物B的后方的区域存在行人、自行车等移动障碍物MO的可能性较低的情况，不显示与该前方障碍物B有关的提醒图像MC。
在判定为识别出的前方障碍物B比阈值T大的情况下(#3；是)，车辆驾驶辅助系统10运算由于该前方障碍物B当前产生的死角区域AB的大小(#4：死角区域运算步骤，死角区域运算功能)。
在本例中，由死角区域判定部20(参照图2)进行死角区域运算步骤#4。因此，死角区域运算步骤#4(死角区域运算功能)也可以称为死角区域判定步骤#4(死角区域判定步骤)。在这里，死角区域运算步骤#4例如根据图12的流程图所示的步骤来进行。首先，车辆驾驶辅助系统10从由前置相机1拍摄的拍摄图像中，认定对象地点PB(#41：对象地点认定步骤，对象地点认定功能)。然后，车辆驾驶辅助系统10通过由前置相机1拍摄的拍摄图像的图像识别求出车辆100的行进方向，并且求出连结车辆100(的视点)和成为前方障碍物B的端部的分界线BL(对象地点PB)的延长线EL(参照图3～图8)的延伸方向(#42：图像识别步骤，图像识别功能)。车辆驾驶辅助系统10基于这些，运算由延长线EL和正交线IL形成的基准角度(参照图3～图8)(#43：基准角度运算步骤，基准角度运算功能)。然后，车辆驾驶辅助系统10基于运算出的基准角度来决定死角区域AB的大小(#44：死角区域决定步骤，死角区域决定功能)。像这样，运算死角区域AB的大小(#4)。
如图11所示，车辆驾驶辅助系统10在运算出死角区域AB的大小之后，根据当前的死角区域AB的大小、道路环境、前方障碍物B的种类等，来生成提醒图像MC(#5；提醒图像生成步骤，提醒图像生成功能)。
在这里，例如根据图13的流程图所示的步骤来进行提醒图像生成步骤#5。首先，车辆驾驶辅助系统10通过参照作为参数储存有与道路环境、前方障碍物B的种类等有关的信息的数据库7(#51)，获取道路环境参数Penv、障碍物参数Pobs等各种参数(#52：参数获取步骤，参数获取功能)。然后，车辆驾驶辅助系统10基于这些参数决定唤起注意度X(#53：唤起注意度决定步骤，唤起注意度决定功能)。在提醒图像MC的显示区域AC被划分为如第一提醒区域AX1～第三提醒区域AX3那样的多个区域的情况下，决定这些多个区域的每一个区域的唤起注意度X。之后，车辆驾驶辅助系统10基于决定出的唤起注意度X决定提醒图像MC(详细而言，为提醒图像MC的显示方式)(#54：提醒图像决定步骤，提醒图像决定功能)。像这样，生成提醒图像MC(#5)。
如图11所示，车辆驾驶辅助系统10在生成提醒图像MC之后，将所生成的提醒图像MC输出至显示装置5并使其显示(#6；提醒图像显示步骤，提醒图像显示功能)。之后，车辆驾驶辅助系统10运算对车辆100推荐的行进路径、亦即推荐路径(#7：推荐路径运算步骤，推荐路径运算功能)。然后，车辆驾驶辅助系统10基于运算出的推荐路径生成推荐路径图像MR(#8；推荐路径图像生成步骤，推荐路径图像生成功能)，并将所生成的推荐路径图像MR输出至显示装置5并使其显示(#9：推荐路径图像显示步骤，推荐路径图像显示功能)。
〔第二实施方式〕
接下来，对车辆驾驶辅助系统(包括车辆驾驶辅助方法以及车辆驾驶辅助程序)的第二实施方式进行说明。在第二实施方式中，与上述第一实施方式相比，死角区域AB的判定方式、以及与实际风景重叠地显示的提醒图像MC的显示方式不同。以下，对于第二实施方式的结构，以与上述第一实施方式不同的点为中心进行说明。对于未特别说明的点，与上述第一实施方式相同。
图14是示意性地表示本实施方式的车辆驾驶辅助系统10的系统结构(参照图2)的一部分的图。如图14所示，在本实施方式中，死角区域判定部20具备：第一区域信息获取部21(1st_GET)，将形成死角区域AB的道路作为对象道路RT(参照图16等)，获取表示不存在前方障碍物B的情况下的对象道路RT的理想的路面区域的信息、亦即第一区域信息；第二区域信息获取部22(2nd_GET)，获取由拍摄部(前置相机1)拍摄到的图像信息所包括的表示对象道路RT的路面区域的信息、亦即第二区域信息；以及判定处理部23(JD_PRO)，基于第一区域信息和第二区域信息来判定死角区域AB的位置以及大小。
在这里，所谓的“表示路面区域的信息”是表示路面区域的位置、大小、形状等的信息。“路面区域的位置、大小、形状”可以是以由前置相机1或者其他的拍摄部件拍摄到的图像信息为基准的信息，也可以是以被储存于数据库7的道路信息(地图信息)为基准的信息。或者，也可以是以其他的视点为基准的信息。在本例中，在被储存于数据库7的道路信息中，包括有表示路面区域的信息。该信息中的表示不存在前方障碍物B的情况下的对象道路RT的理想的路面区域的信息是上述第一区域信息。
在本实施方式中，第一区域信息获取部21通过传感器组6确定当前的本车位置(车辆100的位置)，并且从数据库7中获取与本车位置周边的对象道路RT有关的第一区域信息。或者，第一区域信息获取部21也可以构成为基于来自传感器组6的本车位置信息以及来自数据库7的道路信息，来运算以及获取第一区域信息。但是，并不限定于如上述那样的结构，第一区域信息获取部21也可以构成为基于由前置相机1拍摄到的图像信息，例如通过延长拍摄图像中的道路边线等的运算处理，来获取第一区域信息。
在本实施方式中，第二区域信息获取部22基于在由前置相机1拍摄到的拍摄图像中可识别的路面区域，来获取第二区域信息。即，第二区域信息是表示在前置相机1的拍摄图像中能够确认的范围内的路面区域的信息。因此，第二区域信息所表示的路面区域有时比第一区域信息所表示的不存在前方障碍物B的情况下的理想的路面区域窄(至少不会变宽。)。
判定处理部23从第一区域信息获取部21获取第一区域信息，并且从第二区域信息获取部22获取第二区域信息。而且，判定处理部23基于第一区域信息和第二区域信息，来判定死角区域AB的位置以及大小。
例如根据图15所示的流程图，如以上那样构成的死角区域判定部20来判定死角区域AB的位置以及大小。以下，参照图15以及图16，对由死角区域判定部20进行的死角区域AB的判定步骤进行说明。
图15是表示本实施方式中的运算(判定)死角区域AB的情况下的步骤的流程图，示有死角区域运算步骤#4(参照图11以及图12)的另一方式。图16是示意性地表示车辆100的周边的俯视图，且是通过本实施方式的死角区域运算步骤运算死角区域AB的情况下的说明图。
在运算(判定)死角区域AB时，首先，死角区域判定部20获取第一区域信息(#411；第一区域信息获取步骤，第一区域信息获取功能)。在第一区域信息获取步骤#411中，如上述那样，从由传感器组6检测出的当前的本车位置(车辆100的位置)和储存于数据库7的道路信息中，获取与本车位置周边的对象道路RT有关的第一区域信息。
在第一区域信息获取步骤#411之后，死角区域判定部20设定作为用于判定死角区域AB的基准的判定区域AJ(#412；判定区域设定步骤，判定区域设定功能)。在判定区域设定步骤#412中，如图16所示，在车辆100的位置周边的对象道路RT上，设定判定区域AJ。在这里如上述那样，对象道路RT是指形成死角区域AB的道路，在图示的例子中，将存在移动障碍物MO突然出现在车辆100的行进路径R1的可能性的突然出现路径R2设为对象道路RT。而且，将突然出现路径R2设为对象道路RT，并在该对象道路RT上设定有判定区域AJ。
判定区域AJ是沿着路面的面区域。在本实施方式中，判定区域AJ被设定为预先规定的大小。在图示的例子中，判定区域AJ以作为产生死角区域AB的基点的前方障碍物B(在图示的例子中为围墙B)的端部(以下，称为基准端部B1。)为基准来设定。判定区域AJ被设定为以基准端部B1为顶点的矩形，具有从基准端部B1沿着行进路径R1延伸的边部、以及从基准端部B1沿着对象道路RT(突然出现路径R2)延伸的边部。例如，从基准端部B1沿着行进路径R1延伸的边部以实际规模基准设定为2～3米，从基准端部B1沿着对象道路RT延伸的边部以实际规模基准设定为3～4米。其中，这些尺寸能够任意地设定，另外，判定区域AJ的形状也并不限定于矩形，也可以为圆形、多边形等。另外，判定区域AJ也可以不是如上述那样预先设定，例如也可以是根据对象道路RT的道路宽度等可变地设定的方式。在该情况下，道路宽度等信息也可以从数据库7获取。此外，上述的基准端部B1能够作为上述的第一实施方式中的死角区域AB的产生基点。
如图15所示，在设定判定区域AJ之后(#412)，死角区域判定部20获取第二区域信息(#413；第二区域信息获取步骤，第二区域信息获取功能)。如上述那样，在第二区域信息获取步骤#413中，基于在由前置相机1拍摄到的拍摄图像中可识别的路面区域，来获取第二区域信息。
在第二区域信息获取步骤#413之后，死角区域判定部20在判定区域AJ的范围内，提取车辆100的驾驶员无法视觉确认的不可见区域A1(参照图16以及图18)和能够视觉确认的可见区域A2(参照图16以及图18)(#414；区域提取步骤，区域提取功能)。此外，图18是表示比图16靠后的时刻(例如几秒后)的图。如上述那样，存在第二区域信息所表示的路面区域比第一区域信息所表示的不存在前方障碍物B的情况下的理想的路面区域窄的情况。在第二区域信息所表示的路面区域中包含对象道路RT(形成死角区域AB的道路)的路面区域的情况下，第二区域信息所表示的路面区域自然比第一区域信息所表示的理想的路面区域窄。因此，在区域提取步骤#414中，如图16所示，在判定区域AJ的范围内，基于第一区域信息所表示的理想的路面区域和第二区域信息所表示的实际的路面区域(在前置相机1的拍摄图像中能够识别的路面区域)，提取不可见区域A1和可见区域A2。如图示那样，不可见区域A1是死角区域AB的一部分且收敛于判定区域AJ的范围内的区域。可见区域A2是在前置相机1的拍摄图像中能够识别的路面区域，换言之，是车辆100的驾驶员能够视觉确认的路面区域的一部分并收敛于判定区域AJ的范围内的区域。
在区域提取步骤#414之后，死角区域判定部20对不可见区域A1和可见区域A2进行比较(#415；区域比较步骤，区域比较功能)。死角区域判定部20基于不可见区域A1和可见区域A2的比率，判定死角区域AB的大小以及位置。不可见区域A1越比可见区域A2大，死角区域判定部20判定为死角区域AB越大，不可见区域A1越比可见区域A2小，死角区域判定部20判定为死角区域AB越小。另外，如图16中也示出，对于不可见区域A1以及可见区域A2相对于车辆100的位置，不可见区域A1比可见区域A2远。因此，可见区域A2越比不可见区域A1大，不可见区域A1越被可见区域A2逼到远离车辆100的一侧(参照图18)。死角区域判定部20由此能够判定死角区域AB的位置(详细而言，是不可见区域A1与可见区域A2的边界位置)。
接下来，对本实施方式中的、与实际风景重叠地显示的提醒图像MC的显示方式进行说明。
图17示出在与图16相同的实际风景上，重叠有提醒图像MC的例子。如图16以及图17所示，在本实施方式中，在存在从死角区域AB突然出现的移动障碍物MO的情况下可能给车辆100的行进带来影响的对象地点PB是以车辆100的行驶车道上的、移动障碍物MO的突然出现路径R2与车辆100的行进路径R1的交点为基准的地点。在图17所示的例子中，对象地点PB被设定在作为车辆100的行进路径R1的行驶车道的道路宽度方向的中央位置。但是，并不限定于这样的结构，对象地点PB也可以以突然出现路径R2与行进路径R1的交点为基准来设定，例如，也可以设定在作为车辆100的行进路径R1的行驶车道的道路宽度方向的左右任意一侧。
在本实施方式中，车辆驾驶辅助系统10根据由判定处理部23(参照图14)判定出的死角区域AB的大小，使提醒图像MC变化。在本实施方式中，提醒图像MC与上述第一实施方式相同，具有对象地点PB和从该对象地点PB向周围扩展的显示区域AC。
图18示出比图16靠后的时刻(例如几秒后)。图19示出在与图18相同的实际风景上重叠有提醒图像MC的例子。即，图18以及图19示出比图16以及图17靠后的时刻(例如几秒后)。
如图18所示，在比图16所示的状态靠后的状态下，由于车辆100进一步靠近对象道路RT，而可见区域A2增大，并且不可见区域A1变小。因此，判定为在图18所示的状态下，与图16所示的状态相比死角区域AB变小(发生变化)。而且，如图19所示，车辆驾驶辅助系统10将提醒图像MC显示为比图18所示的状态小。即在本实施方式中，车辆驾驶辅助系统10随着由判定处理部23判定出的死角区域AB变小，减小提醒图像MC。换言之，车辆驾驶辅助系统10随着由判定处理部23判定出的死角区域AB增大，增大提醒图像MC。
根据在以上的第一实施方式以及第二实施方式中说明的车辆驾驶辅助系统10(包括车辆驾驶辅助方法以及车辆驾驶辅助程序)，由于与因前方障碍物B产生的从车辆100看的死角区域AB对应地、与实际风景重叠地显示提醒图像MC，所以例如能够关于从死角突然出现行人、自行车、或者其他车辆等移动障碍物MO的可能性，对车辆100的驾驶员适当地进行提醒。
〔其他实施方式〕
接下来，对车辆驾驶辅助系统、车辆驾驶辅助方法、或者车辆驾驶程序的其他的实施方式进行说明。
(1)在上述的各实施方式中，对显示区域AC的大小根据死角区域AB的大小而变化的例子进行了说明。但是，并不限定于这样的例子，也可以不论死角区域AB的大小如何，将显示区域AC的大小设为恒定。另外，例如，虽然根据由前方障碍物B的大小引起的死角区域AB的大小使显示区域AC的大小不同，但也可以不根据按照车辆100与对象地点PB的相对位置关系变化的死角区域AB的大小而使显示区域AC的大小不同，而设为恒定。
(2)在上述第一实施方式中，对提醒图像MC以阶段性地表示唤起注意度X的方式被显示的例子进行了说明。但是，并不限定于这样的例子，提醒图像MC也可以以连续不同地表示唤起注意度X的方式被显示。例如，在通过色彩表示唤起注意度X的情况下，也可以是该唤起注意度X通过灰度等被连续地表示的方式。
(3)在上述的第一实施方式中，作为提醒图像MC的显示方式根据车辆100所行驶的道路环境而不同的例子，对随着从死角区域AB的移动障碍物MO的突然出现的可能性升高，唤起注意度X升高的结构进行了说明。但是，并不限定于这样的例子，也可以为根据道路环境，与唤起注意度X无关地、变更色彩、图案、形状等的结构。例如，也可以为通过将道路环境分类为市区、街市、郊外、汽车专用道路这4种，并如市区为红色类、街市为蓝色类等根据道路环境使色彩的系统不同，使车辆100的驾驶员意识自身行驶中的环境的结构。另外，道路环境的分类也并不限定于这样的方式，例如，也可以根据基于地图信息的交叉点、转弯处的多少、或者基于由相机拍摄的拍摄信息的障碍物的多少等对道路环境进行分类。另外，也可以为不是使提醒图像MC根据道路环境而不同的显示方式。
(4)在上述第一实施方式中，对在前方障碍物B的大小在预先设定的阈值T以下的情况下，不显示提醒图像MC的例子进行了说明。但是，并不限定于这样的例子，也可以与由前置相机1识别出的全部的前方障碍物B对应地显示提醒图像MC。
(5)在上述第一实施方式中，对除了提醒图像MC以外，还与实际风景重叠地显示推荐路径的推荐路径图像MR，其中，上述推荐路径表示对车辆100推荐的行进路径的例子进行了说明。但是，也可以不显示推荐路径图像MR，而仅与实际风景重叠地显示提醒图像MC。或者，也可以即使显示推荐路径图像MR的情况下，也显示不绕过死角区域AB的对象地点PB，而沿着道路前进的推荐路径。
(6)在上述的各实施方式中，以提醒图像MC的显示区域AC为将对象地点PB作为中心的圆形的情况为例进行了说明，但显示区域AC的形状并不限定于此。例如，也可以将显示区域AC的形状设为具有沿着车辆100的行进方向的长轴的椭圆形状、具有沿着与车辆100的行进方向正交的方向的长轴的椭圆形状。或者，也可以将显示区域AC的形状设为矩形、三角形、六边形等多边形。
(7)在上述的各实施方式中，主要对将提醒图像MC的显示区域AC设为沿着地面的平面的形状的结构进行了说明，但显示区域AC的形状并不限定于此。例如，也可以将显示区域AC设为在高度方向上也具有宽度的立体的形状。作为这样的显示区域AC的形状，例如，除了上述的山字形以外，也可以为圆柱状、多棱柱状等。
(8)在上述的第二实施方式中，对在判定死角区域AB时作为判定基准的判定区域AJ被设定在对象道路RT上的有限的范围内的例子进行了说明。但是，并不限定于这样的例子，判定区域AJ也可以遍及路面区域的整体来设定。在该情况下，在判定区域AJ的范围内，基于第一区域信息和第二区域信息，提取不可见区域A1和可见区域A2。此外，在该情况下，可见区域A2所占据的比例比不可见区域A1所占据的比例充分大，但死角区域AB的位置、大小的判定能够基于可见区域A2和不可见区域A1的比率随时间的变化来进行。
(9)此外，在上述各实施方式中公开的结构只要不产生矛盾，也能够与在其它实施方式中公开的结构组合来应用。关于其它的结构，在本说明书中公开的实施方式在所有的点仅是例示。因此，能够在不脱离本公开的主旨的范围内，适当地进行各种改变。
〔上述实施方式的概要〕
以下，对在上述中说明的车辆驾驶辅助系统、车辆驾驶辅助方法、以及车辆驾驶辅助程序的概要进行说明。
车辆驾驶辅助系统(10)具备：显示部(5)，与实际风景重叠地显示提醒图像(MC)；以及
判定死角区域(AB)的死角区域判定部(20)，上述死角区域(AB)是由于存在于车辆(100)的行进方向前方侧的前方障碍物(B)造成从该车辆(100)的驾驶员看成为死角的区域，
上述显示部(5)与对象地点(PB)重叠地显示上述提醒图像(MC)，上述对象地点(PB)是在存在从上述死角区域(AB)突然出现的移动障碍物(MO)的情况下可能给上述车辆(100)的行进带来影响的地点。
根据本结构，由于与因前方障碍物(B)产生的从车辆(100)看的死角区域(AB)对应地、与实际风景重叠地显示提醒图像(MC)，所以例如关于从死角突然出现行人、自行车、或者其他车辆等移动障碍物(MO)的可能性，能够对车辆(100)的驾驶员适当地进行提醒。
在这里，优选上述对象地点(PB)是上述车辆(100)的行驶车道上的、以上述移动障碍物(MO)的突然出现路径(R2)与上述车辆(100)的行进路径(R1)的交点为基准的地点。
根据本结构，将给车辆(100)的行进带来影响的可能性较高的地点容易地设定为对象地点(PB)。因此，通过与这样的对象地点(PB)重叠地显示提醒图像(MC)，能够适当地唤起驾驶员注意。
另外，优选上述提醒图像(MC)是具有包括上述对象地点(PB)的区域的图像，上述提醒图像(MC)至少被显示在上述车辆(100)的行进方向前方的上述车辆(100)的行驶车道内。
在车辆(100)的行进方向前方的行驶车道内存在移动障碍物(MO)的情况下，容易给车辆(100)的行进带来影响。根据本结构，由于在那样的行驶车道内显示具有包括对象地点(PB)的区域的提醒图像(MC)，所以能够对车辆(100)的驾驶员适当地进行提醒。
另外，优选随着上述死角区域(AB)变小，减小上述提醒图像(MC)相对于上述实际风景的显示区域(AC)。
根据本结构，与因前方障碍物(B)而产生的从车辆(100)看的死角区域(AB)的大小对应地、若死角区域(AB)较大则提醒图像(MC)的显示区域(AC)被较大地显示，若死角区域(AB)较小则提醒图像(MC)的显示区域(AC)被较小地显示。因此，能够与因前方障碍物(B)而产生的从车辆(100)看的死角区域(AB)的大小对应地、对车辆(100)的驾驶员适当地进行提醒。
另外，优选随着上述车辆(100)靠近上述死角区域(AB)，减小上述提醒图像(MC)相对于上述实际风景的显示区域(AC)。
根据本结构，车辆(100)越靠近死角区域(AB)而死角区域(AB)越小，越减小提醒图像(MC)的显示区域(AC)。相反，车辆(100)越远离死角区域(AB)而死角区域(AB)增大，越增大提醒图像(MC)的显示区域(AC)。即根据本结构，由于能够将车辆(100)与死角区域(AB)的距离作为基准决定提醒图像(MC)的显示区域(AC)的大小，所以能够相对容易地实现使提醒图像(MC)的显示区域(AC)的大小可变的结构。另外，由于越靠近死角区域(AB)驾驶员的可视性越高，所以在那样的情况下通过减小提醒图像(MC)的显示区域(AC)，能够使驾驶员很难感觉厌烦。
另外，上述车辆驾驶辅助系统还具备拍摄部(1)，上述拍摄部(1)对上述车辆(100)的行进方向前方侧进行拍摄，
上述死角区域判定部(20)具备：
第一区域信息获取部(21)，将形成上述死角区域(AB)的道路作为对象道路(RT)，获取表示不存在上述前方障碍物(B)的情况下的上述对象道路(RT)的理想的路面区域的信息、亦即第一区域信息；
第二区域信息获取部(22)，获取由上述拍摄部(1)拍摄到的图像信息所包括的表示上述对象道路(RT)的路面区域的信息、亦即第二区域信息；以及
判定处理部(23)，基于上述第一区域信息和上述第二区域信息来判定上述死角区域(AB)的位置以及大小。
由于死角区域(AB)对于驾驶员来说是看不到的区域，所以通常，很难适当地判定死角区域(AB)的大小等。根据本结构，通过在该死角区域(AB)的判定中，利用对象道路(RT)的理想的路面区域和由拍摄部(1)实际拍摄到的对象道路(RT)的路面区域，能够适当地判定死角区域(AB)的位置以及大小。
另外，优选根据由上述判定处理部(23)判定出的上述死角区域(AB)的大小，使上述提醒图像(MC)变化。
根据本结构，由于提醒图像(MC)根据死角区域(AB)的大小而变化，所以能够根据该提醒图像(MC)的变化，使唤起驾驶员注意的程度变化。
另外，优选上述提醒图像(MC)具有从上述死角区域(AB)的产生基点(PB)向周围扩展的显示区域(AC)。
根据本结构，能够对车辆(100)的驾驶员适当地进行对死角区域(AB)的产生基点(PB)及其周围的提醒。
另外，优选上述死角区域判定部(20)根据以上述死角区域(AB)的产生基点(PB)为中心从上述驾驶员观察向上述前方障碍物(B)的后方扩展的上述死角区域(AB)的俯视时的角度，判定上述死角区域(AB)的大小。
根据本结构，能够根据实际情况适当地确定死角区域(AB)的大小。由此，根据死角区域(AB)的大小使显示区域(AC)的大小变化变得相对容易。
另外，优选上述提醒图像(MC)以阶段性地表示唤起注意度(X)的方式被显示，上述唤起注意度(X)表示唤起对上述车辆(100)注意的程度。
例如，由于在驾驶员的可视觉确认的范围内的距离死角区域(AB)的产生基点(PB)较近的位置，为了对行人等移动障碍物(MO)的紧急突然出现作出反应允许的反应时间较短，所以唤起注意的必要性升高。另一方面，例如，由于在距离死角区域(AB)的产生基点(PB)较远的位置，上述的反应时间变长，所以唤起注意的必要性相对变低。根据本结构，由于阶段性地表示唤起注意度(X)，该唤起注意度(X)表示唤起对车辆(100)注意的程度，所以能够对驾驶员进行与必要性的高低相应的适当的提醒。
另外，优选上述提醒图像(MC)的显示方式根据上述车辆(100)行驶的道路环境而不同。
根据车辆(100)所行驶的道路环境，而从死角区域(AB)突然出现行人等移动障碍物(MO)的可能性不同。例如在汽车专用道等突然出现行人等移动障碍物(MO)的可能性较低的道路环境中，若提高唤起驾驶员注意的程度、频度等，则会使驾驶员感觉厌烦。另一方面，例如，在市区等突然出现行人等移动障碍物(MO)的可能性较高的道路环境中，在多数情况下提高唤起对驾驶员注意的程度、频度等会很适当。根据本结构，由于根据车辆(100)所行驶的道路环境使提醒图像(MC)的显示方式不同，所以能够对车辆(100)的驾驶员更加适当地进行提醒。
另外，优选在上述前方障碍物(B)的大小在预先设定的阈值(T)以下的情况下，上述显示部(5)不显示上述提醒图像(MC)。
根据前方障碍物(B)的大小，存在越不必考虑隐藏于该死角区域(AB)的行人等移动障碍物(MO)的存在，因该前方障碍物(B)而产生的死角区域(AB)的大小越小的情况。在这样的情况下，若还是与实际风景重叠地显示提醒图像(MC)，则会使驾驶员感觉厌烦。根据本结构，由于能够仅针对应显示提醒图像(MC)的大小的前方障碍物(B)显示提醒图像(MC)，所以能够对车辆(100)的驾驶员更加适当地进行提醒。
另外，优选上述显示部(5)进一步与上述实际风景重叠地显示推荐路径图像(MR)，上述推荐路径图像(MR)表示对上述车辆(100)推荐的行进路径、亦即推荐路径，
将上述推荐路径图像(MR)显示为绕过上述对象地点(PB)。
根据本结构，对于由前方障碍物(B)产生的从车辆(100)看的死角区域(AB)，能够适当地唤起驾驶员注意，并且能够对驾驶员提示绕过从死角区域(AB)突然出现行人等移动障碍物(B)的可能性较高的地点来行驶的推荐路径。由此，能够向驾驶员提供有利于车辆(100)的安全驾驶的信息。
上述车辆驾驶辅助系统的各种技术特征也能够应用于车辆驾驶辅助方法、车辆驾驶辅助程序。例如，车辆驾驶辅助方法能够为具备上述车辆驾驶辅助系统的特征的方法。另外，车辆驾驶辅助程序能够使计算机实现与上述的车辆驾驶辅助系统的特征对应的功能。当然，这些车辆驾驶辅助方法以及车辆驾驶辅助程序也能够起到上述车辆驾驶辅助系统的作用效果。进一步，也能够将作为车辆驾驶辅助系统的优选的方式例示出的各种附加的特征编入这些车辆驾驶辅助方法、车辆驾驶辅助程序，该方法以及该程序也能够起到与各个附加特征对应的作用效果。
这样的车辆驾驶辅助方法具有：通过判定部判定死角区域(AB)的死角区域判定步骤(#4)，上述死角区域(AB)是由于存在于车辆(100)的行进方向前方侧的前方障碍物(B)造成从该车辆(100)的驾驶员看成为死角的区域；以及
提醒图像显示步骤(#6)，按照与对象地点(PB)重叠地显示的方式，使提醒图像(MC)与实际风景重叠地显示于显示部(5)，上述对象地点(PB)是在存在从上述死角区域(AB)突然出现的移动障碍物(MO)的情况下可能给上述车辆(100)的行进带来影响的地点。
另外，这样的车辆驾驶辅助程序使计算机实现如下功能：判定死角区域(AB)的死角区域判定功能(#4)，上述死角区域(AB)是由于存在于车辆(100)的行进方向前方侧的前方障碍物(B)造成从该车辆(100)的驾驶员看成为死角的区域；以及
提醒图像显示功能(#6)，按照与对象地点(PB)重叠地显示的方式，使提醒图像(MC)与实际风景重叠地显示于显示部(5)，上述对象地点(PB)是在存在从上述死角区域(AB)突然出现的移动障碍物(MO)的情况下可能给上述车辆(100)的行进带来影响的地点。
产业上的可利用性
本发明的技术能够利用于车辆驾驶辅助系统、车辆驾驶辅助方法、以及车辆驾驶辅助程序。
附图标记说明
10…车辆驾驶辅助系统；100…车辆；1…前置相机(拍摄部)；20…死角区域判定部；21…第一区域信息获取部；22…第二区域信息获取部；23…判定处理部；5…显示装置(显示部)；51…平视显示器；52…监视器；MC…提醒图像；MR…推荐路径图像；AB…死角区域；AC…显示区域；A1…不可见区域；A2…可见区域；B…前方障碍物；PB…对象地点；R1…行进路径；R2…突然出现路径；RT…对象道路；T…阈值；X…唤起注意度。

Claims (15)

1.一种车辆驾驶辅助系统，具备：
显示部，与实际风景重叠地显示提醒图像；以及
判定死角区域的死角区域判定部，所述死角区域是由于存在于车辆的行进方向前方侧的前方障碍物造成从该车辆的驾驶员看成为死角的区域，
所述显示部与对象地点重叠地显示所述提醒图像，所述对象地点是在存在从所述死角区域突然出现的移动障碍物的情况下可能给所述车辆的行进带来影响的地点。
2.根据权利要求1所述的车辆驾驶辅助系统，其中，
所述对象地点是所述车辆的行驶车道上的、以所述移动障碍物的突然出现路径与所述车辆的行进路径的交点为基准的地点。
3.根据权利要求1或2所述的车辆驾驶辅助系统，其中，
所述提醒图像是具有包括所述对象地点的区域的图像，所述提醒图像至少被显示在所述车辆的行进方向前方的所述车辆的行驶车道内。
4.根据权利要求1至3中任一项所述的车辆驾驶辅助系统，其中，
随着所述死角区域变小，减小所述提醒图像相对于所述实际风景的显示区域。
5.根据权利要求1至3中任一项所述的车辆驾驶辅助系统，其中，
随着所述车辆靠近所述死角区域，减小所述提醒图像相对于所述实际风景的显示区域。
6.根据权利要求1至5中任一项所述的车辆驾驶辅助系统，其中，
所述车辆驾驶辅助系统还具备拍摄部，所述拍摄部对所述车辆的行进方向前方侧进行拍摄，
所述死角区域判定部具备：
第一区域信息获取部，将形成所述死角区域的道路作为对象道路，获取表示不存在所述前方障碍物的情况下的所述对象道路的理想的路面区域的信息、亦即第一区域信息；
第二区域信息获取部，获取由所述拍摄部拍摄到的图像信息所包括的表示所述对象道路的路面区域的信息、亦即第二区域信息；以及
判定处理部，基于所述第一区域信息和所述第二区域信息来判定所述死角区域的位置以及大小。
7.根据权利要求6所述的车辆驾驶辅助系统，其中，
根据由所述判定处理部判定出的所述死角区域的大小，使所述提醒图像变化。
8.根据权利要求1至7中任一项所述的车辆驾驶辅助系统，其中，
所述提醒图像具有从所述死角区域的产生基点向周围扩展的显示区域。
9.根据权利要求1至8中任一项所述的车辆驾驶辅助系统，其中，
所述死角区域判定部根据以所述死角区域的产生基点为中心从所述驾驶员观察向所述前方障碍物的后方扩展的所述死角区域的俯视时的角度，判定所述死角区域的大小。
10.根据权利要求1至9中任一项所述的车辆驾驶辅助系统，其中，
所述提醒图像以阶段性地表示唤起注意度的方式被显示，所述唤起注意度表示唤起对所述车辆注意的程度。
11.根据权利要求1至10中任一项所述的车辆驾驶辅助系统，其中，
所述提醒图像的显示方式根据所述车辆行驶的道路环境而不同。
12.根据权利要求1至11中任一项所述的车辆驾驶辅助系统，其中，
在所述前方障碍物的大小在预先设定的阈值以下的情况下，所述显示部不显示所述提醒图像。
13.根据权利要求1至12中任一项所述的车辆驾驶辅助系统，其中，
所述显示部进一步与所述实际风景重叠地显示推荐路径图像，所述推荐路径图像表示对所述车辆推荐的行进路径、亦即推荐路径，
将所述推荐路径图像显示为绕过所述对象地点。
14.一种车辆驾驶辅助方法，具有：
通过判定部判定死角区域的死角区域判定步骤，所述死角区域是由于存在于车辆的行进方向前方侧的前方障碍物造成从该车辆的驾驶员看成为死角的区域；以及
提醒图像显示步骤，按照与对象地点重叠地显示的方式，使提醒图像与实际风景重叠地显示于显示部，所述对象地点是在存在从所述死角区域突然出现的移动障碍物的情况下可能给所述车辆的行进带来影响的地点。
15.一种车辆驾驶辅助程序，用于使计算机实现如下功能：
判定死角区域的死角区域判定功能，所述死角区域是由于存在于车辆的行进方向前方侧的前方障碍物造成从该车辆的驾驶员看成为死角的区域；以及
提醒图像显示功能，按照与对象地点重叠地显示的方式，使提醒图像与实际风景重叠地显示于显示部，所述对象地点是在存在从所述死角区域突然出现的移动障碍物的情况下可能给所述车辆的行进带来影响的地点。
CN201880068246.9A 2017-11-17 2018-11-16 车辆驾驶辅助系统、方法及计算机可读取的存储介质 Active CN111247575B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017222160 2017-11-17
JP2017-222160 2017-11-17
PCT/JP2018/042456 WO2019098323A1 (ja) 2017-11-17 2018-11-16 車両運転補助システム、車両運転補助方法、及び車両運転補助プログラム

Publications (2)

Publication Number Publication Date
CN111247575A true CN111247575A (zh) 2020-06-05
CN111247575B CN111247575B (zh) 2022-11-22

Family

ID=66540218

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880068246.9A Active CN111247575B (zh) 2017-11-17 2018-11-16 车辆驾驶辅助系统、方法及计算机可读取的存储介质

Country Status (5)

Country Link
US (1) US11787287B2 (zh)
JP (1) JP6958630B2 (zh)
CN (1) CN111247575B (zh)
DE (1) DE112018004561T5 (zh)
WO (1) WO2019098323A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111627252A (zh) * 2020-06-10 2020-09-04 上海商汤智能科技有限公司 车辆预警方法、装置、电子设备及存储介质
CN118019675A (zh) * 2021-09-23 2024-05-10 日产自动车株式会社 行驶辅助方法及行驶辅助装置

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3548845B1 (en) * 2017-01-12 2021-10-13 Mobileye Vision Technologies Ltd. Navigation based on vehicle activity
JP7180436B2 (ja) * 2019-02-15 2022-11-30 株式会社デンソー 行動制御方法、及び行動制御装置
US11756259B2 (en) * 2019-04-17 2023-09-12 Rakuten Group, Inc. Display controlling device, display controlling method, program, and non-transitory computer-readable information recording medium
JP7145815B2 (ja) * 2019-05-27 2022-10-03 日立Astemo株式会社 電子制御装置
JP7243516B2 (ja) * 2019-08-09 2023-03-22 株式会社デンソー 表示制御装置および表示制御プログラム
JP7078587B2 (ja) * 2019-09-30 2022-05-31 本田技研工業株式会社 走行支援システム、走行支援方法およびプログラム
WO2021196145A1 (zh) * 2020-04-02 2021-10-07 华为技术有限公司 一种车辆盲区识别方法、自动驾驶辅助系统以及包括该系统的智能驾驶车辆
JP7420008B2 (ja) * 2020-08-20 2024-01-23 株式会社デンソー 表示制御装置
DE102020130069B4 (de) 2020-11-13 2024-05-23 Audi Aktiengesellschaft Steuerung eines Kraftfahrzeugs bei teilweiser Sichtfeldverdeckung
JP2022138790A (ja) 2021-03-11 2022-09-26 本田技研工業株式会社 移動体の制御装置、移動体の制御方法、およびプログラム
CN113085899A (zh) * 2021-04-28 2021-07-09 安徽江淮汽车集团股份有限公司 视野盲区预警方法、装置、设备及存储介质
JP7203905B2 (ja) * 2021-06-18 2023-01-13 本田技研工業株式会社 制御装置、移動体、制御方法及びプログラム
JP7203907B1 (ja) * 2021-06-22 2023-01-13 本田技研工業株式会社 制御装置、移動体、制御方法、及び端末
JP7203908B1 (ja) * 2021-06-22 2023-01-13 本田技研工業株式会社 制御装置、移動体、制御方法、及びプログラム
WO2023145851A1 (ja) * 2022-01-28 2023-08-03 日本精機株式会社 表示装置
CN115826021B (zh) * 2023-02-14 2023-04-25 国网吉林省电力有限公司信息通信公司 一种采用卫星影像辅助和无线通信网络的定位方法

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006154967A (ja) * 2004-11-25 2006-06-15 Nissan Motor Co Ltd リスク最小軌跡生成装置およびこれを用いた危険状況警報装置
JP2006227811A (ja) * 2005-02-16 2006-08-31 Denso Corp 運転支援装置
JP2007323556A (ja) * 2006-06-05 2007-12-13 Mazda Motor Corp 車両周辺情報報知装置
JP2008059178A (ja) * 2006-08-30 2008-03-13 Nippon Soken Inc 運転支援装置およびプログラム
JP2009140305A (ja) * 2007-12-07 2009-06-25 Honda Motor Co Ltd 車両用情報提示装置
JP2009193135A (ja) * 2008-02-12 2009-08-27 Xanavi Informatics Corp 車載モニタ装置
CN102754138A (zh) * 2010-03-16 2012-10-24 三菱电机株式会社 道路车辆协调型安全驾驶辅助装置
CN103155015A (zh) * 2010-09-08 2013-06-12 丰田自动车株式会社 移动物预测装置、假想活动物预测装置、程序模块、移动物预测方法以及假想活动物预测方法
CN103635946A (zh) * 2011-08-10 2014-03-12 丰田自动车株式会社 驾驶辅助装置
CN103748622A (zh) * 2011-08-10 2014-04-23 丰田自动车株式会社 驾驶辅助装置
JP2015108926A (ja) * 2013-12-04 2015-06-11 三菱電機株式会社 車両用運転支援装置
CN107209850A (zh) * 2014-12-04 2017-09-26 法雷奥开关和传感器有限责任公司 用于确定驾驶员辅助系统的驾驶员特定盲点的方法，驾驶员辅助系统以及机动车辆
JP2017182565A (ja) * 2016-03-31 2017-10-05 株式会社Ｓｕｂａｒｕ 車両状態監視装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10253509A1 (de) * 2002-11-16 2004-06-17 Robert Bosch Gmbh Verfahren und Vorrichtung zur Warnung des Fahrers eines Kraftfahrzeuges
JP4578795B2 (ja) 2003-03-26 2010-11-10 富士通テン株式会社 車両制御装置、車両制御方法および車両制御プログラム
JP2009086788A (ja) * 2007-09-28 2009-04-23 Hitachi Ltd 車両周辺監視装置
JP2011194979A (ja) 2010-03-18 2011-10-06 Toyota Motor Corp 運転支援装置
JP2011248870A (ja) * 2010-04-27 2011-12-08 Denso Corp 死角領域検出装置、死角領域検出プログラム、および死角領域検出方法
JP5573617B2 (ja) * 2010-11-12 2014-08-20 トヨタ自動車株式会社 危険度算出装置
CN103069297A (zh) 2011-01-18 2013-04-24 松下电器产业株式会社 车辆方向确定装置、车辆方向确定方法及其程序
US10215583B2 (en) * 2013-03-15 2019-02-26 Honda Motor Co., Ltd. Multi-level navigation monitoring and control
US20140354684A1 (en) * 2013-05-28 2014-12-04 Honda Motor Co., Ltd. Symbology system and augmented reality heads up display (hud) for communicating safety information
JP6372402B2 (ja) * 2015-03-16 2018-08-15 株式会社デンソー 画像生成装置
KR101916993B1 (ko) * 2015-12-24 2018-11-08 엘지전자 주식회사 차량용 디스플레이 장치 및 그 제어방법
CN107180220B (zh) 2016-03-11 2023-10-31 松下电器（美国）知识产权公司 危险预测方法
JP2017162438A (ja) 2016-03-11 2017-09-14 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 危険予測方法
US10627812B2 (en) * 2017-02-14 2020-04-21 Honda Research Institute Europe Gmbh Risk based driver assistance for approaching intersections of limited visibility
US10134279B1 (en) * 2017-05-05 2018-11-20 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for visualizing potential risks

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006154967A (ja) * 2004-11-25 2006-06-15 Nissan Motor Co Ltd リスク最小軌跡生成装置およびこれを用いた危険状況警報装置
JP2006227811A (ja) * 2005-02-16 2006-08-31 Denso Corp 運転支援装置
JP2007323556A (ja) * 2006-06-05 2007-12-13 Mazda Motor Corp 車両周辺情報報知装置
JP2008059178A (ja) * 2006-08-30 2008-03-13 Nippon Soken Inc 運転支援装置およびプログラム
JP2009140305A (ja) * 2007-12-07 2009-06-25 Honda Motor Co Ltd 車両用情報提示装置
JP2009193135A (ja) * 2008-02-12 2009-08-27 Xanavi Informatics Corp 車載モニタ装置
CN102754138A (zh) * 2010-03-16 2012-10-24 三菱电机株式会社 道路车辆协调型安全驾驶辅助装置
CN103155015A (zh) * 2010-09-08 2013-06-12 丰田自动车株式会社 移动物预测装置、假想活动物预测装置、程序模块、移动物预测方法以及假想活动物预测方法
CN103635946A (zh) * 2011-08-10 2014-03-12 丰田自动车株式会社 驾驶辅助装置
CN103748622A (zh) * 2011-08-10 2014-04-23 丰田自动车株式会社 驾驶辅助装置
JP2015108926A (ja) * 2013-12-04 2015-06-11 三菱電機株式会社 車両用運転支援装置
CN107209850A (zh) * 2014-12-04 2017-09-26 法雷奥开关和传感器有限责任公司 用于确定驾驶员辅助系统的驾驶员特定盲点的方法，驾驶员辅助系统以及机动车辆
JP2017182565A (ja) * 2016-03-31 2017-10-05 株式会社Ｓｕｂａｒｕ 車両状態監視装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111627252A (zh) * 2020-06-10 2020-09-04 上海商汤智能科技有限公司 车辆预警方法、装置、电子设备及存储介质
CN118019675A (zh) * 2021-09-23 2024-05-10 日产自动车株式会社 行驶辅助方法及行驶辅助装置

Also Published As

Publication number Publication date
JP6958630B2 (ja) 2021-11-02
JPWO2019098323A1 (ja) 2020-10-22
DE112018004561T5 (de) 2020-06-04
US20200406747A1 (en) 2020-12-31
WO2019098323A1 (ja) 2019-05-23
CN111247575B (zh) 2022-11-22
US11787287B2 (en) 2023-10-17

Similar Documents

Publication Publication Date Title
CN111247575B (zh) 车辆驾驶辅助系统、方法及计算机可读取的存储介质
WO2019098216A1 (ja) 車両運転補助システム、車両運転補助方法、及び車両運転補助プログラム
US9723243B2 (en) User interface method for terminal for vehicle and apparatus thereof
JP6466899B2 (ja) 車両用表示装置
US9505346B1 (en) System and method for warning a driver of pedestrians and other obstacles
CN111052733B (zh) 周围车辆显示方法及周围车辆显示装置
EP3367366B1 (en) Display control method and display control device
JP6486474B2 (ja) 表示制御装置、表示装置及び表示制御方法
US20190340522A1 (en) Event prediction system, event prediction method, recording media, and moving body
US9073484B2 (en) Surrounding area monitoring apparatus for vehicle
US9074906B2 (en) Road shape recognition device
US20180198955A1 (en) Vehicle-use image display system and method
US11511627B2 (en) Display device and computer program
JP5712119B2 (ja) 車両用歩行者報知装置
EP3017989A1 (en) Drive assist device
CN113602282A (zh) 车辆驾驶和监测系统及将情境意识维持在足够水平的方法
CN113165510B (zh) 显示控制装置、方法和计算机程序
US20240042857A1 (en) Vehicle display system, vehicle display method, and computer-readable non-transitory storage medium storing vehicle display program
US10864856B2 (en) Mobile body surroundings display method and mobile body surroundings display apparatus
JP7127565B2 (ja) 表示制御装置及び表示制御プログラム
JP2021149319A (ja) 表示制御装置、表示制御方法およびプログラム
JP7030438B2 (ja) 車両用表示方法及び車両用表示装置
JP2020095380A (ja) 車両運転補助システム、車両運転補助方法、及び車両運転補助プログラム
JP2022516849A (ja) ヘッドアップディスプレイシステム、方法、データキャリア、処理システム及び車両
US20230022104A1 (en) Object detection device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Kariya City, Aichi Prefecture, Japan

Applicant after: AISIN Co.,Ltd.

Address before: Kariya City, Aichi Prefecture, Japan

Applicant before: AISIN SEIKI Kabushiki Kaisha

CB02 Change of applicant information
TA01 Transfer of patent application right

Effective date of registration: 20220216

Address after: Kariya City, Aichi Prefecture, Japan

Applicant after: AISIN SEIKI Kabushiki Kaisha

Address before: Aichi Prefecture, Japan

Applicant before: AISIN AW Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant