CN111422199B - 驾驶辅助装置、车辆、信息提供装置、驾驶辅助系统及驾驶辅助方法 - Google Patents

驾驶辅助装置、车辆、信息提供装置、驾驶辅助系统及驾驶辅助方法 Download PDF

Info

Publication number
CN111422199B
CN111422199B CN201911237095.8A CN201911237095A CN111422199B CN 111422199 B CN111422199 B CN 111422199B CN 201911237095 A CN201911237095 A CN 201911237095A CN 111422199 B CN111422199 B CN 111422199B
Authority
CN
China
Prior art keywords
image
vehicle
control unit
road
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911237095.8A
Other languages
English (en)
Other versions
CN111422199A (zh
Inventor
柳卓郎
田村麻贵
松浦睦实
井上利彦
山室直树
林贵志
志贺孝广
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN111422199A publication Critical patent/CN111422199A/zh
Application granted granted Critical
Publication of CN111422199B publication Critical patent/CN111422199B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/24Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/164Centralised systems, e.g. external to vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/178Warnings
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/179Distances to obstacles or vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Signal Processing (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供一种信息提供装置,其具备:控制部,其在从车辆拍摄到的第一图像中检测进入道路的对象,获取包含检测出的对象在内的第二图像;以及通信部,其被控制部控制,提供用于向驾驶员提示的所述第二图像。本发明还提供一种驾驶辅助装置,其具备控制部,所述控制部在从车辆拍摄到的第一图像中检测出进入道路的对象的情况下,获取包含检测出的对象在内的第二图像,将获取到的第二图像向驾驶员提示。

Description

驾驶辅助装置、车辆、信息提供装置、驾驶辅助系统及驾驶辅助方法
技术领域
本发明涉及一种驾驶辅助装置、车辆、信息提供装置、驾驶辅助系统及驾驶辅助方法。
背景技术
日本特开2009-204570号中记载了一种技术,其接收从中心服务器发布的野生动物分布信息,当车辆进入野生动物的栖息区域时,进行与该区域中栖息的野生动物的种类对应的指引。
存在引起对动物窜出的注意的道路指示牌。但是,由于仅观看这些道路指示牌无法获得动物可能窜出的真实感受,因此根据驾驶员的不同,是否实际引起注意也存在区别。
在日本特开2009-204570号所记载的技术中,当车辆进入野生动物的栖息区域时,与可能出现的动物的凶残性等危险性对应地,指引“警告”或“注意”等。但是,与上述道路指示牌同样地,以这样的指引无法获得动物可能出现的真实感受。
发明内容
本发明的目的在于,对于动物等对象可能进入的道路,能够使驾驶员获得该对象可能进入的真实感受。
本发明的一个实施方式所涉及的驾驶辅助装置具备控制部,所述控制部在从车辆拍摄到的第一图像中检测出进入道路的对象的情况下,获取包含检测出的对象在内的第二图像,将获取到的第二图像向驾驶员提示。
本发明的一个实施方式所涉及的信息提供装置具备:控制部,其在从车辆拍摄到的第一图像中检测进入道路的对象,获取包含检测出的对象在内的第二图像;以及通信部,其被所述控制部控制,提供用于向驾驶员提示的所述第二图像。
在本发明的一个实施方式所涉及的驾驶辅助方法中,摄像部从车辆拍摄第一图像;控制部在由所述摄像部拍摄到的第一图像中检测进入道路的对象;输出部显示第二图像以用于向驾驶员提示,其中,所述第二图像包含由所述控制部检测出的对象。
本发明的一个实施方式所涉及的驾驶辅助装置具备控制部,所述控制部在从至少一台车辆拍摄到的图像中检测出进入道路的对象的情况下,获取检测结果的统计值,将获取到的统计值向驾驶员提示。
本发明的一个实施方式所涉及的信息提供装置具备:控制部,其在从至少一台车辆拍摄到的图像中检测进入道路的对象,获取检测结果的统计值;以及通信部,其被所述控制部控制,提供用于向驾驶员提示的所述统计值。。
在本发明的一个实施方式所涉及的驾驶辅助方法中,摄像部从车辆拍摄图像;控制部在由所述摄像部拍摄到的图像中检测进入道路的对象;输出部输出所述控制部的检测结果的统计值以用于向驾驶员提示。
根据本发明的一个实施方式,对动物等对象可能进入的道路,能能够使驾驶员获得该对象可能进入的真实感受。
附图说明
下面将参照附图描述本发明所例示的实施例的特征、优点以及技术和工业意义,相同的附图标记表示相同的部件,其中:
图1是示出第一实施方式所涉及的驾驶辅助系统的构成的框图。
图2是示出第一实施方式所涉及的驾驶辅助系统的动作的流程图。
图3是示出第二实施方式所涉及的驾驶辅助系统的构成的框图。
图4是示出第二实施方式所涉及的驾驶辅助系统的动作的流程图。
图5是示出第三实施方式所涉及的驾驶辅助系统的构成的框图。
图6是示出第三实施方式所涉及的驾驶辅助系统的动作的流程图。
图7是示出第四实施方式所涉及的驾驶辅助系统的构成的框图。
图8是示出第四实施方式所涉及的驾驶辅助系统的动作的流程图。
图9是示出第五实施方式所涉及的驾驶辅助系统的构成的框图。
图10是示出第五实施方式所涉及的驾驶辅助系统的动作的流程图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
在各图中,对相同或相应的部分标注同一标号。在本实施方式的说明中,对相同或相应的部分适当地省略或简化说明。
(第一实施方式)
参照图1,对本实施方式的概要进行说明。
第一车辆10的摄像部15从第一车辆10拍摄第一图像51。第一车辆10的控制部11在由摄像部15拍摄到的第一图像51中检测窜出道路的动物。作为第一车辆10以外的车辆即第二车辆20的输出部27,为了向第二车辆20的驾驶员提示而显示包含由第一车辆10的控制部11检测出的动物在内的第二图像52。
第二车辆20的驾驶员能够通过观看显示在输出部27中的第二图像52而明确地识别实际有动物窜出道路。由此,根据本实施方式,对于动物可能窜出的道路,能够使第二车辆20的驾驶员获得动物可能窜出的真实感受。
“可能窜出”道路的动物不限于与实际“窜出”道路的动物为同一个体,可以为不同个体。例如,第二车辆20的驾驶员如果看到出现窜出道路的鹿的第二图像52,则能够获得不仅有已窜出的鹿、还可能有其它鹿窜出道路的真实感受。
“可能窜出”道路的动物种类不限于与实际“窜出”道路的动物为同一种类,可以为不同种类。例如,第二车辆20的驾驶员如果看到出现窜出道路的鹿的第二图像52,则能够获得不仅有鹿窜出、也有可能狐狸、猴、猪或熊等其他种类的动物窜出道路的真实感受。
第一车辆10及第二车辆20均可以为任意车辆,在本实施方式中均为汽车。第一车辆10及第二车辆20的关系不限于一对一关系,也可以是一对多、多对一、以及多对多的其中一种关系。
参照图1,说明本实施方式所涉及的驾驶辅助系统40的构成。
驾驶辅助系统40具备信息提供装置42及驾驶辅助装置43。
信息提供装置42设置于第一车辆10中。信息提供装置42可以配置为导航装置等车载设备,或者也可以配置为智能手机等与车载设备连接而使用的电子设备。
信息提供装置42具备控制部11、存储部12、通信部13、以及定位部14这些构成要素。
控制部11为一个以上的处理器。作为处理器,可以使用CPU等通用处理器、或者为了特定处理专业化的专用处理器。“CPU”是Central Processing Unit的缩写。可以在控制部11中包含一个以上的专用电路,或者也可以在控制部11中的一个以上的处理器替换为一个以上的专用电路。作为专用电路,可以使用例如FPGA或ASIC。“FPGA”是Field-Programmable Gate Array的缩写。“ASIC”是Application Specific Integrated Circuit的缩写。也可以在控制部11中包含一个以上的ECU。“ECU”是Electronic Control Unit的缩写。控制部11对包括信息提供装置42在内的第一车辆10的各个部分进行控制,并且执行与信息提供装置42的动作相关的信息处理。
存储部12为一个以上的存储器。作为存储器,可以使用例如半导体存储器、磁存储器、或者光存储器。存储器可以作为主存储装置、辅助存储装置、或者高速缓存起作用。存储部12存储用于信息提供装置42的动作的信息、以及基于信息提供装置42的动作得到的信息。
通信部13为一个以上的通信模块。作为通信模块,可以使用例如与DSRC、LTE、4G、或者5G对应的通信模块。“DSRC”是Dedicated Short Range Communications的缩写。“LTE”是Long Term Evolution的缩写。“4G”是4th Generation的缩写。“5G”是5th Generation的缩写。通信部13接收用于信息提供装置42的动作的信息,另外将基于信息提供装置42的动作得到的信息进行发送。
定位部14为一个以上的定位模块。作为定位模块,可以使用例如与GPS、QZSS、GLONASS、或者Galileo对应的定位模块。“GPS”是Global Positioning System的缩写。“QZSS”是Quasi-Zenith Satellite System的缩写。QZSS的卫星被称作准天顶卫星。“GLONASS”是Global Navigation Satellite System的缩写。定位部14获取第一车辆10的位置信息。
信息提供装置42的功能是通过由控制部11中包含的处理器执行本实施方式所涉及的信息提供程序而实现的。即,信息提供装置42的功能是通过软件实现的。信息提供程序通过使计算机执行信息提供装置42的动作所包含的各个步骤的处理,从而使计算机实现与该步骤的处理对应的功能。即,信息提供程序是用于使计算机作为信息提供装置42起作用的程序。
程序可以存储在计算机可读取的存储介质中。作为计算机可读取的存储介质,可以使用例如磁存储装置、光盘、磁光存储介质、或半导体存储器。程序的分发例如是通过将存储有程序的DVD或CD-ROM等便携式存储介质进行出售、转让或出借而进行的。“DVD”是Digital Versatile Disc的缩写。“CD-ROM”是Compact Disc Read Only Memory的缩写。也可以将程序存储至服务器的存储器中,通过经由网络将程序从服务器向其他计算机进行转发而分发程序。也可以将程序作为程序产品进行提供。
计算机例如将存储在便携式存储介质中的程序或者从服务器转发来的程序暂时存储在存储器中。然后,计算机利用处理器读取存储在存储器中的程序,利用处理器执行基于所读取出的程序的处理。计算机也可以直接从便携式存储介质中读取程序,执行基于程序的处理。计算机也可以在每次由服务器将程序传输到计算机时,顺次执行基于接收到的程序的处理。也可以不进行由服务器向计算机传输程序,而是通过仅基于执行指示及结果获取以实现功能的所谓ASP型服务而执行处理。“ASP”是Application Service Provider的缩写。程序中包含用于电子计算机进行处理的、相当于程序的信息。例如,并非对计算机的直接指令但具有定义计算机的处理这一性质的数据符合“相当于程序的信息”。
信息提供装置42的部分或全部功能可以由控制部11中包含的专用电路实现。即,信息提供装置42的部分或全部功能可以通过硬件实现。
除了信息提供装置42之外,第一车辆10还具备摄像部15、输入部16及输出部17。在第一车辆10中,摄像部15、输入部16及输出部17也可以作为信息提供装置42的一部分。
摄像部15为一个以上的车载照相机。作为车载照相机,可以使用例如前视照相机、侧视照相机、或后视照相机。摄像部15可以包括一个以上的车载雷达或一个以上的车载光探测和测距装置(LiDAR),或者,也可以在摄像部15中将一个以上的车载照相机替换为一个以上的车载雷达或一个以上的车载光探测和测距装置。“LiDAR”是Light Detection andRanging的缩写。摄像部15从车辆10拍摄图像。
输入部16为一个以上的输入接口。作为输入接口,可以使用例如物理键盘、电容键盘、指点设备、与车载显示器一体设置的触摸屏、或者车载拾音器。输入部16从第一车辆10的驾驶员等用户接收用于信息提供装置42的动作的信息的输入。
输出部17为一个以上的输出接口。作为输出接口,可以使用例如车载显示器或车载扬声器。作为车载显示器,可以使用例如LCD或有机EL显示器。“LCD”是Liquid CrystalDisplay的缩写。“EL”是Electro Luminescence的缩写。输出部17将基于信息提供装置42的动作得到的信息向用户输出。
驾驶辅助装置43设置于第二车辆20中。驾驶辅助装置43可以配置为导航装置等车载设备,或者也可以配置为智能手机等与车载设备连接而使用的电子设备。
驾驶辅助装置43具备控制部21、存储部22、通信部23、以及定位部24这些构成要素。
控制部21为一个以上的处理器。作为处理器,可以使用CPU等通用处理器、或者为了特定处理专业化的专用处理器。“CPU”是Central Processing Unit的缩写。可以在控制部21中包含一个以上的专用电路,或者也可以在控制部21中的一个以上的处理器替换为一个以上的专用电路。作为专用电路,可以使用例如FPGA或ASIC。也可以在控制部21中包含一个以上的ECU。控制部21对包括驾驶辅助装置43在内的第二车辆20的各个部分进行控制,并且执行与驾驶辅助装置43的动作相关的信息处理。
存储部22为一个以上的存储器。作为存储器,可以使用例如半导体存储器、磁存储器、或者光存储器。存储器可以作为主存储装置、辅助存储装置、或者高速缓存起作用。存储部22存储用于驾驶辅助装置43的动作的信息、以及基于驾驶辅助装置43的动作得到的信息。
通信部23为一个以上的通信模块。作为通信模块,可以使用例如与DSRC、LTE、4G、或者5G对应的通信模块。通信部23接收用于驾驶辅助装置43的动作的信息,另外将基于驾驶辅助装置43的动作得到的信息进行发送。
定位部24为一个以上的定位模块。作为定位模块,可以使用例如与GPS、QZSS、GLONASS、或者Galileo对应的定位模块。定位部24获取第二车辆20的位置信息。
驾驶辅助装置43的功能是通过由控制部21中包含的处理器执行本实施方式所涉及的驾驶辅助程序而实现的。即,驾驶辅助装置43的功能是通过软件实现的。驾驶辅助程序通过使计算机执行驾驶辅助装置43的动作所包含的各个步骤的处理,从而使计算机实现与该步骤的处理对应的功能。即,驾驶辅助程序是用于使计算机作为驾驶辅助装置43起作用的程序。
驾驶辅助装置43的部分或全部功能可以由控制部21中包含的专用电路实现。即,驾驶辅助装置43的部分或全部功能可以通过硬件实现。
除了驾驶辅助装置43之外,第二车辆20还具备摄像部25、输入部26及输出部27。在第二车辆20中,摄像部25、输入部26及输出部27也可以作为驾驶辅助装置43的一部分。
摄像部25为一个以上的车载照相机。作为车载照相机,可以使用例如前视照相机、侧视照相机、或后视照相机。摄像部25可以包括一个以上的车载雷达或一个以上的车载光探测和测距装置,或者,也可以在摄像部25中将一个以上的车载照相机替换为一个以上的车载雷达或一个以上的车载光探测和测距装置。摄像部25从第二车辆20拍摄图像。
输入部26为一个以上的输入接口。作为输入接口,可以使用例如物理键盘、电容键盘、指点设备、与车载显示器一体设置的触摸屏、或者车载拾音器。输入部26从第二车辆20的驾驶员等用户接收用于驾驶辅助装置43的动作的信息的输入。
输出部27为一个以上的输出接口。作为输出接口,可以使用例如车载显示器或车载扬声器。作为车载显示器,可以使用例如LCD或有机EL显示器。输出部27将基于驾驶辅助装置43的动作得到的信息向用户输出。
在图1之外还参照图2,对本实施方式所涉及的驾驶辅助系统40的动作进行说明。驾驶辅助系统40的动作对应于本实施方式所涉及的驾驶辅助方法。
步骤S101至步骤S104的处理由第一车辆10执行。
在步骤S101中,摄像部15从第一车辆10拍摄第一图像51。
具体地,摄像部15连续拍摄第一车辆10前方的动态图像作为第一图像51,或者断续拍摄第一车辆10前方的静止图像作为第一图像51。
摄像部15不仅可以拍摄第一车辆10前方的图像作为第一图像51,也可以拍摄第一车辆10侧方或后方的图像作为第一图像51。
在步骤S102中,信息提供装置42的控制部11在由摄像部15拍摄到的第一图像51中检测窜出道路Rx的动物。
具体地,控制部11从摄像部15获取由摄像部15拍摄到的第一图像51、以及示出拍摄到第一图像51的时刻的时刻信息。控制部11从定位部14获取由获取到的时刻信息所示的时刻的第一车辆10的位置信息。控制部11将获取到的第一图像51存储至存储部12中,并将获取到的时刻信息及位置信息与该第一图像51相关联地存储至存储部12中。控制部11对获取到的第一图像51进行分析,判定该第一图像51中是否出现动物,如果出现动物则判定该动物是否正在进入道路Rx。作为识别图像内的动物及道路的技术,可以使用例如利用机器学习的图像识别技术。
道路Rx可以为任意道路,在本实施方式中为设置有告知动物可能窜出的指示牌Sx的道路。因此,控制部11通过将从定位部14获取到的位置信息、与预先存储在存储部12中的地图信息进行对照,判定第一图像51中出现的道路是否为道路Rx,该地图信息示出道路Rx的位置、或示出包含道路Rx在内的设置有指示牌Sx的一组道路的位置。或者,控制部11通过分析第一图像51而判定第一图像51中出现的道路是否设置有指示牌Sx,从而判定该道路是否为道路Rx。或者,控制部11通过经由通信部13从第一车辆10附近的路边设备获取道路的信息并参照该信息,从而判定第一图像51中出现的道路是否为道路Rx。
控制部11也可以将示出控制部11从摄像部15获取到第一图像51的时刻的信息作为时刻信息,存储至存储部12中。在此情况下,控制部11可以不从摄像部15获取时刻信息。
在步骤S103中,控制部11获取包含步骤S102中检测出的动物在内的第二图像52。
具体地,控制部11在判定为步骤S102中分析的第一图像51中出现动物且该动物正在进入道路Rx的情况下,将该第一图像51作为第二图像52存储至存储部12中。
在作为第一图像51拍摄到的动态图像的一系列的帧中出现窜出道路Rx的动物的情况下,控制部11从这一系列的帧中选择一个以上的帧作为第二图像52。或者,在作为第一图像51拍摄到的一系列的静止图像中出现窜出道路Rx的动物的情况下,控制部11从上述一系列的静止图像中选择一个以上的静止图像作为第二图像52。
控制部11也可以对出现窜出道路Rx的动物的第一图像51施加尺寸变更或分辨率变更等加工后,将加工后的第一图像51作为第二图像52存储至存储部12中。
控制部11也可以在判定为第一图像51中没有出现动物、或者虽然出现动物但该动物并不会进入道路Rx的情况下,将该第一图像51、以及对应的时刻信息和位置信息从存储部12中删除。
在步骤S104中,信息提供装置42的通信部13被控制部11控制,提供用于向第二车辆20的驾驶员提示的、由控制部11获取到的第二图像52。
具体地,控制部11将存储在存储部12中的第二图像52、以及存储在存储部12中且与作为该第二图像52来源的第一图像51对应的时刻信息及位置信息向通信部13输入。通信部13通过车间通信、车路通信、或经由网络的通信,将从控制部11输入的第二图像52、时刻信息及位置信息向第二车辆20的驾驶辅助装置43发送。
步骤S105及步骤S106的处理由第二车辆20执行。
在步骤S105中,驾驶辅助装置43的通信部23获取由第一车辆10的信息提供装置42提供的第二图像52。
具体地,通信部23通过车间通信、车路通信、或经由网络的通信,接收由第一车辆10的信息提供装置42发送来的第二图像52、时刻信息及位置信息。
在步骤S106中,驾驶辅助装置43的控制部21将由通信部23获取到的第二图像52向第二车辆20的驾驶员进行提示。控制部21利用输出部27作为提示第二图像52的单元。即,输出部27被控制部21控制,显示用于向第二车辆20的驾驶员提示的、由通信部23获取到的第二图像52。
具体地,控制部21从通信部23获取由通信部23接收到的第二图像52、时刻信息及位置信息。控制部21将获取到的第二图像52存储至存储部22中,并将获取到的时刻信息及位置信息与该第二图像52相关联地存储至存储部22中。控制部21将存储在存储部22中的第二图像52、以及存储在存储部22中且与该第二图像52对应的时刻信息及位置信息向输出部27输入。输出部27显示包含由控制部21输入的第二图像52、时刻信息及位置信息的画面。在该画面中,位置信息可以以文字显示,但在本实施方式中,是以在地图上的对应位置处配置图标等图形的形式进行显示的。可以在同一地图上的第二车辆20的当前位置处也配置另外的图标等图形。在此情况下,控制部21从定位部24获取当前时刻的第二车辆20的位置信息,作为表示第二车辆20的当前位置的信息。为了不会妨碍安全驾驶,可以适度调整画面内的信息量。
控制部21可以在任意时间提示第二图像52,在本实施方式中,当第二车辆20行驶于道路Rx时,将第二图像52向第二车辆20的驾驶员进行提示。因此,控制部21通过将从定位部24获取到的位置信息、与预先存储在存储部22中且示出道路Rx的位置的地图信息进行对照,而判定第二车辆20当前是否行驶于道路Rx。例如在第二车辆20到达能够看到道路Rx的指示牌Sx的地点时,控制部21将第二图像52向第二车辆20的驾驶员进行提示。
控制部21也可以在第二车辆20行驶于道路Rx之前,将第二图像52向第二车辆20的驾驶员进行提示。在此情况下,控制部21通过将从定位部24获取到的位置信息与地图信息进行对照而预测第二车辆20今后是否会行驶于道路Rx。或者,如果通过导航功能设定了第二车辆20的行驶路线,则控制部21通过判定该路线中是否包含道路Rx而预测第二车辆20今后是否会行驶于道路Rx。
如上所述,在本实施方式中,信息提供装置42的控制部11在由第一车辆10拍摄到的第一图像51中检测窜出道路Rx的动物,获取包含检测出的动物在内的第二图像52。信息提供装置42的通信部13被控制部11控制而提供用于向第二车辆20的驾驶员提示的第二图像52。在由第一车辆10拍摄到的第一图像51中检测出窜出道路Rx的动物的情况下,驾驶辅助装置43的控制部21获取包含检测出的动物在内的第二图像52,将获取到的第二图像52向第二车辆20的驾驶员进行提示。从而,根据本实施方式,对于道路Rx,能够使第二车辆20的驾驶员获得动物可能窜出的真实感受。其结果是,驾驶员的注意力提升,能够进行更安全的驾驶。
所检测的对象只要是有可能进入道路的对象即可,并不限于动物,也可以是落石等物体、或者儿童或老人等。在任意一种情况下,信息提供装置42的控制部11均获取包含检测出的对象在内的第二图像52。驾驶辅助装置43的控制部21获取包含检测出的对象在内的第二图像52,将获取到的第二图像52向第二车辆20的驾驶员进行提示。由此,对于对象可能进入的道路,能够使第二车辆20的驾驶员获得对象可能进入的真实感受。
在本实施方式中,特别是在道路Rx上设置有告知动物可能窜出的指示牌Sx的情况下,信息提供装置42的控制部11获取包含窜出道路Rx的动物在内的图像作为第二图像52。特别是在道路Rx上设置有指示牌Sx的情况下,驾驶辅助装置43的控制部21获取包含窜出道路Rx的动物在内的图像作为第二图像52,将获取到的第二图像52向第二车辆20的驾驶员进行提示。由此,能够给予驾驶员仅观看指示牌Sx无法获得的、动物可能窜出的真实感受。
如果所检测的对象包含落石,那么,在道路Ry上设置有告知有可能存在落石的指示牌Sy的情况下,信息提供装置42的控制部11获取包含向道路Ry掉落的落石在内的图像作为第二图像52。在道路Ry上设置有指示牌Sy的情况下,驾驶辅助装置43的控制部21获取包含向道路Ry掉落的落石在内的图像作为第二图像52,将获取到的第二图像52向第二车辆20的驾驶员进行提示。由此,能够给予驾驶员仅观看指示牌Sy无法获得的、可能存在落石的真实感受。例如,第二车辆20的驾驶员如果看到出现向道路Ry掉落的落石的第二图像52,则能够获得可能再次发生向道路Ry掉落落石的真实感受。
如果所检测的对象包含儿童,那么,在道路Rz上设置有告知存在学校、幼儿园或托儿所的指示牌Sz的情况下,信息提供装置42的控制部11获取包含窜出道路Rz的儿童在内的图像作为第二图像52。在道路Rz上设置有指示牌Sz的情况下,驾驶辅助装置43的控制部21获取包含窜出道路Rz的儿童在内的图像作为第二图像52,将获取到的第二图像52向第二车辆20的驾驶员进行提示。由此,能够给予驾驶员仅观看指示牌Sz无法获得的、儿童可能窜出的真实感受。例如,第二车辆20的驾驶员如果看到出现窜出道路Rz的儿童的第二图像52,则能够获得不仅有已窜出道路Rz的儿童、还可能有其它儿童窜出道路Rz的真实感受。
当第二车辆20处于完全自动驾驶模式时,驾驶辅助装置43的控制部21可以不将第二图像52向第二车辆20的驾驶员进行提示。完全自动驾驶模式相当于SAE分级中的“第5级”,但也可以包含“第4级”,或者也可以包含其他定义下的自动驾驶级别。“SAE”是Societyof Automotive Engineers的缩写。
(第二实施方式)
参照图3,说明本实施方式的概要。
在第一实施方式中,由第一车辆10的控制部11在由第一车辆10的摄像部15拍摄到的第一图像51中检测窜出道路的动物。与此相对,在本实施方式中,服务器30的控制部31在由第一车辆10的摄像部15拍摄到的第一图像51中检测窜出道路的动物。第二车辆20的输出部27显示用于向第二车辆20的驾驶员提示的、包含由服务器30的控制部31检测出的动物在内的第二图像52。
与第一实施方式同样地,第二车辆20的驾驶员能够通过观看显示在输出部27中的第二图像52而明确地识别实际有动物窜出道路。由此,根据本实施方式,针对动物可能窜出的道路,能够使第二车辆20的驾驶员获得动物可能窜出的真实感受。
参照图3,对本实施方式所涉及的驾驶辅助系统40的构成进行说明。对于与第一实施方式共通的部分,适当省略或简化说明。
驾驶辅助系统40具备图像上传装置41、信息提供装置42、以及驾驶辅助装置43。
图像上传装置41及信息提供装置42能够经由移动通信网络及互联网等网络44彼此通信。信息提供装置42及驾驶辅助装置43也能够经由网络44彼此通信。
图像上传装置41设置于第一车辆10中。图像上传装置41可以配置为导航装置等车载设备,或者也可以配置为智能手机等与车载设备连接而使用的电子设备。
图像上传装置41具备控制部11、存储部12、通信部13、以及定位部14这些构成要素。
控制部11对包含图像上传装置41在内的第一车辆10的各个部分进行控制,并且执行与图像上传装置41的动作相关的信息处理。
存储部12中存储用于图像上传装置41的动作的信息、以及基于图像上传装置41的动作得到的信息。
通信部13接收用于图像上传装置41的动作的信息,另外将基于图像上传装置41的动作得到的信息进行发送。
图像上传装置41的功能是通过由控制部11中包含的处理器执行本实施方式所涉及的图像上传程序而实现的。即,图像上传装置41的功能是通过软件实现的。图像上传程序通过使计算机执行图像上传装置41的动作所包含的各个步骤的处理,从而使计算机实现与该步骤的处理对应的功能。即,图像上传程序是用于使计算机作为图像上传装置41起作用的程序。
图像上传装置41的部分或全部功能可以由控制部11中包含的专用电路实现。即,图像上传装置41的部分或全部功能可以通过硬件实现。
除了图像上传装置41之外,第一车辆10还具备摄像部15、输入部16及输出部17。在第一车辆10中,摄像部15、输入部16及输出部17也可以作为图像上传装置41的一部分。
输入部16从第一车辆10的驾驶员等用户接受用于图像上传装置41的动作的信息的输入。
输出部17将基于图像上传装置41的动作得到的信息向用户输出。
在本实施方式中,信息提供装置42并不设置于第一车辆10中,而是替代地设置于数据中心等第一车辆10的外部。信息提供装置42由属于云计算系统或其他计算系统的服务器30构成。
信息提供装置42具备控制部31、存储部32、以及通信部33这些构成要素。
控制部31为一个以上的处理器。作为处理器,可以使用CPU等通用处理器、或者为了特定处理专业化的专用处理器。可以在控制部31中包含一个以上的专用电路,或者也可以在控制部31中的一个以上的处理器替换为一个以上的专用电路。作为专用电路,可以使用例如FPGA或ASIC。也可以在控制部31中包含一个以上的ECU。控制部31对作为信息提供装置42的服务器30进行控制,并且执行与信息提供装置42的动作相关的信息处理。
存储部32为一个以上的存储器。作为存储器,可以使用例如半导体存储器、磁存储器、或者光存储器。存储器可以作为主存储装置、辅助存储装置、或者高速缓存起作用。存储部32存储用于信息提供装置42的动作的信息、以及基于信息提供装置42的动作得到的信息。
通信部33为一个以上的通信模块。作为通信模块,可以使用例如与LAN标准对应的通信模块。“LAN”是Local Area Network的缩写。通信部33接收用于信息提供装置42的动作的信息,另外将基于信息提供装置42的动作得到的信息进行发送。
信息提供装置42的功能是通过由控制部31中包含的处理器执行本实施方式所涉及的信息提供程序而实现的。即,信息提供装置42的功能是通过软件实现的。信息提供程序通过使计算机执行信息提供装置42的动作所包含的各个步骤的处理,从而使计算机实现与该步骤的处理对应的功能。即,信息提供程序是用于使计算机作为信息提供装置42起作用的程序。
信息提供装置42的部分或全部功能可以由控制部31中包含的专用电路实现。即,信息提供装置42的部分或全部功能可以通过硬件实现。
与第一实施方式同样地,驾驶辅助装置43设置于第二车辆20中。
与第一实施方式同样地,第二车辆20中除了驾驶辅助装置43之外,还具备摄像部25、输入部26及输出部27。
在图3之外还参照图4,对本实施方式所涉及的驾驶辅助系统40的动作进行说明。对于与第一实施方式共通的部分,适当省略或简化说明。驾驶辅助系统40的动作对应于本实施方式所涉及的驾驶辅助方法。
步骤S201及步骤S202的处理由第一车辆10执行。
对于步骤S201的处理,由于与步骤S101的处理相同而省略说明。
在步骤S202中,图像上传装置41的通信部13被控制部11控制,将由摄像部15拍摄到的第一图像51上传至服务器30。
具体地,控制部11从摄像部15获取由摄像部15拍摄到的第一图像51、以及示出拍摄到第一图像51的时刻的时刻信息。控制部11从定位部14获取由获取到的时刻信息所示的时刻的第一车辆10的位置信息。控制部11将获取到的第一图像51存储至存储部12中,并将获取到的时刻信息及位置信息与该第一图像51相关联地存储至存储部12中。控制部11将存储在存储部12中的第一图像51、以及存储在存储部12中且与该第一图像51对应的时刻信息及位置信息向通信部13输入。通信部13将从控制部11输入的第一图像51、时刻信息及位置信息经由网络44向作为服务器30的信息提供装置42发送。
步骤S203至步骤S206的处理由服务器30执行。
在步骤S203中,信息提供装置42的通信部33获取从第一车辆10的图像上传装置41上传的第一图像51。
具体地,通信部33经由网络44接收由第一车辆10的图像上传装置41发送来的第一图像51、时刻信息及位置信息。
在步骤S204中,信息提供装置42的控制部31在由第一车辆10的摄像部15拍摄到的第一图像51中检测窜出道路Rx的动物。
具体地,控制部31从通信部33获取由通信部33接收到的第一图像51、时刻信息及位置信息。控制部31将获取到的第一图像51存储至存储部32中,并将获取到的时刻信息及位置信息与该第一图像51相关联地存储至存储部32中。控制部31对获取到的第一图像51进行分析,判定该第一图像51中是否出现动物,如果出现动物则判定该动物是否正在进入道路Rx。作为识别图像内的动物及道路的技术,可以使用例如利用机器学习的图像识别技术。
道路Rx可以为任意道路,在本实施方式中为设置有告知动物可能窜出的指示牌Sx的道路。因此,控制部31通过将从通信部33获取到的位置信息、与预先存储在存储部32中的地图信息进行对照,判定第一图像51中出现的道路是否为道路Rx,该地图信息示出道路Rx的位置、或示出包含道路Rx在内的设置有指示牌Sx的一组道路的位置。或者,控制部31通过分析第一图像51而判定第一图像51中出现的道路是否设置有指示牌Sx,从而判定该道路是否为道路Rx。或者,控制部31通过经由通信部33从第一车辆10获取第一车辆10正在行驶的道路的信息,参照该信息而判定第一图像51中出现的道路是否为道路Rx。
控制部31也可以将示出通信部33从第一车辆10的图像上传装置41获取到第一图像51的时刻的信息作为时刻信息,存储至存储部32中。在此情况下,通信部33可以不从第一车辆10的图像上传装置41获取时刻信息。
在步骤S205中,控制部31获取包含步骤S204中检测出的动物在内的第二图像52。
具体地,控制部31在判定为步骤S204中分析的第一图像51中出现动物且该动物正在进入道路Rx的情况下,将该第一图像51作为第二图像52存储至存储部32中。
在步骤S206中,信息提供装置42的通信部33被控制部31控制,提供用于向第二车辆20的驾驶员提示的、由控制部31获取到的第二图像52。
具体地,控制部31将存储在存储部32中的第二图像52、以及存储在存储部32中且与作为该第二图像52来源的第一图像51对应的时刻信息及位置信息向通信部33输入。通信部13经由网络44将从控制部31输入的第二图像52、时刻信息及位置信息向第二车辆20的驾驶辅助装置43发送。
步骤S207及步骤S208的处理由第二车辆20执行。
在步骤S207中,驾驶辅助装置43的通信部23获取由作为服务器30的信息提供装置42提供的第二图像52。
具体地,通信部23经由网络44接收由作为服务器30的信息提供装置42发送来的第二图像52、时刻信息及位置信息。
对于步骤S208的处理,由于与步骤S106的处理相同而省略说明。
如上所述,在本实施方式中,分析图像的处理是由第一车辆10外部的服务器30执行的。从而,根据本实施方式,能够简化第一车辆10的构成。
与第一实施方式同样地,所检测的对象只要是有可能进入道路的对象即可,并不限于动物,也可以是落石等物体、或者儿童或老人等。
(第三实施方式)
参照图5,说明本实施方式的概要。
在第一实施方式中,由第一车辆10的控制部11在由第一车辆10的摄像部15拍摄到的第一图像51中检测窜出道路的动物。与此相对,在本实施方式中,第二车辆20的控制部21在由第二车辆20的摄像部25拍摄到的第一图像51中检测窜出道路的动物。第二车辆20的输出部27显示用于向第二车辆20的驾驶员提示的、包含由第二车辆20的控制部21检测出的动物在内的第二图像52。
与第一实施方式同样地,第二车辆20的驾驶员能够通过观看显示在输出部27中的第二图像52而明确地识别实际有动物窜出道路。由此,根据本实施方式,针对动物可能窜出的道路,能够使第二车辆20的驾驶员获得动物可能窜出的真实感受。
由于不需要第一实施方式中的第一车辆10,因此,也可以将第二车辆20仅称作“车辆”。
参照图5,对本实施方式所涉及的驾驶辅助系统40的构成进行说明。对于与第一实施方式共通的部分,适当省略或简化说明。
驾驶辅助系统40具备驾驶辅助装置43。驾驶辅助系统40不具备第一实施方式所述的信息提供装置42。
与第一实施方式同样地,驾驶辅助装置43设置于第二车辆20中。
与第一实施方式同样地,除了驾驶辅助装置43之外,第二车辆20还具备摄像部25、输入部26及输出部27。
在图5之外还参照图6,对本实施方式所涉及的驾驶辅助系统40的动作进行说明。对于与第一实施方式共通的部分,适当省略或简化说明。驾驶辅助系统40的动作对应于本实施方式所涉及的驾驶辅助方法。
步骤S301至步骤S304的处理由第二车辆20执行。
对于步骤S301至步骤S303的处理,由于除了将第一车辆10、信息提供装置42的控制部11、存储部12、通信部13、定位部14及摄像部15分别替换为第二车辆20、驾驶辅助装置43的控制部21、存储部22、通信部23、定位部24及摄像部25这一点之外,与步骤S101至步骤S103的处理相同,因此省略说明。
在步骤S304中,控制部21将获取到的第二图像52向第二车辆20的驾驶员进行提示。控制部21利用输出部27作为提示第二图像52的单元。即,输出部27被控制部21控制,显示用于向第二车辆20的驾驶员提示的、由控制部21获取到的第二图像52。
具体地,控制部21将存储在存储部22中的第二图像52、以及存储在存储部22中且与作为该第二图像52的来源的第一图像51对应的时刻信息及位置信息,向输出部27输入。输出部27显示包含由控制部21输入的第二图像52、时刻信息及位置信息的画面。在该画面中,位置信息可以以文字显示,但在本实施方式中,是以在地图上的对应位置处配置图标等图形的形式进行显示的。可以在同一地图上的第二车辆20的当前位置处也配置另外的图标等图形。在此情况下,控制部21从定位部24获取当前时刻的第二车辆20的位置信息,作为表示第二车辆20的当前位置的信息。
控制部21也可以不将第二图像52存储至存储部22中,而是替代得将第二图像52存储至云存储器等第二车辆20外部的存储器中,经由通信部23获取第二图像52并进行提示。
控制部21可以在任意时间提示第二图像52,在本实施方式中,当第二车辆20在与拍摄第一图像51时不同的时机行驶于道路Rx时,将第二图像52向第二车辆20的驾驶员进行提示。因此,控制部21通过参照存储部22中存储的、与第一图像51对应的时刻信息,确认从拍摄第一图像51的时刻起经过了一定以上的期间。然后,控制部21通过将从定位部24获取到的位置信息、与预先存储在存储部22中且示出道路Rx的位置的地图信息进行对照,而判定第二车辆20当前是否行驶于道路Rx。控制部21例如在第一图像51的拍摄日的次日起第二车辆20到达能够看到道路Rx的指示牌Sx的地点时,将第二图像52向第二车辆20的驾驶员进行提示。
控制部21也可以在第二车辆20在与拍摄第一图像51时不同的时机行驶于道路Rx之前,将第二图像52向第二车辆20的驾驶员进行提示。在此情况下,控制部21也通过参照与第一图像51对应的时刻信息,确认从拍摄第一图像51的时刻起经过了一定以上的期间。然后,控制部21通过将从定位部24获取到的位置信息与地图信息进行对照,而预测第二车辆20今后是否会行驶于道路Rx。或者,如果通过导航功能设定了第二车辆20的行驶路线,则控制部21通过判定该路线中是否包含道路Rx,而预测第二车辆20今后是否会行驶于道路Rx。
在第一图像51中出现窜出道路Rx的动物但该第一图像51是第二车辆20后方的图像的情况下等、推定第二车辆20的驾驶员没有识别到窜出的动物的情况下,控制部21也可以在与拍摄第一图像51时相同的时机,将第二图像52向第二车辆20的驾驶员进行提示。
如上所述,在本实施方式中,驾驶辅助装置43的控制部21在由第二车辆20拍摄到的第一图像51中检测窜出道路Rx的动物,获取包含检测出的动物在内的第二图像52,将获取到的第二图像52向第二车辆20的驾驶员进行提示。从而,根据本实施方式,即使第二车辆20的驾驶员忘记过去经过道路Rx时有动物窜出的情况,也能够在再次经过道路Rx时想起该情况。其结果是,驾驶员的注意力提升,能够进行更安全的驾驶。
与第一实施方式同样地,所检测的对象只要是有可能进入道路的对象即可,并不限于动物,也可以是落石等物体、或者儿童或老人等。
(第四实施方式)
参照图7,说明本实施方式的概要。
在本实施方式中,将与从第一实施方式至第三实施方式的变更同样的变更应用于第二实施方式。
在第二实施方式中,由服务器30的控制部31在由第一车辆10的摄像部15拍摄到的第一图像51中检测窜出道路的动物。与此相对,在本实施方式中,服务器30的控制部31在由第二车辆20的摄像部25拍摄到的第一图像51中检测窜出道路的动物。第二车辆20的输出部27显示用于向第二车辆20的驾驶员提示的、包含由服务器30的控制部31检测出的动物在内的第二图像52。
与第二实施方式及第三实施方式同样地,第二车辆20的驾驶员能够通过观看显示在输出部27中的第二图像52而明确地识别实际有动物窜出道路。由此,根据本实施方式,针对动物可能窜出的道路,能够使第二车辆20的驾驶员获得动物可能窜出的真实感受。
由于不需要第二实施方式中的第一车辆10,因此,也可以将第二车辆20仅称作“车辆”。
参照图7,说明本实施方式所涉及的驾驶辅助系统40的构成。对于与第二实施方式共通的部分,适当省略或简化说明。
驾驶辅助系统40具备信息提供装置42和驾驶辅助装置43。驾驶辅助系统40不具备第二实施方式所述的图像上传装置41。
在本实施方式中,信息提供装置42设置于数据中心等第二车辆20的外部。与第二实施方式同样地,信息提供装置42由属于云计算系统或其他计算系统的服务器30构成。
对于信息提供装置42的构成,由于与第二实施方式相同而省略说明。
与第二实施方式同样地,驾驶辅助装置43设置于第二车辆20中。
与第二实施方式同样地,除了驾驶辅助装置43之外,第二车辆20还具备摄像部25、输入部26及输出部27。
在图7之外还参照图8,对本实施方式所涉及的驾驶辅助系统40的动作进行说明。对于与第二实施方式共通的部分,适当省略或简化说明。驾驶辅助系统40的动作对应于本实施方式所涉及的驾驶辅助方法。
步骤S401及步骤S402的处理由第二车辆20执行。
对于步骤S401及步骤S402的处理,由于除了将第一车辆10、图像上传装置41的控制部11、存储部12、通信部13、定位部14及摄像部15分别替换为第二车辆20、驾驶辅助装置43的控制部21、存储部22、通信部23、定位部24及摄像部25这一点之外,与步骤S201及步骤S202的处理相同,因此省略说明。
步骤S403至步骤S406的处理由服务器30执行。
对于步骤S403至步骤S406的处理,由于除了将第一车辆10、图像上传装置41及摄像部15分别替换为第二车辆20、驾驶辅助装置43及摄像部25这一点之外,与步骤S203至步骤S206的处理相同,因此省略说明。
步骤S407及步骤S408的处理由第二车辆20执行。
对于步骤S407的处理,由于与步骤S207的处理相同而省略说明。
在步骤S408中,驾驶辅助装置43的控制部21将由通信部23获取到的第二图像52向第二车辆20的驾驶员进行提示。控制部21利用输出部27作为提示第二图像52的单元。即,输出部27被控制部21控制,显示用于向第二车辆20的驾驶员提示的、由通信部23获取到的第二图像52。
具体地,控制部21从通信部23获取由通信部23接收到的第二图像52、时刻信息及位置信息。控制部21将获取到的第二图像52存储至存储部22中,并将获取到的时刻信息及位置信息与该第二图像52相关联地存储至存储部22中。控制部21将存储在存储部22中的第二图像52、以及存储在存储部22中且与该第二图像52对应的时刻信息及位置信息向输出部27输入。输出部27显示包含由控制部21输入的第二图像52、时刻信息及位置信息的画面。在该画面中,位置信息可以以文字显示,但在本实施方式中,是以在地图上的对应位置处配置图标等图形的形式进行显示的。可以在同一地图上的第二车辆20的当前位置处也配置另外的图标等图形。在此情况下,控制部21从定位部24获取当前时刻的第二车辆20的位置信息,作为表示第二车辆20的当前位置的信息。
控制部21可以在任意时间提示第二图像52,在本实施方式中,当第二车辆20在与拍摄第一图像51时不同的时机行驶于道路Rx时,将第二图像52向第二车辆20的驾驶员进行提示。因此,控制部21通过参照存储部22中存储的、与第二图像52对应的时刻信息,确认从拍摄第一图像51的时刻起经过了一定以上的期间。然后,控制部21通过将从定位部24获取到的位置信息、与预先存储在存储部22中且示出道路Rx的位置的地图信息进行对照,而判定第二车辆20当前是否行驶于道路Rx。控制部21例如在第一图像51的拍摄日的次日起第二车辆20到达能够看到道路Rx的指示牌Sx的地点时,将第二图像52向第二车辆20的驾驶员进行提示。
控制部21也可以在第二车辆20在与拍摄第一图像51时不同的时机行驶于道路Rx之前,将第二图像52向第二车辆20的驾驶员进行提示。在此情况下,控制部21也通过参照与第二图像52对应的时刻信息,确认从拍摄第一图像51的时刻起经过了一定以上的期间。然后,控制部21通过将从定位部24获取到的位置信息与地图信息进行对照,而预测第二车辆20今后是否会行驶于道路Rx。或者,如果通过导航功能设定了第二车辆20的行驶路线,则控制部21通过判定该路线中是否包含道路Rx,而预测第二车辆20今后是否会行驶于道路Rx。
在第一图像51中出现窜出道路Rx的动物但该第一图像51是第二车辆20后方的图像的情况下等、推定第二车辆20的驾驶员没有识别到窜出的动物的情况下,控制部21也可以在与拍摄第一图像51时相同的时机,将第二图像52向第二车辆20的驾驶员进行提示。
如上所述,在本实施方式中,分析图像的处理是通过第二车辆20外部的服务器30执行的。从而,根据本实施方式,能够简化第二车辆20的构成。
与第一实施方式同样地,所检测的对象只要是有可能进入道路的对象即可,并不限于动物,也可以是落石等物体、或者儿童或老人等。
(第五实施方式)
参照图9,说明本实施方式的概要。
与第二实施方式同样地,第一车辆10的摄像部15从第一车辆10拍摄第一图像51。服务器30的控制部31在由第一车辆10的摄像部15拍摄到的第一图像51中检测窜出道路的动物。
在第二实施方式中,第二车辆20的输出部27显示用于向第二车辆20的驾驶员提示的、包含由服务器30的控制部31检测出的动物在内的第二图像52。与此相对,在本实施方式中,第二车辆20的输出部27显示服务器30的控制部31的检测结果的统计值53以用于向第二车辆20的驾驶员提示。
第二车辆20的驾驶员能够通过观看显示在输出部27中的统计值53而识别实际有多少动物窜出道路。由此,根据本实施方式,针对动物可能窜出的道路,能够使第二车辆20的驾驶员获得动物可能窜出的真实感受。
第一车辆10有至少一台即可,但数量越多则统计值53的精度就越高。
由于不需要第二实施方式中的第二图像52,因此,也可以将第一图像51仅称作“图像”。
对于本实施方式所涉及的驾驶辅助系统40的构成,由于与第二实施方式相同而省略说明。
在图9之外还参照图10,对本实施方式所涉及的驾驶辅助系统40的动作进行说明。对于与第二实施方式共通的部分,适当省略或简化说明。驾驶辅助系统40的动作对应于本实施方式所涉及的驾驶辅助方法。
步骤S501及步骤S502的处理由第一车辆10执行。
对于步骤S501及步骤S502的处理,由于与步骤S201及步骤S202的处理相同而省略说明。
步骤S503至步骤S506的处理由服务器30执行。
对于步骤S503及步骤S504的处理,由于与步骤S203及步骤S204的处理相同而省略说明。
也可以代替由服务器30执行步骤S504的处理,而是由第一车辆10执行与步骤S102相同的处理,将得到的检测结果从第一车辆10向服务器30通知。
在步骤S505中,控制部31获取步骤S504的检测结果的统计值53。
具体地,控制部31在判定为步骤S504中分析的第一图像51中出现动物且该动物正在进入道路Rx的情况下,更新存储部32中存储的计数值。该计数值是对最近的以周或月等为单位的期间内动物进入道路Rx的次数进行计数的值。控制部31将更新后的计数值作为统计值53存储至存储部32中。
在作为第一图像51拍摄到的动态图像的一系列的帧中出现窜出道路Rx的动物的情况下,控制部31并非以帧为单位将计数值加1,而是针对这一系列的帧而将计数值加1。或者,在作为第一图像51拍摄到的一系列的静止图像中出现窜出道路Rx的动物的情况下,控制部31并非以静止图像为单位将计数值加1,而是针对这一系列的静止图像而将计数值加1。
控制部31也可以对更新后的计数值和过去一个以上单位期间内动物进入道路Rx的次数进行计数的值的平均值进行计算,将计算结果作为统计值53存储至存储部32中。或者,控制部31也可以从更新后的计数值、过去一个以上单位期间内动物进入道路Rx的次数进行计数的值中,选择最大值、最小值、中值、众数值等代表值,将所选择的代表值作为统计值53存储至存储部32中。
控制部31在判定为第一图像51中没有出现动物、或者虽然出现动物但该动物并不会进入道路Rx的情况下,不更新存储部32中存储的计数值。
在步骤S506中,信息提供装置42的通信部33被控制部31控制,提供由控制部31获取的统计值53以用于向第二车辆20的驾驶员提示。
具体地,控制部31将存储在存储部32中的统计值53、以及道路Rx的位置信息向通信部33输入。通信部33将从控制部31输入的统计值53及位置信息经由网络44向第二车辆20的驾驶辅助装置43发送。
步骤S507及步骤S508的处理由第二车辆20执行。
在步骤S507中,驾驶辅助装置43的通信部23获取由作为服务器30的信息提供装置42提供的统计值53。
具体地,通信部23经由网络44接收由作为服务器30的信息提供装置42发送来的统计值53及位置信息。
在步骤S508中,驾驶辅助装置43的控制部21将由通信部23获取到的统计值53向第二车辆20的驾驶员进行提示。控制部21利用输出部27作为提示统计值53的单元。即,输出部27被控制部21控制,显示由通信部23获取到的统计值53以用于向第二车辆20的驾驶员提示。
具体地,控制部21从通信部23获取由通信部23接收到的统计值53及位置信息。控制部21将获取到的统计值53存储至存储部22中,并将获取到的位置信息与该统计值53相关联地存储至存储部22中。控制部21将存储在存储部22中的统计值53、以及存储在存储部22中且与该统计值53对应的位置信息向输出部27输入。输出部27显示包含由控制部21输入的统计值53及位置信息的画面。在该画面中,位置信息可以以文字显示,但在本实施方式中,是以在地图上的对应位置处配置图标等图形的形式进行显示的。可以在同一地图上的第二车辆20的当前位置处也配置另外的图标等图形。在此情况下,控制部21从定位部24获取当前时刻的第二车辆20的位置信息,作为表示第二车辆20的当前位置的信息。
输出部27也可以利用声音输出统计值53而代替显示统计值53。
控制部21可以在任意时间提示统计值53,在本实施方式中,当第二车辆20行驶于道路Rx时,将统计值53向第二车辆20的驾驶员进行提示。因此,控制部21通过将从定位部24获取到的位置信息、与预先存储在存储部22中且示出道路Rx的位置的地图信息进行对照,而判定第二车辆20当前是否行驶于道路Rx。控制部21例如在第二车辆20到达能够看到道路Rx的指示牌Sx的地点时,将统计值53向第二车辆20的驾驶员进行提示。
控制部21也可以在第二车辆20行驶于道路Rx之前,将统计值53向第二车辆20的驾驶员进行提示。在此情况下,控制部21通过将从定位部24获取到的位置信息与地图信息进行对照,而预测第二车辆20今后是否会行驶于道路Rx。或者,如果通过导航功能设定了第二车辆20的行驶路线,则控制部21通过判定该路线中是否包含道路Rx,而预测第二车辆20今后是否会行驶于道路Rx。
如上所述,在本实施方式中,信息提供装置42的控制部31在由至少一台第一车辆10拍摄到的第一图像51中检测窜出道路Rx的动物,获取检测结果的统计值53。信息提供装置42的通信部33被控制部31控制,提供统计值53以用于向第二车辆20的驾驶员提示。在由至少一台第一车辆10拍摄到的第一图像51中检测出窜出道路Rx的动物的情况下,驾驶辅助装置43的控制部21获取检测结果的统计值53,将获取到的统计值53向第二车辆20的驾驶员进行提示。从而,根据本实施方式,对于道路Rx,能够使第二车辆20的驾驶员获得动物可能窜出的真实感受。其结果是,驾驶员的注意力提升,能够进行更安全的驾驶。
所检测的对象只要是有可能进入道路的对象即可,并不限于动物,也可以是落石等物体、或者儿童或老人等。在任意一种情况下,信息提供装置42的控制部31均获取检测结果的统计值53。驾驶辅助装置43的控制部21获取检测结果的统计值53,将获取到的统计值53向第二车辆20的驾驶员进行提示。由此,对于对象可能进入的道路,能够使第二车辆20的驾驶员获得对象可能进入的真实感受。
在本实施方式中,特别是在道路Rx上设置有告知动物可能窜出的指示牌Sx的情况下,信息提供装置42的控制部31获取统计值53。特别是在道路Rx上设置有指示牌Sx的情况下,驾驶辅助装置43的控制部21获取统计值53,将获取到的统计值53向第二车辆20的驾驶员进行提示。由此,能够给予驾驶员仅观看指示牌Sx无法获得的、动物可能窜出的真实感受。
如果所检测的对象包含落石,那么,在道路Ry上设置有告知有可能存在落石的指示牌Sy的情况下,信息提供装置42的控制部31获取统计值53。在道路Ry上设置有指示牌Sy的情况下,驾驶辅助装置43的控制部21获取统计值53,将获取到的统计值53向第二车辆20的驾驶员进行提示。由此,能够给予驾驶员仅观看指示牌Sy无法获得的、可能发生落石的真实感受。
如果所检测的对象包含儿童,那么,在道路Rz上设置有告知存在学校、幼儿园或托儿所的指示牌Sz的情况下,信息提供装置42的控制部31获取统计值53。在道路Rz上设置有指示牌Sz的情况下,驾驶辅助装置43的控制部21获取统计值53,将获取到的统计值53向第二车辆20的驾驶员进行提示。由此,能够给予驾驶员仅观看指示牌Sz无法获得的、儿童可能窜出的真实感受。
在第二车辆20处于完全自动驾驶模式时,驾驶辅助装置43的控制部21可以不将统计值53向第二车辆20的驾驶员进行提示。
作为统计值53,可以区分统计方法、动物等对象的种类、对象进入道路的时间带或其他条件而获取及提示,为了不会妨碍安全驾驶,可以适度调整信息量。
本发明并不被上述实施方式所限定。例如,可以将框图中记载的多个块进行整合,或将一个块进行分割。流程图中记载的多个步骤也可以不基于描述以时间序列执行,而是与执行各步骤的装置的处理能力相应地、或根据需要而并行执行或以其它顺序执行。另外,可以在不脱离本发明主旨的范围内进行变更。

Claims (5)

1.一种驾驶辅助装置,其具备控制部,所述控制部在从车辆作为第一图像拍摄到的动态图像的一系列的帧中出现进入道路的动物的情况下,从所述一系列的帧中选择一个以上的帧,并将所选择的一个以上的帧加工,作为第二图像而存储,将存储的第二图像向驾驶员提示,
在所述道路上设置有告知动物可能窜出的指示牌的情况下,所述控制部在所述车辆到达能够看到所述道路的所述指示牌的地点时,提示所述第二图像。
2.根据权利要求1所述的驾驶辅助装置,其中,
在所述车辆在拍摄所述第一图像时之外的其他时点在所述道路行驶之时,所述控制部将所述第二图像向所述车辆的驾驶员提示。
3.一种车辆,具备:
权利要求1或2所述的驾驶辅助装置;以及
输出部,其被所述控制部控制而显示所述第二图像。
4.一种驾驶辅助系统,具备:
信息提供装置,其具备:控制部,所述控制部在从车辆作为第一图像拍摄到的动态图像的一系列的帧中出现进入道路的动物的情况下,从所述一系列的帧中选择一个以上的帧,并将所选择的一个以上的帧加工,作为第二图像而存储;通信部,所述通信部从所述控制部输入通过所述控制部存储的第二图像,将该第二图像向驾驶辅助装置发送,所述驾驶辅助装置将该第二图像向驾驶员提示;以及
驾驶辅助装置,其从所述信息提供装置获取所述第二图像,将所述第二图像向所述驾驶员提示,
在所述道路上设置有告知动物可能窜出的指示牌的情况下,所述控制部获取所述第二图像,
所述驾驶辅助装置在所述驾驶员所驾驶的车辆到达能够看到所述道路的所述指示牌的地点时,提示所述第二图像。
5.一种驾驶辅助方法,其中,
摄像部从车辆作为第一图像拍摄动态图像;
控制部在由所述摄像部拍摄到的第一图像的一系列的帧中出现进入道路的动物的情况下,从所述一系列的帧中选择一个以上的帧;
所述控制部将所选择的一个以上的帧加工,作为第二图像而存储;
在所述道路上设置有告知动物可能窜出的指示牌的情况下,在所述驾驶员所驾驶的车辆到达能够看到所述道路的所述指示牌的地点时,输出部将通过所述控制部存储的第二图像向所述驾驶员显示。
CN201911237095.8A 2018-12-21 2019-12-05 驾驶辅助装置、车辆、信息提供装置、驾驶辅助系统及驾驶辅助方法 Active CN111422199B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-240114 2018-12-21
JP2018240114A JP7293648B2 (ja) 2018-12-21 2018-12-21 運転支援装置、車両、運転支援システム、及び運転支援方法

Publications (2)

Publication Number Publication Date
CN111422199A CN111422199A (zh) 2020-07-17
CN111422199B true CN111422199B (zh) 2023-04-18

Family

ID=71098591

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911237095.8A Active CN111422199B (zh) 2018-12-21 2019-12-05 驾驶辅助装置、车辆、信息提供装置、驾驶辅助系统及驾驶辅助方法

Country Status (3)

Country Link
US (1) US11270136B2 (zh)
JP (1) JP7293648B2 (zh)
CN (1) CN111422199B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7205444B2 (ja) 2019-11-13 2023-01-17 トヨタ自動車株式会社 運転支援装置
JP7279685B2 (ja) 2020-04-23 2023-05-23 トヨタ自動車株式会社 情報処理システム
JP7302554B2 (ja) 2020-09-03 2023-07-04 トヨタ自動車株式会社 立ち乗り式車両

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1652128B1 (en) * 2003-07-07 2014-05-14 Insurance Services Office, Inc. Traffic information system
MX2007008283A (es) 2005-01-06 2007-12-05 Alan Shulman Sistema de navegacion e inspeccion.
JP4943257B2 (ja) 2007-07-23 2012-05-30 パイオニア株式会社 情報表示装置、ナビゲーション装置、情報表示方法、情報表示プログラムおよび記録媒体
JP2009204570A (ja) 2008-02-29 2009-09-10 Aisin Aw Co Ltd 野生動物対応ナビゲーションシステム
JP4988781B2 (ja) 2009-02-24 2012-08-01 本田技研工業株式会社 車両の周辺監視装置
US20120242505A1 (en) * 2010-03-16 2012-09-27 Takashi Maeda Road-vehicle cooperative driving safety support device
DE102011101246A1 (de) * 2011-05-11 2012-11-15 Conti Temic Microelectronic Gmbh Redudante objektdetektion für fahrerassistenzsysteme
JP5547160B2 (ja) 2011-10-27 2014-07-09 本田技研工業株式会社 車両周辺監視装置
JP2013114365A (ja) 2011-11-28 2013-06-10 Mazda Motor Corp 安全運転支援情報配信システム
JP5910450B2 (ja) 2012-10-03 2016-04-27 株式会社デンソー 車両用ナビゲーションシステム
US20150367859A1 (en) * 2012-12-21 2015-12-24 Harman Becker Automotive Systems Gmbh Input device for a motor vehicle
JP2014154005A (ja) 2013-02-12 2014-08-25 Fujifilm Corp 危険情報提供方法、装置、及びプログラム
CN104118380B (zh) * 2013-04-26 2017-11-24 富泰华工业(深圳)有限公司 行车侦测系统及方法
US10210761B2 (en) * 2013-09-30 2019-02-19 Sackett Solutions & Innovations, LLC Driving assistance systems and methods
JP6203281B2 (ja) * 2013-11-12 2017-09-27 三菱電機株式会社 運転支援画像生成装置、運転支援画像表示装置、運転支援画像表示システム、及び運転支援画像生成プログラム
US10061994B2 (en) * 2013-11-12 2018-08-28 Mitsubishi Electric Corporation Driving-support-image generation device, driving-support-image display device, driving-support-image display system, and driving-support-image generation program
US9403482B2 (en) 2013-11-22 2016-08-02 At&T Intellectual Property I, L.P. Enhanced view for connected cars
JP6142784B2 (ja) * 2013-11-27 2017-06-07 株式会社デンソー 運転支援装置
JP6200333B2 (ja) 2014-01-16 2017-09-20 本田技研工業株式会社 道路標識認識装置および道路標識認識方法
JP6295924B2 (ja) * 2014-03-18 2018-03-20 株式会社デンソー 車両用報知制御装置、及び車両用報知制御システム
EP3125210A4 (en) * 2014-03-27 2018-06-13 Mitsubishi Electric Corporation Driving support information generation system, driving support information provision device, driving support information generation method, and driving support information generation program
US9443163B2 (en) * 2014-05-14 2016-09-13 Mobileye Vision Technologies Ltd. Systems and methods for curb detection and pedestrian hazard assessment
JP6731135B2 (ja) * 2014-05-30 2020-07-29 パナソニックセミコンダクターソリューションズ株式会社 センシングシステム及び運転支援システム
US9412276B2 (en) * 2014-07-18 2016-08-09 Tsun-Huang Lin Following distance reminding device and method thereof
US9904289B1 (en) * 2015-01-20 2018-02-27 State Mutual Automobile Insurance Company Facilitating safer vehicle travel utilizing telematics data
JP6558734B2 (ja) * 2015-04-21 2019-08-14 パナソニックIpマネジメント株式会社 運転支援方法およびそれを利用した運転支援装置、運転制御装置、車両、運転支援プログラム
JP6481520B2 (ja) * 2015-06-05 2019-03-13 トヨタ自動車株式会社 車両の衝突回避支援装置
JP5957745B1 (ja) * 2015-07-31 2016-07-27 パナソニックIpマネジメント株式会社 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両
JP6524922B2 (ja) * 2016-01-12 2019-06-05 株式会社デンソー 運転支援装置、運転支援方法
US20170205247A1 (en) * 2016-01-19 2017-07-20 Honeywell International Inc. Traffic visualization system
KR20170099188A (ko) * 2016-02-23 2017-08-31 엘지전자 주식회사 차량 운전 보조장치 및 이를 포함하는 차량
CN107179767B (zh) * 2016-03-10 2021-10-08 松下电器(美国)知识产权公司 驾驶控制装置、驾驶控制方法以及非瞬时性记录介质
DE112016006745T5 (de) * 2016-04-15 2018-12-27 Honda Motor Co., Ltd. Fahrzeugsteuersystem, Fahrzeugsteuerverfahren und Fahrzeugsteuerprogramm
US10640117B2 (en) * 2016-08-17 2020-05-05 Allstate Insurance Company Driving cues and coaching
KR101859045B1 (ko) * 2016-11-02 2018-05-17 엘지전자 주식회사 차량용 운전 보조 장치 및 차량
CN206734295U (zh) * 2016-12-21 2017-12-12 驭势科技(北京)有限公司 一种用于探测车辆周围目标的探测系统以及其应用
CN108510771A (zh) * 2017-02-27 2018-09-07 奥迪股份公司 驾驶辅助系统及包括该驾驶辅助系统的车辆
US10819919B2 (en) * 2017-06-05 2020-10-27 Adasky, Ltd. Shutterless far infrared (FIR) camera for automotive safety and driving systems
CN107392092B (zh) * 2017-06-13 2019-10-18 中国地质大学(武汉) 一种基于v2v的智能车辆前方道路环境透视感知方法
US20190126831A1 (en) * 2017-10-31 2019-05-02 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Irms ar object detection and classification
KR102007228B1 (ko) * 2017-11-10 2019-08-05 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
EP3740737A1 (en) * 2018-04-03 2020-11-25 Mobileye Vision Technologies Ltd. Systems and methods for determining navigational parameters
US10696257B2 (en) * 2018-07-17 2020-06-30 Denso International America, Inc. Automatic crowd sensing and reporting system for road incidents
US10475338B1 (en) * 2018-09-27 2019-11-12 Melodie Noel Monitoring and reporting traffic information
US10836313B2 (en) * 2018-11-28 2020-11-17 Valeo Comfort And Driving Assistance Mixed reality view for enhancing pedestrian safety

Also Published As

Publication number Publication date
US11270136B2 (en) 2022-03-08
JP7293648B2 (ja) 2023-06-20
JP2020102030A (ja) 2020-07-02
US20200202146A1 (en) 2020-06-25
CN111422199A (zh) 2020-07-17

Similar Documents

Publication Publication Date Title
JP6494719B2 (ja) 交通信号マップ作成及び検出
CN111422199B (zh) 驾驶辅助装置、车辆、信息提供装置、驾驶辅助系统及驾驶辅助方法
US10410427B2 (en) Three dimensional graphical overlays for a three dimensional heads-up display unit of a vehicle
CN110858445B (zh) 信息系统、信息处理方法以及非临时性存储介质
CN111443882B (zh) 信息处理装置、信息处理系统、以及信息处理方法
WO2021147301A1 (en) System, device and method of identifying and updating the operational design domain of an autonomous vehicle
US9709414B2 (en) Personalized suggestion of automated driving features
US11079497B2 (en) Vehicle localization based on neural network
US20210323577A1 (en) Methods and systems for managing an automated driving system of a vehicle
US20200273134A1 (en) Operation assistance apparatus and vehicle
EP3859281A1 (en) Apparatus and method for collecting data for map generation
KR102385191B1 (ko) 위험차량 실시간 추적 시스템 및 추적 방법
JP2019074862A (ja) 推奨運転出力装置、推奨運転出力システム、及び推奨運転出力方法
CN111242668A (zh) 信息处理装置、信息处理方法以及非临时性存储介质
JP7375659B2 (ja) 情報処理装置、車両、情報処理システム、プログラム及び情報処理方法
JP7159851B2 (ja) 運転支援装置、車両、情報提供装置、運転支援システム、及び運転支援方法
KR102539202B1 (ko) 알림 정보 제공 시스템 및 그 방법
JP7119984B2 (ja) 運転支援装置、車両、情報提供装置、運転支援システム、及び運転支援方法
JP6916438B2 (ja) 動線特定システム、サーバ装置、端末装置、動線特定方法、及び動線特定プログラム
JP2022023558A (ja) 運転制御装置、運転制御方法及びプログラム
JP2020102032A (ja) 情報提供装置、車両、運転支援システム、地図生成装置、運転支援装置、及び運転支援方法
CN117516564A (zh) 控制装置、存储介质及数据生成方法
CN117931962A (zh) 车道级事件提醒的方法和装置
CN115512569A (zh) 警告控制装置、移动体、警告控制方法和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant