CN110023783A - 车辆周边信息获取装置以及车辆 - Google Patents

车辆周边信息获取装置以及车辆 Download PDF

Info

Publication number
CN110023783A
CN110023783A CN201780072736.1A CN201780072736A CN110023783A CN 110023783 A CN110023783 A CN 110023783A CN 201780072736 A CN201780072736 A CN 201780072736A CN 110023783 A CN110023783 A CN 110023783A
Authority
CN
China
Prior art keywords
information
vehicle
processing unit
processing
test section
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780072736.1A
Other languages
English (en)
Other versions
CN110023783B (zh
Inventor
王代涵
三浦弘
藤田进太郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from PCT/JP2016/086225 external-priority patent/WO2018105037A1/ja
Priority claimed from JP2016239731A external-priority patent/JP6490044B2/ja
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of CN110023783A publication Critical patent/CN110023783A/zh
Application granted granted Critical
Publication of CN110023783B publication Critical patent/CN110023783B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10—Path keeping
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/865—Combination of radar systems with lidar systems
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867—Combination of radar systems with cameras
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/87—Combinations of systems using electromagnetic waves other than radio waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/93185—Controlling the brakes
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9319—Controlling the accelerator
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9323—Alternative operation using light waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327—Sensor installation details
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327—Sensor installation details
    • G01S2013/93271—Sensor installation details in the front of the vehicles
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327—Sensor installation details
    • G01S2013/93272—Sensor installation details in the back of the vehicles
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327—Sensor installation details
    • G01S2013/93275—Sensor installation details in the bumper area
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/28—Details of pulse systems
    • G01S7/285—Receivers
    • G01S7/295—Means for transforming co-ordinates or for evaluating data, e.g. using computers
    • G01S7/2955—Means for determining the position of the radar coordinate system for evaluating the position data of the target in another coordinate system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261—Obstacle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)

Abstract

车辆周边信息获取装置具有通过电波来检测车辆的周围的物体的雷达检测部、通过光来检测车辆的周围的物体的光学雷达检测部、以及对车辆的周围进行拍摄并根据该拍摄到的图像来检测物体的图像检测部。车辆周边信息获取装置具备生成对雷达检测部的检测结果和图像检测部所形成的检测结果进行合成而得的目标信息的第一处理部、生成对光学雷达检测部的检测结果和图像检测部所形成的检测结果进行合成而得的目标信息的第二处理部、对第一处理部中生成的目标信息和第二处理部中生成的目标信息进行整合而生成车辆的周围的目标信息的第三处理部。

Description

车辆周边信息获取装置以及车辆
技术领域
本发明涉及车辆周边信息获取装置以及车辆。
背景技术
为了进行车辆的自动驾驶，作为前提需要获取车辆周边的信息。作为获取车辆周边的信息的检测部的构成，在专利文献1中公开了通过摄像机获取车辆周边的信息的技术，在专利文献2中公开了通过激光器获取车辆周边的信息的技术。
现有专利文献
专利文献
专利文献1：日本特开2000-172982号公报
专利文献2：日本特开平7-248382号公报
发明内容
发明所要解决的问题
由于获取车辆周边的信息的检测部的特性因检测部的种类而异，因此例如由于车辆的行驶状态、周边的道路构造物的状态、降雨、降雪、浓雾等气象条件等的影响，会发生无法获取到所希望的信息的情况。
本发明的目的在于提供高精度地获取车辆周围的信息的技术。
用于解决问题的方法
根据本发明的一个方式的车辆周边信息获取装置，具有：
雷达检测部，其通过电波来检测车辆的周围的物体；
光学雷达检测部，其通过光来检测所述车辆的周围的物体；以及
图像检测部，其对所述车辆的周围进行拍摄并根据该拍摄到的图像来检测物体，
所述车辆周边信息获取装置的特征在于，具备：
第一处理部，其生成对所述雷达检测部的检测结果和所述图像检测部所形成的检测结果进行合成而得的目标信息；
第二处理部，其生成对所述光学雷达检测部的检测结果和所述图像检测部所形成的检测结果进行合成而得的目标信息；
第三处理部，其对所述第一处理部中生成的目标信息和所述第二处理部中生成的目标信息进行整合而生成所述车辆的周围的目标信息。
发明效果
根据本发明，能够高精度地获取车辆的周围的信息。
附图说明
图1是实施方式所涉及的具有车辆周边信息获取装置的车辆用控制装置的框图。
图2是对光学雷达检测部的配置例进行说明的图。
图3是表示光学雷达检测部、雷达检测部以及摄像机的检测范围的图。
图4是表示ECU20(第三处理部)所进行的处理的框图。
图5是说明旁支信息的图。
图6是表示ECU20(第三处理部)中的处理流程的框图。
图7是举例示出局部地图的图。
具体实施方式
图1是本发明的一个实施方式所涉及的车辆用控制装置的框图，对车辆1进行控制。在图1中，以俯视图和侧视图示出了车辆1的概要。车辆1作为一个例子是轿车型的四轮乘用车。车辆用控制装置作为装置内部的构成而具有用于获取车辆1的周边信息的车辆周边信息获取装置。本实施方式的车辆周边信息获取装置使用通过电波对车辆1的周围的物体进行检测的检测单元(雷达检测部)、以及通过光对车辆1的周围的物体进行检测的检测单元(光学雷达检测部)来获取车辆1的周边信息。
图1的车辆用控制装置包括控制单元2。控制单元2包括通过车内网络而连接为可通信的多个ECU20～ECU29。各ECU包括以CPU为代表的处理器、半导体存储器等存储设备、与外部设备的接口等。在存储设备中存储有处理器所执行的程序、处理器在处理中使用的数据等。各ECU可具备多个处理器、存储设备以及接口等。
以下，对各ECU20～ECU29所负责的功能等进行说明。此外，关于ECU的数量、所负责的功能，可以对车辆1进行适当设计，可以比本实施方式更细化或者整合。
ECU20执行与车辆1的自动驾驶有关的控制。在自动驾驶中，对车辆1的转向和加速减速中的至少任一项进行自动控制。为了执行自动控制，ECU20对之后说明的ECU22中生成的信息和ECU23中生成的信息进行整合而生成车辆1的周围的信息。ECU20基于生成的信息来识别地图信息中的车辆1的位置，基于识别结果进行如何控制车辆1的行动计划，并基于行动计划来进行车辆1的自动控制。
ECU21对电动动力转向装置3进行控制。电动动力转向装置3包括根据驾驶员对方向盘31的驾驶操作(转向操作)而使前轮转向的机构。另外，电动动力转向装置3包括发挥用于辅助转向操作或者使前轮自动转向的驱动力的马达、对转向角进行检测的传感器等。在车辆1的驾驶状态为自动驾驶的情况下，ECU21根据来自ECU20的指示来自动控制电动动力转向装置3，并控制车辆1的行进方向。
ECU22以及ECU 23进行对检测车辆周围状况的检测单元41-1、41-2、42、43的控制以及检测结果的信息处理。检测单元41-1、41-2是对车辆1的周围进行拍摄，并根据拍摄的图像来检测物体的图像检测部(摄像机)。图像检测部具有配置在车辆1中的检测单元43(雷达检测部)以及ECU23(第一处理部)、经由第一通信线142连接的第一图像检测部41-2(摄像机)、检测单元42(光学雷达检测部)以及ECU22(第二处理部)、经由第二通信线141连接的第二图像检测部41-1(摄像机)。以下，有时将各图像检测部表述为摄像机41-1、41-2。
在本实施方式的情况中，车辆1的车顶前部(前窗的上部)设有两个摄像机41-1、41-22。通过对摄像机41-1、41-2拍摄到的图像进行解析，能够对车辆1的周边的目标的轮郭、道路上的车道的区划线(白线等)进行提取。此外，在图1中示出了在车辆1的车顶前部设有两个摄像机41-1、41-2的例子，但本实施方式并不限定于该例子，也可以为了拍摄车辆1的左右侧面以及后方而追加配置摄像机。
检测单元42(光学雷达检测部)是光学雷达(激光雷达)(以下，有时表述为光学雷达42)，通过光对车辆1的周围的目标进行检测、对与目标之间的距离进行测距。在本实施方式的情况下，设有五个光学雷达42，在车辆1的前部的各角部分别设有一个，在后部中央设有一个，在后部的各侧面分别设有一个。检测单元43(雷达检测部)是毫米波雷达(以下，有时表述为雷达43)，通过电波对车辆1的周围的目标进行检测、对与目标之间的距离进行测距。在本实施方式的情况下，设有五个雷达43，在车辆1的前部中央设有一个，在前部的各角部分别设有一个，在后部的各角部分别设有一个。
在本实施方式中，车辆周边信息获取装置具有五个检测单元43(雷达检测部)和五个检测单元42(光学雷达检测部)，车辆1中的雷达检测部以及光学雷达检测部的相对配置关系如下。即，就检测单元43(雷达检测部)而言，在车辆1的前部的各角部以及后部的各角部这四个角中分别配置有一个，同时在车辆1的前部中央配置有一个。另外，就检测单元42(光学雷达检测部)而言，在车辆1的前部的各角部且比雷达检测部的配置位置更靠车宽方向内侧的位置分别配置有一个，在车辆1的后部的各侧面且比雷达检测部的配置位置更靠车宽方向外侧的位置分别配置有一个，在车辆1的后部中央配置有一个。
图2是对检测单元42(光学雷达检测部)的配置例进行说明的图。以车辆1的前部角部的检测单元42(光学雷达检测部)的配置位置为基准，在车辆1的静态状态(车辆1中没有装载物的空载状态)下，后部各侧面以及后部中央的检测单元42(光学雷达检测部)的配置位置设定为比基准的配置位置高出规定量。在车辆1装载有货物的情况下，悬架的位移量存在车辆1的后侧大于车辆1的前侧的倾向。因此，在车辆1的静态状态下，通过预先在车辆1的前后方向上对检测单元42(光学雷达检测部)的配置位置设置规定量的差值，由此，即使是因车辆1行驶时所装载的载荷而使后侧的悬架的位移量大于前侧的悬架的位移量的情况下，也能够将各个检测单元42(光学雷达检测部)设为相对于车辆1而配置于大致相同高度位置的状态。
考虑到车辆1行驶时的装载状态而将检测单元42(光学雷达检测部)的配置位置配置于相对于车辆1的大致相同高度的位置，从而在ECU22中能够简化基于配置高度的检测结果的校正处理，能够更高速地进行用于对多个检测单元42(光学雷达检测部)的检测信息进行处理的运算处理。
另外，在图2中，配置于车辆1的前部中央处的检测单元43(雷达检测部)例如被配置在前格栅徽标的里侧，在车辆1前部的各角部以及后部的各角部这四个角中分别配置有一个的检测单元43(雷达检测部)例如被配置在保险杠内部。如图2所示，五个检测单元43(雷达检测部)相对于车辆1配置在至少比高度H2的位置靠上方的位置，五个检测单元42(光学雷达检测部)配置在比高度H2低的高度H1的位置。即，在车辆1前部的各角部以及后部的各侧面以及后部中央，检测单元42(光学雷达检测部)配置在比检测单元43(雷达检测部)的配置位置低的位置。
通过将检测单元42(光学雷达检测部)配置在比检测单元43(雷达检测部)相对地靠下侧的位置，例如即使在车辆1的四个角中在检测单元43(雷达检测部)上附着有电波透不过的物体，由于其与检测单元42(光学雷达检测部)的配置位置在车辆1的上下方向、前后方向以及车宽方向上并不重叠，因此，能够确保规定的检测精度。
图3是示意性地表示五个检测单元42(光学雷达检测部)、五个检测单元43(雷达检测部)以及两个摄像机41-1、41-2的检测范围的图。检测范围43-1表示配置在车辆1的前部中央的检测单元43(雷达检测部)的检测范围。检测范围43-2表示配置在车辆1的前部各角部的检测单元43(雷达检测部)的检测范围。另外，检测范围43-3表示配置在车辆1的后部各角部的检测单元43(雷达检测部)的检测范围。
五个检测单元43(雷达检测部)的检测范围(检测距离特性)在车辆1的前部中央及前部各角部以及后部各角部各不相同。五个检测单元43中的、配置在车辆1的前部中央的检测单元43(雷达检测部)的检测距离设定为长于配置在车辆1的前部各角部以及后部各角部这四个角中的检测单元43(雷达检测部)的检测距离。通过将配置在前部中央的检测单元43(雷达检测部)的检测距离设定得比其他检测单元43的检测距离长，从而能够跨越更长的距离范围来检测位于车辆1前方的目标。
在图3中，检测范围42-1表示配置在车辆1的前部各角部的检测单元42(光学雷达检测部)的检测范围。另外，检测范围42-2表示配置在车辆1的后部各侧面的检测单元42(光学雷达检测部)的检测范围。另外，检测范围42-3表示配置在车辆1的后部中央的检测单元42(光学雷达检测部)的检测范围。五个检测单元42(光学雷达检测部)的检测范围大致相等。
配置在车辆1的前部各角部的检测单元42(光学雷达检测部)的传感器中心(检测中心)分别被配置为相对于车辆1的前方(车辆的行进方向)偏移角度θ1的角度，检测单元42(光学雷达检测部)的检测范围在车辆1的前方中央部重叠。通过将两个检测单元42配置为使前部各角部的检测单元42(光学雷达检测部)所形成的检测范围在车辆1的前方中央部重叠，从而不需要在车辆1的前部中央配置检测单元42(光学雷达检测部)，能够以更低价的构成来获取车辆周边信息。
在本实施方式的车辆周边信息获取装置中，在车辆1的后部中央配置有一个检测单元42(光学雷达检测部)。通常，在车辆后端的两侧配置有消声器等热源，但如果是在车辆1的后部中央，则检测单元42(光学雷达检测部)能够以减少消声器等热源的影响的状态来获取车辆周边信息。
另外，在车辆1的后部各侧面，在比雷达检测部的配置位置靠车宽方向外侧的位置分别配置有一个检测单元42(光学雷达检测部)。配置在车辆1的后部各侧面的检测单元42(光学雷达检测部)的传感器中心(检测中心)分别被配置为相对于车辆1的行进方向偏移角度θ2(＞θ1)的角度，配置在后部各侧面的检测单元42(光学雷达检测部)的检测范围与配置在车辆1的后部中央的检测单元42(光学雷达检测部)重叠。
如从上方观察图2的车辆1的俯视图所示，在本实施方式中，车辆1的后部各侧面的检测单元42(光学雷达检测部)配置在车宽变得比车辆1的整个宽度W1窄的位置(图1的例子中为车宽W2)。检测单元42(光学雷达检测部)的检测面被配置为不从车辆1的车身线突出而与车身形状相吻合。如此，通过配置后部各侧面的检测单元42，例如即使在车辆1的侧面存在障碍物的情况下，也能在保护检测单元42的检测面的同时，在车辆的侧面以及后方确保更广的检测范围来获取车辆周边信息。
如此，通过将检测特性(检测范围)不同的检测单元42、43的位置进行错开配置，从而能以最少的传感器数量无死角地获取车辆1的周围的信息，与增加雷达检测部的数量的情况相比，能够以更低的价格且更高的精度来获取车辆1的周边的信息。
此外，在上述实施方式的说明中，针对车辆1向前方行驶的情况下的自动驾驶说明了检测单元42、43、摄像机41-1、41-2的配置例。在车辆向后方行驶的情况下的自动驾驶中，将检测单元42、43、摄像机41-1、41-2的配置设为与图1所示的配置例相反的配置即可。可以将车辆1进行向前方行驶的情况下或向后方行驶的情况下的自动驾驶时的检测单元42、43、摄像机41-1、41-2的配置总结如下。
即，就检测单元43(雷达检测部)而言，在车辆的四个角分别配置有一个，同时在车辆的一侧的中央配置有一个。另外，就检测单元42(光学雷达检测部)而言，在车辆的一侧的各角部在比检测单元43(雷达检测部)的配置位置靠车宽方向内侧的位置分别配置有一个，在车辆的另一侧的各侧面在比检测单元43(雷达检测部)的配置位置靠车宽方向外侧的位置分别配置有一个，在车辆的另一侧的中央配置有一个。此处，在车辆的一侧的各角部及另一侧的各侧面以及另一侧的中央，各检测单元42(光学雷达检测部)分别配置在比检测单元43(雷达检测部)的配置位置低的位置。图像检测部在车辆的车顶中配置于该车辆的一侧，根据拍摄车辆的周围而得的图像对物体进行检测。配置在车辆的一侧的中央的检测单元43(雷达检测部)的检测距离设定为比配置在车辆的一侧的各角部以及另一侧的各角部这四个角的检测单元43(雷达检测部)的检测距离长。
回到图1进行说明，ECU23进行对摄像机41-2和各雷达43的控制以及检测结果的信息处理。即，ECU23(第一处理部)生成对各检测单元43(雷达检测部)的检测结果和图像检测部(摄像机41-2)所形成的检测结果进行合成而得的目标信息。
另外，ECU22进行对摄像机41-1和各光学雷达42的控制以及检测结果的信息处理。即，ECU22(第二处理部)生成对各检测单元42(光学雷达检测部)的检测结果和图像检测部(摄像机41-1)所形成的检测结果进行合成而得的目标信息。ECU23(第一处理部)中生成的目标信息和ECU22(第二处理部)中生成的目标信息被输入到ECU20(第三处理部)。ECU20(第三处理部)对ECU23(第一处理部)中生成的目标信息和ECU22(第二处理部)中生成的目标信息进行整合而生成车辆1的周围的目标信息。通过具备两组检测车辆的周围状况的装置，能够提高检测结果的可靠性，另外通过具备摄像机、光学雷达、雷达这样的种类各异的检测单元，能够多方面地进行车辆的周边环境的解析。
ECU24进行对陀螺仪传感器5、GPS传感器24b、通信装置24c的控制以及检测结果或通信结果的信息处理。陀螺仪传感器5检测车辆1的旋转运动。根据陀螺仪传感器5的检测结果、车轮速度等，能够判断车辆1的行进路线。GPS传感器24b检测车辆1的当前位置。通信装置24c与提供地图信息、交通信息的服务器进行无线通信，并获取这些信息。ECU24能够访问构建在存储设备中的地图信息的数据库24a，ECU24进行从当前所在地到目的地的路径探索等。
ECU25具备车与车之间通信用的通信装置25a。通信装置25a与周边的其他车辆进行无线通信，进行车辆间的信息交换。
ECU26控制动力装置6。动力装置6是输出使车辆1的驱动轮旋转的驱动力的机构，例如包括发动机和变速器。ECU26例如根据由设置在油门踏板7A上的操作检测传感器7a所检测到的驾驶员的驾驶操作(油门操作或者加速操作)而对发动机的输出进行控制，或者基于车速传感器7c所检测到的车速等信息而切换变速器的变速挡。在车辆1的驾驶状态为自动驾驶的情况下，ECU26根据来自ECU20的指示而对动力装置6进行自动控制，并控制车辆1的加速减速。
ECU27对包括方向指示器8的照明器件(前照灯、尾灯等)进行控制。在图1的例子的情况下，方向指示器8设于车辆1的前部、车门镜以及后部。
ECU28对输入输出装置9进行控制。输入输出装置9进行对驾驶员的信息输出和对来自驾驶员的信息输入的接受。语音输出装置91通过语音对驾驶员报告信息。显示装置92通过图像的显示对驾驶员报告信息。显示装置92例如配置在驾驶席的正面并构成仪表盘等。此外，在此举例示出了语音和显示，但也可以通过振动、光来报告信息。另外，可以组合语音、显示、振动或者光中的多个来报告信息。进一步，可以根据须报告的信息的等级(例如紧急度)来改变组合，或者改变报告方式。
输入装置93是配置在驾驶员能够操作的位置而对车辆1进行指示的开关组，也可以包括语音输入装置。
ECU29控制制动装置10、驻车制动器(未图示)。制动装置10例如为盘式制动装置，设于车辆1的各车轮，通过对车轮的旋转施加阻力而使车辆1减速或停止。ECU29例如根据由设置在制动踏板7B上的操作检测传感器7b所检测到的驾驶员的驾驶操作(制动操作)而对制动装置10的动作进行控制。在车辆1的驾驶状态为自动驾驶的情况下，ECU29根据来自ECU20的指示而对制动装置10进行自动控制，并控制车辆1的减速以及停止。制动装置10、驻车制动器还能够为了维持车辆1的停止状态而进行动作。另外，在动力装置6的变速器具备驻车锁止机构的情况下，还能够为了维持车辆1的停止状态而使所述驻车锁止机构动作。
图4是表示ECU20(第三处理部)所进行的处理的框图。ECU20(第三处理部)经由通信线与ECU23(第一处理部)以及ECU22(第二处理部)连接，并进行从各ECU获取的目标信息的整合处理。在ECU23上连接有摄像机41-2、各雷达43，ECU23(第一处理部)生成对各检测单元43(雷达检测部)的检测结果和图像检测部(摄像机41-2)所形成的检测结果进行合成而得的目标信息。
各检测单元43(雷达检测部)例如对位于车辆1的周围的其他车辆与本车(车辆1)的相对速度的信息、道路的外壁、护栏、白线位置等静止物的提取信息进行检测，并输出到ECU23(第一处理部)。另外，摄像机41-2将存在于拍摄范围内的车辆、道路构造物的分类信息输出到ECU23(第一处理部)。ECU23(第一处理部)将对从各检测单元43(雷达检测部)输入的相对速度的信息、静止物的提取信息等、和从摄像机41-2输入的车辆、道路构造物的分类信息进行整合(合成)而得的信息生成为目标信息，并将所述目标信息输出到ECU20(第三处理部)。ECU23(第一处理部)输出的目标信息中例如包含检测到的物体的识别信息、表示检测到的物体的位置以及速度的信息、表示检测到的物体的种类的分类信息、与信息输出的时刻匹配有关的时机信息。
另外，在ECU22上连接有摄像机41-1和各光学雷达42，ECU22(第二处理部)生成对各检测单元42(光学雷达检测部)的检测结果和图像检测部(摄像机41-1)所形成的检测结果进行合成而得的目标信息。各检测单元42(光学雷达检测部)例如对位于车辆1的周围的其他车辆的位置、形状、速度等信息进行检测，并输出到ECU22(第二处理部)。另外，摄像机41-1将存在于拍摄范围内的车辆信息(例如分类、转向灯/制动灯状态、超车予测)输出到ECU22(第二处理部)。ECU22(第二处理部)生成对从各检测单元42(光学雷达检测部)输入的车辆的位置、形状、速度等信息等和从摄像机41-1输入的车辆信息进行整合(合成)而得的目标信息，并将所述目标信息输出到ECU20(第三处理部)。ECU22(第二处理部)输出的目标信息中包含例如检测到的物体的识别信息、表示检测到的物体的位置、形状、速度的信息、表示检测到的物体的种类的分类信息、与信息输出的时刻匹配有关的时机信息。
图5是对图像检测部(摄像机41-1)所输出的旁支信息进行说明的图。图像检测部(摄像机41-1)将在ECU22(第二处理部)中进行信息的整合的车辆信息(例如分类、转向灯/制动灯状态、超车予测)经由第二通信线141输出到ECU22(第二处理部)。另外，图像检测部(摄像机41-1)将在ECU22(第二处理部)的整合处理中不构成整合处理的对象的信息，例如车道、白线的位置、信号/标识的检测结果、坠落物的检测结果、与能够行驶的自由空间有关的区域信息(可行驶区域信息)、分流/合流点等的检测结果等信息作为旁支信息而输出。作为旁支信息的输出路径，例如可以由图像检测部(摄像机41-1)经由第三通信线(例如143-1)向ECU22(第二处理部)输出。
ECU22(第二处理部)对从各检测单元42(光学雷达检测部)输入的信息和从图像检测部(摄像机41-1)输入的车辆信息进行整合而成的目标信息的发送周期和从摄像机41-1输入的旁支信息的发送周期进行同步，并输出到ECU20(第三处理部)。在ECU22(第二处理部)中，通过从摄像机41-1分别获取车辆信息和旁支信息，从而能够降低用于生成目标信息的整合处理的负荷。另外，通过由ECU22(第二处理部)对目标信息和旁支信息进行同步并输出，从而能够在ECU20(第三处理部)中降低同步处理的负荷。
旁支信息的输出路径并不限定于上述例子，作为旁支信息的输出路径，图像检测部(摄像机41-1)例如可以经由第三通信线(例如143-2)将旁支信息输出到ECU20(第三处理部)。在该情况下，通过将不构成整合处理对象的信息作为旁支信息而从摄像机41-1直接输出到ECU20(第三处理部)，从而能够降低ECU22(第二处理部)中的目标信息和旁支信息的同步处理的负荷，能够进一步实现ECU22(第二处理部)中的整合处理的高速化。
回到图4进行说明，ECU20(第三处理部)为了在内部对ECU23(第一处理部)中生成的目标信息以及ECU22(第二处理部)中生成的目标信息进行管理而生成建立了关联的目标信息。ECU20(第三处理部)基于包含在从ECU23(第一处理部)以及ECU22(第二处理部)输入的各目标信息中的时机信息，进行用于同步各目标信息的位置校正，为了在内部管理所输入的各目标信息而整合(生成)建立了关联的目标信息。ECU20(第三处理部)通过这样的目标信息的整合处理，生成车辆1的周围的目标信息。在ECU20(第三处理部)所生成的目标信息中，包含以下信息中的至少任一项信息：例如ECU23(第一处理部)中生成的目标信息所包含的物体的识别信息以及ECU22(第二处理部)中生成的目标信息所包含的物体的识别信息、对第一处理部中生成的目标信息所包含的物体的识别信息以及第二处理部中生成的目标信息所包含的物体的识别信息建立了关联的物体的识别信息、表示建立了关联的物体的位置、形状、速度的信息、表示建立了关联的物体的种类的分类信息。
ECU20(第三处理部)通过内部缓冲器管理所生成的目标信息。例如，将新检测并生成的目标信息注册在内部缓冲器中。或者，对已经注册完毕的目标信息检查目标信息的变化，进行目标信息的状态推定和追踪。例如，即使目标被其他车辆遮蔽而临时呈检测不到的状态，也能够基于内部缓冲器中管理的目标信息来进行对检测不到的目标的状态推定和追踪。如本实施方式的构成这样，通过复合地使用摄像机、光学雷达检测部以及雷达检测部所形成的不同的三个种类的检测单元的检测结果，能够去除过度检测的信息。例如，即使在某一检测单元的检测中检测到了道路上的障碍物的状况下，当通过综合地解析三个种类的检测单元的检测结果而判断为非障碍物的情况下，ECU20(第三处理部)也能够通过执行障碍物去除逻辑而去除作为过度检测而得到的障碍物所对应的目标信息。由此，能够实现信息处理效率的提高，同时能够高精度地获取车辆的周围的信息。
另外，ECU20(第三处理部)能够对从ECU23(第一处理部)以及ECU22(第二处理部)中冗余地输出的信息进行相互比较，并判断检测结果中有无异常。例如，在从ECU23(第一处理部)以及ECU22(第二处理部)输出的信息中包含矛盾信息的情况下，ECU20(第三处理部)根据检测项目来决定优先的ECU。
例如，就与位置、形状有关的检测项目而言，检测单元42(光学雷达检测部)的检测特性优于检测单元43(雷达检测部)的检测特性，因此，ECU20(第三处理部)进行调整而使ECU22(第二处理部)的检测结果优先。或者，就与速度有关的检测项目而言，检测单元43(雷达检测部)的检测特性优于检测单元42(光学雷达检测部)的检测特性，因此，ECU20(第三处理部)进行调整而使ECU23(第一处理部)的检测结果优先。
ECU20(第三处理部)通过基于摄像机信息、各检测单元42(光学雷达检测部)、各检测单元43(雷达检测部)的检测结果的整合处理，将包含与车辆信息有关的位置、形状、速度、分类结果等的信息生成为目标信息。除此之外，ECU20(第三处理部)基于来自ECU23(第一处理部)以及ECU22(第二处理部)的信息而获取在道路上表示白线的位置的白线位置信息、在道路上表示标识位置的标识位置信息、表示车辆1能够行驶的区域的可行驶区域信息、以及作为检测单元41-1、41-2、42、43能够进行检测的性能极限的检测极限距离信息。
图6是表示ECU20(第三处理部)中的处理流程的框图。在S20-1中，ECU20(第三处理部)通过使用基于整合处理而生成的目标信息、白线位置信息、标识位置信息、可行驶区域信息、检测极限距离信息，从而获取表示车辆1与车辆周围的相对位置关系的外界识别信息。
在S20-2中，ECU20(第三处理部)作为地图信息获取部(MPU：Map PositioningUnit)而发挥功能，获取基于绝对坐标系的地图信息。例如，ECU20(第三处理部)能够经由GPS传感器24b、通信装置24c在规定的时机获取基于绝对坐标系的地图信息。
在S20-3中，ECU20(第三处理部)根据基于绝对坐标系的地图信息和基于相对坐标系的外界识别信息，进行地图上的自身位置的识别处理，输出对地图信息和外界识别信息进行组合而成的局部地图。图7是举例示出局部地图的图。在局部地图中，示出本车与位于周围的其他车辆的相对位置关系，用白线的位置、标识等的识别结果、行驶轨迹、地图信息来补足车道形状。ECU20(第三处理部)基于局部地图上的信息而生成行动计划(S20-4)。行动计划是指对用于实现自动驾驶的车辆1的行进方向、速度、位置等进行了规定的计划。ECU20(第三处理部)基于生成的行动计划来进行车辆控制。即，ECU20(第三处理部)以在规定的轨道上控制车辆1的方式来进行驱动控制，或者进行制动控制或转向控制(S20-5)。若由驾驶员指示了目的地和自动驾驶，则ECU20根据ECU24探索到的引导路径，朝向目的地而对车辆1的行驶进行自动控制。在自动控制时，ECU20(第三处理部)从ECU23(第一处理部)以及ECU22(第二处理部)中获取关于车辆1周边状况的信息，基于获取的信息而对ECU21、ECU26以及ECU 29进行指示，控制车辆1的转向、加速减速。在根据ECU23(第一处理部)以及ECU22(第二处理部)中的任意一者的输出都无法得到规定的检测结果的情况下，ECU20(第三处理部)能够进行旨在从自动驾驶控制的状态回到由驾驶员进行驾驶操作的报告。在无法得到驾驶员针对报告的响应的情况下，ECU20(第三处理部)能够进行使车辆成为停止状态或者减速状态的替代控制。
＜实施方式的总结＞
1、上述实施方式的车辆周边信息获取装置，具有：
雷达检测部(例如43)，其通过电波来检测车辆的周围的物体；
光学雷达检测部(例如42)，其通过光来检测所述车辆的周围的物体；以及
图像检测部(例如41-1、41-2)，其对所述车辆的周围进行拍摄并根据该拍摄到的图像来检测物体，
所述车辆周边信息获取装置的特征在于，具备：
第一处理部(例如23)，其生成对所述雷达检测部的检测结果和所述图像检测部所形成的检测结果进行合成而得的目标信息；
第二处理部(例如22)，其生成对所述光学雷达检测部的检测结果和所述图像检测部所形成的检测结果进行合成而得的目标信息；
第三处理部(例如20)，其对所述第一处理部中生成的目标信息和所述第二处理部中生成的目标信息进行整合而生成所述车辆的周围的目标信息。
根据该实施方式，能够高精度地获取车辆的周围的信息。通过复合地使用三个种类的检测单元的检测结果，能够去除过度检测的信息。由此，能够实现信息处理效率的提高，同时能够高精度地获取车辆的周围的信息。
2、上述实施方式的车辆周边信息获取装置，其特征在于，
在所述第一处理部(例如23)所生成的所述目标信息中，包含检测到的物体的识别信息、表示所述检测到的物体的位置以及速度的信息、表示所述检测到的物体的种类的分类信息、与信息输出的时刻匹配有关的时机信息，
在所述第二处理部(例如22)所生成的所述目标信息中，包含检测到的物体的识别信息、表示所述检测到的物体的位置、形状、速度的信息、表示所述检测到的物体的种类的分类信息、与信息输出的时刻匹配有关的时机信息，
所述第三处理部(例如20)为了在内部对所述第一处理部(例如23)中生成的目标信息以及所述第二处理部(例如22)中生成的目标信息进行管理而生成将它们建立了关联而成的所述目标信息。
根据该实施方式，能够高精度地获取车辆的周围的信息。通过复合性地使用三个种类的检测单元的检测结果，能够去除过度检测的信息。由此，能够实现信息处理效率的提高，同时能够高精度地获取车辆的周围的信息。
3、上述实施方式的车辆周边信息获取装置，其特征在于，
在所述第三处理部(例如20)所生成的所述目标信息中，包含以下信息中的至少任一项信息：
所述第一处理部(例如23)以及所述第二处理部(例如22)中生成的目标信息所包含的物体的识别信息；
对所述第一处理部(例如23)中生成的所述目标信息所包含的物体的识别信息和所述第二处理部(例如22)中生成的所述目标信息所包含的物体的识别信息建立了关联而成的物体的识别信息；
表示所述建立了关联的物体的位置、形状、速度的信息；以及
表示所述建立了关联的物体的种类的分类信息。
根据该实施方式，能够高精度地获取车辆的周围的信息。通过复合性地使用三个种类的检测单元的检测结果，能够去除过度检测的信息。由此，能够实现信息处理效率的提高，同时能够高精度地获取车辆的周围的信息。
4、上述实施方式的车辆周边信息获取装置，其特征在于，
所述图像检测部具有：
第一图像检测部(例如41-2)，其经由第一通信线而与配置在所述车辆中的所述雷达检测部以及所述第一处理部连接；以及
第二图像检测部(例如41-1)，其经由第二通信线而与配置在所述车辆中的所述光学雷达检测部以及所述第二处理部连接。
根据该实施方式，能够高精度地获取车辆的周围的信息。
5、上述实施方式的车辆周边信息获取装置，其特征在于，所述图像检测部的第二图像检测部(例如41-1)经由第三通信线(例如143)将检测结果的一部分作为旁支信息直接输出到所述第三处理部(例如20)。
根据该实施方式，通过将不构成整合处理对象的信息作为旁支信息而直接输出到ECU20(第三处理部)，能够降低ECU22(第二处理部)中的处理的负荷，能够进一步实现整合处理的高速化。
6、上述实施方式的车辆(例如1)，其特征在于，具备上述实施方式的车辆周边信息获取装置。根据该实施方式，能够提供将车辆周边信息获取装置所获取的车辆的周边信息反应到自动驾驶中的车辆。
本发明并不受限于上述实施方式，可以不脱离本发明的精神及范围地进行各种变更及变形。因此，为了公开本发明的范围，附上以下的权利要求。
本申请以2016年12月6日提交的国际申请PCT/JP2016/086225、2016年12月9日提交的日本专利申请日本特愿2016-239731为基础而主张优先权，并将其全部记载内容援引于此。

Claims (6)

1.一种车辆周边信息获取装置，具有：
雷达检测部，其通过电波来检测车辆的周围的物体；
光学雷达检测部，其通过光来检测所述车辆的周围的物体；以及
图像检测部，其对所述车辆的周围进行拍摄并根据该拍摄到的图像来检测物体，
所述车辆周边信息获取装置的特征在于，具备：
第一处理部，其生成对所述雷达检测部的检测结果和所述图像检测部所形成的检测结果进行合成而得的目标信息；
第二处理部，其生成对所述光学雷达检测部的检测结果和所述图像检测部所形成的检测结果进行合成而得的目标信息；
第三处理部，其对所述第一处理部中生成的目标信息和所述第二处理部中生成的目标信息进行整合而生成所述车辆的周围的目标信息。
2.根据权利要求1所述的车辆周边信息获取装置，其特征在于，
在所述第一处理部所生成的所述目标信息中，包含检测到的物体的识别信息、表示所述检测到的物体的位置以及速度的信息、表示所述检测到的物体的种类的分类信息、与信息输出的时刻匹配有关的时机信息，
在所述第二处理部所生成的所述目标信息中，包含检测到的物体的识别信息、表示所述检测到的物体的位置、形状、速度的信息、表示所述检测到的物体的种类的分类信息、与信息输出的时刻匹配有关的时机信息，
所述第三处理部为了在内部对所述第一处理部中生成的目标信息以及所述第二处理部中生成的目标信息进行管理而生成将它们建立了关联而成的所述目标信息。
3.根据权利要求2所述的车辆周边信息获取装置，其特征在于，
在所述第三处理部所生成的所述目标信息中，包含以下信息中的至少任一项信息：
所述第一处理部中生成的目标信息所包含的物体的识别信息以及所述第二处理部中生成的目标信息所包含的物体的识别信息；
对所述第一处理部中生成的所述目标信息所包含的物体的识别信息和所述第二处理部中生成的所述目标信息所包含的物体的识别信息建立了关联而成的物体的识别信息；
表示所述建立了关联的物体的位置、形状、速度的信息；以及
表示所述建立了关联的物体的种类的分类信息。
4.根据权利要求1所述的车辆周边信息获取装置，其特征在于，
所述图像检测部具有：
第一图像检测部，其经由第一通信线而与配置在所述车辆中的所述雷达检测部以及所述第一处理部连接；以及
第二图像检测部，其经由第二通信线而与配置在所述车辆中的所述光学雷达检测部以及所述第二处理部连接。
5.根据权利要求4所述的车辆周边信息获取装置，其特征在于，所述图像检测部的第二图像检测部经由第三通信线将检测结果的一部分作为旁支信息直接输出到所述第三处理部。
6.一种车辆，其特征在于，具备权利要求1～5中任一项所述的车辆周边信息获取装置。
CN201780072736.1A 2016-12-06 2017-02-23 车辆周边信息获取装置以及车辆 Active CN110023783B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JPPCT/JP2016/086225 2016-12-06
PCT/JP2016/086225 WO2018105037A1 (ja) 2016-12-06 2016-12-06 車両用制御装置
JP2016-239731 2016-12-09
JP2016239731A JP6490044B2 (ja) 2016-12-09 2016-12-09 車両用制御装置
PCT/JP2017/006959 WO2018105136A1 (ja) 2016-12-06 2017-02-23 車両周辺情報取得装置および車両

Publications (2)

Publication Number Publication Date
CN110023783A true CN110023783A (zh) 2019-07-16
CN110023783B CN110023783B (zh) 2023-01-17

Family

ID=62491462

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201780072769.6A Active CN110036308B (zh) 2016-12-06 2017-02-23 车辆周边信息获取装置以及车辆
CN201780072736.1A Active CN110023783B (zh) 2016-12-06 2017-02-23 车辆周边信息获取装置以及车辆

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201780072769.6A Active CN110036308B (zh) 2016-12-06 2017-02-23 车辆周边信息获取装置以及车辆

Country Status (3)

Country Link
US (2) US10872248B2 (zh)
CN (2) CN110036308B (zh)
WO (2) WO2018105136A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113557446A (zh) * 2020-02-25 2021-10-26 古河电气工业株式会社 雷达系统、处理方法和处理程序

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018105136A1 (ja) 2016-12-06 2018-06-14 本田技研工業株式会社 車両周辺情報取得装置および車両
US10740627B2 (en) * 2017-05-10 2020-08-11 Fotonation Limited Multi-camera vision system and method of monitoring
JP6642556B2 (ja) * 2017-11-22 2020-02-05 マツダ株式会社 車両の物標検出装置
US10838986B2 (en) * 2018-07-12 2020-11-17 Here Global B.V. Method and system for classifying vehicle based road sign observations
GB2576308B (en) * 2018-08-10 2020-12-30 Jaguar Land Rover Ltd An apparatus and method for providing driver assistance of a vehicle
JP6980623B2 (ja) * 2018-09-12 2021-12-15 日産自動車株式会社 周囲物体判定方法及び周囲物体判定装置
CN109814112A (zh) * 2019-01-15 2019-05-28 北京百度网讯科技有限公司 一种超声波雷达与激光雷达信息融合方法和系统
US20220126843A1 (en) * 2019-02-15 2022-04-28 Eric J. Dean Proactive vehicular security system
KR102656945B1 (ko) * 2019-02-26 2024-04-12 현대모비스 주식회사 차량의 센서 융합 장치 및 방법
KR102336654B1 (ko) * 2019-02-26 2021-12-06 현대모비스 주식회사 차량의 센서 융합 장치 및 방법
JP7354706B2 (ja) * 2019-09-10 2023-10-03 株式会社デンソー 計測装置ユニット
US11557127B2 (en) 2019-12-30 2023-01-17 Waymo Llc Close-in sensing camera system
US11520009B2 (en) * 2020-02-05 2022-12-06 Caterpillar Inc. Method and system for detecting an obstacle
DE102020103002A1 (de) * 2020-02-06 2021-08-12 Valeo Schalter Und Sensoren Gmbh Sensorsystem für ein Fahrzeug zur Überwachung eines horizontalen Überwachungsbereichs von wenigstens 180°
JP2022045636A (ja) * 2020-09-09 2022-03-22 住友重機械搬送システム株式会社 クレーン、及びクレーン制御システム
US11956693B2 (en) * 2020-12-03 2024-04-09 Mitsubishi Electric Corporation Apparatus and method for providing location
US11796345B2 (en) 2021-08-13 2023-10-24 Toyota Motor Engineering & Manufacturing North America, Inc. Method and system for optimized notification of detected event on vehicles

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002341014A (ja) * 2001-05-18 2002-11-27 Hitachi Ltd マルチセンサ航跡の相関処理をする装置及びそのプログラム
WO2004102222A1 (ja) * 2003-05-13 2004-11-25 Fujitsu Limited 物体検出装置、物体検出方法、物体検出プログラム、距離センサ
JP2007310741A (ja) * 2006-05-19 2007-11-29 Fuji Heavy Ind Ltd 立体物認識装置
JP2014025925A (ja) * 2012-07-24 2014-02-06 Toyota Motor Engineering & Manufacturing North America Inc 車両用コントローラ、車両システム
CN104584098A (zh) * 2012-09-03 2015-04-29 丰田自动车株式会社 碰撞判定装置和碰撞判定方法

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3448946B2 (ja) 1994-03-11 2003-09-22 日産自動車株式会社 車両周囲モニタ装置
JP3239727B2 (ja) 1995-12-05 2001-12-17 トヨタ自動車株式会社 車両の自動運転制御装置
EP0913751B1 (de) * 1997-11-03 2003-09-03 Volkswagen Aktiengesellschaft Autonomes Fahrzeug und Verfahren zur Steuerung eines autonomen Fahrzeuges
JP3824784B2 (ja) 1998-06-30 2006-09-20 富士通株式会社 走行支援装置、車線変更可否判断装置、その方法及び記録媒体
JP2000172982A (ja) 1998-12-09 2000-06-23 Riosu Corp:Kk 実写画像データを記憶する移動体用監視システム
JP2001039213A (ja) 1999-07-28 2001-02-13 Tokai Rika Co Ltd ターンシグナル制御システム
GB0115433D0 (en) 2001-06-23 2001-08-15 Lucas Industries Ltd An object location system for a road vehicle
JP2004182161A (ja) 2002-12-05 2004-07-02 Toyota Motor Corp 方向指示装置
DE102005008435A1 (de) * 2005-02-24 2006-08-31 Robert Bosch Gmbh Verfahren und Vorrichtung zur Geschwindigkeitsregelung eines Fahrzeugs
JP4540004B2 (ja) 2007-04-16 2010-09-08 庄吾 土田 変色可能式等ウインカーランプ
JP4985103B2 (ja) 2007-05-28 2012-07-25 トヨタ自動車株式会社 車両の自動運転装置
US8676488B2 (en) * 2009-06-04 2014-03-18 Toyota Jidosha Kabushiki Kaisha Vehicle surrounding monitor device and method for monitoring surroundings used for vehicle
JP5505702B2 (ja) * 2010-02-24 2014-05-28 アイシン精機株式会社 車両周辺監視装置
DE102011077333A1 (de) * 2011-06-10 2012-12-27 Robert Bosch Gmbh Fahrerassistenzsystem mit Objektdetektion
US9221396B1 (en) * 2012-09-27 2015-12-29 Google Inc. Cross-validating sensors of an autonomous vehicle
JP6241341B2 (ja) 2014-03-20 2017-12-06 アイシン・エィ・ダブリュ株式会社 自動運転支援装置、自動運転支援方法及びプログラム
US10697790B2 (en) 2014-06-10 2020-06-30 Clarion Co., Ltd. Lane selecting device, vehicle control system and lane selecting method
JP6201927B2 (ja) 2014-08-01 2017-09-27 トヨタ自動車株式会社 車両制御装置
JP6488594B2 (ja) 2014-09-02 2019-03-27 アイシン・エィ・ダブリュ株式会社 自動運転支援システム、自動運転支援方法及びコンピュータプログラム
CN104290745B (zh) * 2014-10-28 2017-02-01 奇瑞汽车股份有限公司 车辆用半自动驾驶系统的驾驶方法
JP6202028B2 (ja) * 2015-03-24 2017-09-27 トヨタ自動車株式会社 周辺情報検出センサの配設構造及び自動運転車両
CN204855800U (zh) * 2015-07-09 2015-12-09 北汽福田汽车股份有限公司 车载雷达系统
CN105109484B (zh) * 2015-08-21 2017-11-14 奇瑞汽车股份有限公司 目标障碍物体确定方法及装置
JP2017138694A (ja) * 2016-02-02 2017-08-10 ソニー株式会社 映像処理装置及び映像処理方法
WO2018105136A1 (ja) 2016-12-06 2018-06-14 本田技研工業株式会社 車両周辺情報取得装置および車両
CN106004659B (zh) * 2016-08-03 2017-08-04 安徽工程大学 车辆周围环境感知系统及其控制方法
DE102016116859A1 (de) * 2016-09-08 2018-03-08 Knorr-Bremse Systeme für Nutzfahrzeuge GmbH Sensoranordnung für ein autonom betriebenes Nutzfahrzeug und ein Verfahren zur Rundumbilderfassung
US10846818B2 (en) * 2018-11-15 2020-11-24 Toyota Research Institute, Inc. Systems and methods for registering 3D data with 2D image data
US10634793B1 (en) * 2018-12-24 2020-04-28 Automotive Research & Testing Center Lidar detection device of detecting close-distance obstacle and method thereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002341014A (ja) * 2001-05-18 2002-11-27 Hitachi Ltd マルチセンサ航跡の相関処理をする装置及びそのプログラム
WO2004102222A1 (ja) * 2003-05-13 2004-11-25 Fujitsu Limited 物体検出装置、物体検出方法、物体検出プログラム、距離センサ
JP2007310741A (ja) * 2006-05-19 2007-11-29 Fuji Heavy Ind Ltd 立体物認識装置
JP2014025925A (ja) * 2012-07-24 2014-02-06 Toyota Motor Engineering & Manufacturing North America Inc 車両用コントローラ、車両システム
CN104584098A (zh) * 2012-09-03 2015-04-29 丰田自动车株式会社 碰撞判定装置和碰撞判定方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113557446A (zh) * 2020-02-25 2021-10-26 古河电气工业株式会社 雷达系统、处理方法和处理程序

Also Published As

Publication number Publication date
US10872248B2 (en) 2020-12-22
US10909391B2 (en) 2021-02-02
CN110023783B (zh) 2023-01-17
CN110036308B (zh) 2023-04-18
WO2018105136A1 (ja) 2018-06-14
CN110036308A (zh) 2019-07-19
WO2018105135A1 (ja) 2018-06-14
US20190286924A1 (en) 2019-09-19
US20190286923A1 (en) 2019-09-19

Similar Documents

Publication Publication Date Title
CN110023783A (zh) 车辆周边信息获取装置以及车辆
JP6795618B2 (ja) 車両周辺情報取得装置および車両
JP7230596B2 (ja) 自動車用演算システム
CN110001634A (zh) 车辆控制装置、车辆控制方法及存储介质
CN110531755A (zh) 车辆控制装置、车辆控制方法及存储介质
CN106114217A (zh) 行驶控制装置
CN110060467A (zh) 预测装置、预测方法及存储介质
CN113557189B (zh) 汽车用运算系统
CN110239542A (zh) 车辆控制装置、车辆控制方法及存储介质
JPWO2019003295A1 (ja) 走行制御システムおよび車両の制御方法
CN110239545A (zh) 车辆控制装置、车辆控制方法及存储介质
CN110126823A (zh) 车辆控制系统、车辆控制方法及存储介质
CN109693667A (zh) 车辆控制装置、车辆控制方法及存储介质
CN109906356A (zh) 车辆控制系统、车辆控制方法及车辆控制程序
CN110001635A (zh) 车辆控制装置、车辆控制方法及存储介质
CN110103962A (zh) 车辆控制装置、车辆控制方法及存储介质
CN110239549A (zh) 车辆控制装置、车辆控制方法及存储介质
CN110126822A (zh) 车辆控制系统、车辆控制方法及存储介质
CN110217231A (zh) 车辆控制装置、车辆控制方法及存储介质
CN110001641A (zh) 车辆控制装置、车辆控制方法及存储介质
JP6765357B2 (ja) 走行制御装置、走行制御方法およびプログラム
JP6632581B2 (ja) 走行制御装置、走行制御方法およびプログラム
JP7183438B2 (ja) 運転支援装置、運転支援方法及びプログラム
JP2019105568A (ja) 物体認識装置、物体認識方法及び車両
CN114655113B (zh) 报告装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant