JP2018043576A - Vehicle control device, vehicle control method and vehicle control program - Google Patents

Vehicle control device, vehicle control method and vehicle control program Download PDF

Info

Publication number
JP2018043576A
JP2018043576A JP2016178534A JP2016178534A JP2018043576A JP 2018043576 A JP2018043576 A JP 2018043576A JP 2016178534 A JP2016178534 A JP 2016178534A JP 2016178534 A JP2016178534 A JP 2016178534A JP 2018043576 A JP2018043576 A JP 2018043576A
Authority
JP
Japan
Prior art keywords
vehicle
reliability
unit
object detection
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016178534A
Other languages
Japanese (ja)
Other versions
JP6478414B2 (en
Inventor
宮川 恵介
Keisuke Miyagawa
恵介 宮川
廉士 栗山
Yasushi Kuriyama
廉士 栗山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2016178534A priority Critical patent/JP6478414B2/en
Publication of JP2018043576A publication Critical patent/JP2018043576A/en
Application granted granted Critical
Publication of JP6478414B2 publication Critical patent/JP6478414B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a vehicle control device, a vehicle control method and a vehicle control program that enable improvement of reliability of traveling support.SOLUTION: A vehicle control device includes: an imaging section for imaging the surroundings of a vehicle; an object detection section for detecting an object around the vehicle on the basis of an image taken by the imaging section; a reliability determination section for determining the reliability of the object detected by the object detection section; and a traveling support section for performing traveling support of the vehicle in accordance with the object detected by the object detection section and determining at least either one of details of the traveling support of the vehicle or whether positional information on the object detected by the object detection section is used, on the basis of the degree of the reliability determined by the reliability determination section.SELECTED DRAWING: Figure 1

Description

本発明は、車両制御装置、車両制御方法、および車両制御プログラムに関する。   The present invention relates to a vehicle control device, a vehicle control method, and a vehicle control program.

近年、車両に搭載されたカメラやレーダによる情報から車両周囲の物体を検出し、検出した物体と車両との衝突可能性が高いと判断された場合に、衝突を回避するための走行支援を行う技術が知られている。また、このような技術に関して、カメラで先行車両を見失った場合に、レーダの情報で先行車両の位置を補間する技術が知られている(例えば、特許文献1参照)。   In recent years, an object around the vehicle is detected from information provided by a camera or radar mounted on the vehicle, and when it is determined that there is a high possibility of a collision between the detected object and the vehicle, driving assistance for avoiding the collision is performed. Technology is known. In addition, regarding such a technique, a technique is known in which the position of the preceding vehicle is interpolated with radar information when the preceding vehicle is lost by a camera (see, for example, Patent Document 1).

特開2004−347471号公報JP 2004-347471 A

しかしながら、従来技術では、カメラによる物体の検出精度が低下した場合に対する制御を行っておらず、物体検出や衝突可能性判断等の走行支援の信頼性が低下する場合があった。本発明は、このような事情を考慮してなされたものであり、走行支援の信頼性を向上させることができる車両制御装置、車両制御方法、および車両制御プログラムを提供することを目的の一つとする。   However, in the prior art, control is not performed for a case where the detection accuracy of the object by the camera is lowered, and there is a case where the reliability of the driving support such as object detection and collision possibility determination is lowered. The present invention has been made in view of such circumstances, and has an object to provide a vehicle control device, a vehicle control method, and a vehicle control program capable of improving the reliability of driving support. To do.

請求項1記載の発明は、車両の周囲を撮像する撮像部(10)と、前記撮像部により撮像された画像に基づいて車両周辺の物体を検出する物体検出部(110)と、前記物体検出部で検出された物体の信頼度を判定する信頼度判定部(120)と、前記物体検出部により検出された物体に応じて前記車両の走行支援を行う走行支援部(130)であって、前記信頼度判定部により判定された信頼度の高さに基づいて、前記車両の走行支援の内容、または、前記物体検出部により検出した前記物体の位置情報を利用するか否かの少なくとも一方を判定する走行支援部と、を備える車両制御装置(100)である。   The invention according to claim 1 is an image pickup unit (10) for picking up an image around the vehicle, an object detection unit (110) for detecting an object around the vehicle based on an image picked up by the image pickup unit, and the object detection. A reliability determination unit (120) that determines the reliability of the object detected by the unit, and a travel support unit (130) that performs the travel support of the vehicle according to the object detected by the object detection unit, Based on the level of reliability determined by the reliability determination unit, at least one of whether to use the content of driving support of the vehicle or the position information of the object detected by the object detection unit It is a vehicle control apparatus (100) provided with the travel assistance part to determine.

請求項2記載の発明は、請求項1に記載の車両制御装置であって、前記物体検出部は、前記信頼度判定部により判定された信頼度が閾値以上である場合に、前記車両の横方向に関する前記物体の位置情報を前記撮像部により得られる画像に基づいて決定するものである。   A second aspect of the present invention is the vehicle control device according to the first aspect, wherein the object detection unit is configured to be connected to the side of the vehicle when the reliability determined by the reliability determination unit is greater than or equal to a threshold value. Position information of the object related to the direction is determined based on an image obtained by the imaging unit.

請求項3記載の発明は、請求項2に記載の車両制御装置であって、電波を放射することによって前記車両と前記車両周辺の物体との位置を計測するレーダ装置(20)を更に備え、前記物体検出部は、前記信頼度判定部により判定された信頼度が前記閾値以上である場合に、前記車両の横方向に関する前記物体の位置情報を前記撮像部により得られる画像を優先的に用いて決定し、前記車両との距離方向に関する前記物体の位置情報を、前記レーダ装置による計測結果を優先的に用いて決定するものである。   Invention of Claim 3 is a vehicle control apparatus of Claim 2, Comprising: The radar apparatus (20) which measures the position of the said vehicle and the object around the said vehicle by radiating | emitting an electromagnetic wave is further provided, The object detection unit preferentially uses an image obtained by the imaging unit for positional information of the object in the lateral direction of the vehicle when the reliability determined by the reliability determination unit is equal to or greater than the threshold. The position information of the object related to the distance direction from the vehicle is determined using the measurement result of the radar device preferentially.

請求項4記載の発明は、請求項1から3のうち、いずれか1項に記載の車両制御装置であって、前記走行支援部は、前記信頼度判定部により判定された信頼度が閾値未満である場合に、前記車両の減速制御を行うか否かを確定するための時間を延長するものである。   A fourth aspect of the invention is the vehicle control device according to any one of the first to third aspects, wherein the driving support unit has a reliability determined by the reliability determining unit less than a threshold value. In this case, the time for determining whether or not to perform the deceleration control of the vehicle is extended.

請求項5記載の発明は、請求項1から4のうち、いずれか1項に記載の車両制御装置であって、前記走行支援部は、前記物体検出部による物体の検出に外挿処理を用いている場合、前記車両の減速制御を行うか否かを確定するための時間を延長するものである。   A fifth aspect of the present invention is the vehicle control device according to any one of the first to fourth aspects, wherein the travel support unit uses an extrapolation process to detect an object by the object detection unit. If so, the time for determining whether or not to perform deceleration control of the vehicle is extended.

請求項6記載の発明は、請求項1から5のうち、いずれか1項に記載の車両制御装置であって、前記走行支援部は、前記物体検出部により前記物体の検出ができていない場合、前記車両の減速制御を行うか否かの判定を行わないものである。   A sixth aspect of the present invention is the vehicle control device according to any one of the first to fifth aspects, wherein the travel support unit is not capable of detecting the object by the object detection unit. The determination as to whether or not to perform deceleration control of the vehicle is not performed.

請求項7記載の発明は、車載コンピュータが、車両の周囲を撮像する撮像部により撮像された画像に基づいて車両周辺の物体を検出し、検出された前記物体の信頼度を判定し、検出された前記物体に応じて前記車両の走行支援を行い、判定された前記信頼度の高さに基づいて、前記車両の走行支援の内容、または、検出した前記物体の位置情報を利用するか否かの少なくとも一方を判定する、車両制御方法である。   According to the seventh aspect of the present invention, the in-vehicle computer detects an object around the vehicle based on an image captured by an imaging unit that captures the periphery of the vehicle, determines the reliability of the detected object, and is detected. Whether or not to use the content of the vehicle driving support or the detected position information of the object based on the determined high reliability. A vehicle control method for determining at least one of the following.

請求項8記載の発明は、車載コンピュータに、車両の周囲を撮像する撮像部により撮像された画像に基づいて車両周辺の物体を検出させ、検出された前記物体の信頼度を判定させ、検出された前記物体に応じて前記車両の走行支援を行わせ、判定された前記信頼度の高さに基づいて、前記車両の走行支援の内容、または、検出した前記物体の位置情報を利用するか否かの少なくとも一方を判定させる、車両制御プログラムである。   According to an eighth aspect of the present invention, an in-vehicle computer is caused to detect an object around the vehicle based on an image captured by an imaging unit that images the periphery of the vehicle, and the reliability of the detected object is determined and detected. Whether or not to use the content of the vehicle driving support or the detected position information of the object based on the determined high reliability. A vehicle control program for determining at least one of the above.

請求項1、7、および8記載の発明によれば、走行支援の信頼性を向上させることができる。   According to invention of Claim 1, 7, and 8, the reliability of driving assistance can be improved.

請求項2記載の発明によれば、撮像部から取得した画像から検出した物体の信頼度が高い場合に、横分解能が高い画像の情報を用いて車両の横方向に関する物体の位置情報を決定することで、物体の位置情報の精度を向上させることができる。   According to the second aspect of the invention, when the reliability of the object detected from the image acquired from the imaging unit is high, the position information of the object in the lateral direction of the vehicle is determined using the information of the image having a high lateral resolution. Thus, the accuracy of the position information of the object can be improved.

請求項3記載の発明によれば、信頼度に応じて、撮像部から取得した画像から決定される位置情報と、レーダ装置から決定される位置情報とを好適に使い分けることで、位置情報の信頼性を向上させることができる。   According to the third aspect of the present invention, the position information can be reliably used by properly using the position information determined from the image acquired from the imaging unit and the position information determined from the radar apparatus according to the reliability. Can be improved.

請求項4記載の発明によれば、信頼度が低い場合であっても、車両の減速制御を行うか否かを確定するための時間を延長することで、ある程度時間をかけて、より適切に減速制御の判定を行うことができる。   According to the fourth aspect of the present invention, even if the reliability is low, it takes a certain amount of time and more appropriately by extending the time for determining whether or not to perform vehicle deceleration control. Deceleration control can be determined.

請求項5記載の発明によれば、撮像部から取得した画像から物体を直接検出できないような状態であっても、車両の減速制御を行うか否かを確定するための時間を延長することで、ある程度時間をかけて、より適切に減速制御の判定を行うことができる。   According to the fifth aspect of the present invention, even when the object cannot be directly detected from the image acquired from the imaging unit, the time for determining whether to perform the deceleration control of the vehicle is extended. Therefore, it is possible to determine the deceleration control more appropriately after taking a certain amount of time.

請求項6記載の発明によれば、信頼度の低い条件での制御を抑制し、より安全な走行制御を実現することができる。   According to the invention described in claim 6, it is possible to suppress the control under the condition of low reliability and to realize safer traveling control.

車両制御システム1の機能構成の一例を示す図である。It is a figure which shows an example of a function structure of the vehicle control system. 物体検出部110による物体検出の様子を説明するための図である。It is a figure for demonstrating the mode of the object detection by the object detection part. 信頼度判定情報152の一例を示す図である。It is a figure which shows an example of the reliability determination information 152. FIG. 位置情報取得元切替情報154の一例を示す図である。It is a figure which shows an example of the positional information acquisition source switching information 154. FIG. 走行支援条件156の一例を示す図である。It is a figure which shows an example of the driving assistance conditions. ラップ量について説明するための図である。It is a figure for demonstrating the amount of laps. 実施形態の車両制御装置100により実行される処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process performed by the vehicle control apparatus 100 of embodiment.

以下、図面を参照し、本発明の車両制御装置、車両制御方法、および車両制御プログラムの実施形態について説明する。   Hereinafter, embodiments of a vehicle control device, a vehicle control method, and a vehicle control program of the present invention will be described with reference to the drawings.

図1は、車両制御システム1の機能構成の一例を示す図である。車両制御システム1は、例えば、カメラ(撮像部)10と、レーダ装置20と、車両センサ30と、走行駆動力出力装置40と、ブレーキ装置50と、ステアリング装置60と、通知装置70と、車両制御装置100とを備える。   FIG. 1 is a diagram illustrating an example of a functional configuration of the vehicle control system 1. The vehicle control system 1 includes, for example, a camera (imaging unit) 10, a radar device 20, a vehicle sensor 30, a travel driving force output device 40, a brake device 50, a steering device 60, a notification device 70, a vehicle And a control device 100.

カメラ10は、CCD(Charge Couple Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。カメラ10は、例えば、車両制御システム1が搭載された車両(以下、自車両)のフロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ10は、例えば、自車両の周囲を、周期的に繰り返し撮像する。カメラ10は、撮像した画像を車両制御装置100に出力する。カメラ10は、単眼カメラでもよい。また、カメラ10は、1台に限らず、自車両に複数設けられてもよいし、複数のカメラを含むステレオカメラであってもよい。   The camera 10 is a digital camera using a solid-state imaging device such as a charge coupled device (CCD) or a complementary metal oxide semiconductor (CMOS). The camera 10 is attached to, for example, the upper part of the front windshield of the vehicle (hereinafter, the host vehicle) on which the vehicle control system 1 is mounted, the rear surface of the rearview mirror, and the like. For example, the camera 10 periodically and repeatedly images around the host vehicle. The camera 10 outputs the captured image to the vehicle control device 100. The camera 10 may be a monocular camera. Moreover, the camera 10 is not limited to one, and a plurality of cameras 10 may be provided in the host vehicle, or a stereo camera including a plurality of cameras may be used.

レーダ装置20は、例えば、自車両のバンパーや、フロントグリル等の周辺に設けられる。レーダ装置20は、例えば、自車両の前方にミリ波等の電波を放射し、放射したミリ波が自車両周辺の物体に当たって反射した反射波を受信する。また、レーダ装置20は、ミリ波を放射してから反射波を受信するまでの時間から自車両と車両周辺の物体との相対的な距離方向に関する位置情報を計測する。また、レーダ装置20は、自車両の横方向に関する物体の位置情報(以下、横位置)を検出する。横方向とは、自車両の走行方向の軸に対して垂直な軸の方向である。レーダ装置20は、計測した位置情報を車両制御装置100に出力する。   The radar device 20 is provided, for example, around a bumper or a front grill of the host vehicle. For example, the radar apparatus 20 radiates a radio wave such as a millimeter wave in front of the host vehicle, and receives a reflected wave reflected by the radiated millimeter wave hitting an object around the host vehicle. Further, the radar device 20 measures position information related to the relative distance direction between the host vehicle and an object around the vehicle from the time from when the millimeter wave is emitted until the reflected wave is received. Further, the radar apparatus 20 detects position information (hereinafter referred to as a lateral position) of an object related to the lateral direction of the host vehicle. The lateral direction is the direction of an axis perpendicular to the axis of the traveling direction of the host vehicle. The radar apparatus 20 outputs the measured position information to the vehicle control apparatus 100.

車両センサ30は、車速(走行速度)を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、自車両Mの向きを検出する方位センサ等を含む。車両センサ30は、各センサにより取得した情報を車両制御装置100に出力する。   The vehicle sensor 30 includes a vehicle speed sensor that detects a vehicle speed (traveling speed), an acceleration sensor that detects acceleration, a yaw rate sensor that detects an angular velocity around a vertical axis, an orientation sensor that detects the direction of the host vehicle M, and the like. The vehicle sensor 30 outputs information acquired by each sensor to the vehicle control device 100.

走行駆動力出力装置40は、自車両が走行するための走行駆動力(トルク)を駆動輪に出力する。走行駆動力出力装置40は、例えば、自車両が内燃機関を動力源とした自動車である場合、エンジン、変速機、およびエンジンを制御するエンジンECU(Electronic Control Unit)を備え、自車両Mが電動機を動力源とした電気自動車である場合、走行用モータおよび走行用モータを制御するモータECUを備え、自車両Mがハイブリッド自動車である場合、エンジン、変速機、およびエンジンECUと、走行用モータおよびモータECUとを備える。   The traveling driving force output device 40 outputs a traveling driving force (torque) for driving the host vehicle to driving wheels. For example, when the host vehicle is an automobile using an internal combustion engine as a power source, the traveling driving force output device 40 includes an engine, a transmission, and an engine ECU (Electronic Control Unit) that controls the engine, and the host vehicle M is an electric motor. When the vehicle M is a hybrid vehicle, the engine, the transmission, the engine ECU, the traveling motor, and the motor ECU for controlling the traveling motor are provided. A motor ECU.

走行駆動力出力装置40がエンジンのみを含む場合、エンジンECUは、車両制御装置100から入力される情報に従って、エンジンのスロットル開度やシフト段等を調整する。走行駆動力出力装置40が走行用モータのみを含む場合、モータECUは、車両制御装置100から入力される情報に従って、走行用モータに与えるPWM(Pulse Width Modulation)信号のデューティ比を調整する。走行駆動力出力装置40がエンジンおよび走行用モータを含む場合、エンジンECUおよびモータECUは、車両制御装置100から入力される情報に従って、互いに協調して走行駆動力を制御する。   When the traveling driving force output device 40 includes only the engine, the engine ECU adjusts the throttle opening, the shift stage, and the like of the engine according to information input from the vehicle control device 100. When the traveling driving force output device 40 includes only the traveling motor, the motor ECU adjusts the duty ratio of a PWM (Pulse Width Modulation) signal given to the traveling motor in accordance with information input from the vehicle control device 100. When the traveling drive force output device 40 includes an engine and a traveling motor, the engine ECU and the motor ECU control the traveling drive force in cooperation with each other according to information input from the vehicle control device 100.

ブレーキ装置50は、例えば、ブレーキキャリパーと、ブレーキキャリパーに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、制動制御部とを備える電動サーボブレーキ装置である。電動サーボブレーキ装置の制動制御部は、車両制御装置100から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。電動サーボブレーキ装置は、ブレーキペダルの操作によって発生させた油圧を、マスターシリンダを介してシリンダに伝達する機構をバックアップとして備えてよい。なお、ブレーキ装置50は、上記説明した電動サーボブレーキ装置に限らず、電子制御式油圧ブレーキ装置であってもよい。電子制御式油圧ブレーキ装置は、車両制御装置100から入力される情報に従ってアクチュエータを制御して、マスターシリンダの油圧をシリンダに伝達する。また、ブレーキ装置50は、走行駆動力出力装置40に含まれ得る走行用モータによる回生ブレーキを含んでもよい。   The brake device 50 is, for example, an electric servo brake device that includes a brake caliper, a cylinder that transmits hydraulic pressure to the brake caliper, an electric motor that generates hydraulic pressure in the cylinder, and a braking control unit. The braking control unit of the electric servo brake device controls the electric motor according to the information input from the vehicle control device 100 so that the brake torque corresponding to the braking operation is output to each wheel. The electric servo brake device may include, as a backup, a mechanism that transmits the hydraulic pressure generated by operating the brake pedal to the cylinder via the master cylinder. The brake device 50 is not limited to the electric servo brake device described above, and may be an electronically controlled hydraulic brake device. The electronically controlled hydraulic brake device controls the actuator in accordance with information input from the vehicle control device 100, and transmits the hydraulic pressure of the master cylinder to the cylinder. Further, the brake device 50 may include a regenerative brake by a traveling motor that can be included in the traveling driving force output device 40.

ステアリング装置60は、例えば、ステアリングECUと、電動モータとを備える。電動モータは、例えば、ラックアンドピニオン機構に力を作用させて転舵輪の向きを変更する。ステアリングECUは、車両制御装置100から入力される情報、或いは入力されるステアリング操舵角またはステアリングトルクの情報に従って電動モータを駆動し、転舵輪の向きを変更させる。   The steering device 60 includes, for example, a steering ECU and an electric motor. For example, the electric motor changes the direction of the steered wheels by applying a force to a rack and pinion mechanism. The steering ECU drives the electric motor according to information input from the vehicle control device 100 or information of the input steering steering angle or steering torque, and changes the direction of the steered wheels.

通知装置70は、例えば、自車両内に設けられたディスプレイ(表示部)またはスピーカ(音声出力部)である。通知装置70は、車両制御装置100における制御内容に関する情報(例えば、警報)を、ディスプレイに表示させたり、スピーカにより音声出力させたりすることで、乗員に通知する。   The notification device 70 is, for example, a display (display unit) or a speaker (audio output unit) provided in the host vehicle. The notification device 70 notifies an occupant by displaying information (for example, an alarm) related to the control content in the vehicle control device 100 on a display or by outputting a sound through a speaker.

車両制御装置100は、例えば、一以上のプロセッサまたは同等の機能を有するハードウェアにより実現される。車両制御装置100は、CPU(Central Processing Unit)等のプロセッサ、記憶装置、および通信インターフェースが内部バスによって接続されたECU(Electronic Control Unit)、或いはMPU(Micro-Processing Unit)等が組み合わされた構成であってよい。   The vehicle control device 100 is realized by, for example, one or more processors or hardware having an equivalent function. The vehicle control device 100 is configured by combining a processor such as a CPU (Central Processing Unit), a storage device, and an ECU (Electronic Control Unit) in which a communication interface is connected by an internal bus, or an MPU (Micro-Processing Unit). It may be.

車両制御装置100は、例えば、図示しない操作子(例えば、アクセルペダル、ブレーキペダル、およびステアリングホイール)から得られる乗員の操作内容に対応させて、走行駆動力出力装置40、ブレーキ装置50、またはステアリング装置60の少なくとも1つを制御して、自車両の操舵または車速の少なくとも一方に対する走行制御を行う。   The vehicle control device 100, for example, corresponds to the occupant's operation content obtained from an operator (not shown) (for example, an accelerator pedal, a brake pedal, and a steering wheel), for example, the driving force output device 40, the brake device 50, or the steering. At least one of the devices 60 is controlled to perform traveling control with respect to at least one of steering of the host vehicle and vehicle speed.

また、車両制御装置100は、例えば、物体検出部110と、信頼度判定部120と、走行支援部130と、通知制御部140と、記憶部150とを備える。   In addition, the vehicle control device 100 includes, for example, an object detection unit 110, a reliability determination unit 120, a travel support unit 130, a notification control unit 140, and a storage unit 150.

物体検出部110は、カメラ10により撮像された画像に基づいて物体を検出する。図2は、物体検出部110による物体検出の様子を説明するための図である。図2の例では、自車両Mと、走行車線210と、横断歩道220と、物体230−1〜230−3とが示されている。例えば、物体検出部110は、カメラ10により撮像された画像の各画素に対する輝度情報または色情報(R,G,B)を用いて、物体と背景との輝度差または色彩パラメータの差から、物体230のエッジ部分を抽出する。そして、物体検出部110は、抽出したエッジ部分で囲まれた領域の形状と、予め設定された歩行者、二輪自動車、自転車、自動車等の各属性の形状とを比較し、形状の合致度(判定スコア)が所定値以上(例えば、80%以上)である場合に、その物体の属性を決定する。なお、自動二輪車および自転車の形状は、乗車した人を含めた形状であってもよい。例えば、物体検出部110は、合致度が所定以上のものが複数ある場合には、合致度が最大の属性を、その物体の属性として決定する。物体検出部110は、物体230−1および物体230−2の属性を歩行者として決定し、物体230−3の属性を自転車として決定する。   The object detection unit 110 detects an object based on an image captured by the camera 10. FIG. 2 is a diagram for explaining a state of object detection by the object detection unit 110. In the example of FIG. 2, the host vehicle M, the traveling lane 210, the pedestrian crossing 220, and the objects 230-1 to 230-3 are shown. For example, the object detection unit 110 uses the luminance information or color information (R, G, B) for each pixel of the image captured by the camera 10 to calculate the object from the luminance difference or color parameter difference between the object and the background. 230 edge portions are extracted. Then, the object detection unit 110 compares the shape of the region surrounded by the extracted edge portion with the shape of each attribute such as a pedestrian, a two-wheeled vehicle, a bicycle, and a car set in advance, and the degree of matching of the shape ( When the determination score is equal to or greater than a predetermined value (for example, 80% or more), the attribute of the object is determined. The shape of the motorcycle and the bicycle may be a shape including a person who gets on the motorcycle. For example, when there are a plurality of objects having a degree of matching equal to or higher than a predetermined level, the object detecting unit 110 determines the attribute having the highest degree of matching as the attribute of the object. The object detection unit 110 determines the attributes of the object 230-1 and the object 230-2 as a pedestrian, and determines the attribute of the object 230-3 as a bicycle.

また、物体検出部110は、自車両Mにおけるカメラ10の設置位置と、画角等のカメラパラメータに基づいて、画像上に含まれる物体の位置情報を決定する。位置情報とは、例えば自車両Mから物体230までの相対的な距離に関する情報を含み、その他、自車両Mに対する物体230の方向や横位置等を含んでもよい。また、物体検出部110は、後述する走行支援部130からの切り替え制御により、物体230の位置情報の取得元を、カメラ10から取得した画像に基づいて決定された位置情報とするか、レーダ装置20で計測された位置情報とするかを切り替えてもよい。   Further, the object detection unit 110 determines the position information of the object included on the image based on the installation position of the camera 10 in the host vehicle M and the camera parameters such as the angle of view. The position information includes, for example, information related to the relative distance from the host vehicle M to the object 230, and may include the direction and lateral position of the object 230 with respect to the host vehicle M. In addition, the object detection unit 110 sets the acquisition source of the position information of the object 230 as position information determined based on the image acquired from the camera 10 by switching control from the driving support unit 130 described later, or a radar apparatus. Whether the position information is measured at 20 may be switched.

また、物体検出部110は、カメラ10により所定時間ごとに撮影される画像に基づいて、その物体230の観測中の合計移動量および移動方向を測定する。なお、物体検出部110は、合計移動量の代わりに単位時間あたりの移動量であってもよい。物体検出部110は、測定した移動量が閾値以上であり、移動方向が走行車線210側に近づいている場合、または、走行車線210で、自車両Mに近づく方向に移動している場合に、その物体230を、自車両Mの前を横断する横断者である可能性があると判定する。また、上記の条件に含まれない場合、物体検出部110は、その物体230を横断者以外の物体である可能性があると判定する。なお、物体検出部110は、カメラ10で撮像された画像に含まれる各物体230−1〜230−3に対して、上述の横断者である可能性があるか否かの判定を行う。   In addition, the object detection unit 110 measures the total movement amount and movement direction during observation of the object 230 based on images taken every predetermined time by the camera 10. Note that the object detection unit 110 may be a movement amount per unit time instead of the total movement amount. When the measured movement amount is equal to or greater than the threshold value and the movement direction is approaching the traveling lane 210 side, or the object detection unit 110 is moving in the direction approaching the host vehicle M in the traveling lane 210, It is determined that the object 230 may be a crossing person who crosses the front of the host vehicle M. Further, when the condition is not included, the object detection unit 110 determines that the object 230 may be an object other than a crossing person. Note that the object detection unit 110 determines whether or not each of the objects 230-1 to 230-3 included in the image captured by the camera 10 may be a crossing person.

また、物体検出部110は、横断者である可能性があると判定された物体230が「横断」であるか、「プレ横断」であるかを決定してもよい。「横断」とは、例えば、歩行者等の物体230が自車両Mの走行車線を横断している可能性が高い場合であって、自車両Mの前方を横断する歩行者である。また、「プレ横断」とは、走行車線210を横断している可能性があるが、それほどの確証が持てない横断者である。この場合、物体検出部110は、例えば、物体230の現在位置や自車両Mからの距離、移動量、移動方向、移動速度等が、予め「横断」および「プレ横断」のそれぞれに設定された所定の条件を満たすか否かにより、「横断」または「プレ横断」のいずれかを決定する。   In addition, the object detection unit 110 may determine whether the object 230 that has been determined to be a crossing person is “crossing” or “pre-crossing”. The “crossing” is, for example, a case where there is a high possibility that an object 230 such as a pedestrian is crossing the traveling lane of the host vehicle M, and a pedestrian who crosses the front of the host vehicle M. In addition, “pre-crossing” is a crossing person who may have crossed the traveling lane 210 but cannot have much confirmation. In this case, the object detection unit 110, for example, the current position of the object 230, the distance from the host vehicle M, the movement amount, the movement direction, the movement speed, and the like are set in advance for each of “crossing” and “pre-crossing”. Either “crossing” or “pre-crossing” is determined depending on whether or not a predetermined condition is satisfied.

また、物体検出部110は、カメラ10から得られる時系列の画像において、現在の画像における物体230の大きさ(面積)から、次の画像における物体230の大きさの変位量(拡大率)を推定し、実際の画像フレームにおける物体の変位量が、予め設定した推定値を超える場合に、その物体230の検出が正しくないものとして、その物体230を除去してもよい。   In addition, in the time-series image obtained from the camera 10, the object detection unit 110 calculates the displacement (magnification rate) of the size of the object 230 in the next image from the size (area) of the object 230 in the current image. If the amount of displacement of the object in the actual image frame exceeds the estimated value set in advance, the object 230 may be removed because the detection of the object 230 is incorrect.

また、物体検出部110は、今まで検出していた物体230が他の物体(例えば、車両や電柱、他の歩行者)に隠れることで、物体の位置が検出できない場合には、それまでの物体230の移動軌跡に基づいて、物体230の移動量や移動方向から物体230の存在の有無を推測する外挿処理を行ってもよい。   In addition, the object detection unit 110, when the object 230 that has been detected so far is hidden behind another object (for example, a vehicle, a power pole, or another pedestrian) and cannot detect the position of the object, On the basis of the movement trajectory of the object 230, extrapolation processing for estimating the presence or absence of the object 230 from the movement amount or movement direction of the object 230 may be performed.

信頼度判定部120は、物体検出部110で検出された物体の信頼度を判定する。例えば、信頼度判定部120は、物体検出部110で検出した物体の属性と、物体検出部110により物体を検出したときの状況とに基づいて、予め記憶部150に記憶された信頼度判定情報152を参照して、物体230に対する信頼度を判定する。物体を検出したときの状況とは、例えば、物体230がどのような動作を行っているかの状況でもよく、物体230を検出している物体検出部110の処理状況でもよい。   The reliability determination unit 120 determines the reliability of the object detected by the object detection unit 110. For example, the reliability determination unit 120 is based on the attribute of the object detected by the object detection unit 110 and the situation when the object detection unit 110 detects the object, and the reliability determination information stored in the storage unit 150 in advance. With reference to 152, the reliability of the object 230 is determined. The situation when the object is detected may be, for example, a situation regarding what operation the object 230 is performing, or may be a processing situation of the object detection unit 110 that is detecting the object 230.

図3は、信頼度判定情報152の一例を示す図である。信頼度判定情報152は、例えば、属性および状況の組み合わせごとに、信頼度が対応付けられている。また、信頼度判定情報152には、属性および状況の組み合わせが識別できるように識別情報が設定されている。また、図示の例では、信頼度として、例えば「なし」、「低」、「中」、「高」の4つの閾値レベルが設定されている。この場合の信頼度の大小は、「「なし」<「低」<「中」<「高」」である。なお、信頼度は、数値で設定されてよい。   FIG. 3 is a diagram illustrating an example of the reliability determination information 152. In the reliability determination information 152, for example, reliability is associated with each combination of attribute and situation. In the reliability determination information 152, identification information is set so that a combination of attributes and situations can be identified. In the illustrated example, as the reliability, for example, four threshold levels of “none”, “low”, “medium”, and “high” are set. In this case, the degree of reliability is ““ none ”<“ low ”<“ medium ”<“ high ”. The reliability may be set with a numerical value.

例えば、信頼度判定部120は、物体検出部110において、物体230の位置情報を外挿処理により検出している場合、物体230の属性に関係なく、その物体の信頼度を「低」と判定する。   For example, when the object detection unit 110 detects position information of the object 230 by extrapolation processing, the reliability determination unit 120 determines that the reliability of the object is “low” regardless of the attribute of the object 230. To do.

また、信頼度判定部120は、例えば、物体検出部110により検出された物体230が歩行者であったが、連続する画像間における物体の面積拡大率が推定値以上であり、その物体230が除去された場合(つまり、物体230は除去されたが、歩行者であったかもしれない場合)、その物体230の信頼度を「中」と判定する。この場合、信頼度判定部120は、歩行者とは特定されていないものの、物体230の検出自体は行われているため、横位置の信頼度は高いと判定することができる。   In the reliability determination unit 120, for example, the object 230 detected by the object detection unit 110 is a pedestrian, but the area expansion rate of the object between successive images is equal to or greater than the estimated value, and the object 230 is When removed (that is, when the object 230 has been removed but may have been a pedestrian), the reliability of the object 230 is determined to be “medium”. In this case, the reliability determination unit 120 can determine that the reliability of the lateral position is high because the object 230 is detected although the pedestrian is not specified.

また、信頼度判定部120は、例えば、物体検出部110により検出された物体230の属性が歩行者であって、且つ、上述した面積拡大率における物体230の除去がない場合、歩行者の状況が通常の歩行者、横断中の歩行者、およびプレ横断中の歩行者のいずれであっても、信頼度を「高」と判定する。   In addition, for example, when the attribute of the object 230 detected by the object detection unit 110 is a pedestrian and there is no removal of the object 230 at the above-described area expansion rate, the reliability determination unit 120 Whether the pedestrian is a normal pedestrian, a crossing pedestrian, or a pre-crossing pedestrian, the reliability is determined as “high”.

なお、物体検出部110により物体230が検出されなかった場合、物体230の属性や状況に関する情報がない。この場合、信頼度判定部120における物体の信頼度は、「なし」となる。   In addition, when the object 230 is not detected by the object detection unit 110, there is no information related to the attribute or status of the object 230. In this case, the reliability of the object in the reliability determination unit 120 is “none”.

走行支援部130は、物体検出部110により検出された物体230に応じて、自車両Mの走行支援を行う。また、走行支援部130は、信頼度判定部120により判定された信頼度の高さに基づいて、自車両Mに対してどのような走行支援を行うかの具体的な内容、または、物体検出部110により検出した物体230の位置情報を利用するか否かの少なくとも一方を判定する。   The travel support unit 130 performs travel support for the host vehicle M according to the object 230 detected by the object detection unit 110. In addition, the driving support unit 130 determines the specific content of what kind of driving support is to be performed for the host vehicle M based on the high reliability determined by the reliability determination unit 120 or the object detection. At least one of whether to use the position information of the object 230 detected by the unit 110 is determined.

例えば、走行支援部130は、信頼度判定部120により判定された信頼度に基づいて、予め記憶部150に記憶された位置情報取得元切替情報154を参照し、信頼度の高さに基づく走行支援内容を取得する。   For example, the travel support unit 130 refers to the position information acquisition source switching information 154 stored in advance in the storage unit 150 based on the reliability determined by the reliability determination unit 120, and travels based on the high reliability. Get support content.

図4は、位置情報取得元切替情報154の一例を示す図である。位置情報取得元切替情報154は、例えば、信頼度ごと、物体の位置情報の取得元の切り替えに関する情報が対応付けられたものである。   FIG. 4 is a diagram illustrating an example of the position information acquisition source switching information 154. The position information acquisition source switching information 154 is, for example, information associated with switching of the acquisition source of object position information for each reliability.

例えば、走行支援部130は、信頼度判定部120により判定された物体検出の信頼度が「なし」である場合、位置情報の取得元の切り替え制御は行わないが、位置情報は取得せず、物体検出部110による物体検出を継続させる。   For example, when the reliability of the object detection determined by the reliability determination unit 120 is “none”, the driving support unit 130 does not perform switching control of the acquisition source of the position information, but does not acquire the position information. The object detection by the object detection unit 110 is continued.

また、走行支援部130は、信頼度判定部120により判定された物体検出の信頼度が「低」である場合、カメラ10による検出結果の信頼性が低いため、物体検出部110による物体230の横位置を、レーダ装置20の計測結果に基づいて決定させる。   In addition, when the reliability of the object detection determined by the reliability determination unit 120 is “low”, the driving support unit 130 has a low reliability of the detection result by the camera 10, and thus the object detection unit 110 detects the object 230. The lateral position is determined based on the measurement result of the radar apparatus 20.

また、走行支援部130は、信頼度判定部120により判定された物体検出の信頼度が「中」または「高」である場合、物体検出部110による物体230の横位置の検出を、カメラ10から取得した画像に基づいて決定させる。   In addition, when the reliability of the object detection determined by the reliability determination unit 120 is “medium” or “high”, the driving support unit 130 detects the lateral position of the object 230 by the object detection unit 110. Based on the image acquired from

走行支援部130は、上述した位置情報の取得元の切り替え情報を物体検出部110に出力する。これにより、物体検出部110は、例えば、信頼度が閾値以上(「中」または「高」)である場合(信頼度が高い場合)に、自車両Mに対する物体230の横位置を、カメラ10により得られる画像に基づいて決定することができる。つまり、カメラ10による物体検出の信頼度が高い場合に、横分解能が高いカメラ10の画像の情報を用いて自車両Mに対する物体の横位置を決定することで、物体230の位置情報の精度を向上させることができる。また、この場合に、物体検出部110は、自車両Mとの距離方向に関する物体230の位置情報を、レーダ装置20による計測結果に基づいて決定する。   The travel support unit 130 outputs the above-described switching information from which the position information is acquired to the object detection unit 110. Thereby, for example, when the reliability is equal to or higher than the threshold (“medium” or “high”) (when the reliability is high), the object detection unit 110 indicates the lateral position of the object 230 with respect to the host vehicle M. Can be determined based on the image obtained by the above. In other words, when the reliability of object detection by the camera 10 is high, the lateral position of the object with respect to the host vehicle M is determined using information on the image of the camera 10 having a high lateral resolution, thereby improving the accuracy of the position information of the object 230. Can be improved. Further, in this case, the object detection unit 110 determines the position information of the object 230 regarding the distance direction from the host vehicle M based on the measurement result by the radar device 20.

また、物体検出部110は、自車両Mに対する物体230の横位置を、カメラ10の画像を優先的に用いて決定し、自車両Mとの距離方向に関する前記物体の位置情報を、レーダ装置20による計測結果を優先的に用いて決定してもよい。優先的に用いるとは、例えば、カメラ10の画像から決定した位置情報と、レーダ装置20の計測結果から決定した位置情報とを用いて、位置情報を計算する場合に、優先させた方の位置情報に対する重みを大きくすることである。このように、信頼度に応じて、カメラ10から取得した画像から決定される位置情報と、レーダ装置20から決定される位置情報とを好適に使い分けることで、位置情報の信頼性を向上させることができる。   Further, the object detection unit 110 determines the lateral position of the object 230 with respect to the host vehicle M by using the image of the camera 10 preferentially, and the position information of the object related to the distance direction from the host vehicle M is determined by the radar device 20. The measurement result by may be used with priority. For example, when the position information is calculated using the position information determined from the image of the camera 10 and the position information determined from the measurement result of the radar device 20, the priority position is used. It is to increase the weight for information. As described above, according to the reliability, the position information determined from the image acquired from the camera 10 and the position information determined from the radar apparatus 20 are appropriately used to improve the reliability of the position information. Can do.

また、走行支援部130は、信頼度判定部120により判定された信頼度に基づいて、予め記憶部150に記憶された走行支援条件156を参照し、物体230に対応した自車両Mの走行制御の内容を判定する。   In addition, the driving support unit 130 refers to the driving support condition 156 stored in advance in the storage unit 150 based on the reliability determined by the reliability determination unit 120, and controls the driving of the host vehicle M corresponding to the object 230. Determine the contents of.

図5は、走行支援条件156の一例を示す図である。走行支援条件156は、例えば、信頼度ごとに、自車両Mの走行支援条件が対応付けられたものである。   FIG. 5 is a diagram illustrating an example of the driving support condition 156. For example, the driving support condition 156 is associated with the driving support condition of the host vehicle M for each reliability.

例えば、走行支援部130は、信頼度判定部120により判定された物体検出の信頼度が「なし」である場合、特に制御を行わずに現状を維持する。これにより、信頼度の低い条件での制御を抑制し、より安全な走行制御を実現することができる。   For example, when the reliability of object detection determined by the reliability determination unit 120 is “none”, the driving support unit 130 maintains the current state without performing any particular control. As a result, it is possible to suppress control under conditions with low reliability and to realize safer travel control.

また、走行支援部130は、信頼度判定部120により判定された物体検出の信頼度が「低」または「中」である場合(閾値未満である場合)、カメラ10による検出結果の信頼性が低いため、自車両Mの減速制御を行うか否かを確定するための時間を、所定時間よりも延長する。減速制御とは、例えば、物体230と自車両Mとが衝突する可能性があると判定された場合に、ブレーキ装置50によって自車両Mを減速させる制御である。減速制御は、例えば、所定時間が経過した場合に開始してもよい。また、速度制御は、所定時間が経過して減速制御の作動が許可状態となり、その後、自車両Mと物体230との相対速度と距離から求められるTTC(Time To Collision;自車両Mと物体230とが接触するまでの時間)が所定値以下になった場合に開始してもよい。これにより、ある程度時間をかけて、より適切に減速制御の判定を行うことができる。   Further, when the reliability of the object detection determined by the reliability determination unit 120 is “low” or “medium” (when it is less than the threshold value), the driving support unit 130 has reliability of the detection result by the camera 10. Since it is low, the time for determining whether or not to perform the deceleration control of the host vehicle M is extended beyond the predetermined time. The deceleration control is, for example, control for decelerating the host vehicle M by the brake device 50 when it is determined that the object 230 and the host vehicle M may collide. The deceleration control may be started when a predetermined time has elapsed, for example. Further, in the speed control, the operation of the deceleration control is permitted after a predetermined time has elapsed, and thereafter, TTC (Time To Collision) calculated from the relative speed and distance between the host vehicle M and the object 230; It may be started when the time until the contact with becomes a predetermined value or less. As a result, it is possible to determine deceleration control more appropriately over a certain period of time.

また、走行支援部130は、信頼度判定部120により判定された物体検出の信頼度が「高」である場合、すでに物体検出の信頼度が高いため、所定時間で減速制御を行うか否かの判定を行う。   In addition, when the reliability of object detection determined by the reliability determination unit 120 is “high”, the driving support unit 130 determines whether or not to perform deceleration control for a predetermined time because the reliability of object detection is already high. Judgment is made.

ここで、走行支援部130は、例えば自車両Mの走行支援として、物体230と自車両Mとの衝突を回避するための減速制御を行うか否かを判定する。この場合、走行支援部130は、信頼度に応じて切り替えられた取得元から取得した物体の横位置情報に基づいて、物体230と自車両Mとが衝突する可能性があるか否かを判定する。   Here, the driving support unit 130 determines whether or not to perform deceleration control for avoiding a collision between the object 230 and the host vehicle M, for example, as a driving support of the host vehicle M. In this case, the driving support unit 130 determines whether or not the object 230 and the host vehicle M may collide based on the lateral position information of the object acquired from the acquisition source switched according to the reliability. To do.

走行支援部130は、例えば物体230が予測された自車両Mとの衝突地点をほぼ通過しているか否かにより、衝突する可能性を判定する。衝突地点とは、自車両Mの進行予定軌跡(進行予定領域)と、歩行者の横断軌跡との重なる部分である。進行予定軌跡は、自車両Mの左右端を自車両Mの中心軸方向に延出させた二本の線で囲まれた領域であってもよいし、操舵角等を考慮して曲がりを持って設定されてもよい。また、ほぼ通過しているか否かは、自車両Mが衝突地点に到達する予想時刻を基準として判定される。この判定を行うために、走行支援部130は、自車両Mの進行予定軌跡と、歩行者の横断軌跡との重なり量を評価する指標値であるラップ量およびラップ率を算出する。   The driving support unit 130 determines the possibility of collision depending on, for example, whether or not the object 230 substantially passes through the predicted collision point with the host vehicle M. The collision point is a portion where the planned travel path (scheduled travel area) of the host vehicle M and the pedestrian's crossing track overlap. The planned trajectory may be a region surrounded by two lines extending from the left and right ends of the host vehicle M in the direction of the central axis of the host vehicle M, and has a turn in consideration of the steering angle and the like. May be set. Further, whether or not the vehicle has almost passed is determined based on an expected time when the host vehicle M reaches the collision point. In order to make this determination, the driving support unit 130 calculates a lap amount and a lap rate, which are index values for evaluating the amount of overlap between the planned travel locus of the host vehicle M and the crossing locus of the pedestrian.

図6は、ラップ量について説明するための図である。図中、歩行者の形状で示している物体230は、自車両Mが衝突地点に到達する予想時刻における歩行者の予想位置である。また、y1は自車両Mの左端部から自車両Mの進行方向に延出する仮想線であり、y2は自車両Mの右端部から自車両Mの進行方向に延出する仮想線である。   FIG. 6 is a diagram for explaining the lap amount. In the figure, an object 230 shown in the shape of a pedestrian is an expected position of the pedestrian at an expected time when the host vehicle M reaches the collision point. Further, y1 is a virtual line extending from the left end portion of the host vehicle M in the traveling direction of the host vehicle M, and y2 is a virtual line extending from the right end portion of the host vehicle M in the traveling direction of the host vehicle M.

走行支援部130は、物体230の予想位置を求めた上で、物体230の移動する方向を考慮した前端部(この場合、左端部H1L)から、既に前端部が通過した第2の仮想直線y2までの距離βH2を、ラップ量として算出する。ここで、物体230の予想位置において、前端部がいずれかの仮想直線に到達していない場合、ラップ量はゼロと算出される。更に、走行支援部130は、ラップ量を第1の仮想直線y1と第2の仮想直線y2との幅Wで除算し、100を乗じた値をラップ率[%]として算出する。そして、走行支援部130は、ラップ率が70[%]以上である場合に、物体230が衝突地点をほぼ通過していると判定する。   The driving support unit 130 obtains the predicted position of the object 230, and then the second virtual straight line y2 in which the front end portion has already passed from the front end portion (in this case, the left end portion H1L) considering the moving direction of the object 230. The distance βH2 is calculated as a lap amount. Here, when the front end portion does not reach any imaginary straight line at the expected position of the object 230, the lap amount is calculated as zero. Further, the driving support unit 130 divides the lap amount by the width W between the first virtual line y1 and the second virtual line y2, and calculates a value multiplied by 100 as a lap rate [%]. Then, the traveling support unit 130 determines that the object 230 has almost passed the collision point when the lap rate is 70% or more.

また、走行支援部130は、上述したラップ率が0[%]より大きい場合に、物体230が衝突地点に到達していると判定する。なお、走行支援部130は、上述した条件を判定する際に、既に横断者と判定されている場合には、ラップ率に関する条件を緩和して(例えば、マイナスまで計算するとして、マイナス20%以上であれば衝突地点に到達していると判定する等)、走行制御を作動させやすくしてもよい。   In addition, the traveling support unit 130 determines that the object 230 has reached the collision point when the above-described lap rate is greater than 0 [%]. When determining the above-mentioned conditions, the driving support unit 130 relaxes the conditions related to the lap rate if it is already determined to be a crossing person (for example, minus 20% or more when calculating to minus) If it is determined that the vehicle has reached the collision point, the travel control may be easily activated.

また、走行支援部130は、上述した処理により、物体230と自車両Mとが衝突可能性があるか否かの判定を継続して行い、衝突可能性があると判定された時間が所定時間以上である場合に、減速制御を行うと判定する。この場合、走行支援部130は、例えば、上述した信頼度が「高」であって、衝突可能性があると判定された時間が所定時間以上の場合に、ブレーキ装置50による自車両Mの減速制御を行う。また、走行支援部130は、例えば、上述した信頼度が「中」または「低」であって、衝突可能性があると判定された時間が所定時間によりも延長した時間以上の場合に、ブレーキ装置50による自車両Mの減速制御を行う。   In addition, the driving support unit 130 continues to determine whether or not the object 230 and the host vehicle M are likely to collide by the above-described processing, and the time when it is determined that there is a possibility of collision is a predetermined time. When it is above, it determines with performing deceleration control. In this case, for example, when the reliability described above is “high” and the time when it is determined that there is a possibility of collision is equal to or longer than a predetermined time, the traveling support unit 130 decelerates the host vehicle M by the brake device 50. Take control. In addition, the driving support unit 130, for example, performs braking when the reliability described above is “medium” or “low” and the time determined to have a possibility of a collision is equal to or longer than a predetermined time. Deceleration control of the host vehicle M is performed by the device 50.

また、走行支援部130は、例えば、物体230が横断中であるか、またはプレ横断中である場合に、横断歩行者以外の歩行者である場合に比して、所定の走行制御の作動タイミングを早くするか、作動領域を広げるか、または、所定の走行制御量を増加する。なお、走行支援部130は、これらのうち複数を組み合わせた制御を行ってもよい。所定の走行制御とは、例えば、自車両Mの速度を自動で減速したり、自動停止させる等の衝突を回避するための減速制御である。作動領域を広げるとは、自車両Mを基準にした制御対象エリアを拡大することであり、通常よりも幅を大きくしたり、進行方向に遠い位置も含めて制御対象とすることである。所定の走行制御量とは、自動減速や自動停止させる大きさである。また、走行支援部130は、物体230が横断中である場合と、プレ横断中である場合とで、作動タイミング、作動領域、または、走行制御量のうち、少なくとも1つを異ならせてもよい。また、走行支援部130は、走行制御の内容を通知制御部140により乗員に通知させてもよい。   In addition, the driving support unit 130 operates the predetermined driving control operation timing when the object 230 is crossing or pre-crossing compared to a pedestrian other than a crossing pedestrian. To increase the operating range or increase a predetermined travel control amount. Note that the travel support unit 130 may perform control combining a plurality of these. The predetermined traveling control is, for example, deceleration control for avoiding a collision such as automatically decelerating or automatically stopping the speed of the host vehicle M. Enlarging the operating region means expanding the control target area based on the host vehicle M, and increasing the width or making the control target including a position far in the traveling direction. The predetermined travel control amount is a size for automatic deceleration or automatic stop. Further, the driving support unit 130 may change at least one of the operation timing, the operation region, and the travel control amount depending on whether the object 230 is crossing or pre-crossing. . In addition, the travel support unit 130 may cause the occupant to be notified of the content of the travel control by the notification control unit 140.

走行支援部130は、例えば、物体230が横断中であると判定された場合に、ブレーキ装置50によって強めのブレーキ制御を行わせ、歩行者240がプレ横断中であると判定された場合に、ブレーキ装置50によって弱めのブレーキ制御を行わせてもよい。   For example, when it is determined that the object 230 is crossing, the driving support unit 130 causes the brake device 50 to perform stronger brake control, and when the pedestrian 240 is determined to be pre-crossing, A weak brake control may be performed by the brake device 50.

通知制御部140は、走行支援部130から横断歩行者に対する制御を行う場合に、通知装置70によって、衝突可能性のある物体230の存在を乗員に通知し、注意喚起を行わせる。例えば、通知制御部140は、衝突可能性のある物体230がプレ横断者である場合には、乗員に対して警報等による軽めの通知を行い、衝突可能性のある物体230が横断者である場合には、緊急警報等による通知を行ってもよい。   When the control unit 140 controls the crossing pedestrian from the driving support unit 130, the notification control unit 140 notifies the occupant of the presence of the object 230 with the possibility of collision by the notification device 70, and causes the driver to be alerted. For example, when the object 230 with the possibility of collision is a pre-crosser, the notification control unit 140 gives a light notification to the occupant by an alarm or the like, and the object 230 with the possibility of collision is a crosser. In some cases, an emergency alert or the like may be notified.

記憶部150には、例えば、信頼度判定情報152、位置情報取得元切替情報154、および走行支援条件156等の情報が格納される。記憶部150は、ROM(Read Only Memory)やRAM(Random Access Memory)、HDD(Hard Disk Drive)、フラッシュメモリ等で実現される。プロセッサが実行するプログラム(車両制御プログラム等)は、予め記憶部150に格納されていてもよいし、図示しない車載インターネット設備等を介して、外部装置からダウンロードされてもよい。また、プログラムは、そのプログラムを格納した可搬型記憶媒体が図示しないドライブ装置に装着されることで記憶部150にインストールされて、自車両M内の車載コンピュータ等により実行されてもよい。   The storage unit 150 stores information such as reliability determination information 152, position information acquisition source switching information 154, and driving support conditions 156, for example. The storage unit 150 is realized by a ROM (Read Only Memory), a RAM (Random Access Memory), a HDD (Hard Disk Drive), a flash memory, or the like. A program (a vehicle control program or the like) executed by the processor may be stored in the storage unit 150 in advance, or may be downloaded from an external device via an in-vehicle internet facility (not shown). The program may be installed in the storage unit 150 by mounting a portable storage medium storing the program on a drive device (not shown) and executed by an in-vehicle computer or the like in the host vehicle M.

[処理フロー]
図7は、実施形態の車両制御装置100により実行される処理の流れを示すフローチャートである。本フローチャートの処理は、例えば、所定周期で繰り返し実行される。まず、物体検出部110は、カメラ10から取得した画像から物体を検出する(ステップS100)。次に、物体検出部110は、検出した物体の位置情報を検出する(ステップS102)。次に、物体検出部110は、レーダ装置20から物体の位置情報を検出する(ステップS104)。次に、信頼度判定部120は、物体検出により検出された物体の属性および状況に基づいて信頼度を判定する(ステップS106)。
[Processing flow]
FIG. 7 is a flowchart illustrating a flow of processing executed by the vehicle control device 100 according to the embodiment. The processing of this flowchart is repeatedly executed at a predetermined cycle, for example. First, the object detection unit 110 detects an object from an image acquired from the camera 10 (step S100). Next, the object detection unit 110 detects position information of the detected object (step S102). Next, the object detection unit 110 detects the position information of the object from the radar device 20 (step S104). Next, the reliability determination unit 120 determines the reliability based on the attribute and status of the object detected by the object detection (step S106).

次に、走行支援部130は、決定した信頼度に応じて、物体230の位置情報の取得元および走行支援条件を取得する(ステップS108)。次に、走行支援部130は、物体230と自車両Mとが衝突する可能性があるか否かを判定し(ステップS110)、衝突する可能性があるか否かを判定する(ステップS112)。衝突する可能性がある場合、走行支援部130は、衝突を回避するために自車両Mの減速制御を行う(ステップS114)。なお、衝突を回避するための走行支援は、減速制御に限定されるものではなく、車線変更等の操舵制御を行ってもよい。これにより、本フローチャートの処理を終了する。   Next, the driving support unit 130 acquires the acquisition source of the position information of the object 230 and the driving support conditions according to the determined reliability (step S108). Next, the driving support unit 130 determines whether or not the object 230 and the host vehicle M may collide (step S110), and determines whether or not there is a possibility of collision (step S112). . If there is a possibility of a collision, the driving support unit 130 performs deceleration control of the host vehicle M in order to avoid the collision (step S114). Note that the travel support for avoiding a collision is not limited to deceleration control, and steering control such as lane change may be performed. Thereby, the processing of this flowchart is terminated.

以上説明した実施形態によれば、車両制御装置は、走行支援の信頼性を向上させることができる。また、実施形態によれば、カメラ10から取得した画像から検出した物体230の信頼度が高い場合に、横分解能が高い画像の情報を用いて自車両Mに対する物体230の横位置を決定することで、物体の位置情報の精度を向上させることができる。また、実施形態によれば、信頼度に応じて、撮像部から取得した画像から決定される位置情報と、レーダ装置から決定される位置情報とを好適に使い分けることで、位置情報の信頼性を向上させることができる。また、実施形態によれば、信頼度やカメラの画像からの物体検出結果に基づいて、自車両の減速制御を行うか否かを確定するための時間を延長することで、衝突可能性の判定結果に対して、より適切に減速制御の判定を行うことができる。   According to the embodiment described above, the vehicle control device can improve the reliability of the driving support. Further, according to the embodiment, when the reliability of the object 230 detected from the image acquired from the camera 10 is high, the lateral position of the object 230 with respect to the host vehicle M is determined using the information of the image with high lateral resolution. Thus, the accuracy of the position information of the object can be improved. In addition, according to the embodiment, the position information determined from the image acquired from the imaging unit and the position information determined from the radar apparatus are appropriately used according to the reliability, thereby improving the reliability of the position information. Can be improved. Further, according to the embodiment, the possibility of collision is determined by extending the time for determining whether or not to perform deceleration control of the host vehicle based on the reliability and the object detection result from the camera image. Deceleration control can be more appropriately determined for the result.

また、実施形態によれば、カメラ10やレーダ装置20等の各検出部による検知有無だけでなく、各検出部の精度変化や信頼度変化も考慮することで、フュージョンセンサとして最適な計測精度と、制御信頼性を確保することができる。   In addition, according to the embodiment, not only the presence / absence of detection by each detection unit such as the camera 10 and the radar apparatus 20 but also the accuracy change and reliability change of each detection unit are considered, so that the optimum measurement accuracy as a fusion sensor can be obtained. Control reliability can be ensured.

なお、上述した実施形態における車両制御装置100は、例えば、自車両Mの自動運転を実行するものであってもよい。自動運転は、加減速のみ自動的に制御する半自動運転でもよい。これらの場合、車両制御装置100は、例えば、予め設定された行動計画に基づいて、自動運転制御により操舵または加減速を制御しながら、自車両Mを走行させる。更に、車両制御装置100の走行支援部130は、自動運転により走行している自車両Mに対し、上述した走行支援による減速制御等を行う。これにより、自車両Mの自動運転中における走行支援の信頼性を向上させることができる。   In addition, the vehicle control apparatus 100 in embodiment mentioned above may perform the automatic driving | operation of the own vehicle M, for example. The automatic operation may be a semi-automatic operation that automatically controls only acceleration / deceleration. In these cases, for example, the vehicle control device 100 causes the host vehicle M to travel while controlling steering or acceleration / deceleration by automatic driving control based on a preset action plan. Further, the travel support unit 130 of the vehicle control device 100 performs the above-described deceleration control by the travel support on the host vehicle M traveling by automatic driving. Thereby, the reliability of the driving assistance during the automatic driving of the host vehicle M can be improved.

以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。   As mentioned above, although the form for implementing this invention was demonstrated using embodiment, this invention is not limited to such embodiment at all, In the range which does not deviate from the summary of this invention, various deformation | transformation and substitution Can be added.

1‥車両制御システム、10…カメラ(撮像部)、20…レーダ装置、30…車両センサ、40…走行駆動力出力装置、50…ブレーキ装置、60…ステアリング装置、70…通知装置、100…車両制御装置、110…物体検出部、120…信頼度判定部、130…走行支援部、140…通知制御部、150…記憶部 DESCRIPTION OF SYMBOLS 1 ... Vehicle control system, 10 ... Camera (imaging part), 20 ... Radar apparatus, 30 ... Vehicle sensor, 40 ... Driving force output device, 50 ... Brake device, 60 ... Steering device, 70 ... Notification device, 100 ... Vehicle Control device, 110 ... object detection unit, 120 ... reliability determination unit, 130 ... travel support unit, 140 ... notification control unit, 150 ... storage unit

Claims (8)

車両の周囲を撮像する撮像部と、
前記撮像部により撮像された画像に基づいて車両周辺の物体を検出する物体検出部と、
前記物体検出部で検出された物体の信頼度を判定する信頼度判定部と、
前記物体検出部により検出された物体に応じて前記車両の走行支援を行う走行支援部であって、前記信頼度判定部により判定された信頼度の高さに基づいて、前記車両の走行支援の内容、または、前記物体検出部により検出した前記物体の位置情報を利用するか否かの少なくとも一方を判定する走行支援部と、
を備える車両制御装置。
An imaging unit for imaging the surroundings of the vehicle;
An object detection unit that detects an object around the vehicle based on an image captured by the imaging unit;
A reliability determination unit that determines the reliability of the object detected by the object detection unit;
A travel support unit that performs travel support of the vehicle according to the object detected by the object detection unit, based on the high reliability determined by the reliability determination unit, A traveling support unit that determines at least one of the content or the position information of the object detected by the object detection unit;
A vehicle control device comprising:
前記物体検出部は、前記信頼度判定部により判定された信頼度が閾値以上である場合に、前記車両の横方向に関する前記物体の位置情報を前記撮像部により得られる画像に基づいて決定する、
請求項1に記載の車両制御装置。
The object detection unit determines position information of the object in the lateral direction of the vehicle based on an image obtained by the imaging unit when the reliability determined by the reliability determination unit is equal to or greater than a threshold value.
The vehicle control device according to claim 1.
電波を放射することによって前記車両と前記車両周辺の物体との位置を計測するレーダ装置を更に備え、
前記物体検出部は、前記信頼度判定部により判定された信頼度が前記閾値以上である場合に、前記車両の横方向に関する前記物体の位置情報を前記撮像部により得られる画像を優先的に用いて決定し、前記車両との距離方向に関する前記物体の位置情報を、前記レーダ装置による計測結果を優先的に用いて決定する、
請求項2に記載の車両制御装置。
A radar device that measures the position of the vehicle and objects around the vehicle by radiating radio waves;
The object detection unit preferentially uses an image obtained by the imaging unit for positional information of the object in the lateral direction of the vehicle when the reliability determined by the reliability determination unit is equal to or greater than the threshold. Determining the position information of the object with respect to the distance direction with the vehicle, using the measurement result by the radar device preferentially,
The vehicle control device according to claim 2.
前記走行支援部は、前記物体検出部により検出された物体の信頼度が閾値未満である場合に、前記車両の減速制御を行うか否かを確定するための時間を延長する、
請求項1から3のうち、いずれか1項に記載の車両制御装置。
The driving support unit extends a time for determining whether to perform deceleration control of the vehicle when the reliability of the object detected by the object detection unit is less than a threshold;
The vehicle control device according to any one of claims 1 to 3.
前記走行支援部は、前記物体検出部による物体の検出に外挿処理を用いている場合、前記車両の減速制御を行うか否かを確定するための時間を延長する、
請求項1から4のうち、いずれか1項に記載の車両制御装置。
The driving support unit extends time for determining whether or not to perform deceleration control of the vehicle, when extrapolation processing is used for object detection by the object detection unit;
The vehicle control device according to any one of claims 1 to 4.
前記走行支援部は、前記物体検出部により前記物体の検出ができていない場合、前記車両の減速制御を行うか否かの判定を行わない、
請求項1から5のうち、いずれか1項に記載の車両制御装置。
The travel support unit does not determine whether to perform deceleration control of the vehicle when the object detection unit has not detected the object.
The vehicle control device according to any one of claims 1 to 5.
車載コンピュータが、
車両の周囲を撮像する撮像部により撮像された画像に基づいて車両周辺の物体を検出し、
検出された前記物体の信頼度を判定し、
検出された前記物体に応じて前記車両の走行支援を行い、
判定された前記信頼度の高さに基づいて、前記車両の走行支援の内容、または、検出した前記物体の位置情報を利用するか否かの少なくとも一方を判定する、
車両制御方法。
In-vehicle computer
Detecting an object around the vehicle based on an image captured by an imaging unit that captures the periphery of the vehicle;
Determine the reliability of the detected object,
Assisting the vehicle to travel according to the detected object,
Based on the determined high degree of reliability, at least one of whether to use the content of driving support of the vehicle or position information of the detected object is determined.
Vehicle control method.
車載コンピュータに、
車両の周囲を撮像する撮像部により撮像された画像に基づいて車両周辺の物体を検出させ、
検出された前記物体の信頼度を判定させ、
検出された前記物体に応じて前記車両の走行支援を行わせ、
判定された前記信頼度の高さに基づいて、前記車両の走行支援の内容、または、検出した前記物体の位置情報を利用するか否かの少なくとも一方を判定させる、
車両制御プログラム。
On-board computer
Detecting an object around the vehicle based on an image captured by an imaging unit that captures the periphery of the vehicle;
Determine the reliability of the detected object,
According to the detected object, driving support of the vehicle is performed,
Based on the determined high reliability, at least one of whether to use the content of the driving support of the vehicle or the position information of the detected object is determined.
Vehicle control program.
JP2016178534A 2016-09-13 2016-09-13 Vehicle control device, vehicle control method, and vehicle control program Active JP6478414B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016178534A JP6478414B2 (en) 2016-09-13 2016-09-13 Vehicle control device, vehicle control method, and vehicle control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016178534A JP6478414B2 (en) 2016-09-13 2016-09-13 Vehicle control device, vehicle control method, and vehicle control program

Publications (2)

Publication Number Publication Date
JP2018043576A true JP2018043576A (en) 2018-03-22
JP6478414B2 JP6478414B2 (en) 2019-03-06

Family

ID=61694180

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016178534A Active JP6478414B2 (en) 2016-09-13 2016-09-13 Vehicle control device, vehicle control method, and vehicle control program

Country Status (1)

Country Link
JP (1) JP6478414B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020187455A (en) * 2019-05-13 2020-11-19 株式会社デンソー Target identification device and driving support device
CN112272946A (en) * 2018-06-14 2021-01-26 日立汽车系统株式会社 Vehicle control device
WO2021070880A1 (en) * 2019-10-11 2021-04-15 株式会社デンソー Control device
CN112970051A (en) * 2018-11-14 2021-06-15 株式会社电装 Information processing device and driving support device
CN113022554A (en) * 2019-12-05 2021-06-25 丰田自动车株式会社 Driving support device
CN113168767A (en) * 2018-11-30 2021-07-23 索尼集团公司 Information processing apparatus, information processing system, and information processing method
CN115139787A (en) * 2021-03-30 2022-10-04 本田技研工业株式会社 Driving support device, driving support method, and storage medium
WO2023188453A1 (en) * 2022-03-31 2023-10-05 日立Astemo株式会社 Braking support control device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007091208A (en) * 2005-08-31 2007-04-12 Honda Motor Co Ltd Travel safety apparatus for vehicle
JP2007279892A (en) * 2006-04-04 2007-10-25 Honda Motor Co Ltd Control device for collision prediction system, collision prediction method and occupant protection system
JP2014191485A (en) * 2013-03-26 2014-10-06 Sharp Corp Obstacle detection device and electrically-driven vehicle with the same

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007091208A (en) * 2005-08-31 2007-04-12 Honda Motor Co Ltd Travel safety apparatus for vehicle
JP2007279892A (en) * 2006-04-04 2007-10-25 Honda Motor Co Ltd Control device for collision prediction system, collision prediction method and occupant protection system
JP2014191485A (en) * 2013-03-26 2014-10-06 Sharp Corp Obstacle detection device and electrically-driven vehicle with the same

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112272946A (en) * 2018-06-14 2021-01-26 日立汽车系统株式会社 Vehicle control device
CN112272946B (en) * 2018-06-14 2023-06-09 日立安斯泰莫株式会社 Vehicle control device
CN112970051A (en) * 2018-11-14 2021-06-15 株式会社电装 Information processing device and driving support device
CN113168767A (en) * 2018-11-30 2021-07-23 索尼集团公司 Information processing apparatus, information processing system, and information processing method
CN113168767B (en) * 2018-11-30 2023-08-15 索尼集团公司 Information processing apparatus, information processing system, and information processing method
JP2020187455A (en) * 2019-05-13 2020-11-19 株式会社デンソー Target identification device and driving support device
JP7200820B2 (en) 2019-05-13 2023-01-10 株式会社デンソー Traffic sign identification device and driving support device
JP2021064097A (en) * 2019-10-11 2021-04-22 株式会社デンソー Control unit
WO2021070880A1 (en) * 2019-10-11 2021-04-15 株式会社デンソー Control device
CN113022554A (en) * 2019-12-05 2021-06-25 丰田自动车株式会社 Driving support device
CN115139787A (en) * 2021-03-30 2022-10-04 本田技研工业株式会社 Driving support device, driving support method, and storage medium
US12012100B2 (en) 2021-03-30 2024-06-18 Honda Motor Co., Ltd. Driving support device, driving support method, and storage medium
WO2023188453A1 (en) * 2022-03-31 2023-10-05 日立Astemo株式会社 Braking support control device

Also Published As

Publication number Publication date
JP6478414B2 (en) 2019-03-06

Similar Documents

Publication Publication Date Title
JP6478414B2 (en) Vehicle control device, vehicle control method, and vehicle control program
JP7132713B2 (en) Vehicle cruise control device, vehicle cruise control system, and vehicle cruise control method
CN108995652B (en) Steering assist device
CN108583570B (en) Vehicle control device
CN108116385B (en) Vehicle control method and vehicle control system
JP5794381B2 (en) Travel control device and travel control method
US11180139B2 (en) Driving support device and driving support method
JP6462629B2 (en) Driving support device and driving support program
JP7272255B2 (en) Driving support device
WO2014162941A1 (en) Collision safety control device
JP7435725B2 (en) Driving support device
JP2019002689A (en) Target detection device
JP5298104B2 (en) Vehicle control device
JP2012226635A (en) Collision prevention safety device for vehicle
JP5835169B2 (en) Driving support device and driving support method
JP2018075900A (en) Vehicle control apparatus, vehicle control method and vehicle control program
JP5804373B2 (en) Target travel position setting device and steering control system
JP2009208505A (en) Lane keep assist system, lane keep assist method
JP6535537B2 (en) Driving support device for vehicle
JP2018089990A (en) Driving support device
JP2022023870A (en) Display control device
JP2016011088A (en) Vehicle control device, vehicle control method, and program for vehicle control
JP2016011087A (en) Travel support device, travel support method and travel support program
JP2020083048A (en) Image display device
WO2021172532A1 (en) Parking assistance device and parking assistance method

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180626

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180823

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20181005

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190204

R150 Certificate of patent or registration of utility model

Ref document number: 6478414

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150