JP2012014527A - Pedestrian detection device - Google Patents

Pedestrian detection device Download PDF

Info

Publication number
JP2012014527A
JP2012014527A JP2010151347A JP2010151347A JP2012014527A JP 2012014527 A JP2012014527 A JP 2012014527A JP 2010151347 A JP2010151347 A JP 2010151347A JP 2010151347 A JP2010151347 A JP 2010151347A JP 2012014527 A JP2012014527 A JP 2012014527A
Authority
JP
Japan
Prior art keywords
vehicle
search range
mode
pedestrian
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010151347A
Other languages
Japanese (ja)
Inventor
Daisuke Konaka
大輔 古仲
Sukeyuki Usami
祐之 宇佐美
Arata Takahashi
新 高橋
Michihiko Ota
充彦 太田
Kunihiro Goto
邦博 後藤
Masayoshi Hiratsuka
誠良 平塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Toyota Central R&D Labs Inc
Original Assignee
Toyota Motor Corp
Toyota Central R&D Labs Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp, Toyota Central R&D Labs Inc filed Critical Toyota Motor Corp
Priority to JP2010151347A priority Critical patent/JP2012014527A/en
Publication of JP2012014527A publication Critical patent/JP2012014527A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a pedestrian detection device capable of accurately detecting a pedestrian for a vehicle taking a right or left turn, the pedestrian who is crossing a pedestrian crosswalk which a vehicle will cross after taking the right or left turn.SOLUTION: A pedestrian detection device comprises: image acquisition means to acquire an image of the surroundings of a vehicle; right/left turn prediction means to predict that the vehicle is taking a right or left turn; search mode setting means to select, based on right/left turn prediction information, either a search area-equalized mode to search inside an image region to be acquired with pre-set predetermined accuracy or a search area-biased mode to divide an image region into a plurality of search areas and search the areas with respectively different accuracy levels based on the right/left turn prediction information; pedestrian search means to search for a pedestrian based on the search area mode; and result report means to report the search result. The search mode setting means sets the search area mode based on a distance between the vehicle and an intersection where the vehicle intends to take the right or left turn.

Description

本発明は、車両に搭載される歩行者検知装置に関し、より特定的には、最適な歩行者探索領域を設定しながら歩行者を検知する歩行者検知装置に関する。   The present invention relates to a pedestrian detection device mounted on a vehicle, and more particularly to a pedestrian detection device that detects a pedestrian while setting an optimal pedestrian search area.

従来、車両に搭載される歩行者検知装置は、カメラによって取得した画像から、車両の前方等に存在する歩行者を検知する。そして、車両と、検知した歩行者とが衝突する危険性があれば、当該衝突を回避するように運転者に警告したり、車両の走行速度を制御したりするプリクラッシュセーフティシステムが開発されている。   Conventionally, a pedestrian detection device mounted on a vehicle detects a pedestrian existing in front of the vehicle or the like from an image acquired by a camera. And if there is a risk of collision between the vehicle and the detected pedestrian, a pre-crash safety system has been developed that warns the driver and controls the traveling speed of the vehicle to avoid the collision. Yes.

さらに、通常、カメラ等によって取得可能な画像領域全体において障害物を検知するが、特許文献1に開示されている障害物検知装置は、車両と障害物との衝突の可能性が高いと予想される場所において、道路状況に対応した障害物検知領域を設定している。   Furthermore, although obstacles are usually detected in the entire image area that can be acquired by a camera or the like, the obstacle detection device disclosed in Patent Document 1 is expected to have a high possibility of collision between the vehicle and the obstacles. The obstacle detection area corresponding to the road condition is set at the location.

具体的には、特許文献1に開示されている障害物検知装置は、カーナビゲーション装置に記録されている地図情報、およびカメラによって取得された画像情報に基づいて、障害物検知領域を設定し、さらには、車両走行中に運転者のハンドル操作(ステア角)、および車速等に応じて、車両の予測進路に応じた障害物検知領域を設定している。   Specifically, the obstacle detection device disclosed in Patent Literature 1 sets an obstacle detection region based on map information recorded in the car navigation device and image information acquired by the camera, Furthermore, an obstacle detection area corresponding to the predicted course of the vehicle is set according to the driver's steering operation (steer angle), vehicle speed, and the like while the vehicle is traveling.

特開2009−271766号公報JP 2009-271766 A

しかしながら、特許文献1に開示されている障害物検知装置では、車両が右折または左折する場合、当該車両が右折または左折した直後の横断歩道を横断する歩行者を特別考慮して障害物検知領域を設定していないため、当該歩行者を精度よく検知することができない。   However, in the obstacle detection device disclosed in Patent Document 1, when a vehicle turns right or left, an obstacle detection region is specially considered for a pedestrian crossing a pedestrian crossing immediately after the vehicle turns right or left. Since it is not set, the pedestrian cannot be detected accurately.

それ故に、本発明の目的は、車両が右折または左折する場合、当該車両が右折または左折した直後の横断歩道を横断する歩行者を精度よく検知することができる歩行者検知装置を提供することである。   Therefore, an object of the present invention is to provide a pedestrian detection device capable of accurately detecting a pedestrian crossing a pedestrian crossing immediately after the vehicle turns right or left when the vehicle turns right or left. is there.

上記目的を達成するために、本発明の歩行者検知装置は、車両に搭載される歩行者検知装置であって、車両周辺の画像を取得する画像取得手段と、車両が右折または左折することを予測する右左折予測手段と、画像取得手段によって取得される画像領域内を予め設定された所定の精度で探索する探索範囲均等モードと、画像取得手段によって取得される画像領域を複数の探索領域に分割し、それぞれ異なる精度で探索する探索範囲偏重モードとのいずれかの探索範囲モードを、右左折予測手段による予測情報に基づいて設定する探索範囲モード設定手段と、探索範囲モード設定手段によって設定された探索範囲モードに基づいて、画像取得手段によって取得された画像から歩行者を探索する歩行者探索手段と、歩行者探索手段によって探索された結果を通知する結果通知手段とを備え、探索範囲モード設定手段は、車両と、車両が右折または左折する交差点との距離に基づいて、探索範囲モードを設定することを特徴とする。
かかる構成により、画像取得手段によって取得される画像領域内を予め設定された所定の精度で探索する探索範囲均等モードと、画像取得手段によって取得される画像領域を複数の探索領域に分割し、それぞれ異なる精度で探索する探索範囲偏重モードとのいずれかの探索範囲モードを、右左折予測手段による予測情報に基づいて設定するため、車両が右折または左折する場合、当該車両が右折または左折した直後の横断歩道を横断する歩行者を精度よく検知することができる。
In order to achieve the above object, a pedestrian detection device of the present invention is a pedestrian detection device mounted on a vehicle, wherein image acquisition means for acquiring an image around the vehicle, and the vehicle turns right or left. A left / right turn prediction means for predicting, a search range equalization mode for searching in an image area acquired by the image acquisition means with a predetermined accuracy, and an image area acquired by the image acquisition means as a plurality of search areas The search range mode setting means for setting one of the search range modes of the search range bias mode for dividing and searching with different accuracy based on the prediction information by the right / left turn prediction means and the search range mode setting means are set. Based on the search range mode, the pedestrian search means for searching for a pedestrian from the image acquired by the image acquisition means, and the search by the pedestrian search means. And a result notification means for notifying a result, the search range mode setting means, a vehicle, based on the distance between the intersection which the vehicle turns right or left turn, and sets the search range mode.
With this configuration, the search range equalization mode for searching the image area acquired by the image acquisition means with a predetermined accuracy set in advance, and the image area acquired by the image acquisition means are divided into a plurality of search areas, In order to set one of the search range modes with the search range bias mode to search with different accuracy based on the prediction information by the right / left turn prediction means, when the vehicle turns right or left, immediately after the vehicle turns right or left It is possible to accurately detect a pedestrian crossing a pedestrian crossing.

好ましい探索範囲偏重モードは、分割された複数の探索領域のうち、少なくとも1つを高い精度で探索する特定領域を設定することを特徴とする。
かかる構成により、分割された複数の探索領域のうち、少なくとも1つを高い精度で探索するため、高効率に歩行者を検知することができる。
A preferable search range bias mode is characterized in that a specific region for searching at least one of a plurality of divided search regions with high accuracy is set.
With this configuration, since at least one of the divided search areas is searched with high accuracy, a pedestrian can be detected with high efficiency.

好ましい探索範囲偏重モードは、分割された複数の探索領域のうち、特定領域以外の領域を低い精度で探索することを特徴とする。
かかる構成により、高い精度で探索する特定領域と、低い精度で探索する特定領域以外の領域とが設定されるため、車両と衝突の危険性が高い領域において歩行者を重点的に探索することができる。
A preferable search range bias mode is characterized in that a region other than the specific region is searched with low accuracy among a plurality of divided search regions.
With this configuration, since a specific area to be searched with high accuracy and an area other than the specific area to be searched with low accuracy are set, it is possible to focus on searching for pedestrians in areas where there is a high risk of collision with the vehicle. it can.

好ましい探索範囲モード設定手段は、車両が、右左折予測手段によって車両が右折または左折すると予測された交差点に近接する予め設定された第1タイミングで、探索範囲偏重モードを探索範囲モードとして設定することを特徴とする。
かかる構成により、車両が右折または左折すると予測された交差点に近接する予め設定された第1タイミングで、探索範囲偏重モードを探索範囲モードとして設定するため、当該車両が右折または左折した直後の横断歩道を横断する歩行者を精度よく検知することができる。
The preferred search range mode setting means sets the search range bias mode as the search range mode at a first preset timing close to an intersection where the vehicle is predicted to turn right or left by the right / left turn prediction means. It is characterized by.
With this configuration, the search range bias mode is set as the search range mode at the first preset timing close to the intersection where the vehicle is predicted to turn right or left, so the pedestrian crossing immediately after the vehicle turns right or left A pedestrian crossing the road can be detected with high accuracy.

さらに好ましい探索範囲モード設定手段は、右左折予測手段によって車両が右折または左折すると予測された交差点を、車両の右折または左折開始後予め設定された第2タイミングで、探索範囲均等モードを探索範囲モードとして設定することを特徴とする。
かかる構成により、車両の右折または左折開始後予め設定された第2タイミングで、探索範囲均等モードを探索範囲モードとして設定するため、当該車両が右折または左折した直後の横断歩道を横断する歩行者を精度よく広範囲において検知することができる。
More preferably, the search range mode setting means sets the search range equal mode to the search range mode at the second timing set in advance after the vehicle starts turning right or left after the vehicle is predicted to turn right or left by the right / left turn prediction means. It is characterized by setting as.
With this configuration, the pedestrian crossing the pedestrian crossing immediately after the vehicle has made a right or left turn in order to set the search range equal mode as the search range mode at the second timing set in advance after the vehicle starts turning right or left. It can be detected in a wide range with high accuracy.

また、さらに好ましい探索範囲モード設定手段は、車両と、右左折予測手段によって車両が右折または左折すると予測された交差点との距離を算出する車両位置算出手段と、車両位置算出手段によって算出された距離が予め設定された閾値未満であるか否かを判定する車両位置判定手段と、車両位置判定手段によって距離が閾値未満であると判定された場合、探索範囲偏重モードを探索範囲モードとして選択し、車両位置判定手段によって距離が閾値以上であると判定された場合、探索範囲均等モードを探索範囲モードとして選択する探索範囲モード選択手段とを含むことを特徴とする。
かかる構成により、車両と、当該車両が右折または左折すると予測された交差点との距離に基づいて、探索範囲偏重モードと探索範囲均等モードとのいずれかの探索範囲モードを選択するため、交差点における車両走行の状況に応じて、歩行者を精度よく検知することができる。
Further, the more preferable search range mode setting means includes a vehicle position calculation means for calculating a distance between the vehicle and an intersection predicted to turn right or left by the right / left turn prediction means, and a distance calculated by the vehicle position calculation means. If the distance is determined to be less than the threshold by the vehicle position determination means and the vehicle position determination means to determine whether or not is less than a preset threshold, the search range bias mode is selected as the search range mode, And a search range mode selection unit that selects the search range equal mode as the search range mode when the vehicle position determination unit determines that the distance is equal to or greater than the threshold value.
With this configuration, the vehicle at the intersection is selected in order to select one of the search range mode between the search range bias mode and the search range equal mode based on the distance between the vehicle and the intersection where the vehicle is predicted to turn right or left. A pedestrian can be detected with high accuracy according to the traveling situation.

さらに好ましくは、右左折予測手段によって車両が左折すると予測された交差点を車両の左折開始後において、車両位置判定手段は、車両位置算出手段によって算出された距離が車両の左折後における走行車線幅未満であるか否かを判定し、探索範囲モード選択手段は、車両位置判定手段によって距離が走行車線幅未満であると判定された場合、探索範囲均等モードを探索範囲モードとして設定することを特徴とする。
かかる構成により、車両と、当該車両が左折すると予測された交差点との距離に基づいて、探索範囲偏重モードと探索範囲均等モードとのいずれかの探索範囲モードを選択するため、当該車両の左折状態に応じて、歩行者を精度よく広範囲において検知することができる。
More preferably, after the left turn of the vehicle is started at the intersection where the vehicle is predicted to turn left by the right / left turn prediction means, the vehicle position determination means has a distance calculated by the vehicle position calculation means that is less than the travel lane width after the left turn of the vehicle. The search range mode selection means sets the search range equal mode as the search range mode when the vehicle position determination means determines that the distance is less than the travel lane width. To do.
With this configuration, the left turn state of the vehicle is selected in order to select one of the search range bias mode and the search range equal mode based on the distance between the vehicle and the intersection where the vehicle is predicted to turn left. Accordingly, it is possible to accurately detect a pedestrian in a wide range.

さらに好ましくは、右左折予測手段によって車両が右折すると予測された交差点を車両の右折開始後において、車両位置判定手段は、車両が交差点を通過したか否かを判定し、探索範囲モード選択手段は、車両位置判定手段によって車両が交差点を通過したと判定された場合、探索範囲均等モードを探索範囲モードとして設定することを特徴とする。
かかる構成により、車両が交差点を通過したか否かに基づいて、探索範囲偏重モードと探索範囲均等モードとのいずれかの探索範囲モードを選択するため、当該車両の右折状態に応じて、歩行者を精度よく広範囲において検知することができる。
More preferably, after the vehicle starts to turn right at the intersection predicted to turn right by the right / left turn prediction means, the vehicle position determination means determines whether the vehicle has passed the intersection, and the search range mode selection means is When the vehicle position determination means determines that the vehicle has passed the intersection, the search range equalization mode is set as the search range mode.
With this configuration, a pedestrian is selected according to the right turn state of the vehicle in order to select one of the search range bias mode and the search range equal mode based on whether or not the vehicle has passed the intersection. Can be accurately detected over a wide range.

また、好ましくは、車両の右折または左折を示すウィンカーを制御するウィンカー制御手段を、さらに備え、第2タイミングは、ウィンカー制御手段によって車両の右折または左折が示されているウィンカーがキャンセルされるタイミングであることを特徴とする。
かかる構成により、ウィンカーのキャンセルに基づいて、探索範囲偏重モードと探索範囲均等モードとのいずれかの探索範囲モードを選択するため、当該車両の右折または左折状態に応じて、歩行者を精度よく広範囲において検知することができる。
Preferably, the vehicle further includes a winker control means for controlling a winker indicating a right turn or a left turn of the vehicle, and the second timing is a timing at which the winker indicating a right turn or a left turn of the vehicle is canceled by the winker control means. It is characterized by being.
With this configuration, the search range mode is selected from the search range bias mode and the search range equal mode based on the blinker cancellation, so that the pedestrian can be accurately widened according to the right or left turn state of the vehicle. Can be detected.

また、好ましくは、右左折予測手段によって車両が左折すると予測された場合、画像領域内のうちの左側領域は、画像領域内のうちの右側領域より高い精度で探索され、右左折予測手段によって車両が右折すると予測された場合、画像領域内のうちの右側領域は、画像領域内のうちの左側領域より高い精度で探索されることを特徴とする。
かかる構成により、車両が左折または右折する予測に基づいて、画像領域内のうち、高精度で探索する領域を設定するため、当該車両と衝突の危険性が高い歩行者を精度よく検知することができる。
Preferably, if the vehicle is predicted to turn left by the right / left turn prediction means, the left area in the image area is searched with higher accuracy than the right area in the image area, and the vehicle is detected by the right / left turn prediction means. Is predicted to turn right, the right area in the image area is searched with higher accuracy than the left area in the image area.
With this configuration, based on the prediction that the vehicle will turn left or right, a region to be searched with high accuracy is set in the image region, so that a pedestrian with a high risk of collision with the vehicle can be detected with high accuracy. it can.

また、好ましい探索範囲偏重モードは、分割された複数の探索領域のうち、特定領域を高い精度で探索し、特定領域以外の領域を探索しないことを特徴とする。
かかる構成により、車両と衝突の危険性が高い歩行者を集中的に探索することができる。
Further, a preferable search range bias mode is characterized in that a specific area is searched with high accuracy among a plurality of divided search areas, and an area other than the specific area is not searched.
With such a configuration, it is possible to intensively search for a pedestrian who has a high risk of collision with the vehicle.

好ましくは、高い精度は、高負荷であること、および/または高精細であることを特徴とする。
かかる構成により、より正確に歩行者を検知することができる。
Preferably, the high accuracy is characterized by high load and / or high definition.
With this configuration, a pedestrian can be detected more accurately.

上記目的を達成するために、本発明の歩行者検知方法は、車両に搭載される歩行者検知装置が実行する歩行者検知方法であって、車両周辺の画像を取得する画像取得ステップと、車両が右折または左折することを予測する右左折予測ステップと、車両と、右左折予測ステップで車両が右折または左折すると予測された交差点との距離を算出する車両位置算出ステップと、画像取得ステップで取得される画像領域内を予め設定された所定の精度で探索する探索範囲均等モードと、画像取得ステップで取得される画像領域を複数の探索領域に分割し、それぞれ異なる精度で探索する探索範囲偏重モードとのいずれかの探索範囲モードを、車両位置算出ステップで算出された車両と交差点との距離に基づいて設定する探索範囲モード設定ステップと、探索範囲モード設定ステップで設定された探索範囲モードに基づいて、画像取得ステップで取得された画像から歩行者を探索する歩行者探索ステップと、歩行者探索ステップによって探索された結果を通知する結果通知ステップとを含む。   In order to achieve the above object, a pedestrian detection method of the present invention is a pedestrian detection method executed by a pedestrian detection device mounted on a vehicle, an image acquisition step for acquiring an image around the vehicle, and a vehicle Obtained in a right / left turn prediction step for predicting that the vehicle will turn right or left, a vehicle position calculation step for calculating the distance between the vehicle and the intersection where the vehicle is predicted to turn right or left in the right / left turn prediction step, and an image acquisition step Search range equalization mode for searching within a predetermined image area with a predetermined accuracy, and search range bias mode for dividing the image area acquired at the image acquisition step into a plurality of search areas and searching with different accuracy A search range mode setting step for setting any one of the search range modes based on the distance between the vehicle and the intersection calculated in the vehicle position calculation step; Based on the search range mode set in the search range mode setting step, a pedestrian search step for searching for a pedestrian from the image acquired in the image acquisition step, and a result notification for notifying a result searched for in the pedestrian search step Steps.

また、上記目的を達成するために、上述した本発明の歩行者検知装置の各構成が行うそれぞれの処理は、一連の処理手順を与える歩行者検知方法として捉えることができる。この方法は、一連の処理手順をコンピュータに実行させるためのプログラムの形式で提供される。このプログラムは、コンピュータ読み取り可能な記録媒体に記録された形態で、コンピュータに導入されてもよい。   Moreover, in order to achieve the said objective, each process which each structure of the pedestrian detection apparatus of this invention mentioned above can be regarded as a pedestrian detection method which gives a series of processing procedures. This method is provided in the form of a program for causing a computer to execute a series of processing procedures. This program may be installed in a computer in a form recorded on a computer-readable recording medium.

上述のように、本発明の歩行者検知装置によれば、車両が右折または左折する場合、当該車両が右折または左折することを予測し、当該予測に基づいて歩行者を探索する歩行者探索領域を設定するため、当該車両が右折または左折した直後の横断歩道を横断する歩行者を精度よく検知することができる。さらに、車両の右折または左折状態に応じて、歩行者を探索する歩行者探索領域を広範囲にするため、当該車両が右折または左折する際、および右折または左折した直後において、歩行者を精度よく広範囲において検知することができる。   As described above, according to the pedestrian detection device of the present invention, when a vehicle turns right or left, a pedestrian search area that predicts that the vehicle turns right or left and searches for pedestrians based on the prediction. Therefore, it is possible to accurately detect a pedestrian who crosses the pedestrian crossing immediately after the vehicle turns right or left. Furthermore, in order to broaden the pedestrian search area for searching for pedestrians according to the right or left turn state of the vehicle, a wide range of pedestrians can be accurately detected when the vehicle makes a right or left turn and immediately after a right or left turn. Can be detected.

本発明の第1の実施形態に係る歩行者検知装置100を示す図The figure which shows the pedestrian detection apparatus 100 which concerns on the 1st Embodiment of this invention. 本発明の第1の実施形態に係る歩行者検知装置100を機能的に示すブロック図The block diagram which shows functionally the pedestrian detection apparatus 100 which concerns on the 1st Embodiment of this invention. 本発明の第1の実施形態に係る歩行者検知装置100が実行する歩行者検知方法(左折)300を示すフローチャートThe flowchart which shows the pedestrian detection method (left turn) 300 which the pedestrian detection apparatus 100 which concerns on the 1st Embodiment of this invention performs. 車両に搭載されたカメラが当該車両の前方周辺を撮像する様子を示す図The figure which shows a mode that the camera mounted in the vehicle images the front periphery of the said vehicle 図4に示したように車両に搭載されたカメラによって撮像された当該車両の前方周辺画像を示す図The figure which shows the front periphery image of the said vehicle imaged with the camera mounted in the vehicle as shown in FIG. カーナビゲーションシステムにおけるルート案内によって、車両が左折することを予測する様子を示す図The figure which shows a mode that a vehicle is predicted to turn left by the route guidance in a car navigation system 第1距離P1を示す図The figure which shows 1st distance P1 GPS情報および地図情報に基づいて第1距離P1を算出する方法を示す図The figure which shows the method of calculating 1st distance P1 based on GPS information and map information 車両が左折すると予測されている交差点に近づいて、車両の左側に注視する様子を示す図The figure which shows a mode that the vehicle approaches the intersection predicted to turn left and gazes at the left side of the vehicle 車両が左折すると予測されている交差点において、車両の左折状態が進んで、車両の左側および右側に注視する様子を示す図The figure which shows a mode that the left turn state of a vehicle progresses in the intersection where a vehicle is predicted to turn left, and it gazes at the left side and the right side of a vehicle 車両の左側領域と車両の右側領域とにおける演算負荷比率を示す図The figure which shows the calculation load ratio in the left side area | region of a vehicle, and the right side area | region of a vehicle 車両の左側領域と車両の右側領域とにおける演算負荷比率を徐々に変化させる様子を示す図The figure which shows a mode that the calculation load ratio in the left side area | region of a vehicle and the right side area | region of a vehicle is changed gradually. 本発明の第1の実施形態に係る歩行者検知装置100が実行する歩行者検知方法(右折)400を示すフローチャートThe flowchart which shows the pedestrian detection method (right turn) 400 which the pedestrian detection apparatus 100 which concerns on the 1st Embodiment of this invention performs. カーナビゲーションシステムにおけるルート案内によって、車両が右折することを予測する様子を示す図The figure which shows a mode that a vehicle is predicted to turn right by route guidance in a car navigation system 第1距離P1を示す図The figure which shows 1st distance P1 車両が右折すると予測されている交差点に近づいて、車両の右側に注視する様子を示す図The figure which shows a mode that a vehicle approaches the intersection predicted to turn right and gazes at the right side of the vehicle 車両が交差点を通過していない様子を示す図The figure which shows a mode that vehicles do not pass the intersection 車両が右折すると予測されている交差点において、車両の右折状態が進んで、車両の左側および右側に注視する様子を示す図The figure which shows a mode that the right turn state of a vehicle progresses in the intersection where a vehicle is predicted to turn right, and it gazes at the left side and the right side of the vehicle 本発明の第2の実施形態に係る歩行者検知装置500を示す図The figure which shows the pedestrian detection apparatus 500 which concerns on the 2nd Embodiment of this invention. 本発明の第2の実施形態に係る歩行者検知装置500を機能的に示すブロック図The block diagram which shows functionally the pedestrian detection apparatus 500 which concerns on the 2nd Embodiment of this invention. 本発明の第2の実施形態に係る歩行者検知装置500が実行する歩行者検知方法(左折)700を示すフローチャートThe flowchart which shows the pedestrian detection method (left turn) 700 which the pedestrian detection apparatus 500 which concerns on the 2nd Embodiment of this invention performs.

以下、本発明の各実施形態について、図面を参照しながら説明する。
<第1の実施形態>
図1は、本発明の第1の実施形態に係る歩行者検知装置100を示す図である。図1において、歩行者検知装置100は、歩行者検知カメラ110と、歩行者検知判断ECU(Electronic Control Unit)120と、探索範囲制御ECU130と、表示用ディスプレイ制御ECU140と、表示用ディスプレイ150と、カーナビゲーションECU160とを備える。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
<First Embodiment>
FIG. 1 is a diagram showing a pedestrian detection device 100 according to the first embodiment of the present invention. 1, a pedestrian detection device 100 includes a pedestrian detection camera 110, a pedestrian detection determination ECU (Electronic Control Unit) 120, a search range control ECU 130, a display display control ECU 140, a display display 150, And a car navigation ECU 160.

図1において、歩行者検知カメラ110は、例えば、車両の前方部に搭載されており、主として、当該車両の前方に存在する歩行者を検知するための画像を撮像する。具体的には、歩行者検知カメラ110には赤外線カメラが用いられる。   In FIG. 1, a pedestrian detection camera 110 is mounted, for example, in the front part of a vehicle, and mainly captures an image for detecting a pedestrian existing in front of the vehicle. Specifically, an infrared camera is used as the pedestrian detection camera 110.

歩行者検知判断ECU120は、歩行者検知カメラ110によって撮像された画像(撮像情報)から歩行者を探索し、歩行者が存在するか否かを判断する。なお、歩行者検知判断ECU120は、探索範囲制御ECU130からの探索範囲情報に基づいて、歩行者の存在に注意すべき領域について、歩行者を探索する。   Pedestrian detection judgment ECU120 searches for a pedestrian from the image (imaging information) imaged by the pedestrian detection camera 110, and judges whether a pedestrian exists. The pedestrian detection determination ECU 120 searches for a pedestrian in an area where attention should be paid to the presence of the pedestrian based on the search range information from the search range control ECU 130.

探索範囲制御ECU130は、カーナビゲーションECU160からの走行中道路情報および走行予定経路情報に基づいて、歩行者の存在に注意すべき領域を判断し、歩行者を探索する探索範囲を制御する。なお、歩行者の存在に注意すべき領域、および探索範囲は、カーナビゲーションECU160からの走行中道路情報、および走行予定経路情報に基づいて制御される。当該制御方法についての詳細な説明は後述する。   The search range control ECU 130 determines a region where attention should be paid to the presence of a pedestrian based on the traveling road information and planned travel route information from the car navigation ECU 160, and controls the search range for searching for the pedestrian. It should be noted that the region that should be noted of the presence of a pedestrian and the search range are controlled based on the road information on travel from the car navigation ECU 160 and the planned travel route information. A detailed description of the control method will be described later.

表示用ディスプレイ制御ECU140は、歩行者検知判断ECU120からのディスプレイ表示情報、および歩行者検知情報に基づいて、表示用ディスプレイ150に表示する画面を制御する。例えば、表示用ディスプレイ制御ECU140は、歩行者検知カメラ110によって撮像された画像を表示用ディスプレイ150に表示させ、当該画像領域内において検知した歩行者を強調して表示させてもよい。なお、表示用ディスプレイ制御ECU140と、歩行者検知判断ECU120とは、例えば、デジタル信号線を介して通信する。さらに、当該画像領域内において歩行者を検知した場合、当該検知した歩行者を表示用ディスプレイに表示させるだけでなく、例えば、警告音を鳴らすことによって運転者に通知してもよい。   The display control ECU 140 controls the screen displayed on the display 150 based on the display display information from the pedestrian detection determination ECU 120 and the pedestrian detection information. For example, the display control ECU 140 may display an image captured by the pedestrian detection camera 110 on the display 150 and display the pedestrian detected in the image area with emphasis. Note that the display control ECU 140 for display and the pedestrian detection determination ECU 120 communicate via, for example, a digital signal line. Further, when a pedestrian is detected in the image area, the detected pedestrian may be displayed on the display for display, or may be notified to the driver, for example, by sounding a warning sound.

表示用ディスプレイ150は、表示用ディスプレイ制御ECU140からの画面情報に基づいて、画面表示する。   The display for display 150 displays a screen based on the screen information from the display control ECU 140 for display.

カーナビゲーションECU160は、GPS(Global Positioning System)情報、およびメモリ等に記録されている地図情報に基づいて、車両が現在走行している道路の情報(走行中道路情報)、および現在地から目的地までの経路情報(走行予定経路情報)を探索範囲制御ECU130に通知する。なお、カーナビゲーションECU160と探索範囲制御ECU130とは、例えば、CAN(Controller Area Network)通信線を介して通信する。   The car navigation ECU 160 is based on GPS (Global Positioning System) information and map information recorded in a memory or the like, information on the road on which the vehicle is currently traveling (traveling road information), and from the current location to the destination. The search range control ECU 130 is notified of the route information (scheduled travel route information). The car navigation ECU 160 and the search range control ECU 130 communicate via, for example, a CAN (Controller Area Network) communication line.

図2は、本発明の第1の実施形態に係る歩行者検知装置100を機能的に示すブロック図である。図2において、歩行者検知装置100は、画像取得手段210と、歩行者探索手段220と、探索範囲モード設定手段230と、結果通知手段240と、右左折予測手段250と、記録手段260とを備える。   FIG. 2 is a block diagram functionally showing the pedestrian detection apparatus 100 according to the first embodiment of the present invention. In FIG. 2, the pedestrian detection apparatus 100 includes an image acquisition unit 210, a pedestrian search unit 220, a search range mode setting unit 230, a result notification unit 240, a right / left turn prediction unit 250, and a recording unit 260. Prepare.

画像取得手段210は、歩行者検知カメラ110によって車両周辺を撮像し、当該車両周辺の画像を取得する。   The image acquisition unit 210 captures an image of the vehicle periphery using the pedestrian detection camera 110 and acquires an image of the vehicle periphery.

歩行者探索手段220は、歩行者検知判断ECU120を用いて、画像取得手段210によって取得された画像から歩行者を探索する。なお、歩行者探索手段220は、画像取得手段210によって取得された画像領域内を一定の演算負荷で探索したり、当該画像領域内のうちの特定領域を集中的に探索したりする。   The pedestrian search means 220 searches for a pedestrian from the image acquired by the image acquisition means 210 using the pedestrian detection determination ECU 120. Note that the pedestrian search means 220 searches the image area acquired by the image acquisition means 210 with a constant calculation load, or searches a specific area in the image area intensively.

探索範囲モード設定手段230は、探索範囲制御ECU130を用いて、カーナビゲーションECU160からの走行中道路情報および走行予定経路情報に基づいて、歩行者の存在に注意すべき領域を判断し、画像取得手段210によって取得される画像から歩行者を探索する探索範囲モードを設定する。   The search range mode setting unit 230 uses the search range control ECU 130 to determine a region where attention should be paid to the presence of a pedestrian based on the traveling road information and the planned traveling route information from the car navigation ECU 160, and image acquisition unit A search range mode for searching for a pedestrian from the image acquired by 210 is set.

より詳細には、探索範囲モード設定手段230は、車両位置算出手段231と、車両位置判定手段232と、探索範囲モード選択手段233とを含む。   More specifically, search range mode setting means 230 includes vehicle position calculation means 231, vehicle position determination means 232, and search range mode selection means 233.

車両位置算出手段231は、車両と、当該車両が右折または左折する交差点との距離を算出する。具体的には、車両位置算出手段231は、カーナビゲーションECU160を用いて、カーナビゲーションシステムにおけるGPS情報、および地図情報に基づいて、車両の位置を取得し、当該交差点との距離を算出する。   The vehicle position calculation means 231 calculates the distance between the vehicle and the intersection where the vehicle turns right or left. Specifically, the vehicle position calculation means 231 uses the car navigation ECU 160 to acquire the position of the vehicle based on GPS information and map information in the car navigation system, and calculates the distance from the intersection.

車両位置判定手段232は、車両位置算出手段231によって算出された車両と交差点との距離が予め設定された閾値未満であるか否かを判定する。換言すれば、車両位置判定手段232は、車両が交差点に近づいているか否かを判定する。さらに、車両位置判定手段232は、車両が当該交差点を右折または左折したか(右折または左折状態が進んでいるか)否かを判定する。   The vehicle position determination unit 232 determines whether the distance between the vehicle and the intersection calculated by the vehicle position calculation unit 231 is less than a preset threshold value. In other words, the vehicle position determination unit 232 determines whether or not the vehicle is approaching the intersection. Furthermore, the vehicle position determination means 232 determines whether the vehicle has made a right turn or a left turn at the intersection (whether the right turn or the left turn state has advanced).

探索範囲モード選択手段233は、車両位置判定手段232によって車両が交差点に近づいていると判定された場合、探索範囲偏重モードを探索範囲モードとして選択する。そして、探索範囲モード選択手段233は、車両位置判定手段232によって車両が交差点を右折または左折した(右折または左折状態が進んでいる)と判定された場合、探索範囲均等モードを探索範囲モードとして選択する。ここで、探索範囲均等モードとは、画像領域内を予め設定された一定の演算負荷で探索し、探索範囲偏重モードとは、画像領域内のうち、高い演算負荷で探索する第1探索領域と低い演算負荷で探索する第2探索領域とを設定することをいう。   When the vehicle position determination unit 232 determines that the vehicle is approaching the intersection, the search range mode selection unit 233 selects the search range mode as the search range mode. Then, the search range mode selection means 233 selects the search range equal mode as the search range mode when the vehicle position determination means 232 determines that the vehicle has turned right or left at the intersection (the right turn or left turn state has advanced). To do. Here, the search range equal mode is a search within the image area with a predetermined constant calculation load, and the search range bias mode is a first search area searched with a high calculation load in the image area. It means setting the second search area to be searched with a low calculation load.

なお、上述した歩行者探索手段220は、探索範囲モード選択手段233によって選択された探索範囲モードに基づく探索範囲および演算負荷で、画像取得手段210によって取得された画像から歩行者を探索する。探索範囲モードに対応する探索範囲および演算負荷について、詳細は後述する。   In addition, the pedestrian search means 220 mentioned above searches a pedestrian from the image acquired by the image acquisition means 210 with the search range and calculation load based on the search range mode selected by the search range mode selection means 233. Details of the search range and calculation load corresponding to the search range mode will be described later.

結果通知手段240は、歩行者探索手段220によって探索された結果を通知する。具体的には、結果通知手段240は、検知した歩行者を表示用ディスプレイ150に表示してもよいし、さらに、車両と検知した歩行者とが衝突する危険性があれば、当該衝突を回避するように運転者に警告してもよい。   The result notification means 240 notifies the result searched by the pedestrian search means 220. Specifically, the result notification unit 240 may display the detected pedestrian on the display 150, and if there is a risk of collision between the vehicle and the detected pedestrian, avoid the collision. The driver may be warned to do so.

右左折予測手段250は、典型的には、カーナビゲーションシステムであって、GPS情報、および地図情報に基づいて、目的地までの走行予定経路を求め、当該走行予定経路から車両が右折または左折することを予測する。   The right / left turn predicting means 250 is typically a car navigation system, which obtains a planned travel route to the destination based on GPS information and map information, and the vehicle turns right or left from the planned travel route. Predict that.

記録手段260は、典型的にはメモリ等であって、記録手段260には、カーナビゲーションシステムにおける地図情報、および上述した探索範囲モードの具体的な設定内容等が記録されている。   The recording unit 260 is typically a memory or the like, and the recording unit 260 records map information in the car navigation system, specific setting contents of the search range mode described above, and the like.

次に、本発明の第1の実施形態に係る歩行者検知装置100が実行する処理の流れについて説明する。   Next, the flow of processing executed by the pedestrian detection device 100 according to the first embodiment of the present invention will be described.

図3は、本発明の第1の実施形態に係る歩行者検知装置100が実行する歩行者検知方法(左折)300を示すフローチャートである。図3において、歩行者検知方法(左折)300は、探索範囲均等モード設定ステップS310と、左折予測ステップS320と、第1距離算出ステップS330と、第1距離判定ステップS340と、探索範囲偏重モード設定ステップS350と、第2距離算出ステップS360と、第2距離判定ステップS370と、探索範囲均等モード設定ステップS380とを含む。   FIG. 3 is a flowchart showing a pedestrian detection method (left turn) 300 executed by the pedestrian detection apparatus 100 according to the first embodiment of the present invention. In FIG. 3, the pedestrian detection method (left turn) 300 includes search range equal mode setting step S310, left turn prediction step S320, first distance calculation step S330, first distance determination step S340, and search range bias mode setting. It includes step S350, second distance calculation step S360, second distance determination step S370, and search range equal mode setting step S380.

通常、車両に搭載される歩行者検知装置は、カメラ等によって取得可能な画像領域全体において、一定の演算負荷で歩行者を探索する。さらに、ここでは、車両に搭載されているカーナビゲーションシステムによって、目的地までのルート案内が実施されていることを前提とする。   Usually, a pedestrian detection device mounted on a vehicle searches for a pedestrian with a certain calculation load in an entire image area that can be acquired by a camera or the like. Furthermore, here, it is assumed that route guidance to the destination is carried out by a car navigation system mounted on the vehicle.

先ず、探索範囲均等モード設定ステップS310において、探索範囲モード設定手段230は、探索範囲均等モードを探索範囲モードとして選択する。同時に、画像取得手段210は、車両の前方周辺を撮像し、当該車両の前方周辺画像を取得している。図4は、車両に搭載されたカメラが当該車両の前方周辺を撮像する様子を示す図である。図4において、画像取得手段210は、カメラによって取得可能な領域全体を撮像している。図5は、図4に示したように車両に搭載されたカメラによって撮像された当該車両の前方周辺画像を示す図である。歩行者探索手段220は、探索範囲モード設定手段230によって選択された探索範囲均等モードに基づいて、画像取得手段210によって取得された画像から歩行者を探索し、図5に示すように、車両の前方周辺画像から歩行者を検知する。   First, in the search range equal mode setting step S310, the search range mode setting means 230 selects the search range equal mode as the search range mode. At the same time, the image acquisition unit 210 images the front periphery of the vehicle and acquires the front periphery image of the vehicle. FIG. 4 is a diagram illustrating a state in which the camera mounted on the vehicle images the front periphery of the vehicle. In FIG. 4, the image acquisition unit 210 images the entire area that can be acquired by the camera. FIG. 5 is a view showing a front peripheral image of the vehicle imaged by the camera mounted on the vehicle as shown in FIG. The pedestrian search means 220 searches for a pedestrian from the image acquired by the image acquisition means 210 based on the search range equal mode selected by the search range mode setting means 230, and as shown in FIG. A pedestrian is detected from the front peripheral image.

このように、通常、車両に搭載される歩行者検知装置100は、車両に搭載されたカメラによって撮像し、取得された当該車両の前方周辺画像領域内を一定の演算負荷で歩行者を探索している。   As described above, the pedestrian detection device 100 normally mounted on a vehicle captures an image with a camera mounted on the vehicle, and searches for the pedestrian in the front peripheral image area of the acquired vehicle with a certain calculation load. ing.

次に、左折予測ステップS320において、右左折予測手段250は、車両が左折することを予測する。例えば、カーナビゲーションシステムにおけるルート案内によって、車両が左折することを予測できる。図6は、カーナビゲーションシステムにおけるルート案内によって、車両が左折することを予測する様子を示す図である。図6において、車両が、右左折予測手段250によって車両が左折すると予測された交差点に近づいている。   Next, in the left turn prediction step S320, the right / left turn prediction means 250 predicts that the vehicle will turn left. For example, it can be predicted that the vehicle will turn left by route guidance in the car navigation system. FIG. 6 is a diagram illustrating a state in which the vehicle is predicted to turn left by route guidance in the car navigation system. In FIG. 6, the vehicle is approaching an intersection where the vehicle is predicted to turn left by the right / left turn prediction means 250.

第1距離算出ステップS330において、車両位置算出手段231は、車両と、当該車両が左折する交差点との距離である第1距離P1を算出する。図7は、第1距離P1を示す図である。図7に示すように、第1距離P1は、当該車両の走行車線方向に沿った距離であって、車両の中心点と、当該車両が左折すると予測される交差点の中心との距離である。   In the first distance calculation step S330, the vehicle position calculation means 231 calculates a first distance P1 that is the distance between the vehicle and the intersection where the vehicle turns to the left. FIG. 7 is a diagram illustrating the first distance P1. As shown in FIG. 7, the first distance P1 is a distance along the traveling lane direction of the vehicle, and is a distance between the center point of the vehicle and the center of the intersection where the vehicle is predicted to turn left.

具体的に、第1距離P1は、GPS情報および地図情報に基づいて算出される。図8は、GPS情報および地図情報に基づいて第1距離P1を算出する方法を示す図である。図8において、地図情報とは、ノードとリンクとによって構成されている。図8に示すように、ノードaとノードbとのリンク長A、ノードbとノードcとのリンク長B、ノードcとノードdとのリンク長C、およびノードdとノードeとのリンク長Eとする。さらに、ノードaとノードbとの間であって、ノードaから距離Xの位置に車両が存在する場合、当該車両から交差点の中心ノードeまでの第1距離P1は、以下の(数1)によって算出される。
P1=(A−X)+B+C+D ・・・(数1)
なお、ノードaから距離Xについては、車両がノードaを通過してからの経過時間、および車両のノードa通過後における平均速度に基づいて算出し推定しても構わない。
Specifically, the first distance P1 is calculated based on GPS information and map information. FIG. 8 is a diagram illustrating a method of calculating the first distance P1 based on the GPS information and the map information. In FIG. 8, the map information is composed of nodes and links. As shown in FIG. 8, the link length A between the node a and the node b, the link length B between the node b and the node c, the link length C between the node c and the node d, and the link length between the node d and the node e. E. Further, when a vehicle exists between the node a and the node b and at a distance X from the node a, the first distance P1 from the vehicle to the center node e of the intersection is expressed by the following (Equation 1). Is calculated by
P1 = (A−X) + B + C + D (Equation 1)
The distance X from the node a may be calculated and estimated based on the elapsed time after the vehicle passes through the node a and the average speed after the vehicle passes through the node a.

第1距離判定ステップS340において、車両位置判定手段232は、第1距離算出ステップS330で算出された第1距離P1が第1閾値L1未満であるか否かを判定する。ここで、第1閾値L1は、予め設定された距離であって、換言すれば、車両位置判定手段232は、第1距離P1に基づいて、車両が交差点に近づいているか否かを判定する。   In the first distance determination step S340, the vehicle position determination means 232 determines whether or not the first distance P1 calculated in the first distance calculation step S330 is less than the first threshold value L1. Here, the first threshold L1 is a preset distance. In other words, the vehicle position determination unit 232 determines whether or not the vehicle is approaching the intersection based on the first distance P1.

第1距離判定ステップS340で第1距離P1が第1閾値L1未満であると判定された場合、探索範囲偏重モード設定ステップS350に進む(第1距離判定ステップS340のYes)。   When it is determined in the first distance determination step S340 that the first distance P1 is less than the first threshold L1, the process proceeds to the search range deviation mode setting step S350 (Yes in the first distance determination step S340).

一方、第1距離判定ステップS340で第1距離P1が第1閾値L1以上であると判定された場合、第1距離算出ステップS330に戻る(第1距離判定ステップS340のNo)。   On the other hand, when it is determined in the first distance determination step S340 that the first distance P1 is greater than or equal to the first threshold L1, the process returns to the first distance calculation step S330 (No in the first distance determination step S340).

換言すれば、所定の時間間隔で、第1距離算出ステップS330および第1距離判定ステップS340を繰り返し、車両が交差点に近づいているか否かを監視している。   In other words, the first distance calculation step S330 and the first distance determination step S340 are repeated at predetermined time intervals to monitor whether or not the vehicle is approaching the intersection.

なお、第1閾値L1は、車両が左折すると予測されている交差点に近づく際、およびその後車両が左折する際、車両の左側における歩行者に注視すべき範囲を考慮して設定される。具体的には、車両が左折する際に、車両の左側における歩行者を巻き込む危険性があるため、車両が左折する前から予め注視することによって、適切に歩行者を検知する。また、車両が左折した直後の横断歩道を横断する歩行者について、車両が左折する前から予め注視して適切に歩行者を検知する。   Note that the first threshold value L1 is set in consideration of a range to be watched by a pedestrian on the left side of the vehicle when approaching an intersection where the vehicle is predicted to turn left and when the vehicle subsequently turns left. Specifically, when the vehicle turns left, there is a risk of involving a pedestrian on the left side of the vehicle, so that the pedestrian is appropriately detected by gazing in advance before the vehicle turns left. Moreover, about the pedestrian who crosses the pedestrian crossing immediately after a vehicle turns left, it observes beforehand before a vehicle turns left, and detects a pedestrian appropriately.

また、第1閾値L1は、記録手段260に予め記録されているものとし、車両の走行車線幅、および車両の左折後における走行車線幅に基づく交差点毎に複数記録されていても構わない。さらに、車両の速度に応じて車両が交差点に侵入するタイミングが変動するため、第1閾値L1は、車両の速度および/または加速度に応じて複数記録されていても構わない。   The first threshold L1 may be recorded in advance in the recording unit 260, and a plurality of first threshold values L1 may be recorded for each intersection based on the travel lane width of the vehicle and the travel lane width after the vehicle turns left. Furthermore, since the timing at which the vehicle enters the intersection varies depending on the vehicle speed, a plurality of first threshold values L1 may be recorded according to the vehicle speed and / or acceleration.

探索範囲偏重モード設定ステップS350において、探索範囲モード選択手段233は、探索範囲偏重モードを探索範囲モードとして選択する。図9は、車両が左折すると予測されている交差点に近づいて、車両の左側に注視する様子を示す図である。図9において、車両が左折すると予測されている交差点に近づいた場合(第1距離P1<第1閾値L1)、探索範囲モード選択手段233は、探索範囲偏重モードを探索範囲モードとして選択し、集中的に、車両の左側領域において歩行者を探索するように設定する。   In search range bias mode setting step S350, the search range mode selection means 233 selects the search range bias mode as the search range mode. FIG. 9 is a diagram illustrating a state in which the vehicle approaches the intersection where the vehicle is predicted to turn to the left and pays attention to the left side of the vehicle. In FIG. 9, when the vehicle approaches an intersection predicted to turn left (first distance P1 <first threshold L1), the search range mode selection means 233 selects the search range bias mode as the search range mode and concentrates Specifically, it is set to search for a pedestrian in the left region of the vehicle.

道路状況を考慮すると、車両の右側領域には歩行者が存在する可能性は低いため、当該右側領域において歩行者を探索せず、当該右側領域において歩行者を探索しない分、車両の左側領域において演算負荷を上げて歩行者を探索する。具体的には、図5に示した車両に搭載されたカメラによって撮像された当該車両の前方周辺画像において、当該画像領域内のうちの右側領域において探索処理をせず、当該画像領域内のうちの左側領域において高精度に探索処理を行うように設定する。   Considering the road conditions, it is unlikely that there are pedestrians in the right area of the vehicle, so no pedestrians are searched in the right area and no pedestrians are searched in the right area. Search for pedestrians by increasing computational load. Specifically, in the front peripheral image of the vehicle imaged by the camera mounted on the vehicle shown in FIG. 5, the search process is not performed in the right region of the image region, Is set so that the search process is performed with high accuracy in the left side area.

なお、ここでは、車両の右側領域には歩行者が存在する可能性は低いため、当該右側領域において歩行者を探索せず、車両の左側領域のみにおいて歩行者を探索するように設定しているが、これに限定されるものではない。例えば、車両の左側における歩行者に注視すべき範囲を、車両に搭載されたカメラによって撮像された当該車両の前方周辺画像のうちの左側半分領域でなく、当該画像全体領域のうち左側3分の1領域、または当該画像全体領域のうち左側3分の2領域等に設定しても構わない。また、歩行者に注視すべき範囲でない車両の右側領域において、演算負荷を下げて歩行者を探索しても構わない。   Here, since it is unlikely that there is a pedestrian in the right region of the vehicle, it is set not to search for a pedestrian in the right region but to search for a pedestrian only in the left region of the vehicle. However, the present invention is not limited to this. For example, the range to be watched by a pedestrian on the left side of the vehicle is not the left half region of the front peripheral image of the vehicle imaged by the camera mounted on the vehicle, but the left three minutes of the entire image region. It may be set to one area, or the left two-third area of the entire image area. Moreover, you may search a pedestrian by reducing calculation load in the right side area | region of the vehicle which is not the range which should pay attention to a pedestrian.

さらに、探索範囲偏重モードの詳細な設定内容は、記録手段260に予め記録されているものとし、車両の走行車線幅、および車両の左折後における走行車線幅に基づく交差点毎に複数記録されていても構わない。さらに、探索範囲偏重モードの詳細な設定内容は、車両の速度および/または加速度に応じて複数記録されていても構わない。   Furthermore, the detailed setting contents of the search range bias mode are recorded in advance in the recording means 260, and a plurality of records are recorded for each intersection based on the travel lane width of the vehicle and the travel lane width after the vehicle turns left. It doesn't matter. Furthermore, a plurality of detailed setting contents of the search range bias mode may be recorded according to the speed and / or acceleration of the vehicle.

そして、歩行者探索手段220は、探索範囲モード選択手段233によって選択された探索範囲偏重モードに基づいて、画像取得手段210によって取得された画像から歩行者を探索する。   And the pedestrian search means 220 searches a pedestrian from the image acquired by the image acquisition means 210 based on the search range bias mode selected by the search range mode selection means 233.

第2距離算出ステップS360において、車両位置算出手段231は、探索範囲偏重モードを探索範囲モードとして設定した後に、車両と、当該車両が左折する交差点との距離である第2距離P2を算出する。第2距離P2は、当該車両の走行車線方向に沿った距離であって、車両の中心点と、当該車両が左折すると予測される交差点の中心との距離である。なお、第2距離P2は、GPS情報および地図情報に基づいて算出され、具体的な算出方法については、上述した第1距離P1の算出方法と同様であるため、詳細な説明は省略する。   In the second distance calculation step S360, after setting the search range deviation mode as the search range mode, the vehicle position calculation unit 231 calculates a second distance P2 that is the distance between the vehicle and the intersection where the vehicle turns left. The second distance P2 is a distance along the traveling lane direction of the vehicle, and is a distance between the center point of the vehicle and the center of the intersection where the vehicle is predicted to turn left. Note that the second distance P2 is calculated based on GPS information and map information, and a specific calculation method is the same as the above-described calculation method of the first distance P1, and thus detailed description thereof is omitted.

第2距離判定ステップS370において、車両位置判定手段232は、第2距離算出ステップS360で算出された第2距離P2が第2閾値L2未満であるか否かを判定する。   In the second distance determination step S370, the vehicle position determination means 232 determines whether or not the second distance P2 calculated in the second distance calculation step S360 is less than the second threshold L2.

第2距離判定ステップS370で第2距離P2が第2閾値L2未満であると判定された場合、探索範囲均等モード設定ステップS380に進む(第2距離判定ステップS370のYes)。   When it is determined in the second distance determination step S370 that the second distance P2 is less than the second threshold L2, the process proceeds to a search range equal mode setting step S380 (Yes in the second distance determination step S370).

一方、第2距離判定ステップS370で第2距離P2が第2閾値L2以上であると判定された場合、第2距離算出ステップS360に戻る(第2距離判定ステップS370のNo)。   On the other hand, when it is determined in the second distance determination step S370 that the second distance P2 is greater than or equal to the second threshold L2, the process returns to the second distance calculation step S360 (No in the second distance determination step S370).

換言すれば、探索範囲偏重モードを探索範囲モードとして設定した後、所定の時間間隔で、第2距離算出ステップS360および第2距離判定ステップS370を繰り返し、車両の左折状態が進んでいるか否かを監視している。   In other words, after the search range bias mode is set as the search range mode, the second distance calculation step S360 and the second distance determination step S370 are repeated at predetermined time intervals to determine whether the vehicle is turning left. Monitoring.

なお、第2閾値L2は、車両が左折すると予測されている交差点を左折する際、車両が左折した直後の横断歩道を横断する歩行者に注視すべき範囲を考慮して設定される。具体的には、車両が左折する際に、探索範囲偏重モード設定ステップS350で探索範囲偏重モードを探索範囲モードとして選択し、集中的に、車両の左側領域において歩行者を探索するように設定されていたが、左折状態が進んだ場合、車両の右側領域においても歩行者を探索することが必要となる。   The second threshold L2 is set in consideration of a range to be watched by a pedestrian crossing a pedestrian crossing immediately after the vehicle turns left when turning left at an intersection where the vehicle is predicted to turn left. Specifically, when the vehicle turns to the left, the search range bias mode is selected as the search range mode in the search range bias mode setting step S350, and the vehicle is set to search pedestrians intensively in the left region of the vehicle. However, when the left turn state progresses, it is necessary to search for a pedestrian also in the right region of the vehicle.

また、第2閾値L2は、記録手段260に予め記録されているものとし、車両の走行車線幅、および車両の左折後における走行車線幅に基づく交差点毎に複数記録されていても構わない。さらに、車両の速度に応じて車両が交差点に侵入するタイミングおよび交差点を左折し、通過するタイミングが変動するため、第2閾値L2は、車両の速度および/または加速度に応じて複数記録されていても構わない。   Further, the second threshold value L2 may be recorded in advance in the recording unit 260, and a plurality of second threshold values L2 may be recorded for each intersection based on the travel lane width of the vehicle and the travel lane width after the left turn of the vehicle. Furthermore, since the timing at which the vehicle enters the intersection and the timing at which the vehicle turns to the left depending on the speed of the vehicle fluctuates, a plurality of second threshold values L2 are recorded according to the speed and / or acceleration of the vehicle. It doesn't matter.

探索範囲均等モード設定ステップS380において、探索範囲モード設定手段230は、探索範囲均等モードを探索範囲モードとして選択する。図10は、車両が左折すると予測されている交差点において、車両の左折状態が進んで、車両の左側および右側に注視する様子を示す図である。図10において、車両が左折すると予測されている交差点において、車両の左折状態が進んだ場合(第2距離P2<第2閾値L2)、探索範囲モード選択手段233は、探索範囲均等モードを探索範囲モードとして選択する。換言すれば、車両に搭載されたカメラによって撮像された当該車両の前方周辺画像領域内のうちの左側領域において高負荷で探索処理を行っていた状態から、当該車両の前方周辺画像領域内全体を一定負荷で探索処理を行う状態に切り替える。   In search range equal mode setting step S380, search range mode setting means 230 selects the search range equal mode as the search range mode. FIG. 10 is a diagram illustrating a state in which the left turn state of the vehicle proceeds at an intersection where the vehicle is predicted to turn left, and attention is paid to the left side and the right side of the vehicle. In FIG. 10, when the left turn state of the vehicle advances at the intersection where the vehicle is predicted to turn left (second distance P2 <second threshold L2), the search range mode selection unit 233 sets the search range equal mode to the search range. Select as mode. In other words, from the state where the search process is being performed at a high load in the left side region of the front peripheral image region of the vehicle imaged by the camera mounted on the vehicle, the entire front peripheral image region of the vehicle is Switch to a state where search processing is performed at a constant load.

なお、ここでは、第2閾値L2は、車両の左折後における走行車線幅とし、第2距離P2が第2閾値L2未満となった場合、車両の左折状態が進んでいると判定している。第2閾値L2は、車両の左折後における走行車線幅に限定されるものではなく、車両の左折状態が進んでいるか否かを判定可能であれば、その他の値であってもよく、さらに、交差点毎、車両の速度および/または加速度に応じて設定しても構わない。   Here, the second threshold value L2 is the travel lane width after the vehicle turns left, and when the second distance P2 is less than the second threshold value L2, it is determined that the vehicle is turning left. The second threshold L2 is not limited to the travel lane width after the vehicle turns left, and may be any other value as long as it can be determined whether the vehicle is making a left turn. You may set according to the speed and / or acceleration of a vehicle for every intersection.

上述したように、歩行者検知装置100は、車両が左折する場合、車両と交差点との距離に応じて、歩行者を探索する領域を切り替える。これにより、交差点における車両走行の状況に応じて、歩行者に注視すべき範囲と探索処理における演算量とを考慮して、適切に歩行者を検知する。   As described above, when the vehicle makes a left turn, the pedestrian detection device 100 switches a region for searching for a pedestrian according to the distance between the vehicle and the intersection. Thereby, the pedestrian is appropriately detected in consideration of the range to be watched by the pedestrian and the calculation amount in the search process according to the state of the vehicle traveling at the intersection.

図11は、車両の左側領域と車両の右側領域とにおける演算負荷比率を示す図である。図11(a)は、車両の左側領域における演算負荷比率を示す図であり、図11(b)は、車両の右側領域における演算負荷比率を示す図である。   FIG. 11 is a diagram illustrating a calculation load ratio in the left side region of the vehicle and the right side region of the vehicle. FIG. 11A is a diagram showing the calculation load ratio in the left region of the vehicle, and FIG. 11B is a diagram showing the calculation load ratio in the right region of the vehicle.

先ず、車両と当該車両が左折する交差点との第1距離P1が第1閾値以上の場合(車両が交差点に近づいていない場合)、探索範囲均等モードが探索範囲モードとして選択されている。つまり、車両の左側領域における演算負荷比率と、車両の右側領域における演算負荷比率とは50[%]であって、均等である。   First, when the first distance P1 between the vehicle and the intersection where the vehicle turns to the left is equal to or greater than the first threshold (when the vehicle is not approaching the intersection), the search range equalization mode is selected as the search range mode. That is, the calculation load ratio in the left side area of the vehicle and the calculation load ratio in the right side area of the vehicle are equal to 50 [%].

次に、車両と当該車両が左折する交差点との第1距離P1が第1閾値未満の場合(車両が交差点に近づいている場合)、探索範囲偏重モードが探索範囲モードとして選択されている。つまり、車両の左側領域における演算負荷比率を50+ω[%]とし、車両の右側領域における演算負荷比率を50−ω[%]とする。歩行者に注視すべき範囲である車両の左側領域において、ω[%]分、演算負荷を上げ、歩行者が存在する可能性が低い車両の右側領域において、ω[%]分、演算負荷を下げている。これにより、状況に応じた高精度かつ高効率な歩行者探索処理を実現している。   Next, when the first distance P1 between the vehicle and the intersection where the vehicle turns to the left is less than the first threshold value (when the vehicle is approaching the intersection), the search range bias mode is selected as the search range mode. That is, the calculation load ratio in the left area of the vehicle is 50 + ω [%], and the calculation load ratio in the right area of the vehicle is 50−ω [%]. In the left area of the vehicle, which should be watched by the pedestrian, the calculation load is increased by ω [%], and in the right area of the vehicle where there is a low possibility that a pedestrian is present, the calculation load is increased by ω [%]. It is lowered. Thereby, highly accurate and highly efficient pedestrian search processing according to the situation is realized.

そして、車両と当該車両が左折する交差点との第2距離P2が第2閾値未満の場合(車両の左折状態が進んでいる場合)、探索範囲均等モードが探索範囲モードとして選択されている。   When the second distance P2 between the vehicle and the intersection where the vehicle turns to the left is less than the second threshold value (when the vehicle is turning left), the search range equalization mode is selected as the search range mode.

なお、演算負荷比率の上昇下降範囲であるωは、0〜50[%]であって、探索範囲偏重モードにおいて車両の右側領域の探索処理をしない場合は、ωは、50[%]を設定すればよい。   Note that ω, which is an increase / decrease range of the calculation load ratio, is 0 to 50 [%], and ω is set to 50 [%] when the search process of the right region of the vehicle is not performed in the search range bias mode. do it.

また、探索範囲偏重モードを選択している間、ωを可変とし、例えば、車両が交差点に近づくにつれて、車両の左側領域において演算負荷を徐々に上げ、車両の右側領域において演算負荷を徐々に下げる。   Further, while the search range bias mode is selected, ω is variable. For example, as the vehicle approaches the intersection, the calculation load is gradually increased in the left side region of the vehicle, and the calculation load is gradually decreased in the right side region of the vehicle. .

図12は、車両の左側領域と車両の右側領域とにおける演算負荷比率を徐々に変化させる様子を示す図である。図12(a)は、車両の左側領域における演算負荷比率を示す図であり、図12(b)は、車両の右側領域における演算負荷比率を示す図である。   FIG. 12 is a diagram illustrating a state in which the calculation load ratios in the left side region and the right side region of the vehicle are gradually changed. FIG. 12A is a diagram showing the calculation load ratio in the left region of the vehicle, and FIG. 12B is a diagram showing the calculation load ratio in the right region of the vehicle.

車両と当該車両が左折する交差点との第1距離P1が第1閾値以上の場合(車両が交差点に近づいていない場合)、および車両と当該車両が左折する交差点との第2距離P2が第2閾値未満の場合(車両の左折状態が進んでいる場合)、探索範囲均等モードが探索範囲モードとして選択されている。この場合、図11と同様に、車両の左側領域における演算負荷比率と、車両の右側領域における演算負荷比率とは50[%]であって、均等である。   When the first distance P1 between the vehicle and the intersection where the vehicle turns to the left is equal to or greater than the first threshold (when the vehicle is not approaching the intersection), the second distance P2 between the vehicle and the intersection where the vehicle turns to the left is the second distance P2. When it is less than the threshold value (when the vehicle is turning left), the search range equal mode is selected as the search range mode. In this case, similarly to FIG. 11, the calculation load ratio in the left side area of the vehicle and the calculation load ratio in the right side area of the vehicle are equal to 50 [%].

次に、車両と当該車両が左折する交差点との第1距離P1が第1閾値未満の場合(車両が交差点に近づいている場合)、探索範囲偏重モードが探索範囲モードとして選択され、車両の左側領域における演算負荷比率を50[%]から徐々に上げて、車両と当該車両が左折する交差点との第2距離P2が第2閾値未満となる場合(車両の左折状態が進んだ場合)、当該演算負荷比率を50+ω[%]としている。同時に、車両の右側領域における演算負荷比率は、50[%]から50−ω[%]まで徐々に下げている。   Next, when the first distance P1 between the vehicle and the intersection where the vehicle turns to the left is less than the first threshold (when the vehicle is approaching the intersection), the search range bias mode is selected as the search range mode, and the left side of the vehicle When the calculation load ratio in the region is gradually increased from 50 [%] and the second distance P2 between the vehicle and the intersection where the vehicle turns to the left is less than the second threshold (when the vehicle turns left), The calculation load ratio is 50 + ω [%]. At the same time, the calculation load ratio in the right region of the vehicle gradually decreases from 50 [%] to 50-ω [%].

なお、ここでは、車両の左側領域と車両の右側領域とにおける演算負荷比率を徐々に変化させる一例を示したが、これに限定されるものではない。例えば、演算負荷比率を関数(折れ線、曲線)に従って変化させてもよく、また、歩行者を探索する画像領域について、左右の2分割でなく3分割以上、または遠近を考慮して上下分割された領域毎に演算負荷比率を設定および変化させても構わない。   Although an example in which the calculation load ratio in the left side region of the vehicle and the right side region of the vehicle is gradually changed is shown here, the present invention is not limited to this. For example, the calculation load ratio may be changed according to a function (a broken line or a curve), and the image area for searching for a pedestrian is divided into three or more divisions instead of the left and right divisions, or the upper and lower divisions in consideration of perspective. The calculation load ratio may be set and changed for each region.

以上のように、本発明の第1の実施形態に係る歩行者検知装置100によれば、車両が交差点を左折する際、当該車両が交差点に近づくと探索範囲偏重モードに基づいて、車両の左側領域について演算負荷を上げて歩行者を探索し、その後、車両の左折状態が進むと探索範囲均等モードに基づいて、車両の左側領域および右側領域について演算負荷を均等にして歩行者を探索する。これにより、車両が交差点を左折する状況に応じて、高精度かつ高効率な歩行者探索処理を実現することができる。   As described above, according to the pedestrian detection device 100 according to the first embodiment of the present invention, when the vehicle turns left at the intersection, when the vehicle approaches the intersection, the left side of the vehicle is determined based on the search range bias mode. The pedestrian is searched by increasing the calculation load for the area, and then the pedestrian is searched by equalizing the calculation load for the left area and the right area of the vehicle based on the search range equal mode when the left turn state of the vehicle advances. Thereby, a highly accurate and highly efficient pedestrian search process can be realized according to the situation where the vehicle turns left at the intersection.

次に、車両が右折する場合について、説明する。
図13は、本発明の第1の実施形態に係る歩行者検知装置100が実行する歩行者検知方法(右折)400を示すフローチャートである。図13において、歩行者検知方法400(右折)は、探索範囲均等モード設定ステップS310と、右折予測ステップS410と、第1距離算出ステップS330と、第1距離判定ステップS340と、探索範囲偏重モード設定ステップS350と、交差点相対位置算出ステップS420と、交差点通過判定ステップS430と、探索範囲均等モード設定ステップS380とを含む。図13において、図3に示した同一のステップ(処理)については、同一の参照符号を付し、詳細な説明は省略する。
Next, a case where the vehicle turns right will be described.
FIG. 13 is a flowchart showing a pedestrian detection method (right turn) 400 executed by the pedestrian detection apparatus 100 according to the first embodiment of the present invention. In FIG. 13, the pedestrian detection method 400 (right turn) includes a search range equal mode setting step S310, a right turn prediction step S410, a first distance calculation step S330, a first distance determination step S340, and a search range bias mode setting. It includes step S350, intersection relative position calculation step S420, intersection passage determination step S430, and search range equalization mode setting step S380. In FIG. 13, the same steps (processes) shown in FIG. 3 are denoted by the same reference numerals, and detailed description thereof is omitted.

先ず、探索範囲均等モード設定ステップS310において、探索範囲均等モードが選択され、当該探索範囲均等モードに基づいて、車両の左側領域および右側領域について演算負荷を均等にして歩行者を探索している。   First, in the search range equal mode setting step S310, the search range equal mode is selected, and based on the search range equal mode, the pedestrians are searched with equal calculation load for the left and right regions of the vehicle.

右折予測ステップS410において、右左折予測手段250は、車両が右折することを予測する。例えば、カーナビゲーションシステムにおけるルート案内によって、車両が右折することを予測できる。図14は、カーナビゲーションシステムにおけるルート案内によって、車両が右折することを予測する様子を示す図である。図14において、車両が、右左折予測手段250によって車両が左折すると予測された交差点に近づいている。   In the right turn prediction step S410, the right / left turn prediction means 250 predicts that the vehicle will turn right. For example, it can be predicted that the vehicle will turn right by route guidance in the car navigation system. FIG. 14 is a diagram illustrating a state in which the vehicle is predicted to turn right by route guidance in the car navigation system. In FIG. 14, the vehicle is approaching an intersection where the vehicle is predicted to turn left by the right / left turn prediction means 250.

第1距離算出ステップS330において、車両位置算出手段231は、車両と、当該車両が右折する交差点との距離である第1距離P1を算出する。図15は、第1距離P1を示す図である。図15に示すように、第1距離P1は、当該車両の走行車線方向に沿った距離であって、車両の中心点と、当該車両が右折すると予測される交差点の中心との距離である。   In the first distance calculation step S330, the vehicle position calculation means 231 calculates a first distance P1 that is the distance between the vehicle and the intersection where the vehicle turns to the right. FIG. 15 is a diagram illustrating the first distance P1. As shown in FIG. 15, the first distance P1 is a distance along the traveling lane direction of the vehicle, and is a distance between the center point of the vehicle and the center of the intersection where the vehicle is predicted to turn right.

第1距離判定ステップS340において、車両位置判定手段232は、第1距離算出ステップS330で算出された第1距離P1が第1閾値L1未満であるか否かを判定する。   In the first distance determination step S340, the vehicle position determination means 232 determines whether or not the first distance P1 calculated in the first distance calculation step S330 is less than the first threshold value L1.

なお、第1閾値L1は、車両が右折すると予測されている交差点に近づく際、およびその後車両が右折する際、車両の左側における歩行者との衝突の危険性を考慮して設定される。具体的には、車両が右折する際には、仮に、車両の左側に歩行者が存在していたとしても、当該歩行者が車両の走行方向に侵入する可能性は低いため、車両の右側領域について集中的に歩行者を探索する。   The first threshold L1 is set in consideration of the risk of a collision with a pedestrian on the left side of the vehicle when approaching an intersection where the vehicle is predicted to turn right and when the vehicle subsequently turns right. Specifically, when the vehicle turns to the right, even if there is a pedestrian on the left side of the vehicle, it is unlikely that the pedestrian will enter the traveling direction of the vehicle. About intensively searching for pedestrians.

また、車両が右折する場合における第1閾値L1は、上述した車両が左折する場合における第1閾値L1と異なる値に設定されても構わない。   Further, the first threshold value L1 when the vehicle turns right may be set to a value different from the first threshold value L1 when the vehicle turns left.

探索範囲偏重モード設定ステップS350において、探索範囲モード選択手段233は、探索範囲偏重モードを探索範囲モードとして選択する。図16は、車両が右折すると予測されている交差点に近づいて、車両の右側に注視する様子を示す図である。図16において、車両が右折すると予測されている交差点に近づいた場合(第1距離P1<第1閾値L1)、探索範囲モード選択手段233は、探索範囲偏重モードを探索範囲モードとして選択し、集中的に、車両の右側領域において歩行者を探索するように設定する。   In search range bias mode setting step S350, the search range mode selection means 233 selects the search range bias mode as the search range mode. FIG. 16 is a diagram illustrating a state in which the vehicle approaches the intersection where the vehicle is predicted to make a right turn and is focused on the right side of the vehicle. In FIG. 16, when the vehicle approaches an intersection predicted to turn right (first distance P1 <first threshold L1), the search range mode selection unit 233 selects the search range bias mode as the search range mode, and concentrates Specifically, the pedestrian is searched for in the right region of the vehicle.

道路状況を考慮すると、車両の左側領域には歩行者が存在する可能性は低いため、当該左側領域において歩行者を探索せず、当該左側領域において歩行者を探索しない分、車両の右側領域において演算負荷を上げて歩行者を探索する。   Considering the road conditions, it is unlikely that there are pedestrians in the left area of the vehicle, so no pedestrians are searched in the left area and no pedestrians are searched in the left area. Search for pedestrians by increasing computational load.

なお、ここでは、車両の左側領域には歩行者が存在する可能性は低いため、当該左側領域において歩行者を探索せず、車両の右側領域のみにおいて歩行者を探索するように設定しているが、これに限定されるものではない。例えば、車両の右側における歩行者に注視すべき範囲を、車両に搭載されたカメラによって撮像された当該車両の前方周辺画像のうちの右側半分領域でなく、当該画像全体領域のうち右側3分の1領域、または当該画像全体領域のうち右側3分の2領域等に設定しても構わない。また、歩行者に注視すべき範囲でない車両の左側領域において、演算負荷を下げて歩行者を探索しても構わない。   Here, since it is unlikely that a pedestrian is present in the left area of the vehicle, the pedestrian is not searched for in the left area, but is searched for only in the right area of the vehicle. However, the present invention is not limited to this. For example, the range to be watched by a pedestrian on the right side of the vehicle is not the right half region of the front peripheral image of the vehicle imaged by the camera mounted on the vehicle, but the right three minutes of the entire image region. It may be set to one area, or to the right two-third area of the entire image area. Moreover, you may search a pedestrian by reducing calculation load in the left side area | region of the vehicle which is not the range which should pay attention to a pedestrian.

そして、歩行者探索手段220は、探索範囲モード選択手段233によって選択された探索範囲偏重モードに基づいて、画像取得手段210によって取得された画像から歩行者を探索する。   And the pedestrian search means 220 searches a pedestrian from the image acquired by the image acquisition means 210 based on the search range bias mode selected by the search range mode selection means 233.

次に、上述したように、車両が左折する場合は、第2距離算出ステップS360で第2距離P2を算出し、第2距離判定ステップS370で第2距離P2と第2閾値L2とを比較し、車両の左折状態が進んでいるか否かを監視することによって、探索範囲モードを探索範囲均等モードに戻すタイミングを図っていた。   Next, as described above, when the vehicle turns left, the second distance P2 is calculated in the second distance calculation step S360, and the second distance P2 is compared with the second threshold value L2 in the second distance determination step S370. The timing for returning the search range mode to the search range equal mode is monitored by monitoring whether or not the vehicle is turning left.

一方、車両が右折する場合は、交差点相対位置算出ステップS420で車両と交差点との相対位置を算出し、交差点通過判定ステップS430で車両が交差点を通過したか否かを監視することによって、探索範囲モードを探索範囲均等モードに戻すタイミングを図る。   On the other hand, when the vehicle turns to the right, the relative position between the vehicle and the intersection is calculated in the intersection relative position calculation step S420, and whether or not the vehicle has passed the intersection in the intersection passage determination step S430 is monitored. The timing is set to return the mode to the search range uniform mode.

交差点相対位置算出ステップS420において、車両位置算出手段231は、探索範囲偏重モードを探索範囲モードとして設定した後に、車両と、当該車両が右折する交差点との相対位置を算出する。なお、当該相対位置は、GPS情報および地図情報に基づいて算出される。   In the intersection relative position calculation step S420, the vehicle position calculation means 231 calculates the relative position between the vehicle and the intersection where the vehicle turns right after setting the search range deviation mode as the search range mode. The relative position is calculated based on GPS information and map information.

交差点通過判定ステップS430において、車両位置判定手段232は、交差点相対位置算出ステップS420で算出された相対位置に基づいて、車両が交差点を通過したか否かを判定する。   In the intersection passage determination step S430, the vehicle position determination means 232 determines whether or not the vehicle has passed the intersection based on the relative position calculated in the intersection relative position calculation step S420.

交差点通過判定ステップS430で車両が交差点を通過していないと判定された場合、交差点相対位置算出ステップS420に戻る(交差点通過判定ステップS430のNo)。図17は、車両が交差点を通過していない様子を示す図である。図17において、車両と、当該車両が右折する交差点との相対位置に基づいて、車両は交差点を通過していないと判定されている。この場合、車両の左側領域には歩行者が存在する可能性は低いため、当該左側領域において歩行者を探索せず、車両の右側領域のみにおいて歩行者を探索する探索範囲偏重モードが選択されたままである。   When it is determined in the intersection passage determination step S430 that the vehicle has not passed the intersection, the process returns to the intersection relative position calculation step S420 (No in the intersection passage determination step S430). FIG. 17 is a diagram illustrating a state in which the vehicle does not pass through the intersection. In FIG. 17, it is determined that the vehicle has not passed the intersection based on the relative position between the vehicle and the intersection where the vehicle turns to the right. In this case, since it is unlikely that there is a pedestrian in the left area of the vehicle, the search range bias mode is selected in which the pedestrian is not searched for in the left area but only the right area of the vehicle is searched. There is.

一方、交差点通過判定ステップS430で車両が交差点を通過したと判定された場合、探索範囲均等モード設定ステップS380に進む(交差点通過判定ステップS430のYes)。   On the other hand, when it is determined that the vehicle has passed the intersection in the intersection passage determination step S430, the process proceeds to the search range equal mode setting step S380 (Yes in the intersection passage determination step S430).

換言すれば、探索範囲偏重モードを探索範囲モードとして設定した後、所定の時間間隔で、交差点相対位置算出ステップS420および交差点通過判定ステップS430を繰り返し、車両の右折状態が進んでいるか否かを監視している。   In other words, after setting the search range bias mode as the search range mode, the intersection relative position calculation step S420 and the intersection passage determination step S430 are repeated at predetermined time intervals to monitor whether the vehicle is turning right. is doing.

探索範囲均等モード設定ステップS380において、探索範囲モード設定手段230は、探索範囲均等モードを探索範囲モードとして選択する。図18は、車両が右折すると予測されている交差点において、車両の右折状態が進んで、車両の左側および右側に注視する様子を示す図である。図18において、車両が右折すると予測されている交差点において、車両の右折状態が進んだ場合(車両が交差点を通過した場合)、探索範囲モード選択手段233は、探索範囲均等モードを探索範囲モードとして選択する。   In search range equal mode setting step S380, search range mode setting means 230 selects the search range equal mode as the search range mode. FIG. 18 is a diagram illustrating a state in which a right turn state of the vehicle progresses at an intersection where the vehicle is predicted to turn right, and attention is paid to the left side and the right side of the vehicle. In FIG. 18, when the vehicle turns right at the intersection where the vehicle is predicted to turn right (when the vehicle passes the intersection), the search range mode selection unit 233 sets the search range equal mode as the search range mode. select.

なお、ここでは、車両が交差点を通過した場合、車両の右折状態が進んでいると判定しているが、これに限定されるものではなく、車両の右折状態が進んでいるか否かを判定可能であれば、その他の方法であっても構わない。   Here, when the vehicle passes the intersection, it is determined that the vehicle is turning right. However, the present invention is not limited to this, and it can be determined whether the vehicle is turning right. Any other method may be used.

また、車両が交差点を通過していない場合であっても、車両と、当該車両が右折する交差点との相対位置に応じて、徐々に、車両の左側領域における演算負荷比率と、車両の右側領域における演算負荷比率とを変化させても構わない。   Even if the vehicle does not pass through the intersection, the calculation load ratio in the left side region of the vehicle and the right side region of the vehicle are gradually increased according to the relative position between the vehicle and the intersection where the vehicle turns right. The calculation load ratio at may be changed.

上述したように、歩行者検知装置100は、車両が右折する場合、車両と交差点との距離に応じて、歩行者を探索する領域を切り替える。これにより、交差点における車両走行の状況に応じて、歩行者に注視すべき範囲と探索処理における演算量とを考慮して、適切に歩行者を検知する。   As described above, when the vehicle turns to the right, the pedestrian detection device 100 switches a region for searching for a pedestrian according to the distance between the vehicle and the intersection. Thereby, the pedestrian is appropriately detected in consideration of the range to be watched by the pedestrian and the calculation amount in the search process according to the state of the vehicle traveling at the intersection.

以上のように、本発明の第1の実施形態に係る歩行者検知装置100によれば、車両が交差点を右折する際、当該車両が交差点に近づくと探索範囲偏重モードに基づいて、車両の右側領域について演算負荷を上げて歩行者を探索し、その後、車両の右折状態が進むと探索範囲均等モードに基づいて、車両の左側領域および右側領域について演算負荷を均等にして歩行者を探索する。これにより、車両が交差点を右折する状況に応じて、高精度かつ高効率な歩行者探索処理を実現することができる。   As described above, according to the pedestrian detection device 100 according to the first embodiment of the present invention, when the vehicle turns right at the intersection, when the vehicle approaches the intersection, the right side of the vehicle is determined based on the search range bias mode. The pedestrian is searched by increasing the calculation load for the area, and then the pedestrian is searched by equalizing the calculation load for the left area and the right area of the vehicle based on the search range equal mode when the vehicle turns right. Thereby, a highly accurate and highly efficient pedestrian search process can be realized according to the situation where the vehicle turns right at the intersection.

<第2の実施形態>
図19は、本発明の第2の実施形態に係る歩行者検知装置500を示す図である。図19において、歩行者検知装置500は、図1に示した本発明の第1の実施形態に係る歩行者検知装置100にボディー制御ECU510が追加されている点で異なる。
<Second Embodiment>
FIG. 19 is a diagram showing a pedestrian detection device 500 according to the second embodiment of the present invention. In FIG. 19, a pedestrian detection device 500 is different in that a body control ECU 510 is added to the pedestrian detection device 100 according to the first embodiment of the present invention shown in FIG.

図20は、本発明の第2の実施形態に係る歩行者検知装置500を機能的に示すブロック図である。図20において、歩行者検知装置500は、図2に示した本発明の第1の実施形態に係る歩行者検知装置100にウィンカー制御手段610が追加されている点で異なる。   FIG. 20 is a block diagram functionally showing a pedestrian detection apparatus 500 according to the second embodiment of the present invention. 20, a pedestrian detection device 500 is different in that a blinker control means 610 is added to the pedestrian detection device 100 according to the first embodiment of the present invention shown in FIG.

図19および図20に示す歩行者検知装置500において、図1および図2に示した本発明の第1の実施形態に係る歩行者検知装置100と同一の構成については、同一の参照符号を付して、詳細な説明は省略する。本実施形態では、本発明の第1の実施形態と異なる点について、詳しく説明する。   In the pedestrian detection apparatus 500 shown in FIGS. 19 and 20, the same reference numerals are assigned to the same components as those of the pedestrian detection apparatus 100 according to the first embodiment of the present invention shown in FIGS. Detailed description will be omitted. In the present embodiment, differences from the first embodiment of the present invention will be described in detail.

図19に示した歩行者検知装置500のボディー制御ECU510は、車両が右折または左折する場合におけるウィンカー等を制御する。そして、探索範囲制御ECU130は、カーナビゲーションECU160からの走行中道路情報および走行予定経路情報に加えて、ボディー制御ECU510からのウィンカー情報に基づいて、歩行者を探索する探索範囲を制御する。   The body control ECU 510 of the pedestrian detection device 500 shown in FIG. 19 controls a winker or the like when the vehicle turns right or left. The search range control ECU 130 controls the search range for searching for pedestrians based on the blinker information from the body control ECU 510 in addition to the traveling road information and planned traveling route information from the car navigation ECU 160.

図20に示した歩行者検知装置500のウィンカー制御手段610は、車両が右折または左折する場合におけるウィンカーを制御する。具体的には、車両が右折または左折する場合、運転者の操作に基づいてウィンカーを点滅させ、その後、車両の右折または左折状態が進んだ場合には、当該ウィンカーの点滅をキャンセルする。   The blinker control means 610 of the pedestrian detection device 500 shown in FIG. 20 controls the blinker when the vehicle turns right or left. Specifically, when the vehicle turns right or left, the blinker blinks based on the driver's operation, and when the vehicle turns right or left, the blinker blinking is cancelled.

図21は、本発明の第2の実施形態に係る歩行者検知装置500が実行する歩行者検知方法(左折)700を示すフローチャートである。図21において、歩行者検知方法(左折)700は、探索範囲均等モード設定ステップS310と、左折予測ステップS320と、第1距離算出ステップS330と、第1距離判定ステップS340と、探索範囲偏重モード設定ステップS350と、ウィンカー情報取得ステップS710と、ウィンカーキャンセル判定ステップS720と、探索範囲均等モード設定ステップS380とを含む。図21に示した同一のステップ(処理)については、同一の参照符号を付し、詳細な説明は省略する。   FIG. 21 is a flowchart showing a pedestrian detection method (left turn) 700 executed by the pedestrian detection apparatus 500 according to the second embodiment of the present invention. In FIG. 21, the pedestrian detection method (left turn) 700 includes search range equal mode setting step S310, left turn prediction step S320, first distance calculation step S330, first distance determination step S340, and search range bias mode setting. Step S350, turn signal information acquisition step S710, turn signal cancellation determination step S720, and search range equal mode setting step S380 are included. The same steps (processes) illustrated in FIG. 21 are denoted by the same reference numerals, and detailed description thereof is omitted.

本実施形態に係る歩行者検知方法(左折)700は、本発明の第1の実施形態に係る歩行者検知方法(左折)300に比べて、車両の左折状態が進んでいるか否かを監視および判定する処理が異なる。   Compared with the pedestrian detection method (left turn) 300 according to the first embodiment of the present invention, the pedestrian detection method (left turn) 700 according to this embodiment monitors and determines whether the vehicle is turning left. The process for judging is different.

歩行者検知方法(左折)700は、探索範囲均等モード設定ステップS310から探索範囲偏重モード設定ステップS350までの処理は、本発明の第1の実施形態に係る歩行者検知方法(左折)300と同様であって、ここでは、歩行者探索手段220は、探索範囲モード選択手段233によって選択された探索範囲偏重モードに基づいて、画像取得手段210によって取得された画像から歩行者を探索しているものとする。   In the pedestrian detection method (left turn) 700, the processing from the search range equal mode setting step S310 to the search range bias mode setting step S350 is the same as the pedestrian detection method (left turn) 300 according to the first embodiment of the present invention. Here, the pedestrian search means 220 searches for a pedestrian from the image acquired by the image acquisition means 210 based on the search range bias mode selected by the search range mode selection means 233. And

次に、ウィンカー情報取得ステップS710において、ウィンカー制御手段610は、車両が左折する場合におけるウィンカー情報を取得する。具体的には、左折ウィンカーが点滅しているか否かを示す情報を取得する。   Next, in the winker information acquisition step S710, the winker control means 610 acquires winker information when the vehicle turns left. Specifically, information indicating whether or not the left turn winker is blinking is acquired.

ウィンカーキャンセル判定ステップS720において、ウィンカー制御手段610は、ウィンカー情報取得ステップS710で取得されたウィンカー情報に基づいて、左折ウィンカーがキャンセルされているか否かを判定する。   In the winker cancel determination step S720, the winker control means 610 determines whether or not the left turn winker is canceled based on the winker information acquired in the winker information acquisition step S710.

ウィンカーキャンセル判定ステップS720で左折ウィンカーがキャンセルされていると判定された場合、探索範囲均等モード設定ステップS380に進む(ウィンカーキャンセル判定ステップS720のYes)。   When it is determined in the winker cancel determination step S720 that the left turn winker is canceled, the process proceeds to the search range equal mode setting step S380 (Yes in the winker cancel determination step S720).

一方、ウィンカーキャンセル判定ステップS720で左折ウィンカーがキャンセルされていない判定された場合、ウィンカー情報取得ステップS710に戻る(ウィンカーキャンセル判定ステップS720のNo)。   On the other hand, when it is determined in the winker cancel determination step S720 that the left turn winker has not been canceled, the process returns to the winker information acquisition step S710 (No in the winker cancel determination step S720).

換言すれば、探索範囲偏重モードを探索範囲モードとして設定した後、所定の時間間隔で、ウィンカー情報取得ステップS710およびウィンカーキャンセル判定ステップS720を繰り返し、車両の左折状態が進んでいるか否かを監視している。   In other words, after setting the search range bias mode as the search range mode, the winker information acquisition step S710 and the winker cancel determination step S720 are repeated at predetermined time intervals to monitor whether the vehicle is turning left. ing.

探索範囲均等モード設定ステップS380において、探索範囲モード設定手段230は、探索範囲均等モードを探索範囲モードとして選択する。車両が左折すると予測されている交差点において、車両の左折状態が進んだ場合(左折ウィンカーがキャンセルされた場合)、探索範囲モード選択手段233は、探索範囲均等モードを探索範囲モードとして選択する。換言すれば、車両に搭載されたカメラによって撮像された当該車両の前方周辺画像領域内のうちの左側領域において高負荷で探索処理を行っていた状態から、当該車両の前方周辺画像領域内全体を一定負荷で探索処理を行う状態に切り替える。   In search range equal mode setting step S380, search range mode setting means 230 selects the search range equal mode as the search range mode. When the vehicle turns left at an intersection where the vehicle is predicted to turn left (when the left turn blinker is canceled), the search range mode selection unit 233 selects the search range equal mode as the search range mode. In other words, from the state where the search process is being performed at a high load in the left side region of the front peripheral image region of the vehicle imaged by the camera mounted on the vehicle, the entire front peripheral image region of the vehicle is Switch to a state where search processing is performed at a constant load.

以上のように、本発明の第2の実施形態に係る歩行者検知装置500によれば、車両が交差点を左折する際、当該車両が交差点に近づくと探索範囲偏重モードに基づいて、車両の左側領域について演算負荷を上げて歩行者を探索し、その後、車両の左折状態が進むと探索範囲均等モードに基づいて、車両の左側領域および右側領域について演算負荷を均等にして歩行者を探索する。これにより、車両が交差点を左折する状況に応じて、高精度かつ高効率な歩行者探索処理を実現することができる。   As described above, according to the pedestrian detection device 500 according to the second embodiment of the present invention, when the vehicle turns left at the intersection, when the vehicle approaches the intersection, the left side of the vehicle is determined based on the search range bias mode. The pedestrian is searched by increasing the calculation load for the area, and then the pedestrian is searched by equalizing the calculation load for the left area and the right area of the vehicle based on the search range equal mode when the left turn state of the vehicle advances. Thereby, a highly accurate and highly efficient pedestrian search process can be realized according to the situation where the vehicle turns left at the intersection.

なお、本実施形態では、車両が左折する場合におけるウィンカー情報に基づいて、探索範囲モードを探索範囲偏重モードから探索範囲均等モードに切り替えていた。車両が右折する場合においても右折ウィンカー情報に基づいて、探索範囲モードを探索範囲偏重モードから探索範囲均等モードに切り替えることによって、同様の効果が得られることは言うまでもない。   In the present embodiment, the search range mode is switched from the search range bias mode to the search range equal mode based on the blinker information when the vehicle turns left. It goes without saying that the same effect can be obtained by switching the search range mode from the search range bias mode to the search range equal mode based on the right turn blinker information even when the vehicle turns right.

さらに、探索範囲モードを探索範囲偏重モードから探索範囲均等モードに切り替えるタイミングは、ウィンカー情報に限定されるものではなく、例えば、ステアリングセンサ等によって車両の操舵角を検出し、当該車両の操舵角情報に基づいて、判定されても構わない。換言すれば、当該操舵角に基づいて、車両の右折または左折状態が進んでいるか否かを判定する。   Furthermore, the timing at which the search range mode is switched from the search range bias mode to the search range equal mode is not limited to the blinker information. For example, the steering angle information of the vehicle is detected by detecting the steering angle of the vehicle using a steering sensor or the like. It may be determined based on the above. In other words, based on the steering angle, it is determined whether the vehicle is turning right or left.

本発明は、歩行者を検知するための演算量を低減しつつ、車両が右折または左折する場合、当該車両が右折または左折した直後の横断歩道を横断する歩行者を精度よく検知する歩行者検知装置等に有用である。   The present invention reduces the amount of computation for detecting a pedestrian, and when a vehicle turns right or left, detects a pedestrian that accurately crosses a pedestrian crossing immediately after the vehicle turns right or left. Useful for devices and the like.

100、500 歩行者検知装置
110 歩行者検知カメラ
120 歩行者検知判断ECU
130 探索範囲制御ECU
140 表示用ディスプレイ制御ECU
150 表示用ディスプレイ
160 カーナビゲーションECU
210 画像取得手段
220 歩行者探索手段
230 探索範囲モード設定手段
231 車両位置算出手段
232 車両位置判定手段
233 探索範囲モード選択手段
240 結果通知手段
250 右左折予測手段
260 記録手段
300、700 歩行者検知方法(左折)
400 歩行者検知方法(右折)
510 ボディー制御ECU
610 ウィンカー制御手段
S310 探索範囲均等モード設定ステップ
S320 左折予測ステップ
S330 第1距離算出ステップ
S340 第1距離判定ステップ
S350 探索範囲偏重モード設定ステップ
S360 第2距離算出ステップ
S370 第2距離判定ステップ
S380 探索範囲均等モード設定ステップ
S410 右折予測ステップ
S420 交差点相対位置算出ステップ
S430 交差点通過判定ステップ
S710 ウィンカー情報取得ステップ
S720 ウィンカーキャンセル判定ステップ
100, 500 Pedestrian detection device 110 Pedestrian detection camera 120 Pedestrian detection judgment ECU
130 Search range control ECU
140 Display Control ECU for Display
150 Display 160 Car Navigation ECU
210 Image acquisition means 220 Pedestrian search means 230 Search range mode setting means 231 Vehicle position calculation means 232 Vehicle position determination means 233 Search range mode selection means 240 Result notification means 250 Right / left turn prediction means 260 Recording means 300, 700 Pedestrian detection method (Left turn)
400 Pedestrian detection method (right turn)
510 Body Control ECU
610 Winker control means S310 Search range equal mode setting step S320 Left turn prediction step S330 First distance calculation step S340 First distance determination step S350 Search range bias mode setting step S360 Second distance calculation step S370 Second distance determination step S380 Search range equality Mode setting step S410 Right turn prediction step S420 Intersection relative position calculation step S430 Intersection passage determination step S710 Winker information acquisition step S720 Winker cancellation determination step

Claims (13)

車両に搭載される歩行者検知装置であって、
前記車両周辺の画像を取得する画像取得手段と、
前記車両が右折または左折することを予測する右左折予測手段と、
前記画像取得手段によって取得される画像領域内を予め設定された所定の精度で探索する探索範囲均等モードと、前記画像取得手段によって取得される画像領域を複数の探索領域に分割し、それぞれ異なる精度で探索する探索範囲偏重モードとのいずれかの探索範囲モードを、前記右左折予測手段による予測情報に基づいて設定する探索範囲モード設定手段と、
前記探索範囲モード設定手段によって設定された探索範囲モードに基づいて、前記画像取得手段によって取得された画像から歩行者を探索する歩行者探索手段と、
前記歩行者探索手段によって探索された結果を通知する結果通知手段とを備え、
前記探索範囲モード設定手段は、前記車両と、前記車両が右折または左折する交差点との距離に基づいて、前記探索範囲モードを設定することを特徴とする、歩行者検知装置。
A pedestrian detection device mounted on a vehicle,
Image acquisition means for acquiring an image around the vehicle;
A right / left turn predicting means for predicting that the vehicle makes a right turn or a left turn;
A search range equalization mode for searching within an image area acquired by the image acquisition means with a predetermined accuracy, and an image area acquired by the image acquisition means are divided into a plurality of search areas, each having different accuracy Search range mode setting means for setting any search range mode of search range bias mode to be searched based on prediction information by the right / left turn prediction means,
Based on the search range mode set by the search range mode setting means, pedestrian search means for searching for pedestrians from the image acquired by the image acquisition means,
A result notifying means for notifying the result searched by the pedestrian searching means,
The said search range mode setting means sets the said search range mode based on the distance of the said vehicle and the intersection where the said vehicle turns right or left, The pedestrian detection apparatus characterized by the above-mentioned.
前記探索範囲偏重モードは、前記分割された複数の探索領域のうち、少なくとも1つを高い精度で探索する特定領域を設定することを特徴とする、請求項1に記載の歩行者検知装置。   2. The pedestrian detection device according to claim 1, wherein the search range bias mode sets a specific region for searching at least one of the plurality of divided search regions with high accuracy. 前記探索範囲偏重モードは、前記分割された複数の探索領域のうち、前記特定領域以外の領域を低い精度で探索することを特徴とする、請求項2に記載の歩行者検知装置。   The pedestrian detection device according to claim 2, wherein the search range bias mode searches a region other than the specific region among the plurality of divided search regions with low accuracy. 前記探索範囲モード設定手段は、
前記車両が、前記右左折予測手段によって前記車両が右折または左折すると予測された交差点に近接する予め設定された第1タイミングで、前記探索範囲偏重モードを探索範囲モードとして設定することを特徴とする、請求項1〜3のいずれかに記載の歩行者検知装置。
The search range mode setting means includes:
The vehicle sets the search range bias mode as a search range mode at a first preset timing close to an intersection at which the vehicle is predicted to turn right or left by the right / left turn prediction means. The pedestrian detection device according to any one of claims 1 to 3.
前記探索範囲モード設定手段は、
前記右左折予測手段によって前記車両が右折または左折すると予測された交差点を、前記車両の右折または左折開始後予め設定された第2タイミングで、前記探索範囲均等モードを探索範囲モードとして設定することを特徴とする、請求項4に記載の歩行者検知装置。
The search range mode setting means includes:
The intersection range where the vehicle is predicted to turn right or left by the right / left turn prediction means is set as the search range mode at the second timing preset after the vehicle starts turning right or left. The pedestrian detection device according to claim 4, wherein the pedestrian detection device is characterized.
前記探索範囲モード設定手段は、
前記車両と、前記右左折予測手段によって前記車両が右折または左折すると予測された交差点との距離を算出する車両位置算出手段と、
前記車両位置算出手段によって算出された前記距離が予め設定された閾値未満であるか否かを判定する車両位置判定手段と、
前記車両位置判定手段によって前記距離が前記閾値未満であると判定された場合、前記探索範囲偏重モードを探索範囲モードとして選択し、前記車両位置判定手段によって前記距離が前記閾値以上であると判定された場合、前記探索範囲均等モードを探索範囲モードとして選択する探索範囲モード選択手段とを含むことを特徴とする、請求項4に記載の歩行者検知装置。
The search range mode setting means includes:
Vehicle position calculating means for calculating a distance between the vehicle and an intersection at which the vehicle is predicted to turn right or left by the right / left turn prediction means;
Vehicle position determination means for determining whether or not the distance calculated by the vehicle position calculation means is less than a preset threshold;
When the vehicle position determination means determines that the distance is less than the threshold, the search range bias mode is selected as the search range mode, and the vehicle position determination means determines that the distance is greater than or equal to the threshold. The pedestrian detection device according to claim 4, further comprising: search range mode selection means for selecting the search range equal mode as the search range mode.
前記右左折予測手段によって前記車両が左折すると予測された交差点を前記車両の左折開始後において、
前記車両位置判定手段は、前記車両位置算出手段によって算出された距離が前記車両の左折後における走行車線幅未満であるか否かを判定し、
前記探索範囲モード選択手段は、前記車両位置判定手段によって前記距離が前記走行車線幅未満であると判定された場合、前記探索範囲均等モードを探索範囲モードとして設定することを特徴とする、請求項6に記載の歩行者検知装置。
After the start of the left turn of the vehicle, the intersection where the vehicle is predicted to turn left by the right / left turn prediction means,
The vehicle position determination means determines whether the distance calculated by the vehicle position calculation means is less than a travel lane width after the vehicle turns left;
The search range mode selection unit sets the search range equal mode as a search range mode when the vehicle position determination unit determines that the distance is less than the travel lane width. 6. The pedestrian detection device according to 6.
前記右左折予測手段によって前記車両が右折すると予測された交差点を前記車両の右折開始後において、
前記車両位置判定手段は、前記車両が前記交差点を通過したか否かを判定し、
前記探索範囲モード選択手段は、前記車両位置判定手段によって前記車両が前記交差点を通過したと判定された場合、前記探索範囲均等モードを探索範囲モードとして設定することを特徴とする、請求項6〜7のいずれかに記載の歩行者検知装置。
After the start of a right turn of the vehicle, an intersection where the vehicle is predicted to turn right by the right / left turn prediction means,
The vehicle position determination means determines whether the vehicle has passed the intersection;
The search range mode selection unit sets the search range equal mode as a search range mode when the vehicle position determination unit determines that the vehicle has passed the intersection. The pedestrian detection device according to any one of 7.
前記車両の右折または左折を示すウィンカーを制御するウィンカー制御手段を、さらに備え、
前記第2タイミングは、前記ウィンカー制御手段によって前記車両の右折または左折が示されているウィンカーがキャンセルされるタイミングであることを特徴とする、請求項5に記載の歩行者検知装置。
A winker control means for controlling a winker indicating a right turn or a left turn of the vehicle,
The pedestrian detection apparatus according to claim 5, wherein the second timing is a timing at which a winker indicating a right turn or a left turn of the vehicle is canceled by the winker control means.
前記右左折予測手段によって前記車両が左折すると予測された場合、前記画像領域内のうちの左側領域は、前記画像領域内のうちの右側領域より高い精度で探索され、
前記右左折予測手段によって前記車両が右折すると予測された場合、前記画像領域内のうちの右側領域は、前記画像領域内のうちの左側領域より高い精度で探索されることを特徴とする、請求項1〜9のいずれかに記載の歩行者検知装置。
When the vehicle is predicted to turn left by the right / left turn predicting means, the left area in the image area is searched with higher accuracy than the right area in the image area,
The right region in the image region is searched with higher accuracy than the left region in the image region when the vehicle predicts that the vehicle will turn right. Item 10. The pedestrian detection device according to any one of Items 1 to 9.
前記探索範囲偏重モードは、前記分割された複数の探索領域のうち、前記特定領域を高い精度で探索し、前記特定領域以外の領域を探索しないことを特徴とする、請求項2に記載の歩行者検知装置。   The walking according to claim 2, wherein the search range bias mode searches the specific area with high accuracy among the plurality of divided search areas and does not search any area other than the specific area. Person detection device. 前記高い精度は、高負荷であること、および/または高精細であることを特徴とする、請求項1に記載の歩行者検知装置。   The pedestrian detection device according to claim 1, wherein the high accuracy is high load and / or high definition. 車両に搭載される歩行者検知装置が実行する歩行者検知方法であって、
前記車両周辺の画像を取得する画像取得ステップと、
前記車両が右折または左折することを予測する右左折予測ステップと、
前記車両と、前記右左折予測ステップで前記車両が右折または左折すると予測された交差点との距離を算出する車両位置算出ステップと、
前記画像取得ステップで取得される画像領域内を予め設定された所定の精度で探索する探索範囲均等モードと、前記画像取得ステップで取得される画像領域を複数の探索領域に分割し、それぞれ異なる精度で探索する探索範囲偏重モードとのいずれかの探索範囲モードを、前記車両位置算出ステップで算出された前記車両と前記交差点との距離に基づいて設定する探索範囲モード設定ステップと、
前記探索範囲モード設定ステップで設定された探索範囲モードに基づいて、前記画像取得ステップで取得された画像から歩行者を探索する歩行者探索ステップと、
前記歩行者探索ステップによって探索された結果を通知する結果通知ステップとを含む、歩行者検知方法。
A pedestrian detection method executed by a pedestrian detection device mounted on a vehicle,
An image acquisition step of acquiring an image around the vehicle;
A left-right turn prediction step for predicting that the vehicle will turn right or left; and
A vehicle position calculating step for calculating a distance between the vehicle and an intersection at which the vehicle is predicted to turn right or left in the right / left turn prediction step;
The search range equalization mode for searching the image area acquired in the image acquisition step with a predetermined accuracy set in advance, and the image area acquired in the image acquisition step is divided into a plurality of search areas, each having different accuracy A search range mode setting step for setting any one of the search range modes of the search range bias mode to be searched based on the distance between the vehicle and the intersection calculated in the vehicle position calculation step;
Based on the search range mode set in the search range mode setting step, a pedestrian search step for searching for a pedestrian from the image acquired in the image acquisition step;
A pedestrian detection method including a result notification step of notifying a result searched for by the pedestrian search step.
JP2010151347A 2010-07-01 2010-07-01 Pedestrian detection device Pending JP2012014527A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010151347A JP2012014527A (en) 2010-07-01 2010-07-01 Pedestrian detection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010151347A JP2012014527A (en) 2010-07-01 2010-07-01 Pedestrian detection device

Publications (1)

Publication Number Publication Date
JP2012014527A true JP2012014527A (en) 2012-01-19

Family

ID=45600858

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010151347A Pending JP2012014527A (en) 2010-07-01 2010-07-01 Pedestrian detection device

Country Status (1)

Country Link
JP (1) JP2012014527A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014010809A (en) * 2012-07-03 2014-01-20 Mitsubishi Motors Corp Driving support device
CN104574995A (en) * 2015-01-09 2015-04-29 北京尚易德科技有限公司 System and method for recording behaviors that locomotives turning right at crossing go through red light and do not avoid pedestrians
WO2015155946A1 (en) * 2014-04-11 2015-10-15 株式会社デンソー Recognition support system
WO2017013747A1 (en) * 2015-07-21 2017-01-26 日産自動車株式会社 Scene evaluation device, travel support device, and scene evaluation method
JP2020030362A (en) * 2018-08-23 2020-02-27 三菱電機株式会社 Map data, computer readable recording medium, and map data generator
JP2020147241A (en) * 2019-03-15 2020-09-17 本田技研工業株式会社 Vehicle control device, vehicle control method and program
JP2020166409A (en) * 2019-03-28 2020-10-08 株式会社デンソーテン In-vehicle device, in-vehicle system and surroundings monitoring method
JP2021033403A (en) * 2019-08-19 2021-03-01 矢崎エナジーシステム株式会社 On-vehicle unit and work vehicle operation support system

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014010809A (en) * 2012-07-03 2014-01-20 Mitsubishi Motors Corp Driving support device
US9944284B2 (en) 2014-04-11 2018-04-17 Denso Corporation Recognition support system
WO2015155946A1 (en) * 2014-04-11 2015-10-15 株式会社デンソー Recognition support system
CN106170827A (en) * 2014-04-11 2016-11-30 株式会社电装 Identify aid system
JP2015203923A (en) * 2014-04-11 2015-11-16 株式会社デンソー Acknowledgment support system
CN104574995A (en) * 2015-01-09 2015-04-29 北京尚易德科技有限公司 System and method for recording behaviors that locomotives turning right at crossing go through red light and do not avoid pedestrians
KR20180020286A (en) * 2015-07-21 2018-02-27 닛산 지도우샤 가부시키가이샤 Scene evaluation device, driving support device, scene evaluation method
CN107851374A (en) * 2015-07-21 2018-03-27 日产自动车株式会社 Scene apparatus for evaluating, driving assist system, scene appraisal procedure
WO2017013747A1 (en) * 2015-07-21 2017-01-26 日産自動車株式会社 Scene evaluation device, travel support device, and scene evaluation method
CN107851374B (en) * 2015-07-21 2019-05-10 日产自动车株式会社 Scene assesses device, driving assist system, scene appraisal procedure
US10074275B2 (en) 2015-07-21 2018-09-11 Nissan Motor Co., Ltd. Scene determination device, travel assistance apparatus, and scene determination method
KR102004102B1 (en) * 2015-07-21 2019-07-25 닛산 지도우샤 가부시키가이샤 Scene evaluation device, driving support device, scene evaluation method
JPWO2017013747A1 (en) * 2015-07-21 2018-05-24 日産自動車株式会社 Scene evaluation device, driving support device, and scene evaluation method
JP2020030362A (en) * 2018-08-23 2020-02-27 三菱電機株式会社 Map data, computer readable recording medium, and map data generator
JP2020147241A (en) * 2019-03-15 2020-09-17 本田技研工業株式会社 Vehicle control device, vehicle control method and program
JP7157686B2 (en) 2019-03-15 2022-10-20 本田技研工業株式会社 VEHICLE CONTROL DEVICE, VEHICLE CONTROL METHOD, AND PROGRAM
JP7195200B2 (en) 2019-03-28 2022-12-23 株式会社デンソーテン In-vehicle device, in-vehicle system, and surrounding monitoring method
JP2020166409A (en) * 2019-03-28 2020-10-08 株式会社デンソーテン In-vehicle device, in-vehicle system and surroundings monitoring method
JP2021033403A (en) * 2019-08-19 2021-03-01 矢崎エナジーシステム株式会社 On-vehicle unit and work vehicle operation support system

Similar Documents

Publication Publication Date Title
JP6325670B2 (en) Lane selection device, vehicle control system, and lane selection method
JP6572847B2 (en) Automated driving system
EP3367363B1 (en) Parking support method and parking support device
JP2012014527A (en) Pedestrian detection device
JP6520862B2 (en) Automatic driving system
JP6459220B2 (en) Accident prevention system, accident prevention device, accident prevention method
JP6468261B2 (en) Automated driving system
JP6428928B2 (en) Occlusion controller
US20110128136A1 (en) On-vehicle device and recognition support system
WO2020201796A1 (en) Vehicle control method and vehicle control device
JP6623906B2 (en) VEHICLE DISPLAY AND VEHICLE DISPLAY METHOD
JP2006085285A (en) Dangerous vehicle prediction device
JP6690612B2 (en) Out-of-vehicle alarm device
JP2018133072A (en) Information processing apparatus and program
JP2007226666A (en) Driving support method and driving support device
JP2008293122A (en) Obstacle monitoring device
JP2019197303A (en) Vehicle outside notification device
JP2007249757A (en) Warning device
EP3294611B1 (en) Predicted position display for vehicle
JP2007164439A (en) Information presentation device and method
JP2013088894A (en) Drive support device of vehicle
JP5416193B2 (en) Obstacle monitoring device
WO2021176825A1 (en) Sensing system
JP5018571B2 (en) Deceleration instruction device and deceleration instruction method
JP4088288B2 (en) Vehicle periphery monitoring device

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20120217