JP4962304B2 - 歩行者検出装置 - Google Patents

歩行者検出装置 Download PDF

Info

Publication number
JP4962304B2
JP4962304B2 JP2007334221A JP2007334221A JP4962304B2 JP 4962304 B2 JP4962304 B2 JP 4962304B2 JP 2007334221 A JP2007334221 A JP 2007334221A JP 2007334221 A JP2007334221 A JP 2007334221A JP 4962304 B2 JP4962304 B2 JP 4962304B2
Authority
JP
Japan
Prior art keywords
image
area
feature point
imaging
pedestrian
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007334221A
Other languages
English (en)
Other versions
JP2009157581A (ja
Inventor
章弘 渡邉
誠良 平塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Central R&D Labs Inc
Original Assignee
Toyota Central R&D Labs Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Central R&D Labs Inc filed Critical Toyota Central R&D Labs Inc
Priority to JP2007334221A priority Critical patent/JP4962304B2/ja
Publication of JP2009157581A publication Critical patent/JP2009157581A/ja
Application granted granted Critical
Publication of JP4962304B2 publication Critical patent/JP4962304B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、歩行者検出装置に係り、特に、カメラ等により連続的に撮像された画像に基づいて歩行者を検出する歩行者検出装置に関する。
従来からカメラ等により撮像された画像から歩行者を検出する技術が各種提案されている。
例えば、特許文献1には、歩行者が往来する空間の上部にカメラを設け、当該カメラにより連続的に撮像された画像からオプティカルフロー推定演算を行って画素毎に速度ベクトルを求め、画素の数を、速度ベクトルが示す方向毎に計数することにより速度場の分布状況を求めて、当該分布情報に基づいて歩行者を検出する技術が開示されている。
特開2003−109001号公報
しかしながら、上記特許文献1の技術を用いて、例えば、車両に搭載されたカメラにより得られた画像から車両周辺の歩行者を検出した場合、歩行者の上半身部分の領域のみが検出されてしまい、歩行者の全身部分の領域を検出できない、という問題点があった。
すなわち、撮像された画像において歩いている歩行者の脚部分は、各画素の移動方向が様々な方向となり、速度場の分布状況が一定の分布状況とはならないため、歩行者の脚部分にあたる下半身部分の領域を特定することが困難であり、撮像された画像から歩行者の全身部分の領域を検出できない。
本発明は上記問題点を解決するためになされたものであり、撮像された画像から歩行者の全身部分の領域を精度良く検出することができる歩行者検出装置を提供することを目的とする。
上記目的を達成するため、請求項1に記載の発明は、検出対象とする領域を連続的に撮像する撮像手段と、前記撮像手段による撮像によって得られた各画像から当該画像に含まれる被写体の画像内での位置を示す特徴点を検出する特徴点検出手段と、前記特徴点検出手段により検出された各画像の特徴点の位置の変化から各特徴点の動きを検出する動き検出手段と、前記動き検出手段により検出された各特徴点の動きに基づいて、前記撮像手段による撮像によって得られた画像内の動きが揃った領域を移動体領域と特定する移動体領域特定手段と、前記移動体領域特定手段により特定された移動体領域毎に、前記画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定する設定手段と、前記設定手段により設定された下部領域内の特徴点の動きが不揃いであるか否かを判定する判定手段と、前記判定手段により動きが不揃いであると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定する歩行者領域特定手段と、を備えている。
請求項1記載の発明では、撮像手段により、検出対象とする領域が連続的に撮像されており、特徴点検出手段により、撮像手段による撮像によって得られた各画像から当該画像に含まれる被写体の画像内での位置を示す特徴点が検出され、動き検出手段により、特徴点検出手段により検出された各画像の特徴点の位置の変化から各特徴点の動きが検出される。
そして、移動体領域特定手段により、動き検出手段により検出された各特徴点の動きに基づいて、前記撮像手段による撮像によって得られた画像内の動きが揃った領域が移動体領域と特定され、設定手段により、移動体領域特定手段により特定された移動体領域毎に、画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域が設定される。
そして、本発明では、判定手段により、設定手段により設定された下部領域内の特徴点の動きが不揃いであるか否かが判定され、歩行者領域特定手段により、判定手段により動きが不揃いであると判定された下部領域及び当該下部領域に対応する移動体領域が歩行者の全身領域と特定される。
このように、請求項1記載の発明によれば、撮像によって得られた画像内の動きが揃った移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定し、設定された下部領域内の特徴点の動きが不揃いであるか否かを判定し、動きが不揃いであると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定しているので、撮像された画像から歩行者の全身部分の領域を精度良く検出することができる。
一方、上記目的を達成するため、請求項2に記載の発明は、検出対象とする領域を連続的に撮像する撮像手段と、前記撮像手段による撮像によって得られた各画像から当該画像に含まれる被写体の画像内での位置を示す特徴点を検出する特徴点検出手段と、前記特徴点検出手段により検出された各画像の特徴点の位置の変化から各特徴点の動きを検出する動き検出手段と、前記動き検出手段により検出された各特徴点の動きに基づいて、前記撮像手段による撮像によって得られた画像内の動きが揃った領域を移動体領域と特定する移動体領域特定手段と、前記移動体領域特定手段により特定された移動体領域毎に、前記画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定する設定手段と、歩行する歩行者の脚部分の特徴を示すパターン画像データを予め記憶する記憶手段と、前記設定手段により設定された下部領域が、前記記憶手段に記憶されたパターン画像データにより示されるパターン画像に類似するか否かを判定する判定手段と、前記判定手段によりパターン画像に類似すると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定する歩行者領域特定手段と、を備えている。
請求項2記載の発明では、撮像手段により、検出対象とする領域が連続的に撮像されており、特徴点検出手段により、撮像手段による撮像によって得られた各画像から当該画像に含まれる被写体の画像内での位置を示す特徴点が検出され、動き検出手段により、特徴点検出手段により検出された各画像の特徴点の位置の変化から各特徴点の動きが検出される。
そして、移動体領域特定手段により、動き検出手段により検出された各特徴点の動きに基づいて、前記撮像手段による撮像によって得られた画像内の動きが揃った領域が移動体領域と特定され、設定手段により、移動体領域特定手段により特定された移動体領域毎に、画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域が設定される。
そして、本発明では、記憶手段により、歩行する歩行者の脚部分の特徴を示すパターン画像データが予め記憶されており、判定手段により、設定手段により設定された下部領域が、前記記憶手段に記憶されたパターン画像データにより示されるパターン画像に類似するか否かが判定され、歩行者領域特定手段により、判定手段によりパターン画像に類似すると判定された下部領域及び当該下部領域に対応する移動体領域が歩行者の全身領域と特定される。
このように、請求項2記載の発明によれば、撮像によって得られた画像内の動きが揃った移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定し、設定された下部領域が歩行する歩行者の脚部分の特徴を示すパターン画像に類似するか否かを判定し、パターン画像に類似すると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定しているので、撮像された画像から歩行者の全身部分の領域を精度良く検出することができる。
なお、本発明の前記特徴点検出手段は、請求項3記載の発明のように、前記撮像手段による撮像によって得られた各画像のエッジ検出を行って記特徴点として当該画像に含まれる被写体のエッジ画素を検出してもよい。
また、本発明は、請求項4記載の発明のように、撮像手段が、車両に搭載されて当該車両の前方の検出対象とする領域を連続的に撮像しており、動き検出手段が、前記車両の移動に伴うエッジ画素の動きを補正して各特徴点の動きを検出してもよい。
以上説明したように、本発明によれば、撮像された画像から歩行者の全身部分の領域を精度良く検出することができる、という優れた効果を有する。
以下、図面を参照して本発明の実施の形態について詳細に説明する。なお、以下では、本発明を、車両に搭載され、車両周辺の歩行者を検出して警告を行うドライバ支援装置に適用した場合を例として説明する。
[第1の実施の形態]
図1には、本実施の形態に係るドライバ支援装置10の概略構成が示されている。
同図に示すように、ドライバ支援装置10は、所定の検出対象領域を連続的に撮像するカメラ12と、各種情報を表示するディスプレイ14と、カメラ12による撮像により得られた画像に基づいて歩行者を検出し、検出された歩行者の位置に応じて警告を行う装置本体20と、を含んで構成されている。
なお、本実施の形態に係るカメラ12は、車両の前方グリルまたはバンパなどの車両の前方側に取り付けられており、車両の前方を撮像する。
図1に示すように、装置本体20は、ドライバ支援装置10全体の動作を司るCPU(中央処理装置)22と、CPU22による各種処理プログラムの実行時のワークエリア等として用いられるRAM(Random Access Memory)24と、後述する歩行者検出処理プログラムを含む各種制御プログラムや各種パラメータ等が予め記憶されたROM(Read Only Memory)26と、各種情報を記憶するHDD(ハード・ディスク・ドライブ)28と、カメラ12の撮影動作を制御するカメラ制御部30と、ディスプレイ14への画面やメッセージなどの各種情報の表示を制御する表示制御部32と、運転者へ警告を行うためのスピーカ34と、外部装置から車両の速度を示す速度情報が入力される入力ポート36と、を備えている。
CPU22、RAM24、ROM26、HDD28、カメラ制御部30、表示制御部32、スピーカ34、及び入力ポート36は、システムバスBUSを介して相互に接続されている。
従って、CPU22は、RAM24、ROM26、及びHDD28に対するアクセスと、カメラ制御部30を介してカメラ12の撮影動作の制御と、表示制御部32を介したディスプレイ14に対する各種情報の表示の制御と、スピーカ34からの音声の出力の制御と、を各々行うことができる。また、CPU22は、入力ポート36に入力される速度情報から車両の速度を把握することができる。
図2には、本実施の形態に係るドライバ支援装置10の機能的な構成を示す機能ブロック図が示されている。
同図に示されるように、ドライバ支援装置10は、動き検出部50と、移動体領域特定部52と、脚部判定部54と、歩行者領域特定部56と、警告表示制御部58と、を備えている。
カメラ制御部30は、動き検出部50、移動体領域特定部52、脚部判定部54、及び警告表示制御部58と接続されており、カメラ12による撮影によって得られた画像を示す画像データを順次出力する。
動き検出部50は、RAM24、HDD28、入力ポート36、移動体領域特定部52、及び脚部判定部54と接続されており、カメラ制御部30から画像データが順次入力され、入力ポート36から速度情報が入力される。
動き検出部50は、カメラ制御部30から入力される各画像データをRAM24に記憶させる。
また、動き検出部50は、カメラ制御部30から撮影によって得られた2枚目以降の画像データが入力されると、入力された画像データ及びRAM24に記憶された、当該入力された画像データの1枚前の画像データにより示される各画像のエッジ検出を行い、各画像の特徴点として、エッジ画素を検出する。
動き検出部50は、エッジ画素が検出された各画像の各エッジ画素の位置の変化から各エッジ画素の動き(オプティカルフロー)を検出し、各エッジ画素の動きを示す情報として動きベクトルを導出する。なお、本実施形態では、カメラ12は車両の前方を撮像している。このため、撮像によって得られた各画像において、車両周辺の物体は、移動していない状態であっても車両の速度に応じて消失点から放射状に移動し、消失点から離れるほど移動距離も大きくなる。そこで、本実施の形態では、例えば、予め実験やコンピュータ・シミュレーション等により、画像内における各エッジ画素の消失点からの位置及び車両の速度に応じた各エッジ画素の動きの補正量を示す補正情報を求めてHDD28に記憶させており、動き検出部50は、HDD28に記憶された当該補正情報に基づいて、画像内における各エッジ画素の消失点からの位置及び車両の速度に応じた補正量を求めて各エッジ画素の動きを示す情報を補正している。なお、各エッジ画素の動きの補正方法は、これに限定されるもではなく、例えば、画像内における各エッジ画素の消失点からの位置及び車両の速度をパラーメータとして、各エッジ画素の動きの補正量を導出する演算式を予め求めて補正情報としてHDD28に記憶させておき、動き検出部50は、HDD28に補正情報として記憶された当該演算式に基づいて、画像内における各エッジ画素の消失点からの位置及び車両の速度に応じた補正量を求めて各エッジ画素の動きを示す情報を補正するものとしてもよい。
動き検出部50は、導出した各エッジ画素の動きベクトルを示すベクトル情報を移動体領域特定部52へ出力する。
移動体領域特定部52は、脚部判定部54、及び歩行者領域特定部56と接続されており、カメラ制御部30から画像データが順次入力され、動き検出部50からベクトル情報が順次入力される。
移動体領域特定部52は、ベクトル情報により示される各エッジ画素の動きベクトルに基づいて、カメラ12による撮像によって得られた画像内において動きが揃った領域を移動体領域と特定する。本実施の形態では、例えば、カメラ12による撮像によって得られた画像内において、動きベクトルにより示される移動方向の差及び移動距離の差が各々所定の範囲内なる隣り合うエッジ画素同士をグルーピングすることを繰り返し、各々グルーピングされた各エッジ画素を囲む、歩行者の上半身部分に相当する所定形状の矩形領域を移動体領域と特定する。なお、移動体領域の特定方法は、これに限定されるもではない。
そして、移動体領域特定部52は、特定した移動体領域の位置を示す位置情報を脚部判定部54及び歩行者領域特定部56へ出力する。
脚部判定部54は、歩行者領域特定部56と接続されており、カメラ制御部30から画像データが順次入力され、移動体領域特定部52から移動体領域の位置を示す位置情報が順次入力される。
脚部判定部54は、移動体領域特定部52により特定された移動体領域毎に、画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じて、当該移動体領域のサイズに比例した、歩行者の脚部分に相当するサイズの下部領域を設定する。
そして、脚部判定部54は、設定された移動体領域毎に、カメラ12による撮像によって得られた画像内の各下部領域内のエッジ画素の動きが不揃いであるか否かを判定する。本実施の形態では、例えば、下部領域内の各エッジ画素の画素数を、動きベクトルが示す移動方向毎(例えば、所定の角度範囲毎)や移動距離毎(例えば、所定の距離範囲毎)に計数して移動方向別や移動距離別の画素数分布比率を求めた結果、画素数分布比率が所定の閾値(例えば、50%)となる部分がない場合に、下部領域内の特徴点の動きが不揃いであると判定する。なお、不揃いであるか否かを判定方法は、これに限定されるもではなく、例えば、移動体領域内の各エッジ画素の動きベクトルにより示される移動方向や移動距離の平均値を求め、当該平均値を基準として、下部領域内の各エッジ画素の動きベクトルにより示される移動方向や移動距離の分散や標準偏差等を求めて閾値と比較することにより下部領域内の特徴点の動きが不揃いであるか否かを判定するものとしてもよい。
そして、脚部判定部54は、動きが不揃いであると判定された下部領域の位置を示す位置情報を歩行者領域特定部56へ出力する。
歩行者領域特定部56は、警告表示制御部58と接続されており、カメラ制御部30から画像データが順次入力され、移動体領域特定部52から移動体領域の位置を示す位置情報が順次入力され、脚部判定部54から動きが不揃いであると判定された下部領域の位置を示す位置情報が順次入力される。
歩行者領域特定部56は、動きが不揃いであると判定された下部領域と当該下部領域に対応する移動体領域を歩行者の全身領域と特定し、当該下部領域と移動体領域を結合した領域の位置を示す位置情報を歩行者の全身領域の位置情報として警告表示制御部58へ出力する。
警告表示制御部58は、ディスプレイ14、及びスピーカ34と接続されており、カメラ制御部30から画像データが順次入力され、歩行者領域特定部56から歩行者の全身領域の位置を示す位置情報が入力される。
警告表示制御部58は、カメラ制御部30から順次入力される画像データにより示される画像をディスプレイ14に表示させ、歩行者領域特定部56から歩行者の全身領域の位置を示す位置情報が入力された場合、ディスプレイ14に表示される、当該位置情報により示される全身領域の表示形態を変更(例えば、全身領域を赤く囲んで表示)してドライバに対して警告を発生させるものとされている。なお、この際、スピーカ34から警告音や警告メッセージ等を出力するものとしもよい。
ところで、以上のように構成されたドライバ支援装置10の各構成要素(動き検出部50、移動体領域特定部52、脚部判定部54、歩行者領域特定部56、及び警告表示制御部58)による処理は、プログラムを実行することにより、コンピュータを利用してソフトウェア構成により実現することができる。但し、ソフトウェア構成による実現に限られるものではなく、ハードウェア構成や、ハードウェア構成とソフトウェア構成の組み合わせによって実現することもできることは言うまでもない。
以下では、本実施の形態に係るドライバ支援装置10が、歩行者検出処理プログラムを実行することにより上記各構成要素による処理を実現するものとされている場合について説明する。この場合、当該歩行者検出処理プログラムをROM26やHDD28に予めインストールしておく形態や、コンピュータ読み取り可能な記録媒体に格納された状態で提供される形態、有線又は無線による通信手段を介して配信される形態等を適用することができる。
次に、図3を参照して、本実施の形態に係るドライバ支援装置10の作用を説明する。なお、図3は、CPU22により実行される歩行者検出処理プログラムの処理の流れを示すフローチャートである。当該歩行者検出処理プログラムは、例えば、ドライバ支援装置10が搭載された車両のエンジンスイッチがオンされるなどによって図示しない車両制御装置から処理開始の指示信号が受信されるとCPU22により実行される。
同図のステップ100では、カメラ制御部30からの画像データの入力待ちを行っており、次のステップ102では、入力された画像データをRAM24に記憶させる。
次のステップ104では、ステップ100において入力された画像データが本歩行者検出処理プログラムの実行が開始されてから最初(1枚目)の画像データであるか否かを判定し、肯定判定となった場合はステップ100へ移行する一方、否定判定となった場合はステップ106へ移行する。
ステップ106では、入力される画像データ及びRAM24に記憶された、当該入力される画像データの1枚前の画像データにより示される各画像のエッジ検出を行ってエッジ画素を検出する。
次のステップ108では、エッジ画素が検出された各画像の各エッジ画素の位置の変化から各エッジ画素の動きベクトルを導出し、画像内における各エッジ画素の消失点からの位置、及び車両の速度に応じて各エッジ画素の動きを示す情報を補正する。
図4には、撮像によって得られた画像からエッジ画素の検出及びエッジ画素の動きベクトルが導出された結果の一例が示されている。
次のステップ110では、ベクトル情報により示される各エッジ画素の動きベクトルに基づいて、図4に示すように、画像内の動きが揃った領域を移動体領域と特定する。
次のステップ112では、特定された移動体領域毎に、画像内の当該移動体領域の下部に、図5に示すように、当該移動体領域のサイズに比例して歩行者の脚部分に相当する下部領域を設定する。
次のステップ114では、設定された移動体領域毎に、各下部領域内の特徴点の動きが不揃いであるか否かを判定し、図5に示すように、動きが不揃いであると判定された下部領域と当該下部領域に対応する移動体領域を結合して歩行者の全身領域を求める。
次のステップ116では、ディスプレイ14に、カメラ制御部30から順次入力される画像データにより示される画像と共に、上記ステップ114において求められた歩行者の全身領域を表示させる。
次にステップ120では、例えば、車両のエンジンスイッチがオフされるなどによって図示しない車両制御装置から処理終了の指示信号が入力したか否かを判定し、否定判定となった場合はステップ100へ移行する一方、肯定判定となった場合は本歩行者検出処理プログラムの処理が処理終了となる。
以上のように、本実施の形態によれば、カメラ12により連続的に撮像することによって得られた各画像内の動きが揃った移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定し、設定された下部領域内の特徴点の動きが不揃いであるか否かを判定し、動きが不揃いであると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定しているので、撮像された画像から歩行者の全身部分の領域を精度良く検出することができる。
[第2の実施の形態]
第2の実施の形態に係るドライバ支援装置10の電気系の要部構成は、上記第1の実施の形態(図1参照)とほぼ同一であり、HDD28に歩行する歩行者の脚部分の特徴を示すパターン画像データを予め記憶している点が異なっている。
図6には、本実施の形態に係るドライバ支援装置10の機能的な構成を示す機能ブロック図が示されている。なお、同図における図2と同一の処理部分には図2と同一の符号を付して、その説明を省略する。
脚部判定部54Aは、歩行者領域特定部56、及びHDD28と接続されており、カメラ制御部30から画像データが順次入力され、移動体領域特定部52から移動体領域の位置を示す位置情報が順次入力される。
脚部判定部54Aは、第1の実施の形態と同様に、移動体領域特定部52により特定された移動体領域毎に、画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じて、当該移動体領域のサイズに比例した、歩行者の脚部分に相当するサイズの下部領域を設定する。
そして、脚部判定部54は、HDD28からパターン画像データを読み出し、設定された各下部領域毎に、パターン画像データにより示されるパターン画像との類似度を求め、求めた類似度を所定の閾値と比較することにより、各下部領域がパターン画像データにより示されるパターン画像に類似するか否かを判定する。
そして、脚部判定部54は、類似すると判定された下部領域の位置を示す位置情報を歩行者領域特定部56へ出力する。
すなわち、本実施の形態では、図7に示すように、画像内の動きが揃った領域を移動体領域と特定し、当該移動体領域の下部に下部領域を設定し、下部領域がパターン画像データにより示されるパターン画像に類似している場合に下部領域と当該下部領域に対応する移動体領域を結合して歩行者の全身領域を求める。
以上のように、本実施の形態によれば、カメラ12により連続的に撮像することによって得られた画像内の動きが揃った移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定し、設定された下部領域が歩行する歩行者の脚部分の特徴を示すパターン画像に類似するか否かを判定し、パターン画像に類似すると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定しているので、撮像された画像から歩行者の全身部分の領域を精度良く検出することができる。
なお、上記各実施の形態では、車両に搭載され、車両周辺の歩行者を検出して警告を行うドライバ支援装置に本発明を適用した場合について説明したが、本発明はこれに限定されるものではない。
また、上記各実施の形態では、被写体の画像内での位置を示す特徴点としてエッジ画素を検出する場合について説明したが、本発明はこれに限定されるものではない。
その他、上記各実施の形態で説明したドライバ支援装置10の電気系の要部構成(図1参照。)、及びドライバ支援装置10の機能的な構成(図2、及び図6参照。)は一例であり、本発明の主旨を逸脱しない範囲内において適宜変更可能であることは言うまでもない。
また、本実施の形態で説明した歩行者検出処理プログラム(図3参照。)の処理の流れも一例であり、本発明の主旨を逸脱しない範囲内において適宜変更可能であることは言うまでもない。
実施の形態に係るドライバ支援装置の電気系の要部構成を示すブロック図である。 第1の実施の形態に係るドライバ支援装置の機能的な構成を示すブロック図である。 第1の実施の形態に係る歩行者検出処理プログラムの処理の流れを示すフローチャートである。 第1の実施の形態に係る撮像によって得られた画像からエッジ画素の検出及びエッジ画素の動きベクトルが導出した結果の一例を示す図である。 第1の実施の形態に係る移動体領域及び下部領域の一例を示す図である。 第2の実施の形態に係るドライバ支援装置の機能的な構成を示すブロック図である。 第2の実施の形態に係る移動体領域及び下部領域の一例を示す図である。
符号の説明
10 ドライバ支援装置
12 カメラ(撮像手段)
50 動き検出部(特徴点検出手段、動き検出手段)
52 移動体領域特定部(移動体領域特定手段)
54、54A 脚部判定部(設定手段、判定手段)
56 歩行者領域特定部(歩行者領域特定手段)

Claims (4)

  1. 検出対象とする領域を連続的に撮像する撮像手段と、
    前記撮像手段による撮像によって得られた各画像から当該画像に含まれる被写体の画像内での位置を示す特徴点を検出する特徴点検出手段と、
    前記特徴点検出手段により検出された各画像の特徴点の位置の変化から各特徴点の動きを検出する動き検出手段と、
    前記動き検出手段により検出された各特徴点の動きに基づいて、前記撮像手段による撮像によって得られた画像内の動きが揃った領域を移動体領域と特定する移動体領域特定手段と、
    前記移動体領域特定手段により特定された移動体領域毎に、前記画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定する設定手段と、
    前記設定手段により設定された下部領域内の特徴点の動きが不揃いであるか否かを判定する判定手段と、
    前記判定手段により動きが不揃いであると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定する歩行者領域特定手段と、
    を備えた歩行者検出装置。
  2. 検出対象とする領域を連続的に撮像する撮像手段と、
    前記撮像手段による撮像によって得られた各画像から当該画像に含まれる被写体の画像内での位置を示す特徴点を検出する特徴点検出手段と、
    前記特徴点検出手段により検出された各画像の特徴点の位置の変化から各特徴点の動きを検出する動き検出手段と、
    前記動き検出手段により検出された各特徴点の動きに基づいて、前記撮像手段による撮像によって得られた画像内の動きが揃った領域を移動体領域と特定する移動体領域特定手段と、
    前記移動体領域特定手段により特定された移動体領域毎に、前記画像内の当該移動体領域の下部に、当該移動体領域のサイズに応じたサイズの下部領域を設定する設定手段と、
    歩行する歩行者の脚部分の特徴を示すパターン画像データを予め記憶する記憶手段と、
    前記設定手段により設定された下部領域が、前記記憶手段に記憶されたパターン画像データにより示されるパターン画像に類似するか否かを判定する判定手段と、
    前記判定手段によりパターン画像に類似すると判定された下部領域及び当該下部領域に対応する移動体領域を歩行者の全身領域と特定する歩行者領域特定手段と、
    を備えた歩行者検出装置。
  3. 前記特徴点検出手段は、前記撮像手段による撮像によって得られた各画像のエッジ検出を行って記特徴点として当該画像に含まれる被写体のエッジ画素を検出する
    請求項1又は請求項2記載の歩行者検出装置。
  4. 前記撮像手段は、車両に搭載されて当該車両の前方の検出対象とする領域を連続的に撮像しており、
    前記動き検出手段は、前記車両の移動に伴うエッジ画素の動きを補正して各特徴点の動きを検出する
    請求項1〜請求項3の何れか1項記載の歩行者検出装置。
JP2007334221A 2007-12-26 2007-12-26 歩行者検出装置 Expired - Fee Related JP4962304B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007334221A JP4962304B2 (ja) 2007-12-26 2007-12-26 歩行者検出装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007334221A JP4962304B2 (ja) 2007-12-26 2007-12-26 歩行者検出装置

Publications (2)

Publication Number Publication Date
JP2009157581A JP2009157581A (ja) 2009-07-16
JP4962304B2 true JP4962304B2 (ja) 2012-06-27

Family

ID=40961555

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007334221A Expired - Fee Related JP4962304B2 (ja) 2007-12-26 2007-12-26 歩行者検出装置

Country Status (1)

Country Link
JP (1) JP4962304B2 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101131580B1 (ko) * 2009-12-22 2012-03-30 (주)엠아이웨어 차량 탑재 카메라를 이용한 주행 중 도로횡단 보행자 검출 방법
JP5772817B2 (ja) * 2010-03-29 2015-09-02 ソニー株式会社 画像処理装置および方法、並びに、プログラム
JP5548667B2 (ja) 2011-11-24 2014-07-16 富士重工業株式会社 車外環境認識装置
JP6100635B2 (ja) * 2012-12-13 2017-03-22 株式会社デンソー 移動体検出装置
DE102013012778A1 (de) * 2013-07-31 2015-02-05 Connaught Electronics Ltd. Verfahren zum Detektieren eines sich bewegenden Fußgängers anhand von charakteristischen Merkmalen und optischen Flussvektoren eines Bilds, Kamerasystem und Kraftfahrzeug
JP6626623B2 (ja) * 2015-03-27 2019-12-25 中日本高速道路株式会社 移動体検出装置
US10643338B2 (en) 2015-12-02 2020-05-05 Mitsubishi Electric Corporation Object detection device and object detection method
JP7309630B2 (ja) * 2020-02-12 2023-07-18 日立Astemo株式会社 画像処理装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7822224B2 (en) * 2005-06-22 2010-10-26 Cernium Corporation Terrain map summary elements
JP2007156832A (ja) * 2005-12-05 2007-06-21 Fujitsu Ten Ltd 車載用近赤外照射装置および車載用周辺監視装置
JP4456086B2 (ja) * 2006-03-09 2010-04-28 本田技研工業株式会社 車両周辺監視装置

Also Published As

Publication number Publication date
JP2009157581A (ja) 2009-07-16

Similar Documents

Publication Publication Date Title
JP4962304B2 (ja) 歩行者検出装置
JP5058002B2 (ja) 物体検出装置
JP2004145852A (ja) レーンマーカー位置検出方法及びレーンマーカー位置検出装置並びに車線逸脱警報装置
US20130329964A1 (en) Image-processing device and image-processing program
JP2020060550A (ja) 異常検出装置、異常検出方法、姿勢推定装置、および、移動体制御システム
JP6874850B2 (ja) 物体検知装置、物体検知方法、及びプログラム
JP2009265722A (ja) 顔向き検知装置
JP2012252501A (ja) 走行路認識装置及び走行路認識用プログラム
JP6407596B2 (ja) 画像処理装置、及び、運転支援システム
JP2008065757A (ja) 運転支援装置
JP5541099B2 (ja) 道路区画線認識装置
JP5012522B2 (ja) 路側境界面検出装置
JP6577595B2 (ja) 車両用外界認識装置
JP2011209070A (ja) 画像処理装置
JP2008128867A (ja) タイヤ向き特定装置
JP2008065756A (ja) 運転支援装置
JP2009181310A (ja) 道路パラメータ推定装置
JP6032141B2 (ja) 走行路面標示検知装置および走行路面標示検知方法
JP2012256159A (ja) 接近物検知装置および接近物検知方法
JP5098981B2 (ja) 顔部位検出装置
JP2008257399A (ja) 画像処理装置
JP5472137B2 (ja) 境界検出装置、および境界検出プログラム
JP2005301892A (ja) 複数のカメラによるレーン認識装置
JP2021051348A (ja) 物体距離推定装置及び物体距離推定方法
JP5430213B2 (ja) 車両周辺監視装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101108

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120228

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120312

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150406

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees