JP4444421B2 - 安全運転支援装置及び方法並びに物体検出装置 - Google Patents

安全運転支援装置及び方法並びに物体検出装置 Download PDF

Info

Publication number
JP4444421B2
JP4444421B2 JP35534999A JP35534999A JP4444421B2 JP 4444421 B2 JP4444421 B2 JP 4444421B2 JP 35534999 A JP35534999 A JP 35534999A JP 35534999 A JP35534999 A JP 35534999A JP 4444421 B2 JP4444421 B2 JP 4444421B2
Authority
JP
Japan
Prior art keywords
digital data
converting
output
binary data
edge
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP35534999A
Other languages
English (en)
Other versions
JP2001175877A (ja
Inventor
透 大木
博隆 岩野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Faurecia Clarion Electronics Co Ltd
Original Assignee
Clarion Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Clarion Co Ltd filed Critical Clarion Co Ltd
Priority to JP35534999A priority Critical patent/JP4444421B2/ja
Publication of JP2001175877A publication Critical patent/JP2001175877A/ja
Application granted granted Critical
Publication of JP4444421B2 publication Critical patent/JP4444421B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、車両の前後または左右などにビデオカメラを設置し、その画像信号をもとに他車の接近に対して注意を促す安全運転支援の技術の改良に関するもので、特に、光学機器の特性を利用することで、所望の位置の物体を簡素かつ安価に検出するようにしたものである。
【0002】
【従来の技術】
近年、デジタル技術の発達に伴い、ビデオカメラからの画像情報に基づいて周囲の状況を分析することにより、車両における他車の接近警報や自動制御などに応用しようとする安全運転支援の技術、例えば安全運転支援装置が提案されている。
【0003】
このような技術では、周囲の状況の把握が不可欠であるが、従来、ビデオカメラにより距離を測る方式として、ステレオ視によるステレオ測位が知られている。このうちステレオ視は、動物の両目のように位置をずらして設置した2台のビデオカメラを使って同じ対象を把握することであり、ステレオ測位は、三角測量と同様に、同一の物体を異なる2つの視点から見ることによって、その3次元的な位置を測るものである。
【0004】
このようなステレオ測位を用いた安全運転支援の技術としては、ステレオ測位により常に周知の各物体までの距離を計測し、そのような距離がある閾値以内になったら警報を発するなどが考えられる。
【0005】
【発明が解決しようとする課題】
ところで、上記のようなステレオ測位を、生体ではなく機械で実現する場合、最も困難な部分は、両方のビデオカメラから出力されてくる2つの画像間で対応する共通箇所をいかに見つけるかであり、この点についてはいろいろな技術が提案されている。特に、測位対象が明確で測定条件があまり変わらない場合は、共通箇所の抽出は比較的容易であるが、道路上で車を検出するような場合、検出しようとする側も検出される側も双方動いていたり、両者の位置関係も刻々と変化したり、背景まで移り変っていくなど、変化する要素が多い。
【0006】
このため測定条件が大きく変動しやすく、2つの画像間で対応する箇所を見つけることは大変困難であり、これを実現するには、特殊な回路、高速なプロセッサ、複雑なアルゴリズム、高度なチューニングなどを要し、大規模で高価なシステムが必要になるという問題点があった。
【0007】
また、画像以外を用いた距離検知の技術も提案されているが、その一例として、例えばレーザーレーダを使うような能動型の技術では、他車も同様な装置を取り付けていた場合、レーザー光線などの相互干渉などにより誤動作する可能性が高いという問題があった。
【0008】
本発明は、上記のような従来技術の問題点を解決するために提案されたもので、その目的は、光学機器の特性を利用することにより、所望の位置の物体を確実に検出する簡素で安価な安全運転支援の技術、すなわち安全運転支援装置及び方法並びに物体検出装置を提供することである。
【0009】
上記の目的を達成するため、請求項1の物体検出装置は、被写界深度が浅い望遠レンズを備えたアナログ画像信号を出力するためのビデオカメラと、出力される前記アナログ画像信号をデジタルデータに変換するためのA/D変換器と、変換された前記デジタルデータからエッジを抽出するためのエッジ抽出回路と、前記デジタルデータを、少なくとも抽出された前記エッジの部分とそれ以外の部分のバイナリ値が互いに異なる二値データに変換するための二値化回路と、前記二値データを格納するためのメモリと、変換された前記二値データのうち、前記抽出したエッジの部分の前記デジタルデータを変換した二値データが占める量が所定の基準値を超えるかどうか判定し、超えたときにトリガ信号を出力するためのエッジ量判定回路と、前記トリガ信号が出力されたことを報知するための警報装置と、を備えたことを特徴とする。
また、請求項2の安全運転支援装置は、車両に設けられ、被写界深度が浅い望遠レンズを備えたアナログ画像信号を出力するためのビデオカメラと、出力される前記アナログ画像信号をデジタルデータに変換するためのA/D変換器と、変換された前記デジタルデータからエッジを抽出するためのエッジ抽出回路と、前記デジタルデータを、少なくとも抽出された前記エッジの部分とそれ以外の部分のバイナリ値が互いに異なる二値データに変換するための二値化回路と、前記二値データを格納するためのメモリと、変換された前記二値データのうち、前記抽出したエッジの部分の前記デジタルデータを変換した二値データが占める量が所定の基準値を超えるかどうか判定し、超えたときにトリガ信号を出力するためのエッジ量判定回路と、前記トリガ信号が出力されたことを報知するための警報装置と、を備えたことを特徴とする。
請求項3の安全運転支援方法は、請求項2の発明を方法という観点から把握したもので、車両に設けられ被写界深度が浅い望遠レンズを備えたビデオカメラからアナログ画像信号を出力するためのプロセスと、出力される前記アナログ画像信号をデジタルデータに変換するためのプロセスと、変換された前記デジタルデータからエッジを抽出するためのプロセスと、前記デジタルデータを、少なくとも抽出された前記エッジの部分とそれ以外の部分のバイナリ値が互いに異なる二値データに変換するためのプロセスと、変換された前記二値データのうち、前記抽出したエッジの部分の前記デジタルデータを変換した二値データが占める量が所定の基準値を超えるかどうか判定し、超えたときにトリガ信号を出力するためのプロセスと、前記トリガ信号が出力されたときにそのことを報知するためのプロセスと、を含むことを特徴とする。
本発明では、ビデオカメラに望遠レンズを付け、絞りを開いて被写界深度を浅くし、物体を検出したい所望の距離に焦点距離を合わせた状態で、画像のエッジ検出を行う。このとき、その焦点距離付近に他車などの物体がなければ、焦点が合わないため画像は全体的にぼけており、エッジは検出されない。一方、焦点距離付近に他車などの物体がある場合、その物体にピントが合うためエッジが検出される。このため、検出されたエッジの量を判定すれば、単眼つまり単一のビデオカメラだけで距離センサと同様に、その焦点距離付近の物体の有無が判定できる。
このため、特に、複数のビデオカメラを使った従来のステレオ視と比べてカメラが1個で済み、かつ、各対象物までの距離を測定するような複雑な処理回路なども大幅に削減でき、他車両の接近による危険予知などが可能な、簡素で安価な安全運転支援の技術を提供することが可能となる。また、本発明では、ビデオカメラからの画像の処理による受動型の技術で物体を検出するので、レーザー光線などの干渉による誤動作もなく、確実な検出も実現される。
【0010】
【発明の実施の形態】
次に、本発明の実施の形態(実施形態と呼ぶ)について、図面を参照して具体的に説明する。
【0011】
〔1.構成〕
本実施形態は、本発明の安全運転支援装置と、その上で実行される安全運転支援方法に関するもので、物体検出装置として把握することもできる。まず、図1は、本実施形態における安全運転支援装置(本装置と呼ぶ)の構成を示す機能ブロック図である。
【0012】
すなわち、本装置は、自動車などの車両に設けられ、画像情報としてアナログ画像信号を出力するためのビデオカメラ1と、ビデオカメラ1に設けられた望遠レンズ2と、を備えている。なお、ビデオカメラ1は、車両の前後や左右など所望の位置に設けられ、例えばCCD(撮像素子)を備えている。
【0013】
また、本装置は、ビデオカメラ1から出力される前記アナログ画像信号をデジタルデータに変換するためのA/D変換器3と、変換された前記デジタルデータからエッジを抽出(検出とも呼ぶ)するためのエッジ抽出回路4と、A/D変換器3により変換された前記デジタルデータを、二値データに変換するための二値化回路5と、を備えている。この二値データの具体的形式は自由であるが、一例として、ピクセル(画素)ごとに1ビットのバイナリ値を持ち、各ピクセルのバイナリ値として、抽出された前記エッジの部分(エッジ部と呼ぶ)を“0”とし、それ以外の部分を“1”とするなどが考えられる。
【0014】
また、本装置は、変換された前記二値データを格納するためのメモリ6と、メモリ6に格納された前記二値データに基づいて、エッジ部の量が所定の基準値を超えるかどうか判定し、超えたときに、トリガ信号である車両接近信号を出力するためのエッジ量判定回路7と、この車両接近信号が出力されたときにそのことを報知するための警報装置8と、を備えている。
【0015】
〔2.作用〕
上記のように構成された本実施形態は、次のように作用する。
【0016】
〔2−1.全体的動作手順〕
本実施形態では、絞りを開いた状態、すなわち被写界深度を浅くした状態で、物体を検出したい所望の距離Rに焦点距離を合わせる。ここで、望遠レンズや絞りに関する具体的数値は、構成部材の種類や型式、周囲の明るさや使用環境などに応じて選択することになるが、一例として、望遠レンズは焦点距離80〜100mm程度以上が望ましく、絞りはF4程度以下に開くことが望ましい。
【0017】
そして、ビデオカメラ1のCCDに結像した画像によるアナログ画像信号を、AD変換器3が、デジタルデータであるデジタル画像信号にする。次に、変換された前記デジタル画像信号から、エッジ抽出回路4で画像のエッジ検出を行う。また、A/D変換器3により変換されたデジタル画像信号は、エッジ抽出回路4によるエッジ抽出の結果に基づいて、二値化回路5で二値化され、二値データとしてメモリ6に格納される。この場合の二値データは、例えばエッジ部が“0”、それ以外の個所が“1”としてメモリに格納される。
【0018】
そして、エッジ量判定回路7は、エッジ部の量が所定の基準値を超えるかどうか判定する。具体的には、エッジ量判定回路7は、メモリ6に格納された二値データを読み込み、“0”(エッジ部)の数を計数し、あらかじめ設定された閾値より多い場合に、トリガ信号である車両接近信号を出力する。この車両接近信号が出力されたときは、警報装置8が警報音などでそのことを運転者に報知する。
【0019】
〔2−2.実例〕
次に、対象物の位置の違いに応じて、エッジ抽出の結果や本装置の動作が異なる様子を説明する。まず、対象物として、焦点の合わない位置の車両Aのみが存在し、焦点距離R付近には他車などの物体がないときは、ビデオカメラ1のCCDに結像する画像は当然ながらピントが合わないため全体的にぼけている。このため、エッジ抽出回路4では、エッジはほとんど検出されず、エッジ量判定回路7から車両接近信号は出力されず、警報装置8から警報は出ないことになる。
【0020】
この場合の二値データの表す画像イメージを図2に示す。この例は、エッジ部を表す“0”を白、それ以外の部分を表す“1”を黒で表したもので、エッジがぼとんど検出されないため全面ほぼ黒色となっている。
【0021】
一方、対象物として、焦点距離付近の焦点の合う位置に車両Bが存在する場合、その車両Bにピントが合うため、ビデオカメラ1からは明瞭な輪郭を含む画像情報が出力され、エッジ抽出回路4は、多くのエッジを検出することになる。このため、エッジ量判定回路7から車両接近信号が出力され、警報装置8から警報が出ることになる。
【0022】
この場合の二値データの表す画像イメージを図3に示す。この例では、車の形のエッジが白い色で示されている。すなわち、本装置では、このような画像イメージを一旦メモリ6に格納して、画像の白部分である“0”すなわちエッジ部の画素数を計数し、その数があらかじめ設定された閾値より多い場合に、他車が接近してきたものとして、警報音などでそのことを運転者に報知するものである。
【0023】
〔3.効果〕
以上説明したように、本実施形態では、検出されたエッジの量を判定することにより、単眼すなわち単一のビデオカメラ1だけで距離センサと同様に、その焦点距離付近の物体の有無が判定できる。このため、特に、複数のビデオカメラを使った従来のステレオ視と比べてカメラが1個で済み、かつ、各対象物までの距離を測定するような複雑な処理回路なども大幅に削減でき、他車両の接近による危険予知などが可能な、簡素で安価な安全運転支援の技術を提供することが可能となる。また、本実施形態では、ビデオカメラからの画像の処理による受動型の技術で物体を検出するので、レーザー光線などの干渉による誤動作もなく、確実な検出も実現される。
【0024】
また、信号エッジ量判定回路7において、設定する閾値にある程度の余裕を設定すれば、各種ノイズによる誤判定を防ぐ事も可能となり、判定精度が一層向上する。
【0025】
〔4.他の実施形態〕
なお、本発明は上記実施形態に限定されるものではなく、次に例示するような他の実施形態も包含するものである。例えば、車両の種類は自動車には限定されず、例えば二輪車に適用することもできる。また、画像情報としてデジタル画像信号を出力するタイプのビデオカメラを使い、A/D変換器を省略してもよい。
【0026】
また、抽出されたエッジの量に基づいて、所定距離にある物体の大きさまで判定すれば、例えば大型車の接近に対して通常とは異なる警報音を発するなども可能となる。また、車両接近信号などのトリガ信号が出力された場合、そのことを警報装置などで報知するだけでなく、例えば高速走行中に前方の対象物が基準となる車間距離まで近づくと、速度を落とすように自動制御することも可能である。
【0027】
【発明の効果】
以上説明したように、本発明によれば、光学機器の特性を利用することにより、所望の位置の物体を確実に検出する簡素で安価な安全運転支援の技術、すなわち安全運転支援装置及び方法並びに物体検出装置を提供することができるので、交通の安全性向上に貢献することができる。
【図面の簡単な説明】
【図1】本発明の実施形態における安全運転支援装置の構成を示す機能ブロック図。
【図2】本発明の実施形態において、焦点が合わない場合の二値化データの画像イメージを例示する図。
【図3】本発明の実施形態において、焦点が合っている場合の二値化データの画像イメージを例示する図。
【符号の説明】
1…ビデオカメラ
2…望遠レンズ
3…A/D変換器
4…エッジ抽出回路
5…二値化回路
6…メモリ
7…エッジ量判定回路
8…警報装置
A…焦点の合わない位置にある車両
B…焦点の合う位置にある車両
R…焦点距離

Claims (3)

  1. 被写界深度が浅い望遠レンズを備えたアナログ画像信号を出力するためのビデオカメラと、
    出力される前記アナログ画像信号をデジタルデータに変換するためのA/D変換器と、
    変換された前記デジタルデータからエッジを抽出するためのエッジ抽出回路と、
    前記デジタルデータを、少なくとも抽出された前記エッジの部分とそれ以外の部分のバイナリ値が互いに異なる二値データに変換するための二値化回路と、
    前記二値データを格納するためのメモリと、
    変換された前記二値データのうち、前記抽出したエッジの部分の前記デジタルデータを変換した二値データが占める量が所定の基準値を超えるかどうか判定し、超えたときにトリガ信号を出力するためのエッジ量判定回路と、
    前記トリガ信号が出力されたことを報知するための警報装置と
    を備えたことを特徴とする物体検出装置。
  2. 車両に設けられ、被写界深度が浅い望遠レンズを備えたアナログ画像信号を出力するためのビデオカメラと、
    出力される前記アナログ画像信号をデジタルデータに変換するためのA/D変換器と、
    変換された前記デジタルデータからエッジを抽出するためのエッジ抽出回路と、
    前記デジタルデータを、少なくとも抽出された前記エッジの部分とそれ以外の部分のバイナリ値が互いに異なる二値データに変換するための二値化回路と、
    前記二値データを格納するためのメモリと、
    変換された前記二値データのうち、前記抽出したエッジの部分の前記デジタルデータを変換した二値データが占める量が所定の基準値を超えるかどうか判定し、超えたときにトリガ信号を出力するためのエッジ量判定回路と、
    前記トリガ信号が出力されたことを報知するための警報装置と、を備えたことを特徴とする安全運転支援装置。
  3. 車両に設けられ被写界深度が浅い望遠レンズを備えたビデオカメラからアナログ画像信号を出力するためのプロセスと、
    出力される前記アナログ画像信号をデジタルデータに変換するためのプロセスと、
    変換された前記デジタルデータからエッジを抽出するためのプロセスと、
    前記デジタルデータを、少なくとも抽出された前記エッジの部分とそれ以外の部分のバイナリ値が互いに異なる二値データに変換するためのプロセスと、
    変換された前記二値データのうち、前記抽出したエッジの部分の前記デジタルデータを変換した二値データが占める量が所定の基準値を超えるかどうか判定し、超えたときにトリガ信号を出力するためのプロセスと、
    前記トリガ信号が出力されたときにそのことを報知するためのプロセスと、
    を含むことを特徴とする安全運転支援方法。
JP35534999A 1999-12-15 1999-12-15 安全運転支援装置及び方法並びに物体検出装置 Expired - Fee Related JP4444421B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP35534999A JP4444421B2 (ja) 1999-12-15 1999-12-15 安全運転支援装置及び方法並びに物体検出装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP35534999A JP4444421B2 (ja) 1999-12-15 1999-12-15 安全運転支援装置及び方法並びに物体検出装置

Publications (2)

Publication Number Publication Date
JP2001175877A JP2001175877A (ja) 2001-06-29
JP4444421B2 true JP4444421B2 (ja) 2010-03-31

Family

ID=18443428

Family Applications (1)

Application Number Title Priority Date Filing Date
JP35534999A Expired - Fee Related JP4444421B2 (ja) 1999-12-15 1999-12-15 安全運転支援装置及び方法並びに物体検出装置

Country Status (1)

Country Link
JP (1) JP4444421B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120062725A1 (en) * 2010-09-10 2012-03-15 Gm Global Technology Operations, Inc. System for error-proofing manual assembly operations using machine vision

Also Published As

Publication number Publication date
JP2001175877A (ja) 2001-06-29

Similar Documents

Publication Publication Date Title
EP2352136B1 (en) System for monitoring the area around a vehicle
WO2017158958A1 (ja) 画像処理装置、物体認識装置、機器制御システム、画像処理方法およびプログラム
EP2234086B1 (en) Vehicle periphery monitoring device, vehicle, vehicle periphery monitoring program, and vehicle periphery monitoring method
KR101656162B1 (ko) 자동차의 운전자 지원 장치 작동 방법, 운전자 지원 장치 및 자동차
JP6198113B2 (ja) 対象物認識装置、機器制御システム、車両、対象物認識方法及び対象物認識用プログラム
EP1553516A2 (en) Pedestrian extracting apparatus
JP2004112144A (ja) 前方車両追跡システムおよび前方車両追跡方法
JP2008027309A (ja) 衝突判定システム、及び衝突判定方法
EP3150961A1 (en) Stereo camera device and vehicle provided with stereo camera device
WO2010007718A1 (ja) 車両周辺監視装置
US9524645B2 (en) Filtering device and environment recognition system
KR101818842B1 (ko) 운전지원장치, 거리감지방법 및 차로의 너비감지방법
JP6992356B2 (ja) 情報処理装置、撮像装置、機器制御システム、移動体、情報処理方法およびプログラム
JP4444421B2 (ja) 安全運転支援装置及び方法並びに物体検出装置
JP2007172504A (ja) 付着物検出装置及び付着物検出方法
JP4788399B2 (ja) 歩行者検出方法、装置、およびプログラム
CN112542060B (zh) 车用后侧方警报装置
US6433816B1 (en) Method for compensating for noise in lane drifting warning system
JP5717416B2 (ja) 運転支援制御装置
CN111756987B (zh) 一种车载摄像头的控制方法、装置及车载图像捕捉系统
JP2008028478A (ja) 障害物検出システム、及び障害物検出方法
CN112334944B (zh) 摄像机装置的标志识别方法及标志识别装置
JP4794764B2 (ja) 車外監視装置
JP2015219212A (ja) ステレオカメラ装置及び距離算出方法
JP7419469B1 (ja) 情報処理装置、情報処理方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090907

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090915

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091116

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100112

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100114

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130122

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140122

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees