JP2004272734A

JP2004272734A - 画像処理方法

Info

Publication number: JP2004272734A
Application number: JP2003064422A
Authority: JP
Inventors: Masahiko Uno; 真彦宇野
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2003-03-11
Filing date: 2003-03-11
Publication date: 2004-09-30

Abstract

【課題】必要な設定項目が少なく、簡易な構成で、エッジ画像内から複数の直線を高速に抽出できる画像処理方法を得る。
【解決手段】エッジ画像を入力するステップＳ１と、方向の初期値を設定するステップＳ２と、エッジ画像に対して指定された方向αの投影データを計算するステップＳ３と、前記投影データから直線が含まれる画像領域を抽出するステップＳ４と、前記画像領域から直線抽出を行うステップＳ５とを含み、第ステップＳ３からステップＳ５までを、ステップＳ３で指定する方向αを変化させて繰り返し行うことで、エッジ画像から任意の方向の直線を検出する。また、必要に応じて、ステップＳ５で抽出した直線の近傍のエッジ点を画像領域から削除するステップＳ６の処理をステップＳ５に追加する。
【選択図】図１

Description

【０００１】
【発明の属する技術分野】
この発明は画像処理方法に関し、特に、画像から直線を抽出する画像処理方法であって、ロボットの眼、あるいは、マルチメディアにおける画像解析・画像認識などに広く適用することができる画像処理方法に関するものである。
【０００２】
【従来の技術】
従来の技術では、ハフ変換と呼ばれる画像処理方法によって複数の直線抽出を行うことが多く、その処理の高速化手法はいくつか提示されている。その例として、画像データを局所画像に分割し、各領域のρθ変換を行い、必要に応じて１次元フィルタ処理を行うものがある。次に局所ρθデータの補完を行い、得られた局所ρθについてピーク抽出処理を行い、局所線分のパラメータ（ρｉ、θｉ）を得るという方法がある（例えば、特許文献１参照。）。
【０００３】
【特許文献１】
特開２０００−４８１９５号公報
【０００４】
【発明が解決しようとする課題】
従来の発明は、ハフ変換を利用したものが多いが、元々が演算処理量の非常に多い方法であり、高速化手法を適用してもなお処理量が多く、構成も複雑であるという問題点があった。
【０００５】
また、直線の抽出精度に関連するρθ投票平面における分解能の設定など、設定項目が多いという問題点もあった。
【０００６】
この発明は、かかる問題点を解決するためになされたものであり、必要な設定項目が少なく、簡易な構成で画像内から複数の直線を高速に抽出する画像処理方法を得ることを目的とするものである。
【０００７】
【課題を解決するための手段】
この発明は、エッジ画像から１以上の直線を検出する画像処理方法であって、前記エッジ画像を入力する第１のステップと、前記エッジ画像に対して指定した方向の投影データを計算する第２のステップと、前記投影データに基づいて、直線が含まれる画像領域を抽出する第３のステップと、抽出された前記画像領域から直線抽出を行う第４のステップとを備え、前記第２のステップから前記第４のステップまでを、前記第２のステップで指定する方向を変化させて繰り返し行うことで、前記エッジ画像から任意の方向の直線を検出する。
【０００８】
【発明の実施の形態】
実施の形態１．
以下、図面を参照しながら、この発明の実施の形態１に係る画像処理方法について詳細に説明する。図１は、この発明の実施の形態１に係る画像処理方法を示した流れ図、図２は、この発明の実施の形態１に係る画像処理方法を実現するための画像処理装置の構成を示す図である。
【０００９】
図２において、この発明の実施の形態１に係る画像処理装置は、対象物体１０を撮像するＣＣＤカメラ１ａと画像を保持する画像メモリ１ｂなどで構成されるエッジ画像入力手段１と、前記エッジ画像入力手段１によって入力されたエッジ画像について、指定した方向αにそって投影処理を行う投影処理手段２と、前記投影処理手段２の結果を用いて、直線が含まれる画像領域を抽出する画像領域抽出手段３と、前記画像領域抽出手段３によって抽出された画像領域より直線を抽出する直線抽出手段４と、前記画像領域抽出手段３によって抽出された画像領域より、前記直線抽出手段４によって抽出された直線の近傍のエッジ点を削除するエッジ点除去手段５とを備えている。なお、図２において、６は直線検出結果である。
【００１０】
次に、図２に基づいて、この発明の実施の形態１に係る画像処理装置の動作について説明する。まず、対象物体１０を撮像手段であるＣＣＤカメラ１ａで撮像し、画像メモリ１ｂに撮像した画像データを入力して、フィルタ処理などの画像処理によって、エッジ画像を生成する。図２に示したエッジ画像入力手段１は、ＣＣＤカメラ１ａが構成要素に含まれているが、かならずしも撮像手段が含まれている必要はなく、例えばエッジ画像の画像ファイルをメディアから読み取ってエッジ画像を入力する様に構成してもかまわない。エッジ画像入力手段１によりエッジ画像が入力されると、投影処理手段２は、前記エッジ画像に対し、指定した方向αについて画像処理の投影処理を行う。画像領域抽出手段３は、投影処理手段２の処理結果を踏まえて、投影カウントの多い画像領域を、前記エッジ画像から抽出する。直線抽出手段４は、前記エッジ画像に対して、画像領域抽出手段３が抽出した領域内で、エッジ点を抽出し、その座標が構成する直線を検出する。直線の検出とは、直線の有無と、直線が存在した場合に、エッジ画像上における直線の式ａｘ＋ｂｙ＋ｃ＝０を計算することを指す。エッジ点除去手段５は、直線抽出手段４によって直線が抽出された場合に、その抽出された直線の近傍のエッジ点を、画像領域抽出手段３が抽出した領域内から除去し、以後の計算に、それらのエッジ点を使わないようにする。この投影処理手段２からエッジ点除去手段５までの一連の動作を、投影処理手段２の投影処理パラメータである投影方向αを変化させて繰り返し実施する。この結果、エッジ画像内の任意の方向をもつ複数の直線がすべて検出できる。
【００１１】
次に、この発明の実施の形態１に係る画像処理方法の動作について、主に図１を用いてさらに詳細に説明する。まず、ステップＳ１では、エッジ画像入力手段１により、エッジ画像を作成、入力する。ここでエッジ画像とは、対象物体１０のエッジ部分が画像データとなっているものとする。例えば、対象物体１０のエッジ部分の画像が高輝度画素（例えば白色）となり、それ以外の部分は低輝度画素（例えば黒色）となるものとする。またこれらのエッジを構成する点（画素）をエッジ点と呼ぶことにする。エッジ画像（エッジ点）の黒白は反転していてもよい。また、ステップＳ１では、ＣＣＤカメラ１ａなどの撮像手段を用いて撮像した画像を画像処理（エッジフィルタ処理）することで、エッジ画像を作成してもよいし、あらかじめ、エッジ画像として保存されたデータを外部から読み込んでも良い。
【００１２】
次に、ステップＳ２およびＳ３において、投影処理手段２により、前記エッジ画像の投影処理を行う。投影処理とは、図３に示すように、あらかじめ指定したΔＷの区間幅の指定方向αに対して、エッジ点の数の累積をとったヒストグラム（投影データ）を計測することである。図１ステップＳ２では、指定方向αの初期値はα＝０°として、ステップＳ３で、方向αで投影データ（Ｘ’−Ｙ’）をとる。この後、後述するステップＳ７で所定のΔαずつαの値を大きくして、同じ処理を繰り返す。エッジ画像内に、向きがαの方向をもつ直線エッジがあれば、この投影データの値（投影カウント）は大きくなる。従って、この投影データは、エッジ画像内に方向αの直線が存在するかどうかの目安になる。また、直線の検出の感度は、図３に示したヒストグラムの区間幅ΔＷで制御できる。指定方向αに対して、ΔＷを大きく取ると、直線の向きがαから多少ぶれていても、投影データとして加算されることになるので、α方向に対してある範囲をもった直線の存在を判断できる。一方、ΔＷを小さくとると、α方向をもつ直線のみ感度良く判断できる。
【００１３】
ステップＳ４では、画像領域抽出手段３により、あらかじめ指定したΔＷの区間幅の投影カウントＹ’を、あらかじめ指定したしきい値Ｐ_ｔｈと比較する。その投影カウントＹ’がしきい値Ｐ_ｔｈを超えた場合、その区間幅ΔＷ内に存在するエッジ点が存在するエッジ画像の領域を、直線が含まれる画像領域として抽出し、ステップＳ５に進む。一方、投影カウントＹ’がしきい値Ｐ_ｔｈより小さい場合には、ステップＳ７に進む。
【００１４】
ステップＳ５では、直線抽出手段４により、ステップＳ４で抽出された画像領域内のエッジ点の点群の座標に関して、直線抽出を行う。直線抽出する方法の最も簡単な例の１つは、最小２乗法を用いてエッジ点群を直線回帰することである。エッジ点群を直線回帰した後は、相関係数などを用いて、直線の当てはまり具合をしらべ、当てはまり具合が良ければ、直線回帰で得られた直線の式ａｘ＋ｂｙ＋ｃ＝０のパラメータａ、ｂ、ｃを直線検出結果の１つとして出力する。当てはまり具合が悪ければ、当該画像領域内で直線は無いものと判断する。
【００１５】
最小２乗法は、はずれ値とよばれる異常値をデータに含むと回帰性能が急激に落ちる。この発明の例で言えば、ノイズによるエッジ点など、直線上に無い、離れた点の座標を、最小２乗法の計算に組み入れてしまうと、もはや正しい回帰直線が得られなくなってしまう。このような状態を防ぐために、直線抽出する方法としてロバスト直線回帰手法を用いてもよい。例えばＭ推定法を用いれば、はずれ値がデータに含まれていても、その影響を取り除いて正しい直線を回帰計算できる。
【００１６】
ステップＳ６では、エッジ点除去手段５により、ステップＳ５で得られた直線を形成するエッジ点を、エッジ画像から削除し、それらのエッジ点の座標を今後の計算に含めないようにする。これを行うためには、例えば得られた直線から、各エッジ点までの距離を計測し、その距離が指定距離以下のエッジ点に関しては、当該直線を形成するエッジ点とみなして、エッジ画像から削除するようにすれば良い。
【００１７】
このステップは、本発明において必ずしも必要なステップではない。しかしながら、ステップＳ６を実施することによって、以後の計算で考慮するエッジ点数が減少し、計算量を少なくできることや、このステップＳ６の後に続く、投影処理であるステップＳ３において、余分なエッジ点による投影カウントが無くなり、投影データ全体のＳＮ比が良くなるという効果がある。
【００１８】
以上の様にしてステップＳ３〜ステップＳ５を、あるいはステップＳ３〜ステップＳ６を、ステップＳ３で用いる投影方向αの値を変えながら、繰り返し実行を行う。図１の流れ図では、ステップＳ７において投影方向αにΔαを加えて、新たな投影方向αとし、ステップＳ３〜ステップＳ６までを繰り返すことが図示されている。この繰り返しはαが１８０°を超えるまで行われる。αが１８０°を超えた場合は、エッジ画像上のすべての方向について、ステップＳ３〜ステップＳ６を実行したことになるので、繰り返し処理を終了し、今まで検出した直線のパラメータを出力結果として処理を終了する。
【００１９】
なお、エッジ画像に含まれている直線の方向が、α_１°からα_２°であることがあらかじめ分かっている場合は、投影方向αの初期値をα_１°とし、終了するαの値をα_２°とするなどして、計算量を減らしてもかまわない。
【００２０】
このように、本実施の形態においては、エッジ画像について、指定した方向について投影処理を行った後、直線の存在する画像領域を抽出して直線回帰を行うことにより、直線を検出するため、ハフ変換などの従来手法に比べて、必要な設定項目が少なく、簡易な構成で画像内から複数の直線を高速に抽出する画像処理方法を得ることができる。
【００２１】
実施の形態２．
上述の実施の形態１では、ステップＳ５の直線抽出を行う方法において、最小２乗法による直線回帰やＭ推定によるロバスト直線回帰を用いたが、ロバスト直線回帰手法として、偏差の２乗の中央値を最小（ＬｅａｓｔＭｅｄｉａｎｏｆＳｑｕａｒｅｓ＝ＬＭｅｄＳ）にするという基準を用いる最少２乗中央値（ＬＭｅｄＳ）直線回帰方法を用いて直線検出を行うようにしても良い。これは例えば、回帰直線をｙ＝Ａｘ＋Ｂとし、エッジ点群の座標を（ｘ_ｉ，ｙ_ｉ）とした時に、次の式で表される。
【００２２】
Ｍｅｄ｛（ｙ_ｉ − （Ａｘ_ｉ＋Ｂ））^２｝ → 最小化（１）
【００２３】
ここでＭｅｄ（・）はインデックスがｉで表示されるデータ群に関してメディアン（中央値）をとる関数である。この中央値は、データにはずれ値が含まれていても値がほとんど変動しないという特徴があるため、（１）式を用いるとはずれ値に影響されにくい回帰が実現できる。
【００２４】
また、ベクトルの偏差の２乗のメディアンが最小になるという基準だけで、自動的にはずれ値の影響が除去されるので、しきい値を設定してはずれ値であることを判定する必要が無い。
【００２５】
なお、他の構成および動作については、上記の実施の形態１と同様であるため、そちらを参照されたい。
【００２６】
上述の実施の形態１では、ロバスト回帰手段としてＭ推定の利用を示したが、Ｍ推定では、Ｍ推定を実行する際の反復計算の初期値や重み関数のパラメータを適切に与える必要があったが、一方、本実施の形態において用いるＬＭｅｄＳ基準では、こういったパラメータを設定しなくても、はずれ値を自動的に除去する回帰計算が実現できるため、設定項目がさらに少なくてすむという効果が生じる。また、計算手法もＭ推定法に比べて簡易である。
【００２７】
以上のように、本実施の形態においても、エッジ画像について、指定した方向について投影処理を行った後、直線の存在する画像領域を抽出して直線回帰を行うことにより、直線を検出するため、ハフ変換などの従来手法に比べて、必要な設定項目が少なく、簡易な構成で画像内から複数の直線を高速に抽出する画像処理方法を得ることができる。
【００２８】
【発明の効果】
この発明は、エッジ画像から１以上の直線を検出する画像処理方法であって、前記エッジ画像を入力する第１のステップと、前記エッジ画像に対して指定した方向の投影データを計算する第２のステップと、前記投影データに基づいて、直線が含まれる画像領域を抽出する第３のステップと、抽出された前記画像領域から直線抽出を行う第４のステップとを備え、前記第２のステップから前記第４のステップまでを、前記第２のステップで指定する方向を変化させて繰り返し行うことで、前記エッジ画像から任意の方向の直線を検出するため、必要な設定項目が少なく、簡易な構成で、エッジ画像内から複数の直線を高速に抽出できる画像処理方法が得られる効果がある。
【図面の簡単な説明】
【図１】この発明の画像処理方法を示した流れ図である。
【図２】この発明の画像処理装置の構成を示した構成図である。
【図３】この発明の画像処理方法による動作を説明する説明図である。
【符号の説明】
１エッジ画像入力手段、１ａ撮像手段、１ｂ画像メモリ、２投影処理手段、３画像領域抽出手段、４直線抽出手段、５エッジ点除去手段、６直線検出結果、１０対象物体。

Claims

エッジ画像から１以上の直線を検出する画像処理方法であって、
前記エッジ画像を入力する第１のステップと、
前記エッジ画像に対して指定した方向の投影データを計算する第２のステップと、
前記投影データに基づいて、直線が含まれる画像領域を抽出する第３のステップと、
抽出された前記画像領域から直線抽出を行う第４のステップと
を備え、
前記第２のステップから前記第４のステップまでを、前記第２のステップで指定する方向を変化させて繰り返し行うことで、前記エッジ画像から任意の方向の直線を検出する
ことを特徴とする画像処理方法。
前記第４のステップで抽出した前記直線の近傍のエッジ点を前記画像領域から削除する第５のステップをさらに備え、
前記第２のステップから前記第５のステップまでを、前記第２のステップで指定する方向を変化させて繰り返し行うことで、前記エッジ画像から任意の方向の直線を検出する
ことを特徴とする請求項１記載の画像処理方法。
前記第４のステップは、最小２乗中央値（ＬＭｅｄＳ）直線回帰方法を用いて直線検出を行う
ことを特徴とする請求項１または２に記載の画像処理方法。