JP2021189484A - 画像処理装置および画像処理方法 - Google Patents
画像処理装置および画像処理方法 Download PDFInfo
- Publication number
- JP2021189484A JP2021189484A JP2020090814A JP2020090814A JP2021189484A JP 2021189484 A JP2021189484 A JP 2021189484A JP 2020090814 A JP2020090814 A JP 2020090814A JP 2020090814 A JP2020090814 A JP 2020090814A JP 2021189484 A JP2021189484 A JP 2021189484A
- Authority
- JP
- Japan
- Prior art keywords
- image
- luminance
- edge extraction
- averaging
- result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
【課題】 計算コストを抑制して、精度よく画像からまくらぎ部分を抽出する。【解決手段】画像処理装置1においては、まくらぎが含まれた俯瞰画像をグレースケール化したのち、エッジ抽出フィルタを施すエッジ抽出フィルタ処理部12と、エッジ抽出フィルタ処理部12によるエッジ抽出結果に対して、まくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施す平均化フィルタ処理部13と、平均化フィルタ処理部13による平均化結果に基づいて、輝度の極値となる座標を検出する輝度極値座標検出部14と、俯瞰画像から、輝度極値座標検出部14により抽出された座標を中央とした所定範囲の画像を、まくらぎの抽出結果として切り出すまくらぎ抽出部15とを有する。【選択図】図1
Description
本発明は、画像処理装置および画像処理方法に関する。
画像から直線的な対象物を抽出する手法として、例えば、自動車の分野で単眼車載カメラから、道路上の白線を検知するものがある(例えば、非特許文献1および非特許文献2)。
単眼車載カメラ画像を利用した自動車運転支援, 広島工業大学紀要. 研究編第43, 317-322 (2009)
自動車カメラ動画像に対する白線認識システムの開発, 情報処理学会第 69 回全国大会講演論文集, 67-68, 2007
鉄道の保守点検作業において、まくらぎ検査は、現状では、検査員の徒歩巡視によって行われているため、将来的な検査員人口の減少を考えると、検査員の確保、検査員の移動、または、人件費の増加などの課題がある。そのため、徒歩巡視に代わって、撮影した画像からまくらぎを抽出し、現場に行くことなく遠隔で、まくらぎ検査を可能にしたいという要求がある。
非特許文献1および非特許文献2に記載の技術を用いて、撮像した画像からまくらぎを検出することは、ノイズの少ない状況下では可能である。しかしながら、非特許文献1および非特許文献2に記載の技術は、特徴点抽出アルゴリズムとして、ハフ(Hough)変換を用いているため、計算コストが高く、また、ノイズに弱いため、屋外のため天候の変動が激しく、バラストや自然環境要因によるノイズが多いと考えられる画像から、精度よくまくらぎ部分のみを抽出するのは容易ではない。
そこで、本発明は、前記課題を解決すること、すなわち、計算コストを抑制して、精度よく画像からまくらぎ部分を抽出することができる、画像処理装置および画像処理方法を提供することを目的とする。
本発明の画像処理装置の一側面は、まくらぎが含まれた俯瞰画像をグレースケール化したのち、エッジ抽出フィルタを施すエッジ抽出フィルタ処理部と、エッジ抽出フィルタ処理部によるエッジ抽出結果に対して、まくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施す平均化フィルタ処理部と、平均化フィルタ処理部による平均化結果に基づいて、輝度の極値となる座標を検出する輝度極値座標検出部と、俯瞰画像から、輝度極値座標検出部により抽出された座標を中央とした所定範囲の画像を、まくらぎの抽出結果として切り出すまくらぎ抽出部とを備えることを特徴とする。
本発明の画像処理装置の他の側面は、エッジ抽出フィルタ処理部が、エッジ抽出結果を白黒反転し、輝度極値座標検出部は、輝度の最大値側の極値となる座標を検出する。
本発明の画像処理方法の一側面は、まくらぎが含まれた俯瞰画像をグレースケール化したのち、エッジ抽出フィルタを施すエッジ抽出フィルタ処理ステップと、エッジ抽出フィルタ処理ステップによるエッジ抽出結果に対して、まくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施す平均化フィルタ処理ステップと、平均化フィルタ処理ステップによる平均化結果に基づいて、輝度の極値となる座標を検出する輝度極値座標検出ステップと、俯瞰画像から、輝度極値座標検出ステップの処理により抽出された座標を中央とした所定範囲の画像を、まくらぎの抽出結果として切り出すまくらぎ抽出ステップとを含むことを特徴とする。
本発明によれば、計算コストを抑制して、精度よく画像からまくらぎ部分を抽出することができる。
以下、本発明の一実施の形態の画像処理装置について、図1〜図15を参照しながら説明する。
図1は、本発明の一実施例である画像処理装置1が有する機能構成を示す機能ブロック図である。
画像処理装置1は、バラスト軌道上に設置されたレールを含んだ俯瞰画像からまくらぎの部分を抽出する画像処理を実行するものである。画像処理装置1は、俯瞰画像取得制御部11、エッジ抽出フィルタ処理部12、平均化フィルタ処理部13、輝度極値座標検出部14、まくらぎ抽出部15、および、出力制御部16の機能を含んで構成されている。
俯瞰画像取得制御部11は、例えば、図2に示されるような、バラスト上に設置されたレールを含んだ俯瞰画像の取得を制御し、取得された俯瞰画像を、エッジ抽出フィルタ処理部12、および、まくらぎ抽出部15に供給する。
エッジ抽出フィルタ処理部12は、取得された俯瞰画像をグレースケール化したのち、エッジ抽出フィルタを施し、エッジが強調され、各ピクセルに0(黒)〜255(白)の輝度値が格納された、エッジ検出結果に対応する画像データを、平均化フィルタ処理部13に供給する。エッジ抽出フィルタとしては、いずれのフィルタを用いるものとしてもよいが、例えば、一次微分フィルタ、ソーベルフィルタ、ロバーツフィルタ、プレヴィットフィルタ、キャニーエッジフィルタ、または、ラプラシアンフィルタなどを用いることができる。ここでは、エッジ抽出フィルタ処理部12は、ソーベルフィルタを用いるものとして説明する。
図3〜図6を参照し、ソーベルフィルタについて説明する。
例えば、図3に示されるような、白い部分と黒い部分が縦に分かれたエッジ部分において、図4に示される5×5のソーベルフィルタを施す場合、図3において太枠で囲った画素に対するソーベルフィルタは、図5に示されるような5×5の行列となり、対応する画素の値は、5×5の行列の総和の絶対値となる。このような演算を図3の各画素に施した結果は、図6に示されるようになり、エッジに対応する画素の部分の輝度値が高く、エッジに対応しない部分の輝度値が低くなる。
エッジ抽出フィルタ処理部12は、取得された俯瞰画像をグレースケール化したのち、ソーベルフィルタを施し、フィルタリング結果を白黒反転し、図7に示されるような、エッジ抽出され、エッジのほとんど無いまくらぎ部分の輝度が高い、グレースケールの画像データを、平均化フィルタ処理部13に供給する。
平均化フィルタ処理部13は、エッジ抽出フィルタ処理部12から供給されたエッジ抽出された画像に、抽出したいまくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施し、平均化されたフィルタリング結果を、輝度極値座標検出部14に供給する。
図8〜図11を参照し、平均化フィルタについて説明する。
例えば、図8に示されるように、所定範囲の輝度値が他の箇所より輝度値が高い画像(図8においては、3×9の所定範囲の輝度値を255とし、他の箇所の輝度値を0としている)においては、図9に示されるように、検出したい範囲と略同じカーネルサイズの平均化フィルタ、すなわち、ここでは、一般的にカーネルサイズは奇数×奇数であるので(ただし、必ずしも奇数×奇数である必要はない)、カーネルサイズ3×9で1/27を乗算するフィルタを用いることにより、輝度値が高い範囲の中央位置を検出することができる。具体的には、図8中太枠で囲った画素に対して、図9の平均化フィルタをかけた場合の演算結果は、図10に示されるような3×9の行列となり、対応する画素の値は、3×9の行列の総和となる。このような演算を図8の各画素に施した結果は、図11に示されるようになり、元画像において輝度値が高い範囲の中央位置の輝度値は極値を取る。
平均化フィルタ処理部13は、例えば、図7に示されるような、エッジ抽出されたグレースケールの画像データに、抽出したいまくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施す。処理画素がまくらぎの中心にあたる画素の時に、カーネルの範囲がまくらぎの画像サイズとほぼ同一となり、図12に示されるフィルタリング結果を得る。平均化フィルタ処理部13は、図12に示されるようなフィルタリング結果を、輝度極値座標検出部14に供給する。
なお、俯瞰画像取得制御部11により取得される俯瞰画像におけるまくらぎのサイズがそれぞれ異なる場合、平均化フィルタ処理部13は、図示しない操作入力部から供給されるユーザの操作入力に基づいて、平均化フィルタのカーネルサイズを適宜設定可能なようにしてもよいことは言うまでもない。
輝度極値座標検出部14は、平均化フィルタ処理部13から供給された、例えば、図12に示されるフィルタリング結果に基づいて、輝度の極値となる座標を検出する。抽出したいまくらぎの画像サイズとほぼ同一サイズのカーネルを用いた平均化フィルタの処理の結果、処理画素がまくらぎの中心にあたる画素の時にカーネルの範囲がまくらぎの画像サイズとほぼ同一となるため、輝度の平均値が極値となる。
図12に示されるフィルタリング結果の左上隅を座標(0,0)とした場合の各画素の輝度値の3次元グラフを図13に示す。図13のグラフにおいて、y座標が0に近い側に存在する極値は、図2の俯瞰画像の画像上部のまくらぎの中央に対応し、y座標が大きい側に存在する極値は、図2の俯瞰画像の画像下部のまくらぎの中央に対応する。輝度極値座標検出部14は、輝度の極値となる座標の検出結果を、まくらぎ抽出部15に供給する。
なお、ここでは、エッジ抽出フィルタ処理部12が、エッジ検出結果を白黒反転し、それ以降の処理を行っているため、輝度極値座標検出部14は、輝度の極大値となる座標を検出しているが、エッジ抽出フィルタ処理部12が、フィルタリング結果を白黒反転しない場合、輝度極値座標検出部14は、輝度の極小値となる座標を検出する。
まくらぎ抽出部15は、俯瞰画像取得制御部11から供給された俯瞰画像から、輝度極値座標検出部14から供給された輝度の極値となる座標を中央とした所定範囲の画像を、まくらぎの抽出結果として切り出し、出力制御部16に供給する。ここで、まくらぎ抽出部15が、まくらぎの抽出結果として俯瞰画像から切り出すための所定の範囲は、平均化フィルタ処理部13による平均化フィルタのカーネルサイズと略同じか、または、所定の画素数だけ大きいものであると好適であり、俯瞰画像取得制御部11により取得される俯瞰画像におけるまくらぎのサイズに基づいて、図示しない操作入力部から供給されるユーザの操作入力により適宜設定可能である。
図2の、バラスト上に設置されたレールを含んだ俯瞰画像のまくらぎ部分には、日陰と日向が存在し、まくらぎ上には石なども存在している。しかしながら、上述した処理により、抽出されるべきまくらぎの全てに対して、例えば、図14に示されるように、正しく、まくらぎ部分が抽出される。
出力制御部16は、まくらぎ抽出部15から供給された、まくらぎ部分が切り出された俯瞰画像の、図示しない表示装置、印字装置、または、ネットワークを介した他の装置等への出力を制御する。
このように、画像処理装置1においては、まくらぎが含まれた俯瞰画像をグレースケール化したのち、エッジ抽出フィルタを施すエッジ抽出フィルタ処理部12と、エッジ抽出フィルタ処理部12によるエッジ抽出結果に対して、まくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施す平均化フィルタ処理部13と、平均化フィルタ処理部13による平均化結果に基づいて、輝度の極値となる座標を検出する輝度極値座標検出部14と、俯瞰画像から、輝度極値座標検出部14により抽出された座標を中央とした所定範囲の画像を、まくらぎの抽出結果として切り出すまくらぎ抽出部15とを有するので、計算コストを抑制して、精度よく画像からまくらぎ部分を抽出することができる。
次に、図15のフローチャートを参照して、画像処理装置1が実行する画像処理について説明する。
ステップS1において、俯瞰画像取得制御部11は、例えば、図2に示されるような、バラスト上に設置されたレールを含んだ俯瞰画像を取得し、エッジ抽出フィルタ処理部12、および、まくらぎ抽出部15に供給する。
ステップS2において、エッジ抽出フィルタ処理部12は、取得された俯瞰画像をグレースケール化する。
ステップS3において、エッジ抽出フィルタ処理部12は、グレースケール化された俯瞰画像に対して、例えば、図3〜図6を用いて説明したソーベルフィルタなどのエッジ抽出フィルタを施す。
ステップS4において、エッジ抽出フィルタ処理部12は、エッジが強調され、各ピクセルに0(黒)〜255(白)の輝度値が格納された、エッジ検出結果に対応する画像データを、白黒反転し、平均化フィルタ処理部13に供給する。
ステップS5において、平均化フィルタ処理部13は、エッジ抽出フィルタ処理部12から供給されたエッジ抽出された画像に、抽出したいまくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施し、例えば、図12に示されるような、平均化されたフィルタリング結果を、輝度極値座標検出部14に供給する。
ステップS6において、輝度極値座標検出部14は、平均化フィルタ処理部13から供給された、例えば、図12に示されるフィルタリング結果に基づいて、各画素の輝度値を検出する。
ステップS7において、輝度極値座標検出部14は、検出された輝度値の極値となる画素の座標を抽出し、輝度の極値となる座標の検出結果を、まくらぎ抽出部15に供給する。
ステップS8において、まくらぎ抽出部15は、俯瞰画像取得制御部11から供給された俯瞰画像から、輝度極値座標検出部14から供給された輝度の極値となる座標を中央とした所定範囲の画像を、まくらぎの抽出結果として切り出し、出力制御部16に供給する。
ステップS9において、出力制御部16は、まくらぎ抽出部15から供給された、まくらぎ部分が切り出された俯瞰画像の、図示しない表示装置、印字装置、または、ネットワークを介した他の装置等への出力を制御し、処理が終了される。
図2の、バラスト上に設置されたレールを含んだ俯瞰画像のまくらぎ部分には、日陰と日向が存在し、まくらぎ上には石なども存在している。しかしながら、このような処理により、計算コストを抑制して、例えば、図14に示されるように、精度よく画像からまくらぎ部分を抽出することができる。
上述した技術は、ハードウェアとしては、例えば、パーソナルコンピュータに適用することができる。
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
1…画像処理装置、 11…俯瞰画像取得制御部、 12…エッジ抽出フィルタ処理部、 13…平均化フィルタ処理部、 14…輝度極値座標検出部、 15…まくらぎ抽出部、 16…出力制御部
Claims (3)
- まくらぎが含まれた俯瞰画像をグレースケール化したのち、エッジ抽出フィルタを施すエッジ抽出フィルタ処理部と、
前記エッジ抽出フィルタ処理部によるエッジ抽出結果に対して、前記まくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施す平均化フィルタ処理部と、
前記平均化フィルタ処理部による平均化結果に基づいて、輝度の極値となる座標を検出する輝度極値座標検出部と、
前記俯瞰画像から、前記輝度極値座標検出部により抽出された前記座標を中央とした所定範囲の画像を、前記まくらぎの抽出結果として切り出すまくらぎ抽出部と
を備えることを特徴とする画像処理装置。 - 請求項1に記載の画像処理装置において、
前記エッジ抽出フィルタ処理部は、前記エッジ抽出結果を白黒反転し、
前記輝度極値座標検出部は、輝度の最大値側の極値となる前記座標を検出する
ことを特徴とする画像処理装置。 - まくらぎが含まれた俯瞰画像をグレースケール化したのち、エッジ抽出フィルタを施すエッジ抽出フィルタ処理ステップと、
前記エッジ抽出フィルタ処理ステップによるエッジ抽出結果に対して、前記まくらぎの画像サイズとほぼ同一サイズのカーネルを有する平均化フィルタを施す平均化フィルタ処理ステップと、
前記平均化フィルタ処理ステップによる平均化結果に基づいて、輝度の極値となる座標を検出する輝度極値座標検出ステップと、
前記俯瞰画像から、前記輝度極値座標検出ステップの処理により抽出された前記座標を中央とした所定範囲の画像を、前記まくらぎの抽出結果として切り出すまくらぎ抽出ステップと
を含むことを特徴とする画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020090814A JP2021189484A (ja) | 2020-05-25 | 2020-05-25 | 画像処理装置および画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020090814A JP2021189484A (ja) | 2020-05-25 | 2020-05-25 | 画像処理装置および画像処理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021189484A true JP2021189484A (ja) | 2021-12-13 |
Family
ID=78849431
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020090814A Pending JP2021189484A (ja) | 2020-05-25 | 2020-05-25 | 画像処理装置および画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2021189484A (ja) |
-
2020
- 2020-05-25 JP JP2020090814A patent/JP2021189484A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4309926B2 (ja) | 顔特徴点検出装置、顔特徴点検出方法及びプログラム | |
US11156564B2 (en) | Dirt detection on screen | |
US9811746B2 (en) | Method and system for detecting traffic lights | |
CA2959967C (en) | Identification of a contact point between a pantograph and a power supply line in an image | |
CN104616275A (zh) | 一种缺陷检测方法和装置 | |
CN109489724A (zh) | 一种隧道列车安全运行环境综合检测装置及检测方法 | |
WO2017120796A1 (zh) | 路面病害的检测方法及其装置、电子设备 | |
CN113766209B (zh) | 相机偏移量处理方法及装置 | |
CN107014818B (zh) | 一种镭雕缺陷视觉检测系统及方法 | |
CN106469312A (zh) | 基于区域生长标号的焊缝视觉识别方法 | |
CN113724240B (zh) | 一种基于视觉识别的冷柜脚轮检测方法、系统及装置 | |
JP2019045922A (ja) | 変状箇所検出装置、変状箇所検出プログラムおよび変状箇所検出方法 | |
CN109741273A (zh) | 一种手机拍照低质图像的自动处理与评分方法 | |
CN107436304A (zh) | 一种混凝土构件表面检测装置 | |
JP2016027444A5 (ja) | ||
CN102915522A (zh) | 一种智能手机的名片提取系统及其实现方法 | |
bin Abdul Razak et al. | A Lane Detection Using Image Processing Technique for Two-Lane Road | |
Tsai | Automatic shadow detection and radiometric restoration on digital aerial images | |
JP2021189484A (ja) | 画像処理装置および画像処理方法 | |
TWI530913B (zh) | 移動物體偵測系統及方法 | |
CN108090425A (zh) | 一种车道线检测方法、装置及终端 | |
WO2019071663A1 (zh) | 电子装置、虚拟样本生成方法及存储介质 | |
CN114004777A (zh) | 柔性屏的断裂线检测方法及装置、计算机设备及介质 | |
CN103605973A (zh) | 一种图像字符检测鉴别方法 | |
JP6920979B2 (ja) | 架線金具検出装置及び方法 |