JP2006107018A - 画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラム - Google Patents
画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラム Download PDFInfo
- Publication number
- JP2006107018A JP2006107018A JP2004291266A JP2004291266A JP2006107018A JP 2006107018 A JP2006107018 A JP 2006107018A JP 2004291266 A JP2004291266 A JP 2004291266A JP 2004291266 A JP2004291266 A JP 2004291266A JP 2006107018 A JP2006107018 A JP 2006107018A
- Authority
- JP
- Japan
- Prior art keywords
- image
- edge
- information acquisition
- area
- divided
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
【課題】 ホワイトボード領域や文書領域の外辺が歪曲している場合でも、正確かつ高速に四隅(角部)を検出できるようにする。
【解決手段】 被写体画像としてホワイトボードを含む解析対象画像から、ホワイトボードに由来するエッジを抽出して四角形的なエッジ画像を作成すると共にその角部に由来する4つの角部を別々に含む4つの画像に分割されるよう、第1〜第4の画像情報取得エリア9a〜9dを設定する。第1〜第4の画像情報取得エリア9a〜9dのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する水平方向の直線ha〜hd、及び垂直方向の直線va〜vdを検出し、これら直線の交点Qa〜Qdを求める。この交点Qa〜Qdを結ぶことで得られる矩形領域を、ホワイトボードに対応する特定領域として検出する。
【選択図】 図8
【解決手段】 被写体画像としてホワイトボードを含む解析対象画像から、ホワイトボードに由来するエッジを抽出して四角形的なエッジ画像を作成すると共にその角部に由来する4つの角部を別々に含む4つの画像に分割されるよう、第1〜第4の画像情報取得エリア9a〜9dを設定する。第1〜第4の画像情報取得エリア9a〜9dのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する水平方向の直線ha〜hd、及び垂直方向の直線va〜vdを検出し、これら直線の交点Qa〜Qdを求める。この交点Qa〜Qdを結ぶことで得られる矩形領域を、ホワイトボードに対応する特定領域として検出する。
【選択図】 図8
Description
本発明は、デジタルカメラ等で取得された画像から自動的に特定の領域、例えば画像から白板領域や文書領域を検出する画像解析方法及び装置、さらには検出した特定領域の画像に対してあおり補正や下地とばし処理等の画像処理を行う画像処理方法及びシステム、これらの動作プログラムに関するものである。
一般に、デジタルカメラは、画像処理により撮影された画像の画質を自在に制御できるため、撮影の目的や被写体の種類に応じて撮影画像の画質に対して適切な処理を行うことにより、銀塩フィルムに撮影するカメラに比してより好適な画質の画像を得ることができるという利点を有する。このため、通常の写真撮影だけでなく、例えば会議場でホワイトボード(白板)に描かれた文字や図形情報等を撮影したり、雑誌に掲載されている文字情報等を撮影したりして持ち帰るといった活用も為されている。
デジタルカメラで文字や図形等が描かれたホワイトボードを撮影する場合、その撮影の目的はホワイトボード上の文字や図形等の情報を記録することにある。このため、上記のような撮影画像については、文字や図形等の情報部分の明瞭度を向上させるために、画像のゆがみを補正する「あおり補正」や、ホワイトボードの白地部分への色かぶりを補正する「下地とばし処理」等の画像処理を行うことが望ましい。これらの画像処理を実際に行う場合、撮影画像からホワイトボード領域や文書領域(特定領域)を検出した上で、この検出された特定領域の画像に対して処理が実行される。
前記あおり補正や下地とばし処理の計算量を少なくして高速化を図る観点からは、前記特定領域は、外辺が曲線ではなく直線である矩形領域として検出することが望ましい。ここで、例えば図12(a)に示すように広角撮影された画像においてホワイトボード領域9の枠部90が歪曲(外向きに凸状の弧状歪曲)して記録されているような場合、ホワイトボード領域9の枠部90内側四隅を結ぶ矩形の特定領域として検出することが望ましい。つまり図12(b)に示すように、枠部90内側四隅の点901〜904を結ぶ直線a11〜a14で区画される矩形領域a1を特定領域として検出することが理想的である。これは、例えば歪曲した四辺に外接する矩形領域が前記特定領域として検出されたような場合、当該特定領域にはホワイトボードの枠部90や背景9Bが含まれることとなり、前記あおり補正や下地とばし処理後の画像品質が悪化することになるからである。
外辺が歪曲している矩形状の領域の四隅を検出する方法として、当該領域の四辺についてそれぞれ曲線近似し、その交点を求める方法がある。しかしながら、この方法によれば、近似精度が所定範囲になるまで近似多項式(例えば3次)を求める必要があることから、計算処理に時間がかかり高速化の要請に対応できないという不都合がある。
また、特許文献1には、ハフ変換投票処理によって矩形状の領域の四辺に対応する直線をそれぞれ検出し、この直線によって区画される領域を前記特定領域として検出する方法が開示されている。この方法は外辺に歪曲が存在しない場合は有用な領域検出方法であるが、歪曲が存在している場合、図12(c)に示すように、歪曲した辺を直線として検出することになるので、どうしてもこれら直線の交点が矩形状の領域の四隅と一致しなくなる。つまり、枠部90の歪曲に起因して4つの直線a21〜a24がランダムな傾きを持った状態で各々検出されることから、前記直線a21〜a24のそれぞれの交点である点911〜914が、真の枠部90内側四隅の点と一致しなくなるものである。従って、前述した望ましい矩形領域を特定領域として検出できないという問題があった。
特開2004−96435号公報
本発明は以上の点に鑑みて為されたもので、ホワイトボード領域や文書領域の外辺が歪曲している場合でも、正確かつ高速に四隅(角部)を検出でき、これによりあおり補正や下地とばし処理等の画像処理を施すに当たって最適な特定領域を検出できる画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラムを提供することを課題とする。
本発明の請求項1にかかる画像解析方法は、解析対象画像からエッジを抽出してエッジ画像を作成すると共に、該エッジ画像が複数の画像に分割されるよう複数の画像情報取得エリアを設定し、前記各画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき複数の直線情報を検出し、これら直線の交点を求め、それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出することを特徴とする。
この方法によれば、全体画像から複数の直線を検出してこれらの交点を求めるのではなく、分割された画像(エッジ画像)それぞれに基づいて個別に直線を検出すると共にその交点を求め、しかる後これら交点を結ぶことで特定領域を画定する方法であり、例えばホワイトボード領域の隅部(角部)に正確に対応付けて矩形画像を切り取ることが可能となる。つまり、分割されたエッジ画像に基づき直線検出及び交点抽出を行うと、歪曲が存在していても真の隅部を比較的正確に検出することが可能であり、このようにして隅部を先に確定付けた上で特定領域が定められる方法であるので、最適な矩形画像等が得られ易くなる。
請求項2にかかる画像解析方法は、多角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して多角形的なエッジ画像を作成すると共に、該エッジ画像が前記多角形的な被写体画像の角部に由来する角部を別々に含む複数の画像に分割されるよう、複数の画像情報取得エリアを設定し、前記各画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する2本の直線情報を検出し、これら直線の交点を求め、それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記多角形的な被写体画像に対応する特定領域として検出することを特徴とする。
この方法によれば、エッジ画像が多角形的な被写体画像の角部に由来する角部を別々に含む複数の画像に分割されたエッジ画像に基づき2本の直線検出及びその交点抽出を行うので、歪曲が存在していても当該多角形のそれぞれの角部を比較的正確に検出できる。そして、このようにして角部を先に確定付けた上で特定領域を検出するので、被写体画像に対応した最適な多角形画像等が得られ易くなる。
請求項3にかかる画像解析方法は、四角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して四角形的なエッジ画像を作成すると共に、該エッジ画像が前記四角形的な被写体画像の角部に由来する4つの角部を別々に含む4つの画像に分割されるよう、第1〜第4の画像情報取得エリアを設定し、前記第1〜第4の画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する水平方向及び垂直方向の2本の直線情報を検出し、これら直線の交点を求め、前記第1〜第4の画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記四角形的な被写体画像に対応する特定領域として検出することを特徴とする。
この方法によれば、エッジ画像が四角形的な被写体画像の角部に由来する角部を別々に含む複数の画像に分割された第1〜第4の画像情報取得エリアにおけるエッジ画像に基づき、角部を構成する水平方向及び垂直方向の2本の直線検出及びその交点抽出を行うので、歪曲が存在していても当該四角形のそれぞれの角部を比較的正確に検出できる。そして、このようにして角部を先に確定付けた上で特定領域を検出するので、被写体画像に対応した最適な矩形画像が得られ易くなる。
請求項4にかかる画像処理方法は、処理対象となる画像情報を取得し、前記画像情報に対して請求項1〜3のいずれかの画像解析方法に基づいて特定領域を検出して抽出する処理を行い、当該抽出された特定領域に対応する画像情報に対して、所定の画像処理を実行することを特徴とする。この方法によれば、取得(入力)された画像情報のうち、上述の画像解析方法にて切り出された特定領域の画像に対して、あおり補正や下地とばし処理などの所定の画像処理を施すことができる。すなわち、当該画像処理を実行するに際し、最適な画像を切り出した上での処理を実行することができる。
請求項5にかかる画像解析装置は、解析対象画像からエッジを抽出してエッジ画像を作成するエッジ画像作成手段と、前記エッジ画像が複数の画像に分割されるように設定された複数の画像情報取得エリアのそれぞれにおいて、各分割エッジ画像に基づき複数の直線情報を検出する直線検出手段と、前記複数の直線の交点を求める交点算出手段と、
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出する領域検出手段とを具備することを特徴とする。
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出する領域検出手段とを具備することを特徴とする。
また請求項6にかかる画像解析装置は、多角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して多角形的なエッジ画像を作成するエッジ画像作成手段と、前記エッジ画像が前記多角形的な被写体画像の角部に由来する角部を別々に含む複数の画像に分割されるよう、複数の画像情報取得エリアを設定し、前記各画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する2本の直線情報を検出する直線検出手段と、前記複数の直線の交点を求める交点算出手段と、それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記多角形的な被写体画像に対応する特定領域として検出する領域検出手段とを具備することを特徴とする。
さらに請求項7にかかる画像解析装置は、四角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して四角形的なエッジ画像を作成するエッジ画像作成手段と、前記エッジ画像が前記四角形的な被写体画像の角部に由来する4つの角部を別々に含む4つの画像に分割されるよう、第1〜第4の画像情報取得エリアを設定し、前記第1〜第4の画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する水平方向及び垂直方向の2本の直線情報を検出する直線検出手段と、前記複数の直線の交点を求める交点算出手段と、前記第1〜第4の画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記四角形的な被写体画像に対応する特定領域として検出する領域検出手段とを具備することを特徴とする。
以上の画像解析装置によれば、全体画像から複数の直線を検出してこれらの交点を求めるのではなく、エッジ画像作成手段によりエッジ画像を作成し、直線検出手段により分割された画像(エッジ画像)に基づいて個別に直線を検出すると共に、交点算出手段によりその交点を求め、しかる後領域検出手段により前記交点を結ぶことで特定領域を画定するので、例えばホワイトボード領域の隅部(角部)に正確に対応付けて矩形画像等を切り取ることが可能となる。つまり、分割された画像に基づき直線検出及び交点抽出を行うと、歪曲が存在していても真の隅部を比較的正確に検出することが可能であり、このようにして隅部を先に確定付けた上で特定領域が定められる方法であるので、最適な矩形画像等が得られ易くなる。
請求項8にかかる画像処理システムは、請求項5〜7のいずれかに記載の画像解析装置と、前記画像解析装置に対して被解析対象画像を入力する画像入力装置と、前記画像解析装置の領域検出手段により検出された特定領域に対応する画像情報に対して、所定の画像処理を行う画像処理装置とを具備することを特徴とする。この画像処理システムによれば、画像入力装置から入力された画像情報に対して、上述の画像解析装置にて切り出された特定領域の画像に対して、あおり補正や下地とばし処理などの所定の画像処理を施すことができる。すなわち、当該画像処理を実行するに際し、最適な画像を切り出した上での処理を実行することができる。
請求項9にかかる画像解析プログラムは、コンピュータに画像解析処理を実行させるプログラムであって、解析対象画像からエッジを抽出してエッジ画像を作成するエッジ画像作成ステップと、前記エッジ画像が複数の画像に分割されるように設定された複数の画像情報取得エリアのそれぞれにおいて、各分割エッジ画像に基づき複数の直線情報を検出する直線検出ステップと、前記複数の直線の交点を求める交点算出ステップと、それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出する領域検出ステップとを含むステップを実行させるためのものである。
請求項10にかかる画像処理プログラムは、コンピュータに画像処理を実行させるプログラムであって、所定の画像入力装置から被解析対象画像を取得する画像取得ステップと、解析対象画像からエッジを抽出してエッジ画像を作成するエッジ画像作成ステップと、前記エッジ画像が複数の画像に分割されるように設定された複数の画像情報取得エリアのそれぞれにおいて、各分割エッジ画像に基づき複数の直線情報を検出する直線検出ステップと、前記複数の直線の交点を求める交点算出ステップと、それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出する領域検出ステップと、検出された特定領域に対応する画像情報に対して、所定の画像処理を行う画像処理ステップとを含むステップを実行させるためのものである。
請求項1にかかる画像解析方法若しくは請求項9にかかる画像解析プログラムよれば、分割されたエッジ画像に基づき直線検出及び交点抽出をそれぞれ行い、その後これら交点を結ぶことで特定領域を画定する方法であるので、解析対象画像において例えばホワイトボードの枠部が歪曲して記録されている場合でも、ホワイトボード領域の隅部(角部)に正確に対応付けて特定領域を検出することが可能となる。従って、前記特定領域の画像(例えばホワイトボードのボード本体部分に対応する画像)に対して、所定の画像処理(例えばボード本体部分に描かれた文字、図形等の明瞭度を向上させる画像処理)を適正に行い易いような画像切り出しを的確に行うことができる。しかも、曲線近似演算等が不要であるので、高速に特定領域の検出を行うことができるという効果を奏する。
請求項2にかかる画像解析方法によれば、多角形的な被写体画像の角部に由来する角部を別々に含む複数のエッジ画像に分割されるよう、複数の画像情報取得エリアが設定され、各々の画像情報取得エリアのそれぞれにおいて、前記角部を構成する2本の直線情報を検出すると共にこれら直線の交点が求められる。すなわち、三角形乃至多角形のそれぞれの角部が個別の分割エッジ画像に基づき前記交点として先に確定付けられた上で、これら交点を結ぶことで特定領域が検出されることから、仮に多角形的な被写体画像の辺に歪曲部分が含まれているような場合でも、正確に最適な多角形画像等を特定領域として検出できるようになる。従って、その後にあおり補正や下地とばし処理等の画像処理を的確に行うことが可能となる。
請求項3にかかる画像解析方法によれば、四角形的な被写体画像の角部に由来する4つの角部を別々に含む4つのエッジ画像に分割されるよう、第1〜第4の画像情報取得エリアが設定され、各々の画像情報取得エリアのそれぞれにおいて、前記角部を構成する水平方向及び垂直方向の2本の直線情報を検出すると共にこれら直線の交点が求められる。すなわち、四角形のそれぞれの角部が個別の分割エッジ画像に基づき前記交点として先に確定付けられた上で、これら交点を結ぶことで特定領域が検出されることから、仮にホワイトボード等の四角形的な被写体画像の辺に歪曲部分が含まれている状態で画像記録されていても、正確に最適な矩形画像等を特定領域として検出できるようになる。従って、その後にあおり補正や下地とばし処理等の画像処理を的確に行うことが可能となる。
請求項4にかかる画像処理方法若しくは請求項10にかかる画像処理プログラムによれば、上述の画像解析方法にて切り出された特定領域の画像に対して、あおり補正や下地とばし処理などの所定の画像処理を施すことができる。すなわち、当該画像処理を実行するに際し、最適な画像を切り出した上での処理を実行することができるので、処理後の画像の見栄えが優れないといったような不都合が生じないようにすることができる。
請求項5〜請求項7にかかる画像解析装置によれば、エッジ画像作成手段によりエッジ画像を作成し、直線検出手段により分割された画像(エッジ画像)に基づいて個別に直線を検出すると共に、交点算出手段によりその交点を求め、しかる後領域検出手段により前記交点を結ぶことで特定領域を画定するので、例えばホワイトボード領域の隅部(角部)に正確に対応付けて矩形画像等を切り取ることが可能となる。従って、その後にあおり補正や下地とばし処理等の画像処理を的確に行うことが可能となる。
請求項8にかかる画像処理システムによれば、上述の画像解析装置にて切り出された特定領域の画像に対して、あおり補正や下地とばし処理などの所定の画像処理を施すことができる。すなわち、当該画像処理を実行するに際し、最適な画像を切り出した上での処理を実行することができるので、処理後の画像の見栄えが優れないといったような不都合が生じないようにすることができる。
以下、図面に基づいて、本発明の具体的な実施形態につき説明する。
図1は、本発明の一実施形態にかかる画像処理システム1の構成を示すブロック図である。この画像処理システム1は、画像解析装置10、画像処理装置40、画像を取り込む画像入力装置としてのデジタルスチルカメラ50、画像を表示させるモニタ60及び処理済みの画像を出力するプリンタ70などを備えて構成されている。
図1は、本発明の一実施形態にかかる画像処理システム1の構成を示すブロック図である。この画像処理システム1は、画像解析装置10、画像処理装置40、画像を取り込む画像入力装置としてのデジタルスチルカメラ50、画像を表示させるモニタ60及び処理済みの画像を出力するプリンタ70などを備えて構成されている。
前記画像解析装置10は、当該画像解析装置10全体の制御を行なうCPU(Central Processing Unit)等からなる制御部2と、ROM(Read Only Memory)31と、RAM(Random Access Memory)32と、HD(Hard Disc)33と、I/O(Input/Output;入出力部)34とを備え、制御部2が、オペレーションシステム、アプリケーション等のプログラムや、画像ファイル等のデータを格納するHD33或いはROM31から、格納されているプログラムやデータを読出し、RAM102上に展開して実行することによって、解析対象画像(デジタルスチルカメラ50から入力される画像)に対して、特定領域を検出する画像解析処理を実現する。
この画像解析装置10は、I/O34を介して、デジタルスチルカメラ50、モニタ60及びプリンタ70と交信する。例えば前記画像解析処理を実行される際、制御部2によりデジタルスチルカメラ50に保存されている画像データが読み出されたり、処理済みの画像を出力する際にプリンタ70に印刷データが送信されたりする。
また画像解析装置10には、画像処理装置40が接続されている。この画像処理装置40は、前記画像解析装置10により検出された特定領域の画像に対し、所定の画像処理を施与するためのものである。該画像処理装置40は、例えばR(赤)、G(緑)、B(青)の各デジタル信号に、黒レベルを基準化する黒レベル補正部、光源に応じた白基準に基づいてレベル変換を行うホワイトバランス調整部、ガンマ特性を補正するガンマ補正部などのほか、画像のゆがみを補正するあおり補正部41、ホワイトボードの白地部分への色かぶりを補正する下地とばし処理部42が備えられている。
なお、このような画像解析装置10は、前記画像処理装置40を含んだ形で、一般的なパーソナルコンピュータ等で構築することができる。或いは、デジタルスチルカメラ50の内部にこの実施形態にかかる画像解析装置10を内蔵させ、当該デジタルスチルカメラ50に備えられている画像処理部とリンクさせて処理を行うような画像処理システム1とすることもできる。
図2は、画像解析装置10の制御部2の機能を説明するための機能ブロック図である。この制御部2は、操作信号受信部201、輝度データ変換部202、画像縮小処理部203、諧調補正処理部204、ノイズ除去部205、エッジ画像生成部206、ヒストグラム生成部207、2値化処理部208、分割画像設定部209、直線検出部210、交点検出部211及び領域検出部212を備えている。
操作信号受信部201は、前記画像解析装置10に対する処理指令信号を受信し、解析対象となる画像(入力画像)に対して各部に処理の実行を開始させる。当該画像解析装置10がパーソナルコンピュータにて構成されている場合、マウス等(操作部)により与えられる処理指令信号を受信することになる。
輝度データ変換部202は、R(赤)、G(緑)、B(青)の各デジタル信号を、輝度データに変換する。
画像縮小処理部203は、処理速度を向上させるため、解像度変換により画像サイズを縮小する。具体的には、ニアレストネイバー法やバイリニア法等を用いた解像度変換処理を行い、縦横1/2や、縦横1/4等に画像を縮小変換する。
諧調補正処理部204は、前記画像縮小処理部23により生成された縮小変換画像の諧調の正規化を行い、露出レベルを補正する。すなわち、当該縮小変換画像中における最大輝度及び最低輝度が、諧調レベルでそれぞれ(255,0)となるように、全画素に対して諧調補正を行う(8bitデータの場合。以下同じ)。具体的には、入力画像の色情報であるRGB値から、次式に基づいて各々の画素ごとにY画像内の最大値Ymaxと最小値Yminとを算出する。
Y=0.3R+0.6G+0.1B
そして、算出された最大値Ymaxと最小値Yminとを用いて、次式に基づいて画素値の正規化を行う。
Rnew=255×(Rold−Ymin)/(Ymax−Ymin)
Gnew=255×(Gold−Ymin)/(Ymax−Ymin)
Bnew=255×(Bold−Ymin)/(Ymax−Ymin)
ただし、上述の正規化において、RGB値が0未満である場合には0となるように、256以上である場合には255となるように補正することが必要である。このような諧調の正規化を行うことで、どのような露出条件で撮影された画像であっても、一律な処理を行うことが可能となる。
Y=0.3R+0.6G+0.1B
そして、算出された最大値Ymaxと最小値Yminとを用いて、次式に基づいて画素値の正規化を行う。
Rnew=255×(Rold−Ymin)/(Ymax−Ymin)
Gnew=255×(Gold−Ymin)/(Ymax−Ymin)
Bnew=255×(Bold−Ymin)/(Ymax−Ymin)
ただし、上述の正規化において、RGB値が0未満である場合には0となるように、256以上である場合には255となるように補正することが必要である。このような諧調の正規化を行うことで、どのような露出条件で撮影された画像であっても、一律な処理を行うことが可能となる。
ノイズ除去部205は、画像中に含まれている孤立的に高輝度若しくは低輝度の画素信号を除去する。このようなノイズ除去処理の手法としては、平滑化処理、メディアンやモルフォロジ処理(最大値・最小値フィルタ処理)等のフィルタ演算処理等を採用することができる。かかるノイズ除去部を設けるのは、後段のエッジ抽出処理において、ノイズの影響を受けずにより正確にエッジのみを抽出するためである。
エッジ画像生成部206は、諧調変換処理及びノイズ除去処理等の前処理が行われた入力画像の中から、例えばホワイトボードの枠部や原稿端など、被写体画像のうち文書領域等(画像解析装置10にて検出する特定領域)を区画する直線部分に対応する輝度配列部分であるエッジ(画像の中で急激に明るさが変化している部分)を抽出し、エッジ画像を生成する。このようなエッジ抽出には、例えばソーベルフィルタを用いることができる。
図3は、ソーベルフィルタの一例を示す説明図である。このソーベルフィルタは、画像から輪郭を抽出する時に用いられるフィルタであって、1次微分をする時に注目画素の近傍の画素に重み付けをするフィルタである。検出すべき特定領域が矩形状である場合において、その垂直エッジ(右辺と左辺)を検出するときには、例えば図3(a)に示すような水平方向重み付けフィルタが用いられる。すなわち、3×3画素群においてその中央を注目画素Pとするとき、注目画素Pと同じ縦列の画素B、Pの重みを0,左側の縦列画素A、D、Fの重みを各々−1、−2,−1、右側の縦列画素C、E、Hの重みを各々1、2、1としたフィルタを用いることができる。このようなフィルタを用いると、水平方向の明るさの変化が大きい部分が検出されることから、結果を画像として表示すると縦ライン(垂直エッジ)が検出されるようになる。
一方、水平エッジ(上辺と下辺)を検出するときには、例えば図3(b)に示すような垂直方向重み付けフィルタが用いられる。すなわち、3×3画素群においてその中央を注目画素Pとするとき、注目画素Pと同じ横列の画素D、Eの重みを0,上列画素A、B、Cの重みを各々−1、−2,−1、下列画素F、G、Hの重みを各々1、2、1としたフィルタである。このようなフィルタを用いると、垂直方向の明るさの変化が大きい部分が検出されることから、結果を画像として表示すると横ライン(水平エッジ)が検出されるようになる。
このような水平エッジ度Ehおよび垂直エッジ度Evは、エッジ画像が図3に示すような各画素A〜H,Pを含む画像であって、画素Pを注目する画素とする場合、各々の画素値をa〜h,pとすると、次式で表わされる。
Eh=max(|2p−a−h|,|2p−b−g|,|2p−c−f|)
−min(|2p−a−h|,|2p−d−e|,|2p−c−f|)
Ev=max(|2p−a−h|,|2p−d−e|,|2p−c−f|)
−min(|2p−a−h|,|2p−b−g|,|2p−c−f|)
Eh=max(|2p−a−h|,|2p−b−g|,|2p−c−f|)
−min(|2p−a−h|,|2p−d−e|,|2p−c−f|)
Ev=max(|2p−a−h|,|2p−d−e|,|2p−c−f|)
−min(|2p−a−h|,|2p−b−g|,|2p−c−f|)
ヒストグラム生成部207は、解析対象となる画像を構成する画素における輝度Yのヒストグラムを作成する。すなわち、横軸を輝度Y、縦軸を画素数Nとする輝度Yの度数分布を求めるものである。
2値化処理部208は、解析対象画像に含まれる本来的なエッジのみを抽出できるように、所定の輝度閾値(以下、「閾値Yth」という)を用いて輝度Yのデータを2値化する。つまり、所定の値の閾値Ythを決定し、Y<YthであればY=0とし、Y≧YthであればY=255として、輝度Yのデータを2値化する。
上記閾値Ythは、例えばヒストグラム生成部207にて作成されるヒストグラムに基づいて求めることができる。図4は、ヒストグラムから閾値Ythを求める方法の一例を示すグラフ図である。この例では、ヒストグラムの高輝度側から輝度度数のサーチを行い、度数がピークとなる輝度レベルYmaxにおける度数Vmaxを求め、前記ピーク輝度レベルYmaxからさらに低輝度側へサーチを行い、度数がVmaxの1/4となる輝度レベルを検出し、当該輝度レベルを閾値Ythとしている。ヒストグラムの高輝度側ピーク(輝度レベルYmax付近)では、本来エッジでない領域のノイズがエッジとして抽出されてしまっているものである。従って、ヒストグラムの高輝度側ピークからある程度高輝度側に離れた裾野部分に相当する輝度(Vmaxの1/4の輝度)を閾値Ythと決定することで、本来のエッジのみが抽出できるようになるものである。
分割画像設定部209は、上記エッジ画像が複数の画像に分割されるよう複数の画像情報取得エリアを設定する。この画像分割の態様は被写体画像に応じて適宜設定可能であるが、後述の直線検出部210にて画像情報取得エリア毎に求められる直線にて交点が求め易いよう、例えば多角形的な被写体画像を含む解析対象画像である場合、前記被写体画像に由来するエッジ画像が、多角形的な被写体画像の角部に由来する角部を別々に含む複数の画像に分割されるよう、複数の画像情報取得エリアを設定することが望ましい。
例えばホワイトボードのような 四角形的な被写体画像を含む解析対象画像である場合、前記被写体画像に由来するエッジ画像がホワイトボードの角部に由来する4つの角部を別々に含む4つの画像に分割されることが望ましい。図5は、横長のホワイトボード領域9を含む被写体画像を4分割した例を示している。この例では、ホワイトボード領域9の枠部90における4つの角部90a、90b、90c、90dが別々のエリアに含まれるよう、画像を左上、右上、左下、右下の4つの領域に分割(つまり、画面を上下に2分割すると共に左右に2分割)してなる第1〜第4の画像情報取得エリア9a、9b、9c、9dを設定した場合を示している。
直線検出部210は、前記各画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき複数の直線情報を検出する。例えば図5に示すような被写体画像である場合、前記第1〜第4の画像情報取得エリア9a〜9dのそれぞれにおいて、分割エッジ画像に基づき水平方向及び垂直方向の2本の直線情報を検出する。
本実施形態では、前記直線情報の検出に、ハフ(hough)変換投票による方法が適用される。ハフ変換は、直線、円、楕円といったパラメトリックな図形の特徴抽出法であって、例えば直線を抽出する場合であれば、パラメータとして傾きLと切片Cを考慮し、x−y平面上の点を、傾きL−切片C座標平面上へ、点から線への変換を行うものである。このようなハフ変換投票処理は、前記2値化処理部208による2値化処理によって、Y=255に変換された画素(エッジ画素)のみについて行われる。
具体的には、ハフ変換投票処理対象となるエッジ画素(X,Y)について、傾きL及び切片Cをある程度限定した組合せを選択した上で、当該エッジ画素(X,Y)を通る全ての直線の傾きL及び切片Cを求め、傾きL−切片C座標上にポイント加算する。すなわち、選択されたあらゆる組合せに対して、次式の計算を行う。
E=|Y−(LX+C)|
そして、所定の固定しきい値Thdについて、E<Thdを満す組合せ(L,C)に対して、ポイントを加算(投票)する。
E=|Y−(LX+C)|
そして、所定の固定しきい値Thdについて、E<Thdを満す組合せ(L,C)に対して、ポイントを加算(投票)する。
図6は、このようなハフ変換投票処理をグラフ図として表したものである。つまり、図6(a)に示すようなエッジ画素(X,Y)について、当該エッジ画素(X,Y)を通る全ての直線Iの傾きL及び切片Cを求め、ハフ変換投票処理を行うと、図6(b)に示すように、傾きL−切片C座標平面上において直線Jとなる変換が行われる。ここで、図6(a)に示すように、切片Cはエッジ画素(X,Y)を通る直線Iが画面と交わる点におけるy値である。また傾きLは、水平線Hに対する傾き角度をθとしたときにおけるtanθの値である。
ここで、図7(a)に示すように、ある直線I0上に存在するエッジ画素(X1,Y1)〜(X4,Y4)全てについて、上述したようなハフ変換投票処理を行って直線J1〜J4にそれぞれ変換し、これを同じ傾きL−切片C座標平面上に描くと、図7(b)に示すように直線J1〜J4が、ある一点(交差点K)で交差するようになる。この交差点Kは、傾きL−切片C座標において度数(ポイント累積度数)が最も大きくなる点であり、当該交差点Kにおける傾きL及び切片Cが、図7(a)に示す直線I0の傾きL0及び切片C0となるものである。
直線検出部210は、このような原理に基づいて、2値化処理部208による2値化処理によってY=255に変換されたエッジ画素の全てについて、ハフ変換投票処理を行って図6(a)に示すような直線Jをそれぞれ求め、これらを図7(b)に示すように、傾きL−切片C座標平面に展開して直線J群の交差する回数の多い点(交差点K)を検出する。そして、かかる交差点Kにおける傾きL0及び切片C0を求めることにより、前記第1〜第4の画像情報取得エリア9a〜9dにそれぞれ含まれる水平方向及び垂直方向の2本の直線情報を検出する。
交点算出部211は、直線検出部210により検出された水平方向及び垂直方向の2本の直線が、画像上において交差する交点を求める(算出する)。すなわち図8(a)に示すように、前記第1の画像情報取得エリア9aにおいて、直線検出部210により検出された水平方向の直線haと垂直方向の直線vaとの交点Qaを画像座標上において算出する。同様に、図8(b)に示すように、第2の画像情報取得エリア9bにおいて水平方向の直線hbと垂直方向の直線vbとの交点Qbを、第3の画像情報取得エリア9cにおいて水平方向の直線hcと垂直方向の直線vcとの交点Qcを、第4の画像情報取得エリア9dにおいて水平方向の直線hdと垂直方向の直線vdとの交点Qdをそれぞれ算出する。これにより、検出すべき特定領域の角部が特定されるようになる。
領域検出部212は、前記第1〜第4の画像情報取得エリア9a〜9dそれぞれにおいて求められた前記交点Qa〜Qdを結んで得られる領域を特定領域として検出する。すなわち図9(a)に示すように、前記交点算出部211にて求められた前記第1〜第4の画像情報取得エリア9a〜9dにおける交点Qa〜Qdを、図9(b)に示すように、それぞれ直線で結びつけることにより矩形領域Rを作出する。この矩形領域Rが、検出すべき特定領域となる。このような矩形領域Rは、先に図12(b)に基づいて説明した通り、ホワイトボード領域9の枠部90内側四隅を結ぶような、あおり補正や下地とばし処理等の画像処理に最適な矩形の特定領域となる。
なお、撮影対象とされているホワイトボードが、相当の厚さの枠部を備えている場合、図10(a)に示すように、画像上でもホワイトボード領域9の周囲を囲むように相当の厚さを持った枠部90として撮像されることから、一つの画像情報取得エリアにおいて、複数の水平方向直線及び垂直方向直線が検出される可能性がある。例えば、ホワイトボードの枠部90と背景画像との明るさが大きく異なる場合、枠部90の内側境界線(白地のホワイトボード面と着色された枠部との境界線;図8では、この直線だけを対象として説明している)だけでなく、外側境界線(枠部90と背景との境界線)も、エッジ画像生成部206によりエッジとして抽出される可能性がある。
この場合、直線検出部210によるハフ変換投票処理が行われると、図10(b)に示すように、2つの交差点K1、K2を検出するようになる。すなわち、図10(a)に示すように、枠部90の内側境界線及び外側境界線に由来する2本の直線ha1,ha2を検出することになる。ここで、外側境界線に由来する直線ha2に基づいて前記交点Qa〜Qdを求めてしまうと、枠部90を含んだ状態で矩形領域R(特定領域)が設定されてしまうことになる。そこで、このように2本の直線ha1,ha2が検出されたような場合に、画面の内側寄りの(解析対象画像の中心部により近い)直線ha2を選択するような直線選択手段を制御部2に具備させることが望ましい。
以上の通り構成された制御部2を備える画像解析装置10によれば、ホワイトボードのそれぞれの角部が、個別の分割エッジ画像に基づき、ハフ変換投票処理により検出された直線の交点Qa〜Qdとして先に確定付けられ、これら交点Qa〜Qdを結ぶことで特定領域が検出されることから、仮にホワイトボードの辺に歪曲部分が含まれている状態で画像記録されていても、正確に画像処理に適した矩形画像を特定領域として検出できるようになる。
このようにして画像解析装置10により検出された特定領域(ホワイトボードの白板面)に対応する画像情報は、画像処理装置40にて抽出される。そして、前記あおり補正部41により画像のゆがみを補正され、また下地とばし処理部42によりホワイトボードの白地部分への色かぶりを補正される等、ホワイトボードに描かれた文字・図形情報を明瞭化するための画像処理が行われる。
画像処理装置40にて画像処理された画像情報は、画像解析装置10に備えられているROM31やHD33に格納されたり、モニタ60上に表示されたり、或いはプリンタ70により紙出力されたりして、ユーザの利用に供されることとなるものである。
次に、本実施形態にかかる画像処理システム1による画像処理(画像解析処理)の手順について説明する。図11は、画像処理方法の手順を示すフローチャートであり、以下矩形状のホワイトボードを被写体画像として含む解析対象画像を処理する場合について説明する。なお、当該解析対象画像において、広角撮影等によりホワイトボードの外辺が外側に向けて凸状に歪曲した状態で画像記録されているものとする。
この画像処理は、画像処理システム1がパーソナルコンピュータ等を用いて構築されている場合、ユーザがマウス(操作部)で画像解析処理の開始指令を与え、かかる開始指令信号を制御部2の操作信号受信部201が受信し、ROM31若しくはHD33に格納されている本実施形態にかかる画像解析処理(画像処理)プログラムを起動されることで開始される。
先ず、解析対象となる画像が、画像解析装置10に入力される(ステップS1)。本実施形態では、画像入力装置として機能するデジタルスチルカメラ50から、ホワイトボードを被写体画像として含む記録画像が、I/O34を介して制御部2(RAM32)へ取り込まれる。なお、この画像入力の手法は任意であり、例えば予めデジタルスチルカメラ50からROM31へ画像を転送しておいたものを読み出したり、記録メディアに格納されている画像ファイルを読み出したりするようにしても良い。
次に、入力された画像に対して、諧調データ変換部202により、R、G、Bの各デジタル信号を輝度データに変換する処理が実行される(ステップS2)。これに続き、処理速度を向上させるため、画像縮小処理部203により縮小画像が作成される(ステップS3)。
さらに、諧調補正処理部203により、ステップS3で作成された縮小画像に対して諧調の正規化処理が行われる(ステップS4)。すなわち、前記縮小画像中における最大輝度及び最低輝度が、諧調レベルでそれぞれ(255,0)となるように、全画素に対して諧調補正が行われる。そして、ノイズ除去部205により、諧調補正後の画像に対してノイズ除去処理が実行される(ステップS5)。
以上のような前処理が解析対象画像に施された後、エッジ画像生成部206により、当該解析対象画像から抽出対象とされる被写体画像(ホワイトボードの輪郭である四角形的な被写体画像)に由来するエッジ画像が生成される(ステップS6)。対象となる被写体画像がホワイトボードであるので、ソーベルフィルタによりフィルタリング処理により、ホワイトボードの外枠の四辺が強調された四角形的なエッジ画像が生成されることとなる。ただ、この時点では検出すべき本来的なエッジ以外の画素もエッジとして抽出されている場合がある。しかる後、ヒストグラム生成部207により、解析対象となる画像を構成する画素における輝度Yのヒストグラムが作成される(ステップS7)。
これに続き、解析対象画像に含まれる本来的なエッジのみを抽出できるように、2値化処理部208により、例えばヒストグラム生成部207にて作成されたヒストグラムに基づき定められた所定の閾値Ythを設定して、Y<YthであればY=0とし、Y≧YthであればY=255として、輝度Yのデータを2値化する処理が実行される(ステップS8)。ここまでの処理により、例えば図5に示すように、画像中におけるホワイトボード領域9の枠部90(輝度が画像中の他の部分と比べて水平方向及び垂直方向に異なるためエッジとして抽出された部分)に対応する画素(Y=255の画素)のみが強調された四角形的なエッジ画像が生成されることとなる。
次に、分割画像設定部209により、例えば図5に示すように、ホワイトボード領域9の枠部90における4つの角部90a、90b、90c、90dが別々のエリアに含まれるよう、画像を左上、右上、左下、右下の4つの領域に分割する第1〜第4の画像情報取得エリア9a、9b、9c、9dが設定される(ステップS9)。これにより、4つの分割エッジ画像が生成されることとなる。
そして直線検出部210により、第1〜第4の画像情報取得エリア9a、9b、9c、9dの分割エッジ画像それぞれにおいて、2値化処理部208にてY=255の画素に変換されている全ての画素について、上述したハフ変換投票処理を行い、水平方向の直線が検出され(ステップS10)、また垂直方向の直線が検出される(ステップS11)。これにより、第1〜第4の画像情報取得エリア9a〜9dにおいて、4つの角部90a〜90dをそれぞれ構成する水平方向及び垂直方向の2本の直線情報が検出される。前記水平方向の直線はホワイトボードの上辺若しくは下辺に、また垂直方向の直線はホワイトボードの右辺若しくは左辺にそれぞれ該当することとなる。
その後、交点算出部211により、図8(a)に示すように、先ず第1画像情報取得エリア9aにおいて水平方向の直線haと垂直方向の直線vaとの交点Qaが、画像座標上において算出される(ステップS12)。そして分割エッジ画像の全てにおいて、このような交点検出が行われたかが確認され(ステップS13)、この場合第2〜第4の画像情報取得エリア9b〜9dにおいて、水平方向の直線hb〜hdと垂直方向の直線vb〜vdとの交点Qb〜Qdが、それぞれ画像座標上において算出されるまで、前記ステップS9〜ステップS11が繰り返される。このように、ホワイトボード枠部90における4つの角部90a〜90dを個別に含む分割エッジ画像に基づき求められた交点Qa〜Qdは、ホワイトボードの辺が歪曲された状態で画像記録されているとしても、比較的正確に角部と対応するものとなる。
そして、分割エッジ画像の全てについて交点Qa〜Qdが求められたら(ステップS13でYes)、領域検出部212により、図9に示すように交点Qa〜Qdを直線で結ぶことで矩形領域Rを作出し、当該矩形領域Rが特定領域として検出される(ステップS14)。前記矩形領域Rは、角部90a〜90dが個別の分割エッジ画像に基づき前記交点として先に確定付けられた上で、これら交点を結ぶことで検出されることから、仮にホワイトボードの辺に歪曲部分が含まれている状態で画像記録されていても、枠部90を含むことのない最適な矩形画像として特定領域を検出できるものである。
このようにして画像解析装置10により検出された特定領域(ホワイトボードの白板面)に対応する画像情報は、画像処理装置40にて抽出され、所定の画像処理が施される(ステップS15)。すなわち、あおり補正部41により画像のゆがみを補正され、また下地とばし処理部42によりホワイトボードの白地部分への色かぶりを補正される等、ホワイトボードに描かれた文字・図形情報を明瞭化するための画像処理が行われ、処理が終了する。この画像処理にあたり、領域検出部212にて抽出された特定領域にはホワイトボードの枠部や背景などは含まれていないことから、画像処理の品質を高めることができ、ホワイトボードに描かれた文字や図形を明瞭に再生することができる。
以上、本発明の一実施形態にかかる画像処理システム1につき説明したが、本発明はこれに限定されるものではなく、様々な変形実施形態を採ることができる。例えば、本実施形態では四角形状のホワイトボードを被写体画像とした場合について説明したが、三角形、五角形若しくはそれ以上の多角形を対象とすることもできる。また、文字等が記載された原稿、図形や写真が描かれた用紙なども被写体画像とすることもできる。この場合、それぞれの角部を別々に含むよう、複数の画像情報取得エリアを設定し、各々の分割エッジ画像から当該角部を構成する2本の直線を抽出して交点を求めるようにすれば良い。
さらに、上述の画像解析装置10が行う画像解析方法(或いは画像処理システム1が行う画像処理方法)を、プログラムとして提供することもできる。このようなプログラムは、コンピュータに付属するフレキシブルディスク、CD−ROM、ROM、RAMおよびメモリカードなどのコンピュータ読取り可能な記録媒体にて記録させて、プログラム製品として提供することもできる。若しくは、コンピュータに内蔵するハードディスクなどの記録媒体にて記録させて、プログラムを提供することもできる。また、ネットワークを介したダウンロードによって、プログラムを提供することもできる。
1 画像処理システム
10 画像解析装置
2 制御部
206 エッジ画像生成部(エッジ画像作成手段)
207 ヒストグラム生成部
209 分割画像設定部
210 直線検出部(直線検出手段)
211 交点算出部(交点算出手段)
212 領域検出部(領域検出手段)
40 画像処理装置
41 あおり補正部
42 下地とばし処理部
50 デジタルスチルカメラ(画像入力手段)
9 (解析対象画像中の)ホワイトボード領域
9a〜9d 角部
90 枠部
90a〜90d 第1〜第4の画像情報取得エリア
va〜vd 垂直方向の直線
ha〜hd 水平方向の直線
Qa〜Qd 交点
R 矩形領域(特定領域)
10 画像解析装置
2 制御部
206 エッジ画像生成部(エッジ画像作成手段)
207 ヒストグラム生成部
209 分割画像設定部
210 直線検出部(直線検出手段)
211 交点算出部(交点算出手段)
212 領域検出部(領域検出手段)
40 画像処理装置
41 あおり補正部
42 下地とばし処理部
50 デジタルスチルカメラ(画像入力手段)
9 (解析対象画像中の)ホワイトボード領域
9a〜9d 角部
90 枠部
90a〜90d 第1〜第4の画像情報取得エリア
va〜vd 垂直方向の直線
ha〜hd 水平方向の直線
Qa〜Qd 交点
R 矩形領域(特定領域)
Claims (10)
- 解析対象画像からエッジを抽出してエッジ画像を作成すると共に、該エッジ画像が複数の画像に分割されるよう複数の画像情報取得エリアを設定し、
前記各画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき複数の直線情報を検出し、これら直線の交点を求め、
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出することを特徴とする画像解析方法。 - 多角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して多角形的なエッジ画像を作成すると共に、該エッジ画像が前記多角形的な被写体画像の角部に由来する角部を別々に含む複数の画像に分割されるよう、複数の画像情報取得エリアを設定し、
前記各画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する2本の直線情報を検出し、これら直線の交点を求め、
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記多角形的な被写体画像に対応する特定領域として検出することを特徴とする画像解析方法。 - 四角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して四角形的なエッジ画像を作成すると共に、該エッジ画像が前記四角形的な被写体画像の角部に由来する4つの角部を別々に含む4つの画像に分割されるよう、第1〜第4の画像情報取得エリアを設定し、
前記第1〜第4の画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する水平方向及び垂直方向の2本の直線情報を検出し、これら直線の交点を求め、
前記第1〜第4の画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記四角形的な被写体画像に対応する特定領域として検出することを特徴とする画像解析方法。 - 処理対象となる画像情報を取得し、
前記画像情報に対して請求項1〜3のいずれかの画像解析方法に基づいて特定領域を検出して抽出する処理を行い、
当該抽出された特定領域に対応する画像情報に対して、所定の画像処理を実行することを特徴とする画像処理方法。 - 解析対象画像からエッジを抽出してエッジ画像を作成するエッジ画像作成手段と、
前記エッジ画像が複数の画像に分割されるように設定された複数の画像情報取得エリアのそれぞれにおいて、各分割エッジ画像に基づき複数の直線情報を検出する直線検出手段と、
前記複数の直線の交点を求める交点算出手段と、
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出する領域検出手段と
を具備することを特徴とする画像解析装置。 - 多角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して多角形的なエッジ画像を作成するエッジ画像作成手段と、
前記エッジ画像が前記多角形的な被写体画像の角部に由来する角部を別々に含む複数の画像に分割されるよう、複数の画像情報取得エリアを設定し、前記各画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する2本の直線情報を検出する直線検出手段と、
前記複数の直線の交点を求める交点算出手段と、
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記多角形的な被写体画像に対応する特定領域として検出する領域検出手段と
を具備することを特徴とする画像解析装置。 - 四角形的な被写体画像を含む解析対象画像から、前記被写体画像に由来するエッジを抽出して四角形的なエッジ画像を作成するエッジ画像作成手段と、
前記エッジ画像が前記四角形的な被写体画像の角部に由来する4つの角部を別々に含む4つの画像に分割されるよう、第1〜第4の画像情報取得エリアを設定し、前記第1〜第4の画像情報取得エリアのそれぞれにおいて、分割エッジ画像に基づき前記角部を構成する水平方向及び垂直方向の2本の直線情報を検出する直線検出手段と、
前記複数の直線の交点を求める交点算出手段と、
前記第1〜第4の画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を、前記四角形的な被写体画像に対応する特定領域として検出する領域検出手段と
を具備することを特徴とする画像解析装置。 - 請求項5〜7のいずれかに記載の画像解析装置と、
前記画像解析装置に対して被解析対象画像を入力する画像入力装置と、
前記画像解析装置の領域検出手段により検出された特定領域に対応する画像情報に対して、所定の画像処理を行う画像処理装置と
を具備することを特徴とする画像処理システム。 - コンピュータに画像解析処理を実行させるプログラムであって、
解析対象画像からエッジを抽出してエッジ画像を作成するエッジ画像作成ステップと、
前記エッジ画像が複数の画像に分割されるように設定された複数の画像情報取得エリアのそれぞれにおいて、各分割エッジ画像に基づき複数の直線情報を検出する直線検出ステップと、
前記複数の直線の交点を求める交点算出ステップと、
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出する領域検出ステップと
を含むステップを実行させるための画像解析プログラム。 - コンピュータに画像処理を実行させるプログラムであって、
所定の画像入力装置から被解析対象画像を取得する画像取得ステップと、
解析対象画像からエッジを抽出してエッジ画像を作成するエッジ画像作成ステップと、
前記エッジ画像が複数の画像に分割されるように設定された複数の画像情報取得エリアのそれぞれにおいて、各分割エッジ画像に基づき複数の直線情報を検出する直線検出ステップと、
前記複数の直線の交点を求める交点算出ステップと、
それぞれの画像情報取得エリアにおいて求められた前記交点を結んで得られる領域を特定領域として検出する領域検出ステップと、
検出された特定領域に対応する画像情報に対して、所定の画像処理を行う画像処理ステップと
を含むステップを実行させるための画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004291266A JP2006107018A (ja) | 2004-10-04 | 2004-10-04 | 画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004291266A JP2006107018A (ja) | 2004-10-04 | 2004-10-04 | 画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006107018A true JP2006107018A (ja) | 2006-04-20 |
Family
ID=36376702
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004291266A Pending JP2006107018A (ja) | 2004-10-04 | 2004-10-04 | 画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006107018A (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014195148A (ja) * | 2013-03-28 | 2014-10-09 | Pfu Ltd | 画像処理装置、領域決定方法及びコンピュータプログラム |
CN105931239A (zh) * | 2016-04-20 | 2016-09-07 | 北京小米移动软件有限公司 | 图像处理的方法及装置 |
JP2017168079A (ja) * | 2015-12-18 | 2017-09-21 | コニカ ミノルタ ラボラトリー ユー.エス.エー.,インコーポレイテッド | 書き込みボード検出及び補正 |
CN109863536A (zh) * | 2017-03-24 | 2019-06-07 | 株式会社斯库林集团 | 图像处理方法及图像处理装置 |
-
2004
- 2004-10-04 JP JP2004291266A patent/JP2006107018A/ja active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014195148A (ja) * | 2013-03-28 | 2014-10-09 | Pfu Ltd | 画像処理装置、領域決定方法及びコンピュータプログラム |
JP2017168079A (ja) * | 2015-12-18 | 2017-09-21 | コニカ ミノルタ ラボラトリー ユー.エス.エー.,インコーポレイテッド | 書き込みボード検出及び補正 |
CN105931239A (zh) * | 2016-04-20 | 2016-09-07 | 北京小米移动软件有限公司 | 图像处理的方法及装置 |
CN105931239B (zh) * | 2016-04-20 | 2019-06-18 | 北京小米移动软件有限公司 | 图像处理的方法及装置 |
CN109863536A (zh) * | 2017-03-24 | 2019-06-07 | 株式会社斯库林集团 | 图像处理方法及图像处理装置 |
EP3605466A4 (en) * | 2017-03-24 | 2020-08-12 | SCREEN Holdings Co., Ltd. | IMAGE PROCESSING METHOD AND IMAGE PROCESSING DEVICE |
US11087510B2 (en) | 2017-03-24 | 2021-08-10 | SCREEN Holdings Co., Ltd. | Image processing method and image processor |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6956587B1 (en) | Method of automatically cropping and adjusting scanned images | |
JP4772839B2 (ja) | 画像識別方法および撮像装置 | |
JP2010525486A (ja) | 画像分割及び画像強調 | |
JP5810628B2 (ja) | 画像処理装置及び画像処理プログラム | |
JP2002084420A (ja) | 画像処理装置、画像処理方法および画像処理プログラムが格納された記録媒体 | |
JP2000137788A (ja) | 画像処理方法、画像処理装置及び記録媒体 | |
EP1721296A2 (en) | Correction of redeye in images of humans | |
KR101597739B1 (ko) | 화상 처리 장치, 화상 처리 방법, 및 컴퓨터 판독 가능한 매체 | |
JP6115214B2 (ja) | パターン処理装置、パターン処理方法、パターン処理プログラム | |
US10455163B2 (en) | Image processing apparatus that generates a combined image, control method, and storage medium | |
US20090245625A1 (en) | Image trimming device and program | |
US9361669B2 (en) | Image processing apparatus, image processing method, and program for performing a blurring process on an image | |
JP6122988B1 (ja) | 画像処理装置、画像処理方法、および、プログラム | |
JP5541679B2 (ja) | 画像処理装置及び方法、並びに、プログラム | |
JP5640622B2 (ja) | 赤目オブジェクト候補を分類する方法、コンピューター読み取り可能な媒体および画像処理装置 | |
JP6797046B2 (ja) | 画像処理装置及び画像処理プログラム | |
JP2001274990A (ja) | 画像処理方法及び装置 | |
JP5201184B2 (ja) | 画像処理装置及びプログラム | |
JP2006164133A (ja) | 画像処理方法および装置並びにプログラム | |
JP2017123015A (ja) | 情報処理装置、画像処理方法およびプログラム | |
JP2006107034A (ja) | 画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラム | |
JP2006107018A (ja) | 画像解析方法及び装置、画像処理方法及びシステム、これらの動作プログラム | |
CN108647680B (zh) | 图像定位框检测方法和装置 | |
JP6006675B2 (ja) | マーカ検出装置、マーカ検出方法、及びプログラム | |
JP2003219180A (ja) | 画像処理方法、画像処理装置、コンピュータ読み取り可能な記憶媒体及びコンピュータプログラム |