JP4712659B2 - 画像評価装置およびそのプログラム - Google Patents

画像評価装置およびそのプログラム Download PDF

Info

Publication number
JP4712659B2
JP4712659B2 JP2006256800A JP2006256800A JP4712659B2 JP 4712659 B2 JP4712659 B2 JP 4712659B2 JP 2006256800 A JP2006256800 A JP 2006256800A JP 2006256800 A JP2006256800 A JP 2006256800A JP 4712659 B2 JP4712659 B2 JP 4712659B2
Authority
JP
Japan
Prior art keywords
image
region
boundary line
digital
digital photographic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006256800A
Other languages
English (en)
Other versions
JP2008077460A (ja
Inventor
浩民 金
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2006256800A priority Critical patent/JP4712659B2/ja
Priority to US11/902,344 priority patent/US7970207B2/en
Publication of JP2008077460A publication Critical patent/JP2008077460A/ja
Application granted granted Critical
Publication of JP4712659B2 publication Critical patent/JP4712659B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Description

本発明は、デジタル写真画像を評価する画像評価装置およびそのプログラムに関するものである。
従来、オペレータがディスプレイなどデジタル写真画像を表示してマウスなどを用いて、撮影されている人物などの被写体を抽出して加工することが行われていた。しかし、ポインティングデバイスを用いてトレースをしながら加工行う場合、オペレータの作業負担が大きく、オペレータによってトレースの仕方が異なり均一な仕上がりとならなかった。
また、近年、デジタルスチールカメラが普及してきたことにより、デジタル画像に対して画像処理を施して望ましい仕上がりにしたいという要望があった。例えば、撮影されている被写体と背景を分けて異なる画像処理を施して主要部を際立たせるようにすることがあった。そこで、オペレータが主要部と背景との境界線を指定するような煩雑な作業を行うことなく、自動的に主要部と背景とを分離し、背景領域だけにぼかして主要部を強調することができるようにしたものがある。具体的には、画素間のデータの差がしきい値以下の隣り合う画素が同じ領域に含まれるように画像を領域分割し、各領域毎の特徴量を算出して、その特徴量に基づいて、分割された分割領域の中から背景領域又は主要部領域を推定する。推定された背景領域のみをぼかすか、主要部領域を除く領域のみぼかして主要部を強調している(例えば、特許文献1など)。
あるいは、主要対象物と背景との境界を表す輪郭線の抽出をするために、所定の閾値を超えるエッジ強度を有する画素を含むセルをエッジセルとして抽出して、このエッジセルが互いに連続した状態で集合した連続領域を作成し、その連続領域の外周に位置するセルを輪郭セルとして抽出する方法を提案したものがある(例えば、特許文献2など)。
特開2001−57630公報 特開2002−236929公報
しかしながら、特許文献1では、マスク(画像を中心とした円や楕円)の外にある領域を背景領域であるとし、内部にある領域に主要部が存在するものとして主要部の境界線を抽出しているので、多様な画像に対応することができない。
また、写真画像に撮影されている画像を人間が観察を行った場合には、被写体が着ている洋服であることが明らかであっても、洋服には様々なテクスチャが存在しているため、特許文献2のような手法で検出したエッジの中には、テクスチャによるエッジを含む可能性があり、正確な輪郭を抽出することができない。
そこで、本発明では、多様な写真画像から山と空の境界線や人物と背景画像との境界線などを正確に抽出して、写真画像を人間の感覚に近い表現で評価することができる画像評価装置、およびそのプログラムを提供することを目的とするものである。
本発明の画像評価装置は、複数の対象物を撮影したデジタル写真画像より対象物間の境である境界線を抽出する境界線抽出手段と、
前記デジタル写真画像を前記境界線によって分けられる画像領域を抽出する画像領域抽出手段と、
前記デジタル写真画像を複数の区間に分割して、前記各画像領域が複数の区間のいずれの区間に含まれているかを判定する画像領域位置判定手段と、
前記各画像領域の色、テクスチャまたは形状のうちの少なくとも1つを分析して、各画像領域の特徴を判定する画像領域特徴判定手段と、
前記抽出された境界線、前記各画像領域が含まれる区間、および、前記各画像領域の特徴に基づいて、前記デジタル写真画像が広がりのある画像であるか否か、奥行きのある画像であるか否か、および、前記デジタル写真画像が2つ以上の部分に分けられる分割画像であるか否かを評価する画像評価手段とを備えたことを特徴とするものである。
本願発明のプログラムは、コンピュータを、
複数の対象物を撮影したデジタル写真画像より対象物間の境である境界線を抽出する境界線抽出手段と、
前記デジタル写真画像を前記境界線によって分けられる画像領域を抽出する画像領域抽出手段と、
前記デジタル写真画像を複数の区間に分割して、前記各画像領域が複数の区間のいずれの区間に含まれているかを判定する画像領域位置判定手段と、
前記各画像領域の色、テクスチャまたは形状のうちの少なくとも1つを分析して、各画像領域の特徴を判定する画像領域特徴判定手段と、
前記抽出された境界線、前記各画像領域が含まれる区間、および、前記各画像領域の特徴に基づいて、前記デジタル写真画像が広がりのある画像であるか否か、奥行きのある画像であるか否か、および、前記デジタル写真画像が2つ以上の部分に分けられる分割画像であるか否かを評価する画像評価手段として機能させることを特徴とするものである。
「対象物」とは、撮影の対象となるものである。対象物は、人物などの被写体に限らず、海、山、草原、建物などの背景となるものも含む。
「境界線」とは、対象物と対象物の境となる線であって、例えば、海と空の境となる線、道路と草原の境となる線、建物と空の境となる線、人物と草原の境となる線などをいう。
「画像領域の特徴」とは、他の画像と違うその画像領域特有のものをいう。例えば、明度・彩度・輝度のような色の特徴を表すものや、画像に撮影されている物や画像の構造を表すものなど、その画像を特徴付けるものである。
「前記デジタル写真画像が2つ以上の部分に分けられる分割画像」は、例えば、色、明暗、人物などによって2つ以上の部分に画像が分けられると認識される画像である。
また、前記境界線抽出手段が、
デジタル写真画像よりエッジを抽出するエッジ抽出手段と、
前記デジタル写真画像に存在する画素のうち色空間上で所定の距離内の色を持つ画素の色を、該所定の距離内の色のうちの1つの色に置き換えた減色画像を生成する減色画像生成手段と、
前記減色画像中の前記エッジを跨ぐ一定の範囲の領域に存在する画素を同じ色の画素に分けて、該領域内の存在する各色の分布の偏りを表す指標値を該領域内の全ての色に対して求め、求めた全ての色の偏りを表す指標値に基づいて、前記一定の範囲の領域のテクスチャの分布の偏りを表す指標値を求めるテクスチャ分布算出手段とを有すものであって、
このテクスチャ分布算出手段により求めたテクスチャの分布の偏りを表す指標値に基づいて、前記エッジを境として分けられた2つの領域のテクスチャの分布が均一でないと判定される場合には、該エッジを境界線として抽出するものが望ましい。
「テクスチャの分布の偏りを表す指標値」とは、テクスチャが均一でなく偏って分布することを表す指標となるものである。例えば、色分布などに基づいて検出することができる。
また、前記画像領域特徴判定手段が判定する画像領域の特徴が、空を撮影した領域の特徴、海を撮影した領域の特徴、植物の群生する領域の特徴、道路を撮影した領域の特徴のいずれかであってもよい。
また、前記画像評価手段は、前記画像領域特徴判定手段により判定された画像領域の特徴が空を撮影した領域の特徴または植物の群生する領域の特徴を持つ場合は、画像領域位置判定手段により判定された該画像領域が占める区間に応じて前記デジタル写真画像が広がりのある画像であるか否かを評価する広がり評価手段を備えるものであってもよい。
あるいは、前記画像評価手段は、前記境界線が複数抽出されたとき、複数の境界線のうちのいくつかの境界線が放射状に延びる場合には、前記デジタル写真画像が奥行きのある画像であると評価する奥行き評価手段を備えるものであってもよい。
本発明によれば、デジタル写真画像より境界線を抽出して、境界線によって分けられる画像領域の位置と特徴にもとづいて、デジタル写真画像が広がりのある画像であるか否か、奥行きのある画像であるか否か、および、分割された画像であるか否かを評価することにより、人がデジタル写真画像を見たときの印象に近い状態で評価することができる。
また、デジタル写真画像よりエッジを抽出して、エッジを跨ぐ領域のテクスチャの分布が均一でないエッジを境界線として抽出することにより、海などの対象物に含まれるテクスチャに起因するエッジを除いて、海と空の境となるような境界線のみを抽出することができる。
また、各画像領域が空を撮影した領域の特徴、海を撮影した領域の特徴、植物の群生する領域の特徴、道路を撮影した領域の特徴を持っているかを判定することで、人の判断に近い評価を行うことができる。
また、写真画像上に空を撮影した画像領域または植物の群生する画像領域が占める区間が大きい場合には、人は広がりを感じることが多いので、空を撮影した画像領域または植物の群生する領域の特徴を持つ画像領域の大きさに応じて広がりを評価することによって、人の感覚に近い評価をすることができる。
あるいは、写真画像に表れた複数の境界線が放射状に延びる場合には、人は奥行きを感じることが多く、境界線が放射状に延びる写真画像を奥行きのある画像であると評価することによって、人の感覚に近い評価をすることができる。
以下、図面を参照して本発明の実施の形態について説明する。図1に示すように、本実施の形態の電子アルバム生成装置1は、補助記憶装置に読み込まれたアプリケーションプログラムがコンピュータ(例えば、パソコン等)上で実行されることにより実現される。電子アルバムのアプリケーションプログラムはCD−ROM等の記憶媒体に記憶されて配布され、CD−ROM等の記憶媒体からコンピュータにインストールされる。あるいは、インターネット等のネットワークを介してプログラムが配布されて、コンピュータにインストールされる。
画像評価装置1は、図1に示すように、デジタル写真画像100を入力する画像入力手段10、デジタル写真画像100より撮影されている対象物間の境である境界線を抽出する境界線抽出手段20と、デジタル写真画像100を境界線によって分けられる画像領域を抽出する画像領域抽出手段30と、デジタル写真画像100を複数の区間に分割して、各画像領域が複数の区間のいずれの区間に含まれているかを判定する画像領域位置判定手段と40、前記各画像領域の色、テクスチャまたは形状のうちの少なくとも1つを分析して、各画像領域の特徴を判定する画像領域特徴判定手段50と、抽出された境界線、各画像領域の含まれる区間、および、各画像領域の特徴に基づいて、前記デジタル写真画像が広がりのある画像であるか否か、奥行きのある画像であるか否か、および、分割された画像であるか否かを評価する画像評価手段60とを備える。
画像入力手段10は、ハードディスクなどの記憶装置や、ネットワークで接続されたサーバなどに記憶されているデジタル写真画像100を画像評価装置1のワークエリアに入力する。
デジタル写真画像100は、デジタルスチールカメラなどで撮影されたデジタル画像や、プリント印刷された画像やネガに撮影されている画像をスキャナーを用いて読み取ったデジタル画像などである。デジタル写真画像100には、通常、空、草原、海、人物、建物、道路、木など様々な撮影対象となる対象物(以下、オブジェクトという)が複数撮影され、オブジェクトとオブジェクトの境に境界線が現れる。また、境界線には、人物の輪郭線、建・物道路線・海面などのオブジェクト間の境を表す長い線分、道路・沿岸線などのオブジェクトの輪郭の曲線など様々な境界線がある。
境界線抽出手段20は、図2に示すように、デジタル写真画像100に前処理を施す前処理手段21と、デジタル写真画像100よりエッジを抽出するエッジ抽出手段22と、デジタル写真画像100から減色画像120を生成する減色画像生成手段23と、減色画像120からテクスチャの分布を算出するテクスチャ分布算出手段24とを備え、検出したエッジの中から境界線を抽出する。
前処理手段21は、元となるデジタル写真画像100のサイズが予め定めたサイズより大きい場合には、高速化のため元のデジタル写真画像100を予め定めたサイズに縮小した縮小画像に変換する。あるいは、画像の色空間をRGB色空間からXYZ色空間に変換する。
エッジ抽出手段22は、前処理を施したデジタル写真画像110からエッジを抽出する。具体的には、各画素において勾配値を求めるマスクを用いて、30度ごとに6方向の画素値の勾配値を求める。求めた6方向の勾配値のうち最大となる勾配値が予め決めた閾値より大きい場合には、最大となる勾配値が得られた方向にエッジが存在する画素と判定する。全ての画素に対してこの判定を行ってエッジを抽出する。図5に、デジタル写真画像100(同図(a))からエッジを抽出した画像(同図(b))を示す。
減色画像生成手段23は、前処理を行ったデジタル写真画像110の画素の持つ色が色空間において所定の距離内にあるものを1つの色に置き換えて減色画像120を生成する。写真画像上の画素の色を、色空間上で予め決められた距離より小さい距離の画素をグルーピングして1つの色で置き換える。
まず、近い色を持つ画素を適当にグルーピングして各グループの画素の色の重心を色空間上で求めて、これらの重心距離が予め決めた距離より小さければグループを合併して、新しいグループの画素の色の重心を求める。このように合併する必要のあるグループがなくなるまで繰り返して画素のグループを合併する。そして、グループ内の画素の色の重心となる色を用いてグループ内の画素の新しい色に置き換える。あるいは、同じグループ内の画素の色の中心となる色を新しい色として置き換えてもよい。
ところで、エッジ抽出手段22で抽出したエッジには、境界線だけではなく、撮影されている人物の洋服の模様や木の葉や草原を撮影した画像の細かいテクスチャもエッジとして検出される。しかし、洋服の模様や木の葉や草原に現れたテクスチャによるエッジでは、エッジの両側には同じテクスチャが現れるが、草原と空の境にあるエッジでは、エッジの両側でテクスチャが異なる場合が多い。そこで、検出したエッジの周囲のテクスチャの分布を調べることによって境界線であるか否かの判定を行う。
テクスチャ分布算出手段24は、減色画像120中の所定の画素から一定の範囲の領域に存在する画素を同じ色の画素に分けて、その領域内の存在する各色の分布の偏りを表す指標値を全ての色に対して求め、求めた全ての色の偏りを表す指標値に基づいて、前記1つの画素のテクスチャの分布の偏りを表す指標値を求める。
画像の各画素で、この画素の位置を中心として予め決めた距離以内にある判定領域の中に存在する画素を色でグループ分けして、色ごとに画素グループの重心の位置を求める。重心を求めた色が領域内に均等に分布している場合は、重心の位置は判定領域の中心の位置と重なるが、偏りがある場合には重心の位置は中心からずれたところになるので、重心の位置のずれが各色の偏りを表す指標値として用いることができる。判定領域内のテクスチャが一様に分布している場合には、全ての色の重心の位置が領域の中心の近傍に存在するが、テクスチャに偏りがある場合にはいずれかの色の分布に偏りが表れる。そこで、判定領域に含まれる画素グループの重心位置の平均偏差値を、テクスチャの分布の偏りを表す指標値として求める(以下、平均偏差値をテクスチャ分布値と言う)。例えば、図4に示すように、(a)の判定領域の中には、“+”か“X”かのどちらの色を持つ画素が存在し、(b)の判定領域の中には、“+”か“X”か“○”かのいずれかの色を持つ画素が存在するものとする。この領域の中心の画素(太い○で囲まれた画素)に対して、上記に定義するようなテクスチャ分布値の計算を行うと、(a)に示す領域のテクスチャ分布値8となり、(b)に示す領域のテクスチャ分布値0となる。ここでは、色の偏りをみてテクスチャの分布を求める方法について説明したが、他の公知の様々な手法を用いてテクスチャの分布を求めてもよい。
そこで、境界線抽出手段20は、エッジ抽出手段22で抽出したエッジ上の画素の位置で、テクスチャ分布算出手段24を用いてテクスチャ分布値を算出して、分布値が大きい場合には、このエッジを境界線として抽出する。あるいは、エッジを跨ぐように設定された判定領域内のテクスチャの分布を見て、境界線を抽出するようにしてもよい。図5に、エッジ(同図(b)参照)の中から境界線を抽出した画像(同図(c))を示す。
画像領域抽出手段30は、境界線抽出手段20により抽出してきた境界線を用いて、1つのオブジェクトが撮影されていると思われる画像領域を抽出する。例えば、海と空の2つのオブジェクトが撮影されているデジタル写真画像100には、海と空の境に境界線が存在し、その境界線を境に海が撮影されている画像領域と、空が撮影されている画像領域に分けられる。そこで、境界線と判定されたエッジ上の画素のみを残し、その他の画素を背景領域とすると、境界線により幾つの画像領域に分けられる。境界線で分けられた画像領域には、1つのオブジェクトが撮影されているものと推定される。そこで、このような境界線で分けられる画像領域をグラフィックス理論の連続領域を求める種々の方法(例えば、ラベリング処理など)を用いて連続する画像領域を抽出する。この連続する画像領域には、1つのオブジェクトが撮影されていると推定される。図5(d)に示すように同じ色で塗り分けられた画像領域が、図5(c)の境界線で分けられた画像領域を抽出したものである。
画像領域位置判定手段40は、デジタル写真画像100を複数の区間に分割して、前記各画像領域が複数の区間のいずれの区間に含まれているかによって画像領域の位置とその範囲を判定する。例えば、図6(a)、(b)、(c)に示すように、縦軸を上、中、下の同じ大きさ区間に三つに分け、横軸を左、中、右の同じ大きさの区間に三つに分けた九つの枠をマスクしていき、画像領域抽出手段30により抽出した画像領域が各枠内に存在するか否かを求める。また、各画像領域が存在する位置範囲を縦軸と横軸を表す指標(縦→上、中、下 横→左、中、右)を用いて、二次元上の位置と範囲を表現する。ある画像領域が複数の枠を占める場合は、各枠内にある画像領域がその枠内を領域を占める比率を求め、予め決めた比率より小さければ、その枠内には存在しないものとして扱う。
画像領域特徴判定手段50は、各画像領域の色、テクスチャ、形状を分析して、各画像領域が空、海、植物、人工物などいずれの特徴を持っているかを判定する。画像領域抽出手段30により抽出された画像領域の画像特徴を、画像領域内の色、画像領域の形状、画像領域内のテクスチャなどから判定する。例えば、空の青色、海の青色、草、森林の植物が撮影された特徴を現す緑色、道路の黒色、花の赤色、黄色などが色の特徴があらわれる。画像領域の形状の特徴としては、例えば、建物の輪郭を現す線分、道路の両端をあらわす長い線分(境界線)のペアがある。さらに、テクスチャに特徴が表れる場合には、花畑などのような植物が群生している領域では均一なテクスチャが表れる。これらの特徴を用いて各画像領域に撮影されているオブジェクトを推定することができる。
画像評価手段60は、図3に示すように、境界線抽出手段20、画像領域位置判定手段40、画像領域特徴判定手段50により得られた情報を用いて、デジタル写真画像100の「広がり」を評価する広がり評価手段61と、デジタル写真画像100の「奥行き」を評価する奥行き評価手段62と、デジタル写真画像100が色、明暗、人物などによって分割された「分割画像」であるか否かの評価を行う分割画像評価手段63とを備える。具体的に、以下の規則により画像を評価する。
広がり評価手段61は、大きい領域の分布が縦方向で中部から上部、或は、中部から下部まで、また、画像領域の全体が、横方向の左、中、右のうち少なくとも2つ以上に区間に含まれ、画像領域の画像特徴が、空か、山や野原のような植物が生えている特徴が表れていると判定されれば地平線が撮影されているような画像であり、「広がり」がある画像と評価する。例えば、図6(a)は「広がり」がある画像と評価される。
奥行き評価手段62は、直線の交わり方が放射状、或いは、横軸に平行に左右に広がる直線に他の直線が中部の位置で収束するように交われば、「奥行き」がある画像として評価する。例えば、図6(b)は直線が放射状に交わっていので、「奥行き」がある画像として評価する。
分割画像評価手段63は、画像領域の中部と左右部の輝度の差が大きく、明るい特徴をもつ部分と暗い特徴を持つ部分で分かれるか、画像領域の数が少なく、複数の直線の交わり方や画像領域間の境界部分が多角形などの幾何の特徴があれば、デジタル写真画像100が大きくいくつか(少なくと2以上)の部分に分けられる「分割画像」であると評価する。例えば、図6(c)は、海と空と山の大きく3つの領域に分割される分割画像である。
以下、図7のフローチャートに従って、画像評価装置1を用いてデジタル写真画像100を評価する方法について説明する。
まず、画像評価装置1に画像入力手段10から評価するデジタル写真画像100を入力する(S100)。入力されたデジタル写真画像100に対して前処理手段21を用いて前処理を施す(S101)。前処理が施されたデジタル写真画像100から境界線抽出手段20を用いて境界線を抽出する(S102)。
画像領域抽出手段30で、デジタル写真画像100を抽出された境界線で分けられる画像領域を求める(S103)。各画像領域には、1つのオブジェクトを含むように分けられ、例えば、図5は、山、空、草原、人物が撮影された画像領域に分けられる。画像領域位置判定手段40で各画像領域が横方向を左・中・右、縦方向を上・中・下に分けた区間のどこに存在するかによって、各画像領域の位置と範囲を判定する(S104)。さらに、画像領域特徴判定手段50で、各画像領域が空、海、植生、人工物などいずれの特徴を持っているのかを判定する(S105)。
評価手段60では、広がり評価手段61、奥行き評価手段62、分割画像評価手段63によって、境界線抽出手段20、画像領域位置判定手段40、画像領域特徴判定手段50により得られた情報から、デジタル写真画像100の「広がり」・「奥行き」・「分割画像」に関する評価を行い(S106)、得られた評価値をデジタル写真画像の評価として記録する。
以上詳細に説明したように、デジタル写真画像より境界線を抽出して、境界線によって分けられる画像領域の位置と特徴にもとづいて、デジタル写真画像が広がりのある画像であるか否か、奥行きのある画像であるか否か、および、分割された画像であるか否かを評価することにより、人がデジタル写真画像を見たときの印象に近い状態で評価することができる。
画像評価装置の構成図 境界線検出手段の構成図 評価手段の構成図 テクスチャの分布の偏りを説明するための図 境界線と画像領域の抽出方法を説明するための図 広がり・奥行き・分割画像を説明するための図 画像評価装置の処理の流れを説明するための図
符号の説明
1 画像評価装置
10 画像入力手段
20 境界線抽出手段
21 前処理手段
22 エッジ抽出手段
23 減色画像生成手段
24 テクスチャ分布算出手段
30 画像領域抽出手段
40 画像領域位置判定手段と
50 画像領域特徴判定手段
60 画像評価手段
61 広がり評価手段
62 奥行き評価手段
63 分割画像評価手段
100 デジタル写真画像
110 前処理を施したデジタル写真画像
120 減色画像

Claims (7)

  1. 複数の対象物を撮影したデジタル写真画像より対象物間の境である境界線を抽出する境界線抽出手段と、
    前記デジタル写真画像を前記境界線によって分け画像領域を抽出する画像領域抽出手段と、
    前記デジタル写真画像を複数の区間に分割して、前記各画像領域が複数の区間のいずれの区間に含まれているかを判定する画像領域位置判定手段と、
    前記各画像領域の色、テクスチャまたは形状のうちの少なくとも1つを分析して、各画像領域の特徴を判定する画像領域特徴判定手段と、
    前記抽出された境界線、前記各画像領域が含まれる区間、および、前記各画像領域の特徴に基づいて、前記デジタル写真画像が広がりのある画像であると評価するための予め定められた評価基準を満たしている場合には前記デジタル写真画像を前記広がりのある画像と評価し前記デジタル写真画像が奥行きのある画像であると評価するための予め定められた評価基準満たしている場合には前記デジタル写真画像を前記奥行きのある画像と評価し、および、前記デジタル写真画像が2つ以上の部分に分けられる分割画像であると評価するための予め定められた評価基準を満たしている場合には前記分割画像であると評価する画像評価手段とを備えたことを特徴とする画像評価装置。
  2. 前記境界線抽出手段が、
    前記デジタル写真画像よりエッジを抽出するエッジ抽出手段と、
    前記デジタル写真画像に存在する画素のうち色空間上で所定の距離内の色を持つ画素の色を、該所定の距離内の色のうちの1つの色に置き換えた減色画像を生成する減色画像生成手段と、
    前記減色画像中の前記エッジを跨ぐ一定の範囲の領域に存在する画素を同じ色の画素に分けて、該領域内存在する各色の分布の偏りを表す指標値を該領域内の全ての色に対して求め、求めた全ての色の偏りを表す指標値に基づいて、前記一定の範囲の領域のテクスチャの分布の偏りを表す指標値を求めるテクスチャ分布算出手段とを有し、
    該テクスチャ分布算出手段により求めたテクスチャの分布の偏りを表す指標値に基づいて、前記エッジを境として分けられた2つの領域のテクスチャの分布が均一でないと判定される場合には、該エッジを境界線として抽出するものであることを特徴とする請求項1記載の画像評価装置。
  3. 前記画像領域特徴判定手段が判定する画像領域の特徴が、空を撮影した領域の特徴、海を撮影した領域の特徴、植物の群生する領域の特徴、道路を撮影した領域の特徴のいずれかであることを特徴とする請求項1または2記載の画像評価装置。
  4. 前記画像評価手段が、前記画像領域特徴判定手段により判定された画像領域の特徴が空を撮影した領域の特徴または植物の群生する領域の特徴を持つ場合は、前記画像領域位置判定手段により判定された該画像領域が占める区間に応じて前記デジタル写真画像が広がりのある画像であるか否かを評価する広がり評価手段を備えることを特徴とする請求項記載の画像評価装置。
  5. 前記画像評価手段が、前記境界線が複数抽出されたとき、複数の境界線のうちのいくつかの境界線が放射状に延びる場合には、前記デジタル写真画像が奥行きのある画像であると評価する奥行き評価手段を備えることを特徴とする請求項1から4記載の画像評価装置。
  6. コンピュータを、
    複数の対象物を撮影したデジタル写真画像より対象物間の境である境界線を抽出する境界線抽出手段と、
    前記デジタル写真画像を前記境界線によって分け画像領域を抽出する画像領域抽出手段と、
    前記デジタル写真画像を複数の区間に分割して、前記各画像領域が複数の区間のいずれの区間に含まれているかを判定する画像領域位置判定手段と、
    前記各画像領域の色、テクスチャまたは形状のうちの少なくとも1つを分析して、各画像領域の特徴を判定する画像領域特徴判定手段と、
    前記抽出された境界線、前記各画像領域が含まれる区間、および、前記各画像領域の特徴に基づいて、前記デジタル写真画像が広がりのある画像であると評価するための予め定められた評価基準を満たしている場合には前記デジタル写真画像を前記広がりのある画像と評価し前記デジタル写真画像が奥行きのある画像であると評価するための予め定められた評価基準満たしている場合には前記デジタル写真画像を前記奥行きのある画像と評価し、および、前記デジタル写真画像が2つ以上の部分に分けられる分割画像であると評価するための予め定められた評価基準を満たしている場合には前記分割画像であると評価する画像評価手段として機能させるプログラム。
  7. デジタル写真画像より境界線を抽出する境界線抽出手段と、
    前記デジタル写真画像から画像領域を抽出する画像領域抽出手段と、
    前記各画像領域の位置を判定する画像領域位置判定手段と、
    前記各画像領域の特徴を判定する画像領域特徴判定手段と、
    前記デジタル写真画像を評価する画像評価手段とを備えた画像評価装置の動作方法において、
    複数の対象物を撮影したデジタル写真画像より対象物間の境である境界線を境界線抽出手段により抽出する境界線抽出ステップと、
    前記デジタル写真画像を前記境界線によって分けた画像領域を前記画像領域抽出手段により抽出する画像領域抽出ステップと、
    前記デジタル写真画像を複数の区間に分割して、前記各画像領域が複数の区間のいずれの区間に含まれているかを前記画像領域位置判定手段により判定する画像領域位置判定ステップと、
    前記各画像領域の色、テクスチャまたは形状のうちの少なくとも1つを分析して、各画像領域の特徴を前記画像領域特徴判定手段により判定する画像領域特徴判定ステップと、
    前記抽出された境界線、前記各画像領域が含まれる区間、および、前記各画像領域の特徴に基づいて、前記画像評価手段により、前記デジタル写真画像が広がりのある画像であると評価するための予め定められた評価基準を満たしている場合には前記デジタル写真画像を前記広がりのある画像と評価し、前記デジタル写真画像が奥行きのある画像であると評価するための予め定められた評価基準満たしている場合には前記デジタル写真画像を前記奥行きのある画像と評価し、および、前記デジタル写真画像が2つ以上の部分に分けられる分割画像であると評価するための予め定められた評価基準を満たしている場合には前記分割画像であると評価する画像評価ステップとを実行する画像評価装置の動作方法。
JP2006256800A 2006-09-22 2006-09-22 画像評価装置およびそのプログラム Expired - Fee Related JP4712659B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2006256800A JP4712659B2 (ja) 2006-09-22 2006-09-22 画像評価装置およびそのプログラム
US11/902,344 US7970207B2 (en) 2006-09-22 2007-09-20 Apparatus and program for evaluating images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006256800A JP4712659B2 (ja) 2006-09-22 2006-09-22 画像評価装置およびそのプログラム

Publications (2)

Publication Number Publication Date
JP2008077460A JP2008077460A (ja) 2008-04-03
JP4712659B2 true JP4712659B2 (ja) 2011-06-29

Family

ID=39225027

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006256800A Expired - Fee Related JP4712659B2 (ja) 2006-09-22 2006-09-22 画像評価装置およびそのプログラム

Country Status (2)

Country Link
US (1) US7970207B2 (ja)
JP (1) JP4712659B2 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201005673A (en) * 2008-07-18 2010-02-01 Ind Tech Res Inst Example-based two-dimensional to three-dimensional image conversion method, computer readable medium therefor, and system
JP2010074342A (ja) * 2008-09-17 2010-04-02 Fuji Xerox Co Ltd 画像処理装置、画像形成装置、及びプログラム
CN101799925B (zh) * 2010-03-05 2011-08-24 华中科技大学 一种图像自动分割结果的性能分析方法
JP5799273B2 (ja) * 2013-10-02 2015-10-21 パナソニックIpマネジメント株式会社 寸法計測装置、寸法計測方法、寸法計測システム、プログラム
JP6371521B2 (ja) * 2013-12-26 2018-08-08 株式会社ケンシュー 画像処理方法、画像処理プログラム、画像処理装置及び工業製品
JP2020122692A (ja) * 2019-01-30 2020-08-13 キヤノン株式会社 画像処理装置および画像処理方法
US11557132B2 (en) * 2020-10-19 2023-01-17 Here Global B.V. Lane marking

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002245441A (ja) * 2001-02-14 2002-08-30 Mitsubishi Electric Corp 人物像抽出装置
JP2006254107A (ja) * 2005-03-10 2006-09-21 Olympus Imaging Corp 画像評価装置、画像評価プログラム、画像評価プログラムを記録する記録媒体、画像評価方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3475106D1 (en) * 1983-04-15 1988-12-15 Hitachi Ltd Method and apparatus for detecting defects of printed circuit patterns
JP3794502B2 (ja) * 1994-11-29 2006-07-05 ソニー株式会社 画像領域抽出方法及び画像領域抽出装置
JP3189870B2 (ja) * 1996-12-24 2001-07-16 シャープ株式会社 画像処理装置
JP3918141B2 (ja) 1999-08-18 2007-05-23 富士フイルム株式会社 画像処理装置及び画像処理方法
EP1089214A3 (en) * 1999-09-30 2005-01-26 Matsushita Electric Industrial Co., Ltd. Apparatus and method for image recognition
JP4624487B2 (ja) 2001-02-07 2011-02-02 パナソニックシステムネットワークス株式会社 画像の輪郭線抽出処理方法及び輪郭線抽出処理装置
US20030193582A1 (en) * 2002-03-29 2003-10-16 Fuji Photo Film Co., Ltd. Method for storing an image, method and system for retrieving a registered image and method for performing image processing on a registered image
JP4461789B2 (ja) * 2003-03-20 2010-05-12 オムロン株式会社 画像処理装置
US20060120686A1 (en) * 2004-12-03 2006-06-08 Frank Liebenow Method, apparatus and system for storage and retrieval of images
US7809197B2 (en) * 2004-12-09 2010-10-05 Eastman Kodak Company Method for automatically determining the acceptability of a digital image
US8170284B2 (en) * 2005-01-11 2012-05-01 Pioneer Corporation Apparatus and method for displaying image of view in front of vehicle
JP4542013B2 (ja) * 2005-09-29 2010-09-08 富士フイルム株式会社 プリント注文システム、プログラム、プログラム記憶媒体、およびプリント注文サーバ
US7372550B2 (en) * 2005-10-05 2008-05-13 Hewlett-Packard Development Company, L.P. Measuring distance using perspective
US20070121094A1 (en) * 2005-11-30 2007-05-31 Eastman Kodak Company Detecting objects of interest in digital images

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002245441A (ja) * 2001-02-14 2002-08-30 Mitsubishi Electric Corp 人物像抽出装置
JP2006254107A (ja) * 2005-03-10 2006-09-21 Olympus Imaging Corp 画像評価装置、画像評価プログラム、画像評価プログラムを記録する記録媒体、画像評価方法

Also Published As

Publication number Publication date
JP2008077460A (ja) 2008-04-03
US20080075366A1 (en) 2008-03-27
US7970207B2 (en) 2011-06-28

Similar Documents

Publication Publication Date Title
JP4712659B2 (ja) 画像評価装置およびそのプログラム
Lu et al. Salient object detection using concavity context
US8774503B2 (en) Method for color feature extraction
US8687887B2 (en) Image processing method, image processing apparatus, and image processing program
EP2112817A1 (en) Composition analysis method, image device having composition analysis function, composition analysis program, and computer-readable recording medium
US20050175253A1 (en) Method for producing cloud free and cloud-shadow free images
CN107529096A (zh) 图像处理方法及装置
JP2004520735A (ja) 電子画像の自動クロッピング方法および装置
CN108537782A (zh) 一种基于轮廓提取的建筑物图像匹配与融合的方法
CN106251298B (zh) 处理图像的方法和装置
US8718401B2 (en) Image processing device, method and program
US20090245625A1 (en) Image trimming device and program
Zhang et al. Detecting photographic composites using shadows
CN113052923B (zh) 色调映射方法、装置、电子设备和存储介质
CN104766096A (zh) 一种基于多尺度全局特征和局部特征的图像分类方法
WO2021057395A1 (zh) 一种鞋跟型号识别方法、装置及存储介质
CN110287791A (zh) 一种用于人脸图片的筛选方法和系统
JP2004005384A (ja) 画像処理方法、画像処理装置、プログラム及び記録媒体、自動トリミング装置、並びに肖像写真撮影装置
JP2009245404A (ja) 画像処理装置および方法並びにプログラム
JP5965764B2 (ja) 映像領域分割装置及び映像領域分割プログラム
CN110516731A (zh) 一种基于深度学习的视觉里程计特征点检测方法及系统
Raman et al. Bottom-up segmentation for ghost-free reconstruction of a dynamic scene from multi-exposure images
KR101513931B1 (ko) 구도의 자동보정 방법 및 이러한 구도의 자동보정 기능이 탑재된 영상 장치
JP5095501B2 (ja) 注目度算出装置および方法並びにプログラム
JP2020502705A (ja) ターゲット対象取得の方法、装置とロボット

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090217

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110117

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110301

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110323

LAPS Cancellation because of no payment of annual fees