JP3518465B2 - 被写体抽出装置、被写体抽出方法、及び被写体抽出プログラムを記録した記録媒体 - Google Patents
被写体抽出装置、被写体抽出方法、及び被写体抽出プログラムを記録した記録媒体Info
- Publication number
- JP3518465B2 JP3518465B2 JP2000041227A JP2000041227A JP3518465B2 JP 3518465 B2 JP3518465 B2 JP 3518465B2 JP 2000041227 A JP2000041227 A JP 2000041227A JP 2000041227 A JP2000041227 A JP 2000041227A JP 3518465 B2 JP3518465 B2 JP 3518465B2
- Authority
- JP
- Japan
- Prior art keywords
- subject
- image
- contour
- extraction
- extracting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/97—Determining parameters from multiple pictures
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は、画像処理に係り、
特に被写体画像の抽出に用いて好適な被写体抽出装置、
被写体抽出方法、及び被写体抽出プログラムを記録した
記録媒体に関する。
特に被写体画像の抽出に用いて好適な被写体抽出装置、
被写体抽出方法、及び被写体抽出プログラムを記録した
記録媒体に関する。
【０００２】
【従来の技術】同一の被写体が背景と共に撮影された複
数の撮像画像から、該被写体のみを抽出して被写体抽出
画像を得る従来の方法として、以下に示す被写体抽出方
法が知られている。先ず、被写体抽出対象となる被写体
撮像画像（以下、中心画像と称する）と該中心画像に対
して視差を持った被写体撮像画像（以下、参照画像と称
する）が入力されると、中心画像は水平方向の帯状に分
割され、該分割された帯状の画像はさらに被写体のエッ
ジ点で挟まれた区間（セグメント）に分割される。次い
で、各セグメントの端点に対応する対応点が参照画像上
のどこに有るかをエピポーラ線上で探索し、その結果得
られた視差をもとに奥行きが推定される。次いで、この
推定された奥行き情報に基づいて、中心画像の各セグメ
ントが前景セグメントと背景セグメントとに分類され
る。次いで、前景セグメントに分類されたセグメントの
集合体が被写体抽出画像として得られる。但し、この被
写体抽出画像を構成する際に該画像の一部が欠落した場
合、上下方向にみて十分近い範囲内に有効セグメントが
有れば該欠落セグメントを水平、垂直方向の画素によっ
て補間する。なお、この被写体抽出方法においては、各
計算時の画素範囲数やエッジ判定用輝度差などの計算パ
ラメータが予め設定される。なお、背景部分を被写体と
して抽出する場合には、背景セグメントに分類されたセ
グメントの集合体を被写体抽出画像とすれば良い。
数の撮像画像から、該被写体のみを抽出して被写体抽出
画像を得る従来の方法として、以下に示す被写体抽出方
法が知られている。先ず、被写体抽出対象となる被写体
撮像画像（以下、中心画像と称する）と該中心画像に対
して視差を持った被写体撮像画像（以下、参照画像と称
する）が入力されると、中心画像は水平方向の帯状に分
割され、該分割された帯状の画像はさらに被写体のエッ
ジ点で挟まれた区間（セグメント）に分割される。次い
で、各セグメントの端点に対応する対応点が参照画像上
のどこに有るかをエピポーラ線上で探索し、その結果得
られた視差をもとに奥行きが推定される。次いで、この
推定された奥行き情報に基づいて、中心画像の各セグメ
ントが前景セグメントと背景セグメントとに分類され
る。次いで、前景セグメントに分類されたセグメントの
集合体が被写体抽出画像として得られる。但し、この被
写体抽出画像を構成する際に該画像の一部が欠落した場
合、上下方向にみて十分近い範囲内に有効セグメントが
有れば該欠落セグメントを水平、垂直方向の画素によっ
て補間する。なお、この被写体抽出方法においては、各
計算時の画素範囲数やエッジ判定用輝度差などの計算パ
ラメータが予め設定される。なお、背景部分を被写体と
して抽出する場合には、背景セグメントに分類されたセ
グメントの集合体を被写体抽出画像とすれば良い。
【０００３】図１５は、従来の被写体抽出装置の構成例
を示すブロック図である。この図において、１は中心画
像Ｐ１を撮像する中心カメラ、２−１、２は参照画像Ｐ
２−１、２を撮像する参照カメラ、３は上述した従来の
被写体抽出方法で、入力される中心画像Ｐ１、参照画像
Ｐ２−１、２に対して、予め設定された計算パラメータ
を用いて、上記被写体抽出方法による被写体画像の抽出
計算を行い被写体抽出画像Ｐ３を求める被写体抽出計算
部である。そして、この被写体抽出計算部３が従来の被
写体抽出装置である。なお、従来の被写体抽出装置は、
例えば、上述した従来の被写体抽出方法を用いた被写体
抽出プログラムが組み込まれたワークステーション等の
大型コンピュータによって実現される。
を示すブロック図である。この図において、１は中心画
像Ｐ１を撮像する中心カメラ、２−１、２は参照画像Ｐ
２−１、２を撮像する参照カメラ、３は上述した従来の
被写体抽出方法で、入力される中心画像Ｐ１、参照画像
Ｐ２−１、２に対して、予め設定された計算パラメータ
を用いて、上記被写体抽出方法による被写体画像の抽出
計算を行い被写体抽出画像Ｐ３を求める被写体抽出計算
部である。そして、この被写体抽出計算部３が従来の被
写体抽出装置である。なお、従来の被写体抽出装置は、
例えば、上述した従来の被写体抽出方法を用いた被写体
抽出プログラムが組み込まれたワークステーション等の
大型コンピュータによって実現される。
【０００４】
【発明が解決しようとする課題】しかし、上述した従来
の被写体抽出装置では、被写体抽出画像の一部が欠落し
た場合の水平、垂直方向画素による補間処理において、
背景画像となるべき箇所が前景セグメントとして誤って
被写体抽出画像の一部とされて、実際の被写体より膨張
した被写体抽出画像が構成されたり、或いは前景の被写
体抽出画像とすべき箇所が誤って背景画像の一部とされ
て欠落した被写体抽出画像が構成されてしまうという問
題がある。また、上記問題点を解決するために、より詳
細な計算パラメータに変更して被写体抽出計算を行う
と、その計算量が増加し、被写体抽出画像を求めるのに
時間が掛かってしまう。その結果、従来の被写体抽出装
置を実現するには、大型コンピュータが必要である。
の被写体抽出装置では、被写体抽出画像の一部が欠落し
た場合の水平、垂直方向画素による補間処理において、
背景画像となるべき箇所が前景セグメントとして誤って
被写体抽出画像の一部とされて、実際の被写体より膨張
した被写体抽出画像が構成されたり、或いは前景の被写
体抽出画像とすべき箇所が誤って背景画像の一部とされ
て欠落した被写体抽出画像が構成されてしまうという問
題がある。また、上記問題点を解決するために、より詳
細な計算パラメータに変更して被写体抽出計算を行う
と、その計算量が増加し、被写体抽出画像を求めるのに
時間が掛かってしまう。その結果、従来の被写体抽出装
置を実現するには、大型コンピュータが必要である。
【０００５】本発明は、このような事情を考慮してなさ
れたもので、その目的は、より被写体に合致した被写体
抽出画像が得られ、且つ被写体抽出画像を求める計算量
を低減することができる被写体抽出装置、被写体抽出方
法、及び被写体抽出プログラムを記録した記録媒体を提
供することにある。
れたもので、その目的は、より被写体に合致した被写体
抽出画像が得られ、且つ被写体抽出画像を求める計算量
を低減することができる被写体抽出装置、被写体抽出方
法、及び被写体抽出プログラムを記録した記録媒体を提
供することにある。
【０００６】
【課題を解決するための手段】上記の目的を達成するた
めに、請求項１に記載の発明は、同一の被写体について
の視差を持った複数の撮像画像に対して、所定の計算パ
ラメータを用いて、被写体を抽出するための被写体抽出
計算を行うことにより被写体抽出画像を求める被写体抽
出計算手段であって、前記被写体抽出画像を構成する際
に該画像の一部が欠落した場合、上下方向にみて十分近
い範囲内に有効セグメントが有れば該欠落セグメントを
水平、垂直方向の画素によって補間する被写体抽出計算
手段と、前記被写体抽出計算手段によって求められた被
写体抽出画像から該輪郭を抽出する輪郭抽出手段と、前
記複数の撮像画像の内、所定の撮像画像から被写体のエ
ッジ部分を求めるエッジ画素計算手段と、前記輪郭抽出
手段によって抽出された輪郭の内、前記エッジ画素計算
手段によって求められたエッジ部分を含まない輪郭部分
であって、且つ所定の閾値を超える長さの直線部分を誤
輪郭として抽出する誤輪郭抽出手段とを具備することを
特徴とする。
めに、請求項１に記載の発明は、同一の被写体について
の視差を持った複数の撮像画像に対して、所定の計算パ
ラメータを用いて、被写体を抽出するための被写体抽出
計算を行うことにより被写体抽出画像を求める被写体抽
出計算手段であって、前記被写体抽出画像を構成する際
に該画像の一部が欠落した場合、上下方向にみて十分近
い範囲内に有効セグメントが有れば該欠落セグメントを
水平、垂直方向の画素によって補間する被写体抽出計算
手段と、前記被写体抽出計算手段によって求められた被
写体抽出画像から該輪郭を抽出する輪郭抽出手段と、前
記複数の撮像画像の内、所定の撮像画像から被写体のエ
ッジ部分を求めるエッジ画素計算手段と、前記輪郭抽出
手段によって抽出された輪郭の内、前記エッジ画素計算
手段によって求められたエッジ部分を含まない輪郭部分
であって、且つ所定の閾値を超える長さの直線部分を誤
輪郭として抽出する誤輪郭抽出手段とを具備することを
特徴とする。
【０００７】請求項２に記載の発明は、同一の被写体に
ついての視差を持った複数の撮像画像に対して、所定の
計算パラメータを用いて、被写体を抽出するための被写
体抽出計算を行うことにより被写体抽出画像を求める被
写体抽出計算手段であって、前記被写体抽出画像を構成
する際に該画像の一部が欠落した場合、上下方向にみて
十分近い範囲内に有効セグメントが有れば該欠落セグメ
ントを水平、垂直方向の画素によって補間する被写体抽
出計算手段と、前記被写体抽出計算手段によって求めら
れた被写体抽出画像から該輪郭を抽出する輪郭抽出手段
と、前記複数の撮像画像の内、所定の撮像画像から被写
体のエッジ部分を求めるエッジ画素計算手段と、前記輪
郭抽出手段によって抽出された輪郭の内、前記エッジ画
素計算手段によって求められたエッジ部分を横切る輪郭
部分であって、且つ所定の閾値を超える長さの直線部分
を誤輪郭として抽出する誤輪郭抽出手段とを具備するこ
とを特徴とする。
ついての視差を持った複数の撮像画像に対して、所定の
計算パラメータを用いて、被写体を抽出するための被写
体抽出計算を行うことにより被写体抽出画像を求める被
写体抽出計算手段であって、前記被写体抽出画像を構成
する際に該画像の一部が欠落した場合、上下方向にみて
十分近い範囲内に有効セグメントが有れば該欠落セグメ
ントを水平、垂直方向の画素によって補間する被写体抽
出計算手段と、前記被写体抽出計算手段によって求めら
れた被写体抽出画像から該輪郭を抽出する輪郭抽出手段
と、前記複数の撮像画像の内、所定の撮像画像から被写
体のエッジ部分を求めるエッジ画素計算手段と、前記輪
郭抽出手段によって抽出された輪郭の内、前記エッジ画
素計算手段によって求められたエッジ部分を横切る輪郭
部分であって、且つ所定の閾値を超える長さの直線部分
を誤輪郭として抽出する誤輪郭抽出手段とを具備するこ
とを特徴とする。
【０００８】請求項３に記載の発明は、同一の被写体に
ついての視差を持った複数の撮像画像に対して、所定の
計算パラメータを用いて、被写体を抽出するための被写
体抽出計算を行うことにより被写体抽出画像を求める被
写体抽出計算手段であって、前記被写体抽出画像を構成
する際に該画像の一部が欠落した場合、上下方向にみて
十分近い範囲内に有効セグメントが有れば該欠落セグメ
ントを水平、垂直方向の画素によって補間する被写体抽
出計算手段と、前記被写体抽出計算手段によって求めら
れた被写体抽出画像から該輪郭を抽出する輪郭抽出手段
と、前記複数の撮像画像の内、所定の撮像画像から被写
体のエッジ部分を求めるエッジ画素計算手段と、前記輪
郭抽出手段によって抽出された輪郭の内、前記エッジ画
素計算手段によって求められたエッジ部分を含まない輪
郭部分であって且つ所定の第１の閾値を超える長さの直
線部分と、前記エッジ画素計算手段によって求められた
エッジ部分を横切る輪郭部分であって且つ所定の第２の
閾値を超える長さの直線部分と、を誤輪郭として抽出す
る誤輪郭抽出手段とを具備することを特徴とする。
ついての視差を持った複数の撮像画像に対して、所定の
計算パラメータを用いて、被写体を抽出するための被写
体抽出計算を行うことにより被写体抽出画像を求める被
写体抽出計算手段であって、前記被写体抽出画像を構成
する際に該画像の一部が欠落した場合、上下方向にみて
十分近い範囲内に有効セグメントが有れば該欠落セグメ
ントを水平、垂直方向の画素によって補間する被写体抽
出計算手段と、前記被写体抽出計算手段によって求めら
れた被写体抽出画像から該輪郭を抽出する輪郭抽出手段
と、前記複数の撮像画像の内、所定の撮像画像から被写
体のエッジ部分を求めるエッジ画素計算手段と、前記輪
郭抽出手段によって抽出された輪郭の内、前記エッジ画
素計算手段によって求められたエッジ部分を含まない輪
郭部分であって且つ所定の第１の閾値を超える長さの直
線部分と、前記エッジ画素計算手段によって求められた
エッジ部分を横切る輪郭部分であって且つ所定の第２の
閾値を超える長さの直線部分と、を誤輪郭として抽出す
る誤輪郭抽出手段とを具備することを特徴とする。
【０００９】
【００１０】
【００１１】
【００１２】
【００１３】
【００１４】
【００１５】
【００１６】
【００１７】
【００１８】請求項４に記載の発明は、同一の被写体に
ついての視差を持った複数の撮像画像に対して、所定の
計算パラメータを用いて、被写体を抽出するための被写
体抽出計算を行うことにより被写体抽出画像を求める過
程であって、前記被写体抽出画像を構成する際に該画像
の一部が欠落した場合、上下方向にみて十分近い範囲内
に有効セグメントが有れば該欠落セグメントを水平、垂
直方向の画素によって補間する第１の過程と、前記第１
の過程によって求められた被写体抽出画像から該輪郭を
抽出する第２の過程と、前記複数の撮像画像の内、所定
の撮像画像から被写体のエッジ部分を求め、前記第２の
過程によって抽出された輪郭の内、該求められたエッジ
部分を含まない輪郭部分であって且つ所定の第１の閾値
を超える長さの直線部分、または該求められたエッジ部
分を横切る輪郭部分であって且つ所定の第２の閾値を超
える長さの直線部分の内、いずれか或いは両方の直線部
分を誤輪郭として抽出する第３の過程と、前記所定の撮
像画像の画像領域の内、前記第３の過程によって抽出さ
れた誤輪郭を含む部分領域を再計算領域として決定する
第４の過程と、前記複数の撮像画像に対して、前記第１
の計算パラメータとは異なる所定の第２の計算パラメー
タを用いて、前記再計算領域の誤輪郭を除去するための
被写体抽出計算を行うことにより、該再計算領域の被写
体抽出画像である再抽出画像を求める第５の過程と、前
記第１の過程により求められた被写体抽出画像の画像領
域の内で前記再計算領域に該当する領域の画像と、前記
第５の過程により求められた再抽出画像とを置換するこ
とによって、被写体抽出画像を再構成する第６の過程と
を具備することを特徴とする。
ついての視差を持った複数の撮像画像に対して、所定の
計算パラメータを用いて、被写体を抽出するための被写
体抽出計算を行うことにより被写体抽出画像を求める過
程であって、前記被写体抽出画像を構成する際に該画像
の一部が欠落した場合、上下方向にみて十分近い範囲内
に有効セグメントが有れば該欠落セグメントを水平、垂
直方向の画素によって補間する第１の過程と、前記第１
の過程によって求められた被写体抽出画像から該輪郭を
抽出する第２の過程と、前記複数の撮像画像の内、所定
の撮像画像から被写体のエッジ部分を求め、前記第２の
過程によって抽出された輪郭の内、該求められたエッジ
部分を含まない輪郭部分であって且つ所定の第１の閾値
を超える長さの直線部分、または該求められたエッジ部
分を横切る輪郭部分であって且つ所定の第２の閾値を超
える長さの直線部分の内、いずれか或いは両方の直線部
分を誤輪郭として抽出する第３の過程と、前記所定の撮
像画像の画像領域の内、前記第３の過程によって抽出さ
れた誤輪郭を含む部分領域を再計算領域として決定する
第４の過程と、前記複数の撮像画像に対して、前記第１
の計算パラメータとは異なる所定の第２の計算パラメー
タを用いて、前記再計算領域の誤輪郭を除去するための
被写体抽出計算を行うことにより、該再計算領域の被写
体抽出画像である再抽出画像を求める第５の過程と、前
記第１の過程により求められた被写体抽出画像の画像領
域の内で前記再計算領域に該当する領域の画像と、前記
第５の過程により求められた再抽出画像とを置換するこ
とによって、被写体抽出画像を再構成する第６の過程と
を具備することを特徴とする。
【００１９】
【００２０】請求項５に記載の発明は、同一の被写体に
ついての視差を持った複数の撮像画像に対して、所定の
第１の計算パラメータを用いて、被写体を抽出するため
の被写体抽出計算を行うことにより被写体抽出画像を求
める処理であって、前記被写体抽出画像を構成する際に
該画像の一部が欠落した場合、上下方向にみて十分近い
範囲内に有効セグメントが有れば該欠落セグメントを水
平、垂直方向の画素によって補間する第１の処理と、前
記第１の処理によって求められた被写体抽出画像から該
輪郭を抽出する第２の処理と、前記複数の撮像画像の
内、所定の撮像画像から被写体のエッジ部分を求める第
３の処理と、前記第２の処理によって抽出された輪郭の
内、該求められたエッジ部分を含まない輪郭部分であっ
て且つ所定の第１の閾値を超える長さの直線部分、また
は該求められたエッジ部分を横切る輪郭部分であって且
つ所定の第２の閾値を超える長さの直線部分の内、いず
れか或いは両方の直線部分を誤輪郭として抽出する第４
の処理とをコンピュータに行わせることを特徴とする。
ついての視差を持った複数の撮像画像に対して、所定の
第１の計算パラメータを用いて、被写体を抽出するため
の被写体抽出計算を行うことにより被写体抽出画像を求
める処理であって、前記被写体抽出画像を構成する際に
該画像の一部が欠落した場合、上下方向にみて十分近い
範囲内に有効セグメントが有れば該欠落セグメントを水
平、垂直方向の画素によって補間する第１の処理と、前
記第１の処理によって求められた被写体抽出画像から該
輪郭を抽出する第２の処理と、前記複数の撮像画像の
内、所定の撮像画像から被写体のエッジ部分を求める第
３の処理と、前記第２の処理によって抽出された輪郭の
内、該求められたエッジ部分を含まない輪郭部分であっ
て且つ所定の第１の閾値を超える長さの直線部分、また
は該求められたエッジ部分を横切る輪郭部分であって且
つ所定の第２の閾値を超える長さの直線部分の内、いず
れか或いは両方の直線部分を誤輪郭として抽出する第４
の処理とをコンピュータに行わせることを特徴とする。
【００２１】
【００２２】
【００２３】
【００２４】
【００２５】
【００２６】
【発明の実施の形態】以下、図面を参照し、本発明の実
施形態について説明する。図１は本発明の第１の実施形
態による被写体抽出装置１０１の構成を示すブロック図
である。この図において、１は被写体抽出対象となる被
写体撮像画像（以下、中心画像と称する）Ｐ１を撮像す
る中心カメラ、２−１、２は中心カメラ１が撮影する被
写体と同一被写体を異なる方向から撮影するカメラであ
って、該中心画像Ｐ１に対して視差を持った被写体撮像
画像（以下、参照画像と称する）Ｐ２−１、２を撮像す
る参照カメラ、３は入力される中心画像Ｐ１、参照画像
Ｐ２−１、２に対して、所定の第１の計算パラメータを
用いて被写体画像の抽出計算を行い被写体抽出画像Ｐ３
を求める第１の被写体抽出計算部である。なお、これら
中心カメラ１、参照カメラ２−１、２及び第１の被写体
抽出計算部３は、図１５に示す従来の被写体抽出装置と
同様の構成であり、第１の被写体抽出計算部３の被写体
抽出計算は、図１５の従来の被写体抽出計算部３と同じ
被写体抽出計算が第１の計算パラメータを使用して行わ
れる。
施形態について説明する。図１は本発明の第１の実施形
態による被写体抽出装置１０１の構成を示すブロック図
である。この図において、１は被写体抽出対象となる被
写体撮像画像（以下、中心画像と称する）Ｐ１を撮像す
る中心カメラ、２−１、２は中心カメラ１が撮影する被
写体と同一被写体を異なる方向から撮影するカメラであ
って、該中心画像Ｐ１に対して視差を持った被写体撮像
画像（以下、参照画像と称する）Ｐ２−１、２を撮像す
る参照カメラ、３は入力される中心画像Ｐ１、参照画像
Ｐ２−１、２に対して、所定の第１の計算パラメータを
用いて被写体画像の抽出計算を行い被写体抽出画像Ｐ３
を求める第１の被写体抽出計算部である。なお、これら
中心カメラ１、参照カメラ２−１、２及び第１の被写体
抽出計算部３は、図１５に示す従来の被写体抽出装置と
同様の構成であり、第１の被写体抽出計算部３の被写体
抽出計算は、図１５の従来の被写体抽出計算部３と同じ
被写体抽出計算が第１の計算パラメータを使用して行わ
れる。
【００２７】１１１は、第１の被写体抽出計算部３によ
って求められた被写体抽出画像Ｐ３から、被写体の輪郭
として疑わしい誤輪郭を抽出する誤輪郭抽出処理部であ
り、該被写体抽出画像Ｐ３から被写体の輪郭部をトレー
スして輪郭を抽出する輪郭抽出部４と、入力される中心
画像Ｐ１から被写体のエッジ部分の画素を抽出するエッ
ジ画素計算部５と、輪郭抽出部４によって抽出された輪
郭の内、エッジ画素計算部５により求められたエッジ部
分の画素を含まない輪郭部分であって、且つ所定の閾値
を超える長さの直線部分を誤輪郭として抽出する第１の
誤輪郭抽出部６と、を有する。
って求められた被写体抽出画像Ｐ３から、被写体の輪郭
として疑わしい誤輪郭を抽出する誤輪郭抽出処理部であ
り、該被写体抽出画像Ｐ３から被写体の輪郭部をトレー
スして輪郭を抽出する輪郭抽出部４と、入力される中心
画像Ｐ１から被写体のエッジ部分の画素を抽出するエッ
ジ画素計算部５と、輪郭抽出部４によって抽出された輪
郭の内、エッジ画素計算部５により求められたエッジ部
分の画素を含まない輪郭部分であって、且つ所定の閾値
を超える長さの直線部分を誤輪郭として抽出する第１の
誤輪郭抽出部６と、を有する。
【００２８】７は中心画像Ｐ１の画像領域の内、第１の
誤輪郭抽出部６によって抽出された誤輪郭を含む所定範
囲の矩形領域を再計算領域として決定する再計算領域決
定部、８は入力される中心画像Ｐ１、参照画像Ｐ２−
１、２に対して、第１の計算パラメータとは異なる所定
の第２の計算パラメータを用いて再計算領域決定部７に
より決定された再計算領域の被写体抽出計算を行うこと
によって、該再計算領域の被写体抽出画像である再抽出
画像Ｐ４を求める第２の被写体抽出計算部、９は第１の
被写体抽出計算部３により求められた被写体抽出画像Ｐ
３の画像領域の内で再計算領域に該当する領域の画像
と、第２の被写体抽出計算部８により求められた再抽出
画像Ｐ４とを置換することによって、被写体抽出画像Ｐ
５を再構成する画像再構成部である。なお、第２の被写
体抽出計算部８の被写体抽出計算は、上記第１の被写体
抽出計算部３と同じ被写体抽出計算が第２の計算パラメ
ータを使用して行われる。
誤輪郭抽出部６によって抽出された誤輪郭を含む所定範
囲の矩形領域を再計算領域として決定する再計算領域決
定部、８は入力される中心画像Ｐ１、参照画像Ｐ２−
１、２に対して、第１の計算パラメータとは異なる所定
の第２の計算パラメータを用いて再計算領域決定部７に
より決定された再計算領域の被写体抽出計算を行うこと
によって、該再計算領域の被写体抽出画像である再抽出
画像Ｐ４を求める第２の被写体抽出計算部、９は第１の
被写体抽出計算部３により求められた被写体抽出画像Ｐ
３の画像領域の内で再計算領域に該当する領域の画像
と、第２の被写体抽出計算部８により求められた再抽出
画像Ｐ４とを置換することによって、被写体抽出画像Ｐ
５を再構成する画像再構成部である。なお、第２の被写
体抽出計算部８の被写体抽出計算は、上記第１の被写体
抽出計算部３と同じ被写体抽出計算が第２の計算パラメ
ータを使用して行われる。
【００２９】次に、図４〜図８は、上述した図１の被写
体抽出装置１０１の動作を説明するための図の一例であ
る。これらの図を参照して、被写体抽出装置１０１の動
作について説明する。初めに、図４は中心カメラ１によ
って撮影される被写体の輪郭Ｗ１を示しており、この完
全円形の輪郭Ｗ１及び該輪郭Ｗ１の内部が被写体であ
る。先ず、該被写体が中心カメラ１及び参照カメラ２−
１、２により撮影された中心画像Ｐ１、参照画像Ｐ２−
１、２が、被写体抽出装置１０１に入力されると、第１
の被写体抽出計算部３は第１の計算パラメータを用いて
被写体抽出計算を行い、図５に示す被写体抽出画像Ｐ３
が求められる。但し、図５において、点Ａ１〜点Ａ２、
点Ａ２〜点Ａ３、点Ａ３〜点Ａ４及び点Ａ４〜点Ａ１の
実線部分及び該実線で囲まれた内部が被写体抽出画像Ｐ
３である。
体抽出装置１０１の動作を説明するための図の一例であ
る。これらの図を参照して、被写体抽出装置１０１の動
作について説明する。初めに、図４は中心カメラ１によ
って撮影される被写体の輪郭Ｗ１を示しており、この完
全円形の輪郭Ｗ１及び該輪郭Ｗ１の内部が被写体であ
る。先ず、該被写体が中心カメラ１及び参照カメラ２−
１、２により撮影された中心画像Ｐ１、参照画像Ｐ２−
１、２が、被写体抽出装置１０１に入力されると、第１
の被写体抽出計算部３は第１の計算パラメータを用いて
被写体抽出計算を行い、図５に示す被写体抽出画像Ｐ３
が求められる。但し、図５において、点Ａ１〜点Ａ２、
点Ａ２〜点Ａ３、点Ａ３〜点Ａ４及び点Ａ４〜点Ａ１の
実線部分及び該実線で囲まれた内部が被写体抽出画像Ｐ
３である。
【００３０】次いで、輪郭抽出部４は図５の被写体抽出
画像Ｐ３から、完全円形の一部である点Ａ１〜点Ａ４間
の輪郭Ｗ２と、点Ａ１〜点Ａ２間の直線である輪郭Ｗ３
と、点Ａ２〜点Ａ３間の直線である輪郭Ｗ４と、点Ａ３
〜点Ａ４間の直線である輪郭Ｗ５と、を被写体の輪郭と
して抽出する。但し、輪郭Ｗ２は輪郭Ｗ１の一部であ
り、輪郭Ｗ３〜Ｗ５は輪郭Ｗ１には含まれない。また、
エッジ画素計算部５は入力される中心画像Ｐ１から被写
体のエッジ部分として、図４に示す輪郭Ｗ１の画素を抽
出する。
画像Ｐ３から、完全円形の一部である点Ａ１〜点Ａ４間
の輪郭Ｗ２と、点Ａ１〜点Ａ２間の直線である輪郭Ｗ３
と、点Ａ２〜点Ａ３間の直線である輪郭Ｗ４と、点Ａ３
〜点Ａ４間の直線である輪郭Ｗ５と、を被写体の輪郭と
して抽出する。但し、輪郭Ｗ２は輪郭Ｗ１の一部であ
り、輪郭Ｗ３〜Ｗ５は輪郭Ｗ１には含まれない。また、
エッジ画素計算部５は入力される中心画像Ｐ１から被写
体のエッジ部分として、図４に示す輪郭Ｗ１の画素を抽
出する。
【００３１】次いで、第１の誤輪郭抽出部６は輪郭抽出
部４によって抽出された輪郭Ｗ２〜Ｗ５の内、エッジ画
素計算部５により求められたエッジ部分の輪郭Ｗ１の画
素を含まない輪郭Ｗ３〜Ｗ５の内、所定の閾値を超える
長さの直線である輪郭Ｗ３、Ｗ５を誤輪郭として抽出す
る。但し、この所定の閾値とは、例えば８画素である。
なお、誤輪郭が抽出されない場合は処理を終了し、画像
再構成部９によって被写体抽出画像Ｐ３が被写体抽出画
像Ｐ５とされる。
部４によって抽出された輪郭Ｗ２〜Ｗ５の内、エッジ画
素計算部５により求められたエッジ部分の輪郭Ｗ１の画
素を含まない輪郭Ｗ３〜Ｗ５の内、所定の閾値を超える
長さの直線である輪郭Ｗ３、Ｗ５を誤輪郭として抽出す
る。但し、この所定の閾値とは、例えば８画素である。
なお、誤輪郭が抽出されない場合は処理を終了し、画像
再構成部９によって被写体抽出画像Ｐ３が被写体抽出画
像Ｐ５とされる。
【００３２】次いで、再計算領域決定部７は第１の誤輪
郭抽出部６により誤輪郭として抽出された輪郭Ｗ３を含
む図６に示す所定範囲の矩形領域Ｓ１を再計算領域の一
つとして決定し、また輪郭Ｗ５を含む図６に示す所定範
囲の矩形領域Ｓ２を再計算領域の一つとして決定する。
但し、この決定される矩形領域の所定範囲とは、例え
ば、水平方向の直線については該直線を囲む上下左右に
対して各々２０画素の距離だけ離れた範囲であり、一
方、垂直方向の直線については該直線を囲む上下に対し
て各々２０画素、左右に対しては各々４０画素の距離だ
け離れた範囲である。次いで、再計算領域決定部７は重
なり合う矩形領域Ｓ１、Ｓ２の各再計算領域に変えて、
該重なり合う全ての再計算領域を包含する矩形領域であ
って最小面積の図７に示す矩形領域Ｓ３を再計算領域と
して再決定する。
郭抽出部６により誤輪郭として抽出された輪郭Ｗ３を含
む図６に示す所定範囲の矩形領域Ｓ１を再計算領域の一
つとして決定し、また輪郭Ｗ５を含む図６に示す所定範
囲の矩形領域Ｓ２を再計算領域の一つとして決定する。
但し、この決定される矩形領域の所定範囲とは、例え
ば、水平方向の直線については該直線を囲む上下左右に
対して各々２０画素の距離だけ離れた範囲であり、一
方、垂直方向の直線については該直線を囲む上下に対し
て各々２０画素、左右に対しては各々４０画素の距離だ
け離れた範囲である。次いで、再計算領域決定部７は重
なり合う矩形領域Ｓ１、Ｓ２の各再計算領域に変えて、
該重なり合う全ての再計算領域を包含する矩形領域であ
って最小面積の図７に示す矩形領域Ｓ３を再計算領域と
して再決定する。
【００３３】次いで、第２の被写体抽出計算部８は入力
される中心画像Ｐ１、参照画像Ｐ２−１、２に対して、
所定の第２の計算パラメータを用いて再計算領域決定部
７により決定された再計算領域である矩形領域Ｓ３の被
写体抽出計算を行い、図８に示す輪郭Ｗ６及び該輪郭に
囲まれた斜線部分を再抽出画像Ｐ４として求める。次い
で、画像再構成部９は、図５の被写体抽出画像Ｐ３の画
像領域の内で再計算領域に該当する領域の画像すなわち
図７の矩形領域Ｓ３の画像と、図８の矩形領域Ｓ３の画
像とを置換する。この画像置換によって、図７の斜線部
分の画像と図８の斜線部分とが合成され、図４の輪郭Ｗ
１を持った被写体抽出画像Ｐ５が再構成される。
される中心画像Ｐ１、参照画像Ｐ２−１、２に対して、
所定の第２の計算パラメータを用いて再計算領域決定部
７により決定された再計算領域である矩形領域Ｓ３の被
写体抽出計算を行い、図８に示す輪郭Ｗ６及び該輪郭に
囲まれた斜線部分を再抽出画像Ｐ４として求める。次い
で、画像再構成部９は、図５の被写体抽出画像Ｐ３の画
像領域の内で再計算領域に該当する領域の画像すなわち
図７の矩形領域Ｓ３の画像と、図８の矩形領域Ｓ３の画
像とを置換する。この画像置換によって、図７の斜線部
分の画像と図８の斜線部分とが合成され、図４の輪郭Ｗ
１を持った被写体抽出画像Ｐ５が再構成される。
【００３４】次に、図２は本発明の第２の実施形態によ
る被写体抽出装置１０２の構成を示すブロック図であ
る。この図において、上述した図１の被写体抽出装置１
０１と異なる構成は誤輪郭抽出処理部１１２の第２の誤
輪郭抽出部１１だけである。この第２の誤輪郭抽出部１
１は輪郭抽出部４によって抽出された輪郭の内、エッジ
画素計算部５により求められたエッジ部分の画素を横切
る輪郭部分であって、且つ所定の閾値を超える長さの直
線部分を誤輪郭として抽出する。
る被写体抽出装置１０２の構成を示すブロック図であ
る。この図において、上述した図１の被写体抽出装置１
０１と異なる構成は誤輪郭抽出処理部１１２の第２の誤
輪郭抽出部１１だけである。この第２の誤輪郭抽出部１
１は輪郭抽出部４によって抽出された輪郭の内、エッジ
画素計算部５により求められたエッジ部分の画素を横切
る輪郭部分であって、且つ所定の閾値を超える長さの直
線部分を誤輪郭として抽出する。
【００３５】図９〜図１４は上述した被写体抽出装置１
０２の動作を説明するための図の一例であり、これらの
図を参照して、以下、被写体抽出装置１０２の動作につ
いて説明する。初めに、図９は中心カメラ１によって撮
影される被写体の輪郭Ｗ１１を示しており、この完全円
形の輪郭Ｗ１１及び該輪郭Ｗ１１の内部が被写体であ
る。先ず、該被写体が中心カメラ１及び参照カメラ２−
１、２により撮影された中心画像Ｐ１、参照画像Ｐ２−
１、２が、被写体抽出装置１０２に入力され、第１の被
写体抽出計算部３によって第１の計算パラメータが用い
られて、図１０に示す被写体抽出画像Ｐ３が求められ
る。但し、図１０において、点Ｂ１〜点Ｂ２、点Ｂ２〜
点Ｂ３及び点Ｂ３〜点Ｂ１の実線部分及び該実線で囲ま
れた内部が被写体抽出画像Ｐ３である。
０２の動作を説明するための図の一例であり、これらの
図を参照して、以下、被写体抽出装置１０２の動作につ
いて説明する。初めに、図９は中心カメラ１によって撮
影される被写体の輪郭Ｗ１１を示しており、この完全円
形の輪郭Ｗ１１及び該輪郭Ｗ１１の内部が被写体であ
る。先ず、該被写体が中心カメラ１及び参照カメラ２−
１、２により撮影された中心画像Ｐ１、参照画像Ｐ２−
１、２が、被写体抽出装置１０２に入力され、第１の被
写体抽出計算部３によって第１の計算パラメータが用い
られて、図１０に示す被写体抽出画像Ｐ３が求められ
る。但し、図１０において、点Ｂ１〜点Ｂ２、点Ｂ２〜
点Ｂ３及び点Ｂ３〜点Ｂ１の実線部分及び該実線で囲ま
れた内部が被写体抽出画像Ｐ３である。
【００３６】次いで、輪郭抽出部４は図１０の被写体抽
出画像Ｐ３から、完全円形の一部である点Ｂ１〜点Ｂ３
間の輪郭Ｗ１２と、点Ｂ１〜点Ｂ２間の直線である輪郭
Ｗ１３と、点Ｂ２〜点Ｂ３間の直線である輪郭Ｗ１４
と、を被写体の輪郭として抽出する。但し、輪郭Ｗ１２
は輪郭Ｗ１１の一部であり、輪郭Ｗ１３、Ｗ１４は輪郭
Ｗ１１には含まれない。また、エッジ画素計算部５は入
力される中心画像Ｐ１から被写体のエッジ部分として、
図１１に示すエッジ波形Ｗ１５、Ｗ１６の画素を抽出す
る。但し、エッジ波形Ｗ１５は輪郭Ｗ１１に等しい。
出画像Ｐ３から、完全円形の一部である点Ｂ１〜点Ｂ３
間の輪郭Ｗ１２と、点Ｂ１〜点Ｂ２間の直線である輪郭
Ｗ１３と、点Ｂ２〜点Ｂ３間の直線である輪郭Ｗ１４
と、を被写体の輪郭として抽出する。但し、輪郭Ｗ１２
は輪郭Ｗ１１の一部であり、輪郭Ｗ１３、Ｗ１４は輪郭
Ｗ１１には含まれない。また、エッジ画素計算部５は入
力される中心画像Ｐ１から被写体のエッジ部分として、
図１１に示すエッジ波形Ｗ１５、Ｗ１６の画素を抽出す
る。但し、エッジ波形Ｗ１５は輪郭Ｗ１１に等しい。
【００３７】次いで、第２の誤輪郭抽出部１１は輪郭抽
出部４によって抽出された輪郭Ｗ１２〜Ｗ１４の内、エ
ッジ画素計算部５により求められたエッジ波形Ｗ１６
（図１０にて点線で示す）の画素を横切る輪郭Ｗ１３、
Ｗ１４の内、所定の閾値を超える長さの直線である輪郭
Ｗ１３、Ｗ１４を共に誤輪郭として抽出する。なお、誤
輪郭が抽出されない場合は処理を終了し、画像再構成部
９によって被写体抽出画像Ｐ３が被写体抽出画像Ｐ５と
される。次いで、再計算領域決定部７は、上述した第１
の実施形態と同様に、第１の誤輪郭抽出部６により誤輪
郭として抽出された輪郭Ｗ１３を含む図１２に示す所定
範囲の矩形領域Ｓ１１と、輪郭Ｗ１４を含む所定範囲の
矩形領域Ｓ１２とを包含する矩形領域であって、最小面
積の図１３に示す矩形領域Ｓ１３を再計算領域として決
定する。
出部４によって抽出された輪郭Ｗ１２〜Ｗ１４の内、エ
ッジ画素計算部５により求められたエッジ波形Ｗ１６
（図１０にて点線で示す）の画素を横切る輪郭Ｗ１３、
Ｗ１４の内、所定の閾値を超える長さの直線である輪郭
Ｗ１３、Ｗ１４を共に誤輪郭として抽出する。なお、誤
輪郭が抽出されない場合は処理を終了し、画像再構成部
９によって被写体抽出画像Ｐ３が被写体抽出画像Ｐ５と
される。次いで、再計算領域決定部７は、上述した第１
の実施形態と同様に、第１の誤輪郭抽出部６により誤輪
郭として抽出された輪郭Ｗ１３を含む図１２に示す所定
範囲の矩形領域Ｓ１１と、輪郭Ｗ１４を含む所定範囲の
矩形領域Ｓ１２とを包含する矩形領域であって、最小面
積の図１３に示す矩形領域Ｓ１３を再計算領域として決
定する。
【００３８】次いで、第２の被写体抽出計算部８は入力
される中心画像Ｐ１、参照画像Ｐ２−１、２に対して、
所定の第２の計算パラメータを用いて矩形領域Ｓ１３の
被写体抽出計算を行い、図１４に示す輪郭Ｗ１７及び該
輪郭に囲まれた斜線部分を再抽出画像Ｐ４として求め
る。次いで、画像再構成部９は、上述した第１の実施形
態と同様に、図１３の矩形領域Ｓ１３の画像と、図１４
の矩形領域Ｓ１３の画像とを置換することによって、図
１３の斜線部分の画像と図１４の斜線部分とを合成し、
図９の輪郭Ｗ１１を持った被写体抽出画像Ｐ５を再構成
する。
される中心画像Ｐ１、参照画像Ｐ２−１、２に対して、
所定の第２の計算パラメータを用いて矩形領域Ｓ１３の
被写体抽出計算を行い、図１４に示す輪郭Ｗ１７及び該
輪郭に囲まれた斜線部分を再抽出画像Ｐ４として求め
る。次いで、画像再構成部９は、上述した第１の実施形
態と同様に、図１３の矩形領域Ｓ１３の画像と、図１４
の矩形領域Ｓ１３の画像とを置換することによって、図
１３の斜線部分の画像と図１４の斜線部分とを合成し、
図９の輪郭Ｗ１１を持った被写体抽出画像Ｐ５を再構成
する。
【００３９】次に、図３は本発明の第３の実施形態によ
る被写体抽出装置１０３の構成を示すブロック図であ
る。この図において、上述した実施形態と異なる構成
は、誤輪郭抽出処理部１１３が第１の実施形態の第１の
誤輪郭抽出部６と第２の実施形態の第２の誤輪郭抽出部
１１とを有し、再計算領域決定部１２が第１、第２の誤
輪郭抽出部６、１１によって抽出された誤輪郭に対し
て、該誤輪郭を含む所定範囲の矩形領域を再計算領域と
して決定することである。したがって、被写体抽出装置
１０３によって誤輪郭として抽出されて再計算領域とな
る領域は、輪郭抽出部４によって抽出された輪郭の内、
エッジ画素計算部５によって求められたエッジ部分の画
素を含まない輪郭部分であって且つ所定の第１の閾値を
超える長さの直線部分を含む所定範囲の矩形領域、該エ
ッジ部分の画素を横切る輪郭部分であって且つ所定の第
２の閾値を超える長さの直線部分を含む所定範囲の矩形
領域、または重なり合う全ての再計算領域を包含する矩
形領域であって最小面積の矩形領域の内、いずれかの矩
形領域あるいは複数の矩形領域である。なお、他のブロ
ックの構成及びその動作は上述した実施形態と同様であ
る。
る被写体抽出装置１０３の構成を示すブロック図であ
る。この図において、上述した実施形態と異なる構成
は、誤輪郭抽出処理部１１３が第１の実施形態の第１の
誤輪郭抽出部６と第２の実施形態の第２の誤輪郭抽出部
１１とを有し、再計算領域決定部１２が第１、第２の誤
輪郭抽出部６、１１によって抽出された誤輪郭に対し
て、該誤輪郭を含む所定範囲の矩形領域を再計算領域と
して決定することである。したがって、被写体抽出装置
１０３によって誤輪郭として抽出されて再計算領域とな
る領域は、輪郭抽出部４によって抽出された輪郭の内、
エッジ画素計算部５によって求められたエッジ部分の画
素を含まない輪郭部分であって且つ所定の第１の閾値を
超える長さの直線部分を含む所定範囲の矩形領域、該エ
ッジ部分の画素を横切る輪郭部分であって且つ所定の第
２の閾値を超える長さの直線部分を含む所定範囲の矩形
領域、または重なり合う全ての再計算領域を包含する矩
形領域であって最小面積の矩形領域の内、いずれかの矩
形領域あるいは複数の矩形領域である。なお、他のブロ
ックの構成及びその動作は上述した実施形態と同様であ
る。
【００４０】なお、上述した実施形態において、第１、
２の誤輪郭抽出部６、１１が中心画像Ｐ１の走査方向に
沿う直線部分を誤輪郭として抽出するようにすれば、誤
輪郭抽出に掛かる計算量を低減可能である。なお、上述
した実施形態において、再計算領域決定部７、１２は重
なり合う全ての再計算領域を包含する矩形領域であっ
て、最小面積の矩形領域を再計算領域として再決定する
ので、冗長した部分が複数回計算されることを防ぎ、第
２の被写体抽出計算部８の計算量を低減することができ
る。なお、上述した実施形態において、再計算領域決定
部７、１２は再計算領域を矩形領域として決定したが、
再計算領域の形状は矩形に限定されるものではない。
２の誤輪郭抽出部６、１１が中心画像Ｐ１の走査方向に
沿う直線部分を誤輪郭として抽出するようにすれば、誤
輪郭抽出に掛かる計算量を低減可能である。なお、上述
した実施形態において、再計算領域決定部７、１２は重
なり合う全ての再計算領域を包含する矩形領域であっ
て、最小面積の矩形領域を再計算領域として再決定する
ので、冗長した部分が複数回計算されることを防ぎ、第
２の被写体抽出計算部８の計算量を低減することができ
る。なお、上述した実施形態において、再計算領域決定
部７、１２は再計算領域を矩形領域として決定したが、
再計算領域の形状は矩形に限定されるものではない。
【００４１】なお、図１、２、３に示す各処理を実現す
るためのプログラムをコンピュータ読み取り可能な記録
媒体に記録して、この記録媒体に記録されたプログラム
をコンピュータシステムに読み込ませ、実行することに
より被写体抽出処理を行ってもよい。なお、ここでいう
「コンピュータシステム」とは、ＯＳや周辺機器等のハ
ードウェアを含むものとする。また、「コンピュータシ
ステム」は、ＷＷＷシステムを利用している場合であれ
ば、ホームページ提供環境（あるいは表示環境）も含む
ものとする。また、「コンピュータ読み取り可能な記録
媒体」とは、フロッピーディスク、光磁気ディスク、Ｒ
ＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステ
ムに内蔵されるハードディスク等の記憶装置のことをい
う。
るためのプログラムをコンピュータ読み取り可能な記録
媒体に記録して、この記録媒体に記録されたプログラム
をコンピュータシステムに読み込ませ、実行することに
より被写体抽出処理を行ってもよい。なお、ここでいう
「コンピュータシステム」とは、ＯＳや周辺機器等のハ
ードウェアを含むものとする。また、「コンピュータシ
ステム」は、ＷＷＷシステムを利用している場合であれ
ば、ホームページ提供環境（あるいは表示環境）も含む
ものとする。また、「コンピュータ読み取り可能な記録
媒体」とは、フロッピーディスク、光磁気ディスク、Ｒ
ＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステ
ムに内蔵されるハードディスク等の記憶装置のことをい
う。
【００４２】また上記プログラムは、前述した機能の一
部を実現するためのものであっても良く、さらに前述し
た機能をコンピュータシステムにすでに記録されている
プログラムとの組み合わせで実現できるもの、いわゆる
差分ファイル（差分プログラム）であっても良い。
部を実現するためのものであっても良く、さらに前述し
た機能をコンピュータシステムにすでに記録されている
プログラムとの組み合わせで実現できるもの、いわゆる
差分ファイル（差分プログラム）であっても良い。
【００４３】なお、上述した実施形態において、第２の
被写体抽出計算部８が被写体抽出計算に用いる第２の計
算パラメータを第１の被写体抽出計算部３が用いる第１
の計算パラメータに比して、より詳細な被写体抽出計算
が成される計算パラメータとすることによって、誤輪郭
として疑われた部分に関して詳細な計算が成されて第１
の被写体抽出計算部３で発生した誤輪郭を修正すること
ができる。
被写体抽出計算部８が被写体抽出計算に用いる第２の計
算パラメータを第１の被写体抽出計算部３が用いる第１
の計算パラメータに比して、より詳細な被写体抽出計算
が成される計算パラメータとすることによって、誤輪郭
として疑われた部分に関して詳細な計算が成されて第１
の被写体抽出計算部３で発生した誤輪郭を修正すること
ができる。
【００４４】さらに、従来の被写体抽出装置において、
該詳細な被写体抽出計算が成される計算パラメータを用
いた場合に比して、詳細な計算が成されるのは誤輪郭と
して疑われた部分に限られるので、被写体抽出の全体計
算量を低減することが可能である。その結果、従来のよ
うに大型コンピュータではなく、パーソナルコンピュー
タ等の小型コンピュータによって、上述した本発明の実
施形態による被写体抽出装置を実現することができる。
該詳細な被写体抽出計算が成される計算パラメータを用
いた場合に比して、詳細な計算が成されるのは誤輪郭と
して疑われた部分に限られるので、被写体抽出の全体計
算量を低減することが可能である。その結果、従来のよ
うに大型コンピュータではなく、パーソナルコンピュー
タ等の小型コンピュータによって、上述した本発明の実
施形態による被写体抽出装置を実現することができる。
【００４５】
【発明の効果】以上説明したように、本発明によれば、
従来に比してより被写体に合致した被写体抽出画像が得
られ、且つ被写体抽出画像を求める計算量を低減するこ
とができる。
従来に比してより被写体に合致した被写体抽出画像が得
られ、且つ被写体抽出画像を求める計算量を低減するこ
とができる。
【００４６】
【図１】 本発明の第１の実施形態による被写体抽出装
置１０１の構成を示すブロック図である。
置１０１の構成を示すブロック図である。
【図２】 本発明の第２の実施形態による被写体抽出装
置１０２の構成を示すブロック図である。
置１０２の構成を示すブロック図である。
【図３】 本発明の第３の実施形態による被写体抽出装
置１０３の構成を示すブロック図である。
置１０３の構成を示すブロック図である。
【図４】 図１に示す被写体抽出装置１０１の動作を説
明するための第１の図である。
明するための第１の図である。
【図５】 図１に示す被写体抽出装置１０１の動作を説
明するための第２の図である。
明するための第２の図である。
【図６】 図１に示す被写体抽出装置１０１の動作を説
明するための第３の図である。
明するための第３の図である。
【図７】 図１に示す被写体抽出装置１０１の動作を説
明するための第４の図である。
明するための第４の図である。
【図８】 図１に示す被写体抽出装置１０１の動作を説
明するための第５の図である。
明するための第５の図である。
【図９】 図２に示す被写体抽出装置１０２の動作を説
明するための第１の図である。
明するための第１の図である。
【図１０】 図２に示す被写体抽出装置１０２の動作を
説明するための第２の図である。
説明するための第２の図である。
【図１１】 図２に示す被写体抽出装置１０２の動作を
説明するための第３の図である。
説明するための第３の図である。
【図１２】 図２に示す被写体抽出装置１０２の動作を
説明するための第４の図である。
説明するための第４の図である。
【図１３】 図２に示す被写体抽出装置１０２の動作を
説明するための第５の図である。
説明するための第５の図である。
【図１４】 図２に示す被写体抽出装置１０２の動作を
説明するための第６の図である。
説明するための第６の図である。
【図１５】 従来の被写体抽出装置の構成を示すブロッ
ク図である。
ク図である。
１ 中心カメラ
２−１、２ 参照カメラ
３ 第１の被写体抽出計算部
４ 輪郭抽出部
５ エッジ画素計算部
６ 第１の誤輪郭抽出部
７ 再計算領域決定部
８ 第２の被写体抽出計算部
９ 画像再構成部
１０１ 被写体抽出装置
１１１ 誤輪郭抽出処理部
フロントページの続き
(56)参考文献 特開 平10−23311（ＪＰ，Ａ)
特開2000−28333（ＪＰ，Ａ)
甲藤二郎，太田睦，多眼画像を用いた
オブジェクト抽出に関する一検討，電子
情報通信学会大会講演論文集，日本，電
子情報通信学会，1996年 ３月，Ｖｏ
ｌ．1996，Ｎｏ．Ｓｏｇｏ Ｐｔ７,
334
(58)調査した分野(Int.Cl.7，ＤＢ名)
G06T 1/00 315
G06T 7/00
G01B 11/24
ＪＩＣＳＴファイル（ＪＯＩＳ)
Claims (5)
- 【請求項１】 同一の被写体についての視差を持った複
数の撮像画像に対して、所定の計算パラメータを用い
て、被写体を抽出するための被写体抽出計算を行うこと
により被写体抽出画像を求める被写体抽出計算手段であ
って、前記被写体抽出画像を構成する際に該画像の一部
が欠落した場合、上下方向にみて十分近い範囲内に有効
セグメントが有れば該欠落セグメントを水平、垂直方向
の画素によって補間する被写体抽出計算手段と、前記被写体抽出計算手段によって求められた被写体抽出
画像から該輪郭を抽出する輪郭抽出手段と、 前記複数の撮像画像の内、所定の撮像画像から被写体の
エッジ部分を求めるエッジ画素計算手段と、 前記輪郭抽出手段によって抽出された輪郭の内、前記エ
ッジ画素計算手段によって求められたエッジ部分を含ま
ない輪郭部分であって、且つ所定の閾値を超える長さの
直線部分を誤輪郭として抽出する誤輪郭抽出手段と、 を具備することを特徴とする被写体抽出装置。 - 【請求項２】 同一の被写体についての視差を持った複
数の撮像画像に対して、所定の計算パラメータを用い
て、被写体を抽出するための被写体抽出計算を行うこと
により被写体抽出画像を求める被写体抽出計算手段であ
って、前記被写体抽出画像を構成する際に該画像の一部
が欠落した場合、上下方向にみて十分近い範囲内に有効
セグメントが有れば該欠落セグメントを水平、垂直方向
の画素によって補間する被写体抽出計算手段と、 前記被写体抽出計算手段によって求められた被写体抽出
画像から該輪郭を抽出する輪郭抽出手段と、 前記複数の撮像画像の内、所定の撮像画像から被写体の
エッジ部分を求めるエッジ画素計算手段と、 前記輪郭抽出手段によって抽出された輪郭の内、前記エ
ッジ画素計算手段によって求められたエッジ部分を横切
る輪郭部分であって、且つ所定の閾値を超える長さの直
線部分を誤輪郭として抽出する誤輪郭抽出手段と、 を具備することを特徴とする被写体抽出装置。 - 【請求項３】 同一の被写体についての視差を持った複
数の撮像画像に対して、所定の計算パラメータを用い
て、被写体を抽出するための被写体抽出計算を行うこと
により被写体抽出画像を求める被写体抽出計算手段であ
って、前記被写体抽出画像を構成する際に該画像の一部
が欠落した場合、上下方向にみて十分近い範囲内に有効
セグメントが有れば該欠落セグメントを水平、垂直方向
の画素によって補間する被写体抽出計算手段と、 前記被写体抽出計算手段によって求められた被写体抽出
画像から該輪郭を抽出する輪郭抽出手段と、 前記複数の撮像画像の内、所定の撮像画像から被写体の
エッジ部分を求めるエッジ画素計算手段と、 前記輪郭抽出手段によって抽出された輪郭の内、前記エ
ッジ画素計算手段によって求められたエッジ部分を含ま
ない輪郭部分であって且つ所定の第１の閾値を超える長
さの直線部分と、前記エッジ画素計算手段によって求め
られたエッジ部分を横切る輪郭部分であって且つ所定の
第２の閾値を超える長さの直線部分と、を誤輪郭として
抽出する誤輪郭抽出手段と、 を具備することを特徴とする被写体抽出装置。 - 【請求項４】 同一の被写体についての視差を持った複
数の撮像画像に対して、所定の計算パラメータを用い
て、被写体を抽出するための被写体抽出計算を行うこと
により被写体抽出画像を求める過程であって、前記被写
体抽出画像を構成する際に該画像の一部が欠落した場
合、上下方向にみて十分近い範囲内に有効セグメントが
有れば該欠落セグメントを水平、垂直方向の画素によっ
て補間する第１の過程と、 前記第１の過程によって求められた被写体抽出画像から
該輪郭を抽出する第２の過程と、前記複数の撮像画像の内、所定の撮像画像から被写体の
エッジ部分を求め、前記第２の 過程によって抽出された
輪郭の内、該求められたエッジ部分を含まない輪郭部分
であって且つ所定の第１の閾値を超える長さの直線部
分、または該求められたエッジ部分を横切る輪郭部分で
あって且つ所定の第２の閾値を超える長さの直線部分の
内、いずれか或いは両方の直線部分を誤輪郭として抽出
する 第３の過程と、 前記所定の撮像画像の画像領域の内、前記第３の過程に
よって抽出された誤輪郭を含む部分領域を再計算領域と
して決定する第４の過程と、 前記複数の撮像画像に対して、前記第１の計算パラメー
タとは異なる所定の第２の計算パラメータを用いて、前
記再計算領域の誤輪郭を除去するための被写体抽出計算
を行うことにより、該再計算領域の被写体抽出画像であ
る再抽出画像を求める第５の過程と、前記第１の過程により求められた被写体抽出画像の画像
領域の内で前記再計算領域に該当する領域の画像と、前
記第５の過程により求められた再抽出画像とを置換する
ことによって、 被写体抽出画像を再構成する第６の過程
と、 を具備することを特徴とする被写体抽出方法。 - 【請求項５】 同一の被写体についての視差を持った複
数の撮像画像に対して、所定の第１の計算パラメータを
用いて、被写体を抽出するための被写体抽出計算を行う
ことにより被写体抽出画像を求める処理であって、前記
被写体抽出画像を構成する際に該画像の一部が欠落した
場合、上下方向にみて十分近い範囲内に有効セグメント
が有れば該欠落セグメントを水平、垂直方向の画素によ
って補間する第１の処理と、 前記第１の処理によって求められた被写体抽出画像から
該輪郭を抽出する第２の処理と、前記複数の撮像画像の内、所定の撮像画像から被写体の
エッジ部分を求める第３の処理と、 前記第２の処理によって抽出された輪郭の内、該求めら
れたエッジ部分を含まない輪郭部分であって且つ所定の
第１の閾値を超える長さの直線部分、または該求められ
たエッジ部分を横切る輪郭部分であって且つ所定の第２
の閾値を超える長さの直線部分の内、いずれか或いは両
方の直線部分を誤輪郭として抽出する第４の処理と、 をコンピュータに行わせることを特徴とする被写体抽出
プログラムを記録した記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000041227A JP3518465B2 (ja) | 2000-02-18 | 2000-02-18 | 被写体抽出装置、被写体抽出方法、及び被写体抽出プログラムを記録した記録媒体 |
| US09/781,280 US6999618B2 (en) | 2000-02-18 | 2001-02-13 | Object extraction device, object extraction method, and recording media for storing an object extraction program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000041227A JP3518465B2 (ja) | 2000-02-18 | 2000-02-18 | 被写体抽出装置、被写体抽出方法、及び被写体抽出プログラムを記録した記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001229386A JP2001229386A (ja) | 2001-08-24 |
| JP3518465B2 true JP3518465B2 (ja) | 2004-04-12 |
Family
ID=18564493
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000041227A Expired - Fee Related JP3518465B2 (ja) | 2000-02-18 | 2000-02-18 | 被写体抽出装置、被写体抽出方法、及び被写体抽出プログラムを記録した記録媒体 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6999618B2 (ja) |
| JP (1) | JP3518465B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7480252B2 (en) | 2002-10-04 | 2009-01-20 | Koniklijke Philips Electronics N.V. | Method and system for improving transmission efficiency using multiple-description layered encoding |
| GB201102794D0 (en) * | 2011-02-17 | 2011-03-30 | Metail Ltd | Online retail system |
| US9741125B2 (en) * | 2015-10-28 | 2017-08-22 | Intel Corporation | Method and system of background-foreground segmentation for image processing |
Family Cites Families (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0766445B2 (ja) * | 1988-09-09 | 1995-07-19 | 工業技術院長 | 画像処理方法 |
| US5819016A (en) * | 1993-10-05 | 1998-10-06 | Kabushiki Kaisha Toshiba | Apparatus for modeling three dimensional information |
| US5604822A (en) * | 1993-11-12 | 1997-02-18 | Martin Marietta Corporation | Methods and apparatus for centroid based object segmentation in object recognition-type image processing system |
| JP3054681B2 (ja) * | 1995-07-19 | 2000-06-19 | 工業技術院長 | 画像処理方法 |
| US5825915A (en) * | 1995-09-12 | 1998-10-20 | Matsushita Electric Industrial Co., Ltd. | Object detecting apparatus in which the position of a planar object is estimated by using hough transform |
| US6493465B2 (en) * | 1996-02-21 | 2002-12-10 | Canon Kabushiki Kaisha | Matching point extracting method and apparatus therefor |
| JPH1023311A (ja) | 1996-07-05 | 1998-01-23 | Canon Inc | 画像情報入力方法及び装置 |
| JP3064928B2 (ja) * | 1996-09-20 | 2000-07-12 | 日本電気株式会社 | 被写体抽出方式 |
| JP2910698B2 (ja) * | 1996-10-15 | 1999-06-23 | 日本電気株式会社 | 三次元構造推定方法及び装置 |
| US6262694B1 (en) * | 1997-03-11 | 2001-07-17 | Fujitsu Limited | Image display system |
| JPH10268447A (ja) * | 1997-03-21 | 1998-10-09 | Fuji Photo Film Co Ltd | 画像処理装置及び写真焼付装置 |
| US6205242B1 (en) * | 1997-09-29 | 2001-03-20 | Kabushiki Kaisha Toshiba | Image monitor apparatus and a method |
| JP4105295B2 (ja) | 1998-07-13 | 2008-06-25 | 大日本スクリーン製造株式会社 | パターン欠陥検出方法およびパターン欠陥検出装置 |
| JP2000055658A (ja) * | 1998-08-06 | 2000-02-25 | Sony Corp | 画像処理装置および方法、並びに提供媒体 |
| US6674905B1 (en) * | 1999-01-22 | 2004-01-06 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, and storage medium |
-
2000
- 2000-02-18 JP JP2000041227A patent/JP3518465B2/ja not_active Expired - Fee Related
-
2001
- 2001-02-13 US US09/781,280 patent/US6999618B2/en not_active Expired - Fee Related
Non-Patent Citations (1)
| Title |
|---|
| 甲藤二郎，太田睦，多眼画像を用いたオブジェクト抽出に関する一検討，電子情報通信学会大会講演論文集，日本，電子情報通信学会，１９９６年 ３月，Ｖｏｌ．１９９６，Ｎｏ．Ｓｏｇｏ Ｐｔ７，３３４ |
Also Published As
| Publication number | Publication date |
|---|---|
| US20010016070A1 (en) | 2001-08-23 |
| JP2001229386A (ja) | 2001-08-24 |
| US6999618B2 (en) | 2006-02-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4658223B2 (ja) | 画像生成方法、装置、およびそのプログラム並びにプログラムを記録した記録媒体 | |
| JP2891159B2 (ja) | 多眼画像からの物体検出方式 | |
| US6714689B1 (en) | Image synthesizing method | |
| JP4578566B2 (ja) | 画像生成方法、装置、およびそのプログラム並びにプログラムを記録した記録媒体 | |
| WO2003036992A1 (en) | Method and apparatus for image matching | |
| KR100943635B1 (ko) | 디지털카메라의 이미지를 이용한 디스패리티 맵 생성 장치 및 방법 | |
| JP3518465B2 (ja) | 被写体抽出装置、被写体抽出方法、及び被写体抽出プログラムを記録した記録媒体 | |
| Cho et al. | Temporal incoherence-free video retargeting using foreground aware extrapolation | |
| JP3197801B2 (ja) | 二次元表示画像生成方法 | |
| JP2003115052A (ja) | 画像処理方法及び画像処理装置 | |
| JP2003169338A (ja) | 動きベクトル検出方法及び装置並びに方法プログラムを記録した媒体 | |
| JP2019008582A (ja) | 映像処理装置、映像処理方法および映像処理プログラム | |
| KR101920159B1 (ko) | 지원점 보간법을 이용한 스테레오 매칭 방법 및 장치 | |
| JPH09284702A (ja) | シーン変化フレーム検出方法および装置 | |
| JP6740867B2 (ja) | 画像処理方法 | |
| JP3514373B2 (ja) | ３次元情報抽出方法、装置、および３次元情報抽出プログラムを記録した記録媒体 | |
| JP2972924B2 (ja) | 物体の認識装置および方法 | |
| CN111630569B (zh) | 双目匹配的方法、视觉成像装置及具有存储功能的装置 | |
| JP4765726B2 (ja) | 画像処理装置および方法 | |
| JP3135162B2 (ja) | 距離測定装置 | |
| JP5824425B2 (ja) | 遮蔽物画素検出装置、遮蔽物画素検出方法、及びプログラム | |
| KR100576942B1 (ko) | 방향 필터링을 이용한 스테레오 영상의 정합 시스템 및 그방법 | |
| JP6150419B2 (ja) | カメラおよびプログラム | |
| JP2023013821A (ja) | 画像処理装置、画像再生装置、及びプログラム | |
| Arlicot et al. | Extraction of bone structure with a single-scan skeletonization driven by distance |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040106 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040119 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080206 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090206 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100206 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100206 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110206 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110206 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120206 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120206 Year of fee payment: 8 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120206 Year of fee payment: 8 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120206 Year of fee payment: 8 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130206 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130206 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130206 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130206 Year of fee payment: 9 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |