JP2020087005A5 - - Google Patents

Description

本発明の画像処理装置は、撮像装置が撮像することにより得られた撮像画像を取得する第１の取得手段と、前記撮像画像に対応する背景画像を取得する第２の取得手段と、前記撮像画像または前記背景画像の輝度に関する第１の値を特定する第１の特定手段と、前記撮像画像と前記背景画像との輝度差に関する第２の値を特定する第２の特定手段と、前記第２の特定手段によって特定された輝度差に関する前記第２の値と、閾値と、に基づき前記撮像画像の前景領域を示す画像を生成する生成手段と、を有し、前記閾値は、前記第２の特定手段によって特定された輝度差に関する前記第２の値および前記第１の特定手段によって特定された輝度に関する前記第１の値の両方に応じて決定されることを特徴とする。

Claims (17)

1. 撮像装置が撮像することにより得られた撮像画像を取得する第１の取得手段と、
   前記撮像画像に対応する背景画像を取得する第２の取得手段と、
   前記撮像画像または前記背景画像の輝度に関する第１の値を特定する第１の特定手段と、
   前記撮像画像と前記背景画像との輝度差に関する第２の値を特定する第２の特定手段と、
   前記第２の特定手段によって特定された輝度差に関する前記第２の値と、閾値と、に基づき前記撮像画像の前景領域を示す画像を生成する生成手段と、を有し、
   前記閾値は、前記第２の特定手段によって特定された輝度差に関する前記第２の値および前記第１の特定手段によって特定された輝度に関する前記第１の値の両方に応じて決定される
   ことを有することを特徴とする画像処理装置。
2. 前記第１の特定手段によって特定された輝度に関する前記第１の値および前記第２の特定手段によって特定された輝度差に関する前記第２の値に基づき、二次元テーブルを用いて前記閾値を決定する決定手段をさらに有する
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記第１の特定手段は、前記撮像画像または前記背景画像の画素の輝度に関する値を特定し、前記第２の特定手段は、前記撮像画像と前記背景画像との対応する画素どうしの輝度差に関する値を特定する
   ことを特徴とする請求項２に記載の画像処理装置。
4. 前記決定手段は、前記撮像画像における対象画素の前記閾値を、前記第１の特定手段によって特定された前記撮像画像または前記背景画像の画素の輝度に関する値および前記第２の特定手段によって特定された前記撮像画像と前記背景画像との対応する画素どうしの輝度差に関する値に基づいて決定し、
   前記生成手段は、前記対象画素が前記前景領域を構成する画素であるかを、前記対象画素に対応する前記撮像画像の画素と前記対象画素に対応する前記背景画像の画素との輝度差に関する値と、前記対象画素の前記閾値と、に基づいて判定し、前記判定の結果に基づき前記前景領域を示す画像を生成する
   ことを特徴とする請求項３に記載の画像処理装置。
5. 前記生成手段は、
   前記対象画素に対応する前記撮像画像の画素と前記対象画素に対応する前記背景画像の画素との輝度差に関する値が前記対象画素の前記閾値より大きい場合は、前記対象画素は前記前景領域を構成する画素として判定する
   ことを特徴とする請求項４に記載の画像処理装置。
6. 前記決定手段は、
   前記撮像画像における前記対象画素の輝度に関する値と、前記対象画素に対応する前記背景画像の画素の輝度に関する値と、のうち小さい値に基づいて前記対象画素の前記閾値を決定する
   ことを特徴とする請求項４または５に記載の画像処理装置。
7. 前記決定手段は、
   前記撮像画像における前記対象画素を含む第一の領域を構成する各画素と、前記背景画像のうち前記第一の領域に対応する第二の領域を構成する各画素と、の画素ごとの輝度差に関する値に基づいて前記対象画素の前記閾値を決定する
   ことを特徴とする請求項４から６のいずれか１項に記載の画像処理装置。
8. 前記決定手段は、
   前記撮像画像における前記第一の領域を構成する各画素と、前記背景画像における前記第二の領域を構成する各画素と、の画素ごとの輝度差に関する値のうち、最も大きい値に基づいて前記対象画素の前記閾値を決定する
   ことを特徴とする請求項７に記載の画像処理装置。
9. 前記決定手段は、
   前記撮像画像における前記第一の領域を構成する各画素と、前記背景画像における前記第二の領域を構成する各画素と、の画素ごとの輝度差に関する値の分布に基づいて前記対象画素の前記閾値を決定する
   ことを特徴とする請求項７に記載の画像処理装置。
10. 前記決定手段は、
    前記撮像画像における前記第一の領域を構成する各画素と、前記背景画像における前記第二の領域を構成する各画素と、の画素ごとの輝度差に関する値のうち、最大値、平均値、または最小値に基づいて前記対象画素の前記閾値を決定する
    ことを特徴とする請求項７に記載の画像処理装置。
11. 前記第１の特定手段によって特定された輝度に関する前記第１の値が第３の値である場合、前記閾値は、第１の閾値と決定され、
    前記第１の特定手段によって特定された輝度に関する前記第１の値が前記第３の値より大きい第４の値である場合、前記閾値は、前記第１の閾値より大きい第２の閾値に決定される
    ことを特徴とする請求項１から１０のいずれか１項に記載の画像処理装置。
12. 前記第２の特定手段によって特定された輝度差に関する前記第２の値が第５の値である場合、前記閾値は、第３の閾値と決定され、
    前記第２の特定手段によって特定された輝度差に関する前記第２の値が前記第５の値より大きい第６の値である場合、前記閾値は、前記第３の閾値より大きい第４の閾値に決定される
    ことを特徴とする請求項１から１１のいずれか１項に記載の画像処理装置。
13. 前記閾値は、前記第２の特定手段によって特定された輝度差に関する前記第２の値が大きくなるほど大きく、かつ、前記第１の特定手段によって特定された輝度に関する前記第１の値が大きいほど大きい
    ことを特徴とする請求項１から１２のいずれか１項に記載の画像処理装置。
14. 前記第２の特定手段によって特定された輝度差に関する前記第２の値および前記第１の特定手段によって特定された輝度に関する前記第１の値は、前記閾値を決定するための変数である
    ことを特徴とする請求項１から１３のいずれか１項に記載の画像処理装置。
15. 前記第１の取得手段は、複数の撮像装置により取得された複数の撮像画像を取得し、
    前記画像処理装置は、前記複数の撮像画像と、前記生成手段によって生成された前記複数の撮像画像ごとの前記前景領域を示す画像と、に基づいて仮想視点画像を生成する
    ことを特徴とする請求項１から１４のいずれか１項に記載の画像処理装置。
16. 撮像装置が撮像することにより得られた撮像画像を取得する第１の取得ステップと、
    前記撮像画像に対応する背景画像を取得する第２の取得ステップと、
    前記撮像画像または前記背景画像の輝度に関する第１の値を特定する第１の特定ステップと、
    前記撮像画像と前記背景画像との輝度差に関する第２の値を特定する第２の特定ステップと
    前記第２の特定ステップによって特定された輝度差に関する前記第２の値と、閾値と、に基づき前記撮像画像の前景領域を示す画像を生成する生成ステップと、を有し、
    前記閾値は、前記第２の特定ステップによって特定された輝度差に関する前記第２の値および前記第１の特定ステップによって特定された輝度に関する前記第１の値の両方に応じて決定される
    ことを特徴とする画像処理方法。
17. コンピュータを、請求項１から１５のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。