JP2023088061A - 三次元モデル生成装置、三次元モデル生成方法及び三次元モデル生成プログラム - Google Patents

Abstract

【課題】複数の画像に含まれる光学面を適切に処理して三次元モデルを生成する。【解決手段】三次元モデル生成装置は、複数の撮影位置から撮影した複数の画像を取得する画像取得部と、取得した複数の画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する光学面検出部と、光学面領域にマスクを配置し、マスクを配置した複数の画像に基づいて三次元モデルを生成するモデル生成部とを備える。【選択図】図１

Description

本発明は、三次元モデル生成装置、三次元モデル生成方法及び三次元モデル生成プログラムに関する。

被写体に対して撮影位置を変えながら複数の画像を撮影し、撮影した複数の画像データに基づいて三次元モデルを生成するフォトグラメトリーという技術が知られている（例えば、特許文献１参照）。

特表２００６―５２８３８１号公報

被写体の中に鏡面等の反射面や窓等の透過面等の周囲の像を映す光学面が設けられる場合、当該光学面の奥にも空間が存在するかのように三次元モデルを生成したり、光学面に対応する部分が破れたような三次元モデルを生成したりする場合がある。このように、フォトグラメトリーにおいては、画像に含まれる光学面を適切に処理して三次元モデルを生成することが求められる。

本発明は、上記に鑑みてなされたものであり、画像に含まれる光学面を適切に処理して三次元モデルを生成することが可能な三次元モデル生成装置、三次元モデル生成方法及び三次元モデル生成プログラムを提供することを目的とする。

本発明に係る三次元モデル生成装置は、複数の撮影位置から撮影した複数の画像を取得する画像取得部と、取得した複数の前記画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する光学面検出部と、前記光学面領域にマスクを配置し、前記マスクを配置した複数の前記画像に基づいて三次元モデルを生成するモデル生成部とを備える。

本発明に係る三次元モデル生成方法は、複数の撮影位置から撮影した複数の画像を取得することと、取得した複数の前記画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出することと、前記光学面領域にマスクを配置し、前記マスクを配置した複数の前記画像に基づいて三次元モデルを生成することとを含む。

本発明に係る三次元モデル生成プログラムは、複数の撮影位置から撮影した複数の画像を取得する処理と、取得した複数の前記画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する処理と、前記光学面領域にマスクを配置し、前記マスクを配置した複数の前記画像に基づいて三次元モデルを生成する処理とを含む。

本発明によれば、複数の画像に含まれる光学面を適切に処理して三次元モデルを生成することができる。

図１は、本実施形態に係る三次元モデル生成装置の一例を模式的に示す図である。 図２は、三次元モデル生成装置の一例を示す機能ブロック図である。 図３は、フォトグラメトリーの原理を適用する２つの画像の位置関係を表す説明図である。 図４は、２つの画像の位置関係を表す説明図である。 図５は、三次元空間を撮影する様子を示す図である。 図６は、三次元空間を撮影した複数の画像の一例を示す図である。 図７は、複数の画像にマスクを配置した状態の一例を示す図である。 図８は、本実施形態に係る三次元モデル生成方法の一例を示すフローチャートである。

以下、本発明に係る三次元モデル生成装置、三次元モデル生成方法及び三次元モデル生成プログラムの実施形態を図面に基づいて説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。

図１は、本実施形態に係る三次元モデル生成装置１００の一例を模式的に示す図である。図２は、三次元モデル生成装置１００の一例を示す機能ブロック図である。図１及び図２に示す三次元モデル生成装置１００は、フォトグラメトリーの原理に基づいて三次元モデルを生成する。図１及び図２に示すように、三次元モデル生成装置１００は、処理部１０と、記憶部２０とを備える。

処理部１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等の処理装置と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）又はＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等の記憶装置を有する。処理部１０は、画像取得部１１と、光学面検出部１２と、色属性検出部１３と、面積検出部１４と、モデル生成部１５とを有する。

画像取得部１１は、複数の撮影位置から撮影した複数の画像Ｉを取得する。各画像Ｉは、例えばカメラＣＲ（Ｃ１、Ｃ２等）等の撮影装置により撮影された画像である。

光学面検出部１２は、取得された複数の画像に含まれる光学面領域を検出する。本実施形態において、光学面領域は、例えば画像内において周囲の像が映る領域であり、光の反射によって視認される反射像が映る反射面領域及び透明部材を介して視認される透過視認物が映る透過面領域の少なくとも一方を含む。光学面検出部１２は、公知の手法により画像に含まれる光学面領域を検出することができる。例えば表示装置により三次元空間Ｋに向けて所定のパターンを表示して当該パターンを一方向に移動させるようにし、この状態で三次元空間を撮影する。光学面検出部１２は、撮影された映像のうちパターンの移動が反転して映し出される領域又はパターンの移動が均一ではない領域が存在するか否かを検出する。光学面検出部１２は、パターンの移動が反転して映し出される領域を検出した場合、当該領域を反射面領域とすることができる。また、光学面検出部１２は、パターンの移動が均一ではない領域を検出した場合、当該領域を透過面領域とすることができる。光学面検出部１２が光学面領域を検出する具体的な手法については、上記に限定されず、他の手法であってもよい。

本実施形態における反射面領域としては、例えば表面に鏡面処理が施された非金属部材や、金又は銅等の有彩色の金属部材等のように下地の部材の色が鏡面に映る像の色に重なって見える領域と、表面に鏡面処理が施された無彩色の金属部材のように鏡面に映る像の色がそのまま見える領域とを含む。本実施形態における透過面領域としては、例えばガラス板等の光を透過する光透過部材の表面などが挙げられる。透過面領域としては、有彩色の光透過部材及び無彩色の光透過部材等を含む。

色属性検出部１３は、光学面領域の色属性を検出する。本実施形態における色属性は、いわゆる色の三属性である色相、彩度及び明度を含む。色属性検出部１３は、例えば画像処理により、光学面領域における色属性を検出する。光学面領域の色属性を検出することにより、光学面領域の色属性の傾向を求めることができる。色属性検出部１３は、光学面領域の色属性を構成する色相、彩度及び明度について、例えば色空間における座標等の数値として検出することができる。

面積検出部１４は、光学面領域の面積を検出する。面積検出部１４は、例えば画像Ｉにおいて検出された光学面領域に対応する画素の数を光学面領域の面積として検出することができる。

モデル生成部１５は、画像取得部１１で取得された複数の画像に基づいて三次元モデルを生成する。モデル生成部１５は、例えばフォトグラメトリーの原理に基づいて三次元モデルを生成することができる。ここで、フォトグラメトリーの原理を説明する。以下、２個の画像データから三次元画像データの生成する場合について説明する。図３は、フォトグラメトリーの原理を適用する２つの画像の位置関係を表す説明図、図４は、２つの画像の位置関係を表す説明図である。

モデル生成部１５は、例えば位置データが示す位置が同じとなる２個の画像データを抽出する。なお、位置が同じとは、厳密に同じであることに限られず、所定量位置がずれたものも、位置が同じとみなしてよい。

まず、対象物に対して視野の画像用のカメラＣ１および視野の画像用のカメラＣ２（いずれも、図３参照）によって２組セット画像データを得る。次に、モデル生成部１５は、２組セットの画像データに基づいて特徴点の対応点探索を行う。モデル生成部１５は、例えば、画素毎の対応付けを行い、差が最小になる位置を探す。ここで、図３に示すように、２視点に同時に存在しているとするカメラＣ１、Ｃ２は、光軸Ｏｌ、Ｏｒが同一のＸ－Ｚ座標平面上に含まれるように、Ｙｌ＝Ｙｒの関係に配置されているものとする。モデル生成部１５により探索された対応点を用いて画素毎の角度の差に相当する視差ベクトルを計算する。

モデル生成部１５は、得られた視差ベクトルが奥行き方向のカメラＣ１、Ｃ２からの距離に相当することから、遠近法により視差の大きさに比例させて距離計算を行う。撮影者のカメラＣ１、Ｃ２がほぼ水平にしか移動しないと仮定すれば、カメラＣ１、Ｃ２をその光軸Ｏｌ、Ｏｒが同一のＸ－Ｚ座標平面上に含まれるように配置しておくことにより、対応点の探索はエピポーラ線Ｅｐｌ、Ｅｐｒである走査線上のみで行えばよいことになる。モデル生成部１５は、対象物の２個の画像データと、カメラＣ１、Ｃ２から対象物までのそれぞれの距離を用いて対象物の三次元画像データを生成する。モデル生成部１５は、生成した三次元画像データについて、例えば記憶部２０に記憶させてもよいし、不図示の出力部又は通信部から外部に出力又は送信してもよい。

一方、左画像上の点Ｑｌ（Ｘｌ、Ｙｌ）と右画像上の点Ｑｒ（Ｘｒ、Ｙｒ）とが対応する場合、点Ｑｌ（Ｘｌ、Ｙｌ）における視差ベクトルはＶｐ（Ｘｌ－Ｘｒ、Ｙｌ－Ｙｒ）である。ここで、２つの点Ｑｌ、Ｑｒは同じ走査線（エピポーラ線）上にあるので、Ｙｌ＝Ｙｒであり、視差ベクトルは、Ｖｐ（Ｘｌ－Ｘｒ、０）と表されることになる。モデル生成部１５は、このような視差ベクトルＶｐを、画像上の全ての画素点について求め、視差ベクトル群を作成することで画像の奥行き方向の情報を得る。ところで、エピポーラ線が水平ではないセットに関しては、片方のカメラ位置の高さが違っている（確率は低い）ことがある。この場合、モデル生成部１５は、大きな探索範囲を、対応点マッチングを意識することなく大きな２次元領域で対応点探索をする場合に比べ、エピポーラ線方向と、エピポーラ線に対し直交方向でその水平からのずれ具合程度の長方形内で探索することで、最低限の長方形の計算量は少なくなり合理的になる。そして、モデル生成部１５は、図４に示すように、最低限の長方形に関するエピポーラ線方向探索範囲をａ～ｂ＝ｃ～ｄとし、直交方向探索範囲をｂ～ｃ＝ｄ～ａとした場合の探索範囲を示す。この場合、エピポーラ線方向の探索幅は、ΔＥ、エピポーラ線と直交する方向Ｔの探索幅はΔＴとする。最低限の傾斜した長方形ａｂｃｄを含む傾斜しない最小の長方形ＡＢＣＤが求める領域となる。

このようにモデル生成部１５は、複数のカメラＣ１、Ｃ２の特徴点の対応点からエピポーラ拘束条件にて視差ベクトルを求め、各点の奥行き方向の情報を得て、３次元形状の表面上のテクスチャーをマッピングして、三次元画像データを生成する。これにより、計算に使用する画像データにある部分のモデルは、その前面側半球からの見る空間を再現することができる。また、三次元画像データの画像データに写っていない部分が存在する場合、周りのテクスチャーのラインやサーフェスを延長して繋がる場合は、その間を同じテクスチャーを用いて補間する。

なお、三次元画像データの生成方法は、上述したものに限定されるものではなく、他の方法を用いてもよい。

モデル生成部１５は、複数の画像Ｉに光学面領域が含まれる場合、光学面領域に対して当該光学面領域を覆うマスクを配置し、当該マスクを配置した複数の画像Ｉに基づいて三次元モデルを生成する。モデル生成部１５は、光学面領域の色に対応した色のマスクを光学面領域に配置することができる。例えば、モデル生成部１５は、色属性検出部１３により検出される光学面領域の色属性が所定の傾向にある場合、光学面領域の色属性に対応した色属性を有するマスク（以下、対応マスクと表記する）を生成して配置することができる。一方、モデル生成部１５は、色属性検出部１３により検出される光学面領域の色属性が所定の傾向にない場合、予め設定されたマスク（以下、標準マスクと表記する）を配置することができる。

モデル生成部１５は、例えば光学面領域の色相、彩度及び明度を示す各値が色空間における所定範囲内に閾値以上の割合で分布している場合、当該光学面領域の色属性が所定の傾向にあると判定することができる。本実施形態において、光学面領域の色属性が所定の傾向にある場合、光学面領域は有彩色である。光学面領域の色属性が所定の傾向にない場合、光学面領域は無彩色又は無彩色に近い状態である。

モデル生成部１５は、光学面領域の色属性に対応した対応マスクを生成する際、当該対応マスクの色属性を、例えば光学面領域の色属性を示す値の分布におけるピーク値に応じた色属性とすることができる。これにより、光学面領域の色に対応する色のマスクが光学面領域に配置されるため、観察者の違和感が低減される。この場合、モデル生成部１５は、例えば対応マスクに光沢を示す表示を付してもよい。この場合、観察者に当該対応マスクの領域が光学面領域であることを認識させることができる。

モデル生成部１５は、光学面領域の色属性が所定の傾向に無い場合、予め設定された標準マスクを配置する。この場合、標準マスクとしては、例えば無彩色の鏡の反射面を模した外観のマスク等を設定することができる。

また、モデル生成部１５は、面積検出部１４で検出された光学面領域の面積が所定値未満の場合には、光学面領域の色属性に関わらず、光学面領域に標準マスクを配置するようにしてもよい。光学面領域の面積が小さい場合には、光学面領域の色に対応した色の対応マスクを配置しなくても観察者に与える違和感は大きくならないと推定される。この場合、対応マスクの色属性等を設定する処理を省略できる。

なお、モデル生成部１５は、光学面領域の色属性に関わらず、光学面領域に常に標準マスクを配置するようにしてもよい。

記憶部２０は、各種情報を記憶する。記憶部２０は、予め設定された標準マスクについての情報を記憶する。記憶部２０は、例えばハードディスクドライブ、ソリッドステートドライブ等のストレージを有している。なお、記憶部２０として、リムーバブルディスク等の外部記憶媒体が用いられてもよい。

記憶部２０は、複数の撮影位置から撮影した複数の画像Ｉを取得する処理と、取得した複数の画像Ｉのうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する処理と、光学面領域にマスクを配置し、マスクを配置した複数の画像に基づいて三次元モデルを生成する処理とをコンピュータに実行させる三次元モデル生成プログラムを記憶する。

次に、上記のように構成された三次元モデル生成装置１００の動作を説明する。図５は、三次元空間Ｋを撮影する様子を示す図である。図６は、三次元空間Ｋを撮影した複数の画像の一例を示す図である。図７は、複数の画像にマスクを配置した状態の一例を示す図である。

まず、図５に示すように、三次元空間Ｋを異なる撮影位置から撮影する。画像取得部１１は、撮影された複数の画像を取得する。ここでは、図６に示すように２つの画像Ｉ１、Ｉ２を取得する場合を例に挙げて説明するが、画像の数は３つ以上であってもよい。三次元空間Ｋには、例えば図５に示すテレビ、電子ジャー等のような家電製品を構成する有彩色（例えば、黒色等）の樹脂部材４１、４２、裏面鏡の反射面を構成する無彩色の金属部材４３、窓を構成する無彩色かつ透明のガラス部材４４等、周囲の像が映る物体が配置されているものとする。例えば、樹脂部材４１、４２には、反射像４１ｒ、４２ｒが映っている。また、金属部材４３には、反射像４３ｒが映っている。なお反射像とは、光の反射によって視認される像である。また、ガラス部材４４には、奥側に存在する雲、建物等の透過視認物４４ｔが映っている。なお透過視認物とは、ガラス部材などの透明部材を介して視認される物体である。

この三次元空間Ｋを撮影することにより、図６に示すように、撮影された画像Ｉ１には、樹脂部材４１、４２、金属部材４３及びガラス部材４４が光学面領域５１ａ、５２ａ、５３ａ、５４ａとして映り込む。また、撮影された画像Ｉ２には、樹脂部材４１、４２、金属部材４３及びガラス部材４４が光学面領域５１ｂ、５２ｂ、５３ｂ、５４ｂとして映り込む。

光学面検出部１２は、取得した複数の画像Ｉ１、Ｉ２に光学面領域が含まれる場合、当該光学面領域を検出する。本実施形態において、光学面検出部１２は、画像Ｉ１に含まれる光学面領域５１ａ、５２ａ、５３ａ、５４ａと、画像Ｉ２に含まれる光学面領域５１ｂ、５２ｂ、５３ｂ、５４ｂとを検出することができる。

光学面領域５１ａ～５４ａ、５１ｂ～５４ｂには、それぞれ反射像５１ｒ～５３ｒ又は透過視認物５４ｔが映っている。この状態で三次元モデルを生成した場合、反射像４１ｒ～４３ｒ及び透過視認物４４ｔが実際の構造物として光学面領域の奥に存在するかのように三次元モデルが生成されたり、光学面領域に対応する部分が破れたような三次元モデルが生成されたりする場合がある。そこで、本実施形態では、以下の処理を行うことにより、光学面領域を適切に処理して三次元モデルを生成するようにする。

色属性検出部１３は、画像Ｉ１に含まれる光学面領域５１ａ、５２ａ、５３ａ、５４ａ及び画像Ｉ２に含まれる光学面領域５１ｂ、５２ｂ、５３ｂ、５４ｂの色属性を検出する。また、面積検出部１４は、画像Ｉ１に含まれる光学面領域５１ａ、５２ａ、５３ａ、５４ａ及び画像Ｉ２に含まれる光学面領域５１ｂ、５２ｂ、５３ｂ、５４ｂの面積を検出する。

モデル生成部１５は、光学面領域５１ａ、５２ａ、５３ａ、５４ａ及び光学面領域５１ｂ、５２ｂ、５３ｂ、５４ｂの面積が所定値未満か否かを判定する。本実施形態において、モデル生成部１５は、画像Ｉ１の光学面領域５１ａ、５３ａ、５４ａの面積、及び画像Ｉ２の光学面領域５１ｂ、５３ｂ、５４ｂの面積については、所定値以上であると判定する。また、モデル生成部１５は、画像Ｉ１の光学面領域５２ａの面積、及び画像Ｉ２の光学面領域５２ｂの面積については、所定値未満であると判定する。モデル生成部１５は、面積が所定値未満であると判定した画像Ｉ１の光学面領域５２ａ及び画像Ｉ２の光学面領域５２ｂに対しては、以下で判断する色属性に関わらず、図７に示すように、標準マスクＭ２を配置するようにする。

モデル生成部１５は、光学面領域５１ａ、５３ａ、５４ａ及び光学面領域５１ｂ、５３ｂ、５４ｂの色属性が所定の傾向にあるか否かを判定する。本実施形態において、モデル生成部１５は、例えば画像Ｉ１の光学面領域５１ａ及び画像Ｉ２の光学面領域５１ｂの色属性が所定の傾向にあると判定する。モデル生成部１５は、色属性が所定の傾向にあると判定した光学面領域５１ａ、５１ｂについては、図７に示すように、色属性に対応した対応マスクＭ１を配置するようにする。

また、モデル生成部１５は、例えば画像Ｉ１の光学面領域５３ａ、５４ａ及び画像Ｉ２の光学面領域５３ｂ、５４ｂの色属性が所定の傾向に無いと判定する。モデル生成部１５は、色属性が所定の傾向に無いと判定したした光学面領域５３ａ、５３ｂ、５４ａ、５４ｂについては、図７に示すように、標準マスクＭ３、Ｍ４を配置するようにする。

図８は、本実施形態に係る三次元モデル生成方法の一例を示すフローチャートである。図８に示すように、画像取得部１１は、三次元空間Ｋを異なる撮影位置から撮影した複数の画像を取得する（ステップＳ１０）。光学面検出部１２は、取得した複数の画像に含まれる光学面領域を検出する（ステップＳ２０）。色属性検出部１３は、光学面領域の色属性を検出する（ステップＳ３０）。面積検出部１４は、光学面領域の面積を検出する（ステップＳ４０）。

モデル生成部１５は、光学面領域の面積が所定値未満か否かを判定する（ステップＳ５０）。光学面領域の面積が所定値未満と判定した場合（ステップＳ５０のＹｅｓ）、モデル生成部１５は、光学面領域については標準マスクを配置するようにする（ステップＳ６０）。

モデル生成部１５は、光学面領域の面積が所定値未満ではない判定した場合（ステップＳ５０のＮｏ）、光学面領域の色属性が所定の傾向にあるか否かを判定する（ステップＳ７０）。モデル生成部１５は、光学面領域の色属性が所定の傾向にあると判定した場合（ステップＳ７０のＹｅｓ）、光学面領域の色属性に対応した色属性を有する対応マスクを生成して光学面領域に配置する（ステップＳ８０）。一方、モデル生成部１５は、光学面領域の色属性が所定の傾向にないと判定した場合（ステップＳ７０のＮｏ）、光学面領域に標準マスクを配置する（ステップＳ６０）。

ステップＳ６０又はステップＳ８０によりマスクを配置した後、当該マスクを配置した複数の画像に基づいて三次元モデルを生成する（ステップＳ９０）。

以上のように、本実施形態に係る三次元モデル生成装置１００は、複数の撮影位置から撮影した複数の画像を取得する画像取得部１１と、取得した複数の画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する光学面検出部１２と、光学面領域にマスクを配置し、マスクを配置した複数の画像に基づいて三次元モデルを生成するモデル生成部１５とを備える。

また、本実施形態に係る三次元モデル生成方法は、複数の撮影位置から撮影した複数の画像を取得することと、取得した複数の画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出することと、光学面領域にマスクを配置し、マスクを配置した複数の画像に基づいて三次元モデルを生成することとを含む。

また、本実施形態に係る三次元モデル生成プログラムは、複数の撮影位置から撮影した複数の画像を取得する処理と、取得した複数の画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する処理と、光学面領域にマスクを配置し、マスクを配置した複数の画像に基づいて三次元モデルを生成する処理とをコンピュータに実行させる。

この構成によれば、複数の画像に含まれる光学面領域を検出してマスクを配置し、マスクを配置した複数の画像に基づいて三次元モデルを生成するため、複数の画像に光学面領域が含まれる場合においても、当該光学面領域を適切に処理して三次元モデルを生成することができる。

本実施形態に係る三次元モデル生成装置１００において、モデル生成部１５は、光学面領域の色に対応したマスクを光学面領域に配置する。この構成によれば、有彩色の光学面領域については、当該光学面領域の色に対応したマスクが配置されるため、観察者の違和感を低減することができる。

本実施形態に係る三次元モデル生成装置１００において、光学面領域の色属性を検出する色属性検出部１３を更に備え、モデル生成部１５は、光学面領域の色属性が所定の傾向にある場合には光学面領域の色属性に対応した色属性を有する対応マスクを生成して配置し、光学面領域の色属性が所定の傾向にない場合には予め設定された標準マスクを配置する。この構成によれば、光学面領域の色属性に応じて対応マスクと標準マスクとを使い分けることができるため、観察者の違和感をより確実に低減することができる。

本実施形態に係る三次元モデル生成装置１００は、光学面領域の面積を検出する面積検出部１４を更に備え、光学面領域の面積が所定値未満の場合には、光学面領域の色属性に関わらず、予め設定された標準マスクを配置する。この構成によれば、光学面領域の面積が所定値未満の場合には、対応マスクの色属性等を設定する処理を省略できる。

本発明の技術範囲は上記実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更を加えることができる。例えば、上記実施形態において、モデル生成部１５は、窓ガラス等のガラス部材４４に対応する光学面領域５４ａ、５４ｂの色属性が所定の傾向に無いと判定した場合を例に挙げて説明したが、これに限定されない。窓ガラス等の光透過領域は、奥側の景色（像）によっては、例えば青空が見える場合等、色属性が所定の傾向にある場合がある。このような場合、モデル生成部１５は、光学面領域５４ａ、５４ｂの色属性が所定の傾向にあると判定することができる。

また、上記実施形態において、反射面領域と透過面領域とで同一の標準マスクを適用する場合を例に挙げて説明したが、これに限定されない。光学面検出部１２は、反射面領域と透過面領域とを区別して検出してもよい。この場合、モデル生成部１５は、反射面領域の標準マスクと透過面領域の標準マスクとを区別して適用してもよい。

ＣＲ，Ｃ１，Ｃ２…カメラ、Ｉ，Ｉ１，Ｉ２…画像、Ｋ…三次元空間、Ｍ１…対応マスク、Ｍ２，Ｍ３，Ｍ４…標準マスク、１０…処理部、１１…画像取得部、１２…光学面検出部、１３…色属性検出部、１４…面積検出部、１５…モデル生成部、２０…記憶部、４１，４２…樹脂部材、４３…金属部材、４１ｒ，４２ｒ，４３ｒ…反射像、４４…ガラス部材、４４ｔ…透過視認物、５１ａ，５１ｂ，５１ｃ，５２ａ，５２ｂ，５３ａ，５３ｂ，５３ｃ，５４ａ，５４ｂ…光学面領域、１００…三次元モデル生成装置

Claims (6)

1. 複数の撮影位置から撮影した複数の画像を取得する画像取得部と、
   取得した複数の前記画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する光学面検出部と、
   前記光学面領域にマスクを配置し、前記マスクを配置した複数の前記画像に基づいて三次元モデルを生成するモデル生成部と
   を備える三次元モデル生成装置。
2. 前記モデル生成部は、前記光学面領域の色に対応した前記マスクを前記光学面領域に配置する
   請求項１に記載の三次元モデル生成装置。
3. 前記光学面領域の色属性を検出する色属性検出部を更に備え、
   前記モデル生成部は、前記光学面領域の色属性が所定の傾向にある場合には前記光学面領域の色属性に対応した色属性を有する前記マスクを生成して配置し、前記光学面領域の色属性が所定の傾向にない場合には予め設定された前記マスクを配置する
   請求項１又は請求項２に記載の三次元モデル装置。
4. 前記光学面領域の面積を検出する面積検出部を更に備え、
   前記光学面領域の面積が所定値未満の場合には、前記光学面領域の色属性に関わらず、予め設定された前記マスクを配置する
   請求項３に記載の三次元モデル装置。
5. 複数の撮影位置から撮影した複数の画像を取得することと、
   取得した複数の前記画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出することと、
   前記光学面領域にマスクを配置し、前記マスクを配置した複数の前記画像に基づいて三次元モデルを生成することと
   を含む三次元モデル生成方法。
6. 複数の撮影位置から撮影した複数の画像を取得する処理と、
   取得した複数の前記画像のうち、光の反射によって視認される反射像及び透明部材を介して視認される透過視認物の少なくとも一方が映る光学面領域を検出する処理と、
   前記光学面領域にマスクを配置し、前記マスクを配置した複数の前記画像に基づいて三次元モデルを生成する処理と
   を含む三次元モデル生成プログラム。

Images