JP2003065736A - 3次元モデリング装置 - Google Patents

3次元モデリング装置

Info

Publication number
JP2003065736A
JP2003065736A JP2001255261A JP2001255261A JP2003065736A JP 2003065736 A JP2003065736 A JP 2003065736A JP 2001255261 A JP2001255261 A JP 2001255261A JP 2001255261 A JP2001255261 A JP 2001255261A JP 2003065736 A JP2003065736 A JP 2003065736A
Authority
JP
Japan
Prior art keywords
cameras
camera
modeling
turntable
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001255261A
Other languages
English (en)
Inventor
Tomoya Terauchi
智哉 寺内
Kota Fujimura
恒太 藤村
Mikio Hojo
三木夫 北條
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP2001255261A priority Critical patent/JP2003065736A/ja
Priority to US10/225,382 priority patent/US6809728B2/en
Publication of JP2003065736A publication Critical patent/JP2003065736A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0007Image acquisition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/221Image signal generators using stereoscopic image cameras using a single 2D image sensor using the relative movement between cameras and objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/246Calibration of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Abstract

(57)【要約】 【課題】 比較的大きい対象を容易に3次元モデリング
する。 【解決手段】 カメラ14、16の両方で、位置検出用
参照物体を撮影し、その結果によりカメラ14、16の
相対位置を検出しておく。次に、位置検出用の参照マー
ク10aが形成された回転台10上に対象18を位置さ
せ、回転台10を回転させて、カメラ14、16で撮影
する。回転台10の参照マークからカメラ14と対象1
8の位置関係を認識し、カメラ14、16の相対位置に
基づき対象とカメラ16との位置関係を認識する。そし
て、カメラ14、16の両方の撮影画像から対象の3次
元モデルを生成する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、3次元モデリング
装置およびその方法ならびに3次元モデリングプログラ
ムに関する。
【0002】
【従来の技術】近年、コンピュータグラフィックスが各
種分野で利用されており、3次元グラフィックス画像も
広く利用されている。この3次元グラフィック画像を得
るためには、その対象物体について3次元モデルデータ
が必要になるが、このデータは膨大な量であり、その初
期入力の効率化が望まれる。
【0003】そこで、3次元対象物体の形状およびテク
スチャ(色彩および模様)をコンピュータに入力する種
々の3次元スキャナが開発されている。
【0004】例えば、特開2001−108421号公
報には、位置検出用マークを付与した回転台上に載置し
た対象物体を回転台とともにカメラで撮影し、その複数
の撮影画像の各画像における位置検出マークから撮影位
置情報を、またその撮影画像からシルエット画像を得
て、立体モデルを生成する3次元モデリング装置が開示
されている。
【0005】このような3次元スキャナを使用すること
によって、予め作成した3次元対象物体についての3次
元グラフィックデータを得ることができ、初期入力作業
をほとんど0にすることができる。
【0006】
【発明が解決しようとする課題】しかしながら、特開2
001−108421号公報の装置では、常に撮影画像
中に回転台と対象物体全体を収めなければならない。従
って、対象物体が大きい場合には、カメラを対象物体か
ら離さなければならない。そこで、形状の精度とテクス
チャの精細度が悪くなり、また撮影に広いスペースを要
するという問題がある。
【0007】本発明は、上記課題に鑑みなされたもの
で、簡易かつ安価で大きな対象物体にも対応する3次元
モデリング装置およびその方法ならびに3次元モデリン
グプログラムを記録した媒体を提供することを目的とし
ている。
【0008】
【課題を解決するための手段】本発明は、複数台のカメ
ラから得られる位置検出用参照物体の撮影画像から、各
カメラ間の相対位置を算出する相対位置算出手段と、複
数台のカメラから得られる、位置検出用参照マーク付き
回転台上において回転台とともに回転するモデリング対
象物の撮影画像からモデリング対象物の3次元モデルを
生成する3次元モデル生成手段と、を有し、前記3次元
モデル生成手段は、前記回転台が撮影されているカメラ
からの撮影画像からそのカメラと回転台との位置情報を
算出し、この位置情報と前記相対位置算出手段で得られ
た相対位置を利用して回転台が撮影されていないカメラ
の回転台との位置情報を算出し、得られた各カメラの位
置情報と、各カメラからの撮影画像とに基づいてモデリ
ング対象物の3次元モデルを生成することを特徴とす
る。
【0009】このように、複数のカメラを利用するた
め、比較的大きなモデリング対象についても近くで撮影
して、全体を捉えることができる。従って、高精度のモ
デリングを小型の装置で行うことができ、装置を全体と
して安価にすることができる。そして、複数のカメラ間
の調整は、位置検出用参照物体を撮影するだけでよいた
め、カメラの位置決めなどに精密な調整が不要であり、
その操作が簡易なものとなる。
【0010】また、前記複数台のカメラは、回転台上の
モデリング対象物体を上下方向ずれて撮影するように上
下方向に離間して配置されていることが好適である。こ
れによって、人などの縦長の対象についてその全体を容
易に捉えることができる。
【0011】また、前記回転台を連続回転させている状
態で、前記モデリング対象物を前記複数台のカメラを同
期させて複数回撮影することが好適である。
【0012】連続回転とすることで、角加速度の変化を
小さくすることができ、人などのモデリング対象が姿勢
を保つのが容易になる。
【0013】また、前記各カメラからの撮影画像につい
てそれぞれ別にボーティング処理してボクセルを生成
し、その後各ボクセル合成することが好適である。これ
によって、ボーティング処理自体は、1つのカメラの場
合と同一の処理でよく。得られたボクセルの論理和をと
るなどの簡易な方法で、3次元モデリングが行える。
【0014】また、前記各カメラからの撮影画像につい
て、各カメラの相対位置に基づいて合成処理し、その後
合成されたデータに基づいてボーティング処理してボク
セルを生成することが好適である。この方法によれば、
合成後のデータにおいて、対象の全体が捉えられればよ
い。このため、カメラ配置についての自由度が広がる。
【0015】また、本発明は、上述のような装置を用い
た3次元モデリング方法またはこの方法に用いるプログ
ラムに関する。
【0016】
【発明の実施の形態】以下、本発明の実施形態につい
て、図面に基づいて説明する。
【0017】図1は、本発明の一実施形態に係る3次元
モデリング装置の概略構成を示す図である。この装置で
は、回転台10を有している。この回転台10は、内蔵
モータによって回転可能であり、全体として円錐台の形
状となっている。そして、回転台の周面には、位置検出
用参照マーク10aが多数表示されている。この回転台
10の構成は、基本的に特開2001−108421号
公報に記載されたものと同一であり、予め定められた位
置に複数の色の参照円マーク10aが配置されている。
【0018】この回転台10には、コンピュータ12が
接続されており、このコンピュータ12が回転台10の
回転を制御する。
【0019】また、コンピュータ12には、上下に配置
されたカメラ14、16が接続されている。このカメラ
14、16による撮影は、その撮影範囲が異なるが、一
部は重複するように設定されている。
【0020】すなわち、回転台10の上には、3次元モ
デリングの対象18が載置される。この例では、対象1
8は人である。そして、上側のカメラ16は対象18の
中央部及び上部を撮影範囲とし、下側カメラ14は対象
18の中央部分及び下部、さらには回転台10を撮影範
囲としている。
【0021】そして、このような装置により、カメラ1
4、16からの撮影画像をコンピュータ12が処理し
て、対象18の人を3次元モデルを生成するが、この動
作について次に説明する。
【0022】まず、カメラ14、16の相対位置を算出
する。このために、図2に示すように、対象18に代え
て、位置検出用参照物体20をカメラ14、16の両方
に撮影できる位置に設置する。図2では、回転台10の
上面に着脱自在であって、上方に伸びる支持棒22によ
って位置検出用参照物体20を対象18の中央部に対応
する位置に設定する。
【0023】また、図2において、位置検出用参照物体
20は、回転台10と同一の形状で同一の参照円マーク
を有するものとしたが、参照マークの形状(配置)が予
め分かっておりカメラ位置の位置検出ができればどのよ
うな形状でもよく、参照マークも円でなくてもよい。
【0024】そして、カメラ14によって撮影した位置
検出用参照物体20の画像から、コンピュータ12は位
置検出用参照物体20とカメラ14の相対位置を算出す
る。また、カメラ16によって撮影した位置検出用参照
物体20の画像から、コンピュータ12は位置検出用参
照物体20とカメラ16の相対位置を算出する。例え
ば、位置検出用物体20の所定位置を原点としてカメラ
14、16の位置を三次元座標として検出する。
【0025】このようにして、カメラ14、16の両方
について、共通する位置検出用参照物体20に対する相
対位置が算出されるため、コンピュータ12は、これら
の結果に基づいて、カメラ14、16の相対位置を検出
する。この例では、下側のカメラ14が回転台を撮影す
る位置にあるため、下側のカメラ14に対する上側のカ
メラ16の相対位置を算出する。
【0026】次に、回転台10上に対象18を載せ、一
回転させながらカメラ14、16で撮影する。回転台1
0には、予め定められた参照マーク10aが設けられて
おり、下側のカメラ14によって撮影される。これによ
って、回転台10とカメラ14の相対位置が算出され
る。そして、回転台10の上で、対象18が動かないと
いう前提で、カメラ14によって撮影した対象18の画
像の各画素について、どのような方向の画像かが検出で
きる。
【0027】さらに、上述のようにして、カメラ14と
カメラ16の相対位置が分かっているため、回転台10
とカメラ16の相対位置も検出される。そして、カメラ
14と、カメラ16を同期して撮影することによって、
カメラ16により撮影した画像についてもその方向(カ
メラ視点)が特定できる。
【0028】従って、両カメラ14、16のそれぞれで
得た各回転角度の撮影画像から対象18のシルエット画
像を生成することができる。例えば、回転角度10度お
きに36枚の撮影画像を得ることで、カメラ14、16
のそれぞれにおいて36枚の撮影画像が得られ、それぞ
れの画像から対象18のシルエットが得られる。
【0029】各シルエット画像は、回転台10の角度、
すなわち対象18の方向が分かっている。そこで、シル
エット画像をボーティング処理してボクセルを生成す
る。そして、得られたボクセルからポリゴン生成し、撮
影画像から各ポリゴンのテクスチャを獲得して割り付け
ることで、3次元モデルを生成する。
【0030】このように、本実施形態によれば、複数の
カメラ14、16を利用する。従って、比較的大きな対
象18を近くで撮影することができる。従って、高精度
の3次元モデルを比較的小さな装置により、生成するこ
とができる。
【0031】また、カメラ14、16の位置検出は、位
置検出用参照物体20の撮影によって行えるため、カメ
ラ14、16の相対位置を対象18に応じて変更するこ
ともできる。さらに、カメラ14、16と回転台10の
相対位置を変更してもよい。
【0032】ここで、カメラ14、16で得られた別々
のものであり、かつ重複する部分がある。そこで、これ
らを合成する必要がある。この合成には、下記2つの方
法があり、いずれを採用することも可能である。
【0033】(i)各カメラ14、16ごとにそれぞれ
が得られた撮影画像に基づいてボーティング処理してボ
クセル生成し、その後得られたボクセルについて論理和
をとり、合成する。この手法では、処理が速いという効
果が得られる。一方、この手法では、図2のように、各
カメラ14、16のそれぞれにおいて対象18について
のボクセルを生成する。そこで、各カメラ14、16の
それぞれの撮影範囲において対象18の回転軸に直行す
る方向(水平方向)の全体を捉える必要がある。すなわ
ち、回転軸方向の領域分割は問題ないが、回転により対
象の一部が撮影範囲からはずれてはならない。
【0034】(ii)両カメラ14、16の撮影画像の
対象18全体を含む組合わせごとに、ボクセル空間で論
理和合成を行い、それらの結果をボーティング処理をし
てボクセル生成する。この手法は、比較的計算量が多く
なる。しかし、各カメラの撮影映像を組み合わせたもの
が対象の全体を捉えればよく、各カメラによって対象の
撮影範囲を任意に分割することができる。
【0035】いずれの方法によっても、両カメラ14、
16による撮影画像を合成して3次元モデルを得ること
ができる。
【0036】ここで、回転台10の回転は、等角速度に
よる連続回転が好ましい。すなわち、図3に破線で示す
ように、ステップ的に回転させると、角速度は図4に破
線で示すように角速度は大きく変化する。一方、等速度
であれば、角速度は一定である。対象18として人を考
えると、回転台10をステップ的に回転駆動(動いたり
止まったり)すると加速度の影響を受けて姿勢が変化す
る可能性がある。一方、 連続回転(等角速度回転)によ
れば、対象18の姿勢を安定しやすくすることができ
る。なお、等速回転の場合、例えば半回転で等速回転に
なり、その後の1回転で撮影を行い、半回転で停止する
等の方法をとるとよい。
【0037】なお、連続回転の場合、回転中に撮影する
ため、カメラ14、16が同期撮影することが必要とな
る。同期させることで、撮影角度を同一(または一定の
関係)にできる。なお、動画の撮影でもよい。ステップ
的な回転であれば、停止しているときに撮影すれば、カ
メラ14、16で同時に撮影する必要はない。しかし、
回転台が同じ位置において、全カメラで撮影する必要あ
る。
【0038】次に、カメラ配置についての条件をまとめ
ると、次のようになる。
【0039】(I)すべてのカメラが下記の条件のうち
少なくとも1つを満たさねばならない。
【0040】(a)参照マーク付きの回転台10を撮影
して撮影位置が計算できる、(b)参照マーク付きの回
転台10を撮影しているカメラと、同一かつ同位置の位
置検出用参照物体20を撮影して撮影位置が計算でき
る、(c)撮影位置が計算できるカメラと同一かつ同位
置の位置検出用参照物体を撮影して撮影位置が計算でき
る、(II)さらに、合成方法として(ii)を適用す
る場合は、カメラの撮影画像全体で物体全体を捉える必
要があり、また合成方法として(i)を適用する場合に
は、カメラ撮影範囲について、下記条件を満たす必要が
ある。
【0041】回転中心軸方向で分割されるある区間にお
いて物体領域全体を撮影でき、その区間をすべて合わせ
ると物体の存在する領域全体となる。
【0042】なお、上述の実施形態においては、カメラ
を2台としたが、3台以上としてもよい。この場合、合
成方法として、(i)の個別のカメラの撮影画像につい
てボーティング処理する場合には、図1に示すように、
回転軸方向で領域を分割しなければならない。
【0043】ここで、カメラ相対位置の算出について、
図5、図6および図7に基づいて説明する。ここで、図
5およびその説明で使用する表記について、Xi:各座
標系の座標値、Rij:i→jへの変換行列(回転成
分)、Tij:i→jへの変換行列(移動成分)を表し、
添え字iについては、R:位置検出用参照物体、T:回
転台、1:カメラ14、2:カメラ16を表す。
【0044】カメラ14、16により、位置検出用参照
物体20を撮影し、その撮影画像から各々のカメラ視点
位置パラメータ群(x,y,z,α,β,γ)を求める
(S11)。ここで、x,y,zは各カメラと位置検出
用参照物体18との相対位置についてのパラメータであ
り、α,β,γは、参照物体における座標系に対する各
カメラらの座標系の回転量についてのパラメータであ
る。
【0045】次に、各パラメータ群(x,y,z,α,
β,γ)から座標系変換行列RR1,TR1,RR2,TR2
求める(S12)。すなわち、参照物体20の座標系に
おける座標値XRを、X1=RR1R+TR1によりカメラ
14の座標系に変換する変換行列RR1,TR1と、参照物
体20の座標系における座標値XRを、X2=RR2R
R2でカメラ16の座標系に変換する変換行列RR2,T
R2を求める。
【0046】次に、カメラ14の座標値X1を参照物体
の座標値XRに変換するために、R R1の逆行列RR1 -1
求める(S13)。そして、X1→XR変換と、XR→X2
変換を組み合わせてX1→X2変換の変換行列を求める
(S14)。すなわち、X2=R121+T12であり、R
12=RR2R1 -1、T12=TR2−RR2R1 -1R1であり、
これを用いてX1→X2の変換行列が得られる。
【0047】また、回転台10に対するカメラ16の視
点位置の算出は、図7に示すように、カメラ14による
回転台10の参照マークの撮影画像からパラメータ群
(x,y,z,α,β,γ)を求める(S21)。次に
パラメータ群(x,y,z,α,β,γ)から、座標系
変換行列RT1,TT1を求める(S22)。すなわち、X
1=RT1T+TT1という座標変換を行う変換行列を求め
る。
【0048】そして、XT→X1変換と、X1→X2変
換を組み合わせて、XT→X2変換の変換行列を求め
る。このようにして、回転台10に対するカメラ16の
視点位置が算出できるため、回転台10上の対象18に
ついてのカメラ16の撮影画像について、カメラ14の
撮影画像と同様の処理が行える。
【0049】なお、このような変換行列の求め方は、基
本的に特開平11−96374号公報に記載されたもの
と同一であり、詳しい説明は省略する。
【0050】このようにして、本実施形態の3次元モデ
リングにより、各種の対象について容易に3次元モデル
を得ることができる。例えば、各種商品の動画による3
次元表示や、アニメーションのキャラクタの初期データ
作成に利用できる。さらに、人のシルエットを作成する
ことで、洋服を作る際の採寸に代えることもできる。
【0051】
【発明の効果】以上説明したように、本発明によれば、
複数のカメラを利用するため、比較的大きなモデリング
対象についても近くで撮影して、全体を捉えることがで
きる。従って、高精度のモデリングを小型の装置で行う
ことができ、装置を全体として安価化にすることができ
る。そして、複数のカメラ間の調整は、位置検出用参照
物体を撮影するだけでよいため、カメラの位置決めなど
に精密な調整が不要であり、その操作が簡易なものとな
る。
【0052】また、前記複数台のカメラは、回転台上の
モデリング対象物体を上下方向ずれて撮影するように上
下方向に離間して配置されていることで、人などの縦長
の対象についてその全体を容易に捉えることができる。
【0053】また、前記回転台を連続回転とすること
で、角加速度の変化を小さくすることができ、人などの
モデリング対象が姿勢を保つのが容易になる。
【0054】また、前記各カメラからの撮影画像につい
てそれぞれ別にボーティング処理してボクセルを生成
し、その後各ボクセル合成することで、ボーティング処
理自体は、1つのカメラの場合と同一の処理でよく、得
られたボクセルの論理和をとるなどの簡易な方法で、3
次元モデリングが行える。
【0055】また、前記各カメラからの撮影画像につい
て、各カメラの相対位置に基づいて合成処理し、その後
合成されたデータに基づいてボーティング処理してボク
セルを生成することで、合成後のデータにおいて、対象
の全体が捉えられればよい。このため、カメラ配置につ
いての自由度が広がる。
【図面の簡単な説明】
【図1】 全体構成を示す図である。
【図2】 カメラ相対位置の検出を説明する図である。
【図3】 回転による角度変化を示す図である。
【図4】 回転による角速度変化を示す図である。
【図5】 座標変換の変換行列の算出を説明する図であ
る。
【図6】 カメラ14の視点座標からカメラ16の視点
座標への変換行列を求める動作を示すフローチャートで
ある。
【図7】 回転台に対するカメラ16の指定位置の算出
を示すフローチャートである。
【符号の説明】
10 回転台、12 コンピュータ、14,16 カメ
ラ、18 対象、20位置検出用参照物体。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 北條 三木夫 大阪府守口市京阪本通2丁目5番5号 三 洋電機株式会社内 Fターム(参考) 2F065 AA02 AA04 AA20 AA51 AA53 BB05 BB27 CC16 DD06 DD07 FF05 FF61 JJ03 JJ05 JJ26 MM04 PP13 QQ21 QQ31 RR10 5B057 BA02 BA13 CA08 CA13 CA16 CB13 CB16 CD02 CD03 CE08 5B080 AA00 AA17 BA08 DA06 5C061 AA06 AB04

Claims (12)

    【特許請求の範囲】
  1. 【請求項1】 複数台のカメラから得られる位置検出用
    参照物体の撮影画像から、各カメラ間の相対位置を算出
    する相対位置算出手段と、 複数台のカメラから得られる、位置検出用参照マーク付
    き回転台上において回転台とともに回転するモデリング
    対象物の撮影画像からモデリング対象物の3次元モデル
    を生成する3次元モデル生成手段と、 を有し、 前記3次元モデル生成手段は、前記回転台が撮影されて
    いるカメラからの撮影画像からそのカメラと回転台との
    位置情報を算出し、この位置情報と前記相対位置算出手
    段で得られた相対位置を利用して回転台が撮影されてい
    ないカメラの回転台との位置情報を算出し、 得られた各カメラの位置情報と、各カメラからの撮影画
    像とに基づいてモデリング対象物の3次元モデルを生成
    する3次元モデリング装置。
  2. 【請求項2】 請求項1に記載の装置において、 前記複数台のカメラは、回転台上のモデリング対象物体
    を上下方向ずれて撮影するように上下方向に離間して配
    置されている3次元モデリング装置。
  3. 【請求項3】 請求項1または2に記載の装置におい
    て、 前記回転台を連続回転させている状態で、前記モデリン
    グ対象物を前記複数台のカメラを同期させて複数回撮影
    する3次元モデリング装置。
  4. 【請求項4】 請求項1〜3のいずれか1つに記載の装
    置において、 前記各カメラからの撮影画像についてそれぞれ別にボー
    ティング処理してボクセルを生成し、その後各ボクセル
    合成する3次元モデリング装置。
  5. 【請求項5】 請求項1〜3のいずれか1つに記載の装
    置において、 前記各カメラからの撮影画像について、各カメラの相対
    位置に基づいて合成処理し、その後合成されたデータに
    基づいてボーティング処理してボクセルを生成する3次
    元モデリング装置。
  6. 【請求項6】 位置検出用参照物体を複数台のカメラで
    撮影し、各カメラ間の相対位置を算出する相対位置算出
    工程と、 位置検出用参照マーク付き回転台上において回転台とと
    もに回転するモデリング対象物を前記複数台のカメラで
    撮影し、得られた撮影画像からモデリング対象物の3次
    元モデルを生成する3次元モデル生成工程と、 を有し、 前記3次元モデル生成工程は、前記回転台が撮影されて
    いるカメラからの撮影画像からそのカメラと回転台との
    位置情報を算出し、この位置情報と前記相対位置算出手
    段で得られた相対位置を利用して回転台が撮影されてい
    ないカメラの回転台との位置情報を算出し、 得られた各カメラの位置情報と、各カメラからの撮影画
    像とに基づいてモデリング対象物の3次元モデルを生成
    する3次元モデリング方法。
  7. 【請求項7】 請求項6に記載の方法において、 前記回転台を連続回転させている状態で、前記モデリン
    グ対象物を前記複数台のカメラを同期させて複数回撮影
    する3次元モデリング方法。
  8. 【請求項8】 請求項6または7に記載の方法におい
    て、 前記各カメラからの撮影画像についてそれぞれ別にボー
    ティング処理してボクセルを生成し、その後各ボクセル
    合成する3次元モデリング方法。
  9. 【請求項9】 請求項6または7に記載の方法におい
    て、 前記各カメラからの撮影画像について、各カメラの相対
    位置に基づいて合成処理し、その後合成されたデータに
    基づいてボーティング処理してボクセルを生成する3次
    元モデリング方法。
  10. 【請求項10】 コンピュータに、カメラによって撮影
    したモデリング対象物の撮影画像からモデリング対象物
    の3次元モデルを生成させる3次元モデリングプログラ
    ムであって、 複数台のカメラから得られる位置検出用参照物体の撮影
    画像から、各カメラ間の相対位置を算出させ、 複数台のカメラから得られる、位置検出用参照マーク付
    き回転台上において回転台とともに回転するモデリング
    対象物の撮影画像からモデリング対象物の3次元モデル
    を生成させるとともに、 3次元モデル生成させるときには、前記回転台が撮影さ
    れているカメラからの撮影画像からそのカメラと回転台
    との位置情報を算出させ、この位置情報と前記相対位置
    算出手段で得られた相対位置を利用して回転台が撮影さ
    れていないカメラの回転台との位置情報を算出させ、 得られた各カメラの位置情報と、各カメラからの撮影画
    像とに基づいてモデリング対象物の3次元モデルを生成
    させる3次元モデリングプログラム。
  11. 【請求項11】 請求項10に記載のプログラムにおい
    て、 前記各カメラからの撮影画像についてそれぞれ別にボー
    ティング処理してボクセルを生成し、その後各ボクセル
    合成する3次元モデリングプログラム。
  12. 【請求項12】 請求項10に記載のプログラムにおい
    て、 前記各カメラからの撮影画像について、各カメラの相対
    位置に基づいて合成処理し、その後合成されたデータに
    基づいてボーティング処理してボクセルを生成する3次
    元モデリングプログラム。
JP2001255261A 2001-08-24 2001-08-24 3次元モデリング装置 Pending JP2003065736A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2001255261A JP2003065736A (ja) 2001-08-24 2001-08-24 3次元モデリング装置
US10/225,382 US6809728B2 (en) 2001-08-24 2002-08-21 Three dimensional modeling apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001255261A JP2003065736A (ja) 2001-08-24 2001-08-24 3次元モデリング装置

Publications (1)

Publication Number Publication Date
JP2003065736A true JP2003065736A (ja) 2003-03-05

Family

ID=19083269

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001255261A Pending JP2003065736A (ja) 2001-08-24 2001-08-24 3次元モデリング装置

Country Status (2)

Country Link
US (1) US6809728B2 (ja)
JP (1) JP2003065736A (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005189204A (ja) * 2003-12-26 2005-07-14 Fuji Xerox Co Ltd 3次元形状計測装置および方法
JP2006042361A (ja) * 2004-07-27 2006-02-09 Microsoft Corp パターンを利用せずに画像間ホモグラフィによって複数のカメラを校正するためのシステムおよび方法
JP2008191072A (ja) * 2007-02-07 2008-08-21 Nippon Telegr & Teleph Corp <Ntt> 3次元形状復元方法,3次元形状復元装置,その方法を実装した3次元形状復元プログラム及びそのプログラムを記録した記録媒体
JP2011112570A (ja) * 2009-11-27 2011-06-09 Sirona Dental Systems Gmbh カメラ及び検索パターンを使用して対象物の空間特性を決定するためのシステム、装置、方法、及びコンピュータプログラム製品
JP2016070891A (ja) * 2014-10-01 2016-05-09 日本電信電話株式会社 映像データ処理装置及び映像データ処理プログラム
WO2017057043A1 (ja) * 2015-09-30 2017-04-06 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
KR101826486B1 (ko) * 2017-09-20 2018-02-07 김성은 증강현실기능을 적용한 모형장난감 및 그 어플리케이션
KR20220153082A (ko) 2020-03-30 2022-11-17 가부시키가이샤 반다이나무꼬 엔터테인먼트 컴퓨터 시스템, 가상 모델 생성 제어 방법, 및 프로그램
JP7460532B2 (ja) 2018-10-10 2024-04-02 株式会社Preferred Networks システム、方法及び装置

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4877891B2 (ja) * 2001-08-03 2012-02-15 株式会社トプコン 校正用被写体
GB0310504D0 (en) * 2003-05-07 2003-06-11 Canon Europa Nv Photographing apparatus,device and method for obtaining images to be used for creating three-dimensional model
JP3834297B2 (ja) * 2003-05-12 2006-10-18 ファナック株式会社 画像処理装置
GB0319677D0 (en) * 2003-08-21 2003-09-24 Canon Res Ct Europ Ltd Photographic apparatus for use in creating three-dimensional models
GB2405282A (en) * 2003-08-21 2005-02-23 Canon Res Ct Europ Ltd Apparatus to aid three-dimensional model creation from photographic images
DE10344922B4 (de) * 2003-09-25 2008-06-26 Siemens Audiologische Technik Gmbh Rundum-Scanner
EP1524864A1 (en) * 2003-10-17 2005-04-20 Canon Europa N.V. Turntable system for photographing three-dimensional objects
US20050242750A1 (en) * 2004-04-28 2005-11-03 Chin-Wen Chou Inverter circuit with a power factor corrector
JP2006004158A (ja) * 2004-06-17 2006-01-05 Olympus Corp 画像処理プログラム、画像処理方法、画像処理装置及び記録媒体
US7623250B2 (en) 2005-02-04 2009-11-24 Stryker Leibinger Gmbh & Co. Kg. Enhanced shape characterization device and method
WO2007069724A1 (ja) 2005-12-16 2007-06-21 Ihi Corporation 三次元形状データの位置合わせ方法と装置
CN101331380B (zh) * 2005-12-16 2011-08-03 株式会社Ihi 三维形状数据的存储/显示方法和装置以及三维形状的计测方法和装置
CN101331379B (zh) 2005-12-16 2012-04-11 株式会社Ihi 自身位置辨认方法和装置以及三维形状的计测方法和装置
DE502006009454D1 (de) * 2006-03-23 2011-06-16 Bernward Maehner Ewegender objekte
GB2458927B (en) * 2008-04-02 2012-11-14 Eykona Technologies Ltd 3D Imaging system
DE102008019435B4 (de) * 2008-04-17 2012-06-06 Aicon Metrology Gmbh Verfahren zum berührungslosen Vermessen dreidimensionaler, komplex geformter Bauteile
US9479768B2 (en) * 2009-06-09 2016-10-25 Bartholomew Garibaldi Yukich Systems and methods for creating three-dimensional image media
DE102009032262A1 (de) * 2009-07-08 2011-01-13 Steinbichler Optotechnik Gmbh Verfahren zur Bestimmung der 3D-Koordinaten eines Objekts
US8355541B2 (en) * 2009-07-14 2013-01-15 Empire Technology Development Llc Texture sensing
US20110018965A1 (en) * 2009-07-23 2011-01-27 Geospatial Systems, Inc. Apparatus for optimizing geometric calibration
JP4856222B2 (ja) * 2009-08-28 2012-01-18 照明 與語 3次元形状測定方法
EP2680594A4 (en) * 2011-02-24 2014-07-09 Kyocera Corp ELECTRONIC APPARATUS, IMAGE DISPLAY METHOD, AND IMAGE DISPLAY PROGRAM
US9310317B2 (en) * 2012-01-25 2016-04-12 The Boeing Company Automated system and method for tracking and detecting discrepancies on a target object
US9456647B2 (en) 2012-05-17 2016-10-04 Carol S. Grove System and method for drafting garment patterns
US8813378B2 (en) * 2012-05-17 2014-08-26 Carol S. Grove System and method for drafting garment patterns from photographs and style drawings
US8855404B2 (en) * 2012-08-27 2014-10-07 The Boeing Company Methods and systems for inspecting a workpiece
JP5868816B2 (ja) * 2012-09-26 2016-02-24 楽天株式会社 画像処理装置、画像処理方法、及びプログラム
TWI466062B (zh) * 2012-10-04 2014-12-21 Ind Tech Res Inst 重建三維模型的方法與三維模型重建裝置
US9189711B2 (en) * 2013-10-28 2015-11-17 Eastman Kodak Company Method for aligning imaging systems
FR3015738B1 (fr) * 2013-12-20 2016-02-05 Allure Systems Mood By Me Ensemble et procede d'aide a la prise de vues d'objets presentes sur un support mobile et amovible
CN107073346A (zh) 2014-09-10 2017-08-18 孩之宝公司 具有手动操作的扫描器的玩具系统
KR102146398B1 (ko) 2015-07-14 2020-08-20 삼성전자주식회사 3차원 컨텐츠 생성 장치 및 그 3차원 컨텐츠 생성 방법
US10600240B2 (en) 2016-04-01 2020-03-24 Lego A/S Toy scanner
EP3252458A1 (en) * 2016-06-01 2017-12-06 Hijos de Jose Sivo, S.L. System and method for digitalizing tridimensional objects
WO2018011335A1 (en) * 2016-07-13 2018-01-18 Naked Labs Austria Gmbh Alignment of scan parts on a turntable
WO2019064266A1 (en) * 2017-09-28 2019-04-04 Checkout Technologies Srl CREATING DATA SETS FOR DEEP NEURAL NETWORK
CN113358026B (zh) * 2021-06-04 2023-04-18 南京视道信息技术有限公司 基于双线阵ccd相机的物体位置和轮廓信息的检测方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3419213B2 (ja) * 1996-08-30 2003-06-23 ミノルタ株式会社 3次元形状データ処理装置
US5864640A (en) * 1996-10-25 1999-01-26 Wavework, Inc. Method and apparatus for optically scanning three dimensional objects using color information in trackable patches
JP2001108421A (ja) 1999-10-13 2001-04-20 Sanyo Electric Co Ltd 3次元モデリング装置、3次元モデリング方法および3次元モデリングプログラムを記録した媒体
JP2002098521A (ja) * 2000-09-26 2002-04-05 Minolta Co Ltd 3次元形状データ生成装置
US6792140B2 (en) * 2001-04-26 2004-09-14 Mitsubish Electric Research Laboratories, Inc. Image-based 3D digitizer
US6917702B2 (en) * 2002-04-24 2005-07-12 Mitsubishi Electric Research Labs, Inc. Calibration of multiple cameras for a turntable-based 3D scanner
US6791542B2 (en) * 2002-06-17 2004-09-14 Mitsubishi Electric Research Laboratories, Inc. Modeling 3D objects with opacity hulls

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005189204A (ja) * 2003-12-26 2005-07-14 Fuji Xerox Co Ltd 3次元形状計測装置および方法
JP2006042361A (ja) * 2004-07-27 2006-02-09 Microsoft Corp パターンを利用せずに画像間ホモグラフィによって複数のカメラを校正するためのシステムおよび方法
JP2008191072A (ja) * 2007-02-07 2008-08-21 Nippon Telegr & Teleph Corp <Ntt> 3次元形状復元方法,3次元形状復元装置,その方法を実装した3次元形状復元プログラム及びそのプログラムを記録した記録媒体
JP2011112570A (ja) * 2009-11-27 2011-06-09 Sirona Dental Systems Gmbh カメラ及び検索パターンを使用して対象物の空間特性を決定するためのシステム、装置、方法、及びコンピュータプログラム製品
JP2016070891A (ja) * 2014-10-01 2016-05-09 日本電信電話株式会社 映像データ処理装置及び映像データ処理プログラム
WO2017057043A1 (ja) * 2015-09-30 2017-04-06 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
CN108139202A (zh) * 2015-09-30 2018-06-08 索尼公司 图像处理装置、图像处理方法和程序
JPWO2017057043A1 (ja) * 2015-09-30 2018-09-13 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
US10970877B2 (en) 2015-09-30 2021-04-06 Sony Corporation Image processing apparatus, image processing method, and program
KR101826486B1 (ko) * 2017-09-20 2018-02-07 김성은 증강현실기능을 적용한 모형장난감 및 그 어플리케이션
JP7460532B2 (ja) 2018-10-10 2024-04-02 株式会社Preferred Networks システム、方法及び装置
KR20220153082A (ko) 2020-03-30 2022-11-17 가부시키가이샤 반다이나무꼬 엔터테인먼트 컴퓨터 시스템, 가상 모델 생성 제어 방법, 및 프로그램

Also Published As

Publication number Publication date
US20030038801A1 (en) 2003-02-27
US6809728B2 (en) 2004-10-26

Similar Documents

Publication Publication Date Title
JP2003065736A (ja) 3次元モデリング装置
JP7231306B2 (ja) イメージ内のターゲットオブジェクトに自動的にアノテーションするための方法、装置およびシステム
EP0782100B1 (en) Three-dimensional shape extraction apparatus and method
CN105026997B (zh) 投影系统、半导体集成电路及图像修正方法
JP4947593B2 (ja) 局所領域分割による自由視点画像の生成装置およびプログラム
JP6377392B2 (ja) 画像投影システムおよび画像投影方法
JP4803594B2 (ja) 局所領域分割による自由視点画像の生成装置およびプログラム
JP2007072537A (ja) 360°画像撮影装置
JP2006249618A (ja) 仮想試着装置
JP2010287174A (ja) 家具シミュレーション方法、装置、プログラム、記録媒体
JP2007004578A (ja) 三次元形状取得方法、三次元形状取得装置、及びプログラムの記録媒体
JPH10198822A (ja) 画像合成装置
JP2001108421A (ja) 3次元モデリング装置、3次元モデリング方法および3次元モデリングプログラムを記録した媒体
JP4108171B2 (ja) 画像合成装置
JP2000155831A (ja) 画像合成方法、画像合成装置、画像合成プログラムを記録した記録媒体
JP4776983B2 (ja) 画像合成装置及び画像合成方法
JP2005063041A (ja) 3次元モデリング装置、方法、及びプログラム
JP2000329552A (ja) 3次元地図作成方法
JP2003168132A (ja) Web3Dオブジェクト生成システム
KR20090049670A (ko) 피사체의 3차원 좌표 검출방법 및 그 방법을 컴퓨터에서실행시키기 위한 프로그램을 기록한 기록매체
JPH09237346A (ja) 部分立体モデルの合成方法及び完全立体モデルの作成方法
JP2003042730A (ja) 表面形状測定装置、及びその方法、並びに表面状態図化装置
JP7335669B1 (ja) 情報処理システム、情報処理方法、及びプログラム
JP2000057376A (ja) 新視点画像生成方法
WO2021131738A1 (ja) 情報処理装置、情報処理方法及び情報処理プログラム