JP2000339465A - 3次元形状の対応付け方法 - Google Patents

3次元形状の対応付け方法

Info

Publication number
JP2000339465A
JP2000339465A JP11149053A JP14905399A JP2000339465A JP 2000339465 A JP2000339465 A JP 2000339465A JP 11149053 A JP11149053 A JP 11149053A JP 14905399 A JP14905399 A JP 14905399A JP 2000339465 A JP2000339465 A JP 2000339465A
Authority
JP
Japan
Prior art keywords
dimensional
dimensional shape
dimensional data
corresponding point
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP11149053A
Other languages
English (en)
Other versions
JP4310850B2 (ja
Inventor
Yasumi Enomoto
靖美 榎本
Koichi Fujiwara
浩一 藤原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Minolta Co Ltd
Original Assignee
Minolta Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Minolta Co Ltd filed Critical Minolta Co Ltd
Priority to JP14905399A priority Critical patent/JP4310850B2/ja
Priority to US09/580,118 priority patent/US6674431B1/en
Publication of JP2000339465A publication Critical patent/JP2000339465A/ja
Application granted granted Critical
Publication of JP4310850B2 publication Critical patent/JP4310850B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S345/00Computer graphics processing and selective visual display systems
    • Y10S345/949Animation processing method
    • Y10S345/958Collision avoidance

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 【課題】3次元形状を対応付ける際に、対応点が一様に
なるように容易に指定できること。 【解決手段】第1の3次元データC1と第2の3次元形
状又は2次元画像とに対して、それらの対応点RPを複
数個指定することによってそれらを互いに対応付ける方
法であって、第1の3次元データC1を表示面に表示す
るとともに、その奥行き方向を高さとする等高線TUを
第1の3次元データC1の中に表示し、等高線TUを対
応点RPの奥行き方向の位置の案内標識として用いる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、3次元形状と他の
3次元形状、又は3次元形状と2次元画像などに対し
て、それらの対応点を複数個指定することによってそれ
らを互いに対応付ける方法に関する。
【0002】
【従来の技術】従来より、予め用意した3次元形状モデ
ルを、3次元入力機器から取り込まれた3次元形状デー
タに適合するように変形する、いわゆるモデルベースに
よるモデリングや、3次元形状に対応付けられた2次元
画像を他の2次元画像と置き換えることが行われてい
る。
【0003】その際に、3次元形状データ(3次元形
状)と他の3次元形状データ又は2次元画像とを対応付
ける必要がある。それらの対応付けのために、それらの
間で複数組みの対応点を指定することが一般的に行われ
ている。
【0004】例えば、特願平7−156455号では、
3次元形状に対応付けられた2次元画像上で対応点を指
定することによって、対応付けがユーザにとって分かり
やすくなるようにされている。
【0005】
【発明が解決しようとする課題】ところで、対応点を指
定する場合に、それらが3次元空間において一様に分布
することが望ましい。しかし、従来においては、対応付
けを容易にするための工夫や、多数の対応点を指定する
ことによって出力結果の誤差を小さくする工夫はなされ
ているが、対応点が一様に分布するような工夫はなされ
ていない。
【0006】そのため、従来においては、対応点が3次
元形状データの一部分に偏り易かった。対応点が一部分
に偏った場合には、出力されるデータの誤差が大きくな
ってしまう。
【0007】従来のように、3次元形状又は2次元画像
を普通に表示面に表示して対応点を指定する場合には、
3次元形状の奥行きの違いが分かり難いため、ユーザが
対応点を一様に指定し、指定された対応点群を埋想的な
ものとするためには相当の熟練が必要であった。
【0008】本発明は、上述の問題に鑑みてなされたも
ので、3次元形状を対応付ける際に、対応点が一様にな
るように容易に指定できることを目的とする。
【0009】
【課題を解決するための手段】請求項1の発明に係る方
法は、第1の3次元形状と第2の3次元形状又は2次元
画像とに対して、それらの対応点を複数個指定すること
によってそれらを互いに対応付ける方法であって、第1
の3次元形状を表示面に表示するとともに、その奥行き
方向を高さとする等高線を第1の3次元形状の中に表示
し、前記等高線を対応点の奥行き方向の位置の案内標識
として用いる。
【0010】請求項2の発明に係る方法は、第1の3次
元形状に対応付けられた第1の2次元画像を表示面に表
示するとともに、第1の3次元形状の奥行き方向を高さ
とする等高線を第1の2次元画像の中に表示し、前記等
高線を対応点の奥行き方向の位置の案内標識として用い
る。
【0011】請求項3の発明に係る方法は、前記等高線
と等高線との間のそれぞれの領域を、互いに異なる表示
方法で表示する。請求項4の発明に係る方法は、第1の
3次元形状を表示面に表示するとともに、第1の3次元
形状内において対応点が指定されたときに、その対応点
と既に指定された対応点との間の距離を求め、求められ
た距離が所定値よりも小さいときに警告を発する。
【0012】請求項5の発明に係る方法は、第1の3次
元形状を表示面に表示するとともに、第1の3次元形状
内において対応点が指定されたときに、その対応点を中
心とする一定半径の半透明な球を表示し、前記球を対応
点の密度の案内標識として用いる。
【0013】このように、3次元形状データを奥行き方
向(深さ方向)の距離をもとに小領域に分割して表示す
ることにより、ユーザはより簡単に3次元空間内で対応
点が一様になるように指定することができる。また、一
定の半径の半透明の球を表示することによって、新たな
指定によって表示された球が既にある球と交わらないよ
う、対応点の指定の際の案内標識として用いることがで
きる。
【0014】
【発明の実施の形態】図1は本発明に係る方法を実施す
るための3次元データ処理装置1の構成を示すブロック
図である。
【0015】3次元データ処理装置1は、CPUなどか
らなって演算処理を実行する処理装置10、データ及び
プログラムを格納するハードディスク装置11、演算の
ためにデータを一時的に記憶するメモリ12、入力され
たデータ及び演算結果などを表示するディスプレイ装置
13、ディスプレイ装置13の表示面HG上で位置を指
定して入力するために使用されるマウス14、及びその
他の付属装置15などから構成される。このような3次
元データ処理装置1は、例えば、パーソナルコンピュー
タ又はワークステーションなどによって実現される。
【0016】3次元データ処理装置1には、3次元デー
タ(3次元形状データ)C1、3次元データC1に関連
付けられた2次元画像(2次元画像データ)I1、3次
元データC1とは関連付けられていない3次元データ
(3次元モデルデータ)C2及び2次元画像I2が、そ
れぞれ外部から入力される。
【0017】これらの3次元データC1,C2及び2次
元画像I1,I2は、フロッピィディスクなどの記憶媒
体に蓄積されている場合は、付属装置15の1つである
フロッピーディスクドライブなどの記憶媒体駆動装置に
よって読み出しが行われる。読み出されたデータは、メ
モリ12に一時的に記憶され、又はハードディスク装置
11に格納される。
【0018】また、3次元データC1,C2及び2次元
画像I1,I2が3次元データ処理装置1以外の他の外
部装置に格納されている場合には、付属装置15の1つ
である外部装置接続装置を介してその外部装置に接続さ
れ、そこから適宜データが読み出され、メモリ12に一
時的に記憶され、又はハードディスク装置11に格納さ
れる。
【0019】図2は3次元データC1,C2及び2次元
画像I1,I2を取得する方法を説明する図、図3は3
次元データC1の例を示す図である。図2に示すよう
に、まず、対象物Qを3次元形状入力装置TMにより撮
影して3次元データC1を取得する。3次元形状の認識
方法の最も実用的な方法として、光切断法がある。光切
断法を用いた3次元形状入力装置TMは公知であり、例
えば特願平5−320245号に詳しく記載されてい
る。3次元形状入力装置TMによって、対象物Qの3次
元データC1と同時に、それと同じ画角の2次元画像I
1を取得することができる。これら、3次元データC1
と2次元画像I1とは、互いの位置関係のパラメータが
分かっているので、それらの関連付けを自動的に行うこ
とが可能である。
【0020】なお、本明細書でいう関連付けとは、3次
元形状の各位置に対応する2次元画像の射影位置を求め
ることができるということである。つまり、3次元デー
タC1と2次元画像I1との関係が、基本的に射影行列
(プロジェクション・マトリクス)によって表現できる
ということである。射影行列を用いた表現方法について
は、徐剛、辻三郎 著「3次元ビジョン」(共立出版)
に詳しいが、以下に簡単に説明する。
【0021】すなわち、3次元データ上の点から2次元
画像への射影は、次の(1)式で表される。
【0022】
【数1】
【0023】である。(1)式のsは係数を、(2)式
のu,vは画像の座標を、(3)式のX,Y,Zは3次
元データ上の点の座標を示す。(4)式のPは射影行列
であり、カメラ(3次元形状入力装置)の焦点距離など
のパラメータが分かっている場合に、その要素の値は計
算可能である。
【0024】一方、カメラのパラメータが分かっていな
い場合に、対応する3次元データ上の点と2次元画像上
の点とを複数個指定し、それを(1)式に代入し、Pに
ついて最小2乗法により解くことにより、Pの近似行列
が求まる。
【0025】さて、次に、対象物Qを例えば一般的なデ
ジタルカメラTCで撮像(撮影)することにより、2次
元画像I2を得る。2次元画像I2は、3次元データC
1には関連付けられていない。3次元データC2として
は、例えば市販のCGモデル作成ソフトウエアにより作
成されたもの、又は市販の三次元形状モデルなどを用い
ることができる。
【0026】3次元データC1,C2は、通常、ポリゴ
ン(多面体)で表現される。また、3次元データC1,
C2及び2次元画像I1,I2は、JPEGファイルフ
ォーマット又はVRMLフォーマットなど、一般的なデ
ータフォーマットで表現することが可能である。但し、
これらのデータは必ずしも全てが入力される必要はな
い。
【0027】さて、次に、3次元データC1などを対応
付けるための対応点RPの指定方法について説明する。
図4は3次元データC1を奥行き方向に沿って等間隔で
切断する位置を示す図、図5は3次元データC1に等高
線TUを付加して表示した図、図6は図5に示された3
次元データC1及び等高線TUを横から見た状態を示す
図、図7は3次元データC1に対応点RPを中心とする
一定半径の半透明な球を表示した状態を示す図である。
【0028】3次元データC1と2次元画像I2との対
応付けのためには、上に述べたように3次元データC1
から2次元画像I2への射影行列を求めることが必要で
あり、その場合に対応点が3次元データC1上に満遍な
く存在する方が射影誤差が少なくなる。
【0029】そこで、本実施形態においては、3次元デ
ータC1を、その奥行き方向の空間的な位置によって複
数の領域に分割し、その結果を表示HGに表示する。図
3に示す3次元データC1は、対象物Qである「うさ
ぎ」を撮影して得られたものである。本実施形態におい
ては、図5に示すように「うさぎ」の正面から見た状態
の3次元データC1に対して対応付けを行う場合につい
て説明する。したがって、図5において、左右方向がX
方向、上下方向がY方向、奥行き方向がZ方向である。
また、図4において、左右方向がZ方向であり、その右
端がZ座標の最小値の点、左端がZ座標の最大値の点と
なる。
【0030】図4に示すように、対象物Qは、Z方向に
沿った切断位置C01〜C09において一定の間隔で仮
想的に切断される。そして、それぞれの切断位置C01
〜C09における輪郭が、図5の3次元データC1に付
加して表示される。図5に示されるように、切断位置C
01〜C09における輪郭は、等高線TUとして現れて
いる。
【0031】図5において、切断位置C07〜C09に
おける輪郭は、当該図の視線方向からは3次元データC
1により隠れるので、陰線消去によって表示されていな
い。また、切断位置C04,C05における輪郭は、図
が煩雑になるのを防ぐためにここでは省略されている。
また、互いに異なる領域ARは、模様、色、又は濃度な
どが互いに異なるように表示されている。
【0032】図5によると、等高線TUによって囲まれ
る領域ARは、それらの間隔が広くても狭くても奥行き
方向について同じ範囲内にあることがユーザに容易に分
かる。ユーザは、等高線TUを対応点RPの奥行き方向
の位置の案内標識として用い、等高線TUを目安として
対応点RPを満遍なく指定することができる。
【0033】例えば、等高線TUで囲まれる1つの領域
AR内において、奥行き方向(Z方向)においては1つ
の対応点RPのみを指定し、拡がり方向(X,Y方向)
においては一様となるように対応点RPを指定する。1
つの領域AR内で奥行き方向に1つの対応点RPのみを
指定することによって、対応点RPが奥行き方向に満遍
なく指定され、奥行き方向の指定が一様になる。また、
拡がり方向においては、一様であるか否かをユーザが目
で見て容易に確認することができるから、結局、領域A
R内において容易に対応点RPを一様に指定することが
できる。
【0034】また、異なる領域AR間において、狭い部
分も広い部分も1つの対応点RPのみを指定することに
よって、全体として容易に対応点RPを一様に指定する
ことができる。但し、3次元データC1上の特異な点、
例えば、目、鼻、口、指などについては、上に述べた対
応点RPにこだわらずに、別途対応点を指定してもよ
い。
【0035】図6は、図5に示す3次元データC1及び
等高線TUなどをそのまま90度回転させた場合に表示
された状態を示す。図5に示す等高線TUは、図6にお
いては線TULとして表示されている。
【0036】また、図7に示す例では、対応点RPが指
定されると、その対応点RPを中心とする一定半径の半
透明な球P01〜07が表示されている。球Pが互いに
3次元的に交わる場合には、その球Pの色又は模様が他
と異なるように強調表示され、又はブザーが鳴る。例え
ば、球P06と球P07とは交わっており、色が他と異
なっている。これによって、指定した対応点RPが互い
に所定距離よりも近すぎることの警告がユーザに対して
なされる。ユーザは、警告があったときに、その対応点
RPを別の位置に移動させればよい。また、そのままに
しておいてもよい。
【0037】なお、球P01と球P02とは、「うさ
ぎ」の正面から見れば交わっているように見えるが、奥
行き方向において離れており、実際には交わっていな
い。このように、交わった球Pの色を変えることによ
り、ユーザがそれを容易に判別することができる。ま
た、球Pが半透明で表示されているので、3次元データ
C1が隠れてしまうことがない。球Pの半径はユーザに
よって設定するようにしてもよく、予め設定された値を
用いてもよい。
【0038】また、図示は省略したが、対応点RPが指
定されたときに、球Pを表示することなく、その対応点
RPと既に指定されている対応点RPとの間の距離を演
算し、得られた距離が予め設定した所定値よりも小さい
ときに警告を発するようにしてもよい。
【0039】次に、対応付けの対象となるデータが3次
元データC1である場合又は2次元画像I1である場合
のそれぞれについて、その対応付けの方法をフローチャ
ートを参照して説明する。 〔3次元データに他の3次元データ又は2次元画像を対
応付ける場合〕まず、3次元データC1に対して、他の
3次元データC2又は2次元画像I2を対応付ける場合
について説明する。
【0040】3次元データC1を他の3次元データC2
に対応付けする方法は、モデルベースによるモデリング
にしばしば用いられる。モデルベースによるモデリング
とは、3次元モデルデータ(3次元データC2)を3次
元形状データ(3次元データC1)に合うように変形を
行う方法であり、3次元モデルデータ上の指定された点
を3次元形状データ上の指定された点に移動することに
よって実現される。
【0041】3次元データC1と3次元データC2との
対応付けは、それらに対して互いに対応する点である対
応点を複数組み指定することによって行う。3次元デー
タC2上の対応点は、3次元データC1上の対応点に移
動する。3次元データC1上の対応点以外の点の移動量
は、その点の近傍に存在する対応点の移動量から補間に
よって求める。
【0042】モデルベースによるモデリングでは、大半
の点の移動量つまり変形後の位置が補間によって決定さ
れるので、3次元データ上に対応点が満遍なく存在する
方が良い結果をもたらす。
【0043】3次元データC1を、それに関連付けされ
ていない2次元画像I2に対応付ける方法は、例えば、
3次元データC1に対応付けられた2次元画像I1を他
の2次元画像I2に置き換える場合にしばしば用いられ
る。また、3次元データC1に対応付けられた2次元画
像I1が存在しない場合に、3次元データC1に新規に
2次元画像I2を関連付ける場合にも用いられる。
【0044】図8は第1の対応点指定方法における手順
を示すフローチャート、図9は図8における3次元分割
領域表示処理を示すフローチャートである。図8におい
て、3次元データC1を取り込み、ディスプレイ装置1
3の表示面に表示する(#11)。そして、3次元デー
タC2及び2次元画像I2を取り込み、ディスプレイ装
置13の表示面の異なる領域に表示する(#12)。
【0045】3次元データC1を奥行き方向に指定個分
割し、分割されたそれぞれの領域の輪郭を等高線TUと
して表示する(#13)。その際に、2つの等高線TU
で囲まれる各領域AR毎に表示属性を変えて表示する。
その後、ユーザは、等高線TUを対応点RPの奥行き方
向の位置の案内標識として用い、対応点RPの指定を行
う(#14)。その際に、ユーザに対応点RPの指定を
促すためのメッセージなどを表示してもよい。指定され
た対応点RPを用いて、3次元データC1と3次元デー
タC2又は2次元画像I2との対応付けを行う(#1
5)。
【0046】図9において、まず、奥行き方向に分割す
る分割数Nを設定する(#131)。分割数Nは、ユー
ザの入力によって設定してもよく、又は予め用意した値
を用いてもよい。次に、3次元データC1を、奥行き方
向をZ軸とする座標系で表現する(#132)。そのた
めに、3次元データC1の座標系を視線情報(カメラ情
報)を用いて変換する。視線情報は、一般的に3次元デ
ータC1に含まれているが、視線情報を持たない場合は
予め用意した視線情報を用いる。
【0047】3次元データC1上の各点の座標変換の方
法は次のようである。但し、視線情報の形式によって表
現式が異なることがある。すなわち、3次元データC1
(x,y,z)t を、奥行き方向をZ軸とする座標系で
表現した3次元データC1a(X,Y,Z)t に変換す
るには、次の(5)式に示す演算を行う。
【0048】
【数2】
【0049】(5)式において、左辺は3次元データC
1a(X,Y,Z)t の座標値であり、右辺の第2項は
3次元データC1(x,y,z)t の座標値である。右
辺の第1項は、視線情報から求められる変換行列であ
る。
【0050】図9に戻って、座標変換された3次元デー
タC1aに対して、そのすべての頂点のZ座標値の最大
値及び最小値を求め、その間をN個の領域に分割する
(#133)。そのため、次に示すようにZ座標軸に垂
直な平面で3次元データC1aを切断する。
【0051】
【数3】
【0052】但し、k=1,2,3…,N−1 であ
る。これにより、次の(7)式で示すN個の領域に分割
される。
【0053】
【数4】
【0054】但し、k=1,2,3…,N である。こ
こで、Zmaxは、座標変換後の3次元データC1aの
すべての頂点のうちの最大のZ座標値を、Zminは最
小のZ座標値を示す。
【0055】そして、N個に分割された領域の境界を明
示するために、3次元データC1aの各分割平面での断
面輪郭を求める(#134)。3次元データC1aはポ
リゴンで表現されているため、具体的にはポリゴンを構
成する各3角形のエッジと分割平面との交点を求め、そ
れらを順次繋ぐことにより輪郭形状を求める。この輪郭
形状は、一般的に複数個の閉じた輪郭線となる。交点は
次のようにして求めることができる。
【0056】分割平面Z=Z0 と2点(P1 x
1 y ,P1 z ),(P2 x ,P2 y ,P 2 z )の交点
は、 α=(Z0 −P2 z )/(P1 z −P2 z ) とすると、 0≦α≦1 の場合に交点が存在し、その座標値は、 (α(P1 x −P2 x )+P2 x ,α(P1 y
2 y )+P2 y ,Z0 ) である。
【0057】α<0又は1<αの場合には交点は存在し
ない。なお、ここでは、3角形によるポリゴン表現の場
合を述べたが、一般にポリゴン表現に用いられる凸多角
形の場合についても同様に演算することができる。
【0058】さらに、座標変換後の3次元データC1a
について、上の(7)式の各分割領域に入っているポリ
ゴンのエッジをすべて求める。これは、上の(7)式の
領域とエッジの端点の包含関係から簡単に求めることが
できる。
【0059】エッジが複数の領域にまたがるときは、上
の(6)式に示す切断平面との交点を求め、その交点で
エッジを複数個のエッジ(以下「部分エッジ」というこ
とがある)に分割し、部分エッジ毎に各分割領域に入っ
ているか否かを調べる(#135)。
【0060】このようにして得られたデータに対して、
断面輪郭を表示面上に太線で表示し(#135)、各分
割領域に入っているエッジをその分割領域に割り当てら
れた色で表示する(#136)。このような表示を行う
ことにより、3次元データC1(3次元データC1a)
についての奥行き方向の違いが明確となる。
【0061】次に、図7に示すような球Pを表示する場
合について説明する。図10は第2の対応点指定方法に
おける手順を示すフローチャートである。図10におい
て、ステップ#21,22,30は、図8のステップ#
11,12,15と同じである。ステップ#13及び1
4の処理に代えて、ここではステップ#23〜29の処
理が行われる。
【0062】ステップ#23において、入力されたデー
タに対して、表示面を見ながら対応点RPの指定を行う
(#23)。指定された対応点RPについて、一定の半
径の球Pを表示する(#24)。球Pが既に表示されて
いる球Pと干渉するか否かを調べる(#25)。2つの
球Pが干渉するか否かの計算は、次のようにして行うこ
とができる。
【0063】すなわち、2点(P1 x ,P1 y
1 z ),(P2 x ,P2 y ,P2 z )を中心とする半
径Rの球Pは、次のときに交わる。 (P1 x −P2 x 2 +(P1 y −P2 y 2 +(P1
z −P2 z 2<(2×R)2 干渉している場合には(#26でイエス)、警告のメッ
セージを表示する。また、干渉しているすべての球Pの
色を変える(#27)。2つの対応点RPが近い場合で
あっても、ユーザが対応点RPとして指定すべきである
と判断する場合があるので、ステップ#28において干
渉した対応点RPを取り消すか否かの判断を求める。
【0064】一方、球Pが干渉していないと判断された
場合には、ユーザが対応点RPの指定を終了すると判断
するまで、ステップ#23以降の処理を繰り返す。 〔3次元データに対応付けられた2次元画像を用いて対
応付ける場合〕次に、3次元データC1に対して、その
3次元データC1に対応付けられた2次元画像I1を用
いて他の3次元データC2又は2次元画像I2を対応付
ける場合について説明する。
【0065】図11は第3の対応点指定方法における手
順を示すフローチャート、図12は図11における2次
元分割領域表示処理を示すフローチャートである。2次
元画像I1は既知の射影面であるから、3次元データC
1から2次元画像I1への射影行列は既知である。この
場合に、3次元データC1に対して対応点RPを指定す
るよりも、2次元画像I1に対して対応点RPを指定す
る方がユーザにとっては分かり易く指定がし易い。した
がって、ここでは、2次元画像I1を表示面に表示し、
3次元データC1についての等高線TUを2次元画像I
1の中に表示する。
【0066】図11において、ステップ#41,43
は、図8のステップ#11,12と同じである。ステッ
プ#42において、2次元画像I1を取り込み、ディス
プレイ装置13の表示面のおいて3次元データC1の領
域とは異なる領域に表示する。ステップ#44において
は、3次元データC1を奥行き方向に関して領域分割し
表示する。
【0067】ステップ#45において、2次元画像I1
上で対応点RPを指定する。2次元画像I1では、対象
物Qの表面の模様などがよく表れるので、対応点RPの
指定がより容易である。
【0068】ステップ#46において、指定された対応
点RPを用いて、3次元データC1と3次元データC2
又は2次元画像I2との対応付けを行う。但し、対応点
RPは2次元画像I1によって間接的に指定されている
ので、2次元画像I1上の指定点に対応する3次元デー
タC1上の対応点RPを求める必要がある。これは、上
に述べたように、3次元データC1上の各頂点から射影
行列を用いることによって求める。そのうち、射影位置
が2次元画像I1上の指定点に近い頂点を幾つか選ぴ、
それらの間の3次元データC1をさらに細かく分割し、
その分割点の2次元画像I1上の射影点を求める。この
ような処理を数回繰り返し、射影位置が指定点に十分近
くなったとき、その指定点に射影された3次元データC
1上の点を対応点RPとする。
【0069】図12において、ステップ#441〜44
4は、図9のステップ#131〜134と同じである。
ステップ#445において、各領域の断面輪郭を既知の
射影行列を用いて2次元画像I1に射影し、太線で又は
射影された輪郭毎に特定の色で表示する。
【0070】上に述べた実施形態においては、3次元デ
ータC1についての対応点RPの指定の方法を中心に説
明したが、3次元データC2についても、3次元データ
C1の場合と同様に等高線TU又は球Pを表示し、それ
らのよって対応点RPの指定を容易にすることができ
る。
【0071】上に述べた実施形態において、対応点RP
が得られた領域ARについてはその旨を表示し又は表示
を消去するようにしてもよい。その他、3次元データ処
理装置1の構成、処理内容又は順序などは、本発明の趣
旨に沿って適宜変更することができる。
【0072】
【発明の効果】本発明によると、3次元形状を対応付け
る際に、対応点が一様になるように容易に指定できるこ
とができる。
【0073】請求項2の発明によると、対応点の指定が
より一層容易である。
【図面の簡単な説明】
【図1】本発明に係る方法を実施するための3次元デー
タ処理装置の構成を示すブロック図である。
【図2】3次元データ及び2次元画像を取得する方法を
説明する図である。
【図3】3次元データの例を示す図である。
【図4】3次元データを奥行き方向に沿って等間隔で切
断する位置を示す図である。
【図5】3次元データに等高線を付加して表示した図で
ある。
【図6】図5に示された3次元データ及び等高線を横か
ら見た状態を示す図である。
【図7】3次元データに対応点を中心とする一定半径の
半透明な球を表示した状態を示す図である。
【図8】第1の対応点指定方法における手順を示すフロ
ーチャートである。
【図9】図8における3次元分割領域表示処理を示すフ
ローチャートである。
【図10】第2の対応点指定方法における手順を示すフ
ローチャートである。
【図11】第3の対応点指定方法における手順を示すフ
ローチャートである。
【図12】図11における2次元分割領域表示処理を示
すフローチャートである。
【符号の説明】
1 3次元データ処理装置 13 ディスプレイ装置 C1 3次元データ(第1の3次元形状) C2 3次元データ(第2の3次元形状) I1 2次元画像(第1の2次元画像) I2 2次元画像 RP 対応点 TU 等高線 HG 表示面 P 球
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5B050 BA07 BA09 CA07 DA07 EA06 EA07 EA19 EA22 EA28 FA02 5B057 CA08 CA12 CA13 CA16 CB08 CB12 CB13 CB16 CC02 CD14 CE08 CF02 CH08 DB03 DB09 DC05 DC16

Claims (5)

    【特許請求の範囲】
  1. 【請求項1】第1の3次元形状と第2の3次元形状又は
    2次元画像とに対して、それらの対応点を複数個指定す
    ることによってそれらを互いに対応付ける方法であっ
    て、 第1の3次元形状を表示面に表示するとともに、その奥
    行き方向を高さとする等高線を第1の3次元形状の中に
    表示し、 前記等高線を対応点の奥行き方向の位置の案内標識とし
    て用いる、 ことを特徴とする3次元形状の対応付け方法。
  2. 【請求項2】第1の3次元形状と第2の3次元形状又は
    2次元画像とに対して、それらの対応点を複数個指定す
    ることによってそれらを互いに対応付ける方法であっ
    て、 第1の3次元形状に対応付けられた第1の2次元画像を
    表示面に表示するとともに、第1の3次元形状の奥行き
    方向を高さとする等高線を第1の2次元画像の中に表示
    し、 前記等高線を対応点の奥行き方向の位置の案内標識とし
    て用いる、 ことを特徴とする3次元形状の対応付け方法。
  3. 【請求項3】前記等高線と等高線との間のそれぞれの領
    域を、互いに異なる表示方法で表示する、 請求項1又は請求項2記載の3次元形状の対応付け方
    法。
  4. 【請求項4】第1の3次元形状と第2の3次元形状又は
    2次元画像とに対して、それらの対応点を複数個指定す
    ることによってそれらを互いに対応付ける方法であっ
    て、 第1の3次元形状を表示面に表示するとともに、第1の
    3次元形状内において対応点が指定されたときに、その
    対応点と既に指定された対応点との間の距離を求め、求
    められた距離が所定値よりも小さいときに警告を発す
    る、 ことを特徴とする3次元形状の対応付け方法。
  5. 【請求項5】第1の3次元形状と第2の3次元形状又は
    2次元画像とに対して、それらの対応点を複数個指定す
    ることによってそれらを互いに対応付ける方法であっ
    て、 第1の3次元形状を表示面に表示するとともに、第1の
    3次元形状内において対応点が指定されたときに、その
    対応点を中心とする一定半径の半透明な球を表示し、 前記球を対応点の密度の案内標識として用いる、 ことを特徴とする3次元形状の対応付け方法。
JP14905399A 1999-05-28 1999-05-28 3次元形状の対応付け方法 Expired - Fee Related JP4310850B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP14905399A JP4310850B2 (ja) 1999-05-28 1999-05-28 3次元形状の対応付け方法
US09/580,118 US6674431B1 (en) 1999-05-28 2000-05-30 Method for processing data expressing three-dimensional shape

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP14905399A JP4310850B2 (ja) 1999-05-28 1999-05-28 3次元形状の対応付け方法

Publications (2)

Publication Number Publication Date
JP2000339465A true JP2000339465A (ja) 2000-12-08
JP4310850B2 JP4310850B2 (ja) 2009-08-12

Family

ID=15466640

Family Applications (1)

Application Number Title Priority Date Filing Date
JP14905399A Expired - Fee Related JP4310850B2 (ja) 1999-05-28 1999-05-28 3次元形状の対応付け方法

Country Status (2)

Country Link
US (1) US6674431B1 (ja)
JP (1) JP4310850B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003067778A (ja) * 2001-08-28 2003-03-07 Sony Corp 3次元画像処理装置及び3次元画像処理方法、並びに記憶媒体
JP2015075966A (ja) * 2013-10-09 2015-04-20 富士通株式会社 画像処理装置、画像処理方法、及び、プログラム
JP2016502159A (ja) * 2012-09-26 2016-01-21 デントスプリー インプランツ ナムローゼ フェンノートシャップ 3次元デジタルモデルの位置決め/位置合わせのための方法およびシステム
US20190209328A1 (en) * 2018-01-09 2019-07-11 Longeviti Neuro Solutions Llc Universal low-profile intercranial assembly

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060135865A1 (en) * 2004-11-23 2006-06-22 General Electric Company Method and apparatus for synching of images using regions of interest mapped by a user
US8496575B2 (en) * 2006-11-14 2013-07-30 Olympus Corporation Measuring endoscope apparatus, program and recording medium
KR101640404B1 (ko) * 2010-09-20 2016-07-18 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
JPWO2014027523A1 (ja) * 2012-08-17 2016-07-25 ソニー株式会社 画像処理装置、画像処理方法、プログラムおよび画像処理システム
US10251612B2 (en) * 2016-08-08 2019-04-09 Carestream Health, Inc. Method and system for automatic tube current modulation

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4982438A (en) * 1987-06-02 1991-01-01 Hitachi, Ltd. Apparatus and method for recognizing three-dimensional shape of object
JP2714277B2 (ja) * 1991-07-25 1998-02-16 株式会社東芝 リード形状計測装置
DE69430153T2 (de) * 1993-06-21 2002-09-05 Nippon Telegraph & Telephone Verfahren und Vorrichtung zur dreidimensionalen Bilderzeugung von Objekten
US5668631A (en) 1993-12-20 1997-09-16 Minolta Co., Ltd. Measuring system with improved method of reading image data of an object
DE69529548T2 (de) * 1994-04-22 2003-11-27 Canon Kk Bilderzeugungsverfahren und -gerät
JP3317093B2 (ja) 1995-06-22 2002-08-19 ミノルタ株式会社 3次元形状データ処理装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003067778A (ja) * 2001-08-28 2003-03-07 Sony Corp 3次元画像処理装置及び3次元画像処理方法、並びに記憶媒体
JP2016502159A (ja) * 2012-09-26 2016-01-21 デントスプリー インプランツ ナムローゼ フェンノートシャップ 3次元デジタルモデルの位置決め/位置合わせのための方法およびシステム
JP2015075966A (ja) * 2013-10-09 2015-04-20 富士通株式会社 画像処理装置、画像処理方法、及び、プログラム
US20190209328A1 (en) * 2018-01-09 2019-07-11 Longeviti Neuro Solutions Llc Universal low-profile intercranial assembly
US11589992B2 (en) * 2018-01-09 2023-02-28 Longeviti Neuro Solutions Llc Universal low-profile intercranial assembly

Also Published As

Publication number Publication date
US6674431B1 (en) 2004-01-06
JP4310850B2 (ja) 2009-08-12

Similar Documents

Publication Publication Date Title
JP6041838B2 (ja) 現実環境内にバーチャルオブジェクトを描写する方法および装置
JP5133418B2 (ja) 現実環境内にバーチャルオブジェクトを描写する方法および装置
EP0311081B1 (en) Displaying method and apparatus for three-dimensional computer graphics
US7812839B2 (en) Method for creating 3-D curved suface by using corresponding curves in a plurality of images
EP2051533B1 (en) 3D image rendering apparatus and method
JPH11149576A (ja) 3次元モデリング装置、3次元モデリング方法、3次元モデリングプログラムを記録した媒体、および3次元形状推定プログラムを記録した媒体
WO2010004466A1 (en) Three dimensional mesh modeling
US11490062B2 (en) Information processing apparatus, information processing method, and storage medium
JP6700480B2 (ja) ポリゴンモデル生成装置、ポリゴンモデル生成方法及びプログラム
CN110033507B (zh) 模型贴图的内描线绘制方法、装置、设备及可读存储介质
US6724383B1 (en) System and computer-implemented method for modeling the three-dimensional shape of an object by shading of a two-dimensional image of the object
JP4310850B2 (ja) 3次元形状の対応付け方法
WO2019033059A1 (en) AUTOMATED GENERATION OF A MESH
CN113808272A (zh) 三维虚拟人头脸建模中的纹理映射方法
JP2002015310A (ja) 点群に面をフィッティングする方法およびモデリング装置
JPH09270015A (ja) 輪郭抽出方法及びシステム
US20020013683A1 (en) Method and device for fitting surface to point group, modeling device, and computer program
JP3341549B2 (ja) 3次元形状データ処理装置
JP2002015338A (ja) モデルの変形方法およびモデリング装置
JPH08123835A (ja) 形状設計支援装置
JP7500325B2 (ja) 撮像制御装置、評価システム、撮像制御方法及びプログラム
JP2000057376A (ja) 新視点画像生成方法
JP2755293B2 (ja) ポリゴンメッシュ接続装置
JP2002015309A (ja) 形状モデルの生成方法および装置
JP3375879B2 (ja) グラフィック処理方法および装置

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20050613

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20050704

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060424

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090415

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090421

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090504

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120522

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130522

Year of fee payment: 4

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130522

Year of fee payment: 4

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees