JP5473096B2 - イメージベースドビジュアルハルにおける凹状表面のモデリング - Google Patents
イメージベースドビジュアルハルにおける凹状表面のモデリング Download PDFInfo
- Publication number
- JP5473096B2 JP5473096B2 JP2012542329A JP2012542329A JP5473096B2 JP 5473096 B2 JP5473096 B2 JP 5473096B2 JP 2012542329 A JP2012542329 A JP 2012542329A JP 2012542329 A JP2012542329 A JP 2012542329A JP 5473096 B2 JP5473096 B2 JP 5473096B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- concave region
- virtual
- boundary
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000000007 visual effect Effects 0.000 title claims description 47
- 238000000034 method Methods 0.000 claims description 65
- 238000003709 image segmentation Methods 0.000 claims description 12
- 238000004891 communication Methods 0.000 description 21
- 238000012545 processing Methods 0.000 description 17
- 230000015654 memory Effects 0.000 description 14
- 230000008569 process Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000009877 rendering Methods 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/564—Depth or shape recovery from multiple images from contours
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Image Generation (AREA)
Description
Claims (15)
- コンピューティングデバイスが、凹領域を有するオブジェクトの複数の参照画像を取得すること、
前記コンピューティングデバイスが、前記複数の参照画像に基づいて、仮想カメラにより前記凹領域の内部から外部に向けて撮影される仮想逆転画像を生成すること、を含み、
前記仮想逆転画像を生成することが、
前記複数の参照画像に基づいて前記オブジェクトの外側境界に対するビジュアルハルを取得することと、
前記ビジュアルハル上の前記凹領域の境界の3次元座標を決定すること、
前記凹領域の前記仮想逆転画像を計算するための前記凹領域内部の位置を選択すること、
前記位置に対する画像パラメータを決定すること、
前記凹領域の前記境界を含む凹領域参照画像をキャプチャすること、
前記決定された3次元座標、前記画像パラメータ、および前記凹領域参照画像に基づいて3次元から2次元への斜視投影を実行することによって、前記凹領域に対する前記仮想逆転画像を生成すること
をさらに含む、方法。 - 前記凹領域の前記境界の前記3次元座標を決定することが、
画像セグメンテーションによって2次元参照像内の前記凹領域の前記境界を決定すること、
前記2次元参照像内の前記凹領域の前記境界を使用して前記ビジュアルハル上の前記凹領域の前記境界の前記3次元座標を決定すること
を含む、請求項1に記載の方法。 - 前記コンピューティングデバイスが、前記複数の参照画像のそれぞれから前記仮想逆転画像にマップされたセグメントに対して論理差のブーリアン演算を実行することによって、修正されたビジュアルハルを取得すること、をさらに含む、請求項1に記載の方法。
- 前記仮想逆転画像を生成することが、複数の仮想逆転画像を生成することを含み、前記方法が、前記複数の参照画像のそれぞれから前記複数の仮想逆転画像のそれぞれにマップされたセグメントに対して論理差のブーリアン演算を実行することによって、修正されたビジュアルハルを取得すること、をさらに含む、請求項1に記載の方法。
- コンピュータによって実行されると、
凹領域を有するオブジェクトの複数の参照画像を取得すること、
前記複数の参照画像に基づいて、仮想カメラにより前記凹領域の内部から外部に向けて撮影される仮想逆転画像を生成すること、を含む方法を実行し、
前記仮想逆転画像を生成することが、
前記複数の参照画像に基づいて前記オブジェクトの外側境界に対するビジュアルハルを取得することと、
前記ビジュアルハル上の前記凹領域の境界の3次元座標を決定すること、
前記凹領域の前記仮想逆転画像を計算するための前記凹領域内部の位置を選択すること、
前記位置に対する画像パラメータを決定すること、
前記凹領域の第1の境界を含む凹領域参照画像をキャプチャすること、
前記3次元座標、前記画像パラメータ、および前記凹領域参照画像に基づいて3次元から2次元への斜視投影を実行することによって、前記凹領域に対する前記仮想逆転画像を生成すること
をさらに含む、前記コンピュータが実行可能なプログラムコードを記憶するコンピュータ可読記憶媒体。 - 前記凹領域の前記境界の前記3次元座標を決定することが、
画像セグメンテーションによって2次元参照像内の前記凹領域の前記境界を決定すること、
前記2次元参照像内の前記凹領域の前記境界を使用して前記ビジュアルハル上の前記凹領域の前記境界の対応する3次元座標を決定すること
を含む、請求項5に記載のコンピュータ可読記憶媒体。 - 前記方法が、前記複数の参照画像のそれぞれから前記仮想逆転画像にマップされたセグメントに対して論理差のブーリアン演算を実行することによって、修正されたビジュアルハルを取得すること、をさらに含む、請求項5に記載のコンピュータ可読記憶媒体。
- 前記仮想逆転画像を生成することが、複数の仮想逆転画像を生成することを含み、
前記方法が、前記複数の参照画像のそれぞれから前記複数の仮想逆転画像のそれぞれにマップされたセグメントに対して論理差のブーリアン演算を実行することによって、修正されたビジュアルハルを取得すること、をさらに含む、請求項5に記載のコンピュータ可読記憶媒体。 - オブジェクトの複数の参照画像を記憶するように構成されたストレージ媒体と、
前記ストレージ媒体に接続されるプロセッサと、を備え、
前記プロセッサが、
前記複数の参照画像に基づいて前記オブジェクトの外側境界に対するビジュアルハルを取得することと、
前記ビジュアルハル上の前記凹領域の境界の3次元座標を決定すること、
前記凹領域における、仮想カメラにより前記凹領域の内部から外部に向けて撮影される仮想逆転画像を計算するための前記凹領域内部の位置を選択すること、
前記位置に対する画像パラメータを決定すること、
前記凹領域の第1の境界を含む凹領域参照画像をキャプチャすること、
前記3次元座標、前記画像パラメータ、および前記凹領域参照画像に基づいて3次元から2次元への斜視投影を実行することによって、前記凹領域に対する前記仮想逆転画像を生成すること
を含む、オペレーションを実行することによって、前記複数の参照画像に基づいて凹領域の前記仮想逆転画像を生成するように構成される、装置。 - 前記位置に対する画像パラメータを決定することが、焦点距離を含む、仮想カメラのパラメータを決定すること、を含む、請求項9に記載の装置。
- 前記オペレーションが、前記複数の参照画像のそれぞれから前記仮想逆転画像にマップされたセグメントに対して論理差のブーリアン演算を実行することによって、修正されたビジュアルハルを取得することをさらに含む、請求項9記載の装置。
- 前記オペレーションが、
複数の前記仮想逆転画像を生成することと、
前記複数の参照画像のそれぞれから前記仮想逆転画像にマップされたセグメントに対して論理差のブーリアン演算を実行することによって、修正されたビジュアルハルを取得すること
をさらに含む、請求項9記載の装置。 - 前記位置に対する画像パラメータを決定することが、焦点距離を含む、仮想カメラのパラメータを決定すること、を含む、請求項1に記載の方法。
- 前記位置に対する画像パラメータを決定することが、焦点距離を含む、仮想カメラのパラメータを決定すること、を含む、請求項5に記載のコンピュータ可読記憶媒体。
- 前記凹領域の前記境界の前記3次元座標を決定することが、
画像セグメンテーションによって2次元参照像内の前記凹領域の前記境界を決定すること、
前記2次元参照像内の前記凹領域の前記境界を使用して前記ビジュアルハル上の前記凹領域の前記境界に対応する3次元座標を決定すること
を含む、請求項9に記載の装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2009/075367 WO2011069285A1 (en) | 2009-12-07 | 2009-12-07 | Concave surface modeling in image-based visual hull |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013513172A JP2013513172A (ja) | 2013-04-18 |
JP5473096B2 true JP5473096B2 (ja) | 2014-04-16 |
Family
ID=44145082
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012542329A Expired - Fee Related JP5473096B2 (ja) | 2009-12-07 | 2009-12-07 | イメージベースドビジュアルハルにおける凹状表面のモデリング |
Country Status (6)
Country | Link |
---|---|
US (2) | US8526713B2 (ja) |
JP (1) | JP5473096B2 (ja) |
KR (1) | KR101566459B1 (ja) |
DE (1) | DE112009005423T5 (ja) |
GB (1) | GB2489848A (ja) |
WO (1) | WO2011069285A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101566459B1 (ko) | 2009-12-07 | 2015-11-05 | 페킹 유니버시티 | 이미지 기반의 비주얼 헐에서의 오목 표면 모델링 |
US9338440B2 (en) | 2013-06-17 | 2016-05-10 | Microsoft Technology Licensing, Llc | User interface for three-dimensional modeling |
CN111429581B (zh) * | 2020-03-12 | 2024-01-26 | 网易(杭州)网络有限公司 | 游戏模型外轮廓确定、游戏特效添加方法和装置 |
CN116818063B (zh) * | 2023-08-30 | 2023-11-14 | 江铃汽车股份有限公司 | 汽车芯片散热胶涂覆质量检测方法、装置及可读存储介质 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4982438A (en) | 1987-06-02 | 1991-01-01 | Hitachi, Ltd. | Apparatus and method for recognizing three-dimensional shape of object |
JPH1023465A (ja) * | 1996-07-05 | 1998-01-23 | Canon Inc | 撮像方法及び装置 |
JP3819662B2 (ja) * | 1999-12-24 | 2006-09-13 | 三洋電機株式会社 | 三次元モデリング装置、方法及び媒体並びに三次形状データ記録装置、方法及び媒体 |
JP2001351119A (ja) | 2000-06-06 | 2001-12-21 | Ricoh Co Ltd | 三角形メッシュ生成方法及び該方法を実行するための記録媒体 |
US6792140B2 (en) * | 2001-04-26 | 2004-09-14 | Mitsubish Electric Research Laboratories, Inc. | Image-based 3D digitizer |
US6975756B1 (en) | 2002-03-12 | 2005-12-13 | Hewlett-Packard Development Company, L.P. | Image-based photo hulls |
GB0305315D0 (en) * | 2003-03-07 | 2003-04-09 | Weber Martin | Image processing system |
JP4125252B2 (ja) | 2004-03-02 | 2008-07-30 | 株式会社東芝 | 画像生成装置、画像生成方法、及び画像生成プログラム |
JP4808600B2 (ja) | 2006-11-22 | 2011-11-02 | デジタルファッション株式会社 | レンダリングプログラム、レンダリング装置、及びレンダリング方法 |
KR100914845B1 (ko) | 2007-12-15 | 2009-09-02 | 한국전자통신연구원 | 다시점 영상 정보를 이용한 물체의 삼차원 형상복원 방법및 장치 |
US8363926B2 (en) * | 2008-02-06 | 2013-01-29 | University Of Central Florida Research Foundation, Inc. | Systems and methods for modeling three-dimensional objects from two-dimensional images |
CN100557640C (zh) | 2008-04-28 | 2009-11-04 | 清华大学 | 一种交互式多视点三维模型重建方法 |
KR101566459B1 (ko) | 2009-12-07 | 2015-11-05 | 페킹 유니버시티 | 이미지 기반의 비주얼 헐에서의 오목 표면 모델링 |
JP5740559B2 (ja) * | 2012-11-30 | 2015-06-24 | パナソニックIpマネジメント株式会社 | 画像処理装置および内視鏡 |
-
2009
- 2009-12-07 KR KR1020127017661A patent/KR101566459B1/ko active IP Right Grant
- 2009-12-07 US US12/995,751 patent/US8526713B2/en not_active Expired - Fee Related
- 2009-12-07 GB GB1211470.8A patent/GB2489848A/en not_active Withdrawn
- 2009-12-07 WO PCT/CN2009/075367 patent/WO2011069285A1/en active Application Filing
- 2009-12-07 JP JP2012542329A patent/JP5473096B2/ja not_active Expired - Fee Related
- 2009-12-07 DE DE112009005423T patent/DE112009005423T5/de not_active Ceased
-
2013
- 2013-07-31 US US13/955,846 patent/US8891857B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20110262031A1 (en) | 2011-10-27 |
DE112009005423T5 (de) | 2012-12-06 |
JP2013513172A (ja) | 2013-04-18 |
GB2489848A (en) | 2012-10-10 |
KR101566459B1 (ko) | 2015-11-05 |
US8891857B2 (en) | 2014-11-18 |
US20130315471A1 (en) | 2013-11-28 |
US8526713B2 (en) | 2013-09-03 |
WO2011069285A1 (en) | 2011-06-16 |
KR20120118462A (ko) | 2012-10-26 |
GB201211470D0 (en) | 2012-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109003325B (zh) | 一种三维重建的方法、介质、装置和计算设备 | |
Serrano et al. | Motion parallax for 360 RGBD video | |
CN115699114B (zh) | 用于分析的图像增广的方法和装置 | |
JP7403528B2 (ja) | シーンの色及び深度の情報を再構成するための方法及びシステム | |
Patwardhan et al. | Video inpainting under constrained camera motion | |
US8717390B2 (en) | Art-directable retargeting for streaming video | |
JP7386812B2 (ja) | 照明推定 | |
CN111194550B (zh) | 处理3d视频内容 | |
KR20230173217A (ko) | 포토리얼리스틱 실시간 인물 애니메이션을 위한 시스템 및 방법 | |
Zhi et al. | Toward dynamic image mosaic generation with robustness to parallax | |
US8373802B1 (en) | Art-directable retargeting for streaming video | |
CN109906600B (zh) | 模拟景深 | |
Meng et al. | 3d interacting hand pose estimation by hand de-occlusion and removal | |
WO2018039936A1 (en) | Fast uv atlas generation and texture mapping | |
JP5473096B2 (ja) | イメージベースドビジュアルハルにおける凹状表面のモデリング | |
CA3173542A1 (en) | Techniques for re-aging faces in images and video frames | |
Dong et al. | Geometry-aware two-scale PIFu representation for human reconstruction | |
US11170550B2 (en) | Facial animation retargeting using an anatomical local model | |
US20230281921A1 (en) | Methods of 3d clothed human reconstruction and animation from monocular image | |
Cao et al. | Task-agnostic temporally consistent facial video editing | |
US9330434B1 (en) | Art-directable retargeting for streaming video | |
Kolivand et al. | Livephantom: Retrieving virtual world light data to real environments | |
Hao et al. | Interactive image completion with perspective constraint | |
WO2023017623A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
Bonazzi et al. | Few-shot point cloud reconstruction and denoising via learned Guassian splats renderings and fine-tuned diffusion features |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131008 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140131 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5473096 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |