JP2020017276A - 適応的三次元空間生成方法及びそのシステム - Google Patents
適応的三次元空間生成方法及びそのシステム Download PDFInfo
- Publication number
- JP2020017276A JP2020017276A JP2019133031A JP2019133031A JP2020017276A JP 2020017276 A JP2020017276 A JP 2020017276A JP 2019133031 A JP2019133031 A JP 2019133031A JP 2019133031 A JP2019133031 A JP 2019133031A JP 2020017276 A JP2020017276 A JP 2020017276A
- Authority
- JP
- Japan
- Prior art keywords
- space
- type
- image
- adaptive
- texturing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 94
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000012545 processing Methods 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 16
- 238000002156 mixing Methods 0.000 description 6
- 101100459256 Cyprinus carpio myca gene Proteins 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 101100459261 Cyprinus carpio mycb gene Proteins 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013077 scoring method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/04—Texture mapping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/12—Bounding box
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- Image Generation (AREA)
Abstract
Description
Claims (14)
- 適応的三次元空間生成システムが空間の内部で撮影され、互いに異なる位置から撮影された複数の映像に基づいて、前記空間が、前記空間の構造的特徴に基づいて分類される空間タイプの第1タイプまたは第2タイプであるか否かを判断する段階と、
前記適応的三次元空間生成システムが、前記空間が第1タイプまたは第2タイプであるかに応じて、前記空間をテクスチャリングするための選択映像を前記映像の中で適応的に選択する段階と、
前記適応的三次元空間生成システムが選択した前記選択映像に基づいて、前記空間をテクスチャリングする段階とを備える、適応的三次元空間生成方法。 - 前記空間が、前記空間の構造的特徴に基づいて分類される空間タイプの第1タイプまたは第2タイプであるか否かを判断する段階は、
前記空間のコーナーの数が予め定められた基準値以下である第1基準、前記空間の平面構造のミニマムバウンディングボックスの面積に対して前記平面構造の面積が基準面積割合以上である第2基準、前記複数の映像に相応する位置から前記空間の全ての壁までの距離がいずれも基準距離以下である第3基準、または前記複数の映像に相応する位置から前記空間の全ての壁が見えるか否かを判断する第4基準のうち、少なくとも二つを満たすか否かに応じて、前記空間を前記第1タイプまたは第2タイプに判断する段階を備える、請求項1に記載の適応的三次元空間生成方法。 - 前記空間が第1タイプまたは第2タイプであるかに応じて、前記空間をテクスチャリングするための選択映像を前記映像の中で適応的に選択する段階は、
前記適応的三次元空間生成システムが、前記空間が第1タイプであると判断した場合、前記映像の中で前記第4基準を満たす位置に該当するいずれか一の映像を選択映像として選択する段階を備える、請求項2に記載の適応的三次元空間生成方法。 - 前記適応的三次元空間生成システムが選択した前記選択映像に基づいて、前記空間をテクスチャリングする段階は、
前記選択映像に含まれる前記空間の各壁に相応するイメージ情報を利用して、前記空間をテクスチャリングする段階を備える、請求項3に記載の適応的三次元空間生成方法。 - 前記空間が第1タイプまたは第2タイプであるかに応じて、前記空間をテクスチャリングするための選択映像を前記映像の中で適応的に選択する段階は、
前記適応的三次元空間生成システムが、前記空間が第2タイプであると判断した場合、前記映像の中で複数を前記選択映像として選択することを特徴とし、
前記適応的三次元空間生成システムが選択した前記選択映像に基づいて、前記空間をテクスチャリングする段階は、
前記空間の壁のうち、少なくとも一部を互いに異なる選択映像から抽出されるイメージ情報に基づいて、テクスチャリングすることを特徴とする、請求項2に記載の適応的三次元空間生成方法。 - 前記空間が第1タイプまたは第2タイプであるかに応じて、前記空間をテクスチャリングするための選択映像を前記映像の中で適応的に選択する段階は、
前記各映像に相応する位置と前記空間の各壁と間の距離または角度のうち、少なくとも一に基づいて、前記各壁をテクスチャリングする選択映像を少なくとも一つ選択することを特徴とする、請求項5に記載の適応的三次元空間生成方法。 - 前記各映像に相応する位置と前記空間の各壁と間の距離または角度のうち、少なくとも一に基づいて、前記各壁をテクスチャリングする選択映像を選択する段階は、
前記壁の中で特定の壁に対して前記各位置が有する距離が近いほど、前記特定の壁に対して前記各位置が形成する角度が小さいほど、高い加重値を付与し、付与された加重値が所定の基準を満たす少なくとも一の映像を前記特定の壁をテクスチャリングする選択映像として選択する段階を備える、請求項6に記載の適応的三次元空間生成方法。 - 前記空間が第1タイプまたは第2タイプであるかに応じて、前記空間をテクスチャリングするための選択映像を前記映像の中で適応的に選択する段階は、
前記各映像に相応する位置と前記空間の底面を構成する単位領域と間の距離に基づいて、前記底面をテクスチャリングする選択映像を選択する段階を備える、請求項2に記載の適応的三次元空間生成方法。 - 適応的三次元空間生成システムが空間の内部で撮影され、互いに異なる位置から撮影された複数の映像が入力される段階と、
入力された前記複数の映像に基づいて、前記空間のコーナーの数が予め定められた基準値以下である第1基準、前記空間の平面構造のミニマムバウンディングボックスの面積に対して前記平面構造の面積が基準面積割合以上である第2基準、前記複数の映像に相応する位置から前記空間の全ての壁までの距離がいずれも基準距離以下である第3基準、または前記複数の映像に相応する位置から前記空間の全ての壁が見えるか否かを判断する第4基準のうち、少なくとも二つを満たすか否かを判断する段階と、
判断結果に応じて適応的に前記空間をテクスチャリングする段階とを備える適応的三次元空間生成方法。 - 適応的三次元空間生成システムが空間の内部で撮影され、互いに異なる位置から撮影された複数の映像が入力される段階と、
前記適応的三次元空間生成システムが、前記空間の壁のうち、少なくとも一部を前記映像の中で互いに異なる映像から抽出されるイメージ情報に基づいてテクスチャリングするか、前記空間の底面に該当するピクセルのうち、少なくとも一部を前記映像の中で互いに異なる映像から抽出されたイメージ情報に基づいて、テクスチャリングする段階を備える、適応的三次元空間生成方法。 - データ処理装置に設置され、請求項1〜10のいずれか一項に記載の方法を行うための記録媒体に保存されたコンピュータプログラム。
- プロセッサと、
前記プロセッサにより具現化されるプログラムが保存されたメモリとを備えており、
前記プログラムは、
空間の内部で撮影され、互いに異なる位置から撮影された複数の映像に基づいて、前記空間が、前記空間の構造的特徴に基づいて分類される空間タイプの第1タイプまたは第2タイプであるか否かを判断し、前記空間が第1タイプまたは第2タイプであるかに応じて、前記空間をテクスチャリングするための選択映像を前記映像の中で適応的に選択し、選択された前記選択映像に基づいて、前記空間をテクスチャリングする、適応的三次元空間生成システム。 - プロセッサと、
前記プロセッサにより具現化されるプログラムが保存されたメモリとを備えており、
前記プログラムは、
空間の内部で撮影され、互いに異なる位置から撮影された複数の映像が入力され、入力された前記複数の映像に基づいて、前記空間のコーナーの数が予め定められた基準値以下である第1基準、前記空間の平面構造のミニマムバウンディングボックスの面積に対して前記平面構造の面積が基準面積割合以上である第2基準、前記複数の映像に相応する位置から前記空間の全ての壁までの距離がいずれも基準距離以下である第3基準、または前記複数の映像に相応する位置から前記空間の全ての壁が見えるか否かを判断する第4基準のうち、少なくとも二つを満たすか否かを判断し、判断結果に応じて適応的に前記空間をテクスチャリングする、適応的三次元空間生成システム。 - プロセッサと、
前記プロセッサにより具現化されるプログラムが保存されたメモリとを備えており、
前記プログラムは、
空間の内部で撮影され、互いに異なる位置から撮影された複数の映像が入力され、前記空間の壁のうち、少なくとも一部を前記映像の中で互いに異なる映像から抽出されるイメージ情報に基づいてテクスチャリングするか、前記空間の底面に該当するピクセルのうち、少なくとも一部を前記映像の中で互いに異なる映像から抽出されたイメージ情報に基づいて、テクスチャリングする、適応的三次元空間生成システム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180085371A KR102126561B1 (ko) | 2018-07-23 | 2018-07-23 | 적응적 삼차원 공간 생성방법 및 그 시스템 |
KR10-2018-0085371 | 2018-07-23 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020017276A true JP2020017276A (ja) | 2020-01-30 |
JP6851089B2 JP6851089B2 (ja) | 2021-03-31 |
Family
ID=69163152
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019133031A Active JP6851089B2 (ja) | 2018-07-23 | 2019-07-18 | 適応的三次元空間生成方法及びそのシステム |
Country Status (3)
Country | Link |
---|---|
US (1) | US10891761B2 (ja) |
JP (1) | JP6851089B2 (ja) |
KR (1) | KR102126561B1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113220941B (zh) * | 2021-06-01 | 2022-08-02 | 平安科技(深圳)有限公司 | 基于多模型的视频类型获取方法、装置、电子设备 |
WO2023095969A1 (ko) * | 2021-11-29 | 2023-06-01 | 주식회사 쓰리아이 | 3차원 가상모델 생성을 위한 텍스처링 방법 및 그를 위한 컴퓨팅 장치 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09134449A (ja) * | 1995-11-09 | 1997-05-20 | Ainesu:Kk | 立体モデルのテクスチャマッピング方法 |
JP2006098256A (ja) * | 2004-09-30 | 2006-04-13 | Ricoh Co Ltd | 3次元サーフェスモデル作成システム、画像処理システム、プログラム及び情報記録媒体 |
JP2014123368A (ja) * | 2012-12-21 | 2014-07-03 | Dassault Systemes | 計算資源によって処理される複数のゾーンに3dシーンを区切るパーティション |
KR20140102108A (ko) * | 2013-02-13 | 2014-08-21 | (주)다인디지컬처 | 3차원 실내공간 정보 구축을 위한 라이다 데이터 모델링 방법 및 시스템 |
WO2014192316A1 (ja) * | 2013-05-31 | 2014-12-04 | パナソニックIpマネジメント株式会社 | モデリング装置、3次元モデル生成装置、モデリング方法、プログラム、レイアウトシミュレータ |
JP6116746B1 (ja) * | 2016-11-17 | 2017-04-19 | 株式会社ネクスト | 情報処理装置、情報処理方法、及びプログラム |
WO2017203709A1 (ja) * | 2016-05-27 | 2017-11-30 | 楽天株式会社 | 3次元モデル生成システム、3次元モデル生成方法、及びプログラム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6201546B1 (en) * | 1998-05-29 | 2001-03-13 | Point Cloud, Inc. | Systems and methods for generating three dimensional, textured models |
JP2003006680A (ja) * | 2001-06-20 | 2003-01-10 | Zenrin Co Ltd | 3次元電子地図データの生成方法 |
JP2011095797A (ja) * | 2009-10-27 | 2011-05-12 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
US9282321B2 (en) * | 2011-02-17 | 2016-03-08 | Legend3D, Inc. | 3D model multi-reviewer system |
JP6332281B2 (ja) * | 2013-12-17 | 2018-05-30 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
US9953111B2 (en) * | 2014-06-06 | 2018-04-24 | Matterport, Inc. | Semantic understanding of 3D data |
US10055876B2 (en) * | 2014-06-06 | 2018-08-21 | Matterport, Inc. | Optimal texture memory allocation |
KR20160126242A (ko) | 2015-04-23 | 2016-11-02 | 주식회사 리그닌 | 마스크 팩용 얼굴용 시트 절개구조 및 코, 시트 의 조합시트 제조 방법 |
US10169917B2 (en) * | 2015-08-20 | 2019-01-01 | Microsoft Technology Licensing, Llc | Augmented reality |
US10706615B2 (en) * | 2015-12-08 | 2020-07-07 | Matterport, Inc. | Determining and/or generating data for an architectural opening area associated with a captured three-dimensional model |
US10074214B2 (en) * | 2015-12-31 | 2018-09-11 | Autodesk, Inc. | Systems and methods for generating 3D scenes with time element for display |
CN107993276B (zh) * | 2016-10-25 | 2021-11-23 | 杭州海康威视数字技术股份有限公司 | 一种全景图像的生成方法及装置 |
US10726633B2 (en) * | 2017-12-29 | 2020-07-28 | Facebook, Inc. | Systems and methods for generating and displaying artificial environments based on real-world environments |
CN109064542B (zh) * | 2018-06-06 | 2019-11-19 | 贝壳找房(北京)科技有限公司 | 三维模型表面空洞填补方法和装置 |
-
2018
- 2018-07-23 KR KR1020180085371A patent/KR102126561B1/ko active IP Right Grant
-
2019
- 2019-07-18 JP JP2019133031A patent/JP6851089B2/ja active Active
- 2019-07-22 US US16/518,580 patent/US10891761B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09134449A (ja) * | 1995-11-09 | 1997-05-20 | Ainesu:Kk | 立体モデルのテクスチャマッピング方法 |
JP2006098256A (ja) * | 2004-09-30 | 2006-04-13 | Ricoh Co Ltd | 3次元サーフェスモデル作成システム、画像処理システム、プログラム及び情報記録媒体 |
JP2014123368A (ja) * | 2012-12-21 | 2014-07-03 | Dassault Systemes | 計算資源によって処理される複数のゾーンに3dシーンを区切るパーティション |
KR20140102108A (ko) * | 2013-02-13 | 2014-08-21 | (주)다인디지컬처 | 3차원 실내공간 정보 구축을 위한 라이다 데이터 모델링 방법 및 시스템 |
WO2014192316A1 (ja) * | 2013-05-31 | 2014-12-04 | パナソニックIpマネジメント株式会社 | モデリング装置、3次元モデル生成装置、モデリング方法、プログラム、レイアウトシミュレータ |
WO2017203709A1 (ja) * | 2016-05-27 | 2017-11-30 | 楽天株式会社 | 3次元モデル生成システム、3次元モデル生成方法、及びプログラム |
JP6116746B1 (ja) * | 2016-11-17 | 2017-04-19 | 株式会社ネクスト | 情報処理装置、情報処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US10891761B2 (en) | 2021-01-12 |
US20200027250A1 (en) | 2020-01-23 |
KR102126561B1 (ko) | 2020-06-24 |
JP6851089B2 (ja) | 2021-03-31 |
KR20200010824A (ko) | 2020-01-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110136082B (zh) | 遮挡剔除方法、装置及计算机设备 | |
US11670043B2 (en) | Image processing apparatus, image processing method, and storage medium | |
US9153014B2 (en) | Image correction method and related image correction system thereof | |
US7787658B2 (en) | Creating a depth map | |
US8441477B2 (en) | Apparatus and method of enhancing ray tracing speed | |
US20020118217A1 (en) | Apparatus, method, program code, and storage medium for image processing | |
JP4916548B2 (ja) | 画像のドミナントライン(dominantline)の確定及び使用 | |
TWI300908B (en) | Video game system, image rendering system, and computer-readable medium having stored thereon a program of computer-readable instructions configured to cause generation of a renderized display | |
JP6851089B2 (ja) | 適応的三次元空間生成方法及びそのシステム | |
JP4649559B2 (ja) | 3次元物体認識装置、並びに3次元物体認識プログラム及びこれが記録されたコンピュータ読み取り可能な記録媒体 | |
CN113643414A (zh) | 一种三维图像生成方法、装置、电子设备及存储介质 | |
Nonaka et al. | Fast plane-based free-viewpoint synthesis for real-time live streaming | |
JP2013097782A (ja) | 画像ワープ方法及びそのコンピュータプログラム製品 | |
JP7352374B2 (ja) | 仮想視点変換装置及びプログラム | |
KR102587298B1 (ko) | 멀티뷰 어안 렌즈들을 이용한 실시간 전방위 스테레오 매칭 방법 및 그 시스템 | |
US11436797B2 (en) | Image generation system and method | |
JP7366563B2 (ja) | 画像生成装置、画像生成方法、及びプログラム | |
Casas et al. | Image-based multi-view scene analysis using'conexels' | |
KR101993961B1 (ko) | 임의시점 영상의 홀 채움 방법 | |
JP2020166652A (ja) | 画像処理装置、画像処理方法及びプログラム | |
CN110807729B (zh) | 图像数据的处理方法及装置 | |
CN116546180B (zh) | 裸眼悬浮3d视频生成方法、装置、设备及存储介质 | |
JP7211994B2 (ja) | 画像処理装置、方法及びプログラム | |
KR102281037B1 (ko) | 뷰포트(Viewport) 추출 방법 및 장치 | |
US20230351695A1 (en) | Information processing apparatus, information processing method, and non-transitory computer-readable storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190718 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190913 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200909 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200915 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201215 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210202 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210302 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6851089 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |