JP2023163420A - 三次元モデル生成装置及び三次元モデル生成プログラム - Google Patents
三次元モデル生成装置及び三次元モデル生成プログラム Download PDFInfo
- Publication number
- JP2023163420A JP2023163420A JP2022074334A JP2022074334A JP2023163420A JP 2023163420 A JP2023163420 A JP 2023163420A JP 2022074334 A JP2022074334 A JP 2022074334A JP 2022074334 A JP2022074334 A JP 2022074334A JP 2023163420 A JP2023163420 A JP 2023163420A
- Authority
- JP
- Japan
- Prior art keywords
- indoor
- image
- unit
- dimensional model
- segmentation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000011218 segmentation Effects 0.000 claims abstract description 120
- 238000003702 image correction Methods 0.000 claims description 16
- 230000006870 function Effects 0.000 claims description 5
- 238000000034 method Methods 0.000 description 37
- 238000012937 correction Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
Images
Abstract
Description
図1は、本実施形態に係る三次元モデル生成装置1を示すブロック図である。図1に示される三次元モデル生成装置1は、不動産物件における室内の情報を顧客等の第三者に知得させるために当該不動産物件を三次元モデル化する装置である。
図5は、三次元モデル生成装置1により実行される三次元モデル生成処理の流れを示すフローチャートである。図5に示される三次元モデル生成処理は、例えば三次元モデル生成装置1のコンピュータCにより三次元モデル生成プログラムPが実行されることによって開始される。
図6は、三次元モデル生成プログラムPを示すブロック図である。図6に示される三次元モデル生成プログラムPは、コンピュータCを三次元モデル生成装置1として機能させるためのプログラムである。
以上説明したように、三次元モデル生成装置1は、不動産物件の室内を撮像した室内画像RGの入力を受け付ける室内画像入力受付部10と、室内画像入力受付部10により入力を受け付けられた室内画像RGに対してセグメンテーションを行うセグメンテーション部12と、セグメンテーション部12により室内画像RGに対して行われたセグメンテーションの結果に基づいて、室内の構造である室内構造を推定する室内構造推定部13と、室内構造推定部13により推定された室内構造に基づいて、不動産物件の三次元モデルを生成する三次元モデル生成部20と、を備える。
上述した実施形態は、当業者の知識に基づいて変更又は改良が施された様々な形態により実施可能である。
10 室内画像入力受付部
11 結合部
12 セグメンテーション部
13 室内構造推定部
14 トップビュー画像補正部
15 間取図画像入力受付部
16 物件構造推定部
17 マッチング部
18 関係推定部
19 部屋タイプ情報取得部
20 三次元モデル生成部
21 関係補正部
C コンピュータ
FG 間取図画像
P 三次元モデル生成プログラム
PG 二次元画像
PGa 一端
PGb 他端
RG 室内画像
TG トップビュー画像
Claims (9)
- 不動産物件の室内を撮像した室内画像の入力を受け付ける室内画像入力受付部と、
前記室内画像入力受付部により入力を受け付けられた前記室内画像に対してセグメンテーションを行うセグメンテーション部と、
前記セグメンテーション部により前記室内画像に対して行われたセグメンテーションの結果に基づいて、前記室内の構造である室内構造を推定する室内構造推定部と、
前記室内構造推定部より推定された前記室内構造に基づいて、前記不動産物件の三次元モデルを生成する三次元モデル生成部と、を備える、三次元モデル生成装置。 - 前記セグメンテーション部は、前記室内画像に対して少なくとも2種類のセグメンテーションを行う、請求項1に記載の三次元モデル生成装置。
- 前記セグメンテーション部は、前記室内画像に対して少なくともセマンティックセグメンテーション及びインスタンスセグメンテーションを行う、請求項2に記載の三次元モデル生成装置。
- 前記室内画像は、前記室内の全天球画像を含み、
前記全天球画像において前記室内を上方から見た画像であるトップビュー画像に対して補正を行うトップビュー画像補正部を備える、請求項1に記載の三次元モデル生成装置。 - 前記室内画像は、前記室内の全天球画像の一部である二次元画像を含み、
前記二次元画像の一端と前記一端とは反対側の他端とを互いに結合する結合部を備え、
前記セグメンテーション部は、前記結合部により前記一端と前記他端とが互いに結合された前記二次元画像に対してセグメンテーションを行う、請求項1に記載の三次元モデル生成装置。 - 前記不動産物件の間取りを示す間取図画像の入力を受け付ける間取図画像入力受付部と、
前記間取図画像入力受付部により入力を受け付けられた前記間取図画像に基づいて、前記不動産物件の構造である物件構造を推定する物件構造推定部と、
前記室内構造推定部により推定された前記室内構造と前記物件構造推定部により推定された前記物件構造とのマッチングを行うマッチング部と、を備え、
前記三次元モデル生成部は、前記マッチング部により行われた前記室内構造と前記物件構造とのマッチングの結果に基づいて、前記不動産物件の前記三次元モデルを生成する、請求項1に記載の三次元モデル生成装置。 - 前記不動産物件の部屋タイプに関する部屋タイプ情報を取得する部屋タイプ情報取得部を備え、
前記三次元モデル生成部は、前記マッチング部により行われた前記室内構造と前記物件構造とのマッチングの結果、及び、前記部屋タイプ情報取得部により取得された前記部屋タイプ情報に基づいて、前記不動産物件の前記三次元モデルを生成する、請求項6に記載の三次元モデル生成装置。 - 前記室内画像入力受付部は、前記不動産物件に対して複数の前記室内画像の入力を受付可能であり、
前記マッチング部により行われた前記室内構造と前記物件構造とのマッチングの結果に基づいて、複数の前記室内画像どうしの接続関係及び位置関係の少なくともいずれかを推定する関係推定部を備える、請求項6に記載の三次元モデル生成装置。 - コンピュータを、
不動産物件の室内を撮像した室内画像の入力を受け付ける室内画像入力受付部と、
前記室内画像入力受付部により入力を受け付けられた前記室内画像に対してセグメンテーションを行うセグメンテーション部と、
前記セグメンテーション部により前記室内画像に対して行われたセグメンテーションの結果に基づいて、前記室内の構造である室内構造を推定する室内構造推定部と、
前記室内構造推定部により推定された前記室内構造に基づいて、前記不動産物件の三次元モデルを生成する三次元モデル生成部と、として機能させる、三次元モデル生成プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022074334A JP2023163420A (ja) | 2022-04-28 | 2022-04-28 | 三次元モデル生成装置及び三次元モデル生成プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022074334A JP2023163420A (ja) | 2022-04-28 | 2022-04-28 | 三次元モデル生成装置及び三次元モデル生成プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023163420A true JP2023163420A (ja) | 2023-11-10 |
Family
ID=88651904
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022074334A Pending JP2023163420A (ja) | 2022-04-28 | 2022-04-28 | 三次元モデル生成装置及び三次元モデル生成プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2023163420A (ja) |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010049297A1 (en) * | 1999-12-16 | 2001-12-06 | Hibscher John M. | System for online creation, playing and administering of user defined puzzles |
CN104050722A (zh) * | 2014-06-06 | 2014-09-17 | 北京航空航天大学 | 一种图像内容驱动的室内三维场景布局与颜色迁移生成方法 |
US20180365496A1 (en) * | 2017-06-17 | 2018-12-20 | Matterport, Inc. | Automated classification based on photo-realistic image/model mappings |
JP2020030609A (ja) * | 2018-08-22 | 2020-02-27 | 株式会社Lifull | 物件情報提示装置、物件情報提示方法及び物件情報提示プログラム |
JP2020038657A (ja) * | 2018-09-05 | 2020-03-12 | 楽天株式会社 | 人工知能を用いるコンピュータ実施方法、aiシステム、及びプログラム |
US20200082198A1 (en) * | 2017-05-23 | 2020-03-12 | Intel Corporation | Methods and apparatus for discriminative semantic transfer and physics-inspired optimization of features in deep learning |
US20200211284A1 (en) * | 2018-12-28 | 2020-07-02 | National Tsing Hua University | Indoor scene structural estimation system and estimation method thereof based on deep learning network |
JP2020135679A (ja) * | 2019-02-25 | 2020-08-31 | 富士通株式会社 | データセット作成方法、データセット作成装置、及びデータセット作成プログラム |
JP2021034897A (ja) * | 2019-08-26 | 2021-03-01 | 株式会社リコー | 画像処理装置、画像通信システム、画像処理方法、及びプログラム |
US20210064216A1 (en) * | 2019-08-28 | 2021-03-04 | Zillow Group, Inc. | Automated Tools For Generating Mapping Information For Buildings |
US20210225081A1 (en) * | 2020-01-17 | 2021-07-22 | Apple Inc. | Floorplan generation based on room scanning |
JP2021125007A (ja) * | 2020-02-06 | 2021-08-30 | 株式会社日立ソリューションズ | 画像処理装置、画像処理方法及び画像処理システム |
JP2021140435A (ja) * | 2020-03-04 | 2021-09-16 | 株式会社奥村組 | 損傷特定装置、損傷特定方法および損傷特定プログラム |
WO2022024803A1 (ja) * | 2020-07-31 | 2022-02-03 | ソニーグループ株式会社 | 学習モデルの生成方法、情報処理装置、情報処理システム |
JP2022022190A (ja) * | 2020-07-24 | 2022-02-03 | 株式会社リコー | 画像マッチング方法、装置及びコンピュータ読み取り可能な記憶媒体 |
-
2022
- 2022-04-28 JP JP2022074334A patent/JP2023163420A/ja active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010049297A1 (en) * | 1999-12-16 | 2001-12-06 | Hibscher John M. | System for online creation, playing and administering of user defined puzzles |
CN104050722A (zh) * | 2014-06-06 | 2014-09-17 | 北京航空航天大学 | 一种图像内容驱动的室内三维场景布局与颜色迁移生成方法 |
US20200082198A1 (en) * | 2017-05-23 | 2020-03-12 | Intel Corporation | Methods and apparatus for discriminative semantic transfer and physics-inspired optimization of features in deep learning |
US20180365496A1 (en) * | 2017-06-17 | 2018-12-20 | Matterport, Inc. | Automated classification based on photo-realistic image/model mappings |
JP2020030609A (ja) * | 2018-08-22 | 2020-02-27 | 株式会社Lifull | 物件情報提示装置、物件情報提示方法及び物件情報提示プログラム |
JP2020038657A (ja) * | 2018-09-05 | 2020-03-12 | 楽天株式会社 | 人工知能を用いるコンピュータ実施方法、aiシステム、及びプログラム |
US20200211284A1 (en) * | 2018-12-28 | 2020-07-02 | National Tsing Hua University | Indoor scene structural estimation system and estimation method thereof based on deep learning network |
JP2020135679A (ja) * | 2019-02-25 | 2020-08-31 | 富士通株式会社 | データセット作成方法、データセット作成装置、及びデータセット作成プログラム |
JP2021034897A (ja) * | 2019-08-26 | 2021-03-01 | 株式会社リコー | 画像処理装置、画像通信システム、画像処理方法、及びプログラム |
US20210064216A1 (en) * | 2019-08-28 | 2021-03-04 | Zillow Group, Inc. | Automated Tools For Generating Mapping Information For Buildings |
US20210225081A1 (en) * | 2020-01-17 | 2021-07-22 | Apple Inc. | Floorplan generation based on room scanning |
JP2021125007A (ja) * | 2020-02-06 | 2021-08-30 | 株式会社日立ソリューションズ | 画像処理装置、画像処理方法及び画像処理システム |
JP2021140435A (ja) * | 2020-03-04 | 2021-09-16 | 株式会社奥村組 | 損傷特定装置、損傷特定方法および損傷特定プログラム |
JP2022022190A (ja) * | 2020-07-24 | 2022-02-03 | 株式会社リコー | 画像マッチング方法、装置及びコンピュータ読み取り可能な記憶媒体 |
WO2022024803A1 (ja) * | 2020-07-31 | 2022-02-03 | ソニーグループ株式会社 | 学習モデルの生成方法、情報処理装置、情報処理システム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11638069B2 (en) | Automated control of image acquisition via use of mobile device user interface | |
US11252329B1 (en) | Automated determination of image acquisition locations in building interiors using multiple data capture devices | |
US10530997B2 (en) | Connecting and using building interior data acquired from mobile devices | |
US11514674B2 (en) | Automated analysis of image contents to determine the acquisition location of the image | |
US11632602B2 (en) | Automated determination of image acquisition locations in building interiors using multiple data capture devices | |
US11405549B2 (en) | Automated generation on mobile devices of panorama images for building locations and subsequent use | |
US10991161B2 (en) | Generating virtual representations | |
US11380078B2 (en) | 3-D reconstruction using augmented reality frameworks | |
US20230138762A1 (en) | Automated Building Floor Plan Generation Using Visual Data Of Multiple Building Images | |
US20230206393A1 (en) | Automated Building Information Determination Using Inter-Image Analysis Of Multiple Building Images | |
JP6872660B1 (ja) | 情報処理装置及び、プログラム | |
JP2023163420A (ja) | 三次元モデル生成装置及び三次元モデル生成プログラム | |
JP6830561B1 (ja) | 情報処理装置、情報処理方法、情報処理システム、情報処理プログラム | |
US20240161348A1 (en) | Automated Inter-Image Analysis Of Multiple Building Images For Building Information Determination | |
EP4367640A1 (en) | Methods, storage media, and systems for augmenting data or models | |
CN115830237A (zh) | 三维场景处理方法、图像处理方法及电子设备 | |
CN116229583A (zh) | 驱动信息生成、驱动方法、装置、电子设备以及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20220507 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20220524 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230324 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20230324 |
|
RD13 | Notification of appointment of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7433 Effective date: 20230324 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20230329 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230502 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230531 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230706 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230904 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20230908 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20231120 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20231201 |