WO2022098252A1 - Способ трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности - Google Patents
Способ трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности Download PDFInfo
- Publication number
- WO2022098252A1 WO2022098252A1 PCT/RU2020/000590 RU2020000590W WO2022098252A1 WO 2022098252 A1 WO2022098252 A1 WO 2022098252A1 RU 2020000590 W RU2020000590 W RU 2020000590W WO 2022098252 A1 WO2022098252 A1 WO 2022098252A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- create
- poly
- setting
- virtual space
- virtual reality
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 15
- 238000005516 engineering process Methods 0.000 title claims abstract description 13
- 238000012800 visualization Methods 0.000 title claims abstract description 10
- 230000015572 biosynthetic process Effects 0.000 claims description 2
- 238000005286 illumination Methods 0.000 description 3
- 238000011111 UV-scan method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/10—Geometric CAD
- G06F30/13—Architectural design, e.g. computer-aided architectural design [CAAD] related to design of buildings, bridges, landscapes, production plants or roads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/08—Volume rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
Definitions
- the invention relates to the field of data processing, in particular to the processing and generation of image data, and in particular to a method for three-dimensional visualization of real estate objects based on virtual reality technologies.
- a system for designing objects in a virtual reality environment in real time is known (System for designing objects in a virtual reality environment in real time: patent RU2656584, Russian Federation, application RU2017108366, application 14.03.2017, publ. 05.06.2018).
- the system contains at least one display device configured to: display at least one three-dimensional image of an object in real time, track the movement of a marker, receive data from a computing device, receive data from a positioning device, as well as at least one positioning device, configured to: measure the position and orientation of at least one limb of the user, update the position of the object in the virtual reality environment and display it on the display device, receive data from the computing device.
- the method for designing objects in a virtual reality environment, describing the operation of the above system was taken as a prototype.
- the technical problem is the need to develop a method for three-dimensional visualization of real estate objects based on virtual reality technologies, devoid of the above disadvantages.
- the technical result is to increase the accuracy of three-dimensional visualization of real estate objects.
- the technical result is achieved by the fact that in the method of three-dimensional visualization of real estate objects based on virtual reality technologies, during which information about the object is received, the object is analyzed, a virtual space is formed, according to the invention, during the analysis of the object, the information necessary to create 3D models is filtered, then on at the stage of virtual space formation, preparatory drawings of the object are formed and loaded into a 3D package, key image references are determined, first high-poly object geometry is created, and then low-poly, then a map of UV coordinates is created, raster or procedural textures are projected onto the surface of a three-dimensional object in accordance with the map of UV coordinates, export a 3D model with low-poly geometry and texture maps, set up assets, including setting up a UV channel for a shadow map, setting up object collisions and setting up a shader, then create dynamic objects, generate a house adjoining territory, create spherical panoramas to create a view from the window, set up lighting, arrange reflection capture, arrange assets, assign
- the concept of virtual space is taken to mean a set of virtual reality objects.
- object means a real estate object.
- the inventive method is carried out as follows.
- information about the real estate object is received, which includes an image of all the premises of the object from various angles and, if necessary, a description of the object. Then the information is analyzed and filtered in order to select the data necessary for the creation of 3D models and further visualization. Then preparatory drawings are formed, including only the contours of the walls and the location of windows and doors, which are loaded into the 3D package at the stage of wall modeling. Then the key references of images and / or drawings are determined, which specialists are guided by at the next stages of asset creation. Next, the geometry of the high-poly object is created, then the low-poly.
- the high-poly model contains all the details of the object, which are later transferred (projected) to the low-poly model and recorded in the normal map.
- a UV scan is created in accordance with accepted standards.
- raster or procedural textures are projected onto the surface of a three-dimensional object in accordance with the UV-coordinate map.
- the 3D model is exported, which includes low-poly geometry and texture maps.
- the asset setup stage is carried out, which includes setting up the UV channel for the TeHe map (lightmap), setting up object collisions and setting up the shader.
- TeHefi Lightmap maps
- Prepared assets (furniture, lamps, decorative elements, etc.) are placed around the room in accordance with the plans and the chosen design.
- shaders are assigned to the surface. Building models that are visible from windows and balconies are added to the scene, shadow maps and shaders are configured for them, teleportation points are placed according to the level (apartment), their coordinates are transmitted to the remote control interface.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Geometry (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Architecture (AREA)
- Structural Engineering (AREA)
- Civil Engineering (AREA)
- Software Systems (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Evolutionary Computation (AREA)
- Human Computer Interaction (AREA)
- Processing Or Creating Images (AREA)
Abstract
Изобретение относится к области обработки данных, в частности к способу трехмерной визуализации объектов недвижимости на основе технологий виртуальной реальности. Способ, в ходе которого принимают информацию об объекте, анализируют объект, формируют виртуальное пространство и оценивают соответствие полученного виртуального пространства первоначальной информации об объекте. При этом в ходе анализа объекта фильтруют информацию необходимую для создания 3D моделей. Кроме того, на этапе формирования виртуального пространства формируют и загружают в 3D пакет подготовительные чертежи, определяют ключевые референсы изображений, создают high-poly и low-poly геометрию объекта, затем создают карту UV-координат. После производят проецирования растровых или процедурных текстур на поверхности трехмерного объекта в соответствии с картой UV-координат, экспортируют 3D модель с low-poly геометрией и текстурными картами, настраивают ассеты, в том числе осуществляют настройку UV-канала для карты теней, настройку коллизий объекта и настройку шейдера. Далее создают динамические объекты, генерируют придомовую территорию, создают сферические панорамы для создания вида из окна, устанавливают освещение, расстанавливают захват отражений, расставляют ассеты, назначают шейдеры.
Description
СПОСОБ ТРЁХМЕРНОЙ ВИЗУАЛИЗАЦИИ ОБЪЕКТОВ НЕДВИЖИМОСТИ НА ОСНОВЕ ТЕХНОЛОГИЙ ВИРТУАЛЬНОЙ РЕАЛЬНОСТИ
ОБЛАСТЬ ТЕХНИКИ
Изобретение относится к области обработки данных, в частности к обработке и генерации данных изображения, а именно к способу трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности.
ПРЕДШЕСТВУЮЩИЙ УРОВЕНЬ ТЕХНИКИ
Известен способ построения виртуальной реальности на основе трехмерных дизайнов (Использование технологии виртуальной реальности на основе трехмерных дизайнов, созданных с помощью программного обеспечения для трехмерного проектирования: патент US9367950, Соединенные Штаты Америки, заявка US201414316774, заявл. 26.06.2014, опубл. 14.06.2016), который включает автоматическое получение информации, включающий трехмерный дизайн, отбор информации, необходимой для построения виртуальной реальности и генерирование виртуальной реальности.
Известна система проектирования объектов в среде виртуальной реальности в реальном времени (Система проектирования объектов в среде виртуальной реальности в реальном времени: патент RU2656584, Российская Федерация, заявка RU2017108366, заявл. 14.03.2017, опубл. 05.06.2018). Система содержит по меньшей мере одно устройство отображения, выполненное с возможностью: отображения в реальном времени по меньшей мере одного трехмерного изображения объекта, отслеживания движения маркера, получения данных от вычислительного устройства, получения данных от устройства позиционирования, а также по меньшей мере одно устройство позиционирования, выполненное с возможностью: измерения положения и ориентации по меньшей мере одной конечности пользователя, обновления положения объекта в среде виртуальной реальности и его отображения на устройстве отображения, получения данных от вычислительного устройства. Способ проектирования объектов в среде виртуальной реальности, описывающий работу вышеприведенной системы, был принят за прототип.
Недостатком вышеприведенных аналогов и прототипа является относительно низкая точность трёхмерной визуализации объектов недвижимости. Это обусловлено отсутствием построение карты UV-координат, отсутствием системы поиска референсов изображений и т.п. Вышеприведенная система и реализующий её способ изначально не предназначены для такой точной проработки именно виртуальных объектов недвижимости, что и приводит к потере точности моделирования.
РАСКРЫТИЕ СУЩНОСТИ ИЗОБРЕТЕНИЯ
Технической проблемой является необходимость разработки способа трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности, лишенного вышеприведенных недостатков.
Технический результат заключается в повышении точности трёхмерной визуализации объектов недвижимости.
Технический результат достигается тем, что в способе трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности, в ходе которого принимают информацию об объекте, анализируют объект, формируют виртуальное пространство, согласно изобретению в ходе анализа объекта фильтруют информацию, необходимую для создания 3D моделей, затем на этапе формирования виртуального пространства формируют и загружают в 3D пакет подготовительные чертежи объекта, определяют ключевые референсы изображений, создают сначала high-poly геометрию объекта, а затем low-poly, затем создают карту UV-координат, производят проецирования растровых или процедурных текстур на поверхности трёхмерного объекта в соответствии с картой UV-координат, экспортируют 3D модель с low-poly геометрией и текстурными картами, настраивают ассеты, в том числе осуществляют настройку UV-канала для карты теней, настройку коллизий объекта и настройку шейдера, далее создают динамические объекты, генерируют придомовую территорию, создают сферические панорамы для создания вида из окна, устанавливают освещение, расстанавливают захват отражений, расставляют ассеты, назначают шейдеры, добавляют на сцену модели видимых из объекта соседних зданий и настраивают для них карты теней и шейдеры.
Для целей настоящей заявки под понятием виртуального пространства принимают совокупность объектов виртуальной реальности.
Для целей настоящей заявки под понятием объект принимается объект недвижимости.
ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ
Заявляемый способ осуществляют следующим образом.
В начале принимают информацию об объекте недвижимости, которая включает изображение всех помещений объекта в различных ракурсах и, при необходимости, описание объекта. Затем информация анализируется и фильтруется с целью отбора данных, необходимых для создания ЗВ-моделей и дальнейшей визуализации. Затем формируются подготовительные чертежи, включающие только контуры стен и местоположение окон и дверей, которые на этапе моделирования стен загружаются в 3D пакет. Затем определяются ключевые референсы изображений и/или чертежей на которые специалисты ориентируется
на дальнейших этапах создания ассетов. Далее создается геометрия объекта high-poly, затем low-poly. High-poly модель содержит все детали объекта, которые в дальнейшем переносятся(проецируются) на low-poly модель и записываются в карту нормалей. Для правильного отображения карты нормалей создается UV-развертка в соответствии с принятыми стандартами. После производится производится проецирование растровых или процедурных текстур на поверхности трёхмерного объекта в соответствии с картой UV- координат. Затем осуществляют экспорт 3D модели, которая включает в себя low-poly геометрию и текстурные карты. Далее проводят этап настройки ассета, который включает в себя настройку UV-канала для карты TeHe (lightmap), настройку коллизий объекта и настройку шейдера. После этого определяются динамические объекты, с которыми пользователь может взаимодействовать (межкомнатные двери, окна) и генерируется придомовая територия (здания, дворы), при этом для создания вида из окна квартиры используются сферические панорамы. Затем устанавливается базовое освещение (солнечный CBeT(direct light) и глобальное освещение (He6o(skylight))). На этом этапе в качестве глобального освещения устанавливается сферическая панорама снятая с точки в пространстве соответствующей позиции будущей квартиры. Следующим этапом производится расстановка reflection captures (захват отражений, предназначенных для моделирования отражений на поверхности объекта). При импорте для каждой 3D модели настраиваются коллизии и UV канал для карты теней. Свет, получаемый от источников освещения просчитывается заранее, для этого и используются карты TeHefi(lightmap), так как они хранят информацию об освещенности конкретного объекта в пространстве. Подготовленные ассеты (мебель, светильники, элементы декора и т.п.) расставляются по помещению в соответствии с планами и выбранным дизайном. Далее на поверхности назначаются шейдеры. На сцену добавляются модели зданий, которые видны из окон и с балконов, для них настраиваются карты теней и шейдеры, точки телепортации расставляются по уровню(квартире) их координаты передаются в интерфейс удаленного управления.
В процессе осуществления способа используют следующие методы и технологии:
- Технологии использования динамических объектов и инструментов взаимодействия пользователя, навигации и точек телепортации.
- Технологии специальных уровней (stream level), которые загружаются непосредственно в момент, когда пользователь их видит, например Planar reflections, позволяет сделать отражения в зеркалах намного более реалистичными, чем при помощи Reflection Captures.
- Использование для создания виртуальных туров возможности установки «хотспотов», что позволяет приложению корректно отображать локацию объекта при любом положении камеры.
- Технология 2-х уровнего кэширования - lazy кэширование с превью разрешением для всех кадров в пределах траектории и предсказание будущего перехода с кэшированием соответствующего рендера.
- Использование кубической карты для отображения трёхмерной координаты текстуры в тексель при построении изображений отражения окружения в поверхности объекта.
Claims
ФОРМУЛА ИЗОБРЕТЕНИЯ
Способ трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности, в ходе которого принимают информацию об объекте, анализируют объект, формируют виртуальное пространство отличающийся тем, что в ходе анализа объекта фильтруют информацию, необходимую для создания 3D моделей, затем на этапе формирования виртуального пространства формируют и загружают в 3D пакет подготовительные чертежи, определяют ключевые референсы изображений, создают сначала high-poly геометрию объекта, а затем low-poly, затем создают карту UV-координат, производят проецирования растровых или процедурных текстур на поверхности трёхмерного объекта в соответствии с картой UV-координат, экспортируют 3D модель с low-poly геометрией и текстурными картами, настраивают ассеты, в том числе осуществляют настройку UV-канала для карты теней, настройку коллизий объекта и настройку шейдера, далее создают динамические объекты, генерируют придомовую территорию, создают сферические панорамы для создания вида из окна, устанавливают освещение, расставляют захват отражений и ассеты, назначают шейдеры, добавляют на сцену модели видимых из объекта соседних зданий и настраивают для них карты теней и шейдеры.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/RU2020/000590 WO2022098252A1 (ru) | 2020-11-06 | 2020-11-06 | Способ трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/RU2020/000590 WO2022098252A1 (ru) | 2020-11-06 | 2020-11-06 | Способ трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2022098252A1 true WO2022098252A1 (ru) | 2022-05-12 |
Family
ID=81458121
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/RU2020/000590 WO2022098252A1 (ru) | 2020-11-06 | 2020-11-06 | Способ трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности |
Country Status (1)
| Country | Link |
|---|---|
| WO (1) | WO2022098252A1 (ru) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117576326A (zh) * | 2024-01-16 | 2024-02-20 | 深圳大学 | 一种三维产权体的动态交互可视化方法及系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120296610A1 (en) * | 2011-05-17 | 2012-11-22 | Ebenezer Hailemariam | Occupant centric capture and visualization of building performance data |
| US9367950B1 (en) * | 2014-06-26 | 2016-06-14 | IrisVR, Inc. | Providing virtual reality experiences based on three-dimensional designs produced using three-dimensional design software |
| RU2656584C1 (ru) * | 2017-03-14 | 2018-06-05 | Общество с ограниченной ответственностью "Новый мир развлечений" | Система проектирования объектов в среде виртуальной реальности в реальном времени |
| US10553012B2 (en) * | 2018-04-16 | 2020-02-04 | Facebook Technologies, Llc | Systems and methods for rendering foveated effects |
| CN110910484A (zh) * | 2019-12-03 | 2020-03-24 | 上海世长信息科技有限公司 | 一种基于slam的二维图像到三维实景中的物体贴图方法 |
-
2020
- 2020-11-06 WO PCT/RU2020/000590 patent/WO2022098252A1/ru active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120296610A1 (en) * | 2011-05-17 | 2012-11-22 | Ebenezer Hailemariam | Occupant centric capture and visualization of building performance data |
| US9367950B1 (en) * | 2014-06-26 | 2016-06-14 | IrisVR, Inc. | Providing virtual reality experiences based on three-dimensional designs produced using three-dimensional design software |
| RU2656584C1 (ru) * | 2017-03-14 | 2018-06-05 | Общество с ограниченной ответственностью "Новый мир развлечений" | Система проектирования объектов в среде виртуальной реальности в реальном времени |
| US10553012B2 (en) * | 2018-04-16 | 2020-02-04 | Facebook Technologies, Llc | Systems and methods for rendering foveated effects |
| CN110910484A (zh) * | 2019-12-03 | 2020-03-24 | 上海世长信息科技有限公司 | 一种基于slam的二维图像到三维实景中的物体贴图方法 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117576326A (zh) * | 2024-01-16 | 2024-02-20 | 深圳大学 | 一种三维产权体的动态交互可视化方法及系统 |
| CN117576326B (zh) * | 2024-01-16 | 2024-05-07 | 深圳大学 | 一种三维产权体的动态交互可视化方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2017221461A1 (ja) | 複合現実環境を作成するためのシステム等 | |
| JP4880350B2 (ja) | 実マーカオブジェクトを識別する拡張現実システム | |
| El-Hakim et al. | Detailed 3D reconstruction of large-scale heritage sites with integrated techniques | |
| Haala et al. | 3D urban GIS from laser altimeter and 2D map data | |
| CN101542538B (zh) | 用来对光进行建模的方法与系统 | |
| Khoshelham et al. | Indoor mapping eyewear: geometric evaluation of spatial mapping capability of HoloLens | |
| US20090237396A1 (en) | System and method for correlating and synchronizing a three-dimensional site model and two-dimensional imagery | |
| US20070118805A1 (en) | Virtual environment capture | |
| US11704866B2 (en) | Systems and methods for visualization of building structures | |
| US20070065002A1 (en) | Adaptive 3D image modelling system and apparatus and method therefor | |
| CN105190703A (zh) | 使用光度立体来进行3d环境建模 | |
| Brown et al. | An automated laser scan survey of the Upper Palaeolithic rock shelter of Cap Blanc | |
| Sequeira et al. | 3D reality modelling: Photo-realistic 3D models of real world scenes | |
| EP1745442A1 (en) | Adaptive 3d image modelling system and apparatus and method thereof | |
| JP2023546739A (ja) | シーンの３次元モデルを生成するための方法、装置、およびシステム | |
| KR102276451B1 (ko) | Gis를 이용한 모델링 장치 및 방법 | |
| WO2022098252A1 (ru) | Способ трёхмерной визуализации объектов недвижимости на основе технологий виртуальной реальности | |
| Klein et al. | View planning for the 3d modelling of real world scenes | |
| Klein et al. | The view-cube: An efficient method of view planning for 3d modelling from range data | |
| CN113269892A (zh) | 景观和地下基础设施的增强查看 | |
| Liu et al. | Reexamining the Old Depot Museum in Selma, Alabama, USA | |
| El-Hakim et al. | 3D reconstruction of complex architectures from multiple data | |
| Beraldin et al. | Exploring a Byzantine crypt through a high-resolution texture mapped 3D model: combining range data and photogrammetry | |
| Sammartano | Suitability of 3D dense models from rapid mapping strategies for Cultural Heritage documentation and conservation | |
| WO2005081191A1 (en) | Adaptive 3d image modelling system and appartus and method therefor |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20960939 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 20960939 Country of ref document: EP Kind code of ref document: A1 |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 20960939 Country of ref document: EP Kind code of ref document: A1 |
|
| 32PN | Ep: public notification in the ep bulletin as address of the adressee cannot be established |
Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 14.11.2023) |