RU2020114757A - Способ и устройство для изменения атрибутов точки трехмерной (3d) сцены - Google Patents
Способ и устройство для изменения атрибутов точки трехмерной (3d) сцены Download PDFInfo
- Publication number
- RU2020114757A RU2020114757A RU2020114757A RU2020114757A RU2020114757A RU 2020114757 A RU2020114757 A RU 2020114757A RU 2020114757 A RU2020114757 A RU 2020114757A RU 2020114757 A RU2020114757 A RU 2020114757A RU 2020114757 A RU2020114757 A RU 2020114757A
- Authority
- RU
- Russia
- Prior art keywords
- points
- point
- attributes
- depth
- image
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/529—Depth or shape recovery from texture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/56—Particle system, point based geometry or rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2004—Aligning objects, relative positioning of parts
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- Signal Processing (AREA)
- Architecture (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Geometry (AREA)
- Processing Or Creating Images (AREA)
- Image Generation (AREA)
- Image Processing (AREA)
Claims (18)
1. Способ изменения атрибутов одной или более точек трехмерной сцены, причем упомянутые атрибуты включают в себя атрибут глубины и атрибут текстуры, хранящиеся, соответственно, в изображении глубины и изображении текстуры, причем способ включает в себя:
идентификацию по меньшей мере первой точки упомянутой трехмерной сцены, информация о глубине которой является несогласованной по отношению к информации о глубине, связанной с окрестностью упомянутой по меньшей мере первой точки в упомянутом изображении глубины;
определение того, являются ли атрибуты упомянутой по меньшей мере первой точки корректируемыми, путем анализа окрестности упомянутой по меньшей мере первой точки в упомянутом изображении глубины и в упомянутом изображении текстуры;
для каждой первой точки, имеющей корректируемые атрибуты - изменение упомянутых атрибутов, хранящихся в изображении глубины и/или изображении текстуры, в соответствии с окрестностью в упомянутом изображении глубины и/или в упомянутом изображении текстуры.
2. Способ по п. 1, в котором идентификация включает в себя определение в упомянутом изображении глубины того, какие точки, называемые вторыми точками, из окрестности упомянутой по меньшей мере первой точки имеют отличие в глубине по отношению к упомянутой по меньшей мере первой точке, большее, чем первое определенное значение, причем упомянутая по меньшей мере первая точка идентифицируется, когда число вторых точек больше второго определенного значения.
3. Способ по одному из пп. 1 и 2, в котором определение того, являются ли атрибуты корректируемыми, включает в себя определение в упомянутом изображении глубины того, какие точки, называемые третьими точками, из окрестности упомянутой по меньшей мере первой точки имеют отличие в глубине по отношению к упомянутой по меньшей мере первой точке, меньшее, чем третье определенное значение; определение в упомянутом изображении текстуры того, какие точки, называемые четвертыми точками, из окрестности упомянутой по меньшей мере первой точки применимы для изменения атрибутов упомянутой по меньшей мере первой точки; причем упомянутые атрибуты определяются как корректируемые, когда число третьих точек больше, чем пятое определенное значение, и когда число четвертых точек больше или равно 1.
4. Способ по п. 3, в котором определение четвертых точек включает в себя определение - среди точек окрестности, называемых подходящими четвертыми точками, упомянутой по меньшей мере первой точки в упомянутом изображении текстуры — того, какие точки, называемые пятыми точками, из окрестности подходящих четвертых точек в изображении глубины имеют отличие в глубине по отношению к упомянутым подходящим четвертым точкам, меньшее, чем четвертое определенное значение, причем подходящая четвертая точка является четвертой точкой, когда число пятых точек больше, чем шестое определенное значение.
5. Способ по одному из пп. 3 и 4, в котором упомянутые атрибуты изменяются на основе атрибутов упомянутой по меньшей мере одной четвертой точки.
6. Способ по одному из пп. 1-5, дополнительно включающий в себя добавление упомянутой по меньшей мере первой точки, имеющей измененные атрибуты, в список точек, имеющих атрибуты, применимые для изменения атрибутов дополнительной точки упомянутой трехмерной сцены, идентифицированной как имеющей информацию о глубине, несогласованную по отношению к информации о глубине, связанной с ее окрестностью в упомянутом изображении глубины.
7. Способ по одному из пп. 1-6, в котором упомянутое изображение глубины и упомянутое изображение текстуры декодируются из принимаемого битового потока.
8. Способ по одному из пп. 1-7, в котором упомянутые одна или более точек трехмерной сцены являются частью облака точек.
9. Устройство, выполненное с возможностью изменения атрибутов одной или более точек трехмерной сцены, причем упомянутые атрибуты включают в себя атрибут глубины и атрибут текстуры, хранящиеся, соответственно, в изображении глубины и изображении текстуры, причем устройство содержит память, связанную по меньшей мере с процессором, выполненным с возможностью идентификации по меньшей мере первой точки упомянутой трехмерной сцены, информация о глубине которой является несогласованной по отношению к информации о глубине, связанной с окрестностью упомянутой по меньшей мере первой точки в упомянутом изображении глубины; определения того, являются ли атрибуты упомянутой по меньшей мере первой точки корректируемыми, путем анализа окрестности упомянутой по меньшей мере первой точки в упомянутом изображении глубины и в упомянутом изображении текстуры; для каждой первой точки, имеющей корректируемые атрибуты - изменения упомянутых атрибутов, хранящихся в изображении глубины и/или изображении текстуры, в соответствии с окрестностью в упомянутом изображении глубины и/или в упомянутом изображении текстуры.
10. Устройство по п. 9, в котором указанный по меньшей мере процессор дополнительно выполнен с возможностью определения в упомянутом изображении глубины того, какие точки, называемые вторыми точками, из окрестности упомянутой по меньшей мере первой точки имеют отличие в глубине по отношению к упомянутой по меньшей мере первой точке, большее, чем первое определенное значение, причем упомянутая по меньшей мере первая точка идентифицируется, когда число вторых точек больше второго определенного значения.
11. Устройство по одному из пп. 9 и 10, в котором для определения того, являются ли атрибуты корректируемыми, указанный по меньшей мере процессор дополнительно выполнен с возможностью определения в упомянутом изображении глубины того, какие точки, называемые третьими точками, из окрестности упомянутой по меньшей мере первой точки имеют отличие в глубине по отношению к упомянутой по меньшей мере первой точке, меньшее, чем третье определенное значение; определения в упомянутом изображении текстуры того, какие точки, называемые четвертыми точками, из окрестности упомянутой по меньшей мере первой точки применимы для изменения атрибутов упомянутой по меньшей мере первой точки; причем упомянутые атрибуты определяются как корректируемые, когда число третьих точек больше, чем пятое определенное значение, и когда число четвертых точек больше или равно 1.
12. Устройство по п. 11, в котором указанный по меньшей мере процессор дополнительно выполнен с возможностью определения - среди точек окрестности, называемых подходящими четвертыми точками, упомянутой по меньшей мере первой точки в упомянутом изображении текстуры — того, какие точки, называемые пятыми точками, из окрестности подходящих четвертых точек в изображении глубины имеют отличие в глубине по отношению к упомянутым подходящим четвертым точкам, меньшее, чем четвертое определенное значение, причем подходящая четвертая точка является четвертой точкой, когда число пятых точек больше, чем шестое определенное значение.
13. Устройство по одному из пп. 11 и 12, в котором упомянутые атрибуты изменяются на основе атрибутов упомянутой по меньшей мере одной четвертой точки.
14. Устройство по одному из пп. 9-13, в котором указанный по меньшей мере процессор дополнительно выполнен с возможностью добавления упомянутой по меньшей мере первой точки, имеющей измененные атрибуты, в список точек, имеющих атрибуты, применимые для изменения атрибутов дополнительной точки упомянутой трехмерной сцены, идентифицированной как имеющей информацию о глубине, несогласованную по отношению к информации о глубине, связанной с ее окрестностью в упомянутом изображении глубины.
15. Устройство по одному из пп. 9-14, в котором указанный по меньшей мере процессор дополнительно выполнен с возможностью декодирования упомянутого изображения глубины и упомянутого изображения текстуры из принимаемого битового потока.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP17306302.5 | 2017-09-29 | ||
| EP17306302.5A EP3462415A1 (en) | 2017-09-29 | 2017-09-29 | Method and device for modifying attributes of points of a 3d scene |
| PCT/US2018/053073 WO2019067687A1 (en) | 2017-09-29 | 2018-09-27 | METHOD AND DEVICE FOR MODIFYING POINT ATTRIBUTES OF A 3D SCENE |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2020114757A true RU2020114757A (ru) | 2021-10-29 |
Family
ID=60119964
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2020114757A RU2020114757A (ru) | 2017-09-29 | 2018-09-27 | Способ и устройство для изменения атрибутов точки трехмерной (3d) сцены |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US20200273258A1 (ru) |
| EP (2) | EP3462415A1 (ru) |
| JP (1) | JP2020536300A (ru) |
| CN (1) | CN111213182A (ru) |
| RU (1) | RU2020114757A (ru) |
| WO (1) | WO2019067687A1 (ru) |
Families Citing this family (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11818401B2 (en) | 2017-09-14 | 2023-11-14 | Apple Inc. | Point cloud geometry compression using octrees and binary arithmetic encoding with adaptive look-up tables |
| US10861196B2 (en) | 2017-09-14 | 2020-12-08 | Apple Inc. | Point cloud compression |
| US10897269B2 (en) | 2017-09-14 | 2021-01-19 | Apple Inc. | Hierarchical point cloud compression |
| US11113845B2 (en) | 2017-09-18 | 2021-09-07 | Apple Inc. | Point cloud compression using non-cubic projections and masks |
| US10909725B2 (en) | 2017-09-18 | 2021-02-02 | Apple Inc. | Point cloud compression |
| US10607373B2 (en) | 2017-11-22 | 2020-03-31 | Apple Inc. | Point cloud compression with closed-loop color conversion |
| US10699444B2 (en) | 2017-11-22 | 2020-06-30 | Apple Inc | Point cloud occupancy map compression |
| US11010928B2 (en) | 2018-04-10 | 2021-05-18 | Apple Inc. | Adaptive distance based point cloud compression |
| US10939129B2 (en) | 2018-04-10 | 2021-03-02 | Apple Inc. | Point cloud compression |
| US10909727B2 (en) | 2018-04-10 | 2021-02-02 | Apple Inc. | Hierarchical point cloud compression with smoothing |
| US10909726B2 (en) | 2018-04-10 | 2021-02-02 | Apple Inc. | Point cloud compression |
| US11017566B1 (en) | 2018-07-02 | 2021-05-25 | Apple Inc. | Point cloud compression with adaptive filtering |
| US11202098B2 (en) * | 2018-07-05 | 2021-12-14 | Apple Inc. | Point cloud compression with multi-resolution video encoding |
| US11012713B2 (en) | 2018-07-12 | 2021-05-18 | Apple Inc. | Bit stream structure for compressed point cloud data |
| US11386524B2 (en) | 2018-09-28 | 2022-07-12 | Apple Inc. | Point cloud compression image padding |
| US11367224B2 (en) | 2018-10-02 | 2022-06-21 | Apple Inc. | Occupancy map block-to-patch information compression |
| US11430155B2 (en) | 2018-10-05 | 2022-08-30 | Apple Inc. | Quantized depths for projection point cloud compression |
| US11057564B2 (en) | 2019-03-28 | 2021-07-06 | Apple Inc. | Multiple layer flexure for supporting a moving image sensor |
| US11627314B2 (en) | 2019-09-27 | 2023-04-11 | Apple Inc. | Video-based point cloud compression with non-normative smoothing |
| US11562507B2 (en) | 2019-09-27 | 2023-01-24 | Apple Inc. | Point cloud compression using video encoding with time consistent patches |
| US11538196B2 (en) | 2019-10-02 | 2022-12-27 | Apple Inc. | Predictive coding for point cloud compression |
| US11895307B2 (en) | 2019-10-04 | 2024-02-06 | Apple Inc. | Block-based predictive coding for point cloud compression |
| US11798196B2 (en) | 2020-01-08 | 2023-10-24 | Apple Inc. | Video-based point cloud compression with predicted patches |
| US11625866B2 (en) | 2020-01-09 | 2023-04-11 | Apple Inc. | Geometry encoding using octrees and predictive trees |
| US11615557B2 (en) | 2020-06-24 | 2023-03-28 | Apple Inc. | Point cloud compression using octrees with slicing |
| US11620768B2 (en) | 2020-06-24 | 2023-04-04 | Apple Inc. | Point cloud geometry compression using octrees with multiple scan orders |
| JP2022137826A (ja) * | 2021-03-09 | 2022-09-22 | 株式会社Mawari | ３ｄオブジェクトのストリーミング方法、装置、及びプログラム |
| US11948338B1 (en) | 2021-03-29 | 2024-04-02 | Apple Inc. | 3D volumetric content encoding using 2D videos and simplified 3D meshes |
| CN114331915B (zh) * | 2022-03-07 | 2022-08-05 | 荣耀终端有限公司 | 图像处理方法及电子设备 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8270752B2 (en) * | 2009-03-17 | 2012-09-18 | Mitsubishi Electric Research Laboratories, Inc. | Depth reconstruction filter for depth coding videos |
| JP6143747B2 (ja) * | 2011-06-24 | 2017-06-07 | ソフトキネティック ソフトウェア | 深度測定の品質の向上 |
| US9117281B2 (en) * | 2011-11-02 | 2015-08-25 | Microsoft Corporation | Surface segmentation from RGB and depth images |
| CN105096259B (zh) * | 2014-05-09 | 2018-01-09 | 株式会社理光 | 深度图像的深度值恢复方法和系统 |
| US9626810B2 (en) * | 2015-08-25 | 2017-04-18 | Hyundai Motor Company | Method for providing telematics service |
| US9818232B2 (en) * | 2015-08-26 | 2017-11-14 | Adobe Systems Incorporated | Color-based depth smoothing of scanned 3D model to enhance geometry in 3D printing |
-
2017
- 2017-09-29 EP EP17306302.5A patent/EP3462415A1/en not_active Withdrawn
-
2018
- 2018-09-27 WO PCT/US2018/053073 patent/WO2019067687A1/en unknown
- 2018-09-27 RU RU2020114757A patent/RU2020114757A/ru unknown
- 2018-09-27 US US16/651,302 patent/US20200273258A1/en not_active Abandoned
- 2018-09-27 EP EP18785490.6A patent/EP3688722A1/en not_active Withdrawn
- 2018-09-27 CN CN201880064604.9A patent/CN111213182A/zh active Pending
- 2018-09-27 JP JP2020515188A patent/JP2020536300A/ja active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| WO2019067687A1 (en) | 2019-04-04 |
| CN111213182A (zh) | 2020-05-29 |
| EP3462415A1 (en) | 2019-04-03 |
| JP2020536300A (ja) | 2020-12-10 |
| EP3688722A1 (en) | 2020-08-05 |
| US20200273258A1 (en) | 2020-08-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2020114757A (ru) | Способ и устройство для изменения атрибутов точки трехмерной (3d) сцены | |
| US9171373B2 (en) | System of image stereo matching | |
| US9378583B2 (en) | Apparatus and method for bidirectionally inpainting occlusion area based on predicted volume | |
| KR20190032501A (ko) | 2차원 코드 내 위치 정보를 인지하기 위한 방법 및 시스템 | |
| GB2566152A (en) | Methods and systems for processing point-cloud data with a line scanner | |
| WO2015051269A3 (en) | Generating augmented reality content for unknown objects | |
| JP2020536325A5 (ru) | ||
| JP2016517682A5 (ru) | ||
| RU2015113734A (ru) | Способ и устройство для управления фоновым приложением и терминальным устройством | |
| WO2017056089A3 (en) | Method and a system for identifying reflective surfaces in a scene | |
| CA2961701C (en) | Method and system for determining the local quality of surface data extracted from volume data | |
| EP2767931A3 (en) | Electronic device and method of determining descriptor thereof | |
| RU2010118466A (ru) | Способ и устройство для обработки карты глубины | |
| EP2874395A3 (en) | Method, apparatus and computer program product for disparity estimation | |
| JP2013196703A5 (ru) | ||
| JP2017517818A5 (ru) | ||
| TR201910988T4 (tr) | Bir video görüntüsü ile ilişkili bir audio sinyalini işlemden geçirmek için yöntem ve cihaz | |
| PH12019501920A1 (en) | Image processing method and apparatus | |
| EP2797051A3 (en) | Image saliency map determination device, method, program, and recording medium | |
| SG11201909071UA (en) | Image processing methods and apparatuses, computer readable storage media and eletronic devices | |
| RU2020103459A (ru) | Устройство и способ для формирования изображения | |
| WO2017056088A3 (en) | Method and system for recalibrating sensing devices without familiar targets | |
| PH12019502369A1 (en) | High-level signalling for fisheye video data | |
| RU2016151372A (ru) | Способ и устройство кодирования изображений с эффектом глубины при кодировании видео | |
| RU2015102525A (ru) | Сегментация изображения для верификации данных |