RU2019120831A - Устройство и способ для генерирования изображения интенсивности светового излучения - Google Patents
Устройство и способ для генерирования изображения интенсивности светового излучения Download PDFInfo
- Publication number
- RU2019120831A RU2019120831A RU2019120831A RU2019120831A RU2019120831A RU 2019120831 A RU2019120831 A RU 2019120831A RU 2019120831 A RU2019120831 A RU 2019120831A RU 2019120831 A RU2019120831 A RU 2019120831A RU 2019120831 A RU2019120831 A RU 2019120831A
- Authority
- RU
- Russia
- Prior art keywords
- depth
- light intensity
- determining
- map
- mesh
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/04—Texture mapping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/50—Lighting effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/28—Indexing scheme for image data processing or generation, in general involving image processing hardware
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Graphics (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Image Generation (AREA)
- Processing Or Creating Images (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Claims (35)
1. Способ генерирования изображения интенсивности светового излучения, причем способ включает в себя:
прием (301) первой карты текстур и первой сетки, представляющих сцену, из первой точки наблюдения;
прием (303) второй карты текстур и второй сетки, представляющих сцену, из второй точки наблюдения;
определение (305) изображения интенсивности светового излучения, представляющего сцену, из третьей точки наблюдения в ответ на первую карту текстур, первую сетку, вторую карту текстур и вторую сетку;
причем определение (305) изображения интенсивности светового излучения включает в себя для первого положения в изображении интенсивности светового излучения выполнение этапов:
определения (401) первого значения интенсивности светового излучения для первого положения с помощью преобразования точки наблюдения на основе первой карты текстур и первой сетки;
определения (403) второго значения интенсивности светового излучения для первого положения с помощью преобразования точки наблюдения на основе второй карты текстур и второй сетки;
определения (405) значения интенсивности светового излучения для изображения интенсивности светового излучения в первом положении с помощью взвешенной комбинации первого значения интенсивности светового излучения и второго значения интенсивности светового излучения; взвешивания первого значения интенсивности светового излучения относительно второго значения интенсивности светового излучения с помощью взвешенной комбинации, зависящей от первого градиента глубины в первой сетке в первом положении сетки, соответствующем первому положению, относительно второго градиента глубины во второй сетке во втором положении сетки, соответствующем первому положению.
2. Способ по п. 1, отличающийся тем, что взвешивание включает в себя взвешивание первого значения интенсивности светового излучения относительно второго значения интенсивности светового излучения, причем взвешивание первого значения интенсивности светового излучения является монотонно убывающей функцией абсолютного значения первого градиента глубины.
3. Способ по п. 1, отличающийся тем, что взвешивание включает в себя взвешивание первого значения интенсивности светового излучения относительно второго значения интенсивности светового излучения, причем взвешивание первого значения интенсивности светового излучения является монотонно возрастающей функцией абсолютного значения второго градиента глубины.
4. Способ по п. 1, дополнительно включающий в себя определение градиентов глубины, по меньшей мере, для некоторых вершин первой сетки; и определение первого градиента глубины при получении градиентов глубины, по меньшей мере, для некоторых вершин.
5. Способ по п. 4, отличающийся тем, что определение градиентов глубины включает в себя определение градиента глубины для вершины из, по меньшей мере, некоторых вершин первой сетки в ответ на глубину вершины, глубину, по меньшей мере, одной другой вершины первой сетки и расстояние между вершиной и, по меньшей мере, одной другой вершиной.
6. Способ по п. 4, отличающийся тем, что определение градиентов глубины включает в себя определение градиента глубины для вершины, по меньшей мере, из некоторых вершин первой сетки в ответ на градиенты глубины от вершины до множества соседних вершин.
7. Способ по любому из предыдущих пунктов, дополнительно включающий в себя определение первого градиента глубины в ответ на изменения глубины на карте глубин для первой карты текстур.
8. Способ по любому из предыдущих пунктов, дополнительно включающий в себя этапы:
определения карты градиентов глубины для первой карты текстур;
применения преобразования точки наблюдения к карте градиентов глубины для генерирования преобразованной по ракурсу карты градиентов глубины, и
определения первого градиента глубины в ответ на градиент глубины в положении на преобразованной по ракурсу карте градиентов глубины, соответствующем первому положению.
9. Способ по любому из предыдущих пунктов, дополнительно включающий в себя этапы:
определения карты весов, содержащей веса для взвешенной комбинации в ответ на градиенты глубины;
применения преобразования точки наблюдения к карте весов для генерирования преобразованной по ракурсу карты весов, и
определения веса для взвешенной комбинации в ответ на вес в первом положении на преобразованной по ракурсу карте градиентов глубины.
10. Способ по любому из пп. 8 или 9, отличающийся тем, что преобразования точки наблюдения для первой карты текстур, второй карты текстур и, по меньшей мере, одной из карты градиентов глубины и карты весов являются одним и тем же преобразованием точки наблюдения.
11. Способ по любому из предыдущих пунктов, отличающийся тем, что первая карта текстур и первая сетка генерируются в результате захвата реальной сцены.
12. Способ по любому из предыдущих пунктов, отличающийся тем, что вес также зависит от разности между первой точкой наблюдения и третьей точкой наблюдения.
13. Способ по любому из предыдущих пунктов, отличающийся тем, что вес первого значения интенсивности светового излучения относительно второго значения интенсивности светового излучения также зависит от показателя достоверности, свидетельствующего о достоверности оценки глубины, используемой для определения глубины в первом положении сетки на первой карте глубин, причем увеличение веса первого значения интенсивности светового излучения относительно второго значения интенсивности светового излучения для показателя достоверности свидетельствует об увеличении достоверности оценки глубины.
14. Устройство для генерирования изображения интенсивности светового излучения, причем устройство содержит:
приемник (201) для приема первой карты текстур и первой сетки, представляющих сцену, из первой точки наблюдения;
приемник (203) для приема второй карты текстур и второй сетки, представляющих сцену, из второй точки наблюдения;
генератор (205) изображений для определения изображения интенсивности светового излучения, представляющего сцену, из третьей точки наблюдения в ответ на первую карту текстур, первую сетку, вторую карту текстур и вторую сетку;
причем генератор (205) изображений содержит:
первый преобразователь (207) ракурса для определения первого значения интенсивности светового излучения для первого положения в изображении интенсивности светового излучения путем преобразования точки наблюдения на основе первой карты текстур и первой сетки;
второй преобразователь (209) ракурса для определения второго значения интенсивности светового излучения для первого положения путем преобразования точки наблюдения на основе второй карты текстур и второй сетки;
комбинатор (211) для определения значения интенсивности светового излучения для изображения интенсивности светового излучения в первом положении с помощью взвешенной комбинации первого значения интенсивности светового излучения и второго значения интенсивности светового излучения; причем взвешивание первого значения интенсивности светового излучения относительно второго значения интенсивности светового излучения с помощью взвешенной комбинации зависит от первого градиента глубины в первой сетке в первом положении сетки, соответствующем первому положению, относительно второго градиента глубины во второй сетке во втором положении сетки, соответствующем первому положению.
15. Компьютерный программный продукт, выполненный с возможностью осуществления способа по любому из пп. 1-13.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP16202469.9 | 2016-12-06 | ||
| EP16202469 | 2016-12-06 | ||
| PCT/EP2017/080597 WO2018104102A1 (en) | 2016-12-06 | 2017-11-28 | Apparatus and method for generating a light intensity image |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| RU2019120831A true RU2019120831A (ru) | 2021-01-12 |
| RU2019120831A3 RU2019120831A3 (ru) | 2021-03-10 |
| RU2754721C2 RU2754721C2 (ru) | 2021-09-06 |
Family
ID=57517749
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2019120831A RU2754721C2 (ru) | 2016-12-06 | 2017-11-28 | Устройство и способ для генерирования изображения интенсивности светового излучения |
Country Status (9)
| Country | Link |
|---|---|
| US (1) | US10699466B2 (ru) |
| EP (1) | EP3552183B1 (ru) |
| JP (1) | JP6651679B2 (ru) |
| KR (1) | KR102581134B1 (ru) |
| CN (1) | CN110140151B (ru) |
| BR (1) | BR112019011254A8 (ru) |
| RU (1) | RU2754721C2 (ru) |
| TW (1) | TWI764959B (ru) |
| WO (1) | WO2018104102A1 (ru) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2018201048A1 (en) * | 2017-04-27 | 2018-11-01 | Google Llc | Synthetic stereoscopic content capture |
| EP3419286A1 (en) | 2017-06-23 | 2018-12-26 | Koninklijke Philips N.V. | Processing of 3d image information based on texture maps and meshes |
| EP3629585A1 (en) * | 2018-09-25 | 2020-04-01 | Koninklijke Philips N.V. | Image synthesis |
| US20200186776A1 (en) * | 2018-11-14 | 2020-06-11 | Htc Corporation | Image processing system and image processing method |
| EP3696773A1 (en) * | 2019-02-15 | 2020-08-19 | Koninklijke Philips N.V. | Apparatus and method for generating a light intensity image |
| US11361505B2 (en) * | 2019-06-06 | 2022-06-14 | Qualcomm Technologies, Inc. | Model retrieval for objects in images using field descriptors |
| TWI736335B (zh) * | 2020-06-23 | 2021-08-11 | 國立成功大學 | 基於深度影像生成方法、電子裝置與電腦程式產品 |
| US20240135593A1 (en) * | 2022-10-11 | 2024-04-25 | Tencent America LLC | Method and apparatus for uv attributes coding for symmetry mesh |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5424556A (en) * | 1993-11-30 | 1995-06-13 | Honeywell Inc. | Gradient reflector location sensing system |
| JP2000348213A (ja) * | 1999-06-07 | 2000-12-15 | Sanyo Electric Co Ltd | 三次元画像生成装置、三次元画像生成表示装置、及びその方法並びに記録媒体 |
| US6750873B1 (en) * | 2000-06-27 | 2004-06-15 | International Business Machines Corporation | High quality texture reconstruction from multiple scans |
| EP2180449A1 (en) * | 2008-10-21 | 2010-04-28 | Koninklijke Philips Electronics N.V. | Method and device for providing a layered depth model of a scene |
| KR101697598B1 (ko) * | 2008-10-27 | 2017-02-01 | 엘지전자 주식회사 | 가상 뷰 이미지 합성 방법 및 장치 |
| US9117310B2 (en) | 2010-04-02 | 2015-08-25 | Imec | Virtual camera system |
| JP5858380B2 (ja) * | 2010-12-03 | 2016-02-10 | 国立大学法人名古屋大学 | 仮想視点画像合成方法及び仮想視点画像合成システム |
| KR20120079794A (ko) * | 2011-01-05 | 2012-07-13 | 삼성전자주식회사 | 영상 처리 장치 및 방법 |
| WO2013145554A1 (ja) * | 2012-03-29 | 2013-10-03 | パナソニック株式会社 | 画像処理装置及び画像処理方法 |
| WO2013158784A1 (en) * | 2012-04-17 | 2013-10-24 | 3Dmedia Corporation | Systems and methods for improving overall quality of three-dimensional content by altering parallax budget or compensating for moving objects |
| FR2993662B1 (fr) * | 2012-07-23 | 2015-05-15 | Msc & Sgcc | Procede et installation pour la detection notamment de defauts refractants |
| US9345099B2 (en) * | 2012-07-27 | 2016-05-17 | Koninklijke Philips N.V. | Color emphasis and preservation of objects using reflection spectra |
| CN104662589B (zh) | 2012-08-21 | 2017-08-04 | 派力肯影像公司 | 用于使用阵列照相机捕捉的图像中的视差检测和校正的系统和方法 |
| US9437039B2 (en) * | 2012-09-11 | 2016-09-06 | Nvidia Corporation | Method and system for graphics rendering employing gradient domain metropolis light transport |
| US9519972B2 (en) * | 2013-03-13 | 2016-12-13 | Kip Peli P1 Lp | Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies |
| US9905039B2 (en) * | 2014-02-21 | 2018-02-27 | Qualcomm Incorporated | View independent color equalized 3D scene texturing |
| US10484697B2 (en) * | 2014-09-09 | 2019-11-19 | Qualcomm Incorporated | Simultaneous localization and mapping for video coding |
| US9900583B2 (en) * | 2014-12-04 | 2018-02-20 | Futurewei Technologies, Inc. | System and method for generalized view morphing over a multi-camera mesh |
| EP3353748B1 (en) | 2015-09-23 | 2022-08-03 | Koninklijke Philips N.V. | Generation of triangle mesh for a three dimensional image |
-
2017
- 2017-11-28 EP EP17804203.2A patent/EP3552183B1/en active Active
- 2017-11-28 JP JP2019530064A patent/JP6651679B2/ja active Active
- 2017-11-28 KR KR1020197019245A patent/KR102581134B1/ko active IP Right Grant
- 2017-11-28 WO PCT/EP2017/080597 patent/WO2018104102A1/en unknown
- 2017-11-28 CN CN201780082446.5A patent/CN110140151B/zh active Active
- 2017-11-28 RU RU2019120831A patent/RU2754721C2/ru active
- 2017-11-28 BR BR112019011254A patent/BR112019011254A8/pt active Search and Examination
- 2017-11-28 US US16/465,606 patent/US10699466B2/en active Active
- 2017-12-04 TW TW106142336A patent/TWI764959B/zh active
Also Published As
| Publication number | Publication date |
|---|---|
| EP3552183A1 (en) | 2019-10-16 |
| CN110140151B (zh) | 2023-08-29 |
| BR112019011254A2 (pt) | 2019-10-08 |
| BR112019011254A8 (pt) | 2023-04-04 |
| WO2018104102A1 (en) | 2018-06-14 |
| US10699466B2 (en) | 2020-06-30 |
| KR102581134B1 (ko) | 2023-09-21 |
| RU2019120831A3 (ru) | 2021-03-10 |
| JP6651679B2 (ja) | 2020-02-19 |
| TW201828255A (zh) | 2018-08-01 |
| US20190385352A1 (en) | 2019-12-19 |
| JP2019536174A (ja) | 2019-12-12 |
| RU2754721C2 (ru) | 2021-09-06 |
| CN110140151A (zh) | 2019-08-16 |
| KR20190091500A (ko) | 2019-08-06 |
| TWI764959B (zh) | 2022-05-21 |
| EP3552183B1 (en) | 2021-09-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2019120831A (ru) | Устройство и способ для генерирования изображения интенсивности светового излучения | |
| US8988317B1 (en) | Depth determination for light field images | |
| RU2020109861A (ru) | Оборудование и способ для формирования представления сцены | |
| JP2016129289A5 (ru) | ||
| JP2014145725A5 (ru) | ||
| JP2012253444A5 (ru) | ||
| RU2020102462A (ru) | Обработка информации 3d-изображения на основании текстурных карт и сеток | |
| JP2013242617A (ja) | 画像処理装置、撮像装置、距離計測方法および距離計測プログラム | |
| JP2018004310A5 (ru) | ||
| JP2012256177A5 (ru) | ||
| JP6655379B2 (ja) | 焦点スタックから適応スライス画像を生成する方法および装置 | |
| JP2015219603A5 (ru) | ||
| JP5911292B2 (ja) | 画像処理装置、撮像装置、画像処理方法、および、画像処理プログラム | |
| JP2011133341A (ja) | 変位計測装置、変位計測方法、及び変位計測プログラム | |
| JP2015011014A (ja) | 計測装置及び計測プログラム | |
| EP4270944A3 (en) | Method and system for forming extended focal planes for large viewpoint changes | |
| JP2016220198A5 (ru) | ||
| JP2012022652A5 (ru) | ||
| US20150042840A1 (en) | Image processing apparatus, distance measuring apparatus, imaging apparatus, and image processing method | |
| JP6867645B2 (ja) | 画像処理装置、方法、及びプログラム | |
| JP2015148895A (ja) | 物体数分布推定方法 | |
| JP5795095B2 (ja) | 重み付けを用いた格子画像の位相解析方法 | |
| US9270883B2 (en) | Image processing apparatus, image pickup apparatus, image pickup system, image processing method, and non-transitory computer-readable storage medium | |
| JP5748355B2 (ja) | ３次元座標算出装置、３次元座標算出方法、及びプログラム | |
| JP2015207851A5 (ru) |