RU2018113714A - Устройство и способ для кодирования изображения, захваченного оптической системой получения данных - Google Patents

Устройство и способ для кодирования изображения, захваченного оптической системой получения данных Download PDF

Info

Publication number
RU2018113714A
RU2018113714A RU2018113714A RU2018113714A RU2018113714A RU 2018113714 A RU2018113714 A RU 2018113714A RU 2018113714 A RU2018113714 A RU 2018113714A RU 2018113714 A RU2018113714 A RU 2018113714A RU 2018113714 A RU2018113714 A RU 2018113714A
Authority
RU
Russia
Prior art keywords
data acquisition
optical data
acquisition system
pixel
pupil
Prior art date
Application number
RU2018113714A
Other languages
English (en)
Other versions
RU2018113714A3 (ru
RU2729698C2 (ru
Inventor
Лоран БЛОНДЕ
Моздех СЕЙФИ
Гийом БУАССОН
Поль КЕРБИРИУ
Вальтер ДРАЖИЧ
Original Assignee
Томсон Лайсенсинг
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP15306444.9A external-priority patent/EP3145195A1/en
Application filed by Томсон Лайсенсинг filed Critical Томсон Лайсенсинг
Publication of RU2018113714A publication Critical patent/RU2018113714A/ru
Publication of RU2018113714A3 publication Critical patent/RU2018113714A3/ru
Application granted granted Critical
Publication of RU2729698C2 publication Critical patent/RU2729698C2/ru

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/20Contour coding, e.g. using detection of edges
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • G06T7/557Depth or shape recovery from multiple images from light fields, e.g. from plenoptic cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/32Indexing scheme for image data processing or generation, in general involving image mosaicing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10052Images from lightfield camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Claims (37)

1. Устройство для кодирования изображения, захваченного оптической системой получения данных, причем, упомянутое устройство содержит процессор, выполненный с возможностью вычисления - по меньшей мере, для одного пикселя датчика упомянутой оптической системы получения данных - параметров, определяющих объем в пространстве предметов оптической системы получения данных, занимаемый набором лучей света, проходящих через зрачок упомянутой оптической системы получения данных, и сопряженный элемент упомянутого, по меньшей мере, одного пикселя в пространстве предметов оптической системы получения данных, в направлении, нормальном к поверхности зрачка, причем, упомянутый объем, занимаемый упомянутым набором лучей света, называется пиксельным пучком.
2. Устройство по п. 1, в котором процессор выполнен с возможностью связывания параметров, представляющих пиксельные пучки, с получаемым оптической системой получения данных изображением, подлежащим кодированию.
3. Устройство по любому из предыдущих пунктов, в котором параметрическим представлением пиксельного пучка является однополостный гиперболоид, определяемый следующими уравнениями:
Figure 00000001
где x, y и z - координаты в пространстве предметов точки, принадлежащей поверхности гиперболоида,
Figure 00000002
,
Figure 00000003
представляют расстояние наименьшего сечения пиксельного пучка, называемого перетяжкой, которая соответствует сопряженному элементу пикселя в пространстве предметов оптической системы получения данных в направлении, нормальном к поверхности зрачка,
Figure 00000004
представляют углы сдвига, определяющие направление перетяжки от центра зрачка,
Figure 00000005
представляет размер перетяжки;
Figure 00000006
- зависящий от
Figure 00000005
параметр, определяющий угловую апертуру пиксельного пучка, а
Figure 00000007
- угол, изменяющийся в интервале
Figure 00000008
.
4. Устройство по п. 3, в котором параметрическим представлением пиксельного пучка является однополостный гиперболоид, определяемый следующими уравнениями:
Figure 00000009
где
Figure 00000010
- параметр, представляющий соотношение сторон для асимметричного зрачка,
Figure 00000011
- параметр, представляющий соотношение сторон для асимметричной перетяжки,
Figure 00000005
- параметр, связанный с распределением сечения пиксельного пучка между зрачком и перетяжкой,
Figure 00000012
- параметр, представляющий коэффициент полярного радиуса для зрачка, а
Figure 00000013
- параметр, представляющий коэффициент полярного радиуса для перетяжки.
5. Устройство по любому из пп. 1-2, в котором пиксельный пучок представлен, по меньшей мере, первым набором параметров, представляющим ось гиперболоида, называемую главным лучом, и вторым набором параметров, представляющим семейство образующих лучей, позволяющее образовывать поверхность гиперболоида путем вращения вокруг главного луча.
6. Устройство по любому из пп. 1-2, в котором параметрическим представлением пиксельного пучка является объединение переднего конуса и заднего конуса, причем, передний конус и задний конус перекрывают друг друга.
7. Устройство по п. 6, в котором параметрическое представление пиксельного пучка в виде объединения переднего конуса и заднего конуса описывается следующими уравнениями:
Figure 00000014
,
где
Figure 00000015
представляет
Figure 00000016
-координату вершины переднего конуса,
Figure 00000017
представляет
Figure 00000016
-координату вершины заднего конуса,
Figure 00000018
и
Figure 00000019
, соответственно, обозначают диаметр зрачка пиксельного пучка при
Figure 00000020
, его z-координату, диаметр и
Figure 00000016
-координату перетяжки пиксельного пучка при
Figure 00000021
при этом его z-координата
Figure 00000022
,
и
Figure 00000023
где
Figure 00000024
и
Figure 00000025
- углы вершин, соответственно, переднего конуса и заднего конуса.
8. Устройство по п. 6, в котором параметрическое представление пиксельного пучка в виде объединения переднего конуса и заднего конуса описывается следующими уравнениями при
Figure 00000026
и
Figure 00000027
:
Figure 00000028
где
Figure 00000029
и
Figure 00000030
, соответственно, представляют диаметр пикселя при
Figure 00000031
и фокусное расстояние оптики оптической системы получения данных при
Figure 00000032
,
и
Figure 00000023
.
9. Способ кодирования изображения, захваченного оптической системой получения данных, причем, упомянутый способ включает в себя вычисление - по меньшей мере, для одного пикселя датчика упомянутой оптической системы получения данных - параметров, определяющих объем в пространстве предметов оптической системы получения данных, занимаемый набором лучей света, проходящих через зрачок упомянутой оптической системы получения данных, и сопряженный элемент упомянутого, по меньшей мере, одного пикселя в пространстве предметов оптической системы получения данных, в направлении, нормальном к поверхности зрачка, причем, упомянутый объем, занимаемый упомянутым набором лучей света, называется пиксельным пучком.
10. Способ по п. 9, дополнительно включающий в себя связывание параметров, представляющих пиксельные пучки, с подлежащим кодированию изображением, захваченным оптической системой получения данных.
11. Устройство для обработки изображения, захваченного оптической системой получения данных, причем, упомянутое устройство содержит процессор, выполненный с возможностью обработки упомянутого изображения на основе параметров, связанных, по меньшей мере, с одним пикселем датчика оптической системы получения данных, причем, упомянутые параметры определяют объем - в пространстве предметов оптической системы получения данных - занимаемый набором лучей света, проходящих через зрачок упомянутой оптической системы получения данных, и сопряженный элемент упомянутого, по меньшей мере, одного пикселя в пространстве предметов оптической системы получения данных, в направлении, нормальном к поверхности зрачка, причем, упомянутый объем, занимаемый упомянутым набором лучей света, называется пиксельным пучком.
12. Устройство по п. 11, в котором процессор выполнен с возможностью обработки захваченного изображения с помощью:
- демультиплексирования упомянутого захваченного изображения,
- демозаики упомянутого захваченного изображения,
- перефокусировки упомянутого захваченного изображения, или
- микширования упомянутого захваченного изображения, по меньшей мере, с еще одним изображением, захваченным еще одной оптической системой получения данных.
13. Способ обработки изображения, захваченного оптической системой получения данных, причем, упомянутый способ включает в себя обработку упомянутого изображения на основе параметров, связанных, по меньшей мере, с одним пикселем датчика оптической системы получения данных, причем, упомянутые параметры определяют объем - в пространстве предметов оптической системы получения данных - занимаемый набором лучей света, проходящих через зрачок упомянутой оптической системы получения данных, и сопряженный элемент упомянутого, по меньшей мере, одного пикселя в пространстве предметов оптической системы получения данных, в направлении, нормальном к поверхности зрачка, причем, упомянутый объем, занимаемый упомянутым набором лучей света, называется пиксельным пучком.
14. Способ по п. 13, в котором обработка захваченного изображения состоит в:
- демультиплексировании упомянутого захваченного изображения,
- демозаике упомянутого захваченного изображения,
- перефокусировке упомянутого захваченного изображения, или
- микшировании упомянутого захваченного изображения, по меньшей мере, с еще одним изображением, захваченным еще одной оптической системой получения данных.
15. Сигнал, передаваемый первым устройством, выполненным с возможностью кодирования изображения, захваченного оптической системой получения данных, на второе устройство, выполненное с возможностью обработки упомянутого захваченного изображения, причем, упомянутый сигнал содержит сообщение, содержащее параметры, определяющие объем в пространстве предметов оптической системы получения данных, занимаемый набором лучей света, проходящих через зрачок упомянутой оптической системы получения данных, и сопряженный элемент упомянутого, по меньшей мере, одного пикселя в пространстве предметов оптической системы получения данных, в направлении, нормальном к поверхности зрачка, причем, упомянутый объем, занимаемый упомянутым набором лучей света, называется пиксельным пучком, причем, обработка захваченного изображения вторым устройством основана на упомянутых параметрах.
16. Компьютерная программа, отличающаяся тем, что она содержит инструкции программного кода для реализации способа кодирования изображения, захваченного оптической системой получения данных по пп. 9-11, при исполнении программы процессором.
RU2018113714A 2015-09-17 2016-08-23 Устройство и способ для кодирования изображения, захваченного оптической системой получения данных RU2729698C2 (ru)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP15306444.9A EP3145195A1 (en) 2015-09-17 2015-09-17 An apparatus and a method for encoding an image captured by an optical acquisition system
EP15306444.9 2015-09-17
EP16305493.5 2016-04-28
EP16305493 2016-04-28
PCT/EP2016/069884 WO2017045875A1 (en) 2015-09-17 2016-08-23 An apparatus and a method for encoding an image captured by an optical acquisition system

Publications (3)

Publication Number Publication Date
RU2018113714A true RU2018113714A (ru) 2019-10-17
RU2018113714A3 RU2018113714A3 (ru) 2020-03-19
RU2729698C2 RU2729698C2 (ru) 2020-08-11

Family

ID=56787477

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2018113714A RU2729698C2 (ru) 2015-09-17 2016-08-23 Устройство и способ для кодирования изображения, захваченного оптической системой получения данных

Country Status (12)

Country Link
US (1) US10872442B2 (ru)
EP (1) EP3350998A1 (ru)
JP (1) JP6847097B2 (ru)
KR (1) KR20180053719A (ru)
CN (1) CN108353187B (ru)
AU (1) AU2016321728B2 (ru)
BR (1) BR112018005339A2 (ru)
CA (1) CA2998661A1 (ru)
MX (1) MX2018003266A (ru)
RU (1) RU2729698C2 (ru)
TW (1) TW201723635A (ru)
WO (1) WO2017045875A1 (ru)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3145168A1 (en) * 2015-09-17 2017-03-22 Thomson Licensing An apparatus and a method for generating data representing a pixel beam
JP2022525432A (ja) * 2019-04-02 2022-05-13 ライト フィールド ラボ、インコーポレイテッド 4次元エネルギー指向システムおよび方法
CN111768484A (zh) * 2020-05-20 2020-10-13 北京邮电大学 基于合成图像编码的电子沙盘显示方法及系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6009188A (en) 1996-02-16 1999-12-28 Microsoft Corporation Method and system for digital plenoptic imaging
US6097394A (en) 1997-04-28 2000-08-01 Board Of Trustees, Leland Stanford, Jr. University Method and system for light field rendering
JPH11213628A (ja) * 1998-01-21 1999-08-06 Toshiba Corp 記録媒体とその再生装置および記録再生装置
JP2003348462A (ja) * 2002-05-27 2003-12-05 Olympus Optical Co Ltd カメラ及び撮像素子ユニット
US20100014063A1 (en) 2005-05-31 2010-01-21 Fujifilm Corporation Image exposure apparatus
US20100265385A1 (en) * 2009-04-18 2010-10-21 Knight Timothy J Light Field Camera Image, File and Configuration Data, and Methods of Using, Storing and Communicating Same
JP2010176325A (ja) 2009-01-28 2010-08-12 Ntt Docomo Inc 任意視点画像生成装置及び任意視点画像生成方法
JP5558094B2 (ja) 2009-10-07 2014-07-23 オリンパス株式会社 表示方法、表示装置、光学ユニット、表示装置の製造方法、及び電子機器
US8743199B2 (en) 2010-03-09 2014-06-03 Physical Optics Corporation Omnidirectional imaging optics with 360°-seamless telescopic resolution
KR101904033B1 (ko) * 2010-10-27 2018-10-04 코넬 유니버시티 광 필드 이미지 센서, 방법들 및 응용들
JP6080417B2 (ja) 2011-08-19 2017-02-15 キヤノン株式会社 画像処理装置、及び画像処理方法
US8873112B2 (en) 2011-10-21 2014-10-28 Canon Kabushiki Kaisha Image processing apparatus and determination method
JP5913934B2 (ja) 2011-11-30 2016-05-11 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム、および画像処理装置を有する撮像装置
US20130235261A1 (en) * 2012-03-07 2013-09-12 Ricoh Co., Ltd. Plenoptic Imaging System with a Body and Detachable Plenoptic Imaging Components
US9250445B2 (en) 2012-08-08 2016-02-02 Carol Ann Tosaya Multiple-pixel-beam retinal displays
US9237263B2 (en) * 2012-10-05 2016-01-12 Vidinoti Sa Annotation method and apparatus
WO2014198351A1 (en) * 2013-06-12 2014-12-18 Vidinoti Sa Method and apparatus for identifying local features
EP2879091A1 (en) * 2013-11-29 2015-06-03 Thomson Licensing Method and device for estimating disparity associated with views of a scene acquired with a plenoptic camera
US9524556B2 (en) * 2014-05-20 2016-12-20 Nokia Technologies Oy Method, apparatus and computer program product for depth estimation
CN104570000B (zh) * 2015-01-07 2017-02-22 太原理工大学 一种基于混沌压缩编码的光学综合孔径成像系统及方法

Also Published As

Publication number Publication date
US10872442B2 (en) 2020-12-22
TW201723635A (zh) 2017-07-01
CN108353187B (zh) 2023-01-03
CA2998661A1 (en) 2017-03-23
EP3350998A1 (en) 2018-07-25
BR112018005339A2 (pt) 2018-10-09
JP6847097B2 (ja) 2021-03-24
AU2016321728B2 (en) 2020-10-22
CN108353187A (zh) 2018-07-31
AU2016321728A1 (en) 2018-04-26
RU2018113714A3 (ru) 2020-03-19
MX2018003266A (es) 2018-11-09
KR20180053719A (ko) 2018-05-23
WO2017045875A1 (en) 2017-03-23
US20180260977A1 (en) 2018-09-13
RU2729698C2 (ru) 2020-08-11
JP2018536312A (ja) 2018-12-06

Similar Documents

Publication Publication Date Title
US10863166B2 (en) Method and apparatus for generating three-dimensional (3D) road model
WO2017107524A1 (zh) 虚拟现实头盔的成像畸变测试方法及装置
CN113362444B (zh) 点云数据的生成方法、装置、电子设备及存储介质
Mai et al. 3D object detection with SLS-fusion network in foggy weather conditions
JP2014168227A5 (ru)
RU2018113714A (ru) Устройство и способ для кодирования изображения, захваченного оптической системой получения данных
JP2013042443A5 (ru)
US20180063488A1 (en) Information processing apparatus, information processing method, and computer program product
JP2018538709A5 (ru)
RU2019102481A (ru) Обнаружение изменений на медицинских изображениях
Xiao et al. Guided, fusion-based, large depth-of-field 3d imaging using a focal stack
JP6971084B2 (ja) ライト・フィールド・データに関連するボケを表現するデータを生成する方法及び装置
RU2018113710A (ru) Устройство и способ для калибровки оптической системы получения данных
CN113483774A (zh) 导航方法、装置、电子设备及可读存储介质
JP2019511851A5 (ru)
Risholm et al. Adaptive structured light with scatter correction for high-precision underwater 3D measurements
JP2015212772A5 (ru)
JP2018536312A5 (ru)
CN112258568A (zh) 一种高精度地图要素的提取方法及装置
JP2019502277A5 (ru)
Kim et al. Specular detection on glossy surface using geometric characteristics of specularity in top-view images
US20170013248A1 (en) Image generating apparatus, image generating method, and image generating program
Bruls Exact formulas for a thin-lens system with an arbitrary number of lenses
Oliva-García et al. Monocular real time full resolution depth estimation arrangement with a tunable lens
JP2017006419A5 (ja) 情報処理装置および表示制御方法