RU2012132829A - Устройство обработки изображения, способ изображения и программа - Google Patents

Устройство обработки изображения, способ изображения и программа Download PDF

Info

Publication number
RU2012132829A
RU2012132829A RU2012132829/07A RU2012132829A RU2012132829A RU 2012132829 A RU2012132829 A RU 2012132829A RU 2012132829/07 A RU2012132829/07 A RU 2012132829/07A RU 2012132829 A RU2012132829 A RU 2012132829A RU 2012132829 A RU2012132829 A RU 2012132829A
Authority
RU
Russia
Prior art keywords
image
view
virtual points
images
virtual
Prior art date
Application number
RU2012132829/07A
Other languages
English (en)
Inventor
Сугуру УСИКИ
Масами ОГАТА
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2012132829A publication Critical patent/RU2012132829A/ru

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)

Abstract

1. Устройство обработки изображения, содержащее:модуль ввода изображения для левого глаза, выполненный с возможностью ввода изображения для левого глаза (L-изображения), являющегося сигналом изображения для левого глаза, подаваемым для отображения трехмерного изображения;модуль ввода изображения для правого глаза, выполненный с возможностью ввода изображения для правого глаза (R-изображения), являющегося сигналом изображения для правого глаза, подаваемым для отображения трехмерного изображения;модуль генерирования информации о параллаксе, выполненный с возможностью генерирования информации о параллаксе на основе изображения для левого глаза (L-изображения) и изображения для правого глаза (R-изображения); имодуль генерирования изображений с виртуальных точек зрения, выполненный с возможностью приема изображения для левого глаза (L-изображение), изображения для правого глаза (R-изображение) и информации о параллаксе и генерирования изображений с виртуальных точек зрения, включающих в себя изображение с точки зрения, отличной от точек зрения принятых LR-изображений,при этом модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью определения позиций виртуальных точек зрения посредством обработки данных с учетом качества изображений с виртуальных точек зрения, и/или подходящей величины параллакса, и/или веса изображения в зависимости от области изображения и генерирует изображений с виртуальных точек зрения, соответствующих найденным позициям виртуальных точек зрения.2. Устройство обработки изображения по п.1,в котором модуль генерирования изображений с виртуальных точек з�

Claims (12)

1. Устройство обработки изображения, содержащее:
модуль ввода изображения для левого глаза, выполненный с возможностью ввода изображения для левого глаза (L-изображения), являющегося сигналом изображения для левого глаза, подаваемым для отображения трехмерного изображения;
модуль ввода изображения для правого глаза, выполненный с возможностью ввода изображения для правого глаза (R-изображения), являющегося сигналом изображения для правого глаза, подаваемым для отображения трехмерного изображения;
модуль генерирования информации о параллаксе, выполненный с возможностью генерирования информации о параллаксе на основе изображения для левого глаза (L-изображения) и изображения для правого глаза (R-изображения); и
модуль генерирования изображений с виртуальных точек зрения, выполненный с возможностью приема изображения для левого глаза (L-изображение), изображения для правого глаза (R-изображение) и информации о параллаксе и генерирования изображений с виртуальных точек зрения, включающих в себя изображение с точки зрения, отличной от точек зрения принятых LR-изображений,
при этом модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью определения позиций виртуальных точек зрения посредством обработки данных с учетом качества изображений с виртуальных точек зрения, и/или подходящей величины параллакса, и/или веса изображения в зависимости от области изображения и генерирует изображений с виртуальных точек зрения, соответствующих найденным позициям виртуальных точек зрения.
2. Устройство обработки изображения по п.1,
в котором модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью вычисления значения Q оценки качества изображения, указывающего качество изображения с виртуальной точки зрения, вычисления интервала G между позициями виртуальных точек зрения с использованием вычисленного значения Q оценки качества изображения и определения позиции виртуальной точки зрения на основе вычисленного интервала G между позициями виртуальных точек зрения.
3. Устройство обработки изображения по п.2,
в котором модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью вычисления значения Q оценки качества изображения с использованием информации об уровне надежности информации о параллаксе и/или информации о генерируемом изображении с виртуальной точки зрения.
4. Устройство обработки изображения по п.1,
в котором модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью вычисления в качестве подходящей величины параллакса меньшего значения из величины фузионного параллакса и допустимой величины перекрестных искажений, вычисления интервала G между позициями виртуальных точек зрения с использованием вычисленной подходящей величины параллакса и определения позиции виртуальной точки зрения на основе вычисленного интервала G между позициями виртуальных точек зрения.
5. Устройство обработки изображения по п.1,
в котором модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью вычисления в качестве подходящей величины параллакса меньшее значение из величины фузионного параллакса и допустимой величины перекрестных искажений, вычисления интервала G между позициями виртуальных точек зрения с использованием вычисленной подходящей величины параллакса и определения позиции виртуальной точки зрения на основе вычисленного интервала G между позициями виртуальных точек зрения.
6. Устройство обработки изображения по п.1, дополнительно содержащее
модуль генерирования весовой информации, выполненный с возможностью вычисления весовой информации изображения в зависимости от области изображения,
при этом модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью вычисления взвешенного распределения параллакса, получаемого путем коррекции информации о параллаксе с использованием весовой информации изображения, вычисления интервала G между позициями виртуальных точек зрения с использованием подходящей величины параллакса и максимального значения параллакса, вычисленного на основе вычисленного взвешенного распределения параллакса, и определения позиции виртуальной точки зрения на основе вычисленного интервала G между позициями виртуальных точек зрения.
7. Устройство обработки изображения по п.6,
в котором модуль генерирования весовой информации выполнен с возможностью генерирования весовой информации изображения, в которой вес в единичной области изображения установлен в соответствии с позицией изображения или весовой информацией изображения в зависимости от объекта, включенного в изображение.
8. Устройство обработки изображения по п.1,
в котором модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью определения первой позиции виртуальной точки зрения посредством обработки данных с учетом качества изображения с виртуальной точки зрения, и/или подходящей величины параллакса, и/или веса изображения в зависимости от области изображения, определения второй позиции виртуальной точки зрения через нерегулярный интервал посредством обработки нелинейного преобразования, выполняемой над найденной первой позицией виртуальной точки зрения, и генерирования изображения с виртуальной точки зрения, соответствующего найденной второй позиции виртуальной точки зрения через нерегулярный интервал.
9. Устройство обработки изображения по п.1,
в котором модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью определения позиции виртуальной точки зрения посредством обработки данных с учетом качества изображения с виртуальной точки зрения, и/или подходящей величины параллакса, и/или веса изображения в зависимости от области изображения, вычисления величины параллельного перемещения на основе данных о распределении параллакса, вычисленных в соответствии с информацией о параллаксе, выполнения обработки перемещения распределения параллакса между изображениями с виртуальных точек зрения для соответствующих позиций виртуальных точек зрения на основе вычисленной величины параллельного перемещения и генерирования изображений с виртуальных точек зрения, отражающих результат обработки перемещения на основе данных о распределении параллакса.
10. Устройство съемки изображения, содержащее:
модуль съемки изображения, выполненный с возможностью съемки изображения для левого глаза (L-изображения), являющегося сигналом изображения для левого глаза, и изображения для правого глаза (R-изображения), являющегося сигналом изображения для правого глаза, применяемыми для отображения трехмерного изображения;
модуль ввода изображения для левого глаза, выполненный с возможностью ввода из модуля съемки изображения изображения для левого глаза (L-изображения), являющегося сигналом изображения для левого глаза, подаваемым для отображения трехмерного изображения;
модуль ввода изображения для правого глаза, выполненный с возможностью ввода из модуля съемки изображения изображения для правого глаза (R-изображения), являющегося сигналом изображения для правого глаза, подаваемым для отображения трехмерного изображения;
модуль генерирования информации о параллаксе, выполненный с возможностью генерирования информации о параллаксе на основе изображения для левого глаза (L-изображения) и изображения для правого глаза (R-изображение); и
модуль генерирования изображений с виртуальных точек зрения, выполненный с возможностью приема изображения для левого глаза (L-изображения), изображения для правого глаза (R-изображения) и информации о параллаксе и генерирования изображений с виртуальных точек зрения, включающих в себя изображение с точки зрения, отличной от точек зрения принятых LR-изображений,
при этом модуль генерирования изображений с виртуальных точек зрения выполнен с возможностью определения позиций виртуальных точек зрения посредством обработки данных с учетом качества изображений с виртуальных точек зрения, и/или подходящей величины параллакса, и/или веса изображения в зависимости от области изображения и генерирования изображений с виртуальных точек зрения, соответствующих найденным позициям виртуальных точек зрения.
11. Способ обработки изображения, характеризующийся тем, что генерируют с помощью устройства обработки изображения, изображения с множества точек зрения, при этом способ обработки изображения содержит этапы, на которых:
вводят посредством модуля ввода изображения для левого глаза изображение для левого глаза (L-изображение), являющегося сигналом изображения для левого глаза, подаваемым для отображения трехмерного изображения;
вводом посредством модуля ввода изображения для правого глаза изображение для правого глаза (R-изображение), являющегося сигналом изображения для правого глаза, подаваемым для отображения трехмерного изображения;
генерируют посредством модуля генерирования информации о параллаксе информацию о параллаксе на основе изображения для левого глаза (L-изображения) и изображения для правого глаза (R-изображения); и
принимают посредством модуля генерирования изображений с виртуальных точек зрения указанные изображение для левого глаза (L-изображение), изображение для правого глаза (R-изображение) и информацию о параллаксе и генерируют изображения с виртуальных точек зрения, включающие в себя изображение с точки зрения, отличной от точек зрения принятых LR-изображений,
при этом на этапе генерирования изображений с виртуальных точек зрения определяют позиции виртуальных точек зрения посредством обработки данных с учетом качества изображений с виртуальных точек зрения, и/или подходящей величины параллакса, и/или веса изображения в зависимости от области изображения и генерируют изображения с виртуальных точек зрения, соответствующие найденным позициям виртуальных точек зрения.
12. Программа, вызывающая генерирование устройством обработки изображения изображений с множества точек зрения, при этом программа вызывает:
ввод модулем ввода изображения для левого глаза изображения для левого глаза (L-изображения), являющегося сигналом изображения для левого глаза, подаваемого для отображения трехмерного изображения;
ввода модулем ввода изображения для правого глаза изображения для правого глаза (R-изображения), являющегося сигналом изображения для правого глаза, подаваемым для отображения трехмерного изображения;
генерирования модулем генерирования информации о параллаксе информации о параллаксе на основе изображения для левого глаза (L-изображения) и изображения для правого глаза (R-изображения); и
прием указанных изображения для левого глаза (L-изображения), изображения для правого глаза (R-изображения) и информации о параллаксе и генерирование изображений с виртуальных точек зрения, включающих в себя изображение с точки зрения, отличной от точек зрения принимаемых LR-изображений модулем генерирования изображений с виртуальных точек зрения,
при этом на этапе генерирования изображений с виртуальных точек зрения программа вызывает определение позиций виртуальных точек зрения посредством обработки данных с учетом качества изображений с виртуальных точек зрения, и/или подходящей величины параллакса, и/или веса изображения в зависимости от области изображения и генерирование изображений с виртуальных точек зрения, соответствующих найденным позициям виртуальных точек зрения.
RU2012132829/07A 2011-08-08 2012-07-31 Устройство обработки изображения, способ изображения и программа RU2012132829A (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011173268A JP2013038602A (ja) 2011-08-08 2011-08-08 画像処理装置、および画像処理方法、並びにプログラム
JP2011173268 2011-08-08

Publications (1)

Publication Number Publication Date
RU2012132829A true RU2012132829A (ru) 2014-02-10

Family

ID=47647341

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2012132829/07A RU2012132829A (ru) 2011-08-08 2012-07-31 Устройство обработки изображения, способ изображения и программа

Country Status (4)

Country Link
US (1) US9277207B2 (ru)
JP (1) JP2013038602A (ru)
CN (1) CN102932657A (ru)
RU (1) RU2012132829A (ru)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014082541A (ja) * 2012-10-12 2014-05-08 National Institute Of Information & Communication Technology 互いに類似した情報を含む複数画像のデータサイズを低減する方法、プログラムおよび装置
EP2765775A1 (en) * 2013-02-06 2014-08-13 Koninklijke Philips N.V. System for generating intermediate view images
JP2014230251A (ja) * 2013-05-27 2014-12-08 ソニー株式会社 画像処理装置、および画像処理方法
US9736467B2 (en) * 2013-08-05 2017-08-15 Samsung Display Co., Ltd. Apparatus and method for adjusting stereoscopic images in response to head roll
JP2015049289A (ja) * 2013-08-30 2015-03-16 株式会社東芝 表示装置および表示方法
JP6422262B2 (ja) * 2013-10-24 2018-11-14 東京エレクトロン株式会社 プラズマ処理方法及びプラズマ処理装置
KR102143473B1 (ko) * 2013-11-13 2020-08-12 삼성전자주식회사 다시점 영상 디스플레이 장치 및 그 다시점 영상 디스플레이 방법
CN103702103B (zh) * 2014-01-10 2015-12-30 武汉大学 基于双目相机的光栅立体印刷图像合成方法
EP2908519A1 (en) * 2014-02-14 2015-08-19 Thomson Licensing Method for displaying a 3D content on a multi-view display device, corresponding multi-view display device and computer program product
EP3158536B1 (en) 2014-06-19 2019-01-02 Koninklijke Philips N.V. Method and apparatus for generating a three dimensional image
CN104902253B (zh) * 2015-02-09 2016-11-09 北京理工大学 一种基于改进贝叶斯模型的立体图像生成方法
KR102121389B1 (ko) * 2015-10-16 2020-06-10 삼성전자주식회사 무안경 3d 디스플레이 장치 및 그 제어 방법
CN105681777B (zh) 2016-01-20 2017-09-05 深圳创维-Rgb电子有限公司 一种裸眼3d显示方法及系统
WO2018010677A1 (zh) * 2016-07-14 2018-01-18 腾讯科技(深圳)有限公司 一种信息处理方法、穿戴式电子设备、处理装置及系统
CN106101685B (zh) * 2016-07-14 2018-06-19 腾讯科技(深圳)有限公司 一种信息处理方法、穿戴式电子设备、处理装置及系统
JPWO2018021067A1 (ja) * 2016-07-29 2019-05-09 ソニー株式会社 画像処理装置および画像処理方法
JP6742869B2 (ja) * 2016-09-15 2020-08-19 キヤノン株式会社 画像処理装置および画像処理方法
RU2016138608A (ru) 2016-09-29 2018-03-30 Мэджик Лип, Инк. Нейронная сеть для сегментации изображения глаза и оценки качества изображения
CN108665418B (zh) * 2017-03-30 2021-12-21 奇景光电股份有限公司 深度感测装置
TWI672677B (zh) * 2017-03-31 2019-09-21 鈺立微電子股份有限公司 用以融合多深度圖的深度圖產生裝置
JP7042561B2 (ja) * 2017-06-02 2022-03-28 キヤノン株式会社 情報処理装置、情報処理方法
JP6924079B2 (ja) * 2017-06-12 2021-08-25 キヤノン株式会社 情報処理装置及び方法及びプログラム
JP6789899B2 (ja) * 2017-08-31 2020-11-25 オリンパス株式会社 計測装置および計測装置の作動方法
WO2019041352A1 (zh) * 2017-09-04 2019-03-07 深圳前海达闼云端智能科技有限公司 一种潘弄区测量方法、装置以及可穿戴显示设备
JP6415675B1 (ja) 2017-12-04 2018-10-31 キヤノン株式会社 生成装置、生成方法及びプログラム
JP2020136697A (ja) * 2019-02-12 2020-08-31 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法、及びプログラム
CN114450713B (zh) * 2019-09-25 2025-01-14 索尼集团公司 信息处理装置、视频生成方法和程序
DE102021206608A1 (de) 2021-06-25 2022-12-29 Continental Autonomous Mobility Germany GmbH Kamerasystem sowie Verfahren für ein Kamerasystem
TWI812566B (zh) * 2022-12-28 2023-08-11 宏碁股份有限公司 立體影像深度調整方法與裝置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2848291B2 (ja) 1995-08-24 1999-01-20 松下電器産業株式会社 立体tv装置
US6163337A (en) * 1996-04-05 2000-12-19 Matsushita Electric Industrial Co., Ltd. Multi-view point image transmission method and multi-view point image display method
US6269175B1 (en) * 1998-08-28 2001-07-31 Sarnoff Corporation Method and apparatus for enhancing regions of aligned images using flow estimation
US8369607B2 (en) * 2002-03-27 2013-02-05 Sanyo Electric Co., Ltd. Method and apparatus for processing three-dimensional images
JP4069855B2 (ja) * 2003-11-27 2008-04-02 ソニー株式会社 画像処理装置及び方法
JP4440066B2 (ja) 2004-10-14 2010-03-24 キヤノン株式会社 立体画像生成プログラム、立体画像生成システムおよび立体画像生成方法
JP4649219B2 (ja) * 2005-02-01 2011-03-09 キヤノン株式会社 立体画像生成装置
KR101311896B1 (ko) * 2006-11-14 2013-10-14 삼성전자주식회사 입체 영상의 변위 조정방법 및 이를 적용한 입체 영상장치
US8711204B2 (en) * 2009-11-11 2014-04-29 Disney Enterprises, Inc. Stereoscopic editing for video production, post-production and display adaptation
AU2009243439A1 (en) * 2009-11-30 2011-06-16 Canon Kabushiki Kaisha Robust image alignment for distributed multi-view imaging systems

Also Published As

Publication number Publication date
CN102932657A (zh) 2013-02-13
JP2013038602A (ja) 2013-02-21
US9277207B2 (en) 2016-03-01
US20130038606A1 (en) 2013-02-14

Similar Documents

Publication Publication Date Title
RU2012132829A (ru) Устройство обработки изображения, способ изображения и программа
CN103795998B (zh) 图像处理方法和图像处理设备
EP2566150A3 (en) Image processing apparatus, image processing method, and program
WO2017204171A3 (en) Information processing apparatus, image generation method, control method, and program
JP2006115246A5 (ru)
TWI547901B (zh) 模擬立體圖像顯示方法及顯示設備
RU2008110044A (ru) Способ и схема обнаружения и отслеживания в реальном времени глаз нескольких наблюдателей
RU2011121668A (ru) Система трехмерного отображения
RU2011130921A (ru) Система мониторинга медицинских патологий и способ работы системы
CN103595989A (zh) 三维影像显示装置及三维影像处理方法
RU2012135485A (ru) Устройство, способ и программа обработки стереоскопического видеоизображения
EP2512145A3 (en) Full reference system for predicting subjective quality of three-dimensional video
US20200242335A1 (en) Information processing apparatus, information processing method, and recording medium
RU2010103049A (ru) Устройство генерирования стереоскопического изображения, способ генерирования стереоскопического изображения и программа
JP2016116221A (ja) 3d表示のための装置及び方法
EP2538685A3 (en) Image processing system, apparatus, and method
JP2016040520A (ja) 物体検出装置
JP2019511851A5 (ru)
RU2014114535A (ru) Устройство формирования изображений и способ управления им
US20140293021A1 (en) Apparatus and method for measuring depth of the three-dimensional image
JP2003274097A5 (ru)
KR101893769B1 (ko) 시청자의 시점 정보에 기초하여 3차원 객체 영상 모델을 생성하는 장치 및 방법
CN113485547B (zh) 一种应用于全息沙盘的交互方法及装置
CN107659772B (zh) 3d图像生成方法、装置及电子设备
KR101634225B1 (ko) 다시점 입체 영상 보정 장치 및 방법

Legal Events

Date Code Title Description
FA93 Acknowledgement of application withdrawn (no request for examination)

Effective date: 20150803