RU2014121937A - Основанное на значимости отображение диспаратности - Google Patents

Основанное на значимости отображение диспаратности Download PDF

Info

Publication number
RU2014121937A
RU2014121937A RU2014121937/08A RU2014121937A RU2014121937A RU 2014121937 A RU2014121937 A RU 2014121937A RU 2014121937/08 A RU2014121937/08 A RU 2014121937/08A RU 2014121937 A RU2014121937 A RU 2014121937A RU 2014121937 A RU2014121937 A RU 2014121937A
Authority
RU
Russia
Prior art keywords
depth
display
range
significance
image
Prior art date
Application number
RU2014121937/08A
Other languages
English (en)
Other versions
RU2580439C2 (ru
Inventor
Вильгельмус Хендрикус Альфонсус БРЮЛЬС
Барт КРОН
Патрик Люк Эльс ВАНДЕВАЛЛЕ
Original Assignee
Конинклейке Филипс Н.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Конинклейке Филипс Н.В. filed Critical Конинклейке Филипс Н.В.
Publication of RU2014121937A publication Critical patent/RU2014121937A/ru
Application granted granted Critical
Publication of RU2580439C2 publication Critical patent/RU2580439C2/ru

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/04Texture mapping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

1. Способ обработки сигнала трехмерного [3D] изображения для рендеринга данных 3D-изображения на 3D-дисплее (27), основываясь на множестве видов дисплея, причем способ содержит:- извлечение (21) из сигнала 3D-изображения первой карты (28) глубины, содержащей первые значения глубины,- извлечение (22) из сигнала 3D-изображения данных (23) значимости, представляющих собой значимость в величине данных 3D-изображения, причем значимость указывает значимые элементы, имеющие значимый диапазон значений глубины,- определение функции (24) отображения глубины для величины данных 3D-изображения в зависимости от данных значимости, так что первые значения глубины в значимом диапазоне значений глубины отображаются на поддиапазон глубины дисплея, причем поддиапазон глубины дисплея представляет собой поддиапазон используемого диапазона глубины 3D-дисплея и обеспечивает более высокое качество 3D-изображения для зрителя, чем качество 3D-изображения по используемому диапазону глубины, и причем определение функции отображения глубины содержит:- составление объединенной гистограммы для значимых значений глубины и незначимых значений глубины, причем значимые значения глубины взвешиваются с использованием первого весового коэффициента входного преобразования перед добавлением в гистограмму, и незначимые значения глубины взвешиваются с использованием второго весового коэффициента входного преобразования перед добавлением в гистограмму, причем первый весовой коэффициент входного преобразования и второй весовой коэффициент входного преобразования зависят от поддиапазона глубины дисплея и используемого диапазона 3D-дисплея;- определени�

Claims (11)

1. Способ обработки сигнала трехмерного [3D] изображения для рендеринга данных 3D-изображения на 3D-дисплее (27), основываясь на множестве видов дисплея, причем способ содержит:
- извлечение (21) из сигнала 3D-изображения первой карты (28) глубины, содержащей первые значения глубины,
- извлечение (22) из сигнала 3D-изображения данных (23) значимости, представляющих собой значимость в величине данных 3D-изображения, причем значимость указывает значимые элементы, имеющие значимый диапазон значений глубины,
- определение функции (24) отображения глубины для величины данных 3D-изображения в зависимости от данных значимости, так что первые значения глубины в значимом диапазоне значений глубины отображаются на поддиапазон глубины дисплея, причем поддиапазон глубины дисплея представляет собой поддиапазон используемого диапазона глубины 3D-дисплея и обеспечивает более высокое качество 3D-изображения для зрителя, чем качество 3D-изображения по используемому диапазону глубины, и причем определение функции отображения глубины содержит:
- составление объединенной гистограммы для значимых значений глубины и незначимых значений глубины, причем значимые значения глубины взвешиваются с использованием первого весового коэффициента входного преобразования перед добавлением в гистограмму, и незначимые значения глубины взвешиваются с использованием второго весового коэффициента входного преобразования перед добавлением в гистограмму, причем первый весовой коэффициент входного преобразования и второй весовой коэффициент входного преобразования зависят от поддиапазона глубины дисплея и используемого диапазона 3D-дисплея;
- определение диапазона глубины объединенной гистограммы, и
- отображение диапазона глубины объединенной гистограммы внутрь используемого диапазона глубины 3D-дисплея, причем первый весовой коэффициент входного преобразования и второй весовой коэффициент входного преобразования являются разными и выбираются так, что первые значения глубины в значимом диапазоне значений глубины деформируются в поддиапазон глубины дисплея,
- преобразование первой карты глубины во вторую карту глубины посредством функции отображения глубины для генерирования (26) видов дисплея в зависимости от второй карты глубины.
2. Способ по п. 1, в котором
- данные значимости представляют собой карту значимости, указывающую степень значимости пикселей изображения, или
- данные значимости представляют собой диапазон глубины значимости.
3. Способ по п. 1, в котором извлечение данных значимости содержит извлечение метаданных из сигнала 3D-изображения, причем метаданные представляют собой данные значимости данных 3D-изображения.
4. Способ по п. 1, в котором величина данных 3D-изображения представляет собой период сигнала 3D-видео, и функция отображения глубины зависит от данных значимости во времени.
5. Способ по п. 4, в котором функция отображения глубины содержит
- определение снимка в качестве периода сигнала 3D-видео и установление функции отображения для снимка, или
- использование движущегося окна, имеющего предварительный просмотр, и установление функции отображения для окна.
6. Устройство (40, 50) 3D-видео для обработки сигнала трехмерного [3D] изображения для рендеринга данных 3D-изображения на 3D-дисплее, основываясь на множестве видов дисплея, причем устройство содержит:
средство (47, 51, 58, 59, 61, 71) ввода для
- извлечения из сигнала 3D-изображения первой карты (28) глубины, содержащей первые значения глубины, и для
- извлечения из сигнала 3D-изображения данных (23) значимости, представляющих собой значимость в величине данных 3D-изображения, причем значимость указывает значимые элементы, имеющие значимый диапазон значений глубины, и
видеопроцессор (42, 52, 62), выполненный с возможностью
- определения функции отображения глубины для величины данных 3D-изображения в зависимости от данных значимости, так что первые значения глубины в значимом диапазоне значений глубины отображаются на поддиапазон глубины дисплея, причем поддиапазон глубины дисплея представляет собой поддиапазон используемого диапазона глубины 3D-дисплея и обеспечивает более высокое качество 3D-изображения для зрителя, чем качество 3D-изображения по используемому диапазону глубины, и причем определение функции отображения глубины содержит:
- составление объединенной гистограммы для значимых значений глубины и незначимых значений глубины, причем значимые значения глубины взвешиваются с использованием первого весового коэффициента входного преобразования перед добавлением в гистограмму, и незначимые значения глубины взвешиваются с использованием второго весового коэффициента входного преобразования перед добавлением в гистограмму, причем первый весовой коэффициент входного преобразования и второй весовой коэффициент входного преобразования зависят от поддиапазона глубины дисплея и используемого диапазона 3D-дисплея;
- определение диапазона глубины объединенной гистограммы, и
- отображение диапазона глубины объединенной гистограммы внутрь используемого диапазона глубины 3D-дисплея, причем первый весовой коэффициент входного преобразования и второй весовой коэффициент входного преобразования являются разными и выбираются так, что первые значения глубины в значимом диапазоне значений глубины деформируются на поддиапазон глубины дисплея,
- преобразования первой карты глубины во вторую карту глубины посредством функции отображения глубины для генерирования видов дисплея в зависимости от второй карты глубины.
7. Устройство по п. 6, в котором видеопроцессор (42, 52, 62) выполнен с возможностью
- генерирования видов дисплея в зависимости от второй карты глубины, и/или
- устройство содержит 3D-дисплей (63) для воспроизведения видов дисплея для соответствующих левых и правых глаз зрителя, и/или
- видеопроцессор выполнен с возможностью определения поддиапазона глубины дисплея посредством получения информации о возможностях дисплея от устройства (60) 3D-дисплея, подсоединенного к устройству 3D-видео.
8. Устройство по п. 6, в котором упомянутое извлечение данных значимости содержит извлечение метаданных из сигнала 3D-изображения, причем метаданные представляют собой данные значимости данных 3D-изображения.
9. Устройство по п. 6, в котором средство ввода содержит:
- узел (58) оптического носителя записи для извлечения видеоинформации с оптического носителя записи.
10. Компьютерная программа, содержащая средство кода компьютерной программы, функционально побуждающее процессорвыполнять соответствующие этапы способа по любому одному из пп. 1-9, когда компьютерная программа выполняется на компьютере.
11. Машиночитаемый носитель, содержащий компьютерную программу по п. 10.
RU2014121937/08A 2011-11-01 2012-10-23 Основанное на значимости отображение диспаратности RU2580439C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161553984P 2011-11-01 2011-11-01
US61/553,984 2011-11-01
PCT/IB2012/055829 WO2013064938A1 (en) 2011-11-01 2012-10-23 Saliency based disparity mapping

Publications (2)

Publication Number Publication Date
RU2014121937A true RU2014121937A (ru) 2015-12-10
RU2580439C2 RU2580439C2 (ru) 2016-04-10

Family

ID=47358246

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014121937/08A RU2580439C2 (ru) 2011-11-01 2012-10-23 Основанное на значимости отображение диспаратности

Country Status (9)

Country Link
US (1) US9041709B2 (ru)
EP (1) EP2774378B8 (ru)
JP (1) JP5791818B2 (ru)
CN (1) CN104025585B (ru)
BR (1) BR112014010060A8 (ru)
IN (1) IN2014CN03412A (ru)
RU (1) RU2580439C2 (ru)
TW (1) TWI574544B (ru)
WO (1) WO2013064938A1 (ru)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10095953B2 (en) * 2009-11-11 2018-10-09 Disney Enterprises, Inc. Depth modification for display applications
EP2509324A1 (en) * 2011-04-08 2012-10-10 Thomson Licensing Method and apparatus for analyzing stereoscopic or multi-view images
JP2013243626A (ja) * 2012-05-23 2013-12-05 Sony Corp 信号処理装置、信号処理方法、およびプログラム
US20140125763A1 (en) * 2012-11-07 2014-05-08 Robert Nathan Cohen 3d led output device and process for emitting 3d content output for large screen applications and which is visible without 3d glasses
US9232210B2 (en) 2013-07-08 2016-01-05 Nvidia Corporation Mapping sub-portions of three-dimensional (3D) video data to be rendered on a display unit within a comfortable range of perception of a user thereof
US9390508B2 (en) * 2014-03-03 2016-07-12 Nokia Technologies Oy Method, apparatus and computer program product for disparity map estimation of stereo images
JP6415179B2 (ja) 2014-08-20 2018-10-31 キヤノン株式会社 画像処理装置、画像処理方法、および撮像装置並びにその制御方法
US20220147365A1 (en) * 2015-01-21 2022-05-12 Pure Storage, Inc. Accelerating Segment Metadata Head Scans For Storage System Controller Failover
KR102174258B1 (ko) 2015-11-06 2020-11-04 삼성전자주식회사 무안경 3d 디스플레이 장치 및 그 제어 방법
CN109076200B (zh) * 2016-01-12 2021-04-23 上海科技大学 全景立体视频系统的校准方法和装置
KR101736660B1 (ko) * 2016-01-15 2017-05-17 세종대학교산학협력단 스테레오 3d 내비게이션 장치 및 이를 위한 세일리언시 기반의 카메라 파라미터 조절 방법
EP3252713A1 (en) * 2016-06-01 2017-12-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for performing 3d estimation based on locally determined 3d information hypotheses
WO2018179705A1 (ja) * 2017-03-31 2018-10-04 株式会社荏原製作所 工業用内視鏡、観察方法、観察装置、水中機械、ポンプ点検システム、水中ロボット制御システム及び水中ロボット制御方法
JP6869112B2 (ja) * 2017-06-07 2021-05-12 株式会社荏原製作所 ポンプ点検システム
US20180322689A1 (en) * 2017-05-05 2018-11-08 University Of Maryland, College Park Visualization and rendering of images to enhance depth perception
TWI628619B (zh) 2017-05-17 2018-07-01 國立交通大學 立體影像產生方法及其裝置
US10776992B2 (en) * 2017-07-05 2020-09-15 Qualcomm Incorporated Asynchronous time warp with depth data
WO2019241785A1 (en) * 2018-06-15 2019-12-19 The Board Of Trustees Of The Leland Stanford Junior University Systems and methods for dancification
CN109600600B (zh) * 2018-10-31 2020-11-03 万维科研有限公司 涉及深度图转换的编码器、编码方法以及三层表达式的存储方法和格式
TWI700670B (zh) * 2019-03-05 2020-08-01 中國鋼鐵股份有限公司 三維深度資訊的轉換方法與電子裝置
CN111818319B (zh) * 2019-04-10 2022-05-24 深圳市视觉动力科技有限公司 提高三维图像显示质量的方法和系统
JP7485983B2 (ja) 2020-07-22 2024-05-17 日本電信電話株式会社 マッピング関数調整装置、マッピング関数調整方法およびプログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001039512A1 (en) 1999-11-26 2001-05-31 Sanyo Electric Co., Ltd. Device and method for converting two-dimensional video to three-dimensional video
JP2001320731A (ja) * 1999-11-26 2001-11-16 Sanyo Electric Co Ltd 2次元映像を3次元映像に変換する装置及びその方法
GB0329312D0 (en) 2003-12-18 2004-01-21 Univ Durham Mapping perceived depth to regions of interest in stereoscopic images
ATE551839T1 (de) * 2005-08-19 2012-04-15 Koninkl Philips Electronics Nv Stereoskopische anzeigevorrichtung
US10021377B2 (en) * 2009-07-27 2018-07-10 Koninklijke Philips N.V. Combining 3D video and auxiliary data that is provided when not reveived
JP5444955B2 (ja) * 2009-08-31 2014-03-19 ソニー株式会社 立体画像表示システム、視差変換装置、視差変換方法およびプログラム
US8537200B2 (en) * 2009-10-23 2013-09-17 Qualcomm Incorporated Depth map generation techniques for conversion of 2D video data to 3D video data
WO2011052389A1 (ja) * 2009-10-30 2011-05-05 富士フイルム株式会社 画像処理装置及び画像処理方法
JP2011176800A (ja) * 2010-01-28 2011-09-08 Toshiba Corp 画像処理装置、立体表示装置及び画像処理方法
US8565516B2 (en) * 2010-02-05 2013-10-22 Sony Corporation Image processing apparatus, image processing method, and program
RU2429513C1 (ru) * 2010-04-20 2011-09-20 Закрытое Акционерное Общество "Мегавижн" Трехмерный дисплей
US9485495B2 (en) * 2010-08-09 2016-11-01 Qualcomm Incorporated Autofocus for stereo images
JP5242667B2 (ja) * 2010-12-22 2013-07-24 株式会社東芝 マップ変換方法、マップ変換装置及びマップ変換プログラム

Also Published As

Publication number Publication date
BR112014010060A8 (pt) 2017-06-20
EP2774378B1 (en) 2015-10-07
CN104025585B (zh) 2016-06-01
CN104025585A (zh) 2014-09-03
EP2774378A1 (en) 2014-09-10
TWI574544B (zh) 2017-03-11
US9041709B2 (en) 2015-05-26
BR112014010060A2 (pt) 2017-06-13
JP2015503258A (ja) 2015-01-29
EP2774378B8 (en) 2015-11-18
IN2014CN03412A (ru) 2015-10-09
RU2580439C2 (ru) 2016-04-10
WO2013064938A1 (en) 2013-05-10
TW201330589A (zh) 2013-07-16
JP5791818B2 (ja) 2015-10-07
US20140313191A1 (en) 2014-10-23

Similar Documents

Publication Publication Date Title
RU2014121937A (ru) Основанное на значимости отображение диспаратности
RU2015152815A (ru) Способ кодирования сигнала видеоданных для использования с многовидовым устройством визуализации
US10957024B2 (en) Real time tone mapping of high dynamic range image data at time of playback on a lower dynamic range display
US7982733B2 (en) Rendering 3D video images on a stereo-enabled display
JP6042525B2 (ja) 画像強調
KR20200012875A (ko) 3차원("3d") 장면의 2차원("2d") 캡처 이미지를 기반으로 하는 가상 현실 콘텐츠를 렌더링하기 위한 방법 및 시스템
US20110254835A1 (en) System and method for the creation of 3-dimensional images
EP4253153A3 (en) Display method and display device
EP2202992A3 (en) Image processing method and apparatus therefor
KR20150091474A (ko) 멀티 디스플레이 장치 상에서의 로우 레이턴시 이미지 디스플레이 기법
RU2011138194A (ru) Объединение данных 3d изображения и графических данных
RU2013123929A (ru) Идентификация и уменьшение искажения изображения
CN102067615A (zh) 图像产生方法和设备以及图像处理方法和设备
US20120068996A1 (en) Safe mode transition in 3d content rendering
CN107960150B (zh) 图像处理装置和方法
US20130027389A1 (en) Making a two-dimensional image into three dimensions
FR2998080A1 (fr) Procede d'augmentation de la realite
JP5852093B2 (ja) 映像処理装置、映像処理方法、プログラム
EP2391136A3 (en) Picture reproducing method and picture reproducing apparatus
KR20100109069A (ko) 시각적 관심맵 생성 장치 및 방법
JP2021533646A (ja) 深度情報を使用して2次元画像を外挿するためのシステムおよび方法
JP2021530016A (ja) 汎用処理ユニットからハードウェアアクセラレータユニットに画像ベースの追跡オペレーションをオフローディングするためのシステム及び方法
US10298914B2 (en) Light field perception enhancement for integral display applications
CN117036571A (zh) 图像数据生成、视觉算法模型训练、评测方法及装置
Khodary et al. A new image-sequence haze removal system based on DM6446 Davinci processor

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20201024