ES2446165B1 - Procedimiento para generar un flujo de vídeo estereoscópico, procedimiento para reconstruir imágenes, dispositivos y flujo de vídeo correspondientes - Google Patents
Procedimiento para generar un flujo de vídeo estereoscópico, procedimiento para reconstruir imágenes, dispositivos y flujo de vídeo correspondientes Download PDFInfo
- Publication number
- ES2446165B1 ES2446165B1 ES201331307A ES201331307A ES2446165B1 ES 2446165 B1 ES2446165 B1 ES 2446165B1 ES 201331307 A ES201331307 A ES 201331307A ES 201331307 A ES201331307 A ES 201331307A ES 2446165 B1 ES2446165 B1 ES 2446165B1
- Authority
- ES
- Spain
- Prior art keywords
- procedure
- video stream
- image
- devices
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/156—Mixing image signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/593—Depth or shape recovery from multiple images from stereo images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/15—Processing image signals for colour aspects of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0077—Colour aspects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/003—Aspects relating to the "2D+depth" image format
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/005—Aspects relating to the "3D+depth" image format
Abstract
Procedimiento para generar un flujo de vídeo estereoscópico, procedimiento para reconstruir imágenes, dispositivos y flujo de vídeo correspondientes. El procedimiento para generar dicho flujo comprende imágenes compuestas (C) con información sobre una imagen derecha (R) y una imagen izquierda (L), y un mapa de profundidad. Se seleccionan píxeles de la imagen derecha e izquierda, y se introducen en una imagen compuesta (C) de dicho flujo, estando previsto introducir todos los píxeles de las imágenes derecha e izquierda en la imagen compuesta (C) dejando una de ellas sin cambiar y descomponiendo la otra en regiones (R1, R2, R3) con píxeles, que se introducen en esa región de la imagen compuesta que no está ocupada por píxeles de las imágenes derecha e izquierda. La invención se refiere también a un procedimiento para reconstruir las imágenes derecha e izquierda empezando por una imagen compuesta, y a dispositivos que permiten implementar dichos procedimientos.
Description
P201331307
05-09-2013
Tras haber decodificado la señalización, el demultiplexador conocerá la posición de la imagen sin cambiar (por ejemplo la imagen izquierda en los ejemplos descritos anteriormente), así como las posiciones de las regiones en las que se desensambló la otra imagen (por ejemplo la imagen derecha en los ejemplos descritos anteriormente) y la
5 posición del mapa de profundidad.
Con esta información, el demultiplexador puede extraer la imagen sin cambiar (por ejemplo la imagen izquierda) y el mapa de profundidad y reconstruir la imagen desensamblada (por ejemplo la imagen derecha).
10 Aunque la presente invención se ha ilustrado hasta ahora con referencia a algunas realizaciones preferidas y ventajosas, queda claro que no se limita a tales realizaciones y que pueden realizarse muchos cambios en la misma por un experto en la materia que quiera combinar en una imagen compuesta dos imágenes relativas a dos perspectivas
15 diferentes (derecha e izquierda) de un objeto o una escena y el mapa de profundidad asociado.
En una posible variante, por ejemplo, en lugar de introducir en el fotograma compuesto C el mapa de profundidad relativo a una de las dos imágenes, se introduce un denominado 20 “mapa de disparidad” o “mapa de desplazamiento”. Bajo las hipótesis adecuadas (filmar con cámaras de vídeo equipadas con una óptica idéntica), puede derivarse fácilmente un mapa de este tipo del mapa de profundidad, con el que puede relacionarse fácilmente. Si las dos imágenes derecha e izquierda se visualizan superpuestas en la misma pantalla y no se utilizan gafas para separarlas, uno puede darse cuenta fácilmente de que para 25 obtener una imagen de la otra es necesario mover los objetos una determinada cantidad. Con más precisión, para obtener la imagen derecha empezando por la imagen izquierda es necesario mover los objetos situados por detrás de la pantalla hacia la derecha una cantidad que aumenta con la profundidad a la que se ubican tales objetos. Los objetos que se ubican exactamente en la pantalla no tienen que moverse, mientras que los
30 objetos ubicados delante de la pantalla tienen que moverse a la izquierda una cantidad que aumenta en función de la distancia de la pantalla.
En las condiciones mencionadas anteriormente, entre la profundidad P y la disparidad D existe una relación del siguiente tipo: 35 D = I*P/(P+P0)
13
P201331307
05-09-2013
referencia al caso de mapa único, con variaciones obvias bien conocidas para los expertos en la materia.
Por supuesto, la señalización presente en el flujo de vídeo también debe poder distinguir
5 la presencia de uno o dos mapas. Por consiguiente, dicha señalización debe contener información adaptada para permitir distinguir entre al menos dos de los siguientes tipos de fotogramas compuestos:
1) fotograma compuesto de tipo formato de baldosa sin mapas de profundidad o 10 disparidad (caso de la figura 1a);
2) fotograma compuesto de tipo formato de baldosa con un mapa de profundidad o disparidad (caso de la figura 1b);
15 y posiblemente también:
3) fotograma compuesto de tipo formato de baldosa con dos mapas de profundidad o disparidad en configuración encima y debajo;
20 4) fotograma compuesto de tipo formato de baldosa con dos mapas de profundidad o disparidad en configuración de lado a lado;
5) fotograma compuesto de tipo formato de baldosa con dos mapas de profundidad o disparidad en configuración de formato de baldosa.
25 El receptor comprende preferiblemente uno o más bloques de procesamiento adaptados para llevar a cabo una o más de las siguientes operaciones, basándose en la información de señalización:
30 -reconocer el tipo de fotograma que se recibe, con el fin de reconstruir apropiadamente las dos imágenes derecha e izquierda del contenido de vídeo tridimensional, tal como se describió anteriormente;
-reconocer la presencia de uno o dos mapas de profundidad o disparidad y el tipo de 35 configuración de los mismos;
15
Claims (1)
-
imagen1 imagen2 imagen3 imagen4 imagen5 imagen6 imagen7 imagen8
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
RU2012138174/08A RU2012138174A (ru) | 2012-09-06 | 2012-09-06 | Способ компоновки формата цифрового стереоскопического видеопотока 3dz tile format |
RU2012138174 | 2012-09-06 | ||
PCT/IB2013/051782 WO2014037822A1 (en) | 2012-09-06 | 2013-03-06 | Method for generating, transmitting and receiving stereoscopic images and relating devices |
IB13051782IB | 2013-03-06 |
Publications (3)
Publication Number | Publication Date |
---|---|
ES2446165A2 ES2446165A2 (es) | 2014-03-06 |
ES2446165R1 ES2446165R1 (es) | 2014-07-11 |
ES2446165B1 true ES2446165B1 (es) | 2015-03-23 |
Family
ID=48182965
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
ES201331307A Expired - Fee Related ES2446165B1 (es) | 2012-09-06 | 2013-09-05 | Procedimiento para generar un flujo de vídeo estereoscópico, procedimiento para reconstruir imágenes, dispositivos y flujo de vídeo correspondientes |
Country Status (16)
Country | Link |
---|---|
US (1) | US9723290B2 (es) |
JP (1) | JP2015534745A (es) |
KR (1) | KR20150053774A (es) |
CN (1) | CN104604222B (es) |
AT (1) | AT513369A3 (es) |
CH (1) | CH706886A2 (es) |
DE (1) | DE102013217826A1 (es) |
ES (1) | ES2446165B1 (es) |
FR (2) | FR2995165B1 (es) |
GB (1) | GB2507844B (es) |
IT (1) | ITTO20130679A1 (es) |
NL (1) | NL2011349C2 (es) |
PL (1) | PL405234A1 (es) |
RU (1) | RU2012138174A (es) |
TW (1) | TWI511525B (es) |
WO (1) | WO2014037822A1 (es) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11277598B2 (en) * | 2009-07-14 | 2022-03-15 | Cable Television Laboratories, Inc. | Systems and methods for network-based media processing |
US9978341B2 (en) * | 2014-12-23 | 2018-05-22 | Mediatek Inc. | Visual data processing method and visual data processing system which can perform a process operation according to a gazing point |
CA2992304A1 (en) * | 2015-07-15 | 2017-01-19 | Blinxel Pty Ltd | System and method for image processing |
CN109407835B (zh) * | 2015-08-18 | 2023-01-13 | 奇跃公司 | 虚拟和增强现实系统和方法 |
KR102647336B1 (ko) | 2019-04-01 | 2024-03-14 | 구글 엘엘씨 | 동적 깊이 이미지를 캡처 및 편집하는 기술 |
US11127115B2 (en) | 2019-12-13 | 2021-09-21 | NextVPU (Shanghai) Co., Ltd. | Determination of disparity |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7529400B2 (en) * | 2002-04-25 | 2009-05-05 | Sharp Kabushiki Kaisha | Image encoder, image decoder, record medium, and image recorder |
US7636088B2 (en) * | 2003-04-17 | 2009-12-22 | Sharp Kabushiki Kaisha | 3-Dimensional image creation device, 3-dimensional image reproduction device, 3-dimensional image processing device, 3-dimensional image processing program, and recording medium containing the program |
US8487982B2 (en) * | 2007-06-07 | 2013-07-16 | Reald Inc. | Stereoplexing for film and video applications |
EP2235957A1 (en) * | 2007-12-20 | 2010-10-06 | Koninklijke Philips Electronics N.V. | Image encoding method for stereoscopic rendering |
KR100950046B1 (ko) * | 2008-04-10 | 2010-03-29 | 포항공과대학교 산학협력단 | 무안경식 3차원 입체 tv를 위한 고속 다시점 3차원 입체영상 합성 장치 및 방법 |
CN102017628B (zh) * | 2008-04-25 | 2013-10-09 | 汤姆逊许可证公司 | 深度信号的编码 |
CN101668219B (zh) * | 2008-09-02 | 2012-05-23 | 华为终端有限公司 | 3d视频通信方法、发送设备和系统 |
CN104702960B (zh) * | 2009-01-26 | 2018-01-02 | 汤姆森特许公司 | 用于视频解码的装置 |
US8558871B2 (en) * | 2009-10-02 | 2013-10-15 | Panasonic Corporation | Playback device that can play stereoscopic video, integrated circuit, playback method and program |
IT1397591B1 (it) | 2009-12-21 | 2013-01-16 | Sisvel Technology Srl | Metodo per la generazione, trasmissione e ricezione di immagini stereoscopiche e relativi dispositivi. |
IT1401367B1 (it) * | 2010-07-28 | 2013-07-18 | Sisvel Technology Srl | Metodo per combinare immagini riferentesi ad un contenuto tridimensionale. |
US9571811B2 (en) * | 2010-07-28 | 2017-02-14 | S.I.Sv.El. Societa' Italiana Per Lo Sviluppo Dell'elettronica S.P.A. | Method and device for multiplexing and demultiplexing composite images relating to a three-dimensional content |
WO2012023330A1 (ja) * | 2010-08-16 | 2012-02-23 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、画像処理プログラムおよび記録媒体 |
EP2426635A1 (en) * | 2010-09-01 | 2012-03-07 | Thomson Licensing | Method for watermarking free view video with blind watermark detection |
IT1402995B1 (it) * | 2010-11-12 | 2013-09-27 | Sisvel Technology Srl | Metodo di elaborazione di un contenuto video tridimensionale e relativo apparato |
DE112011103496T5 (de) * | 2010-11-15 | 2013-08-29 | Lg Electronics Inc. | Verfahren zum Umwandeln eines Einzelbildformats und Vorrichtung zur Benutzung dieses Verfahrens |
IT1404059B1 (it) * | 2011-02-14 | 2013-11-08 | Sisvel Technology Srl | Metodo per la generazione, trasmissione e ricezione di immagini stereoscopiche e relativi dispositivi. |
-
2012
- 2012-09-06 RU RU2012138174/08A patent/RU2012138174A/ru unknown
-
2013
- 2013-03-06 JP JP2015530521A patent/JP2015534745A/ja active Pending
- 2013-03-06 US US14/426,649 patent/US9723290B2/en active Active
- 2013-03-06 CN CN201380046250.2A patent/CN104604222B/zh active Active
- 2013-03-06 KR KR1020157008370A patent/KR20150053774A/ko not_active Application Discontinuation
- 2013-03-06 WO PCT/IB2013/051782 patent/WO2014037822A1/en active Application Filing
- 2013-08-07 IT IT000679A patent/ITTO20130679A1/it unknown
- 2013-08-08 CH CH01366/13A patent/CH706886A2/it not_active Application Discontinuation
- 2013-08-08 GB GB1314206.2A patent/GB2507844B/en active Active
- 2013-08-26 TW TW102130496A patent/TWI511525B/zh not_active IP Right Cessation
- 2013-08-28 NL NL2011349A patent/NL2011349C2/en active
- 2013-08-29 AT ATA672/2013A patent/AT513369A3/de unknown
- 2013-08-30 FR FR1358295A patent/FR2995165B1/fr active Active
- 2013-09-03 PL PL405234A patent/PL405234A1/pl unknown
- 2013-09-05 ES ES201331307A patent/ES2446165B1/es not_active Expired - Fee Related
- 2013-09-06 DE DE102013217826.3A patent/DE102013217826A1/de active Pending
-
2014
- 2014-03-10 FR FR1451958A patent/FR3002104B1/fr active Active
Also Published As
Publication number | Publication date |
---|---|
FR3002104B1 (fr) | 2017-06-16 |
NL2011349A (en) | 2014-03-10 |
AT513369A3 (de) | 2018-08-15 |
AT513369A2 (de) | 2014-03-15 |
GB201314206D0 (en) | 2013-09-25 |
US20150215599A1 (en) | 2015-07-30 |
FR3002104A1 (fr) | 2014-08-15 |
RU2012138174A (ru) | 2014-03-27 |
NL2011349C2 (en) | 2014-05-08 |
WO2014037822A1 (en) | 2014-03-13 |
PL405234A1 (pl) | 2014-03-17 |
ES2446165R1 (es) | 2014-07-11 |
DE102013217826A1 (de) | 2014-03-06 |
ITTO20130679A1 (it) | 2014-03-07 |
US9723290B2 (en) | 2017-08-01 |
FR2995165A1 (fr) | 2014-03-07 |
CN104604222A (zh) | 2015-05-06 |
TWI511525B (zh) | 2015-12-01 |
GB2507844A (en) | 2014-05-14 |
FR2995165B1 (fr) | 2017-12-29 |
GB2507844B (en) | 2017-07-19 |
JP2015534745A (ja) | 2015-12-03 |
TW201415864A (zh) | 2014-04-16 |
CH706886A2 (it) | 2014-03-14 |
CN104604222B (zh) | 2017-03-29 |
KR20150053774A (ko) | 2015-05-18 |
ES2446165A2 (es) | 2014-03-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
ES2446165B1 (es) | Procedimiento para generar un flujo de vídeo estereoscópico, procedimiento para reconstruir imágenes, dispositivos y flujo de vídeo correspondientes | |
ES2564937T3 (es) | Método para combinar imágenes referentes a un contenido tridimensional | |
ES2599858T3 (es) | Codificación eficaz de múltiples vistas | |
ES2332708T3 (es) | Aparato y procedimiento de procesamiento de imagenes estereoscopicas. | |
CN103238338B (zh) | 3d人机接口的混合现实 | |
US20150341614A1 (en) | Stereoscopic video encoding device, stereoscopic video decoding device, stereoscopic video encoding method, stereoscopic video decoding method, stereoscopic video encoding program, and stereoscopic video decoding program | |
PH12016501960A1 (en) | Stereo viewing | |
RU2011106338A (ru) | Кодирующее устройство для сигналов трехмерного видеоизображения | |
BR112017014647A2 (pt) | método e aparelho de processamento de imagem | |
WO2016103024A3 (en) | Three dimensional imaging with a single camera | |
TWI651960B (zh) | 編碼/解碼視訊資料信號之方法與編碼器/解碼器及相關之視訊資料信號、視訊資料載體及電腦程式產品 | |
WO2014124262A3 (en) | Method and apparatus for stereoscopic imaging | |
NZ600427A (en) | Method for generating, transmitting and receiving stereoscopic images, and related devices | |
PH12015501189B1 (en) | Slant lens interlacing | |
NZ602870A (en) | Method for generating and rebuilding a stereoscopic-compatible video stream and related coding and decoding devices | |
CN103747236A (zh) | 结合人眼跟踪的立体视频处理系统及方法 | |
TW201612853A (en) | Method for creating depth map and a multi-lens camera system using the method | |
BR112012021091A2 (pt) | tela dividida para 3d | |
TW201534102A (zh) | 立體影像顯示方法及立體影像顯示裝置 | |
JP4966941B2 (ja) | 3次元映像データ生成方法、3次元映像データ生成システム、及び3次元映像データ生成プログラム | |
EP2611164A3 (en) | Display apparatus and method for providing three dimensional (3D) image | |
JP2012134885A (ja) | 画像処理装置及び画像処理方法 | |
JP2011077599A (ja) | 送信装置、受信装置、通信システム及びプログラム | |
KR20200120282A (ko) | 깊이 카메라와 입체영상 디스플레이 장치를 이용한 라이트 필드 디스플레이 시스템 및 방법 | |
CN104243965B (zh) | 一种提升自由立体显示分辨率的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FG2A | Definitive protection |
Ref document number: 2446165 Country of ref document: ES Kind code of ref document: B1 Effective date: 20150323 |
|
FD2A | Announcement of lapse in spain |
Effective date: 20210929 |