MX2010012948A - Metodo y aparato para generar un flujo de datos de imagenes estereoscopicas usando un parametro de camara, y metodo y aparato para restaurar la imagen esreoscopica usando un parametro de camara. - Google Patents

Metodo y aparato para generar un flujo de datos de imagenes estereoscopicas usando un parametro de camara, y metodo y aparato para restaurar la imagen esreoscopica usando un parametro de camara.

Info

Publication number
MX2010012948A
MX2010012948A MX2010012948A MX2010012948A MX2010012948A MX 2010012948 A MX2010012948 A MX 2010012948A MX 2010012948 A MX2010012948 A MX 2010012948A MX 2010012948 A MX2010012948 A MX 2010012948A MX 2010012948 A MX2010012948 A MX 2010012948A
Authority
MX
Mexico
Prior art keywords
parameter
focal length
camera
image
primary
Prior art date
Application number
MX2010012948A
Other languages
English (en)
Inventor
Dae-Sik Kim
Yong-Tae Kim
Gun-Il Lee
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of MX2010012948A publication Critical patent/MX2010012948A/es

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

Se proporciona un método y aparato para codificar y decodificar una imagen estereoscópica. Un método de restauración de una imagen estereoscópica incluye hacer el análisis sintáctico de un flujo de datos recibido en datos de imagen de una imagen estereoscópica e información con respecto a la imagen estereoscópica; extraer un parámetro de cámara dependiendo de las características individuales de cada una o más cámaras que han capturado la imagen estereoscópica; y decodificar los datos de imagen de la imagen estereoscópica.

Description

DO Y APARATO PARA GENERAR UN FLUJO DE DATOS DE I EREOSCOPICAS USANDO UN PARAMETRO DE CAMARA, Y ME RATO PARA RESTAURAR LA IMAGEN ESTEREOSCOPICA USA PARAMETRO DE CAMARA Campo de la Invención Los métodos y aparatos consistentes con la ción se relacionan con la codificación y decodi a imagen estereoscópica.
Antecedentes de la Invención En la actualidad, se ¦ están llevando tigaciones sobre métodos de visualización de imensionales (3D) con el fin de representar nes de forma más real y con una sensación más los métodos de visualización de imágenes os de visualización de imágenes 3D en los c ispositivo en el cual puede emplearse el mét lización de imágenes 3D, puede proporciona imág s a los usuarios mientras reproduce co eoscópicos .
Breve Descripción de la Invención Solución Técnica La presente invención proporciona un método y .codificar y decodificar una imagen estereoscópic De conformidad con un aspecto de la presente i roporciona un método para generar un flujo de nes estereoscópicas que incluye codificar d nes de una imagen estereoscópica; determ etro de cámara con base en características indi ada una de las cámaras que han capturado la eoscópica; e insertar los datos de imagen y el p mara en un flujo de datos. ción, los parámetros de cámara pueden ser etro y puede incluir por lo menos uno de un pará tud focal, un parámetro de relación de asp tud focal, un parámetro de punto principal, un p gulo de rotación, y un parámetro de traslación. arámetro de longitud focal, el parámetro de reí to, y el parámetro de punto principal es un ? una sola cámara y está definido como un pará a, y cada uno del parámetro de ángulo de rotac etro de traslación es un parámetro con res laciones entre una pluralidad de cámaras y s un parámetro fuera de cámara. El parámetro d aplicarse a varios procesos tales como un pr icción de línea epipolar y un proceso de rectif rando así la calidad de una imagen 3D.
Breve Descripción de las Figuras urador de imágenes estereoscópicas de conformi odalidad de ejemplo de la presente invención; la figura 3 es una diagrama que muestra una co un sistema coordenado mundial y un sistema co mara ; I la figura 4 es una diagrama que muestra una co una coordenada en un sistema coordenado de cáma enada correspondiente sobre una imagen; la figura 5 es una diagrama que muestra una co una coordenada en una imagen fotografiada enada sobre una imagen de reproducción; la figura 6 es una tabla que muestra inform ación e información del ángulo de rotación de un eoscópica; la figura 7 es un diagrama que muestra una co un sistema coordenado de cámara de vista prima eoscópica, de conformidad con una modalidad de presente invención; la figura 11 es un diagrama que ilustra la sinta mentar un parámetro de longitud focal de cá cto a una imagen estereoscópica, de conformidad idad de ejemplo de la presente invención; la figura 12 es un diagrama que ilustra la sinta mentar un parámetro de longitud focal de cá cto a una imagen estereoscópica, de conformidad idad de ejemplo de la presente invención; la figura 13 es un diagrama que ilustra la sinta mentar un parámetro de longitud focal de cá cto a una imagen estereoscópica, de conformidad lidad de ejemplo de la presente invención; la figura 14 es un diagrama que ilustra la sinta mentar un parámetro de longitud focal de cá idad de ejemplo de la presente invención; la figura 17 es un diagrama que ilustra la sinta mentar un parámetro de punto principal de cá cto a una imagen estereoscópica, de conformidad lidad de ejemplo de la presente invención; la figura 18 es un diagrama que ilustra la sinta mentar un parámetro de ángulo de rotación de cá cto a una imagen estereoscópica, de conformidad lidad de ejemplo de la presente invención; la figura 19 es un diagrama de bloques de un rador de archivos de imágenes estereoscópicas que étodo de generación de flujo de datos de reoscópicas , de conformidad con una modalidad de a presente invención; la figura 20 es un diagrama de bloques de un si auración/reproducción de imágenes estereoscópi odalidad de ejemplo de la presente invención.
Descripción Detallada de la Invención De conformidad con un aspecto de la presente in oporciona un método de generación de flujo de nes estereoscópicas que incluye codificar datos n estereoscópica; determinar un parámetro de cá en características individuales de cada una de u as las cuales han capturado la imagen estereosc tar los datos de imagen y el parámetro de cáma >de datos .
La determinación del parámetro de cámara puede minar un parámetro de longitud focal prima senta una longitud focal primaria de una cámara ria de la una o más cámaras y un parámetro de secundaria que representa una longitud focal se a cámara de vista secundaria de la una o más cám incluir además determinar uno de un parám tud focal primaria que representa la longitu ria y un parámetro de longitud focal secunda senta la longitud focal secundaria.
Si el parámetro de diferencia de longitud foca la longitud focal primaria es diferente de la secundaria, la determinación del parámetro d incluir además determinar un parámetro de primaria que representa la longitud focal prima etro de longitud focal secundaria que repres tud focal secundaria.
La determinación del parámetro de cámara puede s determinar un parámetro de longitud focal ho epresenta un componente horizontal de una longit a cámara y un parámetro de longitud focal vert senta un componente vertical de la longitud foc cal de la longitud focal.
La determinación del parámetro de cámara puede s determinar un parámetro de uso de la rela to de longitud focal que indica si la informa cto a una longitud focal de la cámara se estab en una relación de aspecto entre un co ontal y un componente vertical de la longitud fo Si el parámetro de uso de relación de asp tud focal indica que se usa la relación de aspec omponente horizontal y el componente vertical tud focal, la determinación del parámetro de incluir además determinar una relación de as tud focal que representa la relación de aspecto nente horizontal y el componente vertical de la .
Si el parámetro de uso de relación de asp ria de la imagen estereoscópica y un parámetro ipal secundario que representa un punto principa n de vista secundaria de la imagen estereoscópic La determinación del parámetro de cámara puede minar cada uno del parámetro de punto principal i parámetro de punto principal secundario par nentes .
La determinación del parámetro de cámara puede arámetro de establecimiento de información de ipales que indica si se establece la informa cto a cada uno de los puntos principales de un ista primaria y una imagen de vista secundari n estereoscópica.
Si el parámetro de establecimiento de inform s principales indica que se establece la informa cto al punto principal, la determinación del p s principales indica que no se establece la inf respecto al punto principal, la determinac etro de cámara puede incluir además determinar central de un área la cual es fotografiada a de vista predeterminada de la una o más ide con un punto principal de una imagen terminada de la imagen estereoscópica.
La determinación del parámetro de cámara puede rainar un parámetro de ángulo de rotación de ej senta un ángulo de rotación con respecto a un e etro de ángulo de rotación de. eje y que repre o de rotación con respecto a un eje y, y un pará IO de rotación de eje z que representa un á ción con respecto a un eje z, de entre án ción de la cámara.
La determinación del parámetro de cámara puede ción puede incluir insertar el parámetro de c o menos de un bloque de subnivel del primer bloq loque de primer subnivel del bloque moov, un b r subnivel de un bloque trak el cual es un b do subnivel del bloque moov, y un bloque de sub egundo bloque meta el cual es un bloque de vel del bloque trak.
De conformidad con otro aspecto de la ción, se proporciona un método de restaura nes estereoscópicas que incluye hacer un ctico de un flujo de datos recibido en datos d a imagen estereoscópica e información con respe n estereoscópica; extraer un parámetro de diendo de las características individuales de una o más cámaras que han capturado la reoscópica; y decodificar y restaurar los datos d a cámara de vista secundaria de la una o más cám La extracción del parámetro de cámara puede s extraer un parámetro de diferencia de longit indica si una longitud focal primaria de una c primaria de la una o más cámaras es diferent tud focal secundaria de una vista secundaria de ámaras .
Si el parámetro de diferencia de longitud foca la longitud focal primaria es idéntica a la 1 secundaria, la extracción del parámetro de cáma ir adicionalmente extraer uno de un parám itud focal primaria que representa la longit ria y un parámetro de longitud focal secund senta la longitud focal secundaria.
Si el parámetro de diferencia de longitud foca la longitud focal primaria es diferente a la senta un componente vertical de la longitud foc a .
La extracción del parámetro de cámara puede s extraer un parámetro de relación aspecto de que representa una relación de aspecto e nente horizontal y un componente vertical itud focal de la cámara; y extraer uno de un pará itud focal horizontal que representa el co zontal de la longitud focal y un parámetro de 1 vertical que representa el componente vertica itud focal.
La extracción del parámetro de cámara puede s extraer un parámetro de uso de relación as itud focal que indica si se establece informa cto a una longitud focal de la cámara mediante e elación de aspecto entre un componente horizon Si el parámetro de uso de relación de asp tud focal indica que no se usa la relación de el componente horizontal y el componente vertic tud focal, la extracción del parámetro de cáma ir además determinar la relación de aspecto nente horizontal y un componente vertical de la teniendo un valor ?' .
La extracción del parámetro de cámara puede s extraer un parámetro de punto principal prim senta un punto principal de una imagen de vista imagen estereoscópica y un parámetro de punto p dario que representa un punto principal de una i secundaria de la imagen estereoscópica.
La extracción del parámetro de cámara puede er cada uno del parámetro de punto principal pr parámetro de punto principal secundario para cto al punto principal, la extracción del pará a puede incluir además determinar extraer un p nto principal primario que representa el punto p a imagen de vista primaria de la imagen estereos arámetro de punto principal secundario que repre principal de la imagen de vista secundaria de l eoscópica, y cada uno del parámetro de punto p rio y del parámetro de punto principal secun e para x y y componentes .
Si el parámetro de establecimiento de inform s principales indica que no se establece la inf respecto al punto principal, la extracción del p ámara puede incluir además determinar que ral de un área la cual es fotografiada por una c a predeterminada de la una o más cámaras coincid o principal de una imagen de vista predetermina La extracción del parámetro de cámara puede er un parámetro de ángulo de rotación en el o de rotación basado en el eje x, el ángulo de o en el eje y, y el ángulo de rotación basado e tán representados como una de una matriz de 3x sición de nueve bits.
Si el flujo de datos es un formato de archivo d o en la Organización de Estándares Interna , el archivo de medios basado en ISO puede in e moov, un bloque mdat, y un primer bloque me ción puede incluir insertar el parámetro de c o menos de un bloque de subnivel del primer bloq loque de primer subnivel del bloque moov, un b r subnivel de un bloque trak el cual es un b do subnivel del bloque moov, y un bloque de sub egundo bloque meta el cual es un bloque de n estereoscópica; extraer un parámetro de diendo de las características individuales de una o más cámaras que han capturado la eoscópica; y decodificar y restaurar los datos d imagen estereoscópica.
De conformidad con otro aspecto de la ción, se proporciona un medio de lectura por com tiene grabado en el mismo un programa de cómp tar un método de generación de imágenes estereos étodo incluye codificar datos de imagen de un eoscópica; determinar un parámetro de cámara con características individuales de cada una de un as que han capturado la imagen estereoscó tar los datos de imagen y el parámetro de cáma de datos .
De conformidad con otro aspecto de la etro de cámara en un flujo de datos.
La unidad de determinación de parámetro de cáma ir una unidad de determinación de parámetro de que determina una longitud focal de una cámara a una o más cámaras, y la unidad de determin etro de longitud focal puede determinar por sep etro de longitud focal primaria que represe tud focal primaria de una cámara de vista primar más cámaras y un parámetro de longitud focal se epresenta una longitud focal secundaria de una c secundaria de la una o más cámaras.
La unidad de determinación de parámetro de cáma ir además una unidad de determinación de pará encia de longitud focal que determina una di etros de longitud focal que indica si una longit na cámara de vista primaria de la una o más cár senta la longitud focal secundaria.
Si el parámetro de diferencia de longitud foca la longitud focal primaria es diferente de la secundaria, la unidad de determinación de pará tud focal puede determinar un parámetro de primaria que representa la longitud focal prima etro de longitud focal secundaria que repres tud focal secundaria.
La unidad de determinación del parámetro de cáma ir una unidad de determinación de parámetro f mina una longitud focal de una cámara d terminada de la una o más cámaras, y la u minación de parámetro focal puede determ etro de longitud focal primaria que repres itud focal primaria de la cámara y un pará itud focal secundaria que representa la longit tud focal de la cámara, y la unidad de determin etro de longitud focal puede determinar uno etro de longitud focal horizontal que repres nente horizontal de la longitud focal y un pará tud focal vertical que representa el componente longitud focal .
La unidad de determinación de parámetro de cáma ir además una unidad de determinación de pará e la relación de aspecto de longitud focal que d arámetro de uso de la relación de aspecto de que indica si la información con respecto tud focal de la cámara se establece mediante e relación de aspecto entre un componente horizon nente vertical de la longitud focal.
Si el parámetro de uso de relación de asp tud focal indica que se usa la relación de aspec tud focal, la unidad de determinación del pará tud focal de longitud focal puede determinar la specto entre el componente horizontal y el co cal de la longitud focal teniendo un valor ? .
La unidad de determinación del parámetro de cáma ir además una unidad de determinación de pará principal que determina información con respe principal de una imagen de vista predetermina n estereoscópica, y la unidad de determina etro de punto principal puede determinar por sep etro de punto principal primario que representa ipal de una imagen de vista primaria de la eoscópica y un parámetro de punto principal se representa un punto principal de una imagen daria de la imagen estereoscópica.
La unidad de determinación de parámetro d ista primaria y una imagen de vista secundari n estereoscópica.
La unidad de determinación del parámetro de cáma ir una unidad de determinación de parámetro ipal que determina información con respecto a ipal de una imagen de vista predeterminada de l eoscópica, con base en el parámetro de estable nformación de puntos principales, y, si el pará lecimiento de información de puntos principale se establece la información con respecto a ipal, la unidad de determinación del parámetro ipal puede incluir determinar por separado un p nto principal primario que representa el punto p a imagen de vista primaria de la imagen estereos arámetro de punto principal secundario que repre principal de la imagen de vista secundaria de l lecimiento de información de puntos principale no se establece la información con respecto ipal, la unidad de determinación del parámetro ipal puede determinar que un punto central de un es fotografiada por una cámara de vista predet a una o más cámaras coincide con un punto prin imagen de vista predeterminada de la eoscópica.
La unidad determinación del parámetro de cáma ir una unidad de determinación de parámetro de á ión que determina información con respecto a u otación de la cámara, y la unidad de determina etro de ángulo de rotación puede determinar un p ngulo de rotación de eje x que representa un á ión con respecto a un eje x, un parámetro de á ión de eje y que representa un ángulo de rota Si el flujo de datos es un formato de archivo d o en la Organización de Estándares Interna ) , el archivo de medios basado en ISO puede in e moov, un bloque mdat, y un primer bloque me d de inserción de flujo de datos puede ins etro de cámara en por lo menos de un bloque de primer bloque meta, un bloque de primer subn e moov, un bloque de primer subnivel de un blo ual es un bloque de segundo subnivel del bloque loque de subnivel de un segundo bloque meta el cu e de segundo subnivel del bloque trak.
De conformidad con otro aspecto de la ción, se proporciona un aparato de restaura enes estereoscópicas que incluye hacer un áctico de datos de imagen de una imagen estereos rmación con respecto a la imagen estereoscopio datos de imagen de la imagen estereoscópica u etro de cámara.
La unidad extracción del parámetro de cámar ir una unidad de extracción de parámetro de que extrae información con respecto a una de una cámara de vista predeterminada de la u as, y la unidad de extracción de parámetro de puede extraer por separado un parámetro de primaria que representa una longitud focal pri cámara de vista primaria de la una o más cáma etro de longitud focal secundaria que repres itud focal secundaria de una cámara de vista se una o más cámaras.
La unidad de extracción del parámetro de cáma ir además una unidad de extracción de pará encia de longitud focal que extrae un pará el parámetro de diferencia de longitud focal in ongitud focal primaria es idéntica a la longit daria, la extracción del parámetro de longitu extraer uno de un parámetro de longitud focal representa la longitud focal primara y un pará tud focal secundaria que representa la longit daria.
La unidad de extracción del parámetro de cáma ir una unidad de extracción de parámetro de que extrae información acerca de una longitud cámara de vista predeterminada de la una o más el parámetro de diferencia de longitud focal in ongitud focal primaria es diferente de la longit daria, la unidad de extracción del parámetro de puede extraer un parámetro de longitud focal representa la longitud focal primaria y un pará a cámara y un parámetro de longitud focal vert senta un componente vertical de la longitud foc a .
La unidad de extracción del parámetro de cáma ir una unidad de extracción de parámetro de que extrae información con respecto a una de una cámara de vista predeterminada de la u as, y una unidad de extracción de parámetro de specto de longitud focal que extrae un pará ión aspecto de longitud focal que represe ión de aspecto entre un componente horizont nente vertical de una longitud focal de la cáma d de extracción de parámetro de longitud foc er uno de un parámetro de longitud focal horizo senta el componente horizontal de la longitud fo etro de longitud focal vertical que repres Si el parámetro de uso de relación de asp tud focal indica que se usa la relación de aspec omponente horizontal y el componente vertical tud focal, la unidad de extracción del parám ión de aspecto de longitud focal puede ext etro de relación de aspecto de longitud fo senta la relación se aspecto entre el co ontal y el componente vertical de la longitud fo Si el parámetro de uso de relación de asp tud focal indica que no se usa la relación de el componente horizontal y el componente vertic tud focal, la unidad de extracción del parár ión de aspecto de longitud focal puede deter ión de aspecto entre el componente horizont nente vertical de la longitud focal teniendo principal de una imagen de vista secundari n estereoscópica.
La unidad de extracción del parámetro de punto p incluir extraer cada uno del parámetro d ipal primario y del parámetro de punto p dario para x y y componentes.
La unidad de extracción del parámetro de cáma ir una unidad de extracción de paráme lecimiento de información de punto principal qu parámetro de establecimiento de información d ipal que indica si se establece información con da uno de los puntos principales de una imagen ria y una imagen de vista secundaria de la eoscópica.
La unidad de extracción de parámetro de cáma ir una unidad de extracción de parámetro d dario que representa el punto principal de la it secundaria de la imagen estereoscópica, y cada etro de punto principal primario y del pará principal secundario se extrae para x y y compo La unidad de extracción de parámetro de cáma ir una unidad de extracción de parámetro d ipal que extrae información con respecto a ipal de una imagen de vista predeterminada de 1 reoscópica, y, si el parámetro de establecimi rmación de puntos principales indica que no se e nformación con respecto al punto principal, l cción de parámetro de punto principal puede de un punto central de un área la cual es fotograf cámara de vista predeterminada de la una o más cide con un punto principal de una imagen eterminada de la imagen estereoscópica. senta un ángulo de rotación con respecto a un e ángulos de rotación de la cámara.
La unidad de extracción de parámetro de án ión puede extraer un parámetro de ángulo de rot ual el ángulo de rotación con respecto al ej O de rotación con respecto al eje y, y el á ión con respecto al eje z están representados a matriz de 3x3 y una disposición de nueve bits.
Si el flujo de datos es un formato de archivo d o en la Organización de Estándares Interna ) , el archivo de medios basado en ISO puede in e moov, un bloque mdat, y un primer bloque me d de análisis sintáctico puede extraer el parár a de por lo menos de un bloque de subnivel de e meta, un bloque de primer subnivel del bloque e de primer subnivel de un bloque trak el cu ador de un flujo de datos de imágenes estéreo de conformidad con una modalidad de ejemplo nte invención.
Con referencia a la figura 1, el aparato gene de datos de imágenes estereoscópicas 100 inc d de codificación de datos de imágenes 110, un terminación de parámetro de cámara 120, y una u ción de flujo de datos 130.
La unidad de codificación de datos de imáge ica datos de imagen de una imagen estereoscópic de imagen codificados hacia la unidad de inse de datos 130. Cuando se codifica la eoscópica, las imágenes de vista primaria y se n codificarse por separado o puede codifica n compuesta de las imágenes de vista prir daria. Asimismo, la entrada de una imagen estere ente. Debido a las diferentes vistas, la inform ámaras puede diferir de cámara a cámara, y por parámetros de cámara se establecen individualme cámara .
De conformidad con una modalidad de la ción, la unidad de determinación de parámetro d puede determinar información que representa una , un punto principal, y un ángulo de rotación/tr cada cámara, como los parámetros de cámara. Aunq ra en la figura 1, la unidad de determina etro de cámara 120 puede incluir una un minación de parámetro focal, una unidad de deter parámetro de punto principal, y una uni minación de parámetro de ángulo de rotación.
La unidad de determinación de parámetro focal d mación con respecto a una longitud focal de un ferencia de longitud focal) .
La unidad de determinación de parámetro de cá incluir una unidad de determinación de pará ión de aspecto con el fin de determinar una usando una relación entre longitudes focales ve ontal (de aquí en adelante, la relación se cita ión de aspecto de longitud focal) .
También, la unidad de determinación de parán a 120 puede incluir una unidad de determina etro de uso de relación de aspecto con el minar información que indica si se usa la reí to de longitud focal (de aquí en adelant mación se cita como una parámetro de uso de reí to de longitud focal) .
La unidad de determinación de parámetro d ipal determina información con respecto a u ipal) .
La unidad de determinación de parámetro de á ión determina información con respecto a un á ión de una cámara de vista predeterminada de u as (de aquí en adelante, esta información se c etro de ángulo de rotación) .
La unidad de inserción de flujo de datos 130 g de datos de imágenes estereoscópicas insert de imágenes codificadas recibidas de la un ficación de datos de imágenes 110 y los parám a recibidos de la unidad de determinación de ? mara 120, en un flujo de datos .
Cada uno de los datos de imagen codificada etros de cámara se insertan en una posición apro lujo de datos de imagen estereoscópica. Una estru lujo de datos de imagen estereoscópica en la de imágenes 230, y una unidad de reproducción 2 La unidad de análisis sintáctico 210 hace el ctico de un flujo de datos de imágenes estéreo ido con el fin de separar datos de imagen de un eoscópica de la información acerca de la eoscópica. La unidad de análisis sintáctico 210 de imagen hacia la unidad d decodificación de nes 230 y saca la información con respecto a l eoscópica hacia la unidad de extracción de parát a 220.
La unidad de extracción de parámetro de cám e parámetros de cámara de la información recibi d de análisis sintáctico 210. Los parámetros d respecto a una imagen estereoscópica dependen terísticas individuales de cada cámara de la u ras que han capturado la imagen estereoscópi etro focal, una unidad de extracción de parár principal, y una unidad de extracción de pará o de rotación.
La unidad de extracción de parámetro focal e etro de longitud focal .
La unidad de extracción de parámetro de cámara 2 ir una unidad de extracción de parámetro de di ongitud focal. La unidad de extracción de pará a 220 puede determinar si extrae una longitud cámara de vista en consideración de si la longit ada cámara de vista es idéntica a la longitud cámara de vista, con base en el parámetro de di ongitud focal extraído por la unidad de extra etro de diferencia de longitud focal.
La unidad de extracción de parámetro de cámara 2 ir una unidad de extracción de parámetro de reí cción de parámetro de cámara 220 puede de mación si extrae el parámetro de relación de as tud focal, con base en una parámetro de uso de specto de longitud focal extraído por la un cción de parámetro de uso de relación de as itud focal .
La unidad de extracción de parámetro de punto p e parámetro de punto principal . La unidad de ex arámetro de cámara 220 puede incluir una un cción de parámetro de establecimiento de inform principal. La unidad de extracción de pará a 220 puede determinar si extrae el parámetro cipal, con base en el parámetro de establecim rmación de punto principal extraído por la u acción de parámetro de establecimiento de inform o principal.
La unidad de reproducción 240 reproduce la eoscópica restaurada usando los parámetros de que la unidad de reproducción 240 reproduce l eoscópica usando los parámetros de cámara y to deración las correlaciones entre cámaras de di s, la imagen estereoscópica puede reproducirse sión.
De conformidad con una modalidad de la ción, los parámetros de cámara pueden ser etro y puede incluir por lo menos uno de un pará tud focal, un parámetro de relación de asp tud focal, un parámetro de punto principal, un p gulo de rotación, y un parámetro de traslación. arámetro de longitud focal, el parámetro de reí to de longitud focal, y el parámetro de punto pr n parámetro para una sola cámara y se define ibirán posteriormente con referencia a las figu 8 . Más detalladamente, los ejemplos del uso etro de longitud focal (figuras 1 0 a la etro de diferencia de longitud focal (figura etro de relación de aspecto de longitud focal 15 ) , un parámetro de uso de relación de as tud focal (figura 15 ) , un parámetro de punto p ras 16 y 17 ) , un parámetro de establecimi mación de punto principal (figura 17 ) , y un pará O de rotación (figura 1 8 ) se describirán más eferencia a las figuras correspondientes.
La figura 3 es una diagrama que muestra una co un sistema coordenado mundial 3 00 y un enado de cámara 3 50 .
Con referencia a la figura 3 , una traslación distancia entre el sistema coordenado mundial 3 enado de cámara 350 con respecto a un eje X, Xw ma coordenado mundial 300; un ángulo de rotaci Y, Ye 370 del sistema coordenado de cámara cto a un eje Y, Yw 320 del sistema coordenado y un ángulo de rotación de un eje Z, Zc 380 del enado de cámara 350 con respecto a un eje Z, Zw ma coordenado mundial 300. El ángulo de rotaci representarse como una matriz 3x3.
Una correlación correspondiente entre una coord ? sistema coordenado mundial 300 y una coordena istema coordenado de cámara 350 se define por med ión 1.
Me = R^Mw-R^-t (1) Si cierto punto 302 tiene una coordenada PW cto al sistema coordenado mundial 300, la coord coincide con una coordenada Oc 390 con resp ordenada (x, y, f) 430 sobre la imagen 420.
Con respecto a la figura 4, una correlación enada (X, Y, Z) 410 y la coordenada (x, y, f) 4 sentarse por una expresión proporcionar 450 sión de relación 460, derivada de la e rcional 450. La expresión proporcional 45 sión de relación 460 se simplifican como se mu iguiente Ecuación 2. s*m = A -Me (2) En la ecuación 2, s representa una relación de resenta la coordenada (x, y, f) 430 sobre la ima presenta un parámetro en cámara, y Me repre denada (X, Y, Z) 410 en el sistema coordenado d La relación de aspecto s puede representarse com y el parámetro en cámara A puede representarse c 0, 0; 0, -f/sy, 0; 0, 0, 1] . uste. Asimismo, el punto central del área fotog coincidir con el punto principal de la imagen go, de nuevo, puede ocurrir un ajuste.
La figura 5 es una diagrama que muestra una co cierta coordenada (x, y) 540 sobre una imagen c y una coordenada (x±mt Yim) 570 sobre una ducida 500.
Con referencia a la imagen 5, si la imagen captu sponde con la imagen reproducida 500, un orige magen capturada 510 corresponde a un origen (ox, a imagen reproducida 500, y la coordenada (x, n capturada 510 corresponde a la coordenada { e la imagen reproducida 500.
Si se asume que el tamaño de unidad lateral es amaño de unidad longitudinal es sy 530, con bas terísticas de hardware de una cámara, la co eoscópica .
Con referencia a la figura 6, una correlación ma coordenado de cámara de vista primaria y un enado de cámara de vista secundaria de la eoscópica se determina usando la informa ación y la información de ángulo de rotación de mas coordenados. La correlación entre la enado de cámara de vista primaria y el enado de cámara de vista secundaria se describi iendo que el sistema coordenado de cámara ria y el sistema coordenado de cámara d daria tienen el mismo eje x y que el sistema co cámara de vista primaria es idéntico a un enado mundial.
La información de traslación representa una d sistema coordenado de cámara de vista secundaria sta secundaria se representa con la suposición d ma coordenado de cámara de vista primaria es el enado mundial. Por lo tanto, una matriz de rota ma coordenado de cámara de vista primaria es 1= , 0; 0, 0, 1]; y una matriz de rotación del enado de cámara de vista secundaria se represe , b, c) . Consecuentemente, la información de representarse usando solo la matriz de rota ma coordenado de cámara de vista secundaria.
En general, la información de rotación ti ctura de una matriz de 3x3. Sin rnativamente , la información de rotación esentarse usando ángulos con respecto a los ejes s decir, la información de rotación puede repre R = R( cpx , <py , cpz ) = R( cpx) * R( cpy) * R( <pz ) .
La figura 7 es un diagrama que muestra una co ma coordenado de cámara de vista secundaria 750 ación t 710, y por lo tanto la información de tr epresenta como t= (tx, ty, t2) . Asimismo, el enado de cámara de vista primaria 700 gira ma coordenado de cámara de vista secundaria 75 o de rotación R 760, y por lo tanto la inform o de rotación se representa como R=f(a, b, c) .
Consecuentemente, cierta coordenada 720 se loc posición Pl 730 con respecto al sistema coord a de vista primaria 700 y se localiza en una pos con respecto al sistema coordenado de cámara daria 750. La posición Pl 730 y la posición n definirse también por la traslación t 710 y e tación R 760.
La figura 8 es un diagrama que ilustra una estru ormato de archivo de medios basado en la Organiz datos AV en el bloque mdat 850. El bloque ye los datos AV en forma de flujos elementales ( to de medios basado en ISO, 800, es un formato ue se usa ampliamente de conformidad con los es Grupo de Expertos de Imágenes en Movimiento-4 sus siglas en inglés) y Codificación d ado/H.264 (AVC/H.264, por sus siglas en inglés) .
La figura 9 es un diagrama que ilustra una list s bloques de un formato de archivo de medios b Con referencia a la figura 9, la lista de blo to de archivo de medios basado en ISO ti ctura jerárquica. Un bloque ftyp 910, un blo un bloque mdat 930, un bloque meta 940, y otros se localizan en un nivel superior.
El bloque ftyp 910 contiene formación con respe s en una pista.
El bloque mdat 930 es un espacio para datos de m El bloque meta 940 es un espacio para metad rmidad con la presente invención, un bloque scd ta en un subnivel del bloque meta 940 e inform a estereoscópica e información de di eoscópica se insertan en un bloque scdi 980.
De conformidad con otro aspecto de la ición, la información de cámara estereoscópic tarse en por lo menos uno de los bloques 950 loc i nivel superior, un bloque 970 incluido en e 920, un bloque 966 incluido en el bloque trak e 964 incluido en el bloque mdia 962, y un bl ido en el bloque meta 940.
La figura 10 es un diagrama que ilustra la sinta implementar los varios parámetros con respect ámara de conformidad con una modalidad de la ción, la sintaxis 1000 que define el bloque rado en la figura 9 puede incluir los si etros .
Un parámetro *item_count' representa el nú ntos que representan fragmentos de eoscópicos . Si una pluralidad de fragmentos t información de cámara e información de dispar etro xitem_count' puede establecerse teniendo Un parámetro *item_D' representa informa ificación (ID) de elementos grabados en un blo fragmentos estereoscópicos. La información de u lementos se inserta en el bloque iloc.
Un parámetro is_item_ID_ref ' representa si un al utiliza un parámetro de otro elemento. El p cted_viewing_distance ' representa una dista n esperada. Una anchura/altura de visualizació ancia de visión puede definirse en milímet etro *min_of_disparity' y un p of_disparity' respectivamente representan disp as y máximas de imágenes primarias y secundarias Un parámetro ' is_cam_params ' representa si se in rmación de cámara. Un parámetro 'baseline7 repres ancia entre dos cámaras. Un parámetro focal esenta una distancia desde un centro óptico 0 de imagen. Un parámetro ? convergenge_d esenta una distancia desde un punto central ras hasta un punto de convergencia. Un p camera_cross ' representa si la cámara estereoscóp esta en una forma paralela o forma un cruzamient Los datos de una imagen estereoscópica se prov rado en la figura 10, se describirá ahora con re figuras 11 a 18.
La figura 11 es un diagrama que ilustra la sinta implementar un parámetro de longitud focal de cát cto a una imagen estereoscópica, de conformidad idad de ejemplo de la presente invención.
Con referencia a la figura 11, la sintaxis 1100 arámetro * is_different__focal_lenght ' 1110. El p ifferent_focal_lenght ' 1110 es un paráme encia de longitud focal que se describe arr encia a la figura 1, y representa si una longit na cámara de vista primaria (citada de aquí en longitud focal primaria) es diferente de una de una cámara de vista secundaria (citada de nte como longitud focal secundaria) . Un p ary_focal_lenght ' 1120 representa la longitu Si el si condicional 1130 determinada que el p ifferent_focal_lenght ' 1110 tiene un valor etro * secondary_focal_lenght ' 1140 no se útil caso, el parámetro de diferencia de longitu mina que la longitud focal primaria es idénti tud focal secundaria, y por lo tanto las Io es de las cámaras de vistas primaria y secundari sentarse usando solo la longitud focal primaria muestra en la figura 11, las longitudes focale as de vistas primaria y secundaria pueden repre o solo la longitud focal secundaria .
La unidad de determinación de parámetro de cá aparato de generación de flujo de datos de eoscópicas 100 ilustrado en la figura 1 puede nidad de determinación de parámetro de longitud nidad de determinación de parámetro de longit cción de parámetro de longitud focal, y la u cción de parámetro de longitud focal puede ex etro *primary_focal_lenght ' 1120. La uni cción de parámetro de longitud focal puede deter e el parámetro * secondary_focal_lenght ' 1140, l parámetro ? is_different__focal_lenght ' 1110 extr nidad de extracción de parámetro de longitud foc La figura 12 es un diagrama que ilustradla sinta implementar un parámetro de longitud focal de cá cto a una imagen estereoscópica, de conformidad lidad de ejemplo de la presente invención.
Con referencia a la figura 12, la sintaxis iza el parámetro is_different_focal_lenght rado en la figura 11 y utiliza tanto el p ary_focal_lenght ' 1220 como el p ndary_focal_lenght ' 1240. Es decir, las lo nes estereoscópicas 100 ilustrado en la figura ir una unidad de determinación de parámetro de , y la unidad de determinación de parámetro de puede determinar el parámetro 'primary_focal y el parámetro 1 secondary_focal_lenght ' 1240.
Asimismo, la unidad de extracción de parámetro d del aparato de restauración de imágenes estéreo ilustrado en la figura 2 puede incluir una u cción de parámetro de longitud focal, y la u cción de parámetro de longitud focal puede ex etro ' primary_focal_lenght ' 1220 y el p ndary_focal_lenght ' 1240.
La figura 13 es un diagrama que ilustra la sinta implementar un parámetro de longitud focal de cá cto a una imagen estereoscópica, de conformidad idad de ejemplo de la presente invención. aparato de generación de flujo de datos de eoscópicas 100 ilustrado en la figura 1 puede nidad de determinación de parámetro de longitud nidad de determinación de parámetro de longit determinar el parámetro * hor_focal_lenght ' 13 etro *ver_focal_lenght ' 1340.
Asimismo, la unidad de extracción de parámetro d del aparato de restauración de imágenes estéreo ilustrado en la figura 2 puede incluir una u cción de parámetro de longitud focal, y la u cción de parámetro de longitud focal puede ex etro ' or_focal_lenght ' 1320 y el p focal_lenght' 1340.
La figura 14 es un diagrama que ilustra la sinta implementar un parámetro de longitud focal de cá ecto a una imagen estereoscópica, de conformidad senta el componente horizontal de la longitud fo etro ¾ aspec_ratio' 1440 representa la rela to de la longitud focal . De conformidad c lidad de la presente invención, puede usarse un p focal_lenght ' en lugar del parámetro xhor_focal La unidad de determinación de parámetro de cá aparato de generación de flujo de datos de reoscópicas 100 ilustrado en la figura 1 puede unidad de determinación de parámetro de longitud unidad de determinación de parámetro de rel cto de longitud focal . La unidad de determin etro de longitud focal puede determinar el p focal_lenght ' 1420, y la unidad de determin etro de relación de aspecto puede determ etro x aspec_ratio' 1440.
La figura 15 es un diagrama que ilustra la sinta implementar un parámetro de longitud focal de cá cto a una imagen estereoscópica, de conformidad idad de ejemplo de la presente invención.
Con referencia a la figura 15, la sintaxis 1500 parámetro is_aspect_ratio' 1510. El p spect_ratio' 1510 es una relación de aspecto de utiliza un parámetro que se describe arr encia a la figura 1, y representa si se usa una specto de longitud focal con el fin de represe itud focal. Un parámetro 1 hor_focál_lenght senta un componente de una longitud focal .
Si un si condicional 1530 determina que el p spect_ratio' 1510 tiene un valor '1', se etro aspect_ratio' 1540. Es decir, si se deter sará la relación de aspecto de longitud focal, se to de longitud focal, la relación de aspecto de puede considerarse que tiene un valor ¾1' y puede determinarse un componente horizontal tud focal como idéntica a un componente vertic tud focal .
La unidad de determinación de parámetro de cá aparato de generación de flujo de datos de eoscópicas 100 ilustrado en la figura 1 puede unidad de determinación de parámetro de longitu unidad de determinación de parámetro de rela to de longitud focal, y una unidad de determin de relación de aspecto de longitud focal. La u rminación de parámetro de longitud focal puede de parámetro *hor_focal_lenght ' 1520. La uni rminación de parámetro de relación de aspect rminar si determina el parámetro x aspec_ratio' 1 to de longitud focal . La unidad de extrac etro de longitud focal puede extraer el p focal_lenght ' 1520. La unidad de extracción de ? relación de aspecto puede determinar si ex etro 4 aspec_ratio' 1540, con base en el p spect_ratio' 1510 extraído por . la uni minación de uso de relación de aspecto de 1.
La figura 16 es un diagrama que ilustra la sinta implementar un parámetro de punto principal d respecto a una imagen estereoscópica, de conform odalidad de ejemplo de la presente invención.
Un punto principal es un punto central de un rada por una cámara. El punto principal se re separado en cada imagen de vista y puede repre o x y y componentes . De conformidad con una moda principal de la imagen de vista primaria, el p ary_principal_y' 1650 representa un componente principal de la imagen de vista primaria, el p ndary_principal_x' 1660, un componente x de ipal de la imagen de vista secundaria, y el p ndary_principal_y' 1670, representa un componen principal de la imagen de vista secundaria.
La unidad de determinación de parámetro de cá aparato de generación de flujo de datos de eoscópicas 100 ilustrado en la figura 1 puede unidad de determinación de parámetro de punto pr idad de determinación de parámetro de punto p determinar el parámetro *primary_principal_x' etro *primary_principal_y' 1650, el p ndary_principal_x' 1660 , y el p ndary_principal_y' 1670.
La figura 17 es un diagrama que ilustra la sinta implementar un parámetro de punto principal d respecto a una imagen estereoscópica, de conform modalidad de ejemplo de la presente invención.
Con referencia a la figura 17, la sintaxis 1700 parámetro ? is_principal_point ' 1710. El ? rincipal_point ' 1710 es un parámetro de estable formacion de punto principal que se describe ar encia a la figura 1, represente si se estab mación de punto principal, y define un caso c principal de una imagen es diferente de u al de una cámara.
Si un si condicional 1730 determina que el ? rincipal_point ' 1710 tiene un valor ?' , se ut etro primary_principal_x' 1740, un p ary_principal_y' 1750, un p definen por separado el parámetro *primary_prin , el parámetro primary_principal_y ' 1750, el p ndary_principal_x' 1760, y el ? ndary_principal_y' 1770. De conformidad c idad de la presente invención, si el si condicio mina que el parámetro is_principal_point ' 1710 x0'# el parámetro primary_principal_x' 1 etro *primary_principal_y' 1750, el ? ndary_principal_x' 1760, y el p ndary_principal_y7 1770 no se definen por separa central de cada cámara de vista se consi ide con un punto principal de cada imagen de vis La unidad de determinación de parámetro de cá aparato de generación de flujo de datos de reoscópicas 100 ilustrado en la figura 1 puede unidad de determinación de parámetro de punto pri into principal.
Asimismo, la unidad de extracción de parámetro d del aparato de restauración de imágenes estéreo ilustrado en la figura 2 puede incluir una u cción de parámetro de punto principal y una u cción de parámetro de establecimiento de inform principal. La unidad de extracción de pará principal puede extraer el p ary_principal_x' 1740, el p ary_principal_y' 1750 , el p ndary_principal_x' 1760, y el p ndary_principal_y' 1770, con base en el p rincipal_point ' 1710 extraído por la uni cción de parámetro de establecimiento de inform principal.
La figura 18 es un diagrama que ilustra la sinta tion[9]/ en una disposición de nueve bits.
A pesar de que no se muestra en la figura xis 1800 también utiliza un parámetro de trasla etro de traslación puede representar una distanc istema coordenado de cámara de vista primari ma coordenado de cámara de vista secundaria en slation [3] ' .
Por lo tanto, la unidad de determinación de parái a 120 del aparato de generación de flujo de nes estereoscópicas 100 ilustrado en la figura ir una unidad de determinación de parámetro de á ión, y la unidad de determinación de parámetro d tación puede determinar otation [9] ' 1820.
Asimismo, la unidad de extracción de parámetro d del aparato de restauración de imágenes estéreo ilustrado en la figura 2 puede incluir una u rchivos de imágenes estereoscópicas 1900 incl a de visión primaria 1902, una cámara de daria 1904, una cámara de imagen de eoscópica/mono 1906, una unidad de entrada 19 d de procesamiento de señales de imágenes 19 d de almacenamiento 1930, una unidad de codi y una unidad de generación de archivos 1960.
Las cámaras de vistas primaria y secundaria 190 rafían un sujeto predeterminado en vistas pr daria de tal maneras que se producen imágenes pr daria diferentes. Si también se captura una i mono mediante el sistema de generación de arc nes estereoscópicas 1900, se produce una cópica de la cámara de imagen de eoscópica/mono 1906. Una imagen producida de cad cámaras de vista primaria y secundaria 1902 y 1 ada (CCD, por sus siglas en inglés) o tipo semic ementario metal-óxido (CMOS, por sus siglas en i La unidad de almacenamiento 1930 almacena d nes de la imagen previamente procesada y proporc de imágenes a la unidad de codificación 1940. A d de almacenamiento 1930 se ilustra por sepá nla de generación de archivos de imágenes estéreo puede incluir además otros elementos de almace almacenamiento temporal entre otros elemen ma de generación de archivos de imágenes estéreo diferentes a la unidad de almacenamiento 1930.
La unidad de codificación 1940 codifica los n recibidos de. la unidad de almacenamiento 193 ario, se puede omitir la codificación de los n por parte de la unidad de codificación 1940.
La unidad de generación de archivos 1960 incluir información relacionada con imágene mación relacionada con imágenes 3D. La inf ionada con imágenes 3D representa una correlaci imágenes de vista primaria y secundaria, y puede mación con respecto a secciones de datos mación con respecto a un método de disposició nes primaria y secundaria, información con respe de archivo de imagen, un parámetro de mación de visualización, e información de dispar De conformidad con una modalidad de la ción, la unida de generación e archivos 196 cenar los datos de imágenes y la informa elación de imágenes 1950, respectivamente, en un atos de medios y una región de encabezamiento del agen 1970. Si el archivo de imagen 1970 es un fo ivo de medios basado en ISO, los datos de image eoscópicas , de conformidad con una modalidad de presente invención.
Con referencia a la figura 20 , el sis uración/reproducción de imágenes estereoscópic ye una unidad de análisis sintáctico 2020 , una u ificación 2 030 , una unidad de almacenamiento 2 d de reproducción 2050 , y una unidad de visua La unidad de análisis sintáctico 2020 hace el ctico de un archivo de imagen recibido 2010 . De se hace el análisis sintáctico de la inf enada en cada uno de un bloque ftyp, un bloque e trak, y un bloque meta, pueden extraerse n almacenados en un bloque mdat . Los datos de i primaria 2022 , datos de imagen de vista se y los datos de imagen estereoscópica/vista m ria 2022, los datos de imagen de vista secundar s datos de imagen de vista estereoscópica/mono xtraen del archivo de imagen 2010. La decodific za solo si los datos de imagen en el archivo d han sido decodificados . La unidad de almacenamie e y almacena datos de imágenes (decodificados) de la unidad de decodificación 2030, y la inf ionada con los datos de imagen 2028 que se ext de la unidad de análisis sintáctico 2020.
La unidad de reproducción 2050 recibe la inf cionada con la reproducción de imágenes 2048 y nes 2045 que serán reproducidos, de la unidad 20 ducir una imagen. La información relacionada ducción de imágenes 2048 es información requer oducir la imagen de entre la información relacio datos de imagen 2028, e incluye informa n monoscópica al mismo tiempo, haciendo referen mación de identificación de datos de imágene mación de secciones de datos 2D/3D.
La unidad de visualización 2060 puede visual n reproducida por la unidad de reproducción 205 lia. La unidad de visualización 2060 puede lia de cristal líquido (LCD, por sus siglas en rrera. Se puede visualizar una imagen monoscópic aga la LCD de barrera, y ambas imágenes de vist n estereoscópica pueden visualizarse simultá o se enciende la LCD de barrera.
La figura 21 es un diagrama de flujo de un m ación de flujo de datos de imágenes estereoscóp rmidad con una modalidad de ejemplo de la ción .
Con referencia a la figura 21, en la operación la longitud focal puede incluir información de , información que indica si las longitudes fo ámaras de vistas son diferentes entre sí, e inf indica si una longitud focal está representada ión de aspecto. El parámetro relacionado con ipal puede incluir información de punto prin mación que indica si se establece por separado ipal de una imagen además de un punto central a .
En la operación 2130, los datos de imágenes cod s parámetros de cámara se insertan en un flujo d jemplo, si el flujo de datos es un formato de ar s basado en ISO, los datos de imagen pueden in n bloque mdat, y los parámetros de cámara tarse en bloque de subnivel de un bloque moov, u , un bloque de subnivel de un bloque trak, u o en ISO , los datos de imagen pueden an cticamente en un bloque mdat, y la informac cto a la imagen estereoscópica puede an cticamente de un bloque de subnivel de un bloq loque trak, bloque de subnivel de un bloque t e meta, o un bloque de subnivel de un bloque met En la operación, se extraen los parámetros de diendo de las características individuales de ca cámaras que han capturado la imagen estereoscóp etros de cámara pueden incluir un parámetro reí la longitud focal, un parámetro relacionado con ipal, un parámetro de traslación, un parámetro d tación, y un parámetro de relación de aspecto. A n extraerse un parámetro de uso de relación de arámetro de diferencia de la longitud focal etro de establecimiento de información d Las modalidades de la presente invención birse como programas de cómputo y pueden imple computadoras digitales de uso general que amas usando un medio de lectura por comp los de medios de grabación de lectura por cor yen medios de almacenamiento magnético (por discos flexibles, discos duros, etc.), me ción óptica (por ejemplo, CD-ROMs, o DVDs) , y si Aunque la presente invención se ha mostrado y icularmente con referencia a modalidades de ejemp , aquellos con experiencia en la técnica entend n hacerse varios cambios en la forma y los det isma sin alejarse del espíritu y alcance de la ción como se define en las siguientes reivindica Se hace constar que con relación a esta fecha, o conocido por la solicitante para llevar a la

Claims (1)

  1. REIVINDICACIONES Habiéndose descrito la invención como antec ma como propiedad lo contenido .en las si ndicaciones : 1. Un método de restauración de eoscópicas , caracterizado porque comprende: hacer el análisis sintáctico de un flujo d ido a datos de imágenes de una imagen estereos mación con respecto a la imagen estereoscópica; extraer un parámetro de cámara que re terísticas individuales de cada una de una o más an capturado la imagen estereoscópica; y decodificar y restaurar los datos de imagen de l eoscópica . 2. El método de restauración de imágenes estéreo más cámaras y un parámetro de longitud focal se epresenta una longitud focal secundaria de una c secundaria de la una o más cámaras. 4. El método de restauración de imágenes estéreo onformidad con la reivindicación 1, caracterizad xtracción del parámetro de cámara comprende ex etro de diferencia de longitud focal que indic tud focal primaria de una cámara de vista primar o más cámaras es diferente de una longitu daria de una cámara de vista secundaria de la u as . 5. El método de restauración de imágenes estéreo onformidad con la reivindicación 4, caracterizad extracción del parámetro de cámara adicio rende extraer uno de un parámetro de longit ria que representa la longitud focal primar tud focal secundaria que representa la longit daria si el parámetro de diferencia de longit a que la longitud focal primaria es diferen itud focal secundaria. 7. El método de restauración de imágenes estéreo onformidad con la reivindicación 1, caracterizad xtracción del parámetro de cámara comprende ex etro de longitud focal horizontal que repres nente horizontal de una longitud focal de la cám etro de longitud focal vertical que repres nente vertical de la longitud focal de la c a predeterminada. 8. El método de restauración de imágenes estéreo onformidad con la reivindicación 1, caracterizad tracción del parámetro de cámara comprende: extraer un parámetro de relación aspecto de nformidad con la reivindicación 1, caracterizad xtracción del parámetro de cámara comprende ex etro de uso de relación de aspecto que indic lece información con respecto a una longitud cámara de vista predeterminada de la una o más base en una relación de aspecto entre un co ontal y un componente vertical de la longitud fo 10. El método de restauración de eoscópicas de conformidad con la reivindica terizado porque la extracción del parámetro d onalmente comprende extraer un parámetro de reí to de longitud focal que representa la rela to entre el componente horizontal y el co cal de la longitud focal si el parámetro de ión de aspecto de longitud focal indica que s ión de aspecto entre el componente horizont componente vertical de la longitud focal. 12. El método de restauración de eoscópicas de conformidad con la reivindica terizado porque la extracción del parámetro d ende extraer un parámetro de punto principal prit magen de vista primaria de la imagen estereoscóp etro de punto principal secundario que repres principal de una imagen de vista secundari n estereoscópica. 13. El método de restauración de eoscópicas de conformidad con la reivindicac terizado porque la extracción del parámetro d ende extraer cada uno del parámetro de punto p rio y del parámetro de punto principal secundarl omponentes . 14. El método de restauración de terizado porque la extracción del parámetro d onalmente comprende extraer un parámetro d ipal primario que representa el punto principa n de vista primaria de la imagen estereoscópi etro de punto principal secundario que repres principal de la imagen de vista secundaria de l eoscópica si el parámetro de establecimi mación de puntos principales indica que se esta mación con respecto al punto principal, y en donde cada uno del parámetro de punto p rio y del parámetro de punto principal secun e para x y y componentes . 16. El método de restauración de reoscópicas de conformidad con la reivindicac eterizado porque la extracción del parámetro d ionalmente comprende determinar que un punto ce ende extraer un parámetro de ángulo de rotación epresenta un ángulo de rotación con respecto a u rámetro de ángulo de rotación de eje y que repre O de rotación con respecto a un eje y, y un pará O de rotación de eje z que representa un á ión con respecto a un eje z, de entre áng ión de la cámara de vista predeterminada de la u as . 18. El método de restauración de eoscópicas de conformidad con la reivindicac terizado porque la extracción del parámetro d rende extraer un parámetro de ángulo de rotaci el ángulo de rotación con respecto al eje x, e otación con respecto al eje y, y el ángulo de respecto al eje z están representados como una iz de 3x3 y una disposición de nueve bits. e de subnivel del primer bloque meta, un bl r subnivel del bloque moov, un bloque de primer ? bloque trak el cual es un bloque de segundo loque moov, y un bloque de subnivel de un segund el cual es un bloque de segundo subnivel de ; y extraer los datos de imagen de la eoscópica del bloque mdat. 20. Un método de generación de datos de un nes estereoscópicas, caracterizado porque compre codificar datos de una imagen estereoscópica; determinar un parámetro de , cámara con terísticas individuales de cada una de una o más uales han capturado la imagen estereoscópica; e insertar los datos de imagen y el parámetro de c lujo de datos. 21. El método de generación de datos de un primaria que representa la longitud focal prima etro de longitud focal secundaria que repres tud focal secundaria, con base en el parám encia de longitud focal. 22. El método de generación de datos de un nes estereoscópicas de conformidad con la reivin caracterizado porque la determinación del pará a comprende : determinar un parámetro de relación de asp itud focal que representa una relación de as un componente horizontal y un componente ver longitud focal de una cámara predeterminada de cámaras ; y determinar uno de un parámetro de longitu zontal que representa el componente horizontal itud focal y un parámetro de longitud focal vert nente vertical de la longitud focal, y en donde la determinación del parámetro de reí to de longitud focal comprende determinar un parámetro de relación de aspecto de longit representa la relación de aspecto entre el co ontal y el componente vertical de la longitud arámetro de uso de relación de aspecto de longit a que se usa la relación de aspecto entre el co zontal y el componente vertical de la longitud fo 24. El método de generación de datos de un nes estereoscópicas de conformidad con la reivin caracterizado porque la determinación del pará ra comprende : determinar un parámetro de establecimie rmación de punto principal primario que indic lece la información con respecto a cada uno tar un método de restauración de eoscópicas, caracterizado porque comprende: hacer un análisis sintáctico de un flujo d ido en datos de imagen de una imagen estereos mación con respecto a la imagen estereoscópica; extraer un parámetro de cámara dependiendo terísticas individuales de cada una de una o más han capturado la imagen estereoscópica; y decod urar los datos de imagen de la imagen estereoscó 26. Un medio de grabación de lectura por com terizado porque tiene grabado en el mismo un pro to para ejecutar un método de generación de un de imágenes estereoscópicas, el método comprend codificar datos de imagen de una imagen estereos determinar un parámetro de cámara con base terísticas individuales de cada una de una o más
MX2010012948A 2008-05-27 2009-03-26 Metodo y aparato para generar un flujo de datos de imagenes estereoscopicas usando un parametro de camara, y metodo y aparato para restaurar la imagen esreoscopica usando un parametro de camara. MX2010012948A (es)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US5617408P 2008-05-27 2008-05-27
KR20080071897A KR101490689B1 (ko) 2008-05-27 2008-07-23 카메라 파라미터를 이용한 스테레오스코픽 영상데이터스트림 생성 방법 및 그 장치와 스테레오스코픽 영상복원 방법 및 그 장치
PCT/KR2009/001549 WO2009145426A1 (en) 2008-05-27 2009-03-26 Method and apparatus for generating stereoscopic image data stream by using camera parameter, and method and apparatus for restoring stereoscopic image by using camera parameter

Publications (1)

Publication Number Publication Date
MX2010012948A true MX2010012948A (es) 2010-12-21

Family

ID=41685940

Family Applications (1)

Application Number Title Priority Date Filing Date
MX2010012948A MX2010012948A (es) 2008-05-27 2009-03-26 Metodo y aparato para generar un flujo de datos de imagenes estereoscopicas usando un parametro de camara, y metodo y aparato para restaurar la imagen esreoscopica usando un parametro de camara.

Country Status (8)

Country Link
US (1) US9179124B2 (es)
EP (1) EP2286596A1 (es)
JP (1) JP5519647B2 (es)
KR (1) KR101490689B1 (es)
CN (1) CN102047668B (es)
BR (1) BRPI0912178A2 (es)
MX (1) MX2010012948A (es)
WO (1) WO2009145426A1 (es)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8508580B2 (en) 2009-07-31 2013-08-13 3Dmedia Corporation Methods, systems, and computer-readable storage media for creating three-dimensional (3D) images of a scene
US8436893B2 (en) 2009-07-31 2013-05-07 3Dmedia Corporation Methods, systems, and computer-readable storage media for selecting image capture positions to generate three-dimensional (3D) images
US9380292B2 (en) 2009-07-31 2016-06-28 3Dmedia Corporation Methods, systems, and computer-readable storage media for generating three-dimensional (3D) images of a scene
US8665316B2 (en) * 2009-11-24 2014-03-04 Microsoft Corporation Multi-resolution digital large format camera with multiple detector arrays
US8542286B2 (en) * 2009-11-24 2013-09-24 Microsoft Corporation Large format digital camera with multiple optical systems and detector arrays
US9185388B2 (en) 2010-11-03 2015-11-10 3Dmedia Corporation Methods, systems, and computer program products for creating three-dimensional video sequences
JP5002047B2 (ja) * 2010-11-05 2012-08-15 シャープ株式会社 立体画像データ再生装置
US8274552B2 (en) 2010-12-27 2012-09-25 3Dmedia Corporation Primary and auxiliary image capture devices for image processing and related methods
WO2012092246A2 (en) 2010-12-27 2012-07-05 3Dmedia Corporation Methods, systems, and computer-readable storage media for identifying a rough depth map in a scene and for determining a stereo-base distance for three-dimensional (3d) content creation
US10200671B2 (en) 2010-12-27 2019-02-05 3Dmedia Corporation Primary and auxiliary image capture devices for image processing and related methods
AU2012226283B2 (en) * 2011-03-10 2016-09-15 Vidyo, Inc. Render-orientation information in video bitstream
JP2014528190A (ja) 2011-08-12 2014-10-23 テレフオンアクチーボラゲット エル エム エリクソン(パブル) カメラおよび/または深度パラメータのシグナリング
BR112014003661A2 (pt) * 2011-08-30 2017-03-21 Ericsson Telefon Ab L M ajuste de lado receptor de imagens estereoscópicas
CN103139555B (zh) * 2011-11-22 2017-07-11 浙江大学 一种视频序列参数编码方法、解码方法、对应的装置及码流
CN103379333B (zh) * 2012-04-25 2018-12-04 浙江大学 编解码方法、视频序列码流的编解码方法及其对应的装置
CN104185994A (zh) * 2012-12-28 2014-12-03 华为技术有限公司 对视频内容的摄像机参数的编码和解码方法与装置
US10171745B2 (en) * 2014-12-31 2019-01-01 Dell Products, Lp Exposure computation via depth-based computational photography
EP3171598A1 (en) * 2015-11-19 2017-05-24 Thomson Licensing Methods and devices for encoding and decoding a matrix of views obtained from light-field data, corresponding computer program and non-transitory program storage device
US10887577B2 (en) 2016-05-26 2021-01-05 Lg Electronics Inc. Method for transmitting 360-degree video, method for receiving 360-degree video, apparatus for transmitting 360-degree video, and apparatus for receiving 360-degree video
US10560678B2 (en) * 2016-11-09 2020-02-11 Mediatek Inc. Method and apparatus having video encoding function with syntax element signaling of rotation information of content-oriented rotation applied to 360-degree image content or 360-degree video content represented in projection format and associated method and apparatus having video decoding function
CN107479180A (zh) * 2017-08-28 2017-12-15 中国科学院上海微系统与信息技术研究所 一种显微立体图像采集装置
CN109785225B (zh) * 2017-11-13 2023-06-16 虹软科技股份有限公司 一种用于图像矫正的方法和装置
CN109785390B (zh) * 2017-11-13 2022-04-01 虹软科技股份有限公司 一种用于图像矫正的方法和装置
CN111819842B (zh) * 2018-04-05 2022-11-04 Lg电子株式会社 发送360度视频的方法和装置、接收360度视频的方法和装置
JP7271099B2 (ja) * 2018-07-19 2023-05-11 キヤノン株式会社 ファイルの生成装置およびファイルに基づく映像の生成装置
JP2021182650A (ja) * 2018-07-20 2021-11-25 ソニーグループ株式会社 画像処理装置および方法
US11347788B2 (en) * 2019-01-16 2022-05-31 Toyota Research Institute, Inc. Systems and methods for generating a requested image view
US11887151B2 (en) * 2022-02-14 2024-01-30 Korea Advanced Institute Of Science And Technology Method and apparatus for providing advertisement disclosure for identifying advertisements in 3-dimensional space

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07230556A (ja) 1994-02-17 1995-08-29 Hazama Gumi Ltd Cg立体視アニメーションの生成法
US6097850A (en) * 1996-11-27 2000-08-01 Fujitsu Limited Measuring method and apparatus of photographic parameter and computer memory product
US5802410A (en) 1997-02-18 1998-09-01 Wah Lo; Allen Kwok Method and apparatus for producing composite images with a masked imaging device
US6434265B1 (en) * 1998-09-25 2002-08-13 Apple Computers, Inc. Aligning rectilinear images in 3D through projective registration and calibration
US7428482B2 (en) * 1999-03-26 2008-09-23 Sony Corporation Visualization and setting of a virtual camera and lens system in a computer graphic modeling environment
JP2004274253A (ja) 2003-03-06 2004-09-30 Sharp Corp 映像記録装置および映像送信装置
KR100556830B1 (ko) 2003-12-12 2006-03-10 한국전자통신연구원 스테레오스코픽 입체영상 디스플레이를 위한 3차원 그래픽모델렌더링 장치 및 그 방법
KR101199498B1 (ko) 2005-03-31 2012-11-09 삼성전자주식회사 카메라 파라미터를 이용한 다시점 영상의 부호화 장치 및생성 장치, 그 방법과, 이를 수행하기 위한 프로그램이기록된 기록 매체
KR100813961B1 (ko) * 2005-06-14 2008-03-14 삼성전자주식회사 영상 수신장치
US20080002878A1 (en) * 2006-06-28 2008-01-03 Somasundaram Meiyappan Method For Fast Stereo Matching Of Images
US8396906B2 (en) 2007-10-10 2013-03-12 Electronics And Telecommunications Research Institute Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata

Also Published As

Publication number Publication date
CN102047668A (zh) 2011-05-04
JP2011523285A (ja) 2011-08-04
EP2286596A1 (en) 2011-02-23
JP5519647B2 (ja) 2014-06-11
US9179124B2 (en) 2015-11-03
CN102047668B (zh) 2013-08-07
KR101490689B1 (ko) 2015-02-06
BRPI0912178A2 (pt) 2018-02-20
WO2009145426A1 (en) 2009-12-03
US20090295907A1 (en) 2009-12-03
KR20090123743A (ko) 2009-12-02

Similar Documents

Publication Publication Date Title
MX2010012948A (es) Metodo y aparato para generar un flujo de datos de imagenes estereoscopicas usando un parametro de camara, y metodo y aparato para restaurar la imagen esreoscopica usando un parametro de camara.
US8780173B2 (en) Method and apparatus for reducing fatigue resulting from viewing three-dimensional image display, and method and apparatus for generating data stream of low visual fatigue three-dimensional image
US8878836B2 (en) Method and apparatus for encoding datastream including additional information on multiview image and method and apparatus for decoding datastream by using the same
EP1864508B1 (en) Apparatus and method for encoding multi-view video using camera parameters, apparatus and method for generating multi-view video using camera parameters, and recoding medium storing program for implementing the methods
US8259162B2 (en) Method and apparatus for generating stereoscopic image data stream for temporally partial three-dimensional (3D) data, and method and apparatus for displaying temporally partial 3D data of stereoscopic image
CN102427545B (zh) 将三维图像存储到记录介质中的方法
JP5231563B2 (ja) 立体映像データを記録する方法
KR101398168B1 (ko) 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
CN104333746B (zh) 广播接收机及其3d字幕数据处理方法
KR101530713B1 (ko) 영상 파일을 생성하고 표시하기 위한 장치 및 방법
CN110100435B (zh) 生成装置、识别信息生成方法、再现装置和图像再现方法
CN102474638A (zh) 组合3d视频与辅助数据
WO2011083626A1 (ja) 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム
US9654762B2 (en) Apparatus and method for stereoscopic video with motion sensors
WO2011083625A1 (ja) 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム
TW201322736A (zh) 立體影像編碼裝置、立體影像解碼裝置、立體影像編碼方法、立體影像解碼方法、立體影像編碼程式以及立體影像解碼程式
KR101480186B1 (ko) 2d 영상과 3d 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법
KR20120086636A (ko) 입체영상 처리 장치 및 방법
KR101382618B1 (ko) 콘텐츠 정보 생성 방법 및 콘텐츠 정보를 이용한 콘텐츠처리 장치
Kim et al. Proposition of Rubustness Indicators for Immersive Content Filtering
CN113949859A (zh) 一种识别带编码的3d视频图像并同步快闪眼镜的设备
Pahalawatta et al. Depth/Disparity Interchange Representation for Post-Production

Legal Events

Date Code Title Description
FG Grant or registration