ES2636782B1 - Sistema para proyectar contenidos audiovisuales inmersivos - Google Patents

Sistema para proyectar contenidos audiovisuales inmersivos Download PDF

Info

Publication number
ES2636782B1
ES2636782B1 ES201630428A ES201630428A ES2636782B1 ES 2636782 B1 ES2636782 B1 ES 2636782B1 ES 201630428 A ES201630428 A ES 201630428A ES 201630428 A ES201630428 A ES 201630428A ES 2636782 B1 ES2636782 B1 ES 2636782B1
Authority
ES
Spain
Prior art keywords
content
immersive
projector
control module
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES201630428A
Other languages
English (en)
Other versions
ES2636782A1 (es
Inventor
Diego SERRANO VERGARA
Pedro SERRANO VERGARA
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Broomx Tech S L
Broomx Technologies SL
Original Assignee
Broomx Tech S L
Broomx Technologies SL
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Broomx Tech S L, Broomx Technologies SL filed Critical Broomx Tech S L
Priority to ES201630428A priority Critical patent/ES2636782B1/es
Priority to EP17778720.7A priority patent/EP3442222B1/en
Priority to PCT/ES2017/070199 priority patent/WO2017174844A2/es
Priority to CN201780027193.1A priority patent/CN109076203B/zh
Priority to JP2019503785A priority patent/JP6972474B2/ja
Priority to US16/091,852 priority patent/US10523931B2/en
Publication of ES2636782A1 publication Critical patent/ES2636782A1/es
Application granted granted Critical
Publication of ES2636782B1 publication Critical patent/ES2636782B1/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3147—Multi-projection systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/10—Plc systems
    • G05B2219/16—Plc to applications
    • G05B2219/163—Domotique, domestic, home control, automation, smart, intelligent house
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2642—Domotique, domestic, home control, automation, smart house
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/284—Home automation networks characterised by the type of medium used
    • H04L2012/2841—Wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/2849—Audio/video appliances

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Projection Apparatus (AREA)
  • User Interface Of Digital Computer (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Abstract

Sistema para proyectar contenidos audiovisuales inmersivos.#Un sistema para proyectar contenidos inmersivos, comprendiendo un dispositivo reproductor-proyector (11) de contenidos audiovisuales con un contenedor (400) compacto donde incluye:#al menos un módulo de control (1) que comprende:#al menos una interfaz de comunicación inalámbrica (91) para comunicarse con un terminal móvil (9) de un usuario (40),#medios de conexión (71) a Internet (100),#interfaces de comunicación (1A, 1B, 1C) para transmitir contenidos audiovisuales obtenidos a través de Internet (100) de al menos un servidor de contenidos (10);#y conectados al módulo de control (1):#al menos un proyector de contenido inmersivo (2) y al menos un proyector de contenido no inmersivo (3) con interfaces de comunicación (1A, 1B, 1C);#al menos un módulo de audio (8) para reproducir sonido de los contenidos audiovisuales transmitidos por el módulo de control (1) a los proyectores (2, 3);#un módulo maestro (4), que emite señales radio (51) para a al menos un módulo actuador (5) domótico.

Description

5
10
15
20
25
30
35
DESCRIPCIÓN
Sistema para proyectar contenidos audiovisuales inmersivos OBJETO DE LA INVENCIÓN
La presente invención se relaciona, en general, con las tecnologías de reproducción y proyección de contenidos audiovisuales.
Más particularmente, la presente invención se refiere a un sistema reproductor-proyector para visualizar contenido audiovisual inmersivo en espacios reales, que ofrece una cobertura visual completa en el espacio de contenidos audiovisuales abarcando de 180° a 360° alrededor del usuario.
ANTECEDENTES DE LA INVENCIÓN
En la simulación de acciones y espacios ficticios (tecnología inmersiva) en el mundo real, son conocidos los contenidos o vídeos inmersivos ("Immersive Content”, en inglés), también llamados vídeos esféricos o en 360°. Normalmente estos vídeos reproducen una panorámica de un escenario, que puede ser real, que se realiza grabando la vista del escenario en todas las direcciones posibles al mismo tiempo por medio de una cámara omnidireccional o de una colección de cámaras, o virtual, que se realiza mediante software de creación 3D. Los contenidos inmersivos se utilizan cada vez más en márquetin o publicidad para atraer a más consumidores y crear un "enganche” con ellos al poder "vivir” las sensaciones de los productos y servicios. También se emplean en espectáculos musicales, teatro, conciertos, etc. para llegar a más público sin la necesidad de estar presente en el evento; en el sector recreativo de los videojuegos y en el sector de la educación.
Además de la grabación de vídeos en 360°, las técnicas de producción de contenido inmersivo requieren de software específicos de post-producción y de animación en tres dimensiones (3D), necesitando aplicaciones informáticos que permitan la proyección de imágenes equirectangular, cilíndrica, estereográfica, de ojo de pez, por mapeo de proyección cúbica, etc.
5
10
15
20
25
30
35
Existen actualmente muchas compañías trabajando en la creación de contenidos audiovisuales de 360°. Empresas como GoPro, Koloreyes, Unity3D, etc, desarrollan activamente este tipo de contenidos, y otras empresas como YouTube o Facebook desarrollan plataformas online para su almacenamiento y reproducción en un navegador. Pero a pesar de que estos contenidos están en plena expansión, existe un desequilibrio entre las técnicas de producción de contenido inmersivo y las técnicas de reproducción de contenido inmersivo.
Una técnica conocida de reproducción de contenido inmersivo es la usada en los Domos o Planetarios pero es una técnica muy cara, por lo que sólo se aplica en eventos excepcionales, no es viable para un uso individualizado.
La técnica de reproducción de contenido inmersivo más extendida y única accesible, hasta la fecha, a nivel personal es la utilización de unas gafas de realidad virtual (VR). Estas gafas, sin embargo, sólo permiten disfrutar del contenido a la persona que se las coloca, aislándole de su entorno real.
Una solución existente es la contemplada en WO 2012/118769, donde se describe un entorno de proyección de imágenes de videojuegos que rodea al usuario/jugador para someterlo a una experiencia inmersiva individual. Para ello, el sistema cuenta con varios proyectores, proyectores de imágenes 2D convencionales como puede ser una pantalla de plasma de televisor, y proyectores 3D, incluyendo un proyector RGB que proporciona una imagen periférica alrededor de ese proyector. No obstante, WO 2012/118769 no describe nada acerca de qué medios técnicos consiguen que ese proyector, bautizado como "ambiental” ("environmental”, en inglés) en WO 2012/118769 proporcione esa proyección de 360°. Por otra parte, WO 2012/118769 indica que para que el usuario obtenga la experiencia 3D inmersiva dentro de esa proyección de imágenes, lleva un dispositivo (casco o gafas) configurado para operar en sincronización con todos los proyectores que componen ese sistema. El sistema de WO 2012/118769 necesita además también estar sincronizado con los movimientos del usuario para su aplicación en un entorno de jugadores que interaccionan con las imágenes del videojuego, lo que restringe tanto el formato de los contenidos audiovisuales que se presenta como el papel del usuario en esa experiencia inmersiva, donde juega un papel activo que requiere del sistema técnicas como seguimiento de cabeza, del área de posición optima ("head tracking”, "sweet-spot”,...).
5
10
15
20
25
30
El problema técnico objetivo que se presenta es pues proveer un reproductor-proyector para visualizar contenido audiovisual inmersivo, con una cobertura visual de 180° a 360°, en espacios reales, para un usuario o un amplio grupo de usuarios, sin necesidad de ningún otro dispositivo.
DESCRIPCIÓN DE LA INVENCIÓN
La presente invención sirve para solucionar el problema mencionado anteriormente, resolviendo los inconvenientes que presentan las soluciones comentadas en el estado de la técnica, mediante un sistema configurado para proyectar contenidos audiovisuales a través de un único dispositivo reproductor-proyector compacto, sin accesorios (gafas, cameras de profundidad, ...). Los contenidos pueden ser inmersivos o no inmersivos y obtenerse de una plataforma de contenidos conectada a Internet (online).
La presente invención se refiere a un sistema adaptado para reproducir y proyectar el formato estándar (proyección equirectangular) de contenidos gráficos inmersivos y capaz también de adaptar contenido no-inmersivo, tanto digital de alta definición (HD: "High Definition”, FullHD, ...) como analógico (estándar NTSC: National Television System Committee, ...), a la proyección inmersiva, mediante procesos y animaciones gráficas.
Un aspecto de la invención se refiere a un sistema de proyección de contenidos audiovisuales, que pueden ser inmersivos como no inmersivos, comprendiendo un reproductor-proyector, que es un dispositivo compacto y que comprende los siguientes componentes:
- al menos un módulo de control que, a su vez comprende:
- al menos una interfaz de comunicación inalámbrica para comunicarse con un terminal móvil de usuario,
- conexión a Internet
- interfaces de comunicación para transmitir a al menos un proyector los contenidos audiovisuales obtenidos a través de Internet, contenidos procedentes de al menos un servidor, propio o de terceros:
- al menos un proyector de contenido inmersivo y un proyector de contenido no inmersivo conectados al módulo de control mediante al menos una de las interfaces de comunicación anteriormente mencionadas;
5
10
15
20
25
30
- al menos un módulo de audio conectado al módulo de control para reproducir el sonido de los contenidos audiovisuales transmitidos por el módulo de control a los proyectores de contenidos.
Las ventajas de la presente invención con respecto al estado de la técnica son fundamentalmente:
- Es un producto compacto (all-in-one: "todo en uno”), de fácil instalación (plug&play: "enchufar y listo”), de uso personal o compartido, y asequible incluso a nivel doméstico. Se adapta a la mayoría de los espacios domésticos de interior sin necesidad de obras o reformas.
- Permite personalizar la experiencia del usuario a través de contenido inmersivo, interactivo e informativo, transformando el espacio para vivir esa experiencia de un modo compartido/colectivo y no individual, sin necesitar de otros dispositivos para la reproducción de experiencias.
- El sistema además es capaz de controlar aspectos domóticos (iluminación, cortinas, etc...) y objetos eléctricos/mecánicos del espacio donde se instala, mediante hardware propio, coordinando como un todo los diferentes elementos para posibilitar la transformación del espacio físico a voluntad del usuario. Esto permite una inmersión extendida, es decir, una impresión perceptual de inmersión ampliada por el control domótico sincronizado de luces (colores e intensidad), audio y mobiliario automatizado (apertura/cierre de cortinas, inclinación/movimiento de la cama, ...).
- El sistema está conectado a internet, posibilitando mostrar datos en tiempo real de diferentes fuentes y proyectarlo en un entorno inmersivo generado mediante proyecciones. También incorpora componentes de hardware y software que permiten la interacción del usuario con el contenido, mediante diferentes medios (a través de un teléfono móvil inteligente del usuario, por la voz y/o gestos del usuario, etc.).
- Adicionalmente, el sistema permite al usuario una navegación interactiva por el espacio proyectado en 180° o 360° en tiempo real. La proyección inmersiva que ofrece el sistema cobra su pleno sentido cuando el usuario puede navegar en el universo 360° para emular un punto y campo de vista. La navegación se puede realizar de forma amigable usando el teléfono móvil o tableta del usuario, aprovechando las facilidades de la pantalla táctil y el giroscopio de su terminal. Los parámetros para la navegación 360° implican una rotación horizontal infinita y una rotación vertical invariable, así como la posibilidad de acercarse/alejarse (funcionalidad de "zoom”) en las imágenes proyectadas. También,
5
10
15
20
25
30
35
empleando cámaras de profundidad, es posible una navegación gestual, permitiendo el control mediante gestos por ejemplo con la incorporación de un módulo Kinect.
- Con respecto al sistema descrito en WO 2012/118769 citado en el estado de la técnica anteriormente, la presente invención deja al usuario más libertad y ser un espectador pasivo si quiere, al no tratarse necesariamente de un sistema para un entorno de videojuegos. WO 2012/118769 que trata específicamente de entornos de videojuegos (gaming, en inglés) sólo considera experiencias inmersivas de un individuo, mientras que la presente invención contempla la posibilidad de experiencias inmersivas colectivas, de múltiples usuarios dentro del espacio proyectado, La presente invención además ofrece al usuario conectividad con la nube de Internet (Internet Cloud, en inglés) y la interacción con el sistema a través de su teléfono móvil. El sistema de la invención se adapta a ese terminal del usuario, sin que él deba modificarlo. En cuanto a los proyectores, en el sistema de la invención no se requiere continuidad espacial ni temporal entre los proyectores (uno no es la continuación del otro, como ocurre en WO 2012/118769). sino que proporcionan contenidos independientes: uno es proyector de contenidos no inmersivos o “informativos” y otro constituye un proyector “ambiental” con contenidos inmersivos. Además, en WO 2012/118769 se hace una corrección de geometría de las imágenes basada en corrección de perspectiva y de color, mientras que en la presente invención se contrarresta la distorsión de una imagen equirectangular, gracias a la lente de ojo de pez (fisheye, en inglés) incluida en el proyector “ambiental” de contenidos inmersivos. En WO 2012/118769, el contenido audiovisual proyectado es entera y específicamente producido para el dispositivo de juegos, por lo que su solución no se adapta a contenidos pre-existentes en formatos comunes; por el contrario, el sistema de la invención está concebido para reproducir unos formatos estándar (equirectangular, HD, etc.). Adicionalmente, la opción que da la presente invención de que el sistema tenga una actuación domótica no está prevista en WO 2012/118769.
La presente invención puede aplicarse a los siguientes sectores, por nombrar algunos ejemplos:
- Sector hotelero y turismo: ideal para habitaciones de hotel.
- Sector ocio y restauración: ideal para rincones únicos en restaurantes y bares musicales.
- Sector sanidad: ideal para habitaciones de hospital y otras zonas (salas de parto sensoriales).
- Sector comercio: ideal para crear experiencias en torno a marcas y exposición de producto.
5
10
15
20
25
30
- Sector cruceros: ideal para camarotes de cruceros
- Sector doméstico: ideal para crear ambientes inmersivos en el hogar.
BREVE DESCRIPCIÓN DE LAS FIGURAS
A continuación se pasa a describir de manera muy breve una serie de dibujos que ayudan a comprender mejor la invención y que se relacionan expresamente con una realización de dicha invención que se presenta como un ejemplo no limitativo de ésta.
FIGURA 1.- Muestra un diagrama de bloques de la arquitectura del sistema para la proyección de contenidos inmersivos, según una realización preferente de la invención.
FIGURA 2.- Muestra un posible escenario de aplicación del sistema, según una posible realización de la invención.
FIGURA 3.- Muestra un diagrama de bloques de la arquitectura interna del módulo de control del sistema y de las comunicaciones externas e internas del sistema, según una posible realización de la invención.
FIGURA 4.- Muestra un diagrama de bloques de la arquitectura interna de un módulo actuador del sistema, según una posible realización de la invención.
REALIZACIÓN PREFERENTE DE LA INVENCIÓN
En la Figura 1 se muestra un sistema para la proyección de contenidos inmersivos que comprende un dispositivo reproductor-proyector (11) de contenidos audiovisuales que, a su vez, comprende, dentro de un contenedor (400) compacto:
- al menos un módulo de control (1) que comprende medios de procesamiento para la gestión de la interacción con el usuario, medios de conexión (71) a Internet (100) y al menos una interfaz de comunicación (1A, 1B, 1C) para la transmisión de contenidos audiovisuales; en una realización preferida, el módulo de control (1) obtiene los contenidos audiovisuales de al menos un servidor de contenidos (10) a través de Internet (100); en otra posible realización, los obtiene de al menos una unidad local de almacenamiento de datos;
5
10
15
20
25
30
35
- al menos un proyector de contenido inmersivo (2) y al menos un proyector de contenido no inmersivo (3) conectados al módulo de control (1) mediante al menos una de las interfaces de comunicación (1A, 1B, 1C), que pueden ser, por ejemplo, una interfaz multimedia de alta definición o HDMI (1A, 1B) o una interfaz Wi-Fi (1C);
- al menos un módulo de audio (8), conectado al módulo de control (1), por ejemplo mediante un cable de línea (81), para reproducir el sonido de los contenidos audiovisuales transmitidos por el módulo de control (1).
En una posible realización de la invención, el módulo de audio (8) comprende los siguientes componentes: un altavoz derecho (8A), un altavoz izquierdo (8B), un amplificador de audio y un altavoz de graves o "subwoofer” que complementa los otros dos altavoces (8A, 8B).
El módulo de control (1) está conectado a Internet (100) mediante un estándar de telefonía inalámbrica de tercera o cuarta generación; preferiblemente, los medios de conexión (71) a Internet (100) usan 4G. Por ello, el dispositivo reproductor-proyector (11) comprende un equipo de telefonía móvil (7) para dotar al sistema de conexión rápida a Internet (100) y con un ancho de banda suficiente para la recepción y transmisión de contenidos audiovisuales. El equipo de telefonía móvil (7) puede estar conectado, por ejemplo mediante un Bus Serie Universal o USB, a un conector inalámbrico (6), que preferiblemente es un enrutador Wi-Fi. Este conector inalámbrico (6) permite crear una red inalámbrica propia, por ejemplo, una red Wi-Fi, para controlar los proyectores (2, 3) y tener acceso a Internet (100). Como alternativa a 4G, el enrutador Wi-Fi del dispositivo reproductor-proyector (11) puede estar conectado mediante Ethernet con un enrutador externo a un servidor de internet. También a través de Ethernet el conector inalámbrico (6) Wi-Fi se conecta al módulo de control (1).
El módulo de control (1) se conecta a Internet (100) a través de los medios de comunicación 4G o de conexión (71) para acceder a los contenidos inmersivos y/o no inmersivos que tienen los servidores de contenidos audiovisuales (10), contenidos obtenidos de una plataforma propia o de plataformas de terceros (101, 102, 10N), como pueden ser YouTube360, Facebook360,.... El o los servidores de contenidos audiovisuales (10) entrega los datos al módulo de control (1) para que prepare los contenidos, según sean inmersivos o no inmersivos, para ser reproducidos por los correspondientes proyectores (2, 3) del dispositivo reproductor-proyector (11) y proyectados de forma inmersiva en el espacio (401), típicamente una habitación con tres paredes y un techo.
5
10
15
20
25
30
35
La Figura 2 muestra un ejemplo de escenario de uso del sistema, donde el usuario (40) experimenta una inmersión de al menos 180° de las imágenes proyectadas en 360° en el espacio (401). El dispositivo reproductor-proyector (11), en un ejemplo, abarca 180° pero proyecta contenido en 360°. El dispositivo reproductor-proyector (11) presenta un contenedor (400) compacto dentro del que se conectan los proyectores (2, 3) y el módulo de audio (8) al módulo de control (1), conectado también al equipo de telefonía móvil (7) y al conector inalámbrico (6) para las comunicaciones.
El usuario (40) dispone de un terminal móvil (9), que puede ser un teléfono inteligente, un ordenador portátil o una tableta, etc., en el que corre una aplicación informática que se comunica con el módulo de control (1) por una interfaz de comunicación inalámbrica (91), por ejemplo, Bluetooth de baja energía: BLE. También esta aplicación informática del terminal móvil (9) puede comunicarse con el módulo de control (1) a través del conector inalámbrico (6), por ejemplo, mediante WiFi. La aplicación informática está configurada para permitir al usuario (40) el control remoto y la interacción con el dispositivo reproductor- proyector (11) a través de su terminal móvil (9).
Adicionalmente, también se incluye dentro del contenedor (400) como parte del dispositivo reproductor-proyector (11) un módulo maestro (4) que es un circuito electrónico configurado para emitir órdenes a diferentes nodos o módulos actuadores (5), que son circuitos receptores de señal vía radio (51) y actuadores con la capacidad de controlar aspectos/equipos de automatización del hogar -domóticos-, tales como iluminación, cortinas, persianas, etc., así como objetos eléctricos y/o mecánicos de la habitación donde está instalado el dispositivo reproductor-proyector (11). La comunicación entre módulo maestro (4) y cada módulo actuador (5) es por radiofrecuencia (51). El módulo maestro (4) puede conectarse por USB al módulo de control (1) del dispositivo reproductor-proyector (11).
Todos los componentes del dispositivo reproductor-proyector (11) y los módulos actuadores (5), que pueden ser externos al mismo, se alimentan a través de un cable de corriente a toma eléctrica. Los módulos actuadores (5) también pueden disponer de una batería propia.
La Figura 3 muestra una posible implementación del módulo de control (1), conectado por USB a un equipo 4G de telefonía móvil (7), a un conector inalámbrico (6) que es un enrutador WiFi y provee una red interna WiFi (300) para su comunicación con otros
5
10
15
20
25
30
35
componentes del dispositivo reproductor-proyector (11), y a un módulo maestro (4) que transmite órdenes al exterior por radiofrecuencia (51). De acuerdo con el ejemplo de posible implementación, el módulo de control (1) comprende:
- un procesador (31) Intel ® NUC5iMYHE i5-5300 vPro,
- una tarjeta gráfica (32) graphic Intel ® 5500,
- una tarjeta de estado sólido o SSD (33) con capacidad de almacenamiento de 256GB y montada en placa base,
- una memoria RAM (34) de 8GB montada en placa base,
- un adaptador WiFi y Bluetooth, montado en placa base, para proveer las interfaces de comunicación Wi-Fi (1C) y BLE (91);
- conexión Ethernet (35)
- conectores USB (36)
- dos conexiones HDMI (39) hacia los dos proyectores (2, 3)
- conectores de audio RCA (39) a altavoces autoamplificados del módulo de audio (8)
- conector de alimentación eléctrica (301) 220VAc
- ventilador (37).
La Figura 4 muestra una posible implementación de un módulo actuador (5), comprendiendo:
- una CPU (41) que recibe datos de entrada de unos sensores (47)
- un módulo radio (42) para la conexión por radiofrecuencia (51) con el módulo maestro (4)
- relés de entrada/salida (43) para actuar sobre dispositivos electrónicos (46) que operan a 220VAC
- controlador (44) de modulación por pulsos, PWM, para actuar sobre dispositivos electrónicos (46’) que operan a 12V-24V, tales como luces o motores de persianas,...
- conector de alimentación eléctrica (45) 220VAC
De acuerdo con una posible implementación del dispositivo reproductor-proyector (11), los proyectores (2, 3), conectados al módulo de control (1) mediante interfaces HDMI (1A, 1B) y/o WiFi (1C), se describen como sigue:
- un proyector de contenido inmersivo (2) que comprende un proyector Epson® EH-TW5350 Full HD, 2200 Lumen, y una lente de conversión de ojo de pez (20),
5
10
15
20
25
30
35
Fisheye 3.5X Navitar, para proyectar visuales inmersivas con un ángulo de visión de 180° horizontal y 100° vertical, lo que en una habitación supone proyectar 3 paredes y techo;
- un proyector de contenido no inmersivo (3) que complementa al proyector inmersivo (2) principal y comprende un proyector Epson® EH-TW5350 Full HD, 2200 Lumen, para proyectar visuales no inmersivas pero sí con la máxima calidad, actualmente resolución FullHD, en formato 16:9.
El proyector de contenido no inmersivo (3) proporciona una proyección perpendicular a la pared frontal, con una corrección de geometría mecánica del proyector, por ejemplo, corrigiendo la forma de la imagen con herramientas de control de deslizamiento como Keystone de Epson® o “quick-corner” para ajustar una imagen disparejamente rectangular. a partir de una esquina seleccionada de la imagen. También se puede hacer mediante corrección de perspectiva por software. Además, el proyector de contenido no inmersivo (3) proporciona un contraste apropiado para contenido informativo: texto, televisión, consolas de juego,...
El proyector de contenido inmersivo (2) dispone de una lente de conversión de ojo de pez (20) acoplada al proyector Epson® para proporcionar una proyección inmersiva de 180° en horizontal y +/- 100° en vertical. Para corregir la geometría de las imágenes y adaptarlas a una proyección inmersiva, se realizan los siguientes métodos:
- Para contenido equirectangular 360°/180°, se proyecta con la distorsión geométrica original proporcionada. Se selecciona durante la reproducción la sección de la imagen 360° que se quiere proyectar y la proyección equirectangular se contra-resta, se anula, por la distorsión final de la lente de conversión de ojo de pez (20).
- Para contenido hemisférico, la distorsión geométrica proporcionada por la proyección se anula por la distorsión final de la (20) de conversión de ojo de pez.
- Para contenido no inmersivo, se realiza una corrección geométrica de ojo de pez a planar mediante curvas de bezier.
Adicionalmente, el dispositivo reproductor-proyector puede incluir un autocalibrador para detectar superficies de forma automática y ajustar la proyección de las imágenes en tiempo real a las superficies detectadas.
Otra posible realización de la invención consiste en unir dos o más dispositivos reproductores-proyectores, que se colocan en el centro de la habitación, para conseguir una proyección inmersiva de 360° en horizontal, en lugar de sólo 180° en horizontal.

Claims (13)

  1. 5
    10
    15
    20
    25
    30
    35
    REIVINDICACIONES
    1. Un sistema para proyectar contenidos inmersivos, que comprende un dispositivo reproductor-proyector (11) de contenidos audiovisuales, caracterizado por que el dispositivo reproductor-proyector (11) comprende dentro de un contenedor (400) compacto los siguientes componentes:
    - al menos un módulo de control (1) que comprende:
    - al menos una interfaz de comunicación inalámbrica (91) para comunicarse con un terminal móvil (9) de un usuario (40),
    - medios de conexión (71) a Internet (100),
    - una pluralidad de interfaces de comunicación (1A, 1B, 1C) para transmitir contenidos audiovisuales obtenidos a través de Internet (100) de al menos un servidor de contenidos (10);
    - al menos un proyector de contenido inmersivo (2) y al menos un proyector de contenido no inmersivo (3) conectados al módulo de control (1) mediante al menos una de las interfaces de comunicación (1A, 1B, 1C);
    - al menos un módulo de audio (8), conectado al módulo de control (1), para reproducir el sonido de los contenidos audiovisuales transmitidos por el módulo de control (1) a los proyectores de contenidos (2,3).
  2. 2. El sistema de acuerdo con la reivindicación 1 caracterizado por que los medios de conexión (71) a Internet (100) son provistos por un equipo de telefonía móvil (7) conectado al módulo de control (1).
  3. 3. El sistema de acuerdo con la reivindicación 2 caracterizado por que el equipo de telefonía móvil (7) es de cuarta generación, 4G.
  4. 4. El sistema de acuerdo con cualquiera de las reivindicaciones 2-3, caracterizado por que el equipo de telefonía móvil (7) está conectado a través de una interfaz USB a un conector inalámbrico (6) que se comunica con el terminal móvil (9) del usuario (40) y con Internet (100).
  5. 5. El sistema de acuerdo con la reivindicación 4 caracterizado por que el conector inalámbrico (6) es un enrutador Wi-Fi.
    5
    10
    15
    20
    25
    30
    35
  6. 6. El sistema de acuerdo con cualquiera de las reivindicaciones anteriores,
    caracterizado por que las interfaces de comunicación (1A, 1B, 1C) con los proyectores (2, 3) se seleccionan entre una interfaz HDMI (1A, 1B) y una interfaz Wi- Fi (1C).
  7. 7. El sistema de acuerdo con cualquiera de las reivindicaciones anteriores,
    caracterizado por que la interfaz de comunicación inalámbrica (91) con el terminal móvil (9) es Bluetooth de Baja Energía, BLE.
  8. 8. El sistema de acuerdo con cualquiera de las reivindicaciones anteriores,
    caracterizado por que adicionalmente comprende un módulo maestro (4), conectado al módulo de control (1), que se comunica vía radio (51) con al menos un módulo actuador (5), el módulo maestro (4) configurado para emitir órdenes al módulo actuador (5) que, en respuesta a recibir las órdenes, actúa sobre un equipo electrónico.
  9. 9. El sistema de acuerdo con la reivindicación 8 caracterizado por que el módulo actuador (5) actúa sobre equipos de automatización del hogar.
  10. 10. El sistema de acuerdo con cualquiera de las reivindicaciones 8-9, caracterizado por que el módulo maestro (4) está conectado al módulo de control (1) a través de una interfaz USB.
  11. 11. El sistema de acuerdo con cualquiera de las reivindicaciones anteriores,
    caracterizado por que el terminal móvil (9) dispone de medios de control remoto del sistema.
  12. 12. El sistema de acuerdo con la reivindicación 11 caracterizado por que el terminal móvil (9) se selecciona entre un teléfono inteligente y una tableta.
  13. 13. El sistema de acuerdo con cualquiera de las reivindicaciones anteriores,
    caracterizado por que el proyector de contenido inmersivo (2) comprende un proyector de imágenes y una lente de conversión de ojo de pez (20) acoplada al proyector de imágenes.
ES201630428A 2016-04-07 2016-04-07 Sistema para proyectar contenidos audiovisuales inmersivos Active ES2636782B1 (es)

Priority Applications (6)

Application Number Priority Date Filing Date Title
ES201630428A ES2636782B1 (es) 2016-04-07 2016-04-07 Sistema para proyectar contenidos audiovisuales inmersivos
EP17778720.7A EP3442222B1 (en) 2016-04-07 2017-04-03 System for projecting immersive audiovisual content
PCT/ES2017/070199 WO2017174844A2 (es) 2016-04-07 2017-04-03 Sistema para proyectar contenidos audiovisuales inmersivos
CN201780027193.1A CN109076203B (zh) 2016-04-07 2017-04-03 用于投影沉浸式视听内容的系统
JP2019503785A JP6972474B2 (ja) 2016-04-07 2017-04-03 没入型オーディオビジュアルコンテンツ投影システム
US16/091,852 US10523931B2 (en) 2016-04-07 2017-04-03 System for projecting immersive audiovisual content

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
ES201630428A ES2636782B1 (es) 2016-04-07 2016-04-07 Sistema para proyectar contenidos audiovisuales inmersivos

Publications (2)

Publication Number Publication Date
ES2636782A1 ES2636782A1 (es) 2017-10-09
ES2636782B1 true ES2636782B1 (es) 2018-07-20

Family

ID=59984061

Family Applications (1)

Application Number Title Priority Date Filing Date
ES201630428A Active ES2636782B1 (es) 2016-04-07 2016-04-07 Sistema para proyectar contenidos audiovisuales inmersivos

Country Status (6)

Country Link
US (1) US10523931B2 (es)
EP (1) EP3442222B1 (es)
JP (1) JP6972474B2 (es)
CN (1) CN109076203B (es)
ES (1) ES2636782B1 (es)
WO (1) WO2017174844A2 (es)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2636782B1 (es) 2016-04-07 2018-07-20 Broomx Technologies, S.L. Sistema para proyectar contenidos audiovisuales inmersivos
US20190182462A1 (en) * 2017-12-08 2019-06-13 Gopro, Inc. Methods and apparatus for projection conversion decoding for applications eco-systems
US11000759B2 (en) * 2019-03-29 2021-05-11 Valve Corporation Game controller operable in bluetooth low energy (BLE) mode
CN111519951A (zh) * 2020-04-14 2020-08-11 居澜文化创意(上海)有限公司 沉浸式多模物联仿生旅居舱系统
CN112286355B (zh) * 2020-10-28 2022-07-26 杭州天雷动漫有限公司 一种用于沉浸式内容的交互方法和系统
CN114115523B (zh) * 2021-10-15 2024-04-02 苏州金螳螂文化发展股份有限公司 一种动静结合的沉浸式场景展示系统
CN116506480B (zh) * 2023-05-11 2023-12-26 广州市埃威姆电子科技有限公司 一种沉浸式演艺逻辑联动秀控系统

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7118228B2 (en) * 2003-11-04 2006-10-10 Hewlett-Packard Development Company, L.P. Image display system
WO2008083455A2 (en) * 2007-01-10 2008-07-17 Leonardo Senna Da Silva Integrated audio and video equipment with local and remote control capability and a remote activation system using a cellular phone apparatus in real time
US9008723B2 (en) * 2010-01-08 2015-04-14 United States Foundation For Inspiration And Recognition Of Science And Technology Wireless adapter
US20120223885A1 (en) 2011-03-02 2012-09-06 Microsoft Corporation Immersive display experience
GB201117799D0 (en) 2011-10-14 2011-11-30 Univ Ulster An immersive interactive video conferencing, social interaction or gaming system
US8879782B2 (en) * 2013-01-17 2014-11-04 Disney Enterprises, Inc. Projector light bulb
US9013536B2 (en) * 2013-03-13 2015-04-21 Futurewei Technologies, Inc. Augmented video calls on mobile devices
JP2016526951A (ja) * 2013-05-31 2016-09-08 シゼイ シジブイ カンパニー リミテッド 多面上映システム
ES2629697T3 (es) * 2013-09-16 2017-08-14 Ameria Gmbh Sistema de retroproyección controlado por gestos
JP2015079069A (ja) * 2013-10-15 2015-04-23 株式会社タイトー プロジェクタ
EP3089445A4 (en) * 2013-12-27 2017-10-04 Sony Corporation Function module system
US20160350058A1 (en) * 2015-06-01 2016-12-01 Intel Corporation Wireless display adapter device
ES2636782B1 (es) 2016-04-07 2018-07-20 Broomx Technologies, S.L. Sistema para proyectar contenidos audiovisuales inmersivos

Also Published As

Publication number Publication date
US10523931B2 (en) 2019-12-31
ES2636782A1 (es) 2017-10-09
EP3442222A2 (en) 2019-02-13
JP2019519868A (ja) 2019-07-11
WO2017174844A3 (es) 2018-03-08
JP6972474B2 (ja) 2021-11-24
US20190089950A1 (en) 2019-03-21
EP3442222B1 (en) 2022-10-19
CN109076203B (zh) 2021-08-03
CN109076203A (zh) 2018-12-21
WO2017174844A2 (es) 2017-10-12

Similar Documents

Publication Publication Date Title
ES2636782B1 (es) Sistema para proyectar contenidos audiovisuales inmersivos
WO2016002512A1 (ja) 情報処理装置および方法
US20200225737A1 (en) Method, apparatus and system providing alternative reality environment
KR20140010854A (ko) 방향 전환이 가능한 관람용 의자를 포함하는 다면 상영 시스템 및 방법
CN103543596A (zh) 一种多面投影系统
US11356639B1 (en) System and method for performing immersive audio-visual communications
US10015444B1 (en) Network architecture for immersive audio-visual communications by temporary communication structures
US10691009B2 (en) Projection method, projection system, and projector of fully covering multi-directional circular-screen through cross-arrangement
EP2408191A1 (en) A staging system and a method for providing television viewers with a moving perspective effect
US20240077941A1 (en) Information processing system, information processing method, and program
CN102737567B (zh) 多媒体正投影数字模型互动集成系统
WO2019002652A2 (es) Procedimiento para proyectar contenidos audiovisuales inmersivos
KR102165026B1 (ko) 360도 ar 입체영상 체험 시스템
CN111630848B (zh) 图像处理装置、图像处理方法、程序和投影系统
KR101455664B1 (ko) 방향 전환이 가능한 관람용 의자를 포함하는 다면 상영 시스템 및 방법
US11520217B1 (en) Four-sided projection for augmented reality
US20140125763A1 (en) 3d led output device and process for emitting 3d content output for large screen applications and which is visible without 3d glasses
US20220180664A1 (en) Frame of reference for motion capture
WO2021161894A1 (ja) 情報処理システム、情報処理方法及びプログラム
KR20220039865A (ko) 건물의 인테리어를 확인하기 위한 360도 이미지 제공 인터페이스

Legal Events

Date Code Title Description
FG2A Definitive protection

Ref document number: 2636782

Country of ref document: ES

Kind code of ref document: B1

Effective date: 20180720