WO2020198823A1 - Sistema e método de captação e projeção de imagem, e, uso do sistema - Google Patents

Sistema e método de captação e projeção de imagem, e, uso do sistema Download PDF

Info

Publication number
WO2020198823A1
WO2020198823A1 PCT/BR2020/000006 BR2020000006W WO2020198823A1 WO 2020198823 A1 WO2020198823 A1 WO 2020198823A1 BR 2020000006 W BR2020000006 W BR 2020000006W WO 2020198823 A1 WO2020198823 A1 WO 2020198823A1
Authority
WO
WIPO (PCT)
Prior art keywords
image capture
projection system
cameras
image
images
Prior art date
Application number
PCT/BR2020/000006
Other languages
English (en)
French (fr)
Inventor
Alexandre Thadeu da Costa MARQUES ARRABAL
Rodolpho Barcelos XAVIER FILHO
Original Assignee
Globo Comunicação E Participações S.a.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Globo Comunicação E Participações S.a. filed Critical Globo Comunicação E Participações S.a.
Priority to EP20782473.1A priority Critical patent/EP3952267A4/en
Priority to KR1020217034872A priority patent/KR20210142722A/ko
Priority to US17/598,696 priority patent/US12101573B2/en
Priority to MX2021011873A priority patent/MX2021011873A/es
Priority to CA3134758A priority patent/CA3134758A1/en
Priority to JP2021560355A priority patent/JP2022529417A/ja
Priority to CN202080024813.8A priority patent/CN113692734A/zh
Publication of WO2020198823A1 publication Critical patent/WO2020198823A1/pt

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/74—Circuits for processing colour signals for obtaining special effects
    • H04N9/75—Chroma key
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/60—Memory management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/292—Multi-camera tracking
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/28—Mobile studios
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3188—Scale or resolution adjustment
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/02—Composition of display devices
    • G09G2300/026—Video wall, i.e. juxtaposition of a plurality of screens to create a display screen of bigger dimensions
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G09G2340/125—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/03—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes specially adapted for displays having non-planar surfaces, e.g. curved displays

Definitions

  • the invention refers to the field of television production, more specifically to systems and methods of capturing and projecting images, and their use in the TV studio, and the extension of images through virtual projections.
  • US patent 6,201,579 describes a position detection device for an object with virtual studio, which comprises providing an object with an emission device and using the device in conjunction with a standard chroma-key background or background for provide the exact position of a TV camera or alone to provide a position for another object or person.
  • the patent application WO 1997028654 describes a video system that creates a virtual shadow of an object filmed in front of a blue screen with a main video camera.
  • the virtual shadow is created using a second camera located as a virtual light source, this system uses the chroma-key color system.
  • a panel or screen is placed as an image, video or virtual graphics, through the presenter who is inside the studio.
  • This technique limits the movements of the camera and any wider movement can show the limits of the panel and impair the composition of the image.
  • use is restricted to still cameras or with minimal movements.
  • the present invention presents a system that allows a virtual image integrated with a real image, executed in real time.
  • Figure 1 shows the extension of the scenario using panels of
  • Figure 2 shows a perspective view of the scenographic elements such as the glass bottom and LED panels.
  • Figure 3 shows a top view of the studio and the conformation of the panels and scenographic elements.
  • Figure 4 shows infographics and an animated virtual character inserted in the video by the graphics servers.
  • Figure 5 shows the physical layout of the studio, with the anchoring points of the panels.
  • Figure 6 shows a configuration of the asymmetric frustrum projection technique.
  • Figure 7 shows the distortions of asymmetric frustrum.
  • the present invention solves the aforementioned problems of studio size and camera movement by offering a more complete and robust approach, delivering a final image where the viewer is unable to perceive what is real or virtual and executing everything in real time, that is, permissible in live programs.
  • LED screens are arranged laterally, perpendicular to the floor and rotated in relation to the bottom window forming an angle of
  • This angle may vary, however it must be greater than 90 degrees.
  • LED technology was chosen because of its high resolution through other existing technologies. This resolution is higher not only in the number of pixels but also in the intensity of the colors. There is an additional importance in the intensity of the colors due to the incidence of this lighting on the real environment. This effect will contribute to the perception of the presenter's insertion in the virtual environment.
  • the background is important to reinforce the effect of inserting the studio in a real environment.
  • Two cameras with motion sensors are positioned inside the studio. They have the characteristics of not only tracking movements, but also promoting changes in the lens (zoom and focus, for example). These data are captured and sent to the graphics server that interprets them and, thus, deforms the images captured by the static cameras next to the glass bottom to be displayed on the screens from the perspective of the cameras positioned inside the studio.
  • Software is used to generate and provide graphics for projections on LED screens.
  • One embodiment of the invention allows the composition of an entirely virtual studio, consisting of LED panels on the walls, ceiling and floor.
  • Virtual inserts can be understood as all computer graphics inserted above the image, such as: scoreboards, wallets, objects, characters and graphic elements in general.
  • the physical studio consists of an entire front glass wall, and the other opaque walls, behaving transparently.
  • the effect sought would be to recreate a 180-degree studio (Panoramic) and, for that, the side walls should be made of glass, or invisible.
  • the physical studio can have any desired dimension, and the LED panels are then positioned on each side, rotated approximately 30 degrees, the panel being the hypotenuse of the triangle formed between it, the glass and the wall, with the said angle formed between the wall and the panel.
  • the floor made of LED boards allows the alteration of graphics, for displaying images or completing the current floor itself.
  • the process for the final effect consists of the following steps: - Capture of images to complement the scene through 1 or 2 or more cameras with wide-angle lens (s);
  • stitching which consists of creating a single image overlapping the common areas between the 2 cameras, resulting in a filmed panoramic image
  • the panoramic image being sent to the computer graphics system, which projects it on a virtual plane that is removed and scaled to superimpose and match artistically with the real image;
  • Each computer graphics system calculates the projective distortion of the panoramic image, which is projected on the LED panels always illustrating the current camera's point of view. In this way the image of the LEDs merges with the real image of the window;
  • All video signals need to be adjusted by the TV systems so that the delay is calculated, so that the videos are displayed without delay and in the right order.
  • the computer graphics system is installed on servers that are located in the technical center and receives the tracking data from the camera and lens through a connection, such as ethemet.
  • the studio can consist of two side LED panels, optionally an LED panel on the floor and a glass window in the background.
  • the side panels are perpendicular to the floor and rotated in relation to the bottom window forming an angle of 120 degrees (for correct operation, the angle must be greater than 90 degrees).
  • each side panel Behind each side panel is one or more static cameras with one or more wide-angle lenses with a viewing angle close to 180 degrees, pointing out of the studio through the glass window.
  • the video captured by each of these cameras is inserted into a processor and sent to the corresponding side panel.
  • This processor in addition to the video from the camera behind the side panel, also receives position and lens data from the main studio camera.
  • the static camera can have one or more wide-angle lenses.
  • the projective distortion process is performed using the asymmetric frustrum projection technique, available and implemented in all software and programming frameworks for computer graphics in real time already known in the art.
  • the system receives camera position data in relation to the studio, that is, geolocalizing the camera in the studio, a virtual camera is created with the same characteristics and lens, camera and position changes occurring in real time, this data is duplicated and feeds two virtual systems simultaneously.
  • the first system processes everything related to distortions for LED screens.
  • the second system (system 2) applies elements of augmented reality.
  • the LED panel has a processing time to display the images, therefore, once System 2, responsible for the virtual inserts, needs to be delayed so that System 1 projects the image complementary to the glass on the LED, before the System 2 Capture the image from the studio to make the virtual inserts.
  • the delay called “delay”, is variable, being in the range of 3 frames in the worst case.
  • the servers in the technical center where the systems are installed, are fed with tracking data from the camera and lens, such as via ethemet or any other compatible means, and with video, for example, via video cables.
  • the system is divided into modules: the projective distortion of the panoramic image is calculated by a part of the system that is commercially available software; and the 3D elements inserted in the studio are generated by systems that will not be described here.
  • the perception of a virtual window is due to the fact that there is always a temporal coherence between the real image seen through the glass and the complementation of the studio by the LED panels.
  • the effect as described generates a perception of a real scenario, much greater than the physical space available with graphical interventions in a fluid way.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Studio Circuits (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of El Displays (AREA)

Abstract

A invenção se refere a um sistema e método de captação e projeção de imagem para uso em estúdio integrado que engloba uma localização real e painéis que tornam este local parcialmente virtual, utilizando imagens geradas do lado de fora para, através da emissão das imagens, criar uma imagem parcialmente real e parcialmente virtual.

Description

RELATÓRIO DESCRITIVO
Pedido de Patente de Invenção para“SISTEMA E MÉTODO DE CAPTAÇÃO E PROJEÇÃO DE IMAGEM, E, USO DO SISTEMA”
CAMPO DA INVENÇÃO
[001] A invenção refere-se ao campo de produção televisiva, mais específicamente a sistemas e métodos de captação e projeção de imagem, e uso dos mesmos em estúdio de TV, e a extensão das imagens através de projeções virtuais.
ESTADO DA TÉCNICA
[002] Atualmente, o mercado de TV e cinema utiliza a técnica de extensão de cenário, onde uma parte do estúdio é montada fisicamente e outra parte é criada através de grafismos.
[003] As duas principais formas de implementar a expansão de cenários hoje é através de chroma-keying ou através do uso de telões de projeção.
[004] A extensão de cenários com Chroma-keying é uma das técnicas mais usadas atualmente. Neste caso, o cenário é composto por pisos e paredes de cor homogénea, geralmente verde ou azul, e pode ou não conter mobília adicional. O processo de substituição da imagem na parede é feito por programa de computador. Desta forma, tudo que a câmera visualizar na tonalidade será trocado por uma imagem, vídeo ou grafismo virtual.
[005] A patente US 6,201,579 descreve um dispositivo de detecção de posição de um objeto com estúdio virtual, que compreende fornecer um objeto com um dispositivo de emissão e usando o dispositivo em conjunto com um plano ou plano de fundo chroma-key em padrão para fornecer a posição exata de uma câmera de TV ou sozinho para fornecer uma posição para outro objeto ou pessoa.
[006] Já o pedido de patente WO 1997028654 descreve um sistema de vídeo que cria uma sombra virtual de um objeto filmado em frente de uma tela azul com uma câmera de vídeo principal. A sombra virtual é criada usando uma segunda câmera localizada como uma fonte de luz virtual, este sistema utiliza o sistema de cor chroma-key.
[007] Já a extensão de cenários com telões de projeção consiste de uma técnica mais simples e de fácil aplicação, embora bastante restritiva.
Neste caso, um painel ou telão é colocado como uma imagem, vídeo ou grafismo virtual, através do apresentador que se encontra dentro do estúdio. Esta técnica, no entanto, limita os movimentos da câmera e, qualquer movimento mais amplo pode mostrar os limites do painel e prejudicar a composição da imagem. Nesta técnica, o uso é restrito às câmeras paradas ou com mínimos movimentos.
[008] A presente invenção apresenta um sistema que permite uma imagem virtual integrada a uma imagem real, executada em tempo real.
DESENHOS
[009] A Figura 1 mostra a extensão de cenário utilizando painéis de
LED.
[010] A Figura 2 mostra uma vista em perspectiva dos elementos cenográficos tais como fundo de vidro e painéis de LED.
[011] A Figura 3 mostra uma vista superior do estúdio e a conformação dos painéis e elementos cenográficos.
[012] A Figura 4 mostra infográficos e personagem virtual animado inseridos no vídeo pelos servidores de grafismo. [013] A Figura 5 mostra a disposição física do estúdio, com os pontos de ancoragem dos painéis.
[014] A Figura 6 mostra uma configuração da técnica de projeção de frustrum assimétrico.
[015] A Figura 7 mostra as distorções de frustrum assimétrico.
DESCRIÇÃO DETALHADA DA INVENÇÃO
[016] A presente invenção resolve os problemas citados de tamanho de estúdio e movimentação das câmeras oferecendo uma abordagem mais completa e robusta, entregando uma imagem final onde o telespectador é incapaz de perceber o que é real ou virtual e executando tudo em tempo real, isto é, permissível em programas ao vivo.
[017] Desta forma, a solução apresentada amplia a percepção de espaço no estúdio através do conceito de extensão de cenários, fazendo uso de telões de LED, fundo de vidro com vista para um ambiente real, câmeras com sensores de rastreamento de movimentos e softwares responsáveis por controlar as imagens exibidas nos telões.
Telões de LED
[018] Telões de LED são dispostos lateralmente, perpendiculares ao piso e rotacionados em relação à janela de fundo formando um ângulo de
120 graus. Este ângulo pode variar, entretanto deve ser maior do que 90 graus.
[019] A tecnologia de LED foi escolhida por conta da alta resolução mediante as outras tecnologias existentes. Essa resolução é maior não somente na quantidade de pixels como na intensidade das cores. Há uma importância adicional na intensidade das cores por conta da incidência dessa iluminação sobre o ambiente real. Este efeito contribuirá para a percepção de inserção do apresentador no ambiente virtual. Fundo de Vidro
[020] O fundo é importante para reforçar o efeito de inserção do estúdio em um ambiente real.
[021] Junto ao fundo de vidro e escondidas atrás dos painéis laterais de LED estão duas cãmeras estáticas que capturam as imagens complementares àquelas visualizadas através do fundo de vidro. Estas imagens complementares são enviadas para servidores que a distorcem conforme a perspectiva da câmera do estúdio e as encaminham para exibição nos painéis laterais. Quando visto através da câmera do estúdio, as imagens nos painéis estendem a vista oferecida pelo fundo de vidro. No entanto, se vista de qualquer outro ponto de vista que não o da câmera, parecem distorcidas e fora de contexto.
Câmeras com sensores de movimento
[022] Duas câmeras com sensores de movimento são posicionadas dentro do estúdio. Elas possuem as características de não só rastrear os movimentos, mas também promover alterações na lente (zoom e foco, por exemplo). Estes dados são capturados e enviados para o servidor de grafismos que os interpreta e, assim, deforma as imagens capturadas pelas câmeras estáticas junto ao fundo de vidro para serem exibidas nos telões segundo a perspectiva das câmeras posicionadas dentro do estúdio.
[023] Os sensores e os sistemas de rastreamento são comumente conhecidos na técnica.
Softwares são usados para gerar e fornecer grafismo para projeções nos telões de LED.
Uma modalidade da invenção permite a composição de um estúdio inteiramente virtual, composto por painéis de LED nas paredes, teto e piso. O termo“Inserções virtuais” pode ser entendido como toda computação gráfica inserida por cima da imagem como: placares, carteias, objetos, personagens e elementos gráficos em geral.
[024] O estúdio físico é composto por uma parede frontal inteira de vidro, e as demais paredes opacas, comportando-se de forma transparente. O efeito procurado seria de recriar um estúdio de 180 graus (Panorâmico) e, para isso, as paredes laterais deveriam ser de vidro, ou invisíveis.
[025] O estúdio físico pode ter qualquer dimensão desejada, e os painéis de LED são então posicionados em cada lateral, rotacionados de aproximadamente 30 graus, sendo o painel a hipotenusa do triângulo formado entre o mesmo, o vidro e a parede, com o referido ângulo formado entre a parede e o painel.
[026] A inclinação dos painéis evita aberrações na imagem por conta do ângulo de emissão de luz dos LEDs, ao serem observados pela câmera, caso contrário poderiam sofrer efeito de reflexão total intemamente e aparecerem escuros, além de criar uma área escondida para posicionar entre o painel e parede uma câmera estática com lente grande angular (170 graus) colada no vidro para captar o exterior em processo (chamado de stitching).
[027] O piso feito em placas de LED permite a alteração de gráficos, para exibição de imagens ou completação do próprio chão atual.
[028] Aplicação de filtros e películas é realizada para chegar a níveis de luminância no vidro compatíveis com a equalização das imagens geradas no LED e as imagens recebidas através do vidro da parede frontal.
[029] Ainda como parte integrante da montagem interna do estúdio, foi utilizada uma grua sensorizada, para finalidade de trackeamento de câmera.
[030] O processo para o efeito final é composto pelas seguintes etapas: - Captação das imagens a complementar o cenário através de 1 ou 2 ou mais câmeras com lente(s) grande(s) angular(es);
- As imagens dessas câmeras passam por um processo chamado stitching, que consiste em criar uma única imagem sobrepondo as zonas comuns entre as 2 câmeras, tendo como resultado uma imagem panorâmica filmada;
- a imagem panorâmica sendo enviada ao sistema de computação gráfica, o qual projeta a mesma em um plano virtual que é afastado e escalado para sobrepor e casar artisticamente com a imagem real;
- são adicionados sensores de trackeamento de câmera e lente, de forma que, em tempo real, as câmeras utilizadas para transmissão tenham seus dados intrínsecos e extrínsecos, sendo informado ao sistema de computação gráfica;
- Para cada câmera de transmissão, é necessário um sistema de computação gráfica recebendo todas as informações mencionadas acima;
- Cada sistema de computação gráfica calcula a distorção projetiva da imagem panorâmica, que é projetada nos painéis de LED ilustrando sempre o ponto de vista da câmera atual. Dessa maneira a imagem dos LEDs se funde com a imagem real da janela;
- Todos os sinais de vídeos precisam ser ajustados pelos sistemas de TV de forma que tenham o delay calculado, para que os vídeos sejam exibidos sem atraso e na ordem certa.
[031] O sistema de computação gráfica é instalado em servidores que estão situados na central técnica e, recebe os dados de tracking de câmera e lente por uma conexão, como p.ex. ethemet.
[032] O estúdio pode ser composto por dois painéis de LEDs laterais, opcionalmente um painel de LED no piso e uma janela de vidro ao fundo. [033] Os painéis laterais estão perpendiculares ao piso e rotacionados em relação a janela de fundo formando um ângulo de 120 graus (para o funcionamento correto, o ângulo deve ser superior a 90 graus).
[034] Por trás de cada painel lateral está uma ou mais câmeras estáticas com uma ou mais lentes grandes angulares com ângulo de visão próximo a 180 graus, apontando para fora do estúdio através da janela de vidro. O vídeo capturado por cada uma destas câmeras é inserido em um processador e enviado para o painel lateral correspondente. Este processador, além do vídeo da câmera de trás do painel lateral, também recebe os dados de posição e lente da câmera principal do estúdio.
[035] Em uma modalidade alternativa, pode ser usada apenas uma câmera estática para captação da imagem externa.
[036] Em uma modalidade alternativa, a câmera estática pode ter uma ou mais lentes grandes angulares.
[037] O Processo de distorção projetiva é realizado pela técnica de projeção de frustrum assimétrico, disponível e implementado em todos softwares e frameworks de programação para computação gráfica em tempo real já conhecidos na técnica.
[038] A distorção de frustrum para assimétrico também é implementada por software disponível no mercado, sendo representado pela função descrita abaixo.
[039] Uma vez que o sistema recebe dados de posição de câmera em relação ao estúdio, isto é, geolocalizando a câmera no estúdio, uma câmera virtual é criada com as mesmas características e alterações de lente, câmera e posição ocorrendo em tempo real, esses dados são duplicados e alimentam simultaneamente dois sistemas virtuais. O primeiro sistema (sistema 1) processa tudo relacionado as distorções para os telões de LED. O Segundo sistema (sistema 2) aplica elementos de realidade aumentada. [040] O painel de LED possui um tempo de processamento para exibir as imagens, portanto, uma vez o sistema 2, responsável pelas inserções virtuais, precisa ser atrasado para que o sistema 1 projete no LED a imagem complementar ao vidro, antes do Sistema 2 Capturar a imagem do estúdio para fazer as inserções virtuais. O atraso, denominado como“delay”, é variável, ficando na faixa de 3 frames no pior dos casos.
[041] Para viabilizar o cálculo da distorção projetiva e os demais recursos, os servidores na central técnica, onde os sistemas estão instalados, são alimentados com dados de tracking da câmera e da lente, como por exemplo via ethemet ou qualquer outro meio compatível, e com vídeo, como por exemplo, via cabos de vídeo. O sistema é dividido em módulos: a distorção projetiva da imagem panorâmica é calculada por uma parte do sistema que é um software disponível no mercado; e os elementos 3D inseridos no estúdio são gerados por sistemas que não serão descritos aqui.
[042] A percepção de janela virtual, deve-se ao fato de sempre existir a coerência temporal entre a imagem real vista através do vidro e a complementação do estúdio pelos painéis de LED. O efeito conforme descrito, gera uma percepção de um cenário real, muito maior do que o espaço físico disponível com intervenções de grafismo de maneira fluida.
[043] A partir do descrito, será observado que numerosas modificações e variações podem ser efetuadas sem se afastar do verdadeiro espírito e escopo dos novos conceitos da presente invenção. Deve ser compreendido que nenhuma limitação com relação às modalidades específicas ilustradas é pretendida ou deve ser inferida. A descrição destina- se a cobrir todas as ditas modificações que caiam dentro do escopo da invenção.

Claims

REIVINDICAÇÕES
1. Sistema de captação e projeção de imagem, caracterizado por compreender painéis de LED, fundo de vidro com vista para um ambiente real, câmeras com sensores de rastreamento de movimentos, câmeras estáticas de captação de imagem e softwares operando em conjunto.
2. Sistema de captação e projeção de imagem, de acordo com a reivindicação 1, caracterizado por os painéis de LED serem dispostos lateralmente com relação ao fundo de vidro, perpendiculares ao piso e rotacionados em relação à janela de fundo.
3. Sistema de captação e projeção de imagem, de acordo com a reivindicação 2, caracterizado por os painéis de LED formarem um ângulo maior do que 90 graus, preferencialmente, 120 graus.
4. Sistema de captação e projeção de imagem, de acordo com a reivindicação 1, caracterizado por os painéis de LED serem rotacionados de cerca de 30 graus.
5. Sistema de captação e projeção de imagem, de acordo com a reivindicação 1, caracterizado por compreender uma, duas ou mais câmeras estáticas atrás dos painéis laterais de LED.
6. Sistema de captação e projeção de imagem, de acordo com a reivindicação 5, caracterizado por as câmeras estáticas enviarem imagens complementares a servidores que a distorcem conforme a perspectiva da câmera com sensor de movimento e encaminham para exibição nos painéis laterais de LED.
7. Sistema de captação e projeção de imagem, de acordo com a reivindicação 5, caracterizado por as câmeras estáticas capturarem imagens que são deformadas e exibidas nos telões de LED de acordo com a perspectiva das câmeras com sensor de movimento posicionadas dentro do estúdio.
8. Sistema de captação e projeção de imagem, de acordo com a reivindicação 5, caracterizado por as câmeras estáticas possuírem, preferencialmente, lente(s) grande(s) angular(es) que captam imagens que complementam o cenário interno.
9. Sistema de captação e projeção de imagem, de acordo com a reivindicação 5, caracterizado por as imagens das câmeras estáticas externas sofrerem‘stitching’, criando uma única imagem sobrepondo as zonas comuns entre as duas câmeras.
10. Sistema de captação e projeção de imagem, de acordo com a reivindicação 5, caracterizado por as câmeras estáticas criarem uma imagem panorâmica que é enviada a um sistema de computação gráfica, que projeta tal imagem em um plano virtual afastado e escalado para sobrepor e casar artisticamente com a imagem real.
11. Sistema de captação e projeção de imagem, de acordo com a reivindicação 1, caracterizado por compreender duas ou maís câmeras com sensores de movimento posicionadas dentro de um estúdio.
12. Sistema de captação e projeção de imagem, de acordo com a reivindicação 11, caracterizado por as câmeras com sensores de movimento serem capazes de rastrear os movimentos e promover alterações na lente conforme o movimento.
13. Sistema de captação e projeção de imagem, de acordo com as reivindicações 11 , caracterizado por as câmeras com sensor de movimento capturarem informações que são enviadas ao servidor de grafismo e interpretadas.
14. Sistema de captação e projeção de imagem, de acordo com a reivindicação 11, caracterizado por um sistema de computação gráfico receber os dados de tracking das câmeras com sensor de movimento e lente por conexão.
15. Sistema de captação e projeção de imagem, de acordo com a reivindicação 11, caracterizado por as câmeras com sensor de movimento compreenderem ainda sensores de trackeamento de câmera e lente.
16. Sistema de captação e projeção de imagem, de acordo com qualquer uma das reivindicações anteriores, caracterizado por cada sistema de computação gráfica calcular a distorção projetiva da imagem panorâmica.
17. Sistema de captação e projeção de imagem, de acordo com qualquer uma das reivindicações anteriores, caracterizado por os sinais de vídeo serem ajustados pelos sistemas de TV tendo o delay calculado, onde os vídeos são exibidos sem atraso e na ordem correta.
18. Uso do sistema de captação e projeção de imagem, como definido em qualquer uma das reivindicações anteriores, caracterizado por ser em um estúdio físico.
19. Uso do sistema de captação e projeção de imagem, de acordo com a reivindicação 18, caracterizado por o estúdio compreender uma parede frontal inteira de vidro e as demais paredes opacas.
20. Uso do sistema de captação e projeção de imagem, de acordo com a reivindicação 18, caracterizado por a parede frontal inteira de vidro incluir aplicação de filtros e películas, que equalizam as imagens geradas no LED com as imagens recebidas através do vidro da parede frontal.
21. Método de captação e projeção de imagem utilizando o sistema como definido nas reivindicações 1 a 17, caracterizado por compreender as etapas de:
- captação da imagens complementares ao cenário real através de uma, duas ou mais câmeras estáticas com lentes grandes angulares; - envio da imagem panorâmica ao sistema de computação gráfica e projeção da mesma em um plano virtual afastado e escalado para sobrepor e casar artisticamente com a imagem real;
- adição de sensores de trackeamento de câmera e lente, sendo as câmeras utilizadas para transmissão em tempo real tendo dados intrínsecos e extrínsecos informados aos sistema de computação gráfica;
- cálculo da distorção projetiva da imagem panorâmica pelo sistema de computação gráfica;
- ajuste dos sinais de vídeo pelos sistemas de TV, que calculam o delay;
- exibição dos vídeos sem atraso e na ordem correta.
PCT/BR2020/000006 2019-03-29 2020-02-07 Sistema e método de captação e projeção de imagem, e, uso do sistema WO2020198823A1 (pt)

Priority Applications (7)

Application Number Priority Date Filing Date Title
EP20782473.1A EP3952267A4 (en) 2019-03-29 2020-02-07 IMAGE CAPTURE AND PROJECTION SYSTEM AND METHOD, AND USE THEREOF
KR1020217034872A KR20210142722A (ko) 2019-03-29 2020-02-07 이미지 캡쳐 및 투영을 위한 시스템, 시스템의 사용, 그리고 이미지 캡쳐, 투영 및 삽입 방법
US17/598,696 US12101573B2 (en) 2019-03-29 2020-02-07 System for capturing and projecting images, use of the system and method for capturing, projecting and inserting images
MX2021011873A MX2021011873A (es) 2019-03-29 2020-02-07 Sistema y metodo de captacion y proyeccion de imagenes y uso del sistema.
CA3134758A CA3134758A1 (en) 2019-03-29 2020-02-07 System for capturing and projecting images, use of the system, and method for capturing, projecting and inserting images
JP2021560355A JP2022529417A (ja) 2019-03-29 2020-02-07 画像取得投影システム、該システムの使用及び画像取得投影挿入方法
CN202080024813.8A CN113692734A (zh) 2019-03-29 2020-02-07 用于采集和投影图像的系统和方法，以及该系统的应用

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
BR102019006465-0A BR102019006465A2 (pt) 2019-03-29 2019-03-29 Sistema e método de captação e projeção de imagem, e, uso do sistema.
BR1020190064650 2019-03-29

Publications (1)

Publication Number Publication Date
WO2020198823A1 true WO2020198823A1 (pt) 2020-10-08

Family

ID=72664365

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/BR2020/000006 WO2020198823A1 (pt) 2019-03-29 2020-02-07 Sistema e método de captação e projeção de imagem, e, uso do sistema

Country Status (9)

Country Link
US (1) US12101573B2 (pt)
EP (1) EP3952267A4 (pt)
JP (1) JP2022529417A (pt)
KR (1) KR20210142722A (pt)
CN (1) CN113692734A (pt)
BR (1) BR102019006465A2 (pt)
CA (1) CA3134758A1 (pt)
MX (1) MX2021011873A (pt)
WO (1) WO2020198823A1 (pt)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023094872A1 (en) * 2021-11-29 2023-06-01 Weta Digital Limited Increasing dynamic range of a virtual production display

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210266427A1 (en) * 2020-02-25 2021-08-26 Michael Kidakarn Chair and chroma key photography backdrop assembly thereof
DE102022131909B3 (de) 2022-12-01 2024-03-28 Gero Steffen Mobiles Bildaufnahmestudio

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997028654A2 (en) 1996-02-01 1997-08-07 Rt-Set Ltd. Chroma keying studio system
US6091579A (en) 1997-10-31 2000-07-18 Fujitsu Limited Memory device with improved mechanisms to position a yoke
EP0956709B1 (en) * 1997-02-01 2002-04-03 Orad Hi-Tec Systems Limited Virtual studio position sensing system
US7468778B2 (en) * 2002-03-15 2008-12-23 British Broadcasting Corp Virtual studio system
EP2408191A1 (en) * 2010-07-16 2012-01-18 MediaScreen Bildkommunikation GmbH A staging system and a method for providing television viewers with a moving perspective effect
US8269900B2 (en) * 2008-12-02 2012-09-18 Musion Ip Limited Mobile studio

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5886747A (en) * 1996-02-01 1999-03-23 Rt-Set Prompting guide for chroma keying
US6191812B1 (en) * 1997-04-01 2001-02-20 Rt-Set Ltd. Method of providing background patterns for camera tracking
GB2329292A (en) * 1997-09-12 1999-03-17 Orad Hi Tec Systems Ltd Camera position sensing system
US6752498B2 (en) * 2001-05-14 2004-06-22 Eastman Kodak Company Adaptive autostereoscopic display system
US20030224333A1 (en) * 2002-05-31 2003-12-04 Jan Vastvedt Suspended Motion system simulation theater
JP2006047610A (ja) * 2004-08-04 2006-02-16 Seiko Epson Corp 画像投影装置および画像投影システム
WO2006089417A1 (en) * 2005-02-23 2006-08-31 Craig Summers Automatic scene modeling for the 3d camera and 3d video
US8982109B2 (en) * 2005-03-01 2015-03-17 Eyesmatch Ltd Devices, systems and methods of capturing and displaying appearances
KR101235273B1 (ko) * 2005-07-07 2013-02-20 삼성전자주식회사 다수의 투명한 플렉시블 디스플레이 패널을 이용한 체적형3차원 디스플레이 시스템
CN1731832A (zh) * 2005-08-04 2006-02-08 西安宏源视讯设备有限责任公司 虚拟演播室系统中前景景深识别装置及方法
US20070098368A1 (en) * 2005-11-02 2007-05-03 Thomas Carley Mobile recording studio system
US7596896B2 (en) * 2006-02-01 2009-10-06 Dimensional Communications, Inc. Three-dimensional forming display system
KR101908033B1 (ko) * 2008-07-10 2018-12-10 리얼 뷰 이미징 리미티드 광시야각 디스플레이들 및 사용자 인터페이스들
GB0910117D0 (en) * 2008-07-14 2009-07-29 Holicom Film Ltd Method and system for filming
US7938540B2 (en) * 2008-07-21 2011-05-10 Disney Enterprises, Inc. Autostereoscopic projection system
US8587682B2 (en) * 2010-02-12 2013-11-19 Nvidia Corporation Display system, method, and computer program product for capturing images using multiple integrated image sensors
US8646917B2 (en) * 2011-01-20 2014-02-11 Disney Enterprises, Inc. Three dimensional display with multiplane image display elements
KR101270780B1 (ko) * 2011-02-14 2013-06-07 김영대 가상 강의실 강의 방법 및 장치
WO2013006170A1 (en) * 2011-07-06 2013-01-10 Hewlett-Packard Development Company, L.P. Telepresence portal system
CN202608633U (zh) * 2012-03-31 2012-12-19 刘辉 移动式led投影系统
KR101367260B1 (ko) * 2012-06-19 2014-02-25 김영대 강의자가 강의 중에 강의 화면을 구성할 수 있는 가상 강의실 강의 장치
US8857994B2 (en) * 2012-10-30 2014-10-14 Disney Enterprises, Inc. Transparent display with dynamic mask
US9921425B2 (en) * 2013-04-05 2018-03-20 Jiansheng Wang Switchable projection panel
KR101433751B1 (ko) * 2013-06-21 2014-08-27 한국과학기술원 투명 디스플레이 장치를 이용한 양면 인터랙션 장치
US9639987B2 (en) * 2013-06-27 2017-05-02 Canon Information And Imaging Solutions, Inc. Devices, systems, and methods for generating proxy models for an enhanced scene
US9219910B2 (en) * 2013-07-25 2015-12-22 Disney Enterprises, Inc. Volumetric display system blending two light types to provide a new display medium
CN203658722U (zh) * 2013-11-22 2014-06-18 苏州巨像科技有限公司 全透明玻璃幕墙显示投影系统
WO2015098807A1 (ja) * 2013-12-24 2015-07-02 チームラボ株式会社 被写体と３次元仮想空間をリアルタイムに合成する撮影システム
GB2517069B (en) * 2014-06-23 2015-09-02 Liang Kong Autostereoscopic virtual reality platform
US10375382B2 (en) * 2014-09-15 2019-08-06 Dmitry Gorilovsky System comprising multiple digital cameras viewing a large scene
US9930290B2 (en) * 2014-09-25 2018-03-27 Steve H. McNelley Communication stage and integrated systems
US9615054B1 (en) * 2014-09-25 2017-04-04 Steve H. McNelley Transparent communication devices
US10298877B2 (en) * 2014-09-25 2019-05-21 Steve H. McNelley Communication stage and display systems
US10841535B2 (en) * 2014-09-25 2020-11-17 Steve H. McNelley Configured transparent communication terminals
US9819907B2 (en) * 2014-09-25 2017-11-14 Steve H. McNelley Communication stage and related systems
KR101593136B1 (ko) * 2014-10-17 2016-02-11 주식회사 재미 Led 유리보드 기반 동영상 강의 시스템
CN204889366U (zh) * 2015-07-15 2015-12-23 黑油(北京)展览有限公司 360度全息展示柜
US10286309B2 (en) * 2015-09-04 2019-05-14 Tovis Co., Ltd. Three-dimensional image device for providing improved sense of immersion and game device using same
KR102583929B1 (ko) * 2017-02-24 2023-10-04 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CN207082314U (zh) * 2017-08-21 2018-03-09 珠海兴业应用材料科技有限公司 智能多媒体玻璃外墙投影系统
CN108134890B (zh) * 2018-02-05 2023-12-19 广东佳码影视传媒有限公司 一种虚拟演播装置
SG11202100408XA (en) * 2018-07-25 2021-02-25 Light Field Lab Inc Light field display system based amusement park attraction

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997028654A2 (en) 1996-02-01 1997-08-07 Rt-Set Ltd. Chroma keying studio system
EP0956709B1 (en) * 1997-02-01 2002-04-03 Orad Hi-Tec Systems Limited Virtual studio position sensing system
US6091579A (en) 1997-10-31 2000-07-18 Fujitsu Limited Memory device with improved mechanisms to position a yoke
US7468778B2 (en) * 2002-03-15 2008-12-23 British Broadcasting Corp Virtual studio system
US8269900B2 (en) * 2008-12-02 2012-09-18 Musion Ip Limited Mobile studio
EP2408191A1 (en) * 2010-07-16 2012-01-18 MediaScreen Bildkommunikation GmbH A staging system and a method for providing television viewers with a moving perspective effect

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3952267A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023094872A1 (en) * 2021-11-29 2023-06-01 Weta Digital Limited Increasing dynamic range of a virtual production display

Also Published As

Publication number Publication date
KR20210142722A (ko) 2021-11-25
EP3952267A4 (en) 2022-11-30
US20220150386A1 (en) 2022-05-12
MX2021011873A (es) 2022-01-04
CA3134758A1 (en) 2020-10-08
JP2022529417A (ja) 2022-06-22
EP3952267A1 (en) 2022-02-09
US12101573B2 (en) 2024-09-24
CN113692734A (zh) 2021-11-23
BR102019006465A2 (pt) 2020-10-13

Similar Documents

Publication Publication Date Title
US10827167B2 (en) Systems and methods for dynamically adjusting a synthetic view of a scene for showing the scene from a virtual camera perspective
KR102235591B1 (ko) 정밀 멀티-뷰 디스플레이
US10375382B2 (en) System comprising multiple digital cameras viewing a large scene
WO2020198823A1 (pt) Sistema e método de captação e projeção de imagem, e, uso do sistema
CN105008995B (zh) 全立体成像
US20180205936A1 (en) Stereoscopic 3d camera for virtual reality experience
CN103543596B (zh) 一种多面投影系统
US9143724B2 (en) Telepresence portal system
US10154194B2 (en) Video capturing and formatting system
JP2017505565A (ja) 多面映像の生成方法及びシステム
US20170127051A1 (en) Stereoscopic Display System using Light Field Type Data
JP2016504819A (ja) 物理的オブジェクトから仮想的シーン内の仮想的オブジェクトをリアルタイムで取得して挿入する方法
KR20070103347A (ko) 360도 파노라마 카메라의 영상컨텐츠를 이용한 고해상도광시야각 대형 디스플레이 방법
CN103546708A (zh) 用于多面投影的影像修正系统及方法
JP6322290B2 (ja) 多面上映システムのシミュレーション映像を提供するためのシミュレーション映像管理システム及び方法
CN105137705A (zh) 一种虚拟球幕的创建方法和装置
TWI746466B (zh) 沉浸式顯示器外殼
CN105787920A (zh) 球幕标定方法、标定系统及控制设备
US20160037148A1 (en) 3d-mapped video projection based on on-set camera positioning
JP2007323093A (ja) 仮想環境体験表示装置
WO2019146426A1 (ja) 画像処理装置、画像処理方法、プログラム、および投影システム
CN104038748A (zh) 多通道数据融合矫正方法
Foote et al. Enhancing distance learning with panoramic video
CN110400277A (zh) 一种球幕几何校正系统
KR102505117B1 (ko) 원격지 스트리밍에 최적화된 다면 영상 스트리밍 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20782473

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 3134758

Country of ref document: CA

ENP Entry into the national phase

Ref document number: 2021560355

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 20217034872

Country of ref document: KR

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 2020782473

Country of ref document: EP

Effective date: 20211029