BR112015020670B1 - Método e dispositivo de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera e mídia de armazenamento legível por computador - Google Patents
Método e dispositivo de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera e mídia de armazenamento legível por computador Download PDFInfo
- Publication number
- BR112015020670B1 BR112015020670B1 BR112015020670-0A BR112015020670A BR112015020670B1 BR 112015020670 B1 BR112015020670 B1 BR 112015020670B1 BR 112015020670 A BR112015020670 A BR 112015020670A BR 112015020670 B1 BR112015020670 B1 BR 112015020670B1
- Authority
- BR
- Brazil
- Prior art keywords
- camera
- sequence
- tactile
- video content
- trigger
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000003860 storage Methods 0.000 title claims description 3
- 230000000694 effects Effects 0.000 claims abstract description 47
- 230000033001 locomotion Effects 0.000 claims description 24
- 238000006073 displacement reaction Methods 0.000 claims description 13
- 230000008447 perception Effects 0.000 abstract description 4
- 239000013598 vector Substances 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 8
- 230000033458 reproduction Effects 0.000 description 8
- 230000015654 memory Effects 0.000 description 7
- 238000013519 translation Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 208000012886 Vertigo Diseases 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 238000009434 installation Methods 0.000 description 4
- 230000035807 sensation Effects 0.000 description 4
- 231100000889 vertigo Toxicity 0.000 description 4
- 210000000707 wrist Anatomy 0.000 description 4
- 230000006872 improvement Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000007654 immersion Methods 0.000 description 2
- 238000004091 panning Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 description 1
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N Silicium dioxide Chemical compound O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000036642 wellbeing Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63J—DEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
- A63J25/00—Equipment specially adapted for cinemas
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
- A63G31/00—Amusement arrangements
- A63G31/16—Amusement arrangements creating illusions of travel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Studio Devices (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
método para reproduzir um item de conteúdo audiovisual tendo parâmetros de controle de acionadores tácteis e dispositivo implementando o método a presente revelação diz respeito a um método para reproduzir um item de conteúdo de vídeo filmado usando uma câmera. um item de conteúdo de vídeo composto de sequências é desenvolvido e aprimorado por meio de comandos aplicados à câmera no momento da filmagem. tendo em vista a reprodução, o conteúdo de vídeo é dividido em sequências. os comandos aplicados à câmera são extraídos para cada sequência e tornam possível calcular pelo menos um parâmetro de controle de acionador táctil associado com esta sequência. na hora da reprodução de uma sequência do conte-údo de vídeo, pelo menos um parâmetro de controle calculado assim controla pelo menos um acionador táctil. deste modo, o espectador percebe estímulos tornando possível aprimorar sua percepção do documento de vídeo durante a reprodução. vantajosamente, o reprodutor capaz de repro-duzir o conteúdo aprimorado determina um efeito cinematográfico para um conjunto de sequências a partir de comandos aplicados à câmera. então a metáfora táctil associada com este efeito é aplicada a este conjunto de sequências.
Description
[001]O campo da presente invenção é o da geração de reproduções táteis durante a reprodução de um item de conteúdo audiovisual. Mais especificamente, a invenção diz respeito ao caso onde o conteúdo audiovisual compreende sinais que tornam possível controlar acionadores que geram movimentos no corpo do espectador.
[002]Atualmente, técnicas cinematográficas tornam possível enriquecer o conteúdo audiovisual e a experiência do espectador. O advento do 3D oferece para o espectador uma imersão real no filme que está se tornando de modo crescente realística e impressiva. Recentemente, itens de equipamento têm sido acrescentados ao assento no qual o espectador está assentado para dar a ele sensações a não ser aquelas fornecidas somente por sua visão. Assim, assentos agora movimentam de acordo com diversos graus de liberdade fazendo com que o espectador experimente um movimento que está associado com o conteúdo visual e possivelmente de áudio. Por exemplo, no caso de uma cena de filme na frente de um carrinho de montanha-russa carro, quando uma descida é reproduzida na tela de cinema, o assento do espectador inclina ligeiramente para frente. Um outro exemplo consiste em fazer os assentos de cinema vibrarem intensivamente da esquerda para a direita durante a reprodução de uma cena de terremoto.
[003]Conteúdo audiovisual com aperfeiçoamento tátil torna possível controlar acionadores que fazem com que o espectador seja deslocado durante a reprodução do documento. Deste modo, o espectador fica ciente do conteúdo não somente por meio de visão e audição, mas também por toque. Sua imersão na reprodução do documento é assim maior e sua impressão de experimentar o evento é mais intensa.
[004]Muitas vezes aperfeiçoamentos táteis são adicionados a filmes já feitos.Um operador vê o filme e determina uma sequência para a qual percepção seria aprimorada para o espectador por meio de um movimento executado na sua pessoa. O operador determina manualmente o tipo de movimento (deslocamento, vibração, pulsação rápida e forte, tremedeira, etc.) e programa a ativação de acionadores específicos durante esta sequência. Os parâmetros táteis são adicionados ao vídeo e possivelmente a sinais de áudio em uma mídia específica. Durante a reprodução, os parâmetros táteis são lidos e transmitidos para os acionadores responsáveis por aplicar estímulos ao espectador. Estes estímulos podem gerar todos os tipos de sensações: bem-estar, preocupação, segurança, pequenez, vertigem, etc.
[005]Correntemente, estes parâmetros táteis são calculados manualmente por um operador vendo o vídeo ou conteúdo audiovisual. Por esta razão existe uma necessidade real de uma nova técnica que torne possível automatizar a criação de parâmetros de controle de acionadores táteis e o aperfeiçoamento de conteúdo de vídeo novo.
[006]A presente revelação propõe uma solução nova que não tem todas as desvantagens da técnica anterior, na forma de um método para reproduzir um item de conteúdo de vídeo filmado usando uma câmera. Este método compreende uma etapa de processar os comandos aplicados à câmera durante a filmagem de uma ou mais sequências a fim de calcular pelo menos um parâmetro de controle para pelo menos um acionador tátil associado com a sequência ou sequências e uma etapa de controlar o pelo menos um acionador tátil usando o pelo menos um parâmetro de controle calculado durante a reprodução da pelo menos uma sequência.
[007]Deste modo, o conteúdo de vídeo é aprimorado automaticamente por meio de parâmetros de controle de acionadores táteis calculados a partir de comandos aplicados à câmera durante filmagem da sequência ou de várias sequências do conteúdo de vídeo.
[008]De acordo com uma primeira modalidade, os valores numéricos dos comandos aplicados à câmera produzem valores numéricos que controlam os acionadores táteis. Deste modo, a ação dos acionadores é adaptada perfeitamente ao conteúdo de vídeo que é reproduzido ao mesmo tempo.
[009]De acordo com uma outra modalidade, um efeito cinematográfico é determinado a partir de comandos aplicados à câmera, e o parâmetro de controle de acionador tátil é calculado a partir do efeito cinematográfico assim determinado. Deste modo, a ação dos acionadores no espectador é bem adaptada ao efeito cinematográfico que o produtor de filme desejou fornecer no conteúdo de vídeo.
[010]De acordo com uma outra modalidade, o conteúdo de vídeo e valores de controle aplicados à câmera são transmitidos durante as sequências para um dispositivo para reproduzir conteúdo de vídeo e controlar acionadores táteis, a etapa de processamento para calcular os parâmetros de controle de acionadores táteis sendo executada por este dispositivo. Deste modo, os parâmetros de controle para os acionadores são bem adaptados à instalação usada para a reprodução do conteúdo.
[011]De acordo com uma outra modalidade, o conteúdo de vídeo e parâmetros de controle de acionadores táteis são transmitidos para um dispositivo para reproduzir conteúdo de vídeo e controlar acionadores táteis. Deste modo, os parâmetros de controle de acionadores são calculados somente uma vez que pelo produtor de filme.
[012]De acordo com uma outra modalidade, uma pluralidade de grupos de parâmetros de controle de acionadores táteis é associada com cada sequência do conteúdo, cada grupo de parâmetros sendo associado com um dispositivo para reproduzir conteúdo de vídeo e controlar acionadores táteis particulares. Deste modo, a instalação usada para a reprodução do conteúdo escolhe os parâmetros de controle de acordo com os acionadores táteis disponíveis.
[013]De acordo com uma outra modalidade, a duração de uma sequência é um múltiplo da duração para reproduzir uma imagem do conteúdo de vídeo. Deste modo, a divisão temporal do conteúdo durante a qual um parâmetro de controle tátil é calculado é mais simples.
[014]De acordo com uma outra modalidade, os acionadores são em número de três, dois acionadores pretendidos para serem segurados, um em cada mão, por um espectador, e um acionador pretendido para suportar a cabeça do dito espectador. Deste modo, a instalação para reproduzir vídeo com realimentação tátil é fácil de instalar e relativamente barata.
[015]De acordo com uma outra modalidade, se nenhum efeito cinematográfico não for detectado durante uma sequência, então os parâmetros de controle de acionadores táteis associados com esta sequência são calculados a partir de valores de controle aplicados à câmera durante filmagem desta sequência. Deste modo, o espectador detecta sensações táteis mesmo na ausência de efeitos cinematográficos detectáveis.
[016]De acordo com um primeiro aspecto de hardware, a presente revelação também diz respeito a um dispositivo para reproduzir pelo menos uma sequência de um item de conteúdo de vídeo filmado usando uma câmera, o dispositivo compreendendo pelo menos um processador configurado para processar comandos aplicados à câmera durante filmagem da pelo menos uma sequência a fim de calcular pelo menos um parâmetro de controle para pelo menos um acionador tátil associado com a pelo menos uma sequência e para controlar o pelo menos um acionador tátil usando o pelo menos um parâmetro de controle calculado durante a reprodução da pelo menos uma sequência.
[017]De acordo com uma modalidade particular, o pelo menos um processador é configurado adicionalmente para determinar um efeito cinematográfico a partir de comandos aplicados à câmera, o parâmetro de controle para o pelo menos um acionador tátil sendo calculado a partir do efeito cinematográfico determinado.
[018]Vantajosamente, o pelo menos um processador é configurado para controlar três acionadores táteis, dois acionadores sendo pretendidos para serem segurados, um em cada mão, por um espectador, e um acionador sendo pretendido para suportar a cabeça do dito espectador.
[019]De acordo com um outro aspecto, a presente revelação também diz respeito a um programa de computador compreendendo instruções para implementar o método para reproduzir conteúdo de vídeo descrito anteriormente, quando o programa é executado por um processador.
[020]Outras características e vantagens da presente revelação aparecerão mais claramente mediante leitura da descrição a seguir de uma modalidade particular, fornecida como um simples exemplo não restritivo e se referindo aos desenhos anexos, nos quais:- a figura 1 mostra um fluxograma de exemplo das etapas para implementar o método de acordo com uma modalidade particular da invenção;- a figura 2 mostra um diagrama de um dispositivo de exemplo para reproduzir conteúdo de vídeo e controlar acionadores táteis;- as figuras 3.a e 3.b mostram um exemplo de um assento ocupado e não ocupado por um espectador e equipado com acionadores táteis;- as figuras 4.a, 4.b e 4.c mostram um diagrama de acionadores e os diferentes graus de liberdade disponíveis,- a figura 5 mostra um diagrama de um espectador assentado em um assento equipado com acionadores de acordo com uma modalidade particular da invenção;- a figura 6 mostra um diagrama de uma câmera e exemplos de movimentos que podem ser aplicados a ela durante filmagem;- a figura 7 mostra um movimento do acionador tátil durante uma sequência em que a câmera executa uma rotação;- a figura 8 mostra um dispositivo configurado para controlar acionadores táteis de acordo com uma modalidade particular da invenção.
[021]O princípio geral da presente revelação se encontra em um método para reproduzir um item de conteúdo de vídeo filmado usando uma câmera. Um item de conteúdo de vídeo composto de uma ou mais sequências é desenvolvido e aprimorado por meio de comandos aplicados à câmera no momento da filmagem. Os comandos aplicados à câmera são extraídos para cada sequência e tornam possível calcular pelo menos um parâmetro de controle para um ou mais acionadores táteis associados com esta sequência. Quando os comandos aplicados à câmera não podem ser extraídos da sequência ou sequências de vídeo, estes comandos são estimados a partir da sequência ou sequências de vídeo, tal como descrito, por exemplo, no artigo escrito por Thomas G A intitulado “Sports Real-Time Camera Pose Estimation for Augmenting Scenes” publicado em fevereiro de 2006 durante a Conference on Visual Media Production (CVMP) em Londres. Na hora da reprodução de uma sequência do conteúdo de vídeo, pelo menos um parâmetro de controle calculado assim controla pelo menos um acionador tátil. Deste modo, o espectador percebe estímulos tornando possível aprimorar sua percepção do documento de vídeo durante a reprodução.
[022]Vantajosamente, o reprodutor capaz de reproduzir o conteúdo aprimorado determina um efeito cinematográfico para um conjunto de sequências a partir de comandos aplicados à câmera. Então a metáfora tátil associada com este efeito é aplicada para este conjunto de sequências.
[023]A figura 1 mostra um fluxograma de exemplo das etapas para implementar o método de acordo com uma modalidade.
[024]Inicialmente, na etapa 1.1, um item de vídeo ou conteúdo audiovisual é filmado. Os comandos aplicados à câmera por toda a filmagem são gravados e cada grupo de comandos aplicados a uma sequência de dadas imagens é associado com esta sequência. O conteúdo constituído de dados de vídeo, comandos de câmera e possivelmente dados de áudio é transmitido para uma localização onde ele é reproduzido (etapa 1.2). Na etapa 1.3, um usuário inicia a reprodução do conteúdo. Durante a reprodução e para cada sequência, os comandos aplicados à câmera são processados a fim de calcular pelo menos um parâmetro de controle de acionador tátil associado com esta sequência (etapa 1.4). Concomitantemente, uma sequência do conteúdo de vídeo é reproduzida (1.5) e pelo menos um parâmetro de controle calculado assim controla pelo menos um acionador tátil durante a reprodução desta sequência associada (1.6).
[025]Na etapa 1.7, o final do documento é testado. Se existirem outras sequências a ser reproduzidas, o programa retorna para a etapa 1.4.
[026]A figura 2 mostra um diagrama de um dispositivo para reproduzir conteúdo de vídeo e controlar acionadores táteis. Este dispositivo de uma maneira geral é instalado em uma sala dedicada para a reprodução de tal conteúdo, tal como um cinema, por exemplo, mas a presente revelação também cobre o caso de uma instalação residencial recebendo conteúdo audiovisual aprimorado por parâmetros pretendidos para controlar acionadores táteis. De acordo com uma modalidade preferida, um dispositivo como este compreende: - um reprodutor de conteúdo audiovisual aprimorado 1; este reprodutor pode reproduzir discos DVD ou Blu-ray, ou conter um disco rígido para o qual tal conteúdo é transferido;- uma tela de reprodução 2 que pode ser uma tela plana, ou um projetor de vídeo projetando imagens em uma tela;- pelo menos um dispositivo de reprodução de som 3, tipicamente alto- falantes distribuídos na sala;- pelo menos um assento tátil 4 arranjado voltado para a tela 2, este assento compreendendo dois acionadores de mão 5 e uma acionador de cabeça 6.
[027]O reprodutor 1 processa os dados do conteúdo de vídeo, e calcula os sinais a ser enviados para a tela de reprodução 2, para os alto-falantes 3 e para o conjunto dos assentos táteis 4. A transmissão dos dados pode ser feita por meio de cabos conectando estes vários elementos ou por meio de ondas de rádio. A reprodução tátil de acordo com a presente revelação consiste em converter os comandos que tenham sido aplicados à câmera durante filmagem do conteúdo para parâmetros de controle para controlar os acionadores táteis. Os acionadores causam um movimento em uma parte do corpo de um espectador ou geram uma sensação tátil. A percepção do conteúdo que é fornecida por aquilo que o espectador vê e escuta é aprimorada por aquilo que o espectador sente através de seu corpo.
[028]A figura 8 mostra de forma diagramática uma modalidade de hardware de um dispositivo 8 configurado para a reprodução de uma ou mais sequências de vídeo e para o controle do dispositivo ou dispositivos táteis da figura 2. O dispositivo 8 corresponde, por exemplo, a um computador pessoal, um laptop, um aparelho conversor de sinais ou um módulo de processamento de imagens que pode ou não ser incorporado a um dispositivo de exibição.
[029]O dispositivo 8 compreende os seguintes elementos, conectados uns aos outros por um barramento de endereços e de dados 85 que também transporta um sinal de relógio:- um microprocessador 81 (ou CPU);- uma memória não volátil do tipo ROM (Memória Somente de Leitura) 82 compreendendo, por exemplo, um programa 820 do tipo sistema operacional;- uma memória de acesso aleatório (RAM) 83;- um ou mais dispositivos I/O (Entrada/Saída) 84 tais como, por exemplo, um teclado, um mouse, uma câmera de rede; e- um fornecimento de energia 86.
[030]É notado que a palavra “registrador” usada na descrição da memória 83 designa em cada uma das memórias mencionadas uma zona de memória de baixa capacidade (alguns dados binários) assim como uma zona de memória de grande capacidade (capacitando armazenamento de um programa inteiro ou de todos ou de parte dos dados representativos de dados calculados ou a ser exibidos).
[031]Quando ligado, o microprocessador 81 carrega e executa as instruções do programa contido na RAM 83.
[032]A memória de acesso aleatório 83 notavelmente compreende:- em um registrador 830, o programa de operação do microprocessador 81 responsável por ligar o dispositivo 8;- os parâmetros de controle 831 para o acionador ou acionadores táteis calculados durante a reprodução da sequência ou sequências de vídeo.
[033]Os algoritmos implementando as etapas do método específico para a presente revelação e descrito a seguir são armazenados na RAM 83. De acordo com uma variante, o dispositivo 8 compreende uma placa de gráfico compreendendo uma ou mais GPUs (unidades de processamento gráfico) associadas com uma GRAM (memória gráfica de acesso aleatório), os parâmetros de controle para o acionador ou acionadores neste caso sendo armazenados na GRAM. De acordo com uma outra variante, o fornecimento de energia 86 é externo ao dispositivo 8.
[034]As figuras 3.a e 3.b mostram um assento tátil 4 de acordo com uma modalidade preferida. Este assento compreende uma parte de assento e um apoio para as costas. Um acionador de mão 5 é colocado em cada lado da parte de assento em uma posição na qual o espectador pode segurá-los facilmente. Um terceiro acionador, chamado de acionador de “cabeça” 6, é colocado na posição de um apoio para a cabeça. O acionador de cabeça 6 compreende uma almofada na forma de uma meia-lua na qual o espectador coloca a sua cabeça. A posição de cada um dos acionadores com relação ao assento 4 é ajustável a fim de ser adaptada para a altura e a morfologia de cada espectador. A figura 3.b mostra um espectador assentado, tendo em cada mão o punho de um acionador 5 e colocando sua cabeça na almofada do terceiro acionador 6. As figuras 3.a e 3.b são mencionadas somente como exemplos; os acionadores podem fazer com que apoios para os braços, ou placas sobre as quais o espectador coloca seus pés, ou qualquer outro elemento em contato com uma parte do corpo do espectador, sejam movimentados.
[035]Cada acionador tátil 5 e 6 tem três graus de liberdade. As figuras 4.a, 4.b e 4.c mostram um diagrama de acionadores de mão e os diferentes graus de liberdade disponíveis. O acionador mostrado pela figura 4.a compreende um corpo 7 afilando na direção do topo e um eixo vertical 8 se estendendo do topo do corpo. O eixo vertical 8 tem um punho 9 no topo pretendido para ser segurado pelo espectador. O acionador compreende dispositivos para deslocar o eixo vertical 8 em três direções mutuamente ortogonais denotadas no modo padrão por X, Y e Z. Da posição do espectador, o eixo 8 pode ser deslocado para frente e para trás ao executar uma translação na direção do eixo Z, para a esquerda e para a direita ao executar uma translação na direção do eixo X e para cima ou para baixo na direção do eixo Y. A figura 4.b mostra os três deslocamentos possíveis do eixo vertical 8 nas direções X, Y e Z. A figura 4.c mostra um deslocamento de exemplo onde o eixo 8 e o seu punho 9 são deslocados nas três direções. Isto é, GA é a posição inicial do punho e GA’ é a posição final do punho; o deslocamento do punho está representado pelo vetor GA GA’.
[036]A figura 5 mostra um diagrama de um espectador colocando sua cabeça contra o acionador de cabeça 6 e segurando os dois acionadores de mão 5. No protótipo, o acionador de cabeça e os acionadores de mão são do mesmo tipo para aumentar facilidade de implementação, mas é possível usar acionadores específicos que são adaptados para a parte do corpo sujeita a um movimento.
[037]Um modo de calcular pelo menos um parâmetro de controle de acionador tátil, a partir de comandos aplicados à câmera, será agora detalhado usando duas variantes.
[038]A figura 6 mostra um diagrama de uma câmera 10 e as opções de comandos que são aplicáveis a ela durante filmagem e criação de um documento de vídeo. O termo “câmera” designa qualquer dispositivo para capturar imagens animadas, este dispositivo de captura sendo capaz de ser integrado a um dispositivo pretendido para um outro uso, tal como um telefone móvel, por exemplo. A câmera 10 é colocada em um sistema de coordenadas ortogonais definindo as três direções X, Y e Z. De acordo com o exemplo mostrado, a câmera pode ser controlada pelos seguintes sete comandos:- deslocamento x ao longo do eixo X (para a esquerda ou para a direita);- deslocamento y ao longo do eixo Y (para frente ou para trás);- deslocamento z ao longo do eixo Z (para cima ou para baixo);- ângulo de rotação θ em volta do eixo Y (orientação da câmera);- ângulo de rotação Φ em volta do eixo X (orientação da câmera);- ângulo de rotação Φ em volta do eixo Z (orientação da câmera);- comando de zoom Y para a câmera.
[039]Os comandos aplicados à câmera 10 são gravados continuamente durante filmagem e associados com uma sequência de uma duração determinada. Estes comandos podem ser medições de sensores de deslocamento (tais como giroscópios) medindo os deslocamentos e as rotações que um operador aplica manualmente à câmera. Esta duração determinada corresponde, por exemplo, ao tempo para reproduzir uma imagem. Para um item de conteúdo de vídeo reproduzido com 24 imagens por segundo, o tempo de amostragem é de 41,66 milissegundos. Cada imagem obtida em um instante t é associada com um grupo C(t) de valores de controle aplicados à câmera:C(t) = [xc(t), yc (t), zc (t), Φc (t), θc (t), Φc(t), Yc (t)]
[040]É possível usar outras durações para sequências associadas com um grupo de comandos para a câmera. Estas durações preferivelmente são múltiplos do tempo para reproduzir uma imagem do conteúdo de vídeo. Por exemplo, se a duração corresponder ao tempo para reproduzir 10 imagens (ou seja, 416,6 milissegundos), o grupo associado compreende o deslocamento total e o ângulo total de rotação aplicados à câmera durante a filmagem destas dez imagens. Cada grupo C(t) de valores de controle é associado com o conjunto de imagens de uma sequência do conteúdo. O conteúdo de vídeo tal como ele é transmitido para os propósitos de reprodução notavelmente compreende os dados audiovisuais associados com uma sucessão de grupos de valores de controle para a câmera.
[041]O documento de vídeo assim aprimorado é transmitido por qualquer dispositivo para a localização de reprodução, um exemplo do qual está mostrado na figura 2. A transmissão é feita usando uma mídia (DVD, Blu-ray, filme cinematográfico, etc.) ou usando uma transferência por meio de uma rede de comunicação.
[042]Na hora da reprodução, o reprodutor 1 divide o conteúdo audiovisual em sequências associadas com um grupo C(t) de valores de controle aplicados à câmera; uma sequência pode conter uma única imagem. Então, o reprodutor 1 calcula pelo menos um parâmetro de controle de acionador tátil associado com esta sequência. De acordo com uma modalidade preferida, o reprodutor controla três acionadores, cada um tendo três graus de liberdade. A qualquer hora, um acionador pode ser representado por um vetor representando a posição no espaço do punho com relação à base do acionador. Isto é, dado o ponto GA do centro do punho 9 em um dado instante t, e o ponto GA’ no próximo instante t+1, o comando para controlarum acionador A em um dado instante consiste em calcular as coordenadas do vetorGAG'A usando a seguinte equação:
[043]Os vetores T,R,F, representam respectivamente uma translação, uma rotação e um zoom da imagem. Os vetores T,R,F são definidos pelas seguintes equações:
[044]Tal como pode ser visto na equação acima, o vetor T depende dos três valores xc, yc e zc aplicados à câmera durante filmagem do conteúdo de vídeo em um instante t. O vetor R depende das três rotações possíveis θc, Φc e Φc da câmera em um dado instante t e o zoom Yc corresponde a uma translação F na direção para frente (ampliação) ou na direção para trás (redução) em um dado instante t. Rx, Ry e Rz são matrizes 3D em volta dos eixos geométricos x, y e z da câmera, e I3 é a matriz identidade em R3.
[045]As equações acima são dadas somente a título de exemplo; elas definem o movimento do acionador de acordo com o movimento feito pela câmera durante a filmagem. A equação descrevendo a função R é particular no sentido em que ela transforma uma rotação da câmera em uma translação aplicada ao eixo vertical do acionador. Esta transformação está ligada à posição do acionador no espaço. O movimento é diferente para cada acionador.
[046]A figura 7 mostra um movimento do acionador tátil durante uma sequência em que a câmera executa uma rotação. Nesta figura, o diagrama é uma vista superior da figura 6 (somente um acionador, o da mão direita, está mostrado). Isto é, G é um ponto situado no usuário, por exemplo, o centro de seu tronco. A posição G’A é determinada por meio de uma rotação do ponto GA em volta do ponto G. É então possível calcular o vetor GAG'A .
[047]Por exemplo, se a câmera executar um movimento rotacional θ em volta do eixo Y, a equação para C se torna: C(t) = [0, 0, 0, 0, θ (t), 0, 0].
[048]Os cálculos de vetores são:
[049]O princípio é generalizado para todas as rotações nas equações precedentes para o vetor R.
[050]Os valores k, m e s são fatores de redução assegurando que a posição calculada para cada eixo vertical 8 não deixa seu espaço de trabalho dentro do acionador.
[051]Por exemplo, assumir que a câmera faz um movimento de 2 metros na direção para frente, o que corresponde numericamente a z = 2 m; a equação C então tem os valores seguintes.C(t) = [0, 0, 2, 0, 0, 0, 0]
[052]No protótipo, o espaço de trabalho de um eixo vertical está representado por um cubo de 10 cm (0,1 m) de lado. O acionador pode ser deslocado de -0,05 a +0,05 m ao longo de um eixo geométrico. Assim o movimento de câmera resulta em um deslocamento para frente do acionador de 0,05 m. Nesteexemplo Kz = 0,025 e a equação do vetor GAG'A , se torna:
[053]É notado que os vetores R e F são zero neste exemplo; o movimentotátil corresponde a somente uma translação.
[054]Se o mesmo valor de controle for aplicado à câmera durante um período determinado, este período constitui uma sequência completa durante a qual a amplitude máxima do movimento da câmera é usada para calcular o fator k.
[055]Os outros fatores m e s são calculados no mesmo modo.
[056]Os vetores T, R e F tornam possível controlar os três graus de liberdade de cada acionador. Por exemplo, quando a câmera executa uma rotação para a direita, então o acionador de mão direita se desloca para frente, o acionador de mão esquerda se desloca para trás e o acionador de cabeça articular ligeiramente para a direita.
[057]O reprodutor 1, enquanto enviando os sinais de vídeo para a tela 2 e os sinais de áudio para os alto-falantes 3, calcula os parâmetros de controle de acionadores e os transmite em tempo real. O conjunto de sinais (vídeo, áudio e parâmetros de controle táteis) é transmitido de modo síncrono de tal maneira que os movimentos gerados pelos acionadores correspondem às imagens e sons da sequência associada.5.4 Cálculo de Parâmetros ao Determinar Efeitos Cinematográficos
[058]Uma modalidade diferente da presente revelação consiste em analisar os comandos aplicados à câmera durante uma sequência ou um grupo de sequências a fim de determinar um efeito cinematográfico durante esta sequência e em aplicar parâmetros de controle correspondendo a este efeito aos vários acionadores táteis.
[059]Aqui está um exemplo de uma lista de efeitos cinematográficos que podem ser detectados ao analisar os comandos aplicados à câmera durante filmagem:- “tomada de arco”.
[060]Este efeito consiste em girar em volta de caracteres para enfatizar estes caracteres em uma cena. A metáfora tátil consiste em deslocar os punhos dos dois acionadores de mão um na direção do outro a fim de dar a impressão de que o espectador está concentrando.- “tomada de grua”.
[061]Este efeito consiste em deslocar a câmera para trás (para uma tomada de grua que rastreia para fora) enquanto elevando-a acima da cena; este efeito frequentemente é usado no final de um filme para dar uma impressão de deslocar para trás e voar acima do objeto filmado. A metáfora tátil consiste em aplicar pequenos movimentos de inclinação aos acionadores para simular um movimento de asa capacitando o espectador para voar.
[062]- “ângulo holandês (imagem inclinada ligeiramente para a esquerda)”.
[063]Este efeito consiste em filmar uma cena enquanto inclinando a câmera ligeiramente para a esquerda para ver um caractere em um modo não usual e fazer com que ele pareça perturbante. A metáfora tátil consiste em balançar os punhos dos acionadores de mão da esquerda para a direita alternadamente a fim de desestabilizar o espectador e dar a ele uma impressão de perturbado.- “tomada de deslocamento”.
[064]Este efeito consiste em executar um deslocamento lateral, a fim de mostrar cenário ou para seguir um caractere em movimento. A metáfora tátil consiste em simular um avanço para o lado, ou seja, deslocar rapidamente a mão direita para longe, então deslocar rapidamente a mão esquerda para longe enquanto trazendo lentamente a mão direita de volta para sua posição original, então deslocar rapidamente a mão direita para longe enquanto deslocando lentamente a mão esquerda de volta e assim por diante.
[065]- “tomada de inclinação”.
[066]Este efeito consiste em filmar um caractere por cima por baixo. Uma tomada de inclinação para baixo causa um efeito de definhar. Ela pode ser usada, entre outras coisas, para expressar o ponto de vista de um caractere ou para restaurar o objeto para ser um detalhe na tomada. Uma tomada de inclinação para cima pode ser usada para aumentar a importância do objeto na tomada e dar ao espectador uma impressão de pequenez. De acordo com o objeto, a tomada de inclinação para cima pode ser associada com um ponto de vista “natural”: se a Torre Eiffel for filmada usando tomadas de inclinação para cima, o ponto de vista de escala humana é adotado. A metáfora tátil consiste em trazer os três acionadores para baixo, as mãos e a cabeça inclinando para frente.- “tomada de vertigem”.
[067]Este efeito é assim chamado porque ele foi usado no filme “Vertigem” de Alfred Hitchcock. Este efeito consiste em dar ao espectador a impressão de vertigem. A câmera é deslocada para frente enquanto reduzindo e o objeto filmado no centro da imagem dificilmente muda de aparência ao contrário daquilo que o circunda. A metáfora tátil consiste em deslocar os punhos de lado dando ao espectador a estranha impressão de que a cena está abrindo.- “zoom”.
[068]Este efeito é a tomada de ampliação padrão. A metáfora tátil consiste em imitar caminhada ao deslocar os punhos dos dois acionadores de mão para frente um após o outro.
[069]Para cada sequência do conteúdo de vídeo, o reprodutor detecta no máximo um efeito cinematográfico. Se um mesmo efeito estiver presente em diversas sequências consecutivas, então estas sequências são agrupadas conjuntamente em um conjunto e o reprodutor transmite, durante a reprodução deste conjunto de sequências, os parâmetros de controle de acionadores correspondendo à metáfora tátil associada com este efeito cinematográfico.
[070]De acordo com um melhoramento, se nenhum efeito cinematográfico não for detectado durante uma sequência, então o programa aplica as equações descritas nas primeiras variantes e calcula os parâmetros de controle de acionadores táteis associados com esta sequência ao usar diretamente os comandos aplicados à câmera durante a filmagem desta sequência.
[071]De acordo com um melhoramento, o reprodutor 1 detecta a amplitude do efeito cinematográfico para o espectador, e pondera o valor dos parâmetros gerando a metáfora tátil por amplitude e, se o movimento for cíclico, a frequência do movimento aplicado para o espectador.
[072]A amplitude de um efeito cinematográfico pode ser deduzida dos valores de controle aplicados para ajustar a câmera durante a filmagem. Tomar como exemplo um efeito de inclinação para cima (rotação Φ em volta do eixo X) que corresponde a:C(t) = [0, 0, 0, Φ (t), 0, 0, 0]
[073]O ângulo de inclinação para cima determina a amplitude do efeito cinematográfico e esta amplitude vem a ser um coeficiente para o comando de reprodução tátil. Um efeito C1 será maior que um efeito C2 se Φi(t) > Φ2(t)-
[074]Esta informação pode então ser usada para modular a potência do efeito cinematográfico.
[075]De acordo com um outro exemplo, o comando seguinte é associado a fim de determinar a reprodução tátil da inclinação para cima, ou seja, o vetor:
(o ângulo de rotação desloca o acionador A ao longo do eixo Y).
[076]Neste caso, o efeito tátil para Ci será automaticamente maior que paraC2.
[077]De acordo com um melhoramento aplicado às duas variantes descritas anteriormente, o provedor de conteúdo calcula os parâmetros de controle de acionadores antecipadamente e os associa com as sequências do conteúdo de vídeo. Deste modo, o cálculo é executado somente uma vez e os reprodutores i responsáveis por reproduzir o conteúdo não necessitam executar este processamento. Este melhoramento pode ser usado se o provedor de conteúdo conhecer as características dos acionadores usados durante a reprodução e suas posições com relação aos espectadores. Se as salas dedicadas para a reprodução de um item de conteúdo aprimorado tiverem modelos de acionadores diferentes, então o documento de vídeo pode conter diferentes conjuntos de parâmetros de controle de acionadores, e o reprodutor recupera aquele que é pretendido para ele durante a reprodução.
[078]Embora a presente revelação tenha sido descrita com referência para modalidades ilustradas particulares, a presente revelação não está limitada em nenhum modo a estas modalidades, mas somente pelas reivindicações anexas. Deve ser notado que mudanças ou modificações para as modalidades descritas anteriormente podem ser apresentadas como contribuição pelos versados na técnica, sem deixar a estrutura da presente revelação.
[079]As modalidades descritas anteriormente, por exemplo, são implementadas em um método ou um processo, um aparelho, um programa de software, um fluxo de dados ou um sinal. Um dispositivo ou aparelho implementando o método de interpolação descrito é, por exemplo, na forma de componentes de hardware, programáveis ou não, na forma de um ou mais processadores (vantajosamente do tipo GPU, mas também do tipo CPU ou ARM de acordo com variantes). Os métodos descritos são implementados, por exemplo, em um aparelho compreendendo pelo menos um processador, o qual se refere aos dispositivos de processamento de uma maneira geral, compreendendo, por exemplo, um computador, um microprocessador, um circuito integrado ou um dispositivo de software programável. Processadores também compreendem dispositivos de comunicação, tais como, por exemplo, computadores, telefones móveis ou celulares, telefones inteligentes, assistentes digitais portáteis/pessoais (PDAs), tablets digitais ou qualquer outro dispositivo que capacite a comunicação de informação entre usuários.
[080]As modalidades dos vários processos e várias características descritas anteriormente podem ser implementadas em vários equipamentos ou aplicações, por exemplo, notavelmente em um item de equipamento ou aplicações associadas com a codificação de dados, a decodificação de dados, a geração de vistas ou imagens, processamento de textura, e qualquer outro processamento de imagens ou informação representativa de textura e/ou informação representativa de profundidade. Exemplos de um item de equipamento como este são um codificador, um decodificador, um pós-processador que processa as saídas de um decodificador, um pré-processador que fornece entradas para um codificador, um codificador de vídeo, um decodificador de vídeo, um codec de vídeo, um servidor de rede, um aparelho conversor de sinais, um laptop, um computador pessoal, um telefone móvel, um PDA, um tablet digital e qualquer outro dispositivo de comunicação. O item de equipamento pode ser móvel ou estar a bordo de um veículo móvel.
[081]Além disso, os métodos descritos podem ser implementados na forma de instruções executadas por um ou mais processadores, e tais instruções podem ser armazenadas em uma mídia que pode ser lida por um processador ou computador, tal como, por exemplo, um circuito integrado, qualquer dispositivo de armazenamento tal como um disco rígido, um disco ótico (CD ou DVD), uma memória de acesso aleatório (RAM) ou uma memória não volátil (ROM). As instruções formam, por exemplo, um programa de aplicação armazenado em uma mídia legível por processador. As instruções têm, por exemplo, a forma de hardware, firmware ou software.
Claims (13)
1. Método de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera (10), CARACTERIZADO pelo fato de que com-preende:- determinar um efeito cinematográfico analisando comandos aplicados à câmera (10) quando se filma a pelo menos uma sequência; o efeito cinematográfico sendo um item de uma lista de efeitos cinematográficos e sendo associado com pa-râmetros de controle tátil; e- controlar (1.6), durante a reprodução (1.5) da pelo menos uma sequência, pelo menos um acionador tátil (5, 6) usando parâmetros de controle associados com o efeito cinematográfico determinado.
2. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que os ditos comandos aplicados à câmera são medidos usando pelo menos um sensor de movimento associado com a dita câmera.
3. Método, de acordo com a da reivindicação 1 ou 2, CARACTERIZADO pe-lo fato de que os ditos comandos pertencem a um grupo de comandos compreen-dendo:- comando para deslocamento ao longo de pelo menos um eixo de um sis-tema de coordenadas associado com uma cena filmada pela dita câmera;- comando para rotação em volta de pelo menos um eixo de um sistema de coordenadas associado com uma cena filmada pela dita câmera;- comando de zoom para a dita câmera.
4. Método, de acordo com qualquer uma das reivindicações anteriores, CARACTERIZADO pelo fato de que compreende adicionalmente transmitir o conteúdo de vídeo e os comandos aplicado à câmera (10) durante a dita pelo menos uma sequência para um dispositivo para reproduzir conteúdo de vídeo e controlar o pelo menos um acionador tátil, a obtenção dos parâmetros de controle para o pelo menos um acionador tátil sendo executada por esse dispositivo.
5. Método, de acordo com qualquer uma das reivindicações 1 a 3, CARACTERIZADO pelo fato de que compreende adicionalmente transmitir o conteúdo de vídeo e os parâmetros de controle para o pelo menos um acionador tátil para um dispositivo para reproduzir conteúdo de vídeo e controlar o pelo menos um acionador tátil.
6. Método, de acordo com a reivindicação 5, CARACTERIZADO pelo fato de que uma pluralidade de grupos de parâmetros de controle para o pelo menos um acionador tátil é associada com a dita pelo menos uma sequência, cada grupo de parâmetros de controle sendo associado com um dispositivo para reproduzir conteúdo de vídeo e controlar acionadores táteis específicos.
7. Método, de acordo com qualquer uma das reivindicações anteriores, CARACTERIZADO pelo fato de que os acionadores são em número de três, dois acionadores destinados a serem segurados, um em cada mão, por um espectador, e um acionador destinado a suportar a cabeça do dito espectador.
8. Método, de acordo com qualquer uma das reivindicações anteriores, CARACTERIZADO pelo fato de que se nenhum efeito cinematográfico for determinado para uma sequência, então, os parâmetros de controle para o pelo menos um acionador tátil associado com a dita pelo menos uma sequência são obtidos dos valores de controle aplicados à câmera durante filmagem da dita pelo menos uma sequência.
9. Dispositivo (1) configurado para reproduzir pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera (10), o dito dispositivo CARACTERIZADO pelo fato de que compreende pelo menos um processador configurado para:- determinar um efeito cinematográfico analisando comandos aplicados à câmera (10) quando se filma a pelo menos uma sequência; o efeito cinematográfico sendo um item de uma lista de efeitos cinematográficos e sendo associado com pa-râmetros de controle tátil; e- controlar, durante a reprodução da pelo menos uma sequência, pelo menos um acionador tátil usando parâmetros de controle associados com o efeito cinematográficos determinado.
10. Dispositivo, de acordo com a reivindicação 9, CARACTERIZADO pelo fato de que os ditos comandos pertencem a um grupo de comandos compreenden-do:- comando para deslocamento ao longo de pelo menos um eixo de um sis-tema de coordenadas associado com uma cena filmada pela dita câmera;- comando para rotação em volta de pelo menos um eixo de um sistema de coordenadas associado com uma cena filmada pela dita câmera;- comando de zoom para a dita câmera.
11. Dispositivo, de acordo com a da reivindicação 9 ou 10, CARACTERIZADO pelo fato de que se nenhum efeito cinematográfico for determinado para uma sequência, então, os parâmetros de controle para o pelo menos um acionador tátil associado com a dita pelo menos uma sequência são obtidos a partir dos valores de controle aplicados à câmera durante filmagem da dita pelo menos uma sequência.
12. Dispositivo, de acordo com qualquer uma das reivindicações 9 a 11, CARACTERIZADO pelo fato de que o pelo menos um processador é configurado para controlar três acionadores tácteis, dois acionadores destinados a serem segurados, um em cada mão, por um espectador, e um acionador destinado a suportar a cabeça do dito espectador.
13. Mídia de armazenamento legível por computador, CARACTERIZADO pelo fato de que compreende instruções para implementar o método conforme definido em qualquer uma das reivindicações 1 a 8, quando as instruções são executadas por um processador.
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP13305220 | 2013-02-27 | ||
| EP13305220.9 | 2013-02-27 | ||
| EP13305980.8 | 2013-07-09 | ||
| EP20130305980 EP2823868A1 (fr) | 2013-07-09 | 2013-07-09 | Procédé de reproduction d'un contenu audiovisuel doté de paramètres de commandes d'actuateurs haptiques et dispositif mettant en oeuvre le procédé |
| PCT/EP2014/053554 WO2014131733A1 (en) | 2013-02-27 | 2014-02-24 | Method for reproducing an item of audiovisual content having haptic actuator control parameters and device implementing the method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| BR112015020670A2 BR112015020670A2 (pt) | 2017-07-18 |
| BR112015020670B1 true BR112015020670B1 (pt) | 2021-12-28 |
Family
ID=50272575
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| BR112015020670-0A BR112015020670B1 (pt) | 2013-02-27 | 2014-02-24 | Método e dispositivo de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera e mídia de armazenamento legível por computador |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US10536682B2 (pt) |
| EP (1) | EP2961503B1 (pt) |
| JP (1) | JP2016513991A (pt) |
| KR (1) | KR20150121001A (pt) |
| CN (1) | CN105228711A (pt) |
| BR (1) | BR112015020670B1 (pt) |
| WO (1) | WO2014131733A1 (pt) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| BR112015020670B1 (pt) * | 2013-02-27 | 2021-12-28 | Interdigital Madison Patent Holdings, Sas | Método e dispositivo de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera e mídia de armazenamento legível por computador |
| US9919208B2 (en) | 2014-12-11 | 2018-03-20 | Immersion Corporation | Video gameplay haptics |
| CN104717449B (zh) * | 2015-03-29 | 2017-07-21 | 吉林大学 | 一种融合触觉感知功能的视频聊天方法和终端 |
| US11200918B1 (en) | 2020-07-29 | 2021-12-14 | Gopro, Inc. | Video framing based on device orientation |
| CN114500851A (zh) * | 2022-02-23 | 2022-05-13 | 广州博冠信息科技有限公司 | 视频录制方法及装置、存储介质、电子设备 |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US3469837A (en) * | 1966-03-09 | 1969-09-30 | Morton L Heilig | Experience theater |
| AU2002217582A1 (en) * | 2000-12-20 | 2002-07-01 | Ar Vision Inc. | Method for making simulator program and simulator system using the method |
| US7084874B2 (en) * | 2000-12-26 | 2006-08-01 | Kurzweil Ainetworks, Inc. | Virtual reality presentation |
| US6733293B2 (en) * | 2001-01-26 | 2004-05-11 | Provision Entertainment, Inc. | Personal simulator |
| US6703550B2 (en) | 2001-10-10 | 2004-03-09 | Immersion Corporation | Sound data output and manipulation using haptic feedback |
| US7116342B2 (en) * | 2003-07-03 | 2006-10-03 | Sportsmedia Technology Corporation | System and method for inserting content into an image sequence |
| US7125074B2 (en) * | 2004-02-03 | 2006-10-24 | Real James K | Video game chair |
| US8730322B2 (en) * | 2004-07-30 | 2014-05-20 | Eyesee360, Inc. | Telepresence using panoramic imaging and directional sound and motion |
| GB2431790B (en) * | 2005-10-27 | 2010-11-10 | Sony Uk Ltd | Data processing apparatus and method |
| EP1793577A1 (en) * | 2005-12-05 | 2007-06-06 | Microsoft Corporation | Playback of digital images |
| US8769437B2 (en) * | 2007-12-12 | 2014-07-01 | Nokia Corporation | Method, apparatus and computer program product for displaying virtual media items in a visual media |
| MX2010009872A (es) * | 2008-03-10 | 2010-09-28 | Koninkl Philips Electronics Nv | Procesamiento de video. |
| CN102473172A (zh) * | 2009-07-24 | 2012-05-23 | 数字标记公司 | 改进的音频/视频方法和系统 |
| US20120239200A1 (en) * | 2011-02-28 | 2012-09-20 | D-Box Technologies Inc. | Remote object vibro-kinetic feedback system and method |
| KR20130050464A (ko) * | 2011-11-08 | 2013-05-16 | 한국전자통신연구원 | 증강 콘텐츠 생성 장치 및 방법, 증강 방송 송신 장치 및 방법, 및 증강 방송 수신 장치 및 방법 |
| US10013857B2 (en) * | 2011-12-21 | 2018-07-03 | Qualcomm Incorporated | Using haptic technologies to provide enhanced media experiences |
| US9261960B2 (en) * | 2013-01-24 | 2016-02-16 | Immersion Corporation | Haptic sensation recording and playback |
| BR112015020670B1 (pt) * | 2013-02-27 | 2021-12-28 | Interdigital Madison Patent Holdings, Sas | Método e dispositivo de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera e mídia de armazenamento legível por computador |
-
2014
- 2014-02-24 BR BR112015020670-0A patent/BR112015020670B1/pt active IP Right Grant
- 2014-02-24 JP JP2015559479A patent/JP2016513991A/ja not_active Withdrawn
- 2014-02-24 WO PCT/EP2014/053554 patent/WO2014131733A1/en active Application Filing
- 2014-02-24 CN CN201480016505.5A patent/CN105228711A/zh active Pending
- 2014-02-24 EP EP14709576.4A patent/EP2961503B1/en active Active
- 2014-02-24 US US14/770,814 patent/US10536682B2/en active Active
- 2014-02-24 KR KR1020157023038A patent/KR20150121001A/ko not_active Application Discontinuation
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016513991A (ja) | 2016-05-19 |
| WO2014131733A1 (en) | 2014-09-04 |
| US10536682B2 (en) | 2020-01-14 |
| EP2961503A1 (en) | 2016-01-06 |
| KR20150121001A (ko) | 2015-10-28 |
| EP2961503B1 (en) | 2019-08-07 |
| CN105228711A (zh) | 2016-01-06 |
| BR112015020670A2 (pt) | 2017-07-18 |
| US20160014386A1 (en) | 2016-01-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11861059B2 (en) | System and method for generating a virtual reality scene based on individual asynchronous motion capture recordings | |
| US10819946B1 (en) | Ad-hoc dynamic capture of an immersive virtual reality experience | |
| US9396588B1 (en) | Virtual reality virtual theater system | |
| US20190180509A1 (en) | Apparatus and associated methods for presentation of first and second virtual-or-augmented reality content | |
| BR112015020670B1 (pt) | Método e dispositivo de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera e mídia de armazenamento legível por computador | |
| TWI752502B (zh) | 一種分鏡效果的實現方法、電子設備及電腦可讀儲存介質 | |
| US20200371737A1 (en) | An apparatus and associated methods for communication between users experiencing virtual reality | |
| US9779480B2 (en) | View-driven consumption of frameless media | |
| US11461942B2 (en) | Generating and signaling transition between panoramic images | |
| CN109189302A (zh) | Ar虚拟模型的控制方法及装置 | |
| KR20190112799A (ko) | 가상 현실에서 확장 비디오의 렌더링 | |
| US20190355175A1 (en) | Motion-controlled portals in virtual reality | |
| WO2019057530A1 (en) | APPARATUS AND ASSOCIATED METHODS FOR PRESENTING AUDIO IN THE FORM OF SPACE AUDIO | |
| US11775051B2 (en) | Apparatus and associated methods for presentation of presentation data | |
| BR112021004835A2 (pt) | sistema para controle de dispositivos conectados com capacidade de áudio em ambientes de realidade mista | |
| US20190295312A1 (en) | Augmented reality wall with combined viewer and camera tracking | |
| Kostis et al. | Skin: an interactive hyperstereoscopic electro installation | |
| JP2022059098A (ja) | 情報処理装置、情報処理方法、およびプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| B06F | Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette] | ||
| B25G | Requested change of headquarter approved |
Owner name: THOMSON LICENSING (FR) |
|
| B25A | Requested transfer of rights approved |
Owner name: INTERDIGITAL CE PATENT HOLDINGS (FR) |
|
| B06U | Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette] | ||
| B25A | Requested transfer of rights approved |
Owner name: INTERDIGITAL MADISON PATENT HOLDINGS, SAS (FR) |
|
| B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
| B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] |
Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 24/02/2014, OBSERVADAS AS CONDICOES LEGAIS. |