BR102019027509A2

BR102019027509A2 - sistema e método de captação de vídeo e ordenação de sequência de cenas

Info

Publication number: BR102019027509A2
Application number: BR102019027509-0A
Authority: BR
Inventors: Felipe Marques De Almeida Vaz; Luís Felipe Da Cruz Machado; Rodrigo Ferreira Dos Santos
Original assignee: Globo Comunicação E Participações S.a.
Priority date: 2019-12-20
Filing date: 2019-12-20
Publication date: 2021-07-06
Also published as: EP4080901A1; JP2023508920A; CA3165796A1; EP4080901A4; KR20220116253A; CN114930870A; US20240064264A1; WO2021119773A1; MX2022007597A

Abstract

A invenção se refere a um sistema de captação de vídeos em câmeras sem fio, envio dos mesmos em baixa resolução a uma mesa de corte, realização de sequenciamento e ordenação das cenas em tempo real, e sincronização do arquivo contendo o sequenciamento das cenas com o arquivo de vídeo em alta resolução, gerando uma sequência de cenas em alta resolução em tempo reduzido.

Description

SISTEMA E MÉTODO DE CAPTAÇÃO DE VÍDEO E ORDENAÇÃO DE SEQUÊNCIA DE CENAS

CAMPO DA INVENÇÃO

[0001] A presente invenção pertence à área de captação de imagem de vídeo e ordenação das sequências de cortes de câmeras distintas. Particularmente, se refere ao sequenciamento e ordenação das sequências de cortes realizadas por câmeras em rede sem fio.

FUNDAMENTOS DA INVENÇÃO

[0002] Hoje em dia, com o uso de câmeras com sistema sem fio, as imagens de vídeo gravadas em estúdio são salvas em um cartão de memória na câmera, e, só após a finalização do uso da câmera, este cartão é levado a um estúdio, onde é realizado o “download” das imagens de vídeo e o editor então seleciona as imagens desejadas para constarem na versão final.

[0003] Sem um sequenciamento correto de cada tomada de cada câmera, o editor final não sabe todos os quesitos pensados pelo diretor de vídeo, o que torna a ordenação das sequências de cenas um processo difícil e moroso.

[0004] O documento US 6734380 descreve um aparelho para edição de vídeo com um exibidor para exibir informação predeterminada relacionada aos materiais registrados a serem editados, exibindo alguma ou toda informação relacionada aos materiais a serem editados usados para uma lista de edição com uma cor prescrita ou exibindo informação de decisão prescrita capaz de decidir quais materiais a serem editados são usados pela lista de edição fazendo corresponder à informação. Desta forma, um operador pode decidir quais materiais a serem editados são usados para lista de edição ou não, de acordo com a cor da informação relacionada a cada material exibido a ser editado ou a informação de decisão correspondente.

[0005] O documento US 7677873 descreve um método de edição de informação de vídeo e um dispositivo para a edição, onde o vídeo é dividido em cenas ou sequências com timecodes, e informação fornecida, que é a avaliação semântica, é adicionada às respectivas cenas para organizar o sequenciamento. As cenas necessárias para cada fim são extraídas com base no sequenciamento da cena. As sequências ótimas para cada cena extraída são selecionadas com base nos metadados de corte do diretor e são automaticamente extraídas, com apenas as partes úteis do vídeo original, assim automaticamente organizando um vídeo transcodificado contendo apenas os trechos relevantes de cada câmera, conforme a sequência definida pela diretor.

[0006] O processo apresentado pelo presente pedido viabiliza um envio de imagens por câmeras sem fio comumente encontradas no mercado, a um servidor, em baixa resolução, onde o editor seleciona em tempo real as tomadas de cenas desejadas, faz a marcação dos devidos sequenciamentos e ordenação dos mesmos, e posteriormente envia este sequenciamento das imagens para constarem na versão final. Desta forma, há uma redução considerável no tempo de edição na escolha das cenas e na produção do material final pronto.

[0007] Além disso, o diretor de vídeo gera, a partir das imagens em baixa resolução, um “gabarito” que servirá para unir os planos sequência certos escolhidos pelo diretor no momento da gravação ao final do processo, quando o vídeo for conectado ao áudio e para a edição final.

FIGURAS

[0008] A Figura 1 mostra um fluxo da mídia em um estúdio usual.

[0009] A Figura 2 mostra um fluxo da mídia em um estúdio com o sistema proposto pela presente invenção.

[00010] A Figura 3 mostra um fluxo da mídia externa em um estúdio usual.

[00011] A Figura 4 mostra um fluxo da mídia externa em um estúdio com o sistema proposto pela presente invenção.

[00012] A Figura 5 mostra a mobilidade com o fluxo de sequenciamento sem fio, utilizado pela presente invenção.

[00013] A Figura 6 mostra a mobilidade com o fluxo de mídias avulsas.

[00014] A Figura 7 mostra um fluxograma com as principais funções do presente sistema.

DESCRIÇÃO DETALHADA DA INVENÇÃO

[00015] O sistema de captação de vídeo e ordenação das cenas consiste no uso de câmeras sem fio, que enviam imagens em baixa resolução a uma mesa de corte de vídeo onde se encontra um diretor de vídeo.

[00016] O diretor de vídeo orienta os cortes, realizando a ordenação e sequenciamento das cenas. A informação contendo a ordenação e sequenciamento das cenas específicas selecionadas pelo diretor de vídeo é gravada e enviada ao servidor central. Um software une a informação enviada pelo diretor de vídeo contendo o sequenciamento ordenado das cenas desejadas juntamente com o arquivo de áudio. Este processo permite que o editor final saiba exatamente o sequenciamento das gravações de cada câmera em cada cena realizado pelo diretor de vídeo, permitindo uma rápida finalização do vídeo logo após a sua gravação.

[00017] O presente sistema apresenta a captação, ordenação e sequenciamento de cenas e monitoramento do conteúdo sem nenhum cabeamento conectado às câmeras. Este processo é realizado inteiramente por qualquer meio de difusão, tal como, mas não se limitando a, p. ex. redes sem fio, e transmissão de vídeo, áudio e comandos de controle através de rádio frequência. Outras formas de difusão sem fio de arquivos de baixa resolução também podem ser usadas.

[00018] Desta forma, existe a possibilidade de gravação em plano sequência, o que traz cenas diferenciadas, que são muito usadas, por exemplo, em grandes dramaturgias e em grandes produções cinematográficas mundialmente reconhecidas pela qualidade artística.

[00019] Como citado no presente pedido, o sistema fornece um desenvolvimento de uma aplicação com uma única interface que combina a ferramenta de logger do conteúdo, logger do corte da mesa do diretor e controle remoto das câmeras.

[00020] Os desafios da tecnologia consistem em desenvolver uma nova aplicação de ingest, onde as câmeras com tecnologia sem fio são controladas remotamente, e do ingest de todo o conteúdo das câmeras. Além disso, é uma solução para o sequenciamento e ordenação do plano sequência por tecnologia de transmissão de vídeo sem fio.

[00021] O PGM é o arquivo contendo o sequenciamento e ordenação das câmeras e mudanças entre elas feita pelo diretor de vídeo, a partir da visualização de um vídeo em baixa qualidade que é exibido no monitor wall ao diretor de vídeo. A partir daí o diretor pode fazer a escolha de cada tomada de câmera para as cenas seguindo um sequenciamento.

Controle das câmeras sem fio

[00022] No sistema e método de controle das câmeras sem fio, o sistema identifica e estabelece conexão com todas as câmeras disponíveis na rede sem fio do estúdio. O número de câmeras pode variar, sendo possível com até, mas não limitado a, seis câmeras simultâneas.

[00023] O sistema é sincronizado com o timecode do estúdio e das câmeras para que a composição final do PGM não contenha erros de sincronismo. O operador de logger tem total controle das câmeras para iniciar (REC) e pausar (STOP) a gravação das cenas, sem a necessidade de um operador de câmera. O operador de logger pode controlar o status de informação das câmeras simultaneamente, tais como, mas não limitados a, nível de bateria, espaço disponível no cartão de memória, etc. O operador de câmera tem controle de todos os dados das tomadas e cenas gravados por cada câmera independentemente.

Sequenciamento e Ordenação das cenas

[00024] Quando o operador de logger inicia a gravação, o diretor de vídeo, de outra sala do estúdio, consegue realizar o sequenciamento e a ordenação das tomadas no PGM através da mesa de corte. A câmera sem fio envia as imagens em baixa resolução para o monitor wall onde o diretor de vídeo se encontra. Este consegue decidir qual o sequenciamento das cenas a ser usado durante a gravação.

[00025] A aplicação de software do Mobilidade é então integrada com a mesa de corte, captura cada sequenciamento do corte de cena em tempo real e salva em seu banco de dados. O operador do sistema pode ativar ou desativar o uso do sistema a qualquer momento, de alguma câmera específica ou de todas, a pedido do diretor de vídeo.

[00026] A comunicação da mesa de corte com a aplicação do Mobilidade é realizada através de uma conexão serial como p.ex., mas não limitada a, um protocolo RS422, além de outras opções de conexão como Ethernet cabeada, rede Wi-Fi, radiofrequência, bluetooth, dentre outros. O sistema possui um painel de controle responsável por informar o status desta conexão e alertar o operador de logger.

Sincronização da ordenação das sequências no PGM

[00027] Para cada cena gravada, o sistema gera os metadados de ordenação das cenas sincronizado com o timecode do estúdio, e consequentemente das câmeras no estúdio realizando a gravação. Desta forma, o sistema garante que cada cena escolhida pelo diretor de vídeo esteja no frame correto do timecode, refletindo de forma real a precisão do diretor de vídeo, onde cada sequência de imagem da câmera selecionada encaixa perfeitamente com o vídeo na gravação original da câmera.

[00028] Na etapa final de exportação dos metadados que referenciam os arquivos, que podem ser, mas não exclusivamente, no formato XML, o sistema valida o timecode dos arquivos de vídeo e áudio associados de cada cena gravada ordenada no PGM.

[00029] Isto garante que, quando sincronizar os dados das cenas com o vídeo em alta qualidade não ordenado e o áudio, as cenas estarão em perfeita sincronia, como selecionadas pelo diretor de vídeo.

Revisão em tempo real do PGM

[00030] O sistema utiliza o vídeo em baixa resolução, consequentemente de qualidade inferior e menor tamanho, enviado pelas câmeras através da rede sem fio, que fica gravado em um equipamento de Video Tape (VT).

[00031] O operador do sistema pode acessar o modo de revisão a qualquer momento, como p.ex. quando solicitado pelo diretor de vídeo, e realizar a revisão da sequência de cena gravada anteriormente, mesmo sem ter extraído os vídeos dos cartões das câmeras. Este processo de revisão é possível pois durante a gravação existe um vídeo recorder do PGM em baixa qualidade que permite esta revisão.

[00032] O sistema disponibiliza para o operador todos os comandos, como, por exemplo, mas não limitados a, Play, Stop, Avançar, Retroceder, Próximo, Anterior. Desta forma, o operador rapidamente consegue localizar um ponto específico da sequência de cena solicitada pelo diretor a ser revisado.

Combinação dos arquivos de vídeo e áudio

[00033] Para cada sequência de cena gravada, o sistema gera todos os metadados necessários e valida o timecode de cada arquivo de vídeo e áudio com os respectivos metadados.

[00034] Nesta etapa, o sistema faz o cruzamento dos metadados de cada sequência de cena com seus respectivos arquivos de vídeos e áudios associados e gera um arquivo final de vídeo já com a sequência de cena correspondente, como previstas pelo diretor de vídeo, sem que o editor receba vídeos gravados sem ordenamento sequencial de corte.

Geração do XML com sequenciamento e ordenação de cenas

[00035] Ao final da gravação, o operador poderá exportar todos os metadados gerados até o momento. Ou seja, o sistema exporta todos os arquivos como por exemplo, mas não exclusivamente, no formato XML com os respectivos metadados gerados para sistema de transcoder de vídeo, que fazem a geração do flat file, e também para a solução de Media Asset Management (MAM).

[00036] Para cada destino é enviado um modelo, que pode ser ou não do formato XML, para atender às respectivas necessidades. Desta forma, o sistema gera um arquivo, que pode ser por exemplo, mas não está limitado ao formato XML, chamado de ‘flat file’, que contém a sequência de ordenação de cada sequência de cena. Esta geração do arquivo em formato XML para o ‘flat file’ diferencia a presente invenção das demais.

Geração de relatório de ingest

[00037] Ao final da exportação dos arquivos, que podem ser, mas não estão limitados ao formato XML, o operador poderá gerar relatório com todas as informações do produto e o histórico das gravações realizadas no dia.

[00038] O sistema também permite a geração de relatório parcial, com o histórico das gravações até o momento e também compara o que foi ingestado de vídeo com o que foi aproveitado para geração de ‘flat file’ e outros envios. Neste relatório é possível identificar os arquivos de vídeo e áudio que não foram exportados por algum motivo, podendo ser tratados individualmente ou em grupo.

Ingest de todo o conteúdo

[00039] O Ingest disponibiliza para a edição todo o conteúdo gerado pelas câmeras e o sinal PGM já com a sequência de cena feita pelo diretor de vídeo durante a gravação. Todos os conteúdos disponibilizados estão em alta definição, possibilitando o editor de vídeo rever o PGM e, se for o caso, ajustá-lo usando os demais conteúdos das câmeras a qualquer momento.

[00040] O sistema possui também um módulo chamado aqui como “Ingest Backup”, que permite realizar o backup de todos os conteúdos de forma manual, garantindo assim a segurança e disponibilidade do conteúdo.

Mídias Avulsas

[00041] O sistema possui um módulo chamado de “Mídias Avulsas”, que permite ao operador realizar o ingest de conteúdos de diversos tipos de câmeras atendendo a necessidade da equipe externa.

[00042] O sistema é também capaz de identificar e reconhecer os arquivos de vídeos e seus respectivos metadados de diversos tipos e modelos de câmeras.

[00043] Ao final do processo, o sistema gera arquivos com os respectivos metadados de cada mídia ingestada. Estes metadados podem ser de qualquer formato compatível, como por exemplo, mas não limitado a, XML.

[00044] Deste modo, o processo inicia na gravação das imagens com uma câmera capaz de enviar vídeos em baixa resolução através de uma rede sem fio a uma mesa de corte, que por sua vez realiza o sequenciamento das cenas em tempo real de gravação. Neste ponto, o vídeo é sequenciado conforme o ponto de vista do diretor de vídeo, e o arquivo contendo o sequenciamento de cenas é então enviado a um servidor onde ocorre a junção do arquivo recebido das câmeras, juntamente com os arquivos de áudio e os metadados das cenas sequenciadas.

[00045] O download de todo o conteúdo de vídeo em alta resolução pode ser realizado, em seu tempo, sem interferir na exibição do vídeo já sequenciado, com as cenas específicas.

[00046] Este processo permite que, em pouco tempo, um vídeo seja gravado, editado e descarregado em alta resolução, e esteja pronto para ser exibido, com o correto sequenciamento das cenas, realizado pelo diretor de vídeo.

[00047] Desta forma, o sistema permite uma otimização na seleção de cenas, bem como a otimização de recursos mantendo a robustez sistêmica.

[00048] A partir do descrito, será observado que numerosas modificações e variações podem ser efetuadas sem se afastar do verdadeiro espírito e escopo dos novos conceitos da presente invenção. Deve ser compreendido que nenhuma limitação com relação às modalidades específicas ilustradas é pretendida ou deve ser inferida. A descrição destina-se a cobrir todas as ditas modificações que caiam dentro do escopo da invenção.

Claims

Sistema de captação de vídeo e ordenação de sequência de cenas caracterizado por compreender:
câmeras sem fio para captar a imagem de vídeo;
mesa de corte, para receber as imagens em baixa resolução, e realizar o plano sequência, formando um arquivo de sequenciamento de tomadas no mesmo timecode do vídeo originalmente sendo gravado;
gerar um arquivo (PGM) contendo o sequenciamento e ordenação das cenas, que permite a previsão das cenas selecionadas em tempo real;
executar um software para combinação dos arquivos de vídeo e áudio;
em que o software realiza o ingest do conteúdo e de mídias avulsas; e
gerar um arquivo final contendo o sequenciamento e ordenação das sequências do vídeo.
Sistema de captação de vídeo e ordenação de sequência de cenas de acordo com a reivindicação 1, caracterizado por as câmeras sem fio utilizarem qualquer meio de transmissão sem fio.
Sistema de captação de vídeo e ordenação de sequência de cenas de acordo com a reivindicação 1, caracterizado por a mesa de corte realizar o sequenciamento e ordenação de cada tomada, através da gravação de metadados sequenciados, com o timecode sincronizado ao timecode das câmeras de gravação indicando qual o sequenciamento de câmeras e suas respectivas cenas serão usados em cada momento.
Sistema de captação de vídeo e ordenação de sequência de cenas de acordo com a reivindicação 1, caracterizado por o PGM ser responsável pela gravação da informação e ordenação das sequências de corte das câmeras.
Sistema de captação de vídeo e ordenação de sequência de cenas de acordo com a reivindicação 1, caracterizado por o software combinar os arquivos de áudio e vídeo, utilizando o timecode de todos os metadados envolvidos.
Sistema de captação de vídeo e ordenação de sequência de cenas de acordo com a reivindicação 1, caracterizado por a mesa de corte gerar a sequência de cenas e enviar os metadados da sequência de corte das câmeras ao servidor de ingest.
Método de captação de vídeo e ordenação de sequência de cenas caracterizado por possuir as seguintes etapas:
- - captar as imagens através de uma ou mais câmeras operando em uma rede sem fio;
- - enviar as imagens em baixa resolução à mesa de corte, em tempo real;
- - ordenar as sequências de cena em tempo real e armazenar em um banco de dados;
- - revisar as sequências de PGM;
- - combinar os arquivos de vídeo e áudio;
- - gerar o arquivo com a sequência de ordenação das cenas;
- - ingest de todo conteúdo do Ingest Backup;
- - ingest das mídias avulsas.
Método de acordo com a reivindicação 7, caracterizado por a captação de imagens ser realizada por câmeras simultâneas.
Método de acordo com a reivindicação 7, caracterizado por a ordenação das sequências de corte ocorrer em tempo real e através de uma mesa de corte.
Método de acordo com a reivindicação 9, caracterizado por as imagens serem enviadas à mesa de corte em resolução inferior à resolução final da edição.
Método de acordo com a reivindicação 7, caracterizado por a sincronização do sequenciamento de cenas no PGM ocorrer a partir dos metadados gerados sincronizados com o timecode das câmeras internas no estúdio de gravação.
Método de acordo com a reivindicação 7, caracterizado por a revisão do PGM permitir o acesso às imagens e a revisão do sequenciamento de cenas.
Método de acordo com a reivindicação 7, caracterizado por a combinação dos arquivos ser realizada a partir do cruzamento de cada sequenciamento de cena com seus respectivos arquivos de áudio e vídeo associados, através do timecode.
Método de acordo com a reivindicação 7, caracterizado por a geração da sequência de cenas ser exportada através dos arquivos com os respectivos metadados gerados para um Media Asset Management (MAM).
Método de acordo com a reivindicação 7, caracterizado por gerar um relatório com todas as informações de sequenciamento de cenas e o histórico das gravações e realizar uma comparação entre o planejado e o realizado.
Método de acordo com a reivindicação 7, caracterizado por o ingest disponibilizar o conteúdo gerado pelas câmeras e o sinal PGM com o sequenciamento de cenas já realizadas.
Método de acordo com a reivindicação 7, caracterizado por permitir ao operador realizar ingest de conteúdos de diversos tipos de câmera.