BRPI0410383B1 - "método e aparelho para simular grão de filme por um ou mais parâmetros" - Google Patents
"método e aparelho para simular grão de filme por um ou mais parâmetros" Download PDFInfo
- Publication number
- BRPI0410383B1 BRPI0410383B1 BRPI0410383-1A BRPI0410383A BRPI0410383B1 BR PI0410383 B1 BRPI0410383 B1 BR PI0410383B1 BR PI0410383 A BRPI0410383 A BR PI0410383A BR PI0410383 B1 BRPI0410383 B1 BR PI0410383B1
- Authority
- BR
- Brazil
- Prior art keywords
- grain
- film grain
- model
- fact
- parameter
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000002123 temporal effect Effects 0.000 claims description 9
- 239000000654 additive Substances 0.000 claims description 6
- 230000000996 additive effect Effects 0.000 claims description 6
- 238000002156 mixing Methods 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 5
- 230000002238 attenuated effect Effects 0.000 claims description 3
- 241001331845 Equus asinus x caballus Species 0.000 claims 1
- 230000006837 decompression Effects 0.000 abstract 1
- 238000012512 characterization method Methods 0.000 description 11
- 230000001419 dependent effect Effects 0.000 description 7
- 238000004088 simulation Methods 0.000 description 7
- 229910052709 silver Inorganic materials 0.000 description 6
- 239000004332 silver Substances 0.000 description 6
- BQCADISMDOOEFD-UHFFFAOYSA-N Silver Chemical compound [Ag] BQCADISMDOOEFD-UHFFFAOYSA-N 0.000 description 5
- 239000013078 crystal Substances 0.000 description 5
- 238000001914 filtration Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 210000000601 blood cell Anatomy 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 239000000839 emulsion Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 239000013065 commercial product Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- -1 silver halide Chemical class 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
-
- G06T5/70—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/10—Image enhancement or restoration by non-spatial domain filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/87—Producing a motion picture film from a television signal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
- G06T2207/20056—Discrete and fast Fourier transform, [DFT, FFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20204—Removing film grain; Adding simulated film grain
Abstract
"método e aparelho para representação de granularidade de imagem por um ou mais parâmetros". para simular grão de filme em um sinal de vídeo comprimido, um decodificador (15, 28) recebe uma mensagem contendo informações que contêm um conjunto de um ou mais parâmetros, cada um especificando certo atributo associado ao grão de filme. por exemplo, um dos parâmetros especificará o modelo utilizado para simular o grão de filme, ao passo que outros parâmetros especificam cada um fator específico associado àquele modelo. após recebimento da mensagem, o decodificador seleciona o modelo, e simula o grão de filme para adição ao sinal de vídeo após descompressão.
Description
(54) Título: MÉTODO E APARELHO PARA SIMULAR GRÃO DE FILME POR UM OU MAIS PARÂMETROS (51) Int.CI.: G06T 9/00; H04N 5/262 (30) Prioridade Unionista: 15/05/2003 US 60/470,712 (73) Titular(es): THOMSON LICENSING (72) Inventor(es): CRISTINA GOMILA; ALEXANDER KOBILANSKY “MÉTODO E APARELHO PARA SIMULAR GRÃO DE FILME POR UM OU MAIS PARÂMETROS
REFERÊNCIA CRUZADA A PEDIDOS RELACIONADOS
Esse pedido reivindica a prioridade de acordo com 35 U.S.C. 119(e) para o Pedido de patente provisória U.S. número de série 60/470.712, depositado em 15 de maio de 2003 cujos ensinamentos são aqui incorporados.
CAMPO TÉCNICO
A presente invenção refere-se a uma técnica para simular grão de filme.
ANTECEDENTES DA INVENÇÃO
Filmes de cinema compreendem cristais de haleto de prata dispersos em uma emulsão, que é revestida em camadas delgadas em uma base de filme. A exposição e revelação desses cristais formam a imagem fotográfica que consiste em minúsculas partículas distintas de prata. Em negativos em cores, onde a prata é quimicamente removida após revelação, glóbulos minúsculos de corante ocorrem nos locais onde os cristais de prata se formam. Essas pequenas manchas de corante são comumente denominadas ‘grão' em filme em cores. Grão aparece aleatoriamente distribuído sobre a imagem resultante devido à formação aleatória de cristais de prata na emulsão original. Em uma área uniformemente exposta, alguns cristais se desenvolvem após exposição enquanto outros não.
O grão varia em tamanho e formato. Quanto mais rápido o filme, maiores os pedaços de prata formados e glóbulos de corante gerados, e mais eles tendem a agrupar-se juntos em padrões aleatórios. O padrão de grão é tipicamente de 01/11/2017, pág. 9/33 conhecido como ‘granularidade' . O olho nu não pode distinguir grãos individuais, os quais variam de 0,0002 mm a aproximadamente 0, 002 mm. Em vez disso, o olho decompõe grupos de grãos, mencionados como glóbulos. Um espectador identifica esses grupos de glóbulos como grão de filme. À medida que a resolução da imagem se torna maior, a percepção do grão do filme se torna mais elevada. Grão de filme se torna claramente perceptível em imagens de alta definição e cinema, ao passo que grão de filme perde progressivamente a importância em SDTV e se torna imperceptível em formatos menores.
O filme de cinema contém tipicamente ruído dependente de imagem que resulta do processo físico de exposição e revelação do filme fotográfico ou da edição subsequente das imagens. O filme fotográfico possui um padrão quase aleatório característico, ou textura, resultando de granularidade física da emulsão fotográfica. Alternativamente, um padrão similar pode ser simulado sobre imagens geradas por computador a fim de misturar as mesmas com filme fotográfico. Nos dois casos, esse ruído dependente da imagem é mencionado como grão. Bem frequentemente, textura moderada de grão apresenta uma característica desejável em filmes. Em algumas instâncias, o grão de filme fornece matizes visuais que facilitam a percepção correta de imagens bidimensionais. O grau de filme é frequentemente variado em um único filme para fornecer diversas dicas com relação à referência de tempo, ponto de visão, etc. Muitos outros usos artísticos e técnicos existem para controlar textura de grão na indústria de filmes. Portanto, conservar a aparência granulosa de imade 01/11/2017, pág. 10/33 gens por todo o processamento de imagem e cadeia de entrega tornou-se uma exigência na indústria de filmes.
Vários produtos comercialmente disponíveis têm a capacidade de simular grão de filme, frequentemente para mistura de um objeto gerado por computador em cena natural. Cineon® da Eastman Kodak Co., Rochester Nova York, uma das primeiras aplicações de filme digital para implementar simulação de grão, produz resultados muito realísticos para muitos tipos de grãos. Entretanto, a aplicação de Cineon® não fornece bom desempenho para muitos filmes de alta velocidade devido às tiras diagonais perceptíveis que a aplicação produz para ajustes de tamanho de grão elevado. Além disso, a aplicação de Cineon® falha em simular grão com fidelidade adequada quando as imagens são submetidas ao processamento prévio, por exemplo, como quando as imagens são copiadas ou digitalmente processadas.
Outro produto comercial que simula grão de filme é Grão Surgery™ da Visual Infinity Inc., que é utilizada como um encaixe de Adobe® After Effects®. O produto Grão Surgery™ parece gerar grão sintético pela filtração de um conjunto de números aleatórios. Essa abordagem apresenta a desvantagem de uma elevada complexidade computacional.
Nenhum desses esquemas passados resolve o problema de restaurar grão de filme em restauração de vídeo comprimido. Grão de filme constitui um fenômeno quase aleatório de alta frequência que tipicamente não pode ser submetido à compressão utilizando métodos temporal e espacial convencionais que tiram proveito de redundâncias nas seqüências de de 01/11/2017, pág. 11/33 vídeo. As tentativas para processar imagens originadas de filme utilizando técnicas de compressão MPEG-2 ou ITU-T/ISO H.264 resultam normalmente em um grau inaceitavelmente baixo de compressão ou perda total da textura de grão.
Desse modo, existe necessidade de uma técnica para representar as características de grão de filme através de um ou mais de um conjunto de parâmetros.
SUMÁRIO DA INVENÇÃO
Em resumo, de acordo com uma modalidade preferida dos presentes princípios, é fornecida uma técnica para simular grão de filme. A técnica começa após o recebimento de informação de imagem representativa de uma imagem da qual o grão de filme foi pelo menos atenuado. Acompanhando a informação de imagem estão informações de grão de filme que incluem pelo menos um parâmetro entre um conjunto de parâmetros possíveis especificando diferentes atributos do grão de filme previamente na imagem. Um modelo é selecionado para simular grão e o grão de filme é grão de filme simulado de acordo com o modelo selecionado e pelo menos um parâmetro. O grão de filme simulado é então fundido na imagem.
BREVE DESCRIÇÃO DOS DESENHOS
A Figura 1 ilustra um diagrama de blocos de uma primeira modalidade de um sistema de acordo com os presentes princípios para simular grão de filme de acordo com os presentes princípios;
A Figura 2 ilustra um diagrama de blocos de uma segunda modalidade de um sistema de acordo com os presentes de 01/11/2017, pág. 12/33 princípios para simular grão de filme de acordo com os presentes princípios; e
A Figura 3 ilustra um diagrama de blocos de uma terceira modalidade de um sistema de acordo com os presentes princípios para simular grão de filme de acordo com os presentes princípios.
DESCRIÇÃO DETALHADA
A Figura 1 representa um diagrama esquemático de blocos de uma primeira modalidade de um sistema 10 de acordo com os presentes princípios para executar simulação de grão de filme de acordo com os presentes princípios. O sistema 10 inclui um Removedor de Grão de Filme 22 que serve para remover o grão de filme de um fluxo de vídeo de entrada 12 para fornecer um fluxo de vídeo filtrado 24 recebido em um Codificador de Vídeo 13. A remoção de grão de filme constitui um caso específico de filtração de ruído onde o sinal de ruído parece correlacionado ao sinal de imagem. Desse modo, o Removedor de Grão de Filme 22 pode assumir a forma de um filtro de imagem clássico, embora tal filtro não forneça necessariamente desempenho ótimo. O Codificador de Vídeo 13 codifica um fluxo de vídeo filtrado 24 para fornecer um fluxo de vídeo codificador 14 para recebimento em um Decodificador de vídeo 15 que decodifica o fluxo codificado para fornecer um fluxo de vídeo decodificado 16. O Codificador de vídeo 13 e o Decodificador de vídeo 15 utilizam o mesmo esquema de codificação de vídeo como bem conhecido na arte. Por exemplo, o esquema de codificação de vídeo poderia compreender o padrão de codificação de vídeo ITU-T H.264, ou outro tipo de de 01/11/2017, pág. 13/33 codificação baseada em bloco. Codificadores e decodificadores que utilizam o padrão MPEG-2 e ITU-T H.264 são bem conhecidos.
O sistema 10 também inclui um Caracterizador de grão de filme 23 que recebe o fluxo de vídeo de entrada 12 e o fluxo de vídeo filtrado 24. Desses fluxos de vídeo, o Caracterizador de Grão de filme 23 transmite uma mensagem, doravante mencionada como mensagem de grão, que contém uma identidade de um modelo para simular grão, bem como pelo menos um de um conjunto de vários parâmetros, incluindo parâmetros de correlação, parâmetros independentes de intensidade e parâmetros dependentes de intensidade utilizados pelo modelo identificado. Como discutido em detalhe abaixo, os parâmetros na mensagem de grão de filme permitem a simulação do ruído dependente de imagem original utilizando o modelo identificado. Na ausência de quaisquer dos parâmetros, um valor default é atribuído àquele parâmetro ausente. (Realmente, se nenhum modelo é identificado, um modelo default para grão de filme é assumido. Em uma modalidade, o caracterizador de grão de filme 23 gera os parâmetros de acordo com um modelo baseado no processo físico de exposição e revelação do filme fotográfico ou em processos adicionados durante a edição subseqüente das imagens.
Após geração da mensagem de grão, um Codificador de informações de caracterização de Grão de filme 26 codifica a mensagem para transmissão para um Decodificador de Informações de caracterização de grão de filme 28 em faixa ou fora de faixa do fluxo de vídeo codificado 14 transmitido de 01/11/2017, pág. 14/33 pelo Codificador de Vídeo 13 para um Decodificador de vídeo
15. Tanto o Codificador de vídeo 13 como o Codificador de
Informações de caracterização de grão de filme 26 utilizam o mesmo esquema de codificação. Desse modo, por exemplo, quando o Codificador 26 utiliza o padrão de codificação de vídeo ITU-T H.264 para codificar, o fluxo de informações de caracterização de grão de filme codificado 27 pode ter a forma da mensagem de Informações de Intensificação suplementar (SEI) de grão de filme como definido no padrão de codificação de vídeo ITU-T H.264.
O Decodificador de informações de caracterização de grão de filme 28 decodifica a mensagem de grão de filme codificado 27 para fornecer um fluxo de informações de caracterização de filme decodificado 29 para entrada em um Processador de Restauração de Grão de filme 30. Como descrito em detalhes a seguir, o Processador 30 simulará o grão de filme com um modelo identificado na mensagem de grão utilizando parâmetros em mensagem. Na ausência da identificação do modelo, o Processador 30 assumirá um modo default. De modo semelhante, na ausência de um valor especificado de um dado parâmetro, o Processador 30 assumirá um valor default para aquele parâmetro.
Em uma modalidade preferida, a mensagem de grão 25 da Figura 1 incluirá tipicamente um ou mais parâmetros de correlação especificando Correlação Espacial, Relação de aspectos, Correlação de cor, e Correlação temporal. Cada um desses parâmetros é discutido abaixo.
CORRELAÇÃO ESPACIAL de 01/11/2017, pág. 15/33
Em uma modalidade exemplar, a correlação dependente de imagem do grão de filme no domínio espacial pode ser modelada com pelo menos um parâmetro, Correlação Espacial. A correlação espacial medida determina o tamanho dos glóbulos. Um modelo de auto regressão de segunda ordem e um modelo de convolução para a Correlação espacial são descritos a seguir.
RELAÇÃO DE ASPECTOS
De modo ideal, o grão de filme deve parecer isotrópico, com características idênticas tanto na direção X como Y. Entretanto, na prática, o grão de filme na realidade pode parecer estirado em uma direção, frequentemente resultando de fatores relacionados à gravação do filme, como o uso de óptica anamórfica ou geometria de detector não quadrado. Por esse motivo, ao modelar grão de filme, um parâmetro independente de intensidade que representa o fator de relação de aspectos complementará a medida de correlação espacial. A relação de aspectos dos glóbulos de grão é especificada com pelo menos um parâmetro.
CORRELAÇÃO DE COR
De acordo com os presentes princípios, a dependência de camada do grão de filme em imagens de cor é representada utilizando correlação de cor. A correlação de cor medida determina a matiz percebida do grão. Uma correlação de cor fraca significa que glóbulos de grão criados nas camadas de cor diferente sobrepõem aleatoriamente uma à outra. Consequentemente um espectador perceberá o grão como colorido. Uma correlação de cor elevada significa que os glóbulos de de 01/11/2017, pág. 16/33 grão em um componente de cor dependem dos outros componentes de cor. Nesse caso, um espectador perceberá o grão como monocromático .
CORRELAÇÃO TEMPORAL
A correlação temporal do grão em seqüências é representada por pelo menos um parâmetro. O grão por si só não pode apresentar nenhuma correlação temporal entre quadros, porém a introdução de um parâmetro representando correlação temporal pode ajudar a simular outros efeitos observados causados pela edição do filme.
INTENSIDADE DE RUÍDO
Em combinação com os parâmetros anteriormente discutidos que representam a dependência do grão de filme com a imagem de filme, existe necessidade de representar a intensidade do ruído que se origina dos processos aleatórios que originam o grão de filme. Intensidade de ruído pode variar para cada componente de cor e dependerá da imagem de filme. A intensidade do grão determina o nível no qual o ruído é percebido na imagem. Níveis de intensidade de grão pequenos introduzem pequenas variações na imagem original e dificilmente parecem perceptíveis. Níveis de intensidade elevada se tornam claramente visíveis como picos sobrepostos na imagem.
OUTROS PARÂMETROS
Além dos parâmetros discutidos acima, a mensagem de grão também pode incluir parâmetros que identificam o espaço de cor no qual adicionar o grão de filme e o modo de mistura utilizado para misturar o grão com o sinal de vídeo. Observe que um conjunto diferente de parâmetros poderia ser de 01/11/2017, pág. 17/33 transmitido para cada componente de cor e para diferentes níveis de intensidade da imagem de filme. É bem sabido por exemplo que o grão de filme depende da intensidade local da imagem, e que diferentes componentes de cor podem ter grão diferente dependendo do tipo de material de filme.
O caracterizador de grão de filme 23 da Figura 1 pode gerar diferentes conjuntos de parâmetros de acordo com os níveis de intensidade da imagem. Se desejado, o decodificador de grão de Filme 28 pode interpolar o conjunto de parâmetros com diversos níveis de intensidade a fim de derivar uma transição suave das características de grão de filme.
Para interpretar o conjunto de parâmetros, o decodificador de grão de filme 28 deve ter uma especificação do modelo que gera os parâmetros. Para entender como tal modelo pode ser especificado, as seguintes relações matemáticas provarão ser úteis. Primeiramente, o valor de pixel de imagem decodificada na posição de imagem (x, y), canal de cor c, e número de quadro t é representado por I(x,y,c,t). Por conveniência, considere que os valores de pixel são graduados para ter valor máximo de um. Além disso, considere uma representação de imagem RGB (c=1, 2 ou 3), embora esse modelo possa ser diretamente para imagens monocromáticas e, com modificações óbvias, para representação YUV.
Com um modelo de grão aditivo, a simulação de grão muda cada valor de pixel para J(x,y,c,t) onde J(x,y,c,t) é dado pela relação:
(1)J(x,y,c,t) = I(x,y,c,t) + G(x,y,c,t, L(x,y,t)), de 01/11/2017, pág. 18/33 onde L(x,y,t) é uma medida de intensidade local na imagem e G(x,y,c,t, L(x,y,t)) define o valor de grão. Uma implementação possível é definir L como luminância, ou uma soma ponderada de intensidades I(x,y,c,t) sobre todos os canais de cor.
O modelo aditivo fornecido pela equação (1) é apropriado quando uma escala de intensidade logarítmica é utilizada. Para escala linear, o modelo de equação (1) pode ser substituído pelo seguinte modo multiplicativo:
(1a) J(x,y,c,t) = I(x,y,c,t)*(1 + G(x,y,c,t, L(x,y,t))).
O fato de se um aditivo ou um modelo de grão multiplicativo é implementado dependerá do formato da imagem decodificada. Em geral, grão deve compreender pequena fração de valor de pixel máximo. O que se segue descreve alguns exemplos de diferente tipo de modelos para extrair um conjunto de parâmetros de acordo com a presente invenção.
1.SIMULAÇÃO AUTO REGRESSIVA DE PADRÃO DE GRÃO DE
FILME
Em uma modalidade exemplar, um esquema de auto regressão de segunda ordem pode ser utilizado para modelar correlação espacial e um esquema de regressão de primeira ordem pode ser utilizado para modelar correlações temporal e de cor cruzada. Todos os fatores de correlação dependem da intensidade da imagem decodificada. Fatores de correlação espacial horizontal e vertical são relacionados por um fator de relação de aspectos constante. Sob tais condições, a seguinte fórmula fornecerá valores de grão simulado, (2)G(x,y,c,t,L) =p(c, L)*N+ de 01/11/2017, pág. 19/33 q(c,L)*(G(x-1,y,c,t,L) +A*F(x, y-1,c,t,L)) + r(c,L) *A* (G(x-1,y-1,c,t,L)+G(x+1,y-1,c,t,L)) + s (c,L) * (G(x-2,y,c,t,L) +A*A*G (x,y-2,c,t,L) ) +u(c,L) *G(x,y,c-1,t,L)+v(c,L) *G(x,y,c,t-1,L) onde N é um valor aleatório com distribuição Gaussiana normalizada, A é uma relação de aspectos de pixel constante, p,q,r,s,u e v são parâmetros de correlação. O parâmetro u é sempre zero para o primeiro canal de cor, e o valor de grão G assumido como sendo zero sempre que qualquer índice estiver fora de faixa.
Como pode ser visto a partir da estrutura da equação (2), os valores de grão para um dado pixel em um dado canal de cor são calculados de forma recursiva utilizando valores de grão previamente calculados. Especificamente, os quadros são calculados em ordem de número de quadro crescente (isto é, t crescente). Dentro de cada quadro, o processamento de canais de cor ocorre em ordem de número de canal de cor crescente (isto é, c crescente). Dentro de cada canal de cor, os pixels são varridos horizontalmente e a seguir verticalmente em ordem de x e y crescentes. Quando essa ordem é seguida, todos os valores de grão exigidos pela equação (2) são automaticamente calculados antecipadamente.
Sob certas circunstâncias, varredura vertical prova ser mais prática, isto é, o processamento de pixels ocorre pelas colunas primeiramente. Em tais casos, a equação (2) exigirá uma leve modificação para utilizar somente valores previamente calculados:
(2a) G(x,y,c,t,L) = p(c,L)*N + de 01/11/2017, pág. 20/33 q(c,L)* (g(x-1, y,c,t,L)+A* G(x,y-1,c,t,L) ) + r(c,L) *A* (G(x-1,y-1,c,t,L)+G(x-1,y+1,c,t,L)) + s (c,L) * (G(x-2,y,c,t,L) +A*A+G (x,y-2,c,t,L) ) + u(c,L) *G(x,y,c-1,t,L) + v(c,L)*G(x,y,c,t-1,L).
A implementação da equação (2) ou equação (2a)) requer certas capacidades mínimas de decodificador. Primeiramente, o decodificador de Informação de grão 28 deve executar todos os cálculos em tempo real. Em segundo lugar, o decodificador de Informações de grão de filme 28 necessita manter um número de valores de grão previamente calculados em memória. Especificamente, para implementar a correlação temporal (isto é, último termo nas equações (2) e (2a)), o decodificador de Informações de grão de filme 28 necessita manter valores de grão para um quadro anterior completo. A partir dessa perspectiva, é importante que o modelo de equação (2) permita exigências de diminuição gradual com alguma degradação de fidelidade.
Um sistema com fidelidade levemente inferior poderia ignorar o último (temporal) termo na equação (2). Fazer isto eliminaria a necessidade de se ter um armazenador de quadro adicional para proteger os valores de grão do quadro anterior. Economia de custo adicional resultaria por negligenciar aqueles termos na equação (2) que dependem de s(c,L). Fazer isso elimina a necessidade de armazenar uma segunda linha anterior na memória e reduz número de cálculos. Negligenciar correlações diagonais descritas pelos termos com r(c, L), e assim por diante obterá uma redução adide 01/11/2017, pág. 21/33 cional de complexidade. O simulador mais baixo de grão de qualidade utilizará somente termo de ruído branco.
Sempre que um termo for negligenciado em um sistema reduzido, ocorre um benefício se o decodificador de Informações de grão de filme 28 ajustar os parâmetros restantes de modo que a correlação de primeira ordem efetiva e ainda mais importante, a auto-correlação (poder de ruído) permanecer igual a como seria em uma implementação de escala natural do modelo incorporado pela equação (2). O mesmo ajuste deve ocorrer para as primeiras linhas e colunas de cada quadro na ausência da disponibilidade de todos os valores de grão anteriores.
A flexibilidade do modelo incorporado na equação (2) tornar-se-á adicionalmente evidente pelo ajuste de parâmetros p, q, r e z em zero para todos exceto o primeiro canal de cor, e pelo ajuste da correlação de cor u(c,L) para c>1 em 1. Sob tais condições, o grão se torna totalmente monocromático. Esse conjunto de valores de parâmetros pode descrever o caso para variações de cor lavada pela transformação anterior YUV 4:2:0 do espaço de cor.
Para um conjunto de três cores, o modelo da equação (2) descreve o padrão de grão em termos de um grupo de dezessete parâmetros para cada nível de luminância, mais uma relação de aspectos que não depende de luminância. Parâmetros dependentes de luminância podem ser codificados para vários níveis de luminância fixos. O decodificador interpolará valores de parâmetros para níveis de luminância intermediários.
de 01/11/2017, pág. 22/33
Parâmetros de grão não têm de ser representados exatamente na forma da equação (2) . Por exemplo, qualquer transformação um para um dos parâmetros poderia ser utilizada. Além disso, o conjunto diferente de níveis de intensidade de referência poderia ser utilizado para diferentes parâmetros e diferentes esquemas de interpolação poderiam ser utilizados, etc.
2. CONVOLUÇÃO NO DOMÍNIO ESPACIAL PARA SIMULAR O PADRÃO DE GRÃO DE FILME
Em outra modalidade exemplar, o padrão de grão de filme pode ser simulado convoluindo um conjunto de números aleatórios x por um filtro digital invariante em tempo h definido na forma:
(3) h=(h0, h1, h2, h3, ...hn)
Isto declara que a saída de filtro simulando grão de filme y(n) é a convolução da entrada x(n) com a resposta de impulso de filtro h(n):
(4) y(n) = Σ x(i)h(n-i) = (x*h)(n) i=0
Embora a equação (4) forneça uma simulação em uma dimensão, um padrão bidimensional poderia ser obtido pela concatenação das convoluções vertical e horizontal em uma dimensão. Sob tais circunstâncias, os coeficientes do filtro devem ser transmitidos além do fator de relação de aspectos.
Um decodificador de Informações de Grão de filme 28 com capacidades limitadas pode limitar o tamanho espacial do núcleo de convolução, que resultará em memória diminuída e exigências de poder de processamento.
de 01/11/2017, pág. 23/33
3. FILTRAÇÃO EM UM DOMÍNIO TRANSFORMADO PARA SIMULAR O PADRÃO DE GRÃO DE FILME
Como discutido anteriormente, convoluir a resposta de impulso de um filtro h com um conjunto de números aleatórios x pode caracterizar o padrão de grão de filme. Essa mesma operação também pode ser descrita pela multiplicação no domínio de frequência pela Transformada de Fourier da resposta de impulso H e Transformada de Fourier do conjunto de números aleatórios X:
(5)Y(u) = X(u).H(u)
A filtração no domínio de frequência proporciona uma vantagem porque é mais rápido de forma computacional se uma Transformada de Fourier da imagem estiver disponível por exemplo como parte do processo de compressão ou filtração.
O seguinte conjunto de parâmetros forneceu resultados satisfatórios para representar grão dependente de imagem de acordo com os presentes princípios. Esses parâmetros assumem um método auto regressivo de simular grão. Os parâmetros para outros métodos seriam representados por tabelas similares.
Espaço de cor: RGB logarítmica
Modo de mistura: aditivo
Relação de aspectos: 1
Número de níveis de intensidade: 3
Parâmetros para o componente R:
q r u v p nível [0,84]: 0,1 01 0,0 0,2 0,02 nível [85,168]:0,10,010,00,150,03 de 01/11/2017, pág. 24/33 nível [169,255]:0,3-0,01 0,00,150,05
Parâmetros para o componente G:
q r u v p nível [0,84]: 0,3 0,0 0,1 0,2 0,01 nível [85,168]: 0,2 0,01 0,1 0,15 0,03 nível [169,255]: 0,1 -0,01 0,1 0,1 0,05
Parâmetros para o componente B:
q r u v p nível [0,84]: 0,4 0,01 0,1 0,2 0,02 nível [85,168]: 0,1 0,0 0,1 0,15 0,03 nível [169,255]: 0,1 0,0 0,2 0,1 0,04
Os parâmetros de correlação não mostrados nessa tabela são ajustados em 0.
Após especificar o espaço de cor, o modo de mistura, a relação de aspectos e o número de níveis de intensidade para os quais diferentes parâmetros são definidos, o grão de filme em cada componente de cor é codificado. Observe que somente os dados em itálico além de algum nível de informação (intensidade) necessitam ser transmitidos.
A Figura 2 representa uma segunda modalidade 10' de um sistema para simular grão de filme de acordo com os presentes princípios. O sistema 10' compartilha muitos dos mesmos elementos que o sistema 10 da Figura 1 e números de referência similar descrevem elementos similares. Realmente, o sistema 10' da Figura 2 difere somente na ausência do Codificador de informações de caracterização de grão de filme 26 e Decodificador de informações de caracterização de grão de filme 28 da Figura 1. O sistema 10' da Figura 2 utiliza o de 01/11/2017, pág. 25/33
Codificador de vídeo 13 e Decodificador de vídeo 15 para codificar e decodificar respectivamente as informações de caracterização de grão de filme 25 transmitidas do Caracterizador de grão de filme 23. O sistema 10' da Figura 2 requer o uso de um padrão de codificação de vídeo que suporta as informações de caracterização de grão de filme de transmissão como informações de intensificação paralela.
A Figura 3 representa uma terceira modalidade 10'' de um sistema para simular grão de filme de acordo com os presentes princípios. O sistema 10'' compartilha muitos dos mesmos elementos que o sistema 10' da Figura 2 e números de referência similares descrevem elementos similares. Realmente, o sistema 10'' da Figura 3 difere somente na ausência do Removedor de grão de filme 22 da Figura 2. O sistema 10'' da Figura 3 utiliza as imagens reconstruídas disponíveis no Codificador de vídeo 13 para simular o resultado de remover grão de filme. O sistema 10'' da Figura 3 proporciona duas vantagens em comparação com os sistemas 10 da Figura 1 e 10' da Figura 2. Primeiramente, o sistema 10'' da Figura 3 reduz a complexidade computacional relacionada à remoção de grão de filme, e em segundo lugar, adapta a caracterização de grão de filme à quantidade de grão de filme suprimida pelo Codificador de vídeo 13. Após o Caracterizador de grão de filme da Figura 3 fazer uso do vídeo de entrada 12 com grão de filme, e um vídeo reconstruído 24 resultando do Codificador de vídeo 13, pode realizar a tarefa de caracterizar o grão de filme observado.
de 01/11/2017, pág. 26/33
É descrita acima uma técnica para simular grão de filme em um sinal de vídeo. Embora a técnica de simulação de grão de vídeo tenha sido descrita com relação à codificação e decodificação de um sinal de vídeo, a técnica tem igual aplicabilidade para outras finalidades, como por exemplo, pós-produção de filmes de cinema por exemplo. A esse respeito, a imagem original poderia existir como informações de imagem em uma forma diferente de um sinal de vídeo comprimido, e as informações de grão de filme poderiam existir em uma forma diferente de uma mensagem, como uma mensagem SEI. Por exemplo, as informações de imagem poderiam existir em um de uma variedade de formatos diferentes que existem na arte.
Petição 870170084333, de 01/11/2017, pág. 27/33
Claims (23)
- REIVINDICAÇÕES1. Método para simular grão de filme, compreendendo as etapas de:receber informações de imagem representativas de uma imagem da qual o grão de filme foi pelo menos atenuado;receber informações de grão de filme que incluem pelo menos um parâmetro entre um conjunto de possíveis parâmetros especificando diferentes atributos do grão de filme previamente na imagem; e fundir o grão de filme simulado na imagem, o método sendo CARACTERIZADO por, após a etapa de receber informações de grão de filme e antes da etapa de fundir o grão de filme, compreender adicionalmente as etapas de:selecionar um modelo para simular grão; e simular o grão de filme de acordo com o modelo selecionado e pelo menos um parâmetro.
- 2. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o conjunto de selecionar o modelo compreende ainda a etapa de selecionar um modelo de grão aditivo.
- 3. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o conjunto de selecionar o modelo compreende ainda a etapa de selecionar um modelo de grão multiplicativo.
- 4. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que a etapa de selecionar o modelo compreende ainda a etapa de selecionar um modelo que side 05/01/2018, pág. 7/13 mula o grão de filme convoluindo um conjunto de números aleatórios por um filtro digital invariante em tempo, linear h definido na forma de:h = (h0, h1, h2, h3, . . .hn) onde o conjunto de parâmetros inclui coeficientes de filtro.
- 5. Método, de acordo com a reivindicação 1, CARACTERIZADO adicionalmente pelo fato de que a etapa de selecionar o modelo compreende ainda a etapa de multiplicar no domínio de frequência por uma Transformada de Fourier de uma resposta de impulso H e um conjunto de Transformada de Fourier de números aleatórios para fornecer um resultado de grão simulado Y(u) de acordo com a relação:Y(u) = X(u) . H(u)
- 6. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de a etapa de receber informação do grão de filme incluir a etapa de receber uma pluralidade de parâmetros indicativos de um atributo de grão de filme.
- 7. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que o conjunto de parâmetros inclui uma pluralidade de parâmetros de correlação e uma pluralidade de parâmetros independentes de intensidade.
- 8. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que pelo menos um parâmetro de correlação define uma correlação espacial em um padrão percebido de grão de filme.de 05/01/2018, pág. 8/13
- 9. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que pelo menos um parâmetro de correlação define uma correlação entre camadas de cor.
- 10. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que pelo menos um parâmetro de correlação define uma correlação temporal que resulta de processamento anterior da sequência de imagem.
- 11. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que pelo menos um parâmetro independente de intensidade define uma relação de aspectos do grão de filme.
- 12. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que pelo menos um parâmetro define intensidade de um componente aleatório do grão de filme.
- 13. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que pelo menos um dos parâmetros independentes de intensidade define um espaço de cor e operação de modo de mistura utilizado para fundir o grão de filme simulado com a imagem.
- 14. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que o conjunto de parâmetros é obtido de acordo com uma representação de auto regressão de segunda ordem da correlação espacial e uma representação de regressão de primeira ordem das correlações temporal e de cor cruzada.
- 15. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o pelo menos um parâmetro descreve um padrão espacial do grão.de 05/01/2018, pág. 9/13
- 16. Método, de acordo com a reivindicação 15, CARACTERIZADO pelo fato de que o pelo menos um parâmetro é estabelecido de acordo com um modelo de convolução espacial.
- 17. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o pelo menos um parâmetro descreve um padrão espacial do grão.
- 18. Método, de acordo com a reivindicação 17, CARACTERIZADO pelo fato de o pelo menos um parâmetro estabelecido é obtido a partir de frequências de corte de um filtro no domínio de Fourier.
- 19. Aparelho para simular grão de filme, compreendendo:um primeiro dispositivo configurado para: (1) receber informações de imagem que representam uma imagem da qual o grão de filme foi substancialmente atenuado; (2) receber informações de grão de filme que incluem pelo menos um parâmetro entre um conjunto de possíveis parâmetros especificando diferentes atributos do grão de filme; e um segundo dispositivo para misturar o grão de filme simulado com a imagem, o aparelho sendo CARACTERIZADO por o primeiro dispositivo ser adicionalmente configurado para:(3) selecionar um modelo para simular grão; e (4) simular o grão de filme de acordo com o modelo selecionado e pelo menos um parâmetro.
- 20. Aparelho, de acordo com a reivindicação 19, CARACTERIZADO pelo fato de que o modelo selecionado pelo primeiro dispositivo compreende um modelo de grão aditivo.de 05/01/2018, pág. 10/13
- 21. Aparelho, de acordo com a reivindicação 19, CARACTERIZADO pelo fato de que o selecionar um modelo compreende ainda selecionar um modelo de grão multiplicativo.
- 22. Aparelho, de acordo com a reivindicação 19, CARACTERIZADO pelo fato de que selecionar um modelo compreende ainda selecionar um modelo que simula o grão de filme convoluindo um conjunto de números aleatórios por um filtro digital invariante em tempo, linear h definido na forma de:h = (h0, h1, h2, h3, . . .hn) onde o conjunto de parâmetros inclui coeficientes de filtro.
- 23. Aparelho, de acordo com a reivindicação 19, CARACTERIZADO adicionalmente pelo fato de que selecionar o modelo compreende ainda multiplicar no domínio de frequência por uma Transformada de Fourier de uma resposta de impulso H e um conjunto de Transformada de Fourier de números aleatórios para fornecer um resultado de grão simulado Y(u) de acordo com a relação:Y(u) = X(u) . H(u)Petição 870180001263, de 05/01/2018, pág. 11/13S fes li&
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US47071203P | 2003-05-15 | 2003-05-15 | |
US60/470,712 | 2003-05-15 | ||
PCT/US2004/009866 WO2004105250A2 (en) | 2003-05-15 | 2004-03-30 | Method and apparatus for representing image granularity by one or more parameters |
Publications (2)
Publication Number | Publication Date |
---|---|
BRPI0410383A BRPI0410383A (pt) | 2006-07-04 |
BRPI0410383B1 true BRPI0410383B1 (pt) | 2018-04-17 |
Family
ID=33476739
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
BRPI0410383-1A BRPI0410383B1 (pt) | 2003-05-15 | 2004-03-30 | "método e aparelho para simular grão de filme por um ou mais parâmetros" |
BRPI0410320A BRPI0410320B1 (pt) | 2003-05-15 | 2004-03-30 | método e aparelho para representação de granularidade de imagem por um ou mais parâmetros |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
BRPI0410320A BRPI0410320B1 (pt) | 2003-05-15 | 2004-03-30 | método e aparelho para representação de granularidade de imagem por um ou mais parâmetros |
Country Status (20)
Country | Link |
---|---|
US (1) | US7742655B2 (pt) |
EP (8) | EP3798988B1 (pt) |
JP (5) | JP4919804B2 (pt) |
KR (2) | KR101017260B1 (pt) |
CN (3) | CN100371955C (pt) |
AU (3) | AU2004240456B2 (pt) |
BR (2) | BRPI0410383B1 (pt) |
CA (4) | CA2875893A1 (pt) |
DK (6) | DK3913579T3 (pt) |
ES (6) | ES2907226T3 (pt) |
HK (1) | HK1087232A1 (pt) |
HU (5) | HUE055529T2 (pt) |
MX (2) | MXPA05012294A (pt) |
MY (2) | MY165687A (pt) |
PL (8) | PL1627360T3 (pt) |
PT (6) | PT3798988T (pt) |
RU (3) | RU2005139131A (pt) |
SI (6) | SI3862973T1 (pt) |
WO (2) | WO2004104931A1 (pt) |
ZA (2) | ZA200509227B (pt) |
Families Citing this family (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
BRPI0408570B1 (pt) | 2003-04-10 | 2018-02-27 | Dolby International Ab | Processos e aparelho para simular granulação de filme em uma imagem |
JP4919804B2 (ja) * | 2003-05-15 | 2012-04-18 | トムソン ライセンシング | 1つ又は複数のパラメータによって画像粒状性を表す方法及び装置 |
EP1661089B1 (en) | 2003-08-29 | 2007-12-12 | THOMSON Licensing | Method and apparatus for modeling film grain patterns in the frequency domain |
RU2342703C2 (ru) | 2003-09-23 | 2008-12-27 | Томсон Лайсенсинг | Методика имитации зернистости пленки с помощью частотной фильтрации |
CN1857006B (zh) | 2003-09-23 | 2011-06-08 | 汤姆森特许公司 | 通过镶嵌预先计算的样本来模拟胶片颗粒的方法 |
JP2005100100A (ja) * | 2003-09-25 | 2005-04-14 | Toyota Motor Corp | 車輪情報処理装置および車輪情報処理方法 |
US7680356B2 (en) | 2003-10-14 | 2010-03-16 | Thomson Licensing | Technique for bit-accurate comfort noise addition |
EP1673944B1 (en) | 2003-10-14 | 2019-09-04 | InterDigital VC Holdings, Inc. | Technique for bit-accurate film grain simulation |
WO2005091642A1 (en) * | 2004-03-19 | 2005-09-29 | Koninklijke Philips Electronics N.V. | Imcorporation and extraction of a seed linked to a television signal for pseudo-random noise generation |
US8150206B2 (en) * | 2004-03-30 | 2012-04-03 | Thomson Licensing | Method and apparatus for representing image granularity by one or more parameters |
JP4764883B2 (ja) | 2004-10-18 | 2011-09-07 | トムソン ライセンシング | フィルムグレイン・シミュレーションの方法、装置及びシステム |
WO2006044260A1 (en) | 2004-10-18 | 2006-04-27 | Thomson Licensing | Film grain simulation method |
KR101174179B1 (ko) | 2004-10-21 | 2012-08-16 | 톰슨 라이센싱 | 블록 기반의 필름 그레인 패턴의 적응적 디블로킹을 위한기술 |
GB0424339D0 (en) * | 2004-11-03 | 2004-12-08 | Astrazeneca Ab | Combination therapy |
MX2007005653A (es) | 2004-11-12 | 2007-06-05 | Thomson Licensing | Simulacion de grano para reproduccion normal y reproduccion de modo de truco para sistemas de reproduccion de video. |
CN101138247B (zh) | 2004-11-16 | 2010-05-26 | 汤姆森特许公司 | 位精度仿真的胶片颗粒补充增强信息消息插入方法及系统 |
KR101170584B1 (ko) * | 2004-11-16 | 2012-08-01 | 톰슨 라이센싱 | 사전계산된 변환 계수에 기반한 필름 그레인 시뮬레이션방법 |
MX2007005828A (es) | 2004-11-16 | 2007-07-25 | Thomson Licensing | Inicializacion de semilla exacta de bits para generadores de numero pseudo-aleatorio utilizados en un sistema de video. |
AU2005306936B2 (en) * | 2004-11-17 | 2011-02-10 | Interdigital Vc Holdings, Inc. | Bit-accurate film grain simulation method based on pre-computed transformed coefficients |
EP1817915A2 (en) * | 2004-11-22 | 2007-08-15 | THOMSON Licensing | Methods, apparatus and system for film grain cache splitting for film grain simulation |
CN101065970B (zh) | 2004-11-23 | 2010-09-29 | 汤姆森许可贸易公司 | 用于仿真胶片颗粒的方法与设备 |
AU2005309719B2 (en) * | 2004-11-24 | 2010-07-01 | Interdigital Vc Holdings, Inc. | Film grain simulation technique for use in media playback devices |
US7596239B2 (en) * | 2005-08-02 | 2009-09-29 | Lsi Corporation | Method and/or apparatus for video watermarking and steganography using simulated film grain |
US7664337B2 (en) * | 2005-12-20 | 2010-02-16 | Marvell International Ltd. | Film grain generation and addition |
WO2007136546A2 (en) * | 2006-05-18 | 2007-11-29 | Thomson Licensing | Data hiding technique |
US8295628B2 (en) | 2006-06-21 | 2012-10-23 | Thomson Licensing | Automatic film grain adjustment |
JP2008219163A (ja) * | 2007-02-28 | 2008-09-18 | Toshiba Corp | 情報符号化方法、情報再生方法、及び情報記憶媒体 |
US10715834B2 (en) | 2007-05-10 | 2020-07-14 | Interdigital Vc Holdings, Inc. | Film grain simulation based on pre-computed transform coefficients |
US20100110287A1 (en) * | 2008-10-31 | 2010-05-06 | Hong Kong Applied Science And Technology Research Institute Co. Ltd. | Method and apparatus for modeling film grain noise |
CN101778300B (zh) * | 2008-12-05 | 2012-05-30 | 香港应用科技研究院有限公司 | 模拟胶片颗粒噪声的方法和装置 |
JP2014093568A (ja) * | 2012-10-31 | 2014-05-19 | Canon Inc | 動画像符号化装置、撮像装置、及び動画像符号化装置の制御方法 |
CN103162629B (zh) * | 2013-01-31 | 2015-04-15 | 浙江大学 | 一种一维光阱微粒位移检测方法 |
EP2821962A1 (en) * | 2013-07-05 | 2015-01-07 | Thomson Licensing | Method and apparatus for superimposing noise on an image sequence |
EP2821961A1 (en) * | 2013-07-05 | 2015-01-07 | Thomson Licensing | Method and apparatus for superimposing noise on an image sequence |
US10839489B2 (en) | 2017-08-22 | 2020-11-17 | Netflix, Inc. | Techniques for synthesizing film grain |
US10791343B2 (en) | 2018-03-13 | 2020-09-29 | Google Llc | Mixed noise and fine texture synthesis in lossy image compression |
CN112381744B (zh) * | 2020-10-27 | 2022-10-11 | 杭州微帧信息科技有限公司 | 一种av1合成胶片颗粒自适应前处理的方法 |
WO2023205144A1 (en) * | 2022-04-19 | 2023-10-26 | Dolby Laboratories Licensing Corporation | Metadata-aided removal of film grain |
CN116708876A (zh) * | 2023-05-06 | 2023-09-05 | 神力视界(深圳)文化科技有限公司 | 视频流处理方法及电子设备 |
Family Cites Families (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US470712A (en) | 1892-03-15 | Carl siemens | ||
DE2805528C2 (de) | 1978-02-10 | 1983-06-01 | Antonius Maria Adrianus Henricus van Dr.jur. Haarlem Tetering | Verfahren und Vorrichtung zur Gewinnung anamorphotischer Bilder |
US4935816A (en) | 1989-06-23 | 1990-06-19 | Robert A. Faber | Method and apparatus for video image film simulation |
JPH0497681A (ja) | 1990-08-16 | 1992-03-30 | Nippon Telegr & Teleph Corp <Ntt> | 映像符号化復号化装置 |
US5457491A (en) | 1990-10-11 | 1995-10-10 | Mowry; Craig P. | System for producing image on first medium, such as video, simulating the appearance of image on second medium, such as motion picture or other photographic film |
US5687011A (en) | 1990-10-11 | 1997-11-11 | Mowry; Craig P. | System for originating film and video images simultaneously, for use in modification of video originated images toward simulating images originated on film |
US5140414A (en) | 1990-10-11 | 1992-08-18 | Mowry Craig P | Video system for producing video images simulating images derived from motion picture film |
US5374954A (en) | 1990-10-11 | 1994-12-20 | Harry E. Mowry | Video system for producing video image simulating the appearance of motion picture or other photographic film |
US5235423A (en) | 1991-08-16 | 1993-08-10 | The Grass Valley Group, Inc. | Controllable pseudo random noise pattern generator for use in video special effects |
DE69226136T2 (de) | 1991-08-16 | 1999-02-18 | Grass Valley Group | Steuerbarer Rauschformengenerator zur Verwendung für Videospezialeffekte |
US5579064A (en) | 1991-12-12 | 1996-11-26 | Richard Vetter | Compact anamorphic motion picture system |
US5335013A (en) * | 1992-01-16 | 1994-08-02 | Faber Robert A | Method and apparatus for video camera image film simulation |
US5471572A (en) | 1993-07-09 | 1995-11-28 | Silicon Graphics, Inc. | System and method for adding detail to texture imagery in computer generated interactive graphics |
US5831673A (en) * | 1994-01-25 | 1998-11-03 | Przyborski; Glenn B. | Method and apparatus for storing and displaying images provided by a video signal that emulates the look of motion picture film |
US5475425B1 (en) | 1994-01-25 | 2000-07-25 | Przyborski Production | Apparatus and method for creating video ouputs that emulate the look of motion picture film |
JP3980659B2 (ja) * | 1994-08-31 | 2007-09-26 | ソニー株式会社 | 動画像符号化方法及び装置、動画像復号化方法及び装置。 |
JPH08149466A (ja) * | 1994-09-30 | 1996-06-07 | Sanyo Electric Co Ltd | 動画像処理方法及び処理装置 |
WO1996013006A1 (en) | 1994-10-20 | 1996-05-02 | Mark Alan Zimmer | Digital mark-making method |
US5629769A (en) | 1995-06-01 | 1997-05-13 | Eastman Kodak Company | Apparatus and method for the measurement of grain in images |
JP3353604B2 (ja) | 1995-08-09 | 2002-12-03 | ソニー株式会社 | 動画像符号化方法及び装置、並びに信号記録媒体 |
AU711488B2 (en) | 1995-09-12 | 1999-10-14 | Koninklijke Philips Electronics N.V. | Hybrid waveform and model-based encoding and decoding of image signals |
US5641596A (en) * | 1995-12-05 | 1997-06-24 | Eastman Kodak Company | Adjusting film grain properties in digital images |
GB2312124B (en) | 1996-04-12 | 1998-05-13 | Discreet Logic Inc | Processing image data |
GB9607633D0 (en) * | 1996-04-12 | 1996-06-12 | Discreet Logic Inc | Grain matching of composite image in image |
JP2852738B2 (ja) | 1997-02-10 | 1999-02-03 | 富士写真フイルム株式会社 | ハロゲン化銀乳剤の製造方法 |
US6067125A (en) * | 1997-05-15 | 2000-05-23 | Minerva Systems | Structure and method for film grain noise reduction |
JPH11143006A (ja) | 1997-11-12 | 1999-05-28 | Konica Corp | ハロゲン化銀写真感光材料及び処理方法とその撮影方法 |
US6269217B1 (en) | 1998-05-21 | 2001-07-31 | Eastman Kodak Company | Multi-stage electronic motion image capture and processing system |
US6317216B1 (en) | 1999-12-13 | 2001-11-13 | Brown University Research Foundation | Optical method for the determination of grain orientation in films |
WO2001077871A1 (en) | 2000-04-07 | 2001-10-18 | Demografx | Enhanced temporal and resolution layering in advanced television |
CA2309002A1 (en) * | 2000-05-23 | 2001-11-23 | Jonathan Martin Shekter | Digital film grain reduction |
JP2002072399A (ja) | 2000-08-29 | 2002-03-12 | Fuji Photo Film Co Ltd | ハロゲン化銀写真感光材料 |
KR100382256B1 (ko) | 2000-09-16 | 2003-05-01 | 이근희 | 통나무제 보도 블록을 이용한 포장시공방법 |
US6868190B1 (en) * | 2000-10-19 | 2005-03-15 | Eastman Kodak Company | Methods for automatically and semi-automatically transforming digital image data to provide a desired image look |
US6940993B2 (en) | 2000-12-13 | 2005-09-06 | Eastman Kodak Company | System and method for embedding a watermark signal that contains message data in a digital image |
GB2370934A (en) | 2001-01-09 | 2002-07-10 | Sony Uk Ltd | Noise reduction in video signals |
US7092016B2 (en) * | 2001-02-09 | 2006-08-15 | Eastman Kodak Company | Method and system for motion image digital processing |
JP2003050439A (ja) | 2001-05-29 | 2003-02-21 | Konica Corp | ハロゲン化銀乳剤とそれを用いたハロゲン化銀感光材料及びカラー反転ハロゲン化銀感光材料 |
GB2382289B (en) * | 2001-09-28 | 2005-07-06 | Canon Kk | Method and apparatus for generating models of individuals |
US20030206662A1 (en) | 2002-05-03 | 2003-11-06 | Avinash Gopal B. | Method and apparatus for improving perceived digital image quality |
JP4919804B2 (ja) | 2003-05-15 | 2012-04-18 | トムソン ライセンシング | 1つ又は複数のパラメータによって画像粒状性を表す方法及び装置 |
-
2004
- 2004-03-30 JP JP2006532349A patent/JP4919804B2/ja not_active Expired - Lifetime
- 2004-03-30 BR BRPI0410383-1A patent/BRPI0410383B1/pt active IP Right Grant
- 2004-03-30 RU RU2005139131/09A patent/RU2005139131A/ru unknown
- 2004-03-30 PL PL04785461T patent/PL1627360T3/pl unknown
- 2004-03-30 PT PT202030730T patent/PT3798988T/pt unknown
- 2004-03-30 ZA ZA200509227A patent/ZA200509227B/en unknown
- 2004-03-30 DK DK21180366.3T patent/DK3913579T3/da active
- 2004-03-30 ZA ZA200509231A patent/ZA200509231B/en unknown
- 2004-03-30 DK DK04785461.7T patent/DK1627360T3/da active
- 2004-03-30 HU HUE20203073A patent/HUE055529T2/hu unknown
- 2004-03-30 CA CA2875893A patent/CA2875893A1/en not_active Abandoned
- 2004-03-30 AU AU2004240456A patent/AU2004240456B2/en not_active Expired
- 2004-03-30 ES ES21160153T patent/ES2907226T3/es not_active Expired - Lifetime
- 2004-03-30 PT PT211803663T patent/PT3913579T/pt unknown
- 2004-03-30 BR BRPI0410320A patent/BRPI0410320B1/pt active IP Right Grant
- 2004-03-30 EP EP20203073.0A patent/EP3798988B1/en not_active Expired - Lifetime
- 2004-03-30 ES ES21180366T patent/ES2925988T3/es not_active Expired - Lifetime
- 2004-03-30 EP EP04749583.3A patent/EP1627359B1/en not_active Expired - Lifetime
- 2004-03-30 MX MXPA05012294A patent/MXPA05012294A/es active IP Right Grant
- 2004-03-30 CA CA2526016A patent/CA2526016C/en not_active Expired - Lifetime
- 2004-03-30 PL PL21160153T patent/PL3862973T3/pl unknown
- 2004-03-30 MX MXPA05012295A patent/MXPA05012295A/es active IP Right Grant
- 2004-03-30 KR KR1020057021613A patent/KR101017260B1/ko active IP Right Grant
- 2004-03-30 ES ES04785461T patent/ES2697523T3/es not_active Expired - Lifetime
- 2004-03-30 WO PCT/US2004/009491 patent/WO2004104931A1/en active Application Filing
- 2004-03-30 SI SI200432517T patent/SI3862973T1/sl unknown
- 2004-03-30 PT PT181982463T patent/PT3457359T/pt unknown
- 2004-03-30 HU HUE21180366A patent/HUE059614T2/hu unknown
- 2004-03-30 CN CNB2004800131888A patent/CN100371955C/zh not_active Expired - Lifetime
- 2004-03-30 AU AU2004241535A patent/AU2004241535B2/en not_active Expired
- 2004-03-30 PT PT201545357T patent/PT3678097T/pt unknown
- 2004-03-30 EP EP21180366.3A patent/EP3913579B1/en not_active Expired - Lifetime
- 2004-03-30 SI SI200432453T patent/SI1627360T1/sl unknown
- 2004-03-30 HU HUE21160153A patent/HUE057558T2/hu unknown
- 2004-03-30 CN CNA2008101460219A patent/CN101350891A/zh active Pending
- 2004-03-30 CA CA2525937A patent/CA2525937C/en not_active Expired - Lifetime
- 2004-03-30 EP EP18198246.3A patent/EP3457359B1/en not_active Expired - Lifetime
- 2004-03-30 DK DK21160153.9T patent/DK3862973T3/da active
- 2004-03-30 ES ES20154535T patent/ES2834393T3/es not_active Expired - Lifetime
- 2004-03-30 PL PL20203073T patent/PL3798988T3/pl unknown
- 2004-03-30 EP EP22174600.1A patent/EP4083923A1/en active Pending
- 2004-03-30 US US10/556,834 patent/US7742655B2/en active Active
- 2004-03-30 ES ES20203073T patent/ES2886351T3/es not_active Expired - Lifetime
- 2004-03-30 HU HUE20154535A patent/HUE052520T2/hu unknown
- 2004-03-30 SI SI200432520T patent/SI3913579T1/sl unknown
- 2004-03-30 CA CA2875894A patent/CA2875894C/en not_active Expired - Lifetime
- 2004-03-30 DK DK20203073.0T patent/DK3798988T3/da active
- 2004-03-30 EP EP04785461.7A patent/EP1627360B1/en not_active Expired - Lifetime
- 2004-03-30 PL PL21180366.3T patent/PL3913579T3/pl unknown
- 2004-03-30 CN CNA2004800133351A patent/CN1791891A/zh active Pending
- 2004-03-30 KR KR1020057021612A patent/KR100991707B1/ko active IP Right Grant
- 2004-03-30 PT PT04785461T patent/PT1627360T/pt unknown
- 2004-03-30 SI SI200432505T patent/SI3678097T1/sl unknown
- 2004-03-30 DK DK20154535.7T patent/DK3678097T3/da active
- 2004-03-30 SI SI200432513T patent/SI3798988T1/sl unknown
- 2004-03-30 PL PL378931A patent/PL378931A1/pl not_active Application Discontinuation
- 2004-03-30 EP EP20154535.7A patent/EP3678097B1/en not_active Expired - Lifetime
- 2004-03-30 PL PL20154535T patent/PL3678097T3/pl unknown
- 2004-03-30 PT PT211601539T patent/PT3862973T/pt unknown
- 2004-03-30 JP JP2006532359A patent/JP4960703B2/ja not_active Expired - Lifetime
- 2004-03-30 PL PL378934A patent/PL378934A1/pl not_active Application Discontinuation
- 2004-03-30 DK DK18198246.3T patent/DK3457359T3/da active
- 2004-03-30 EP EP21160153.9A patent/EP3862973B1/en not_active Expired - Lifetime
- 2004-03-30 WO PCT/US2004/009866 patent/WO2004105250A2/en active Search and Examination
- 2004-03-30 PL PL18198246T patent/PL3457359T3/pl unknown
- 2004-03-30 HU HUE18198246A patent/HUE048360T2/hu unknown
- 2004-03-30 RU RU2005139138/09A patent/RU2377652C2/ru active
- 2004-03-30 ES ES18198246T patent/ES2781093T3/es not_active Expired - Lifetime
- 2004-03-30 SI SI200432489T patent/SI3457359T1/sl unknown
- 2004-05-13 MY MYPI20041779A patent/MY165687A/en unknown
- 2004-05-13 MY MYPI20041778A patent/MY145597A/en unknown
-
2006
- 2006-08-17 HK HK06109162A patent/HK1087232A1/xx not_active IP Right Cessation
-
2010
- 2010-01-22 RU RU2010102017/08A patent/RU2010102017A/ru not_active Application Discontinuation
- 2010-04-06 JP JP2010087527A patent/JP2010206808A/ja active Pending
- 2010-05-19 AU AU2010202031A patent/AU2010202031B2/en not_active Expired
- 2010-10-14 JP JP2010231612A patent/JP2011071998A/ja active Pending
-
2012
- 2012-03-08 JP JP2012051940A patent/JP2012124952A/ja active Pending
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
BRPI0410383B1 (pt) | "método e aparelho para simular grão de filme por um ou mais parâmetros" | |
US8150206B2 (en) | Method and apparatus for representing image granularity by one or more parameters |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
B06A | Patent application procedure suspended [chapter 6.1 patent gazette] | ||
B06A | Patent application procedure suspended [chapter 6.1 patent gazette] | ||
B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] | ||
B25G | Requested change of headquarter approved | ||
B25G | Requested change of headquarter approved | ||
B25A | Requested transfer of rights approved |