BR112013014367A2

BR112013014367A2 - métodos e aparelho para avaliação de qualidade de vídeo objetiva em estimativas contínuas de visibilidade de perda de pacote

Info

Publication number: BR112013014367A2
Application number: BR112013014367-3A
Authority: BR
Inventors: Savvas Agryropoulos; Bernhard Feiten; Alexander Raake; Marie-Neige Garcia; Peter List
Original assignee: Deutsche Telekom Ag
Priority date: 2010-12-10
Filing date: 2011-09-02
Publication date: 2021-07-27
Also published as: US20130271668A1; JP6022473B2; US9232217B2; EP2649801B1; PL2649801T3; EP2649801A1; KR101857842B1; ES2541282T3; KR20140008508A; HRP20150481T1; JP2014502113A; WO2012076203A1; CN103283239B; BR112013014367B1; HUE026522T2; CN103283239A

Abstract

MÉTODO E APARELHO PARA AVALIAÇÃO DE QUALIDADE DE VÍDEO OBJETIVA EM ESTIMATIVAS CONTÍNUAS DE VISIBILIDADE DE PERDA DE PACOTE. A invenção refere-se a um método e aparelho para avaliar a qualidade de uma sequência de sinal de vídeo transmitida no lado receptor, o método compreendendo as etapas de: a) capturar o fluxo de bits de vídeo de entrada e supri-lo para um analisador de fluxo de bits de vídeo; b) extrair pelo menos uma característica ou um conjunto de características do fluxo de bits de vídeo de entrada capturado pelo analisador de fluxo de bits; c) suprir a característica ou conjunto de características extraído para um módulo de estimativa de visibilidade de perda de pacote; d) determinar, pelo módulo de estimativa de visibilidade de perda de pacote, a visibilidade de uma perda de pacote ocorrida durante a transmissão do sinal de vídeo atribuindo uma estimativa contínua para cada evento de perda de pacote ocorrido dentro de um intervalo de tempo específico; e) combinar a estimativa de visibilidade de perda de pacote determinada pelo módulo de estimativa com a extraída pelo menos uma característica ou conjunto de característica ou conjunto de características para avaliar a qualidade total, Q, da sequência de sinal de vídeo transmitida.

Description

Relatório Descritivo da Patente de Invenção para "MÉTODO E

É APARELHO PARA AVALIAÇÃO DE QUALIDADE DE VÍDEO OBJETIVA EM fo ESTIMATIVAS CONTÍNUAS DE VISIBILIDADE DE PERDA DE PACOTE". : CAMPO DA TÉCNICA A presente invenção refere-se a um método e aparelho avalia- ção de qualidade de vídeo com base na análise da visibilidade de perdas de pacote que podem ocorrer durante a transmissão de uma sequência de víi- deo através de uma rede com tendência de erro.

ANTECEDENTES DA TÉCNICA A proliferação de fornecimento de conteúdo de vídeo durante os ba últimos anos necessitou o desenvolvimento de métodos de avaliação de qualidade de vídeo objetivos. Tornou-se evidente que os parâmetros de rede A os quais definem a Qualidade de Serviço (QoS) não são suficientes para estimar a qualidade de serviço percebida pelo usuário, tipicamente referida como Qualidade de Experiência (QE). Os métodos de estimativa de quali- À dade comumente suportam uma estimativa distinguida da qualidade relativa à codificação (compressão, Qcoa) do sinal de vídeo e a qualidade devida à perda de pacote durante a transmissão (Qtrans). É uma propriedade inerente das redes de IP que (principalmente devido à sobrecarga temporal em algum ponto na rede) os pacotes de IP podem ser perdidos. Algumas destas per- das podem ser quase invisíveis para o cliente enquanto outras podem cau- sar uma severa degradação da qualidade de vídeo. Mesmo se contramedi- das contra estas perdas fazem parte de um sistema de distribuição de IPTV, estes meios nunca podem garantir uma solução absoluta. Por exemplo, uma solicitação de retransmissão pode demorar muito, ou o próprio pacote re- transmitido pode ser perdido. Portanto, existe sempre uma probabilidade não zero, que fluxos de bit fragmentários sejam transmitidos para o dispositivo de usuário final. Estes por sua vez podem causar degradações visíveis ou audí- veis no vídeo reconstruído. As categorias de medição podem, portanto, tam- — bém incluir valores para expressar a probabilidade para perdas. Tais valores podem incluir a expressão de uma "taxa de perda de pacote" e a "rajada de eventos perdidos". Em Y. J. Liang et al., "Analysis of Packet Loss for Com-

pressed Video: Effect of Burst Losses and Correlation between Error : Frames," IEEE Trans. on Circuits and Systems for Video Technology, vol. 18, FE no. 7, Jul. 2008, o impacto de perdas de rajada sobre a qualidade de vídeo E foi investigado.

Foi mostrado que o padrão de perda tem um efeito significa- tivosobre a distorção total e que as perdas de rajada têm um impacto mais severo do que as perdas individuais.

No entanto, este estudo não considera a distorção percebida da perspectiva de um usuário e é principalmente pro- posto para a estimativa da distorção no lado de codificador, onde as perdas de pacote reais não são conhecidas.

Os modelos de qualidade de vídeo paramétricos para as aplica- : ções de IPTV levam em consideração a distorção devida tanto à compres- são quanto à transmissão errônea (ver, por exemplo, K.

Yamagishi e T.

Ha- Á yashi, "Parametric Packet-Layer Model for Monitoring Video Quality of IPTV Services," in Proc. of IEEE Int.

Conf. on Communications, 2008, ou M.

N.

Garciae A.

Raake, "Parametric packet-layer video quality model for IPTV," À Int.

Conf. on Information Science, Signal Processing and their Applications (ISSPA), Kuala-Lumpur, Maio 2010). No entanto, os modelos puramente baseados em cabeçalho não podem cobrir precisamente o impacto de prejuízos sobre a qualidade visual em termos das características espaço - temporais da sequência de vídeo e as propriedades estatísticas das perdas de pacote.

Assim, os modelos de avaliação de qualidade de vídeo objetiva devem analisar a relação entre as perdas de pacote e a degradação visual e fatorar no fato que as perdas de pacote não produzem uma quantidade igual de degradação percebida.

Uma visão geral de diferentes tipos de modelos baseados em pacote, fluxo de bits ou híbridos objetivos e a diferente quantidade de informações que está dis- ponível para cada um destes é apresentada em S.

Winkler e P.

Mohandas, "The Evolution of Video Quality Measurement: From PSNR to Hybrid Me- trics" IEEE Trans. on Broadcasting, vol. 54, no. 3. Set, 2008. Uma visão mais detalhada das diferentes camadas de informações para os algoritmos de monitoramento de qualidade de vídeo de não referência é apresentada em A.

Takahashi, et al. "Standardization activities in ITU for a QoE assessment of IPTV" IEEE Communications Magazine, vol. 46, no. 2, Fev. 2008. À O problema de predizer a visibilidade de perda de pacote foi tra- ias. tado na literatura somente em termos de classificação de perdas de pacote . em um modo binário: visível ou invisível. Em S. Kanumuri, P. C. Cosman, A.

R Reibman,V.A. Vaisharnpayan, "Modeling packet-loss visibility in MPEG-2 : video," IEEE Trans. On Multimedia, vol. 8, no. 2, Abril 2004, pp. 341-355, um conjunto de características foi extraído do fluxo de bits de MPEG-2 e duas propostas de modelagem, um Modelo Linear Generalizado (GLM) foi utiliza- do para estimar o número relativo de expectadores que detectaram um erro, eum classificador de árvore para determinar se uma perda de pacote resulta . em uma degradação visível. O algoritmo foi estendido para vídeo H.264/AVC em S. Kanumuri, et al., "predicting H.624 Packet Loss Visibility using a Gen- É eralized Linear Model", in Proc. of ICIP, Out. 2006. A primeira classificação foi estendida para vídeo H.264/AVC em S. Kanumuri, S. B. Subramanian, P. C. Cosman, A. R. Reibman, "Predicting H.264 packet loss visibility using a À generalized linear model," in Proc. of IEEE Int. Conf. on Image Processing (ICIP), Atlanta, Georgia, Out. 2006, no qual o efeito de perdas de pacote du- plo foi examinado, e em T.L. LS. Kanumuri, Y. Zhi, D. Poole, P.C. Cosman, e : A.R Reibman, "A versatile model for packet loss visibility and its application to packet prioritization, IEEE Trans. on Image Processing, vol. 19, no. 3, pp. 722-735, Mar. 2010, onde a estrutura proposta foi utilizada para a prioriza- ção de pacotes nos roteadores intermediários de uma rede.

Além disso, um classificador de árvore de decisão baseada em fluxo de bits de não referência para as sequências CIF foi desenvolvido por N. Staelens et al., "Vigid: A no-reference bit stream-based visual quality im- pairment detector," in IEEE Workshop on Quality of Multimedia Experience, Trondheim, Norway, Jun. 2010. Aqui, o efeito do padrão de perda de pacote e o comprimento sobre a qualidade subjetiva ainda permanece uma questão aberta. Em Y. J. Liang, J. G. Apostolopoulos, e B. Girod, "Analysis of packet loss for compressed video: effect of burst losses and correlation between error frames," IEEE Trans. on Circuits and Systems for Video Technology, vol. 18, no. 7, pp. 861-874, Jul. 2008, o efeito de perdas de rajada sobre a qualidade de vídeo reconstruído foi analisado e foi mostrado que um padrão É de perda específico produz uma maior degradação do que um número igual E de perdas isoladas. Também, a correlação entre os quadros de erro foi con- k siderada na modelagem da distorção induzida. No entanto, o algoritmo so- mente testado em sequência de QCIF e, assim, com um esquema de empa- cotamento no qual um quadro individual está contido em um pacote. Mais ainda, o impacto sobre as classificação subjetivas não foi testado. Mais ainda, em F. Yang, et al., "No-reference quality assessment for Networked Video via Primary Analysis of the Bit-Stream", IEEE Circuits and Systems for Video Technology, vol. 20, no. 11, pp. 1544-1554, Nov. r 2010, um algoritmo de monitoramento de qualidade [e apresentado para le- var em conta a degradação devido a erros de quantização e transmissão. O Á impacto de perda de pacote sobre a qualidade percebida é ponderado pela complexidade temporal! das quadros onde a perda ocorre. Ainda outro método para o monitoramento de qualidade de vídeo À foi apresentado em M. MU et al., "A discrete perceptual impact evaluation quality assessment framework for IPTV services", in Proc. of ICME, 2010, baseado na agregação de degradações de vídeo devido a defeitos de rede. A principal diferença da presente invenção é que a visibilidade de cada evento de perda de pacote é atribuída a um único "valor de visibili- dade" o qual é adicionalmente explorado na fórmula de avaliação de quali- dade de vídeo para levar em consideração o impacto da perda de pacote sobre a qualidade percebida. Também, as características empregadas, as quais são extraídas e computadas do fluxo de bits de vídeo, e o algoritmo —paraa fusão destas características para a computação da estimativa de visi- bilidade de cada perda é novidade em relação aos métodos anteriores.

SUMÁRIO DA INVENÇÃO É o objeto da presente invenção provê um método e aparelho para a avaliação de qualidade objetiva de uma sequência de vídeo. Este ob- jeto é conseguido com as características das reivindicações. O método e aparelho da invenção proveem a avaliação de quali- dade objetiva de uma sequência de vídeo com base em pelo menos uma ou um conjunto de características extraídas do fluxo de bits de vídeo e a predi- ção de estimativas probabilísticas contínuas para a visibilidade de perdas de s.-. pacote que podem ocorrer devido à transmissão da sequência de vídeo so- ã bre uma rede com tendência de erro. Aparentemente, o método da invenção é um método de avaliação de qualidade de vídeo baseado em fluxo de bits de não referência, já que este extrai as informações somente do fluxo de bits recebido sem a necessidade de uma sequência de referência explícita.

De acordo com o seu primeiro aspecto, a invenção provê um método para avaliar a qualidade de uma sequência de sinal de vídeo trans- mitidano lado de receptor, o método compreendendo as etapas de: r a) capturar o fluxo de bits de vídeo de entrada e supri-lo para um analisador de fluxo de bits de vídeo; b) extrair pelo menos uma característica ou um conjunto de ca- racterísticas do fluxo de bits de vídeo de entrada capturado pelo analisador y 15 —defluxode bits; : c) suprir a característica ou conjunto de características extraído para um módulo de estimativa de visibilidade de perda de pacote; d) determinar, pelo módulo de estimativa de visibilidade de perda de pacote, a visibilidade de uma perda de pacote ocorrida durante a transmis- sãodo sinal de vídeo atribuindo uma estimativa contínua para cada evento de perda de pacote ocorrido dentro de um intervalo de tempo específico; e) combinar a estimativa de visibilidade de perda de pacote de- terminada pelo módulo de estimativa com a extraída pelo menos uma carac- terística ou conjunto de características para avaliar a qualidade total, Q, da sequência de sinal de vídeo transmitida.

De acordo com a invenção, a extração de característica de acordo com a etapa (b) pode ser executada diretamente decodificando parcialmente o fluxo de bits de vídeo. Alternativamente, a extração de característica de acordo com a etapa (b) é executada pela decodificação total do fluxo de bits de vídeo ecombinando as informações dos pixels reconstruídos do sinal de vídeo.

De acordo com uma modalidade preferida da invenção, a etapa (e), além disso, pondera a(s) característica(s) extraída(s) para refletir que cada perda de pacote produz degradações desigualmente percebidas para a Â sequência de sinal de vídeo transmitida. ias A pelo menos uma característica ou conjunto de características : é selecionada do grupo que compreende: tipo de quadro, magnitude média de vetoresde movimento (AvgMv), diferença de vetor de movimento média (AvgMvDIiff), energia de resíduos (ResEnergy), número máximo de partições (MaxPartNr), número de macroblocos não decodificáveis (LostMbs), infor- mações de vetor de movimento (mv), e tipo de macroblocos (mb type). De acordo com uma modalidade adicionalmente preferida, uma combinação de todas estas características é utilizada.

. , Emiuma modalidade preferida, com base na característica extra- ida "frame iype" o número de quadros (ErrDur) degradados por uma perda É de pacote é determinado. y O método ainda abrange que um mapa de propagação de erro “ 15 binário seja gerado para cada imagem da sequência de sinal de vídeo com . base nas informações de vetor de movimento e no tipo de macroblocos.

Mais ainda, com base no mapa de propagação de erro e nas in- formações de tipo de quadro o número de quadros (ErrDur) degradados por uma perda de pacote pode ser determinado.

De acordo com uma modalidade preferida adicional, com base no mapa de propagação de erro binário o número total de pixels prejudica- dos devido à perda de pacote (ErrProp) é computado.

É adicionalmente preferido que a magnitude de distorção (Es- tErr) induzida devido à perda de pacote e propagação de erro seja determi- nada com base nos vetores de movimento, nos tipos de macrobloco, e nos resíduos.

A etapa (d) pode ser executada utilizando uma técnica de re- gressão de vetor de suporte mapeando o vetor de característica de entrada para um espaço de característica altamente dimensional utilizando uma fun- çãode mapeamento não linear, e construindo um modelo linear no espaço de característica.

Mais ainda, a etapa (e) pode combinar a estimativa de visibilida-

de de perda de pacote (V) com a magnitude de distorção determinada (Es- É tErr) e o número total computado de pixels prejudicados devido à perda de es” pacote (ErrProp). a... O método pode ainda compreender entre as etapas d) e e) a etapa de estimara distorção visível total gerada pela combinação temporal de todas as perdas de pacote que ocorrem dentro da sequência de sinal de vídeo.

De acordo com o seu segundo aspecto, a invenção provê um aparelho para avaliar a qualidade de uma sequência de sinal de vídeo transmitida no lado de receptor, o aparelho compreendendo: um analisador de fluxo de bits de vídeo que recebe o fluxo de t bits de vídeo de entrada capturado, e configurado para extrair pelo menos : uma característica ou um conjunto de características do fluxo de bits de vi- : deo de entrada capturado; um módulo de estimativa de visibilidade de perda de pacote que : 15 recebe a característica ou conjunto de características extraídas, o módulo de : estimativa de visibilidade de perda de pacote configurado para determinar a visibilidade de uma perda de pacote ocorrida durante a transmissão do sinal de vídeo atribuindo uma estimativa contínua para cada evento de perda de pacote ocorrido dentro de um intervalo de tempo específico; um combinador para combinar a estimativa de visibilidade de perda de pacote determinada pelo módulo de estimativa com a extraída pelo menos uma característica ou conjunto de características para avaliar a qua- lidade total, Q, da sequência de sinal de vídeo transmitida.

De acordo com a invenção, o analisador de fluxo de bits de vi- deo está configurado para executar a extração de característica diretamente parcialmente decodificando o fluxo de bits de vídeo. Alternativamente, anali- sador de fluxo de bits de vídeo está configurado para executar a extração de característica decodificando totalmente o fluxo de bits de vídeo e combinan- do as informações dos pixels reconstruídos do sinal de vídeo.

De acordo com uma modalidade proferida da invenção, o com- binador está configurado para, além disso, ponderar a(s) característica(s) extraída(s) para refletir que cada perda de pacote produz degradações desi-

ô gualmente percebidas para a sequência de sinal de vídeo transmitida. De acordo com um segundo aspecto da invenção, a pelo menos Nee uma característica ou conjunto de características é selecionada do grupo ; que compreende: tipo de quadro, magnitude média de vetores de movimento (AvgMv), diferença de vetor de movimento média (AvgMvDiff), energia de resíduos (ResEnergy), número máximo de partições (MaxPartNr), número de macroblocos não decodificáveis (LostMbs), informações de vetor de movi- mento (mv), e tipo de macroblocos (mb type). De acordo com uma modali- dade adicionalmente preferida, uma combinação de todas estas característi- caséutilizada.

* Em uma modalidade preferida, o aparelho ainda compreende um meio sendo configurado para determinar, com base na característica extraí- À da "frame type" o número de quadros (ErrDur) degradados por uma perda de pacote.

: 15 De acordo com uma modalidade preferida, o aparelho compre- : ende um estimador de propagação de erro sendo configurado para gerar um mapa de propagação de erro binário para cada imagem da sequência de sinal de vídeo com base nas informações de vetor de movimento e no tipo de macroblocos.

De acordo com uma modalidade preferida adicional, o estimador de propagação de erro está ainda configurado para computar, com base no mapa de propagação de erro binário, o número total de pixels prejudicados devido à perda de pacote (ErrProp).

F É adicionalmente preferido que o aparelho compreenda um es- timador de distorção sendo configurado para determinar a magnitude de dis- torção (EstErr) induzida devido à perda de pacote e propagação de erro com base nos vetores de movimento extraídos, nos tipos de macrobloco extraí- dos, e nos resíduos extraídos.

O módulo de estimativa de visibilidade de perda de pacote pode estar ainda configurado para determinar a visibilidade da perda de pacote É utilizando uma técnica de regressão de vetor de suporte mapeando o vetor Ei de característica para um espaço de característica altamente dimensional : utilizando uma função de mapeamento não linear, e construindo um modelo linearno espaço de característica.

Mais ainda, o combinador pode ainda estar configurado para combinar a estimativa de visibilidade de perda de pacote (V) com a magnitu- de de distorção determinada (EstErr) e o número total computado de pixels prejudicados devido à perda de pacote (ErrProp).

O aparelho pode ainda estar configurado para estimar a distor- * ção visível total gerada pela combinação temporal de todas as perdas de pacote que ocorrem dentro da sequência de sinal de vídeo antes de combi- É nar a estimativa de visibilidade de perda de pacote determinada pelo módulo de estimativa com pelo menos uma característica ou conjunto de caracterís- à 15 ticas extraída.

é O método e aparelho de acordo com a invenção diferenciam das abordagens propostas na literatura em três pontos principais. Primeiramente, o método é diferente dos modelos paramétricos ([1, 2)) já que este explora as informações do fluxo de bits para determinar a qualidade de vídeo objeti- vae não está baseado nas informações de cabeçalho de pacote somente. As características extraídas do fluxo de bits permitem a consideração de de- pendência de conteúdo, a adaptação da medida de qualidade de vídeo para as características espaço - temporais das sequências de vídeo e se aprovei- tam das propriedades do sistema visual humano (HVS) as quais são ignora- dasnosmodelos paramétricos.

Segundamente, a visibilidade de perda de pacote de cada perda de pacote não é estimada em um modo binário (visível ou invisível) mas ao invés com um valor contínuo o qual denota quão provável é a perda de pa- cote sob investigação resultar em uma degradação percebível e detectável da sequência de vídeo. A granularidade do método proposto permite uma predição mais precisa da visibilidade de perdas de pacote devido aos prejuí- zos de rede. Em contraste, todos os métodos anteriormente apresentados na literatura proveem saídas binárias para a estimativa de visibilidade de Ê perda de pacote.

fe Terceiramente, todos os métodos acima mencionados não con- : sideram o efeito de visibilidade de perda de pacote sobre a qualidade de ví- deo percebida; estes somente examinam a visibilidade de perdas de pacote com base em características extraídas do fluxo de bits recebido. No entanto, na presente invenção, a saída do módulo de classificador de visibilidade de perda de pacote está incorporada no modelo de avaliação de qualidade de vídeo objetiva para avaliar a qualidade do fluxo de bits. Até onde vai o co- nhecimento dos inventores, este é o primeiro método para avaliação de qua- , lidade de vídeo o qual explora explicitamente a estimativa de visibilidade de perda de pacote com estimativas contínuas para uma avaliação de qualida- í de de vídeo objetiva. Outros aspectos, características, e vantagens ficarão aparentes . 15 do sumário acima, assim como da descrição que segue, incluindo as figuras a e as reivindicações.

Figura 1 mostra a arquitetura do modelo de avaliação de quali- dade de vídeo proposto; Figura 2 mostra como os quadros são organizados em um "gru- podeimagens"(GOP) para codificação de vídeo; Figura 3 mostra o particionamento de macroblocos de acordo com o padrão H.264/AVC e a derivação dos coeficientes de transformada após a aplicação da transformada de inteiro 4x4; Figura 4 mostra os mapas de propagação de erro para quatro — quadros consecutivos na sequência de vídeo; Figura 5 apresenta o diagrama de blocos da segunda modalida- de da presente invenção para a avaliação de qualidade de vídeo; e Figura 6 apresenta um exemplo para a estimativa de distorção visível induzida devido à perda(s) de pacote nos quadros de uma sequência devídeo.

DESCRIÇÃO DETALHADA A arquitetura do modelo de avaliação de qualidade de vídeo de

À acordo com uma modalidade preferida da invenção está apresentada na Fi- gura 1. A Figura 1 apresenta o diagrama de blocos do método e aparelho Ta preferidos para a avaliação de qualidade de vídeo objetiva com base na es- : timativa da visibilidade de eventos de perda de pacote. Especificamente, estámostrado que este é um método baseado em fluxo de bits de não refe- rência o qual extrai ou computa oito características do fluxo de bit recebido para avaliar o impacto perceptivo de cada perda de pacote. Subsequente- mente, as características extraídas e o valor predito para a visibilidade da perda de pacote são utilizados para avaliar a qualidade total do fluxo de bits devídeo. h No receptor, um dispositivo de sonda captura o fluxo de bits e extrai ou computa um número de características que são utilizadas para a É avaliação de qualidade de vídeo. As características são ou extraídas direta- E mente decodificando parcialmente o fluxo de bits ou combinando as informa- Ã 15 çõesdos pixels reconstruídos (decodificação total do fluxo de bits). Então, as h características extraídas são alimentadas para o módulo o qual é responsá- vel por determinar a visibilidade de cada evento de perda de pacote. Este módulo atribui uma estimativa de visibilidade contínua para cada evento de perda de pacote (perdas de pacote isoladas ou combinação de eventos) que ocorre dentro de uma duração de tempo específica. Subsequentemente, a estimativa de probabilidade do módulo de visibilidade de perda de pacote é : combinada com as características previamente extraídas para avaliar a qua- lidade total da sequência. Especificamente, com base nas estimativas de probabilidade da visibilidade de cada perda de pacote, as características extraídas são ponderadas no algoritmo final para refletir que cada perda de pacote produz degradações desigualmente percebidas na sequência de ví- : deo. Finalmente, o dispositivo de sonda emite o valor predito de qualidade de vídeo, Q.

MÉTODO PARA EXTRAÇÃO DE CARACTERÍSTICA E COMPUTAÇÃO DO

FLUXO DE BITS O seguinte descreve as características preferivelmente extraídas do fluxo de bits para determinar a visibilidade de perdas de pacote e a quali-

É dade objetiva das sequências de vídeo. Deve ser notado que neste exemplo a análise está baseada em fluxos codificados de acordo com o padrão de e codificação de vídeo H.264/AVC (T. Wiegand, G. J. Sullivan, G. Bjontegaard, k e A. Luthra, "Overview of the H.264/AVC video coding standard," IEEE Trans. on Circuits and Systems for Video Technology, vol. 13, no. 7, Jul. 2003), mas o método poderia ser aplicado a qualquer padrão de codificação de vídeo com modificações menores para a computação das características correspondentes.

Uma das propriedades que precisam ser computadas para a es- timativa da degradação perceptiva causada por uma perda de pacote é o > "frame type" de todos os quadros e especificamente o quadro afetado pela perda. Os valores possíveis para a propriedade "frame type" incluem "Intra- Í frame" ou "Key-Frame" (abaixo denominado |-frame), "Predicted-Frame" (a- baixo denominado P-frame) e "Bidirectional Frame" (abaixo denominado B- á 15 frame). Somente os |-frames podem ser decodificados sem informações de . referenciamento de quaisquer quadros anteriores. Ao contrário, os P-frames dependem de um ou mais predecessores denominados "quadros de refe- rência", porque as informações transmitidas para um P-frame principalmente consistem na diferença entre o quadro de vídeo que estas descrevem e suas referências. Portanto, as perdas de pacote dentro de um I-frame ou seus P- frames consecutivos propagam em quadros seguintes, mesmo se estes quadros seguintes estes próprios não contiverem nenhum pacote perdido. Devido a este mecanismo um único erro de perda de pacote pode se prolon- gar através de partes longas de uma sequência de vídeo, até que o próximo l-frame livre de erros ocorra. Os erros em P-frames e especificamente m |- frames podem portanto ter uma alta visibilidade. O mesmo mecanismo de quadro de referência é verdadeiro para os B-frames, mas, como os B-frames não servem estes próprios como referências, um erro em um B-frame causa- rá somente degradação neste único quadro. A cadeia de quadros de vídeo entre dois |-frames sucessivos é denominada "Grupo de Imagens" (GoP). Na maioria dos casos os PeB- frames em um GoP seguem um padrão mais ou menos estrito como um pa-

drão GoP típico: "l, BB, P, B, B,P ... ". Façamos N denotar o comprimento de GOP, isto é, a distância entre dois |-ftames sucessivos.

Então, se a pri- e meira perda de pacote ocorrer a t quadros após o primeiro |-ftame de um n GOP específico, a primeira característica que é extraída é o número de qua- dros que são degradados devido à perda de pacote, denominado ErrDur.

Esta propriedade é computada como (ver Figura 2): Ema = [7 if fametypeis Tor? Ea (1) 1 , if frame typeis B - Assim, se a perda de pacote ocorrer no primeiro quadro (o qual é um l-frame) então t = 1, e o número de quadros que são prejudicados pela ] perda de pacote é N, isto é, igual ao número de quadros no GOP.

Subsequentemente, a magnitude média de vetores de movimen- ft to, AvgMv, é de preferência computada o que reflete o vetor de movimento médio nas direções horizontal e vertical de todos os macroblocos (mb) afe- õ tados pela perda.

Façamos vn = [Vnx, Vny] denotar o vetor de movimento do enésimo macrobloco no quadro no qual a perda de pacote ocorreu.

Então, o termo AvgMv é computado como: 1 fin) E) AvgMy = Ex) > “) Eq (2) LV 1 onde L é a cardinalidade do conjunto dos macroblocos que são perdidos no quadro n devido à perda de pacote.

Aparentemente, como as informações de vetor de movimento para os macroblocos perdidos não podem ser recu- peradas, estas informações são estimadas de seus vizinhos temporais.

Isto é,paracada macrobloco faltante, as informações de vetor de movimento são recuperadas do macrobloco colocalizado no quadro corretamente recebido anterior.

Além disso, a diferença de vetor de movimento médio, AvgMv- Diff, pode ser computada do fluxo de bits.

Em H.264/AVC, para explorar a redundância entre os vetores de movimento, somente a diferença entre o vetor de movimento de um bloco e seu vetor de movimento predito de ma- croblocos vizinhos está incluída no fluxo de bits. Esta característica é extre- "> mamente significativa em sequências com movimento preditível (por exem- e plo, panorama), onde o movimento médio pode ser grande, mas as diferen- çasdevetorde movimento codificadas no fluxo de vídeo são pequenas. Fa- çamos vd, = [vdn x, vdn,] denotar a diferença de vetor de movimento do ené- simo macrobloco no quadro no qual a perda de pacote ocorreu. Então, o termo AvgMvDiff é computado como 1 E 2 7/1 2 4eMv=- (Exa) (2x, Eq. (3) , = = . onde L é a cardinalidade do conjunto dos macroblocos que são perdidos no quadro n devido à perda de pacote. Similarmente ao caso acima, como as . informações de vetor de movimento para os macroblocos perdidos não po- : dem ser recuperadas, estas informações são estimadas de seus vizinhos , temporais. Isto é, para cada macrobloco faltante, as informações de vetor de movimento são recuperadas do macrobloco colocalizado no quadro correta- menterecebido anterior.

Outra característica que é de preferência extraída do fluxo de bits recebido é a energia do resíduo, ResEnergy, a qual está contida nos «macroblocos faltantes e é computada dos coeficientes de transformada do erro de predição. Façamos Cy.ij, b=0, ...,3, i=0, ...,3, e j=O, ..., 3 denotar o coe- ficientede transformada na linha i e coluna j do bº bloco 4x4 de um macrob- loco (ver Figura 3). Então, a energia residual é computada como:

TERES ResEnergy =")"YY Yi, Eq. (4) Lia aia jo onde | e L são definidos como acima.

Outra característica que pode ser extraída é o número máximo de partições, denominado MaxPartNr, no quadro onde a perda ocorre. Em H.264/AVC, cada macrobloco de 16x16 pode ser adicionalmente dividido em macroblocos menores para o processo de estimativa de movimento, isto é,

blocos de tamanho 16x8, 8x16, ou 8x8. Se o tamanho de partição de 8x8 for escolhido, cada partição de 8x8 pode ser adicionalmente dividida em subpar- o tições de tamanho 8x8, 8x4, 4x8, ou amostras luma de 4x4. Assim, o parà- i. metro MaxPartNr é igual ao número máximo de partições dos macroblocos corretamente recebidos no quadro onde a perda ocorre.

Se todos os ma- croblocos forem apagados (isto é, se todo o quadro for perdido) então o pa- râmetro é derivado do quadro recebido anterior.

A sexta característica que é extraída do fluxo de bits recebido é o número de macroblocos que não são decodificáveis devido à perda de pa- cotee precisam ser ocultos, denominados LostMbs abaixo. f Além disso, com base nas informações de vetor de movimento e no tipo de macroblocos, um mapa de propagação de erro binário pode ser É gerado para cada imagem, o qual denota os pixels em cada imagem que são impactados pela(s) perda(s) de pacote ou devido ao erro de inovação ou | 15 devidoãà propagação do erro para os quadros subsequentes do mesmo GOP É devido à codificação preditiva.

Façamos I(x,y,k) denotar o valor do mapa de É erro binário na localização (x,y) do kº quadro, x=1,2,.., H,/ey=1,2.., W onde H, W são a altura e a largura de cada quadro da sequência de vídeo, respectivamente.

Também, k=1,...,K, onde K é o número de quadros que contêm pixels prejudicados devido à perda de pacote.

O valor para estes pixels que são ou prejudicados devido à perda de pacote ou referenciam estas áreas e são prováveis de serem errôneos é ajustado para um, de outro E modo o valor é ajustado para zero.

Assim: Neuntado OEA ARNO so , if pixelin position (x, y)of frame k is not impaired Em outras palavras, o valor na rede de mapa de propagação é ajustado para um para todos os pixels que não são idênticos entre a se- quência de vídeo original e a imagem reconstruída do decodificador dentro da sonda devido ao erro causado pela perda de pacote e sua propagação.

Um exemplo da derivação dos mapas de propagação de erro está apresen- tado na Figura 4.

A Figura 4 apresenta os mapas de propagação de erro para qua- tro quadros consecutivos na sequência de vídeo para demonstrar como o E erro inicial causado por uma perda de pacote expande para dentro dos qua- : dros seguintes que referenciam o quadro inicial pára a sua predição. Especi- ficamente, na Figura 4a, a região escura corresponde à área que não pode ser decodificada porque as informações para estes pixels estavam contidas em um pacote o qual foi apagado. Como um resultado, o decodificador pre- cisa ocultar (usualmente utilizando vizinhos temporais ou espaciais) esta área para substituir os pixels faltantes. Como a ocultação não pode recupe- raras informações originais exatamente, alguma degradação é introduzida N nestes quadros. As Figuras 4b, 4c, e 4d mostram como este erro propaga para dentro dos quadros seguintes. As áreas escuras correspondem a pixels É que referenciam informações da região inicialmente perdida (e oculta) e são assim tendentes a erros também. É 15 A perda de pacote ocorre no primeiro quadro (a área escura na ' : figura denota os macroblocos que foram apagados devido à perda de paco- te) e propaga para os quadros subsequentes que referencial a área afetada do primeiro quadro para o processo de predição. É notado que em modali- dades alternativas o mapa de propagação de erro pode ser estimado no ní- velde macrobloco, significando que a propagação é rastreada para cada macrobloco ao invés de para cada pixel. Com base nos mapas de propagação de erro, o número total de pixels prejudicados devido a uma perda de pacote, denominado ErrProp, é computado como:

K AX ErrProp=3"X""IGx,»,k) Eq (6) kt >, Finalmente, outra característica pode ser extraída com base nos vetores de movimento, nos tipos de macrobloco e nos resíduos, denominada EstErr, para quantificar a magnitude da distorção induzida devido à perda de pacote e devido à propagação de erro o que permite a estimativa do erro quadrático médio (MSE) induzido em um modo de não referência. O método para estimar a distorção induzida está fora do escopo desta invenção, assim qualquer método conhecido para a pessoa versada na técnica poderia ser o. utilizado, por exemplo, o método proposto em M. Naccari, M. Tagliasacchi, e " S. Tubaro, "No-reference video quality monitoring for H.264/AVC coded vi- —deo/IEEE Trans. on Multimedia, vol. 11, no. 5, pp. 932-946, Ago. 2009. No exemplo mostrado, as oito características acima menciona- das são extraídas para cada perda de pacote que ocorre em um GOP. Quando mais do que uma perda de pacote aparece no mesmo GOP, então na modalidade preferida o valor máximo é selecionado para o ErrorDur, e MaxPartNr, enquanto que para as outras características a sua soma é con- ' siderada como as características finais. No entanto, em outras modalidades, : as características extraídas de cada perda de pacote dentro de um GOP po- dem ser combinadas diferentemente, por exemplo, computando a média, a mediana, ou qualquer outra função. Assim, dentro de cada GOP, o seguinte f 15 vetor de característica é extraído o qual é utilizado para a estimativa da visi- e. bilidade de eventos de perda de pacote: J =[ErrDur, AvgMYV, AvgMvDiff; ResEnergy, MaxPartNr, LosiMbs, ErrProp, EstErr] Eq.(7) Deve ser notado, que em outras modalidades da presente in- venção, qualquer número e combinação das características acima mencio- nadas poderiam ser utilizados. Isto é principalmente significativo quando é desejado não computar algumas características (por exemplo, devido a ra- zões de complexidade ou implementação de custo). ESTIMATIVA CONTÍNUA DE VISIBILIDADE DE PERDA DE PACOTE UTI-

LIZANDO REGRESSÃO DE VETOR DE SUPORTE Para a classificação de visibilidade de perda de pacote com ba- se nas características extraídas de cada evento de perda de pacote, uma técnica baseada em Regressão de Vetor de Suporte (SVR) é empregada. Com este método, o vetor de característica de entrada é mapeado para um espaço de característica altamente dimensional utilizando uma função de mapeamento não linear e então um modelo linear é construído neste espaço de característica. O algoritmo opera em dois estágios: o estágio de treina-

mento no qual os dados de treinamento são utilizados para sintonizar os pa- râmetros do modelo, e o estágio de avaliação no qual o modelo emite o valor O. predito para o vetor de característica de entrada. Estes dois estágios estão - descritos em detalhes a seguir.

No estágio de treinamento, um conjunto de n dados de treina- mento, denotado por ((f1, y1), (fo, Y2), -.. (fu Yn),L fi e RR yVERiIA1 DN, onde f; é um vetor de característica descrito na Eq. (7), e y| é o valor de saída alvo, é utilizado para estimar os parâmetros de modelo que maximizam a sua precisão de predição. O método para treinar o algoritmo de SVR está forado escopo desta invenção, assim qualquer método conhecido da pes- F soa versada na técnica poderia ser utilizado. O resultado do algoritmo de : treinamento com os dados de treinamento inseridos resulta na computação de um conjunto de parâmetros, ox, i=1,...,n, Bi, i=1,...n, e b e 3, os quais são utilizados durante o estágio de avaliação. Na presente invenção o valor de b É 15 é selecionado para ser igual a 1,27. No entanto, qualquer outro valor poderia : : ser utilizado.

No estágio de avaliação, o algoritmo recebe um vetor de carac- terística de entrada f (como descrito na Eq. (7)) e o valor predito da visibili- dade de cada perda, V, é dado por: Rn ro = (&,- B)K(EI,)+b Eq. (8) : i=| ondeK(..)éa função de núcleo, ef, i=1, n, são os vetores de característica utilizados como dados de treinamento. Na presente invenção, a seguinte função foi selecionada como a função de núcleo a qual é também conhecida como a Função de Base Radial (RBF): : e-s] K(tf)=e 7 Faq. (9) Na presente invenção, o valor de y é selecionado para ser igual a2 Também, qualquer outra função de núcleo poderia ser utilizada em ou- tras modalidades. Mais ainda, o valor predito V para a visibilidade de uma perda de pacote pode ser convertido em um valor binário, se for desejável classificar uma perda de pacote em um dos seguintes dois casos: visível ou r invisível. Neste caso, o valor predito binário de uma perda de pacote, deno- : tado como Vg, pode ser computador como: V 0 ,ifV<T Eq. (10) BO 5 . 1 ,ifr>T ondeTé um valor limite para classificar a estimativa contínua de visibilidade de perda de pacote em um valor binário. Dentro da presente invenção, o va- lor sugerido é 0,7, mas qualquer outro valor poderia ser utilizado. Quando o algoritmo opera no estágio de avaliação somente e : não precisa treinar sobre novos dados, os parâmetros armazenados são uti- lizadose a visibilidade V de cada evento de perda de pacote é predita como definido na Eq. (8). As características extraídas que foram acima menciona- . das são refinadas de modo que estas reflitam o valor predito da visibilidade de cada perda de pacote e sejam ponderadas consequentemente, como a- nalisado na seção seguinte.

MÉTODO DE AVALIAÇÃO DE QUALIDADE DE VÍDEO O modelo de avaliação de qualidade de vídeo baseado em fluxo de bits proposto é uma combinação da degradação causada pela compres- são das sequências de vídeo, Qro, E a degradação de qualidade devido à perda de pacote durante a transmissão (Qtans). Assim, a qualidade total é dadapor 2207-277 Qua Eq (11) onde Q denota a qualidade total da sequência e Q, denota a qualidade de fonte do vídeo inserido na cadeia de transmissão. O termo Q..a é computado por: =q o Qu =0"2" +0, Eq. (12) onde B é a taxa de bits da sequência de vídeo, e a,, a, e a; são constantes.

No presente exemplo, os valores de a,, a», e a; são selecionados iguais a 89,33, -1,21, e 11,47. ” O termo de degradação visual induzido por canal reflete a distor- e: ção que é causada pela perda de pacote, a extensão de sua propagação e a intensidade em percepção visual humana.

Por esta razão, a seguinte fórmu- la é utilizada para Qtans: Qras = S(P, EstErr, ErrProp,) Eq. (13) Aqui, o índice i é utilizado para denotar um único evento de per- : da de pacote específico que ocorre durante a sequência e f(.,.) representa qualquer função adequada.

Em outras palavras, a degradação total devida a . 10 erros de transmissão é uma função da visibilidade de cada perda de pacote, o erro que é induzido no quadro onde a perda de pacote ocorre e a propaga- : ção do erro para dentro dos quadros subsequentes. “ A seguir, duas modalidades da presente invenção estão apre- f sentadas para representar a função f(...) acima mencionada com fórmulas específicas.

Na primeira modalidade, a Eq. (13) é reescrita como: Dom =94" DV, EstErm +a,D'V,- ErrProp, +a,-D'V,- EstErr,- ErProp, Eq. (14) 1 1 í onde a,, as, e as são constantes determinadas por regressão, i é um índice que refere a cada perda de pacote individual, EstErr, e ErrProp; são as ca- racterísticas extraídas como acima mencionado associadas com cada perda de pacote.

Assim, o modelo leva em consideração a importância de cada perda de pacote para a determinação da degradação visual e utiliza a saída da estimativa de visibilidade para ponderar a distorção induzida de cada perda de pacote.

Na presente modalidade, Os valores de a,, as, E ag São se- lecionados iguais a 0,023, 0,000176, e 0,0000465. Na segunda modalidade, a qual está apresentada na Figura 5, outra implementação é empregada para a função f(.,.) da Eq. (14). Façamos i denotar o índice de uma perda de pacote individual que ocorre dentro de um GOP.

Também, EstErr, é a distorção induzida no quadro aonde a iº per-

da de pacote ocorreu, estimado como acima explicado na seção de extração de característica. Então, a degradação visível associada com esta perda de ar. pacote é dada por: re À FF VisEstErr! =YV, - EstErr, Eq. (15) Também, NrimpPx', denota o número de pixels prejudicados no —quadrok causado pela jº perda de pacote, ou equivalentemente

AX 11 NrlmpPx 1=3"X'I(x,7,k) Eq. (16) x=l y=] onde I(x,y, k) denota o valor do mapa de erro binário na localização (x,y) do f Kkº quadro, x = 1,2,..., H e y = 1, 2,..., W onde H, W são a altura e a largura de cada quadro da sequência de vídeo, respectivamente. Então, a degrada- " ção percebida no quadro subsequente k, k>0, devido à propagação de erro ' 10 dajiêperdade pacote é dada por ; NrImpPxi VisEstErr! = VisEstEr] -—Pezt Eq. (17) NrIlmpPxi Aqui, NrimpPx' é o número de pixels prejudicados causados pe- lo erro de inovação (o erro no primeiro quadro o qual foi afetado pela perda de pacote sob consideração) devido ao evento de perda de pacote |, ao é dado o índice de quadro relativo k = 0. Um exemplo da computação do ter- mo VisEstErrk para os quadros subsequentes com índice k, está apresenta- do na Figura 6. Nesta figura, a área escura com índice t corresponde ao ter- f mo NrimpPxi,, enquanto que a área escura nos quadros subsequentes (índi- ces t+1, ..., ttm) corresponde aos termos NrimpPxY, k=1, ...m. Então, a degradação visual total causada pela i?º perda de pacote denominada VisEstErr, pode ser considerada como o somatório das degra- dações causadas para todos os quadros K; que foram prejudicados devido a esta perda de pacote, assim:

Et i VisEstErr' = ) VisEstEm Ea. (18) - ko . Note que o somatório começa do índice zero para fatorar a dis- torção inicial como descrito na Eq. (15). A distorção total dentro de um GOP específico é computada como o somatório das distorções geradas por todas as perdas de pacote que ocorrem dentro deste GOP, assim: 1 = a í VisEstErr qop = Y VisEstErr Eq. (19) 1 . 5 Finalmente, G denota o número total de GOPs dentro de uma . sequência, e T denotar a duração total da sequência.

Então, a distorção total devida a erros de transmissão é dada por: 1é - VisErrgo == Y'VisEstErroo, Eq. (20) Y Tm , Qro = SVisErroy) Eq (21) Na modalidade preferida deste segundo tipo, ajustamos Qrau =9-108(8-VisErrg, +1) Eq (22) Onde v e é são constantes que são, por exemplo, determinadas em um procedimento de regressão que utiliza classificações de qualidade como valores-alvo.

Apesar da invenção ter sido ilustrada e descrita em detalhes nos desenhos e na descrição acima, tal ilustração e descrição devem ser consi- deradas ilustrativas ou exemplares e não restritivas.

Deve ser compreendido que mudanças e modificações podem ser feitas por aqueles versados na técnica dentro do escopo das reivindicações seguintes.

A presente invenção : cobre modalidades adicionais com qualquer combinação de características de diferentes modalidades acima e abaixo descritas.

Mais ainda, nas reivindicações a palavra "compreendendo" não exclui outros elementos ou etapas, e o artigo indefinido "um" ou "uma" não exclui uma pluralidade. Uma única unidade pode preencher as funções de e diversas características recitadas nas reivindicações. Os termos "essencial- : mente", "cerca de", "aproximadamente" e similares em conexão com um a- tributo ou um valor especificamente também definem exatamente o atributo ou exatamente o valor, respectivamente. Quaisquer símbolos de referência nas reivindicações não devem ser considerados como limitando o escopo.

1 "

Claims

REIVINDICAÇÕES

1. Método para avaliar a qualidade de uma sequência de sinal . de vídeo transmitida no lado de receptor, o método caracterizado por com- - preender as etapas de: a) capturar o fluxo de bits de vídeo de entrada e supri-lo para um analisador de fluxo de bits de vídeo; b) extrair pelo menos uma característica ou um conjunto de ca- racterísticas do fluxo de bits de vídeo de entrada capturado pelo analisador de fluxo de bits; c) suprir a característica ou conjunto de características extraído . para um módulo de estimativa de visibilidade de perda de pacote; S d) determinar, pelo módulo de estimativa de visibilidade de perda de pacote, a probabilidade de visibilidade para cada evento de perda de pa- À cote o qual ocorreu dentro de um intervalo de tempo específico; - 15 e) empregar a probabilidade de visibilidade de perda de pacote, determinada pelo módulo de estimativa de visibilidade de perda de pacote, como um fator de ponderação de pelo menos uma característica ou conjunto de características extraídas do fluxo de bits de vídeo para calcular e estimar a qualidade total, Q, da sequência de vídeo transmitida.

2. Método de acordo com a reivindicação 1, caracterizado pelo fato de que a extração de característica de acordo com a etapa (b) é execu- tada diretamente decodificando parcialmente o fluxo de bits de vídeo, onde "parcialmente" significa sem decodificar o fluxo de bits no nível de pixel.

3. Método de acordo com a reivindicação 1, caracterizado pelo fatode que a extração de característica de acordo com a etapa (b) é execu- tada pela decodificação total do fluxo de bits de vídeo e combinando as in- formações dos pixels reconstruídos do sinal de vídeo.

4. Método de acordo com qualquer uma das reivindicações de 1 a 3, caracterizado pelo fato de que a etapa (d) emprega pelo menos uma característica de fluxo de bits do grupo que compreende: tipo de quadro, magnitude média de vetores de movimento (AvgMv), diferença de vetor de movimento média (AvgMvDiff), energia de resíduos (ResEnergy), número máximo de partições (MaxPartNr), número de macroblocos não decodificá- veis (LostMbs), informações de vetor de movimento (mv), e tipo de macrob- * locos (mb type). :

5. Método de acordo com a reivindicação 4, caracterizado pelo fato de que, com base na característica extraída "frame type" o número de quadros (ErrDur) degradados por uma perda de pacote é determinado e uti- lizado para a predição da probabilidade de visibilidade de perda de pacote assim como para combiná-lo com a probabilidade de visibilidade para esti- mar o impacto de perda de pacote sobre a qualidade visual.

6. Método de acordo com a reivindicação 4 ou 5, caracterizado Ê pelo fato de que um mapa de propagação de erro binário é gerado para , cada imagem da sequência de sinal de vídeo com base nas informações de vetor de movimento e no tipo de macroblocos.

7. Método de acordo com a reivindicação 4, 5, ou 6, caracteri- r 15 zado pelo fato de que com base no mapa de propagação de erro e nas in- formações de tipo de quadro o número de quadros (ErrDur) degradados por uma perda de pacote é determinado.

8. Método de acordo com a reivindicação 6 ou 7, caracterizado pelo fato de que com base no mapa de propagação de erro binário o núme- rototal de pixels prejudicados devido à perda de pacote (ErrProp) é compu- tado.

9. Método de acordo com qualquer uma das reivindicações 4 a 8, caracterizado pelo fato de que a magnitude de distorção (EstErr) induzi- da devido à perda de pacote e propagação de erro é determinada com base nosvetores de movimento, nos tipos de macrobloco, e nos resíduos.

10. Método de acordo com qualquer uma das reivindicações de 1a9, caracterizado pelo fato de que a etapa 1.(d) é executada utilizando uma técnica de regressão de vetor de suporte mapeando o vetor de caracte- rística de entrada, compreendido das características acima mencionada, pa- raum espaço de característica altamente dimensional utilizando uma função de mapeamento não linear, e construindo um modelo linear no espaço de característica.

11. Método de acordo com a reivindicação 1, caracterizado pe- lo fato de que a etapa 1(e) combina a estimativa de visibilidade de perda de Te pacote (V) com a magnitude de distorção determinada (EstErr) e o número . total computado de pixels prejudicados devido à perda de pacote (ErrProp).

12. Método de acordo com qualquer uma das reivindicações de 1 a 11, caracterizado por ainda compreender entre as etapas d) e e) a eta- pa de estimar a distorção visível total gerada pela combinação temporal de todas as perdas de pacote que ocorrem dentro da sequência de sinal de vi- deo.

13. Aparelho para avaliar a qualidade de uma sequência de sinal h de vídeo transmitida no lado de receptor, o aparelho caracterizado por ; compreender: um analisador de fluxo de bits de vídeo que recebe o fluxo de É bits de vídeo de entrada capturado, e configurado para extrair pelo menos E 15 uma característica ou um conjunto de características do fluxo de bits de vi- deo de entrada capturado; t um módulo de estimativa de visibilidade de perda de pacote que recebe a característica ou conjunto de características extraídas, o módulo de estimativa de visibilidade de perda de pacote configurado para determinar a visibilidade de uma perda de pacote ocorrida durante a transmissão do sinal de vídeo atribuindo uma estimativa contínua para cada evento de perda de pacote ocorrido dentro de um intervalo de tempo específico; um combinador para combinar a probabilidade de visibilidade de perda de pacote, determinada pelo módulo de visibilidade de perda de paco- te, como um fator de ponderação de pelo menos uma característica ou con- junto de características extraídas do fluxo de bits de vídeo para calcular uma estimativa da qualidade total, Q, da sequência de sinal de vídeo transmitida.