BR112014025773B1

BR112014025773B1 - Método e aparelho para avaliar qualidade de multimídia

Info

Publication number: BR112014025773B1
Application number: BR112014025773-6A
Authority: BR
Inventors: Lina Sun; Shan GAO; Qingpeng Xie
Original assignee: Huawei Technologies Co., Ltd
Priority date: 2012-04-23
Filing date: 2012-09-26
Publication date: 2022-06-07
Also published as: EP2819329B8; SG11201405801WA; CN103379358B; EP2819329B1; US20150009406A1; KR20140135240A; EP2819329A1; WO2013159487A1; CN103379358A; HK1190845A1; BR112014025773A2; EP2819329A4; JP2015520548A; KR101595875B1; BR112014025773A8; JP6010685B2

Abstract

MÉTODO E APARELHO PARA AVALIAR UMA QUALIDADE DE MULTIMÍDIA. A presente invenção descreve um método e um aparelho para avaliar a qualidade de multimídia. O método inclui as etapas: obter (S110) a qualidade de referência de um vídeo e a qualidade final do vídeo de uma sequência de multimídia, a qualidade de referência de um áudio e a qualidade final do áudio da sequência de multimídia; determinar (S120) a qualidade de referência da sequência de multimídia conforme a qualidade de referência do vídeo e a qualidade de referência do áudio; determinar (S130) um valor de distorção da sequência de multimídia conforme a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio; determinar (S140) a qualidade de multimídia da sequência de multimídia conforme a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia. O método e aparelho para avaliar uma qualidade de multimídia podem refletir diretamente a distorção de uma sequência de multimídia conforme a sensação subjetiva de uma pessoa, e, portanto, poderão, de maneira precisa e efetiva, avaliar a qualidade de multimídia.

Description

CAMPO DA INVENÇÃO

[0001] A presente invenção refere-se ao campo da multimídia, e em particular, a um método e a um aparelho para avaliar uma qualidade de multimídia.

ANTECEDENTES

[0002] Com o desenvolvimento das tecnologias de rede e a chegada de uma nova era de multimídias, o vídeo sob demanda, a televisão pela internet, a videotelefonia, ou coisa do gênero têm se tornado os principais serviços de uma rede de banda larga, e esses serviços têm também se tornado os principais serviços de uma rede sem fio de 3a Geração (3G, a 3a Geração). Várias tecnologias de comunicação e processamento de multimídia surgem, uma após a outra. Para um serviço de multimídia, a quantidade de dados é grande, a necessidade de um desempenho em tempo real é alta, e a sensibilidade do usuário é forte; sendo assim, a avaliação da qualidade de multimídia tem um significado muito importante para um fabricante e para um equipamento de comunicação de operador de multimídia. Quando um fabricante de equipamento pode prover um resultado de avaliação de qualidade de multimídia convincente para um sistema, isto produz um grande efeito na promoção de venda de um produto do fabricante de equipamento; e, para o operador, os dados de avaliação de qualidade de multimídia podem ser usados para a promoção do serviço e publicidade do operador. Além disso, quando um método de avaliação de qualidade de multimídia automático e em tempo real pode ser desenvolvido, tanto o fabricante de equipamento como o operador poderão fazer um monitoramento em tempo real de um dispositivo de multimídia com base nessa implementação, no sentido de ajudar a localizar um problema ou diagnosticar uma falha, a fim de garantir as exigências de um usuário ao experimentar o serviço de multimídia.

[0003] A qualidade de multimídia é uma medição para medir a dis torção de uma multimídia digital com relação a um sinal original. Os principais fatores que afetam a qualidade da comunicação multimídia são a qualidade de vídeo, a qualidade de áudio, um nível de distorção de vídeo, e um nível de distorção de áudio. Um sinal de vídeo e um sinal de áudio em uma sequência de multimídia precisam passar por fases, tais como amostragem, quantificação, codificação de compressão, transmissão em rede, decodificação, e restauração de um sinal analógico, nas quais erros e distorções de informação são possivelmente introduzidos em cada fase, resultando em uma baixa satisfação do usuário. Os danos e as distorções de um áudio ou de um vídeo causam uma fraca experiência da multimídia; portanto, como obter uma qualidade de multimídia de acordo com uma combinação de qualidade de vídeo e qualidade de áudio se torna uma questão crucial.

[0004] Um método de avaliação de qualidade de multimídia geral, primeiramente avalia em separado a qualidade de sequência de áudio e a qualidade de sequência de vídeo na sequência de multimídia em uma condição na qual existe um dano de rede, e, em seguida, combina a qualidade de sequência de áudio e a qualidade de sequência de vídeo usando uma fórmula polinomial específica a fim de obter a qualidade de multimídia.

[0005] Quando não há perda de pacote na rede, tanto o áudio como o vídeo apresentam uma qualidade de referência relativamente estável, e a sensação de uma pessoa para a qualidade da multimídia é a qualidade de referência obtida ao combinar diretamente o áudio e o vídeo. No entanto, quando ocorre uma perda de pacote, a pessoa tem a sensação de que a qualidade de multimídia originalmente estável demonstra uma repentina deterioração da qualidade, ou seja, a distorção da sequência de multimídia provocada pela perda de pacote, mas este não será o caso quando o vídeo e o áudio forem, numa situação de perda de pacote, separadamente avaliados antes de serem combinados. O método de avaliação de qualidade de multimídia existente não consegue refletir diretamente o impacto de uma perda de pacote em uma sequência de multimídia e a distorção da sequência de multimídia, e não corresponde à sensibilidade subjetiva de uma pessoa. SUMÁRIO

[0006] As modalidades da presente invenção proveem um método e um aparelho para avaliar uma qualidade de multimídia que corresponda à sensibilidade subjetiva de uma pessoa, e que podem, de maneira precisa e efetiva, avaliar a qualidade de multimídia.

[0007] De acordo com um aspecto, uma modalidade da presente invenção provê um método para avaliar uma qualidade de multimídia, cujo método inclui as etapas de: obter a qualidade de referência de um vídeo e a qualidade final do vídeo de uma sequência de multimídia, e a qualidade de referência de um áudio e a qualidade final do áudio da sequência de multimídia; determinar a qualidade de referência da sequência de multimídia de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio; determinar um valor de distorção da sequência de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio; e determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia.

[0008] De acordo com outro aspecto, uma modalidade da presente invenção provê um método para avaliar uma qualidade de multimídia, cujo método inclui: a divisão de uma sequência de multimídia em N segmentos de multimídia, sendo que N é um número inteiro positivo e N é maior que ou igual a 2; a avaliação da qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia; e a de-terminação da qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia.

[0009] De acordo ainda com outro aspecto, uma modalidade da presente invenção provê um aparelho para avaliar uma qualidade de multimídia, cujo aparelho inclui: um primeiro módulo de obtenção configurado de modo a obter a qualidade de referência de um vídeo e a qualidade final do vídeo de uma sequência de multimídia, e a qualidade de referência de um áudio e a qualidade final do áudio da sequência de multimídia; um módulo de determinação de qualidade de referência configurado de modo a determinar a qualidade de referência da sequência de multimídia de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio que são obtidas pelo primeiro módulo de obtenção; um módulo de determinação de valor de distorção configurado de modo a determinar um valor de distorção da sequência de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio que são obtidas pelo primeiro módulo de obtenção; e um módulo de determinação de qualidade de multimídia configurado de modo a determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia que é determinada pelo módulo de determinação de qualidade de referência e o valor de distorção da sequência de multimídia que é determinado pelo módulo de determinação de valor de distorção.

[0010] De acordo ainda com outro aspecto, uma modalidade da presente invenção provê um aparelho para avaliar uma qualidade de multimídia, cujo aparelho inclui: um módulo de segmentação configurado de modo a dividir uma sequência de multimídia em N segmentos de multimídia, sendo que N é um número inteiro positivo e N é maior que ou igual a 2; um módulo de avaliação configurado de modo a avaliar a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia; e um módulo de processamento configurado de modo a determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia.

[0011] Com base nas soluções técnicas acima apresentadas, o método e o aparelho para avaliar uma qualidade de multimídia de acordo com as modalidades da presente invenção, ao determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia, poderão refletir diretamente a distorção de uma sequência de multimídia de acordo com a sensibilidade subjetiva de uma pessoa, e, por conseguinte, poderão, de uma forma precisa e efetiva, avaliar a qualidade de multimídia.

BREVE DESCRIÇÃO DOS DESENHOS

[0012] A fim de descrever de maneira mais clara as soluções técnicas nas modalidades da presente invenção, são descritos em poucas palavras a seguir os desenhos em anexo necessários para a descrição das modalidades da presente invenção. Aparentemente, os desenhos em anexo na descrição a seguir mostram tão somente algumas modalidades da presente invenção, e uma pessoa com conhecimento simples na técnica poderá ainda derivar outros desenhos a partir desses desenhos em anexo sem esforço criativo.

[0013] A Figura 1 é um fluxograma esquemático de um método para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção;

[0014] A Figura 2 é um fluxograma esquemático de um método para determinar um valor de distorção de uma sequência de multimídia de acordo com uma modalidade da presente invenção;

[0015] A Figura 3 é um outro fluxograma esquemático de um mé todo para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção;

[0016] A Figura 4 é ainda um outro fluxograma esquemático de um método para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção;

[0017] A Figura 5 é um fluxograma esquemático de um método para avaliar uma qualidade de multimídia de acordo com outra modalidade da presente invenção;

[0018] A Figura 6 é um diagrama em blocos esquemático de um aparelho para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção;

[0019] A Figura 7 é um diagrama em blocos esquemático de um módulo de determinação de valor de distorção de acordo com uma modalidade da presente invenção;

[0020] A Figura 8 é um outro diagrama em blocos esquemático de um aparelho para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção; e

[0021] A Figura 9 é um diagrama em blocos esquemático de um aparelho para avaliar uma qualidade de multimídia de acordo com outra modalidade da presente invenção.

DESCRIÇÃO DAS MODALIDADES

[0022] A seguir são descritas de maneira clara e abrangente as so luções técnicas das modalidades da presente invenção com referência aos desenhos em anexo das modalidades da presente invenção. Aparentemente, as modalidades descritas são uma parte, em vez da totalidade, das modalidades da presente invenção. Todas as demais modalidades obtidas por uma pessoa com conhecimento simples na técnica com base nas modalidades da presente invenção sem esforço criativo recairão dentro do escopo de proteção da presente invenção.

[0023] A Figura 1 é um fluxograma esquemático de um método 100 para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção. Tal como mostrado na Figura 1, o método 100 inclui as etapas de:

[0024] S110: Obter a qualidade de referência de um vídeo e a qua lidade final do vídeo de uma sequência de multimídia, e a qualidade de referência de um áudio e a qualidade final do áudio da sequência de multimídia.

[0025] S120: Determinar a qualidade de referência da sequência de multimídia de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio.

[0026] S130: Determinar um valor de distorção da sequência de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio.

[0027] S140: Determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia.

[0028] A sensibilidade de uma pessoa para uma qualidade de multimídia é que uma distorção é superposta à qualidade de referência de multimídia estável. A qualidade de referência de multimídia descreve a qualidade de compressão de multimídia que é provocada ao se comprimir a codificação do vídeo ou do áudio em uma multimídia. Devido a um fator, tal como uma perda de pacote ou congelamento da multimídia, a pessoa sente a distorção da sequência de multimídia. A distorção é um nível de deterioração relativa que diz respeito à qualidade de referência, ou seja, a qualidade de multimídia se deteriora a partir de uma qualidade de referência relativamente estável. Nessa modalidade da presente invenção, depois de a qualidade de referência do vídeo e a qualidade final do vídeo da sequência de multimídia, e a qualidade de referência do áudio e a qualidade final do áudio da sequência de multimídia serem obtidas, a qualidade de referência da sequência de multimídia é determinada de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio, o valor de distorção da sequência de multimídia é determinado de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio, e finalmente a qualidade de multimídia da sequência de multimídia é determinada de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia. Desta maneira, a distorção da sequência de multimídia é entendida em termos abrangentes, porém não é uma combinação depois de o vídeo e o áudio serem entendidos em separado.

[0029] Deste modo, o método para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, ao determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia, pode diretamente refletir a distorção da sequência de multimídia, de acordo com a sensibilidade subjetiva de uma pessoa, e, por conseguinte, poderá avaliar de maneira precisa e efetiva a qualidade de multimídia.

[0030] Na etapa S110, a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio da sequência de multimídia são obtidas. A qualidade de referência do vídeo é uma qualidade de compressão de vídeo que é causada devido à compressão de codificação do vídeo, e, em termos específicos, pode ser obtida através de um cálculo de acordo com a codificação das taxas de bit de vídeos com diferentes tipos de codificação e resoluções; e a qualidade de referência do áudio é a qualidade de compressão do áudio que é causada devido à compressão de codificação do áudio, e, em termos específicos, pode ser obtida atra- vés do cálculo de acordo com a codificação das taxas de bit de áudios com diferentes tipos de codificação, frequências de amostragem, o número de canais, ou coisa do gênero. A qualidade final do vídeo e a qualidade final do áudio são a qualidade de experiência final obtida do vídeo e do áudio da sequência de multimídia quando um dano à rede (por exemplo, uma perda de pacote, uma flutuação de fase, ou coisa do gênero) ocorre separadamente no vídeo e no áudio, e, em termos específicos, podem ser obtidas através de um cálculo ao se fazer uma análise do áudio e vídeo na sequência de multimídia.

[0031] Na etapa S120, a qualidade de referência da sequência de multimídia é determinada de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio. Essa modalidade da presente invenção não se limita a uma forma específica na qual a qualidade de referência da sequência de multimídia é determinada. Por exemplo, a qualidade de referência Qav ' da sequência de multimídia pode ser determinada pela seguinte equação (1):

- sendo que Qv _ coding e Qa_coding são, respectivamente, a qualidade de referência do vídeo e a qualidade de referência do áudio, a1,a2,a3 e a4 são os parâmetros relacionados a uma resolução de espaço e a um modo de exibição do vídeo, e seus valores são obtidos mediante o uso de uma formação de dados, e são basicamente todas as frações decimais entre 0 e 1, por exemplo, quando a resolução é (128x96), a=0.207962, a =0.124365, a =0.179018, a = 0.5456

[0032] Na etapa S130, o valor de distorção da sequência de multimídia é determinado de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio. Tal como mostrado na Figura 2, a etapa S130 inclui ainda as etapas de:

[0033] S131: Determinar um valor de distorção do vídeo de acordo com a qualidade de referência do vídeo e a qualidade final do vídeo.

[0034] S132: Determinar um valor de distorção do áudio de acordo com a qualidade de referência do áudio e a qualidade final do áudio.

[0035] S133: Determinar o valor de distorção da sequência de mul timídia de acordo com o valor de distorção do vídeo e o valor de distorção do áudio.

[0036] O valor de distorção do vídeo pode ser obtido ao se subtrair a qualidade final do vídeo da qualidade de referência do vídeo, e o valor de distorção do áudio pode ser obtido ao se subtrair a qualidade final do áudio da qualidade de referência do áudio.

[0037] Na etapa S133, o valor de distorção da sequência de multimídia é determinado de acordo com o valor de distorção do vídeo e o valor de distorção do áudio. Em termos específicos, o valor de distorção da sequência de multimídia pode ser obtido da seguinte maneira.

[0038] Um fator de distorção do vídeo é determinado de acordo com a qualidade de referência do vídeo e o valor de distorção do vídeo. Um fator de distorção dv do vídeo é uma proporção de um valor de distorção Dv do vídeo com relação à qualidade de referência Qv_coding do vídeo, e, opcionalmente, pode ser determinado pela seguinte equação (2):

[0039] Deve-se entender que o valor de distorção Dv do vídeo é obtido ao se subtrair a qualidade final do vídeo da qualidade de referência do vídeo; desta forma, o fator de distorção dv do vídeo pode opcionalmente ser também determinado pela seguinte equação (3):

[0040] Um fator de distorção do áudio é determinado de acordo com a qualidade de referência do áudio e o valor de distorção do áudio. Um fator de distorção da do áudio é uma proporção de um valor de distorção Da do áudio com relação à qualidade de referência Qa _ coding do áudio, e, pode opcionalmente ser determinado pela seguinte equação (4):

[0041] De maneira similar, o valor de distorção Da do áudio é obtido ao se subtrair a qualidade final do áudio da qualidade de re- ferência do áudio; desta forma, o fator de distorção da do áudio pode opcionalmente ser também determinado pela seguinte equação (5):

[0042] O fator de distorção da sequência de multimídia é determinado de acordo com o fator de distorção do vídeo e o fator de distor- ção do áudio. Um fator de distorção dav da sequência de multimídia é determinado pelo fator de distorção dv do vídeo e pelo fator de distorção da do áudio. Um aumento do fator de distorção dv do vídeo ou do fator de distorção da do áudio faz aumentar o fator de distorção dav da sequência de multimídia, e a sua relação pode ser linear, podendo também ser não linear, como também pode ser uma combinação de linear e não linear. Essa modalidade da presente invenção não se limita a uma forma específica na qual o fator de distorção dav da sequência de multimídia é calculado de acordo com o fator de distorção dv do vídeo e o fator de distorção da do áudio, por exemplo, dav pode ser de- terminado pela seguinte equação (6) ou (7):

[0043] - sendo que a5,a6,a7 são as constantes, e seus valores são relacionados a um tipo de codificação e a uma resolução de vídeo e atendem à condição na qual dar aumenta quando dr ou da aumenta; assim como valores numéricos específicos podem ser obtidos mediante o uso de um experimento.

[0044] O valor de distorção da sequência de multimídia é determinado de acordo com a qualidade de referência da sequência de multi-mídia e o fator de distorção da sequência de multimídia. Por exemplo, um valor de distorção Dar da sequência de multimídia pode ser determinado pela seguinte equação (8):

[0045] - sendo que Qmin é uma constante, e indica uma qualidade de multimídia mínima, por exemplo, quando a taxa é um sistema de 5 pontos, e a qualidade mínima é 1.

[0046] Na etapa S140, a qualidade de multimídia da sequência de multimídia é determinada de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multi-mídia. Depois de a qualidade de referência Qar ' da sequência de mul- timídia e o valor de distorção Dar da sequência de multimídia serem determinados, a qualidade de multimídia Qar da sequência de multimí- dia é obtida de acordo com Qar ' e Dar, e sua relação poderá ser indi- cada pela seguinte equação (9):

[0047] Por exemplo, a relação pode ser expressa como a seguinte equação (10):

[0048] As fórmulas (9) e (10) indicam que a qualidade de multimí- dia da sequência de multimídia é um resultado obtido depois de a distorção ser superposta à qualidade de referência da sequência de multimídia, e a sensibilidade da pessoa para a qualidade de multimídia é exatamente que a distorção se sobrepõe à qualidade de referência de multimídia estável. Sendo assim, o método para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção corresponde a uma característica de cognição da pessoa.

[0049] Desta maneira, o método para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, ao se determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia, poderá refletir diretamente a distorção da sequência de multimídia de acordo com a sensibilidade subjetiva da pessoa, e, desta forma, poderá avaliar de maneira precisa e efetiva a qualidade de multimídia.

[0050] Opcionalmente, a qualidade de multimídia da sequência de multimídia pode ser obtida depois de as equações (1), (3), (5), (6), e (8) serem substituídas pela equação (10). Neste caso, a qualidade de multimídia Qav da sequência de multimídia é uma função da qualidade de referência Qv_coding do vídeo, da qualidade de referência Qa_coding do áudio, da qualidade final Qv do vídeo, e da qualidade final Qa do áudio.

[0051] Opcionalmente, para a equação (1), a seguinte equação (11) poderá ser obtida ao se substituir os parâmetros da equação (1) e se realizar uma disposição.

[0052] Na equação (11), Q" indica a1-Q.+ a2 -Q. + a3 -Q. ’Q. + a4, ou seja, um índice de qualidade é obtido de acordo com a qualidade final do vídeo e a qualidade final do áudio. a1 D D.+a 2 - Q. + a3-(Q.' D. + D. • Q. + D. • D. ) é expresso sob a forma de uma função f1(Qv.Qa.Dv.Da), e, em seguida, a equação (10) para calcular a qualidade de multimídia pode ser expressa como a seguinte equação (12):

- sendo que um fator de distorção de multimídia dav pode ser expresso em múltiplas formas de funções, e, por conseguinte, pode ser expresso sob a forma de f2(Qv.Qa.Dv.Da), e, em seguida, a equação (12) poderá ser expandida como a seguinte equação (13):

[0053] 1 f2 (Qv,Qa,Dv,Da) é expresso ao se usar uma função

e expresso ao se usar uma função f4 (Qmn,Qv,Qa, Dv, Da), e, em seguida, um método de cálculo para uma qualidade de multimídia poderá ser expandido como uma outra forma de expressão descrita acima, ou seja, a qualidade de multimídia Qav é uma função da qualidade final do vídeo, da qualidade final Qa do áudio, do valor de distorção Dv vídeo, e do valor de distorção Da do áudio.

[0054] O método para avaliar uma qualidade de multimídia acordo com essa modalidade da presente invenção, ao se determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência e o valor de distorção da sequência de multi-mídia, poderá refletir diretamente a distorção da sequência de multimídia que corresponde à sensibilidade subjetiva da pessoa, e, por conseguinte, poderá, de maneira precisa e efetiva, avaliar a qualidade de multimídia.

[0055] Quando o áudio e o vídeo são assíncronos, a qualidade de multimídia da sequência de multimídia possivelmente se deteriorará. Nesse cenário, o problema de o áudio e o vídeo serem assíncronos precisa ser levado em consideração. Deste modo, tal como mostrado na Figura 3, o método 100 para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção inclui ainda as etapas de:

[0056] S150: Obter um fator de efeito da dessincronização de áu dio e vídeo da sequência de multimídia.

[0057] A etapa S140 inclui ainda as etapas de:

[0058] S141: Determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia, o valor de distorção da sequência de multimídia, e o fator de efeito da dessincronização de áudio e vídeo da sequência de multimídia.

[0059] Na etapa S150, o fator de efeito da dessincronização de áudio e vídeo da sequência de multimídia é obtido. O fator de efeito da dessincronização de áudio e vídeo da sequência de multimídia é uma função de uma diferença de tempo syn da dessincronização de áudio e vídeo, e reflete o impacto da dessincronização de áudio e vídeo sobre a qualidade de multimídia.

[0060] Na etapa S141, a qualidade de multimídia da sequência de multimídia é determinada de acordo com a qualidade de referência da sequência de multimídia, o valor de distorção da sequência de multi-mídia, e o fator de efeito da dessincronização de áudio e vídeo da se-quência de multimídia. Suas relações podem ser expressas como a seguinte equação (14):

- sendo que 5 syn é o fator de efeito da dessincronização de audio e vídeo da sequência de multimídia.

[0061] Por exemplo, a qualidade de multimídia Qav da sequência de multimídia pode opcionalmente ser determinada pela seguinte equação (15):

- sendo que 5 syn é maior que 1, e um maior syn indica um maior f5 (ΔTsyn ) , o que torna Qav menor; e f5 (ΔTsyn ) não é limitado em forma, podendo ser linear, mas pode também ser não linear, como também pode ser uma combinação de uma fórmula linear e uma fórmula não linear; por exemplo, sua forma específica podendo ser expressa como a seguinte equação (16):

- sendo que bi,ci,di são as constantes.

[0062] Opcionalmente, a qualidade de multimídia Qav da sequência de multimídia pode também ser determinada pela seguinte equação (17):

- sendo que f 6( ΔTsyn )é o fator de efeito da dessincronização de audio e vídeo da sequência de multimídia, o seu valor é menor que 1 e maior que 0, e um maior ΔTsyn indica um menor f6 (ΔTsyn ), o que torna Qav menor; e f6 (ΔTsyn ) não é limitado em forma, podendo ser linear, mas pode também ser não linear, como também pode ser uma combinação de uma fórmula linear e uma fórmula não linear; por exemplo, sua forma específica podendo ser expressa como a seguinte equação (18):

[0063] As fórmulas (14), (15), e (17) indicam que a qualidade de multimídia da sequência de multimídia é um resultado obtido depois de a distorção e o impacto da dessincronização de áudio e vídeo serem superpostos à qualidade de referência da sequência de multimídia, e correspondem à característica de cognição da pessoa.

[0064] Sendo assim, o método para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, ao se determinar a qualidade de multimídia de acordo com a qualidade de referência da sequência de multimídia, o valor de distorção da sequência de multimídia, e o fator de efeito da dessincronização de áudio e vídeo da sequência de multimídia, corresponde à sensibilidade subjetiva da pessoa, e, deste modo, poderá, de maneira precisa e efetiva, avaliar a qualidade de multimídia.

[0065] Com referência à Figura 4, a descrição a seguir apresenta em detalhe o método para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, com as etapas de:

[0066] S410: Calcular a qualidade de referência de uma sequência de multimídia de acordo com a qualidade de referência de um vídeo e a qualidade de referência de um áudio. Por exemplo, a equação (1) acima poderá ser usada.

[0067] S420: Calcular um fator de distorção do vídeo de acordo com a qualidade de referência do vídeo e a qualidade final do vídeo. Por exemplo, a equação (3) acima poderá ser usada.

[0068] S430: Calcular um fator de distorção do áudio de acordo com a qualidade de referência do áudio e a qualidade final do áudio. Por exemplo, a equação (5) acima poderá ser usada.

[0069] S440: Calcular um fator de distorção da sequência de multimídia de acordo com o fator de distorção do vídeo e o fator de distorção do áudio. Por exemplo, a equação (6) ou (7) acima poderá ser usada.

[0070] S450: Calcular a qualidade de multimídia da sequência de multimídia. Quando a dessincronização de áudio e vídeo não ocorre, a qualidade de multimídia da sequência de multimídia é calculada de acordo com a qualidade de referência da sequência de multimídia e o fator de distorção da sequência de multimídia, por exemplo, as equações (8) e (10) acima poderão ser usadas; e quando o áudio e o vídeo são assíncronos, a qualidade de multimídia da sequência de multimídia é calculada de acordo com a qualidade de referência da sequência de multimídia, o fator de distorção da sequência de multimídia, e um fator de efeito da dessincronização de áudio e vídeo da sequência de multimídia, por exemplo, a equação (8) acima e a equação (15) ou (17) poderão ser usadas.

[0071] Deste modo, o método para avaliar a qualidade de multimídia de acordo com essa modalidade da presente invenção, ao determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o fator de distorção da sequência de multimídia, corresponde à sensibilidade subjetiva da pessoa, e poderá, de maneira precisa e efetiva, avaliar a qualidade de multimídia.

[0072] A Figura 5 é um fluxograma esquemático de um método 500 para avaliar a qualidade de multimídia de acordo com uma moda-lidade da presente invenção. Tal como mostrado na Figura 5, o método 500 inclui as etapas de:

[0073] S510: Dividir uma sequência de multimídia em N segmentos de multimídia, sendo que N é um número inteiro positivo e N é maior que ou igual a 2.

[0074] S520: Avaliar a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia.

[0075] S530: Determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada seg-mento de multimídia dos N segmentos de multimídia.

[0076] Para uma sequência de multimídia, devido a uma memória de curto prazo de uma pessoa, a qualidade de multimídia é entendida com uma memória mais profunda dentro de um período de tempo mais curto a partir do tempo presente. Nessa modalidade da presente in-venção, a sequência de multimídia é primeiramente dividida em múltiplos segmentos de multimídia, a qualidade de multimídia de cada segmento de multimídia é, em seguida, separadamente avaliada, e, em seguida, a qualidade de multimídia da sequência de multimídia é determinada de acordo com a qualidade de multimídia de cada segmento de multimídia.

[0077] Deste modo, o método para avaliar a qualidade de multimídia de acordo com essa modalidade da presente invenção, ao dividir a sequência de multimídia em segmentos, e determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada segmento de multimídia, é conveniente para a de- terminação da qualidade de multimídia da sequência de multimídia de acordo com um nível de atenção que é prestada pela pessoa com relação a cada segmento de multimídia, corresponde a uma característica de cognição da pessoa, e poderá aumentar a precisão de avaliação da qualidade de multimídia.

[0078] Na etapa S510, a sequência de multimídia é dividida nos N segmentos de multimídia. N é um número inteiro positivo, e N é maior que ou igual a 2, ou seja, a sequência de multimídia é dividida em pelo menos dois segmentos de multimídia.

[0079] Opcionalmente, a sequência de multimídia pode ser dividida em N segmentos de multimídia de acordo com uma duração. Por exemplo, ao se partir de um primeiro quadro da sequência de multimídia, a sequência de multimídia dentro de cada duração de L segundos é dividida em um segmento, sendo que o valor de L pode ser ajustado de acordo com uma situação específica.

[0080] Opcionalmente, a sequência de multimídia pode também ser dividida em N segmentos de multimídia de acordo com um nível de qualidade de multimídia, qualidade de vídeo, ou qualidade de áudio. As pessoas são suscetíveis a prestar atenção em um conteúdo relati-vamente especial em uma sequência de multimídia, por exemplo, uma imagem de vídeo afetada por um erro de bit, o som de um áudio dis-torcido, ou coisa do gênero. Por conseguinte, uma segmentação de multimídia considera o conteúdo de multimídia de baixa qualidade como um centro, e divide toda a sequência de multimídia em segmentos de multimídia consecutivos com a duração sendo de cerca de L segundos, sendo que o valor de L pode ser ajustado de acordo com a situação específica. Por exemplo, a segmentação pode ser feita de acordo com a seguinte maneira: 1. Partindo do primeiro quadro, deslizar uma janela de 0.8*L segundos, e calcular a qualidade de multimídia dentro de cada janela. 2. Selecionar uma posição de janela com a pior qualidade a fim de determinar um segmento de multimídia. 3. Excluir o segmento de multimídia selecionado, repetir as etapas 1 e 2 a fim de obter um novo segmento de multimídia, sendo que um intervalo é controlado para ser de 0 a 0.4*L segundos se o novo segmento de multimídia for adjacente ao determinado segmento de multimídia. 4. Repetir a etapa 3 a fim de dividir toda a sequência de multimídia. 5. Combinar um quadro de multimídia no intervalo dos segmentos de multimídia em um segmento de multimídia adjacente ao adotar uma forma de igual alocação a fim de implementar a completa segmentação de toda a sequência de multimídia.

[0081] Deve-se entender que a maneira acima da segmentação feita de acordo com a qualidade de multimídia pode também ser substituída por uma segmentação feita de acordo com a qualidade de vídeo ou a qualidade de áudio. Durante a segmentação feita de acordo com a qualidade de vídeo, uma unidade de comprimento pode ser um GOP (Grupo de Imagens, grupo de imagens) do vídeo, ou seja, um ou mais comprimentos de grupo GOP são usados como um segmento de multimídia.

[0082] Deve-se entender ainda que a maneira de se realizar uma segmentação na sequência de multimídia pode ser também uma outra maneira; por exemplo, o comprimento de cada segmento pode ser di-ferente; e, em um outro exemplo, durante a segmentação feita de acordo com a qualidade de multimídia, um segmento de multimídia com alta qualidade poderá ser primeiramente selecionado, ou coisa do gênero. Essa modalidade da presente invenção não se limita a uma forma específica na qual a sequência de multimídia é dividida em N segmentos de multimídia.

[0083] Na etapa S520, a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia é avaliada. Para cada segmento de multimídia, a qualidade de multimídia do segmento de multimídia pode ser obtida através de um cálculo de acordo com uma combinação de condições de qualidade e distorção do áudio e do vídeo de cada segmento de multimídia. A modalidade da presente invenção não se limita à maneira na qual a qualidade de multimídia de cada segmento de multimídia é avaliada. Para uma forma específica, a técnica anterior poderá ser usada, e o método acima 100 para avaliar uma qualidade de multimídia de acordo com a modalidade da presente invenção poderá também ser usado. Detalhes não serão providos novamente no presente documento.

[0084] Na etapa S530, a qualidade de multimídia da sequência de multimídia é determinada de acordo com a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia. Depois de a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia ser avaliada, a qualidade de multimídia da sequência de multimídia é obtida de acordo com a qualidade de multi-mídia dos N segmentos de multimídia.

[0085] Opcionalmente, a qualidade de multimídia da sequência de multimídia pode ser determinada ao realizar a média ponderada da qua-lidade de multimídia dos N segmentos de multimídia. Uma média pon-derada pode ser realizada sobre a qualidade de multimídia dos N seg-mentos de multimídia com base em um igual valor de ponderação, e uma média ponderada pode também ser realizada sobre a qualidade de multimídia dos N segmentos de multimídia com base em um valor de ponderação relacionado à qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia, por exemplo, uma qualidade de multimídia inferior de um segmento de multimídia indica uma ponderação maior. Por exemplo, a qualidade da sequência de multimí- dia pode ser determinada ao se usar a seguinte equação (19):

- sendo que m indica um segmento de multimídia mth na sequência de multimídia, Qav,m é a qualidade de multimídia do segmento de multimí- dia mth, wm é seu valor de ponderação, e pode ser uma constante igual, ou uma ponderação que é aplicada de acordo com um nível de qualidade de multimídia.

[0086] Uma vez que as pessoas esquecem coisas com facilidade,um segmento de multimídia que é visto por último é notável, e a memória sobre um segmento de multimídia que é visto antes é relativamente difusa. Sendo assim, uma média ponderada pode também ser feita sobre a qualidade de multimídia dos N segmentos de multimídia com base em um valor de ponderação relacionado a um tempo de cada segmento de multimídia dos N segmentos de multimídia, por exemplo, uma distância temporal mais curta entre um tempo do segmento de multimídia e um tempo de classificação corrente indica um maior valor de ponderação. Por exemplo, a qualidade da sequência de multimídia pode ser determinada ao se usar a seguinte equação (20):

- sendo que tm é uma distância temporal entre um tempo do segmento de multimídia mth e o tempo de classificação corrente, e wtm é um valor de ponderação relacionado a essa distância temporal.

[0087] Uma média ponderada pode também ser realizada sobre a qualidade de multimídia dos N segmentos de multimídia com base em um valor de ponderação relacionado à qualidade de multimídia e a um tempo de cada segmento de multimídia dos N segmentos de multimídia. Por exemplo, a qualidade da sequência de multimídia pode ser determinada ao se usar a seguinte equação (21):

- sendo que wm é o valor de ponderação relacionado à qualidade de multimídia, wtm é o valor de ponderação relacionado à distância temporal, e os dois valores de ponderação podem também ser combinados em um valor de ponderação, o qual é não apenas relacionado à qualidade de multimídia, mas também relacionado à distância temporal.

[0088] Os olhos de uma pessoa facilmente notam um segmento de multimídia com uma qualidade inferior, e o pior segmento de multimídia poderá refletir a qualidade de toda a sequência de multimídia. Deste modo, os K segmentos de multimídia com a pior qualidade de multimídia poderão opcionalmente ser selecionados a partir dos N segmentos de multimídia, e a qualidade de multimídia da sequência de multimídia é determinada ao realizar a média ponderada da qualidade de multimídia dos K segmentos de multimídia, sendo que K é um número inteiro positivo, e K é maior que ou igual a 1 e menor que N, e um valor específico de K pode ser definido de acordo com um cenário de aplicação corrente. Para uma maneira na qual a média ponderada é realizada sobre a qualidade de multimídia dos K segmentos de multimídia, veja a maneira acima na qual a média ponderada é feita sobre a qualidade de multimídia dos N segmentos de multimídia, ou seja, a média ponderada pode ser realizada sobre a qualidade de multimídia dos K segmentos de multimídia com base em um igual valor de ponderação, ou com base em um valor de ponderação relacionado à qualidade de multimídia e/ou a um tempo de cada segmento de multimídia dos K segmentos de multimídia.

[0089] Opcionalmente, se a média ponderada for realizada com base no mesmo valor de ponderação, a qualidade da sequência de multi-mídia poderá ser determinada ao se usar a seguinte equação (22):

- sendo que k indica um segmento de multimídia kth com a pior quali- dade na sequência de multimídia, e Qav,k é a qualidade de multimídia do segmento de multimídia kth com a pior qualidade na sequência de multimídia.

[0090] Opcionalmente, se a média ponderada for realizada com base no valor de ponderação relacionado à qualidade de multimídia de cada segmento de multimídia dos K segmentos de multimídia, a quali-dade da sequência de multimídia poderá ser determinada ao se usar a seguinte equação (23):

- sendo que Wk é o valor de ponderação relacionado à qualidade de multimídia.

[0091] Opcionalmente, se a média ponderada for realizada com base no valor de ponderação relacionado ao tempo de cada segmento de multimídia dos K segmentos de multimídia, a qualidade da sequência de multimídia poderá ser determinada ao se usar a seguinte equação (24):

- sendo que tk é o valor de ponderação relacionado ao tempo.

[0092] Opcionalmente, se a média ponderada for realizada com base no valor de ponderação relacionado à qualidade de multimídia e ao tempo de cada segmento de multimídia dos K segmentos de multimídia, a qualidade da sequência de multimídia poderá ser determinada ao se usar a seguinte equação (25):

[0093] Sendo assim, o método para avaliar uma qualidade de mul- timídia de acordo com essa modalidade da presente invenção, ao dividir a sequência de multimídia em segmentos, e, em seguida, determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada segmento de multimídia, é conveniente para a determinação da qualidade de multimídia da sequência de multimídia de acordo com o nível de atenção que é prestada pela pessoa com relação a cada segmento de multimídia de acordo com a característica de cognição da pessoa, e pode aumentar a precisão de avaliação da qualidade de multimídia.

[0094] Deve-se entender que, nas modalidades da presente invenção, um valor de um número de sequências de cada etapa não indica uma ordem de execução, e a ordem de execução das etapas deve ser determinada de acordo com uma função e uma lógica inerente da mesma, e não deve constituir uma limitação sobre um processo de implementação das modalidades da presente invenção.

[0095] Com referência à Figura 1 à Figura 5, o acima apresentado descreve em detalhe o método para avaliar uma qualidade de multimídia de acordo com as modalidades da presente invenção. Com referência à Figura 6 à Figura 9, o acima apresentado descreve um aparelho para avaliar uma qualidade de multimídia de acordo com as modalidades da presente invenção.

[0096] A Figura 6 é um diagrama em blocos esquemático de um aparelho 600 para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção. Tal como mostrado na Figura 6, o aparelho 600 inclui: - um primeiro módulo de obtenção 610 configurado de modo a obter a qualidade de referência de um vídeo e a qualidade final do vídeo de uma sequência de multimídia, e a qualidade de referência de um áudio e a qualidade final do áudio da sequência de multimídia; - um módulo de determinação de qualidade de referência 620 configurado de modo a determinar a qualidade de referência da sequência de multimídia de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio que são obtidas pelo primeiro módulo de obtenção 610; - um módulo de determinação de valor de distorção 630 configurado de modo a determinar um valor de distorção da sequência de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio que são obtidas pelo primeiro módulo de obtenção 610; e - um módulo de determinação de qualidade de multimídia 640 configurado de modo a determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia que é determinada pelo módulo de determinação de qualidade de referência 620 e o valor de distorção da sequência de multimídia que é determinado pelo módulo de determinação de valor de distorção 630.

[0097] O aparelho para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, ao determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de dis- torção da sequência de multimídia, poderá refletir diretamente a distorção da sequência de multimídia de acordo com uma sensibilidade subjetiva de uma pessoa, e, por conseguinte, poderá, de maneira precisa e efetiva, avaliar a qualidade de multimídia.

[0098] Nessa modalidade da presente invenção, tal como mostrada na Figura 7, o módulo de determinação de valor de distorção 630 inclui opcionalmente: - uma primeira unidade de determinação 631 configurada de modo a determinar um valor de distorção do vídeo de acordo com a qualidade de referência do vídeo e a qualidade final do vídeo; - uma segunda unidade de determinação 632 configurada de modo a determinar um valor de distorção do áudio de acordo com a qualidade de referência do áudio e a qualidade final do áudio; e - uma terceira unidade de determinação 633 configurada de modo a determinar o valor de distorção da sequência de multimídia de acordo com o valor de distorção do vídeo e o valor de distorção do áudio.

[0099] Nessa modalidade da presente invenção, a terceira unidade de determinação 633 inclui opcionalmente: - uma primeira subunidade de determinação configurada de modo a determinar um fator de distorção do vídeo de acordo com a qualidade de referência do vídeo e o valor de distorção do vídeo; - uma segunda subunidade de determinação configurada de modo a determinar um fator de distorção do áudio de acordo com a qualidade de referência do áudio e o valor de distorção do áudio; - uma terceira subunidade de determinação configurada de modo a determinar um fator de distorção da sequência de multimídia de acordo com o fator de distorção do vídeo e o fator de distorção do áudio; e - uma quarta subunidade de determinação configurada de modo a determinar o valor de distorção da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o fator de distorção da sequência de multimídia.

[00100] Nessa modalidade da presente invenção, a terceira subuni- dade de determinação é ainda configurada de modo a determinar um fator de distorção dav da sequência de multimídia de acordo com a seguinte equação:

- sendo que dv e da são, respectivamente, o fator de distorção do ví- deo e o fator de distorção do áudio, e a5 , a6, e a7 são as constantes.

[00101] Nessa modalidade da presente invenção, tal como mostrado na Figura 8, o aparelho 600 para avaliar uma qualidade de multimídia inclui ainda: - um segundo módulo de obtenção 650 configurado de modo a obter um fator de efeito da dessincronização de áudio e vídeo da sequência de multimídia.

[00102] O módulo de determinação de qualidade de multimídia 640 é ainda configurado de modo a determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da se-quência de multimídia, o valor de distorção da sequência de multimídia, e o fator de efeito da dessincronização de áudio e vídeo da sequência de multimídia que é obtido pelo segundo módulo de obtenção 650.

[00103] Nessa modalidade da presente invenção, o módulo de de-terminação de qualidade de multimídia 640 é ainda configurado de modo a determinar a qualidade de multimídia Qav da sequência de multimídia de acordo com a seguinte equação:

- sendo que Qav ' é a qualidade de referência da sequência de multimídia, Dav é o valor de distorção da sequência de multimídia, f5 (ΔTsyn1 e f (ΔT ) „ , . . 6 syn são os fatores de efeito da dessincronização de áudio e vídeo . Δ T . da sequência de multimídia, e syn é uma diferença de tempo da des- sincronização de áudio e vídeo da sequência de multimídia; e um maior lΔTsyn\ indica um maior f5 (ΔTsyn) e um menor f6 (ΔTsyn 1.

[00104] O aparelho para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, ao determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia, poderá refletir diretamente a distorção da sequência de multimídia de acordo com a sensibilidade subjetiva da pessoa, e, por conseguinte, poderá, de maneira precisa e efetiva, avaliar a qualidade de multimídia.

[00105] A Figura 9 é um diagrama em blocos esquemático de um aparelho 900 para avaliar uma qualidade de multimídia de acordo com uma modalidade da presente invenção. Tal como mostrado na Figura 9, o aparelho 900 inclui: - um módulo de segmentação 910 configurado de modo a dividir uma sequência de multimídia em N segmentos de multimídia, sendo que N é um número inteiro positivo e N é maior que ou igual a 2; - um módulo de avaliação 920 configurado de modo a avaliar a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia; e - um módulo de processamento 930 configurado de modo a determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada segmento de multimídia dos N segmentos de multimídia.

[00106] O aparelho para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, ao dividir a se-quência de multimídia em segmentos, e determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada segmento de multimídia, é conveniente para a de-terminação da qualidade de multimídia da sequência de multimídia de acordo com um nível de atenção que é prestada por uma pessoa com relação a cada segmento de multimídia de acordo com uma caracterís-tica de cognição da pessoa, e poderá aumentar uma precisão de ava-liação da qualidade de multimídia.

[00107] Nessa modalidade da presente invenção, o módulo de segmentação 910 inclui opcionalmente: - uma primeira unidade de segmentação configurada de modo a dividir a sequência de multimídia nos N segmentos de multimídia de acordo com uma duração.

[00108] Nessa modalidade da presente invenção, o módulo de segmentação 910 inclui opcionalmente: - uma segunda unidade de segmentação configurada de modo a dividir a sequência de multimídia nos N segmentos de multimídia de acordo com um nível de qualidade de multimídia, qualidade de vídeo, ou qualidade de áudio.

[00109] Nessa modalidade da presente invenção, o módulo de avaliação 920 inclui: - uma primeira unidade de obtenção configurada de modo a obter a qualidade de referência de um vídeo e a qualidade final do vídeo de cada segmento de multimídia, e a qualidade de referência de um áudio e a qualidade final do áudio de cada segmento de multimídia; - uma unidade de determinação de qualidade de referência configurada de modo a determinar a qualidade de referência de cada segmento de multimídia de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio; - uma unidade de determinação de valor de distorção confi-gurada de modo a determinar um valor de distorção de cada segmento de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio; e - uma unidade de avaliação configurada de modo a deter-minar a qualidade de multimídia de cada segmento de multimídia de acordo com a qualidade de referência de cada segmento de multimídia e o valor de distorção de cada segmento de multimídia.

[00110] Nessa modalidade da presente invenção, o módulo de avaliação 920 inclui ainda opcionalmente: - uma segunda unidade de obtenção configurada de modo a obter um fator de efeito da dessincronização de áudio e vídeo de cada segmento de multimídia.

[00111] A unidade de avaliação é ainda configurada de modo a determinar a qualidade de multimídia de cada segmento de multimídia de acordo com a qualidade de referência de cada segmento de multimídia, o valor de distorção de cada segmento de multimídia, e o fator de efeito da dessincronização de áudio e vídeo de cada segmento de multimídia.

[00112] Nessa modalidade da presente invenção, o módulo de pro-cessamento 930 é ainda configurado de modo a determinar a qualidade de multimídia da sequência de multimídia ao realizar a média ponderada da qualidade de multimídia dos N ou K segmentos de multimídia, sendo que os K segmentos de multimídia são os K segmentos de multimídia com a pior qualidade de multimídia dentre os N segmentos de multimídia, e K é um número inteiro positivo e K é maior que ou igual a 1 e menor que N.

[00113] Nessa modalidade da presente invenção, o módulo de pro-cessamento 930 inclui opcionalmente: - uma primeira unidade de processamento configurada de modo a determinar a qualidade de multimídia da sequência de multimídia com base em um igual valor de ponderação, e ao realizar a média ponderada da qualidade de multimídia dos N ou K segmentos de multimídia.

[00114] Nessa modalidade da presente invenção, o módulo de pro-cessamento 930 inclui opcionalmente: - uma segunda unidade de processamento configurado de modo a determinar a qualidade de multimídia da sequência de multimídia com base em um valor de ponderação relacionado à qualidade de multimídia de cada segmento de multimídia dos N ou K segmentos de multimídia, e ao realizar a média ponderada da qualidade de multimídia dos N ou K segmentos de multimídia.

[00115] Nessa modalidade da presente invenção, o módulo de pro-cessamento 930 inclui opcionalmente: - uma terceira unidade de processamento configurada de modo a determinar a qualidade de multimídia da sequência de multimídia com base em um valor de ponderação relacionado a um tempo de cada segmento de multimídia dos N ou K segmentos de multimídia, e ao realizar a média ponderada da qualidade de multimídia dos N ou K segmentos de multimídia.

[00116] Nessa modalidade da presente invenção, o módulo de pro-cessamento 930 inclui opcionalmente: - uma quarta unidade de processamento configurada de modo a determinar a qualidade de multimídia da sequência de multimídia com base em um valor de ponderação relacionado à qualidade de multimídia e a um tempo de cada segmento de multimídia dos N ou K segmentos de multimídia, e ao realizar a média ponderada da qualidade de multimídia dos N ou K segmentos de multimídia.

[00117] O aparelho para avaliar uma qualidade de multimídia de acordo com essa modalidade da presente invenção, ao dividir a sequência de multimídia em segmentos, e determinar a qualidade de multimídia da sequência de multimídia de acordo com a qualidade de multimídia de cada segmento de multimídia, é conveniente para a determinação da qualidade de multimídia da sequência de multimídia de acordo com o nível de atenção que é prestada pela pessoa com relação a cada segmento de multimídia de acordo com a característica de cognição da pessoa, e poderá aumentar a precisão de avaliação da qualidade de multimídia.

[00118] Deve-se entender que o termo "e/ou" nessa modalidade da presente invenção descreve tão somente uma relação de associação para a descrição de objetos associados e representa que três relações podem existir. Por exemplo, A e/ou B podem representar os seguintes três casos: Somente A existe, ambos A e B existem, e somente B existe. Além disso, o caractere "/" no presente relatório descritivo, de modo geral, indica uma relação "ou" entre os objetos associados.

[00119] Uma pessoa com conhecimento simples na técnica pode ficar ciente que, em combinação com os exemplos descritos nas modalidades apropriadas nesse relatório descritivo, etapas de unidades e de algoritmos podem ser implementadas por um hardware eletrônico ou por uma combinação de software de computador e hardware eletrônico. Quer as funções sejam realizadas por hardware ou software dependerá das aplicações particulares e condições de limitação de desenho das soluções técnicas. Uma pessoa versada na técnica poderá usar diferentes métodos no sentido de implementar as funções descritas para cada aplicação em particular, porém isto não deve ser considerado quando a implementação vai além do escopo de aplicação da presente invenção.

[00120] Uma pessoa versada na técnica poderá claramente enten- der que, para o propósito de uma breve e adequada descrição, com relação a um processo de trabalho detalhado do sistema, aparelho e unidade acima apresentados, referência pode ser feita a um processo correspondente nas modalidades de método acima, cujos detalhes não são descritos novamente no presente documento.

[00121] Nas diversas modalidades providas no presente pedido, deve ficar entendido que o sistema, aparelho e método apresentados podem ser implementados de outras maneiras. Por exemplo, a modalidade de aparelho descrita é tão somente exemplar. Por exemplo, a divisão de unidade é simplesmente uma divisão de função lógica e pode ser uma outra divisão na implementação em questão. Por exemplo, uma pluralidade de unidades ou componentes pode ser combinada ou integrada em um outro sistema, ou alguns aspectos podem ser ignorados ou não executados. Além disso, os acoplamentos mútuos ou os acoplamentos diretos exibidos ou apresentados ou ainda as conexões de comunicação podem ser implementados através de algumas interfaces. Os acoplamentos indiretos ou as conexões de comunicação entre os aparelhos ou unidades podem ser implementados de maneira eletrônica, mecânica, ou de outras formas.

[00122] As unidades descritas como peças separadas poderão ou não ser fisicamente separadas, e as peças exibidas como unidades poderão ou não ser unidades físicas, poderão ser localizadas em uma posição, ou poderão ser distribuídas em uma pluralidade de unidades de rede. Uma parte ou todas as unidades podem ser selecionadas conforme necessário no sentido de se atingir os objetivos das soluções das modalidades.

[00123] Além disso, as unidades funcionais nas modalidades da presente invenção podem ser integradas a uma unidade de processamento, ou cada uma das unidades podem existir fisicamente isoladas, ou duas ou mais unidades podem ainda ser integradas a uma unidade.

[00124] Quando as funções são implementadas sob a forma de unidade de software funcional e vendidas ou usadas como um produto independente, as funções podem ser armazenadas em um meio de armazenamento legível por computador. Com base em tal entendimento, as soluções técnicas da presente invenção essencialmente, ou a parte que contribui para a técnica anterior, ou uma parte das soluções técnicas poderão ser implementadas sob a forma de um produto de software. O produto de software é armazenado em um meio de armazenamento, e inclui várias instruções a fim de instruir um dispositivo de computador (que pode ser um computador pessoal, um servidor, ou um dispositivo de rede) na realização de todas ou uma parte das etapas dos métodos descritos nas modalidades da presente invenção. O meio de armazenamento acima referido inclui: qualquer meio que possa armazenar um código de programa, tal como uma unidade USB flash, um disco rígido removível, uma memória somente de leitura (ROM, "Read Only Memory"), uma memória de acesso aleatório (RAM, "Random Access Memory"), um disco magnético, ou um disco óptico.

[00125] As descrições feitas acima são apenas formas específicas de implementação da presente invenção, e também não pretendem limitar o escopo de proteção da presente invenção. Qualquer variação ou substituição prontamente imaginada pelas pessoas versadas na técnica dentro do escopo técnico descrito na presente invenção devem recair dentro do escopo de proteção da presente invenção. Deste modo, o escopo de proteção da presente invenção deve ficar sujeito ao escopo de proteção das concretizações.

Claims

1. Método para avaliar qualidade de multimídia, caracteri-zado pelo fato de que compreende as etapas de: obter (S110) qualidade de referência ?. . .... de um vídeo e qualidade final Q. do vídeo de uma sequência de multimídia, e quali-dade de referência <. ..... de um áudio e qualidade final do áudio da sequência de multimídia, em que a qualidade de referência do vídeo é qualidade de compressão de vídeo que é causada devido à compressão de codificação do vídeo, a qualidade de referência do áudio é qualidade de compressão de áudio que é causada devido à compressão de codificação do áudio, e a qualidade final do vídeo e a qualidade final do áudio são a qualidade de experiência final obtida do vídeo e do áudio da sequência de multimídia, onde dano à rede ocorre separadamente no vídeo e no áudio; determinar (S120) qualidade de referência da sequên cia de multimídia de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio; determinar (S130) um valor de distorção s . . da sequência de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio; e determinar (S140) qualidade de multimídia <.. da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o valor de distorção da sequência de multimídia como

em que a etapa de determinar (S130) um valor de distorção da sequência de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio compreende: determinar (S131) um valor de distorção 3. do vídeo de acordo com a qualidade de referência do vídeo e a qualidade final do vídeo como

determinar (S132) um valor de distorção 3 . do áudio de acordo com a qualidade de referência do áudio e a qualidade final do áudio como

determinar (S133) o valor de distorção da sequência de multimídia de acordo com o valor de distorção do vídeo e o valor de distorção do áudio; em que a etapa de determinar (S133) o valor de distorção da sequência de multimídia de acordo com o valor de distorção do vídeo e o valor de distorção do áudio compreende: determinar um fator de distorção s.. do vídeo de acordo com a qualidade de referência do vídeo e o valor de distorção do video como

determinar um fator de distorção s. do áudio de acordo com a qualidade de referência do áudio e o valor de distorção do audio como

determinar um fator de distorção À da sequência de mul- timídia de acordo com o fator de distorção do vídeo e o fator de distorção do áudio; e determinar o valor de distorção da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o fator de distorção da sequência de multimídia; em que a etapa de determinar um fator de distorção da se-quência de multimídia de acordo com o fator de distorção do vídeo e o fator de distorção do áudio compreende: determinar o fator de distorção À ,. da sequência de multi-mídia de acordo com uma dentre as seguintes equações:

em que :, e são constantes.

2. Aparelho para avaliar qualidade de multimídia, caracteri-zado pelo fato de que compreende: um primeiro módulo de obtenção (610) configurado para obter qualidade de referência ..... de um vídeo e qualidade final Ç: do vídeo de uma sequência de multimídia, e qualidade de referência Q . ..... de um áudio e qualidade final . do áudio da sequência de multimídia, em que a qualidade de referência do vídeo é qualidade de compressão de vídeo que é causada devido à compressão de codi-ficação do vídeo, a qualidade de referência do áudio é qualidade de compressão de áudio que é causada devido à compressão de codificação do áudio, e a qualidade final do vídeo e a qualidade final do áudio são a qualidade de experiência final obtida do vídeo e do áudio da sequência de multimídia, onde dano à rede ocorre separadamente no vídeo e no áudio; um módulo de determinação de qualidade de referência (620) configurado para determinar qualidade de referência da se-quência de multimídia de acordo com a qualidade de referência do vídeo e a qualidade de referência do áudio que são obtidas pelo primeiro módulo de obtenção (610); um módulo de determinação de valor de distorção (630) configurado para determinar um valor de distorção 3.. da sequência de multimídia de acordo com a qualidade de referência do vídeo, a qualidade final do vídeo, a qualidade de referência do áudio, e a qualidade final do áudio que são obtidas pelo primeiro módulo de obtenção (610); e um módulo de determinação de qualidade de multimídia (640) configurado para determinar qualidade de multimídia da se quência de multimídia de acordo com a qualidade de referência da se-quência de multimídia que é determinada pelo módulo de determinação de qualidade de referência (620) e o valor de distorção da sequência de multimídia que é determinado pelo módulo de determinação de valor de distorção (630), como

em que o módulo de determinação de valor de distorção (630) compreende: uma primeira unidade de determinação (631) configurada para determinar um valor de distorção 3. do vídeo de acordo com a qualidade de referência do vídeo e a qualidade final do vídeo como

uma segunda unidade de determinação (632) configurada para determinar um valor de distorção 3. do áudio de acordo com a qualidade de referência do áudio e a qualidade final do áudio como

uma terceira unidade de determinação (633) configurada para determinar o valor de distorção À da sequência de multimídia de acordo com o valor de distorção do vídeo e o valor de distorção do áudio; em que a terceira unidade de determinação (633) com-preende: uma primeira subunidade de determinação configurada para determinar um fator de distorção s:. do vídeo de acordo com a qualidade de referência do vídeo e o valor de distorção do vídeo como

uma segunda subunidade de determinação configurada para determinar um fator de distorção s. do áudio de acordo com a qua- lidade de referência do áudio e o valor de distorção do áudio como

uma terceira subunidade de determinação configurada para determinar um fator de distorção da sequência de multimídia de acordo com o fator de distorção do vídeo e o fator de distorção do áudio; e uma quarta subunidade de determinação configurada para determinar o valor de distorção da sequência de multimídia de acordo com a qualidade de referência da sequência de multimídia e o fator de distorção da sequência de multimídia; em que a terceira subunidade de determinação é ainda configurada para determinar o fator de distorção da sequência de multimídia de acordo com uma dentre as seguintes equações:

em que a5, a6 e a7são constantes.