BR112014020225B1 - Método de codificação de vídeo em comunicações de vídeo com múltiplas pessoas e terminal - Google Patents
Método de codificação de vídeo em comunicações de vídeo com múltiplas pessoas e terminal Download PDFInfo
- Publication number
- BR112014020225B1 BR112014020225B1 BR112014020225-7A BR112014020225A BR112014020225B1 BR 112014020225 B1 BR112014020225 B1 BR 112014020225B1 BR 112014020225 A BR112014020225 A BR 112014020225A BR 112014020225 B1 BR112014020225 B1 BR 112014020225B1
- Authority
- BR
- Brazil
- Prior art keywords
- video
- encoding
- important
- terminal
- common
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/115—Selection of the code volume for a coding unit prior to coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/127—Prioritisation of hardware or computational resources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/152—Multipoint control units therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/155—Conference systems involving storage of or access to video conference sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/162—User input
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
resumo patente de invenção: "método de codificação de vídeo em comunicações de vídeo com múltiplas pessoas e terminal". a presente invenção refere-se a um método e a um terminal para a codificação de vídeo nas comunicações de vídeo com múltiplas partes. o método inclui: depois que um terminal x se une em uma comunicação de vídeo com múltiplas partes, a, determinar respectivamente um número de codificadores de vídeo importante em uso e um número de codificadores de vídeo comum em uso do terminal; b, de acordo com uma capacidade de processamento do terminal e um resultado de determinação mais novo, determinar respectivamente um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar a codificação de vídeo de acordo com os parâmetros de codificação determinados recentemente. a presente invenção fornece ainda um terminal. de acordo com a solução da presente invenção, a qualidade da comunicação de vídeo geral pode ser aprimorada.
Description
Relatório Descritivo da Patente de Invenção para MÉTODO DE CODIFICAÇÃO DE VÍDEO EM COMUNICAÇÕES DE VÍDEO COM MÚLTIPLAS PESSOAS E TERMINAL.
Campo da Invenção [001] A presente invenção refere-se às técnicas de comunicação de vídeo com múltiplas partes e, mais particularmente, a um método e a um sistema para a codificação de vídeo em uma comunicação de vídeo com múltiplas partes.
Antecedentes da Invenção [002] Com o desenvolvimento e a popularização das técnicas da Internet e de rádio comunicação, as comunicações de vídeo, como chat de vídeo em grupo, conferência de vídeo e vídeo game de rede tornam as negociações entre as pessoas mais convenientes e tornam as maneiras de entretenimento mais ricas. Portanto, as comunicações de vídeo atraem mais e mais atenções das pessoas. As comunicações de vídeo com múltiplas partes se referem a uma comunicação de vídeo instantânea em que três ou mais pessoas participam ao mesmo tempo. [003] Nas comunicações de vídeo com múltiplas partes, múltiplos canais de dados de vídeo precisam ser processados. A fim de atender ao requisito das condições de rede dos múltiplos canais, um terminal que participa nas comunicações de vídeo com múltiplas partes inclui, em geral, múltiplos codificadores de vídeo. Em geral, a codificação de vídeo tem uma alta complexidade de computação. A complexidade de computação da codificação de vídeo sincronizada de múltiplos canais é mais alta. Portanto, no caso em que o terminal tem capacidade de processamento limitada, um parâmetro de codificação de cada codificador de vídeo deveria ser configurado de maneira razoável, de modo a controlar a complexidade de computação de maneira razoável. Sumário da Invenção [004] Os exemplos da presente invenção fornecem um método
2/19 para codificação de vídeo em uma comunicação de vídeo com múltiplas partes.
[005] A solução técnica da presente invenção é da seguinte forma. [006] Um método para codificação de vídeo nas comunicações de vídeo com múltiplas partes, depois que um terminal X se une em uma comunicação de vídeo com múltiplas partes, o método inclui: determinar respectivamente um número de codificadores de vídeo importante em uso e um número de codificadores de vídeo comum em uso do terminal;
de acordo com uma capacidade de processamento do terminal e um resultado de determinação, determinar respectivamente um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar a codificação de vídeo de acordo com os parâmetros de codificação determinados recentemente.
[007] Um terminal, que inclui um ou mais codificadores de vídeo importante, um ou mais codificadores de vídeo comum e um módulo de ajuste adaptativo;
o módulo de ajuste adaptativo é adaptado para determinar, depois que o terminal se une em uma comunicação de vídeo com múltiplas partes, o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso; e determinar, de acordo com uma capacidade de processamento do terminal e um resultado mais novo determinado, um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar respectivamente a codificação de vídeo de acordo com os parâmetros
3/19 de codificação determinados recentemente.
[008] Um meio de armazenamento legível por computador não transitório, que inclui um conjunto de instruções para a codificação de vídeo nas comunicações de vídeo com múltiplas partes, o conjunto de instruções para direcionar pelo menos um processador a realizar o método fornecido presente invenção.
[009] Pode-se observar a partir da solução técnica acima que, com relação a cada terminal que participa nas comunicações de vídeo com múltiplas partes, o parâmetro de codificação do vídeo importante e o parâmetro de codificação do vídeo comum são determinados de acordo com a capacidade de processamento do terminal e o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso. Assim, os recursos de computação no terminal podem ser utilizados de forma mais razoável e a qualidade de comunicação de vídeo geral é aumentada.
Breve Descrição dos Desenhos [0010] As figuras utilizadas nas descrições dos exemplos a seguir ou técnicas existentes são aqui introduzidas de maneira breve para tornar a solução técnica da presente descrição mais clara. Observa-se que, as figuras a seguir são apenas alguns exemplos. Os versados na técnica poderíam ter muitas variações de acordo com essas figuras sem um trabalho da invenção.
[0011] A FIGURA 1 é um fluxograma que ilustra um método para a codificação de vídeo em uma comunicação de vídeo com múltiplas partes de acordo com um exemplo da presente invenção;
[0012] a FIGURA 2 é um diagrama esquemático que ilustra a determinação da taxa de quadro de codificação mais alta do vídeo importante e da taxa de quadro de codificação mais alta do vídeo comum do terminal X de acordo com um exemplo da presente invenção; [0013] a FIGURA 3 é um diagrama esquemático que ilustra uma
4/19 estrutura de um terminal de acordo com um exemplo da presente invenção.
Descrição Detalhada da Invenção [0014] Em uma aplicação prática, um parâmetro de codificação uniforme, por exemplo, uma maior taxa de codificação de quadro configurada para cada codificador de vídeo de cada um dos terminais de acordo com uma capacidade média de processamento ou de acordo com as capacidades de processamento da maioria dos terminais. Cada codificador de vídeo executa a codificação de vídeo de acordo com a taxa de quadros de codificação uniforme mais alta configurada e transmite os dados codificados.
[0015] No entanto, o terminal que participa na comunicação de vídeo de múltiplas partes pode ser um terminal convencional, por exemplo, um computador pessoal (PC), ou pode ser um dispositivo eletrônico portátil, tal como um telefone celular ou um computador portátil. Há uma grande diferença na capacidade de processamento de diferentes tipos de terminais. Assim, se o parâmetro de codificação uniforme é configurado para cada codificador de vídeo de cada um dos terminais, um problema a seguir pode existir: para um terminal com uma elevada capacidade de processamento, os recursos de computação são desperdiçados e uma melhor qualidade de comunicação de vídeo não pode ser alcançada. Para um terminal com uma capacidade de processamento baixa, a qualidade da comunicação de vídeo é diminuída.
[0016] Qualquer que seja uma das situações acima que surgem, os recursos computacionais do terminal não podem ser utilizados de maneira razoável. Assim, a qualidade da comunicação de vídeo em geral é afetada.
[0017] A fim de solucionar o problema nas técnicas existentes, um exemplo da presente invenção fornece uma solução aprimorada de
5/19 codificação de vídeo usada nas comunicações de vídeo com múltiplas partes.
[0018] A presente invenção é descrita mais adiante neste documento em mais detalhes com referência aos desenhos anexos e aos exemplos para tornar a solução técnica e os méritos aqui mais claros.
[0019] A FIGURA 1 é um fluxograma que ilustra um método de codificação de vídeo em uma comunicação de vídeo com múltiplas partes de acordo com um exemplo da presente invenção. Depois que um terminal X se une nas comunicações de vídeo com múltiplas partes, as operações conforme mostrado na FIGURA 1 são executadas. Conforme mostrado na FIGURA 1, o método inclui o seguinte.
[0020] No bloco 11, o terminal X determina respectivamente o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso.
[0021] Para facilitar a descrição, no exemplo da presente invenção, o terminal X refere-se a qualquer terminal, por exemplo, um computador pessoal (PC), um telefone celular, um computador palmtop, etc.
[0022] No exemplo, os vídeos são divididos em vídeo importante e vídeos comuns de acordo com um grau de foco. O vídeo importante refere-se a um vídeo com um grau de foco relativamente alto, isto é, um vídeo que pode ser focado. O vídeo comum refere-se a um vídeo com um grau de foco relativamente baixo. Em geral, um vídeo importante tem uma resolução alta, enquanto o vídeo comum tem uma resolução baixa. O vídeo comum ou o vídeo importante podem ser determinados através da comparação do seu grau de foco com um valor predefinido, ou podem ser determinado por um usuário do terminal, ou de outras maneiras, que não são restritas na presente invenção.
[0023] Depois que o terminal X se une nas comunicações de vídeo com múltiplas partes, uma conexão de vídeo precisa ser estabelecida
6/19 entre o terminal X e cada terminal remoto nas comunicações de vídeo com múltiplas partes. O usuário do terminal X pode determinar de acordo com o seu requisito que cada vídeo remoto é um vídeo importante ou um vídeo comum. O usuário também pode comutar um vídeo importante em um vídeo comum durante a comunicação, ou vice-versa. Por exemplo, o usuário pode focar menos em um vídeo remoto e configurá-lo como um vídeo comum. Consequentemente, o usuário precisa focar nesse vídeo por alguns motivos. Nesse momento, o usuário pode comutá-lo para um vídeo importante através do clique de um botão em uma interface de usuário. De modo similar, cada terminal remoto participa nas comunicações de vídeo com múltiplas partes também pode configurar o vídeo gerado pelo terminal X como um vídeo importante ou um vídeo comum de acordo com seus requisitos. A operação de comutação também pode ser realizada durante a comunicação.
[0024] Em um exemplo, o terminal X usa um codificador de vídeo para cada terminal remoto. Em outros casos, o terminal X também pode usar um codificador de vídeo para uma pluralidade de terminais remotos.
[0025] Assim, se houver n usuários remotos que configuram o vídeo gerado pelo terminal X como um vídeo importante, o terminal X solicita os codificadores de vídeo importante nb(nb<n). Se os m usuários remotos configuram o vídeo gerado pelo terminal X como um vídeo comum, o terminal X solicita os codificadores de vídeo comum mc(mc <m).
[0026] Nesse bloco, o terminal X determina respectivamente o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso.
[0027] No bloco 12, o terminal X determina respectivamente, de acordo com uma capacidade de processamento do terminal X e um
7/19 resultado mais novo determinado, um parâmetro de codificação para o vídeo importante e um parâmetro de codificação para o vídeo comum, e informa cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar a codificação de vídeo de acordo com os parâmetros de codificação determinados.
[0028] Uma vez que o grau de foco do vídeo importante é mais alto que do vídeo comum, diferentes parâmetros de codificação podem ser adotados para o vídeo importante e o vídeo comum. O parâmetro de codificação inclui principalmente uma taxa de quadro de codificação mais alta. Certamente, em uma aplicação prática, o parâmetro de codificação pode incluir outros parâmetros, que pode ser determinado de acordo com um requisito prático.
[0029] A taxa de quadro de codificação mais alta do vídeo importante pode ser aumentada até certo ponto, tal que os recursos de computação limitados são concentrados no vídeo importante que tem alto grau de foco. Assim, o vídeo importante pode ter uma melhor qualidade e a experiência do usuário é aprimorada.
[0030] No entanto, com o aumento da resolução do vídeo importante, isto é, com o aumento da taxa de quadro de codificação mais alta do vídeo importante, o consumo do recurso de computações do terminal aumenta dramaticamente. Portanto, ao mesmo tempo em que aumenta a taxa de quadro de codificação mais alta do vídeo importante, também é desejado controlar o consumo dos recursos de computação dentro de uma capacidade de processamento do terminal. [0031] De acordo com o método acima de codificação de vídeo em comunicações de vídeo com múltiplas partes, para cada terminal que participa nas comunicações de vídeo com múltiplas partes, é possível determinar um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum de acordo com a sua capacidade de processamento e o número de codificadores de vídeo
8/19 importante em uso e o número de codificadores de vídeo comum em uso. O recurso de computação do terminal pode ser utilizado de maneira mais razoável e a qualidade da comunicação de vídeo é aprimorada.
[0032] A FIGURA 2 é um diagrama esquemático que ilustra um processo para determinar uma taxa de quadro de codificação mais alta para um vídeo importante e determinar uma taxa de quadro de codificação mais alta para um vídeo comum pelo terminal X de acordo com um exemplo da presente invenção. Conforme mostrado na FIGURA 2, o método inclui o seguinte.
[0033] No bloco 21, de acordo com uma capacidade de processamento e um resultado mais novo determinado, o terminal X inicializa respectivamente uma taxa de quadro de codificação mais alta fb para o vídeo importante e uma taxa de quadro de codificação mais alta fs para o vídeo comum.
fb =fs=F/(m + nry, (1) em que m indica o número de codificadores de vídeo comum recentemente determinados;
n indica o número de codificadores de vídeo importante recentemente determinado;
r indica um fator de proporção do recurso de computação consumido por um vídeo importante com uma resolução de wb χ\para computar os recursos consumidos por um vídeo comum com uma resolução de wsxhs , pode ser calculado de acordo com uma proporção das resoluções para simplificar:
r = w&xV(XxA); (2) ou, também é possível obter, através de um experimento, uma proporção de uma taxa de codificação do vídeo importante com uma resolução de wfex/^para a taxa de codificação do vídeo comum com
9/19 uma resolução dewsxhs, e assumir a proporção da taxa de codificação como r, em que o experimento é realizado no terminal X;
F indica a capacidade de processamento do terminal X, expressa por uma taxa de quadro de codificação mais alta disponível para codificar um vídeo com uma resolução de wsxhs, pode ser calculado de acordo com uma fórmula a seguir:
F=JPSenC-Wusage’ (3) em que, Jpsenc indica uma velocidade de codificação (expressa por um número médio de quadros codificados em cada segundo) para codificar um vídeo com uma resolução de wsxhs pelo terminal X com carga total. É possível obter Jpsenc que corresponde aos processadores de diferentes frequências principais através de uma medição experimental e armazenar jpsencerr\ uma tabela; em que wusage indica uma taxa de uso desejada da operação de codificação ao processador do terminal X. O valor detalhado de wusage pode ser determinado de acordo com um requisito prático. Pode ser inserido e configurado pelo usuário e pode ser ajustado. Por exemplo, quando o terminal X é carregado de maneira suficiente, é possível configurar wusage =60%. Se o terminal X tiver baixa bateria ou o usuário desejar economizar energia, é possível configurar w = 20%.
usage
Legenda: enc= cod; usage= uso [0034] No bloco 22, fb é aumentada e fs é diminuída.
[0035] Nesse bloco, a taxa de quadro de codificação mais alta do vídeo importante é aumentada e a taxa de quadro de codificação mais alta do vídeo comum é diminuída. Por exemplo, deixar fb=fb+kf , fs =fs -δ/ , Δ/ > o. O valor de Δ/ pode ser determinado de acordo com um requisito prático, por exemplo, 1.
[0036] No bloco 23, é determinado se fbe fs recentemente obtidas
10/19 no bloco 22 atendem à condição predefinida, se sim, o bloco 22 é repetido; de outro modo, o bloco 24 é realizado.
[0037] Se fbe fs recentemente obtidas, isto é, /6e fs obtidas no bloco 22 atenderem às condições (a) e (b) a seguir ao mesmo tempo, o bloco 22 é repetido; de outro modo, o bloco 24 é realizado.
[0038] Condição (a) [0039] Um valor absoluto de uma diferença entre uma pontuação média de opinião (MOS) do vídeo importante e uma MOS do vídeo comum é menor que um valor predefinido ^ÍOSTheshold.
[0040] EMOSTheshold pode ser determinado de acordo com um requisito prático, por exemplo, 0,5.
legenda: threshold= limite [0041] A MOS é uma medição subjetiva da qualidade de um vídeo. Pode ser obtida mediante o cálculo de um valor médio das pontuações subjetivas de diferentes observadores, em geral, refletida pela escala de 5 pontos.
[0042] A MOS do vídeo importante pode ser determinada de acordo com a fb recentemente obtida, e a MOS do vídeo comum pode ser determinada de acordo com a recentemente obtida fs.
[0043] Nesse exemplo, a MOS pode ser calculada de acordo com uma fórmula a seguir:
MOS(f) = 5-a- [log(/„„) - log(/)]; (4)
OU, MOS,.„(/) = 5-ln(/m„//); (5) em que ae/7são fatores de cálculo;
/max indica a taxa de quadro de codificação mais alta possivelmente usada na comunicação de vídeo.
[0044] Em uma aplicação prática, a MOS que corresponde a cada taxa de quadro de codificação pode ser usada na comunicação de vídeo pode ser calculada de acordo com a fórmula (4) ou (5) e são
11/19 armazenadas sob a forma de uma tabela. Quando necessário, a MOS que corresponde a recentemente obtida fbe /pode ser obtida através da busca na tabela.
[0045] Em geral, deixar a=2, /7=1.4 , /max =30 , / = 1,2,3,...,30. Em seguida, a tabela calculada de acordo com a fórmula (4) inclui os conteúdos a seguir: (1, 1,5469), (2, 2,4902), (3, 3), (4, 3,3409), (5, 3,5923), (6, 3,7886), (7, 3,9479), (8, 4,0805), (9, 4,1932), (10, 4,2902), (11,4,3749), (12,4,4495),(13,4,5156), (14,4,5746),(15,4,6275), (16, 4,6752), (17, 4,7182), (18, 4,7571), (19, 4,7923), (20, 4,8242), (21, 4,8531), (22, 4,8792), (23, 4,9027), (24, 4,9238), (25, 4,9426), (26, 4,9591), (27, 4,9734), (28, 4,9853), (29, 4,9946), (30, 5). O primeiro elemento nos parênteses indica a taxa de quadro de codificação, isto é, f, o último elemento nos parênteses indica a MOS correspondente.
[0046] Suponha que a recentemente obtida fb é 10. Assim, ele é obtido através da busca na tabela e que a MOS do vídeo importante é 4,292. Suponha que a recentemente obtida fs é 8. Assim, ele é obtido através da busca na tabela que a MOS do vídeo comum é 4,0805.
[0047] Ou, a MOS que corresponde a recentemente obtida / e fs pode ser calculada diretamente de acordo com a fórmula (4) ou (5), em vez da busca na tabela.
[0048] Condição (b) [0049] Um consumo de recurso de computação total de todos os vídeos não excede a capacidade de processamento F do terminal X, isto é, m
(6) [0050] No bloco 24, a taxa de quadro de codificação mais alta do vídeo importante é determinada de acordo com a recentemente obtida fb, e a taxa de quadro de codificação mais alta do vídeo comum é obtida de acordo com a recentemente obtida fs, isto é, a recentemente obtida
12/19 fb-kf é assumida como a taxa de quadro de codificação mais alta do vídeo importante, a recentemente obtida fs+\fé assumida como a taxa de quadro de codificação mais alta do vídeo comum.
[0051] Um exemplo é dado para descrever os blocos 21 a 24 a seguir.
[0052] Suponha que inicializado fb = / = 15.
[0053] Em seguida, deixar /, = 16,/ = 14.
[0054] Determina-se que a condição predefinida é atendida quando /, = 16 e / = 14. Se sim, deixar /, = 17 e/ = 13. É determinado se a condição predefinida é atendida quando fb = 17 efs = 13. Se a condição não for atendida, 16 é assumido como a taxa de quadro de codificação mais alta do vídeo importante, e 14 é assumido como a taxa de quadro de codificação mais alta do vídeo comum.
[0055] Depois do processamento dos blocos 21 a 24, enquanto a taxa de quadro de codificação mais alta do vídeo importante é aumentada para ter uma qualidade mais alta, a diferença de qualidade subjetiva entre 0 vídeo importante e 0 vídeo comum é restrita dentro de uma faixa razoável. O consumo de recurso de computação também é controlado dentro da capacidade de processamento do terminal.
[0056] Além disso, com base no método acima de codificação de vídeo nas comunicações de vídeo com múltiplas partes, um bloco a seguir pode ser ainda incluído: se 0 terminal X determina que pelo menos um do número dos codificadores de vídeo importante em uso e 0 número dos codificadores de vídeo comum sofre alterações, os blocos 11 e 12 são executados novamente.
[0057] A alteração de pelo menos um do número dos codificadores de vídeo importante em uso e 0 número dos codificadores de vídeo comum pode incluir as seguintes situações: um número total de terminais participa na comunicação de vídeo aumenta ou diminui (isto é,
13/19 pelo menos um terminal entra ou sai), ou o número total de terminais não sofre alterações, mas uma comutação acontece que comuta um vídeo importante para um vídeo comum ou vice-versa (por exemplo, um terminal remoto comuta o vídeo gerado pelo terminal X a partir de um vídeo importante para um vídeo comum), ou uma combinação das situações acima.
[0058] Nesse exemplo, os parâmetros de codificação podem ser determinados e ajustados de maneira eficaz de acordo com a alteração do número dos codificadores de vídeo importante e o número dos codificadores de vídeo comum, que ainda aprimora a qualidade da comunicação de vídeo.
[0059] O método termina depois que terminal X fecha.
[0060] Observa-se que, as fórmulas acima podem ter muitas variações ou modificações, se apenas o objetivo correspondente for alcançado.
[0061] Agora, o método fornecido pelo exemplo da presente invenção foi descrito.
[0062] Com base na descrição acima, a FIGURA 3 é um diagrama esquemático que ilustra uma estrutura de um terminal de acordo com um exemplo da presente invenção. Conforme mostrado na FIGURA 3, o terminal inclui: um ou mais codificadores de vídeo importante (videEEI ~EBn na FIGURA 3), um ou mais codificadores de vídeo comum (videEsI ~ Esm na FIGURA 3), e um módulo de ajuste adaptativo 31.
[0063] O módulo de ajuste adaptativo 31 é adaptado para determinar, depois que o terminal se une em uma comunicação de vídeo com múltiplas partes, o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso.
[0064] O módulo de ajuste adaptativo 31 é ainda adaptado para
14/19 determinar, de acordo com uma capacidade de processamento do terminal e um resultado mais novo determinado, um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar respectivamente a codificação de vídeo de acordo com os parâmetros de codificação determinados recentemente.
[0065] De acordo com o cliente fornecido pelo exemplo da presente invenção, é possível determinar um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum de acordo com a sua capacidade de processamento e o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso. O recurso de computação do terminal pode ser utilizado de maneira mais razoável e a qualidade da comunicação de vídeo é aprimorada.
[0066] Além disso, com base no exemplo de terminal acima, o módulo de ajuste adaptativo pode ainda executar novamente quando pelo menos um do número dos codificadores de vídeo importante em uso e o número dos codificadores de vídeo comum sofrem alterações.
[0067] Portanto, quando pelo menos um do número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum sofrem alterações, por exemplo, um número total de terminais que participa na comunicação de vídeo aumenta ou diminui, ou o número total de terminais não é alterado, mas uma comutação acontece que comuta um vídeo importante para um vídeo comum ou vice-versa, que resulta na alteração do número de codificadores de vídeo importante e o número de codificadores de vídeo comum, é possível determinar novamente os parâmetros de codificação do vídeo importante e do vídeo comum. Assim, a qualidade geral da comunicação de vídeo é ainda aprimorada.
15/19 [0068] O parâmetro de codificação inclui uma taxa de quadro de codificação mais alta.
[0069] O módulo de ajuste adaptativo 31 pode incluir de maneira específica (não mostrado na FIGURA 3):
uma primeira unidade de processamento, adaptada para determinar respectivamente o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso, e transmitir o resultado determinado a uma segunda unidade de processamento;
a segunda unidade de processamento, adaptada para determinar uma taxa de quadro de codificação mais alta fb para um vídeo importante e uma taxa de quadro de codificação mais alta ./'para um vídeo comum de acordo com uma capacidade de processamento do terminal e o resultado determinado, e transmitir a determinada fb e fs a uma terceira unidade de processamento;
a terceira unidade de processamento, adaptada para aumentar / e diminuir /, determinar se a recentemente obtida fb e fs atendem à condição predefinida, aumentar a recentemente obtida fb e diminuir a recentemente obtida fs se a recentemente obtida fbe fs atendem à condição predefinida, determinar, se a recentemente obtida fbe fs não atende à condição predefinida, uma taxa de quadro de codificação mais alta do vídeo importante de acordo com fbe determinar uma taxa de quadro de codificação mais alta do vídeo comum de acordo com fs, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar a codificação de vídeo de acordo com o determinado fbe fs \ e
16/19 uma quarta unidade de processamento, adaptada para acionar a operação da primeira unidade de processamento se pelo menos um do número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso sofrer alterações. [0070] A segunda unidade de processamento pode ainda incluir: uma primeira subunidade de processamento, adaptada para calcular fb =fs=F/(m + nry, em que m indica o número de codificadores de vídeo comum recentemente determinados;
n indica o número de codificadores de vídeo importante recentemente determinado;
r indicar um fator de proporção do recurso de computação consumido por um vídeo importante com uma resolução de w. χ\para computar os recursos consumidos por um vídeo comum com uma resolução de ou, também é possível obter, através de um experimento, uma proporção de uma taxa de codificação do vídeo importante com uma resolução de ^x/^para a taxa de codificação do vídeo comum com uma resolução dewsxhs, e assumir a proporção da taxa de codificação como r,
F indica a capacidade de processamento do terminal X, F = Jpsenc-wusage; em que, Jpsenc indica uma velocidade de codificação para codificar um vídeo com uma resolução de wsxhs pelo terminal X com carga total; wusage indica uma taxa de uso desejada da operação de codificação para o processador do terminal X;
a segunda subunidade de processamento, adaptada para transmitir o calculado fbe fs para a terceira unidade de processamento.
Legenda: enc= cod; usage= uso [0071] A terceira unidade de processamento pode ainda incluir: uma terceira subunidade de processamento, adaptada para
17/19 calcular fb=fb+Af , fs=fs-Af , Δ/>ο , e transmitir um resultado calculado a uma quarta subunidade de processamento;
a quarta subunidade de processamento, adaptada para determinar uma MOS do vídeo importante de acordo com a recentemente obtida fb, e determinar uma MOS do vídeo comum de acordo com a recentemente obtida fs;
determinar, se um valor absoluto de uma diferença entre uma pontuação média de opinião (MOS) do vídeo importante e uma MOS do vídeo comum for menor que um valor predefinido ^ÍOSTheshold , e m fs+n fb<F , i<fb,fs<fmax , /max indicar a taxa de quadro de codificação mais alta possivelmente usadas na comunicação de vídeo, que a recentemente obtida fbe fs atendem à condição predefinida, e informar a terceira subunidade de processamento para executar novamente sua operação;
determinar, se de outro modo, a recentemente obtida fb-Af é assumido como a taxa de quadro de codificação mais alta do vídeo importante, determine a recentemente obtida fs+Af como a taxa de quadro de codificação mais alta do vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar a codificação de vídeo de acordo com os parâmetros de codificação determinados.
Legenda: threshold= limite [0072] A quarta subunidade de processamento pode calcular respectivamente a MOS que corresponde a cada taxa de quadro de codificação pode ser usada na comunicação de vídeo de acordo com uma fórmula predefinida e armazenar a MOS calculada sob a forma de uma tabela. Quando exigido, a MOS que corresponde a recentemente obtida fbe Ápode ser obtida através da busca na tabela.
[0073] De maneira alternativa, a quarta subunidade de
18/19 processamento também pode calcular a MOS que corresponde a recentemente obtida fb e fs diretamente de acordo com a fórmula predefinida.
[0074] A fórmula predefinida pode ser da seguinte forma: WS„,(/) = 5-<z.[log(/n,x)-log(/)]'’ ; ou, WS,„(/) = 5-ln(/m„//) ; em que ae/7são fatores de cálculo.
[0075] Em uma aplicação prática, além das unidades acima, o terminal mostrado na FIGURA 3 pode ainda incluir alguns outros componentes, por exemplo, um módulo de captura 32, um decodificador de vídeo (vide D1 ~DN na FIGURA 3), e um módulo de exibição 33.
[0076] O módulo de captura 32 pode ainda incluir uma unidade de captura de fonte de vídeo importante 321 e uma unidade de captura de fonte de vídeo comum 322. A unidade de captura de fonte de vídeo importante 321 transmite os dados de vídeo capturados para cada codificador de vídeo importante em uso. A unidade de captura de fonte de vídeo comum 322 transmite os dados de vídeo capturados para cada codificador de vídeo comum em uso. Os vídeos capturados pela unidade de captura de fonte de vídeo importante 321 e pela unidade de captura de fonte de vídeo comum 322 têm os mesmos conteúdos, mas com diferentes resoluções.
[0077] Em geral, com relação a cada terminal remoto, exige-se o uso do decodificador de vídeo. No entanto, os fluxos de código gerados por um codificador de vídeo podem ser transmitidos a um ou mais terminais remotos. Na hipótese do terminal (terminal 0) conforme mostrado na FIGURA 3 usar respectivamente um codificador de vídeo e um decodificador de vídeo com relação a cada terminal remoto, isto é, terminais 1~N. Assim, o terminal 0 precisa usar os codificadores de vídeo N e os decodificadores de vídeo N.
[0078] O módulo de exibição 33 exibe o vídeo importante e o vídeo comum obtidos por cada decodificador de vídeo.
19/19 [0079] As operações detalhadas e as funções do terminal mostrado na FIGURA 3 podem ser vistas a partir das descrições do método de exemplo supracitado da presente invenção, e não são aqui repetidas.
[0080] Os versados na técnica sabem que todos ou alguns dos blocos da presente invenção podem ser implementados por hardware, ou implementados por um programa executado em um hardware relevante. O programa pode ser armazenado em um meio de armazenamento legível por computador, como uma memória somente para a leitura (ROM)/ memória de acesso aleatório (RAM), disco ou disco compacto, etc.
[0081] O que foi descrito e ilustrado aqui é um exemplo preferido da invenção, juntamente com algumas das suas variações. Muitas variações são possíveis dentro do escopo da descrição, que se destina a ser definido pelas seguintes reivindicações e seus equivalentes, em que todos os termos se destinam no seu sentido razoável mais amplo, a menos que indicado de outra forma.
Claims (11)
1. Método para codificar vídeo em uma comunicação de vídeo com múltiplas partes, caracterizado pelo fato de que compreende:
depois que um terminal X se une em uma comunicação de vídeo com múltiplas partes,
A, determinar (11) respectivamente um número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso do terminal;
B, de acordo com uma capacidade de processamento do terminal e um resultado de determinação novo, determinar (12) respectivamente um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar codificação de vídeo de acordo com os parâmetros de codificação determinados recentemente;
em que se pelo menos um do número dos codificadores de vídeo importante em uso e o número dos codificadores de vídeo comum em uso altera, repetir etapas A e B;
em que os parâmetros de codificação compreendem: uma taxa de quadro de codificação mais alta; a determinação do parâmetro de codificação para o vídeo importante e o parâmetro de codificação para o vídeo comum compreende:
b1, de acordo com a capacidade de processamento do terminal e o resultado de determinação mais novo, inicializar respectivamente uma taxa de quadro de codificação mais alta fb do vídeo importante e uma taxa de quadro de codificação mais alta fs do vídeo comum;
b2, aumentar fb e diminuir fs e determinar se as recentemente obtidas fbe fs atendem a uma condição predefinida, se as recentemente obtidas fb e fs atendem a condição predefinida, repetir etapa b2, de outro jeito, determinar a taxa de quadro de codificação
Petição 870180030814, de 17/04/2018, pág. 4/46
2/8 mais alta do vídeo importante de acordo com a recentemente obtida fb, e determinar a taxa de quadro de codificação mais alta do vídeo comum de acordo com a recentemente obtida fs.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que aumentar fb e a diminuição de fs compreende: deixar fb = fb +Df , fs = fs-Df, Df > 0;
determinar a taxa de quadro de codificação mais alta do vídeo importante de acordo com a recentemente obtida fb e determinar a taxa de quadro de codificação mais alta do vídeo comum de acordo com a recentemente obtida fs compreende:
assumir a recentemente obtida fb-Df como a taxa de quadro de codificação mais alta do vídeo importante, e assumir a recentemente obtida fs +Df como a taxa de quadro de codificação mais alta do vídeo comum.
3. Método, de acordo com a reivindicação1, caracterizado pelo fato de que inicializar respectivamente a taxa de quadro de codificação mais alta fb do vídeo importante e a taxa de quadro de codificação mais alta fs do vídeo comum compreende:
calcular fb = fs = F /(m+n r) em que m indica o número de codificadores de vídeo comum recentemente determinados;
n indica o número de codificadores de vídeo importante recentemente determinados;
r indica um fator de proporção do recurso de computação consumido por um vídeo importante com uma resolução de wb x h para computar os recursos consumidos por um vídeo comum com uma resolução de ws xhs, r = wb x\ /(ws xhs); ou, r indica uma proporção, obtida através de um experimento, de uma taxa de codificação do vídeo im
Petição 870180030814, de 17/04/2018, pág. 5/46
3/8 portante com uma resolução de wb x hb para a taxa de codificação do vídeo comum com uma resolução de ws xhs;
F indica a capacidade de processamento do terminal X, f = fpsenc wusage; em que, fpsenc indica uma velocidade de codificação para codificar um vídeo com uma resolução de ws xhs pelo terminal X com carga total; wusage indica uma taxa de uso desejada da operação de codificação para o processador do terminal X.
Legenda acima: enc= cod; usage= uso
4. Método, de acordo com a reivindicação 3, caracterizado pelo fato de que ainda compreende:
obter respectivamente fPSenc correspondendo aos processadores com diferentes frequências principais de acordo com uma medição experimental, e armazenar o fpsenc sob a forma de uma tabela; e obter o fpsenc correspondendo à frequência principal do terminal X através de busca na tabela.
Legenda acima: enc= cod
5. Método, de acordo com a reivindicação 3, caracterizado pelo fato de que a determinação de se as recentemente obtidas fbe f atendem à condição predefinida compreende:
determinar uma pontuação média de objetivo (MOS) do vídeo importante de acordo com a recentemente obtida fb, e determinar uma MOS do vídeo comum de acordo com a recentemente obtida fs;
se uma diferença entre a MOS do vídeo importante e a MOS do vídeo comum é menor do que um limite predeterminado DMOSTheshold, e m fs + n fb r < f , 1 < fb, fs < fmax, determinar que as recentemente obtidas fb e fs atendem à condição predefinida, em que fmax indica a taxa de quadro de codificação mais alta disponível na comunicação de vídeo.
Legenda acima: threshold= limite
Petição 870180030814, de 17/04/2018, pág. 6/46
4/8
6. Método, de acordo com a reivindicação 5, caracterizado pelo fato de que a determinação da MOS do vídeo importante de acordo com a recentemente obtida fb, e determinação de uma MOS do vídeo comum de acordo com a recentemente obtida fs compreende:
determinar as MOSs correspondendo às taxas de quadro de codificação possivelmente usadas na comunicação de vídeo de acordo com uma fórmula predefinida, e armazenar as MOSs sob a forma de uma tabela, obter as MOSs correspondente respectivamente as recentemente obtidas fb e fs através de busca na tabela; ou determinar as MOSs correspondendo respectivamente as recentemente obtidas fb e fs através de cálculo de acordo com uma fórmula predefinida.
7. Método, de acordo com a reivindicação 6, caracterizado pelo fato de que a fórmula predefinida compreende qualquer uma de: MOS p (f) = 5 - a - [log( f_) - log( f )]b, MOS p (.f) = 5 - ln(f„„ / f);
em que ae bsão fatores de cálculo.
8. Terminal, caracterizado pelo fato de que compreende: um ou mais codificadores de vídeo importante, um ou mais codificadores de vídeo comum e um módulo de ajuste adaptativo (31);
o módulo de ajuste adaptativo (31) é adaptado para determinar, depois que o terminal se une em uma comunicação de vídeo com múltiplas partes, o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso; e determinar, de acordo com uma capacidade de processamento do terminal e um resultado determinado, um parâmetro de codificação para um vídeo importante e um parâmetro de codificação para um vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar respec
Petição 870180030814, de 17/04/2018, pág. 7/46
5/8 tivamente a codificação de vídeo de acordo com os parâmetros de codificação determinados recentemente;
executar novamente suas funções quando pelo menos um do número dos codificadores de vídeo importante e o número dos codificadores vídeo comum altera;
em que o parâmetro de codificação compreende uma taxa de quadro de codificação mais alta; o módulo de ajuste adaptativo (31) ainda compreende:
uma primeira unidade de processamento, adaptada para determinar respectivamente o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso, e transmitir o resultado determinado para uma segunda unidade de processamento;
a segunda unidade de processamento, adaptada para determinar uma taxa de quadro de codificação mais alta fb para um vídeo importante e uma taxa de quadro de codificação mais alta fs para um vídeo comum de acordo com uma capacidade de processamento do terminal e o resultado determinado, e transmitir as determinadas fb e fs para uma terceira unidade de processamento;
a terceira unidade de processamento, adaptada para aumentar fb e diminuir fs, determinar se as recentemente obtidas fbe fs atendem a uma condição predefinida, aumentar a recentemente obtida fb e diminuir a recentemente obtida fs se as recentemente obtidas fbe fs atendem à condição predefinida, determinar, se as recentemente obtidas fb e fs não atendem à condição predefinida, uma taxa de quadro de codificação mais alta do vídeo importante de acordo com fb e determinar uma taxa de quadro de codificação mais alta do vídeo comum de acordo com fs, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar a coPetição 870180030814, de 17/04/2018, pág. 8/46
6/8 dificação de vídeo de acordo com as determinadas fb e fs; e uma quarta unidade de processamento, adaptada para acionar a operação da primeira unidade de processamento se pelo menos um dentre o número de codificadores de vídeo importante em uso e o número de codificadores de vídeo comum em uso alterar.
9. Terminal, de acordo com a reivindicação 8, caracterizado pelo fato de que a segunda unidade de processamento ainda compreende:
uma primeira subunidade de processamento, adaptada para calcular fb = fs = F + n r) ; em que m indica o número de codificadores de vídeo comum recentemente determinados;
n indica o número de codificadores de vídeo importante recentemente determinados;
r indica um fator de proporção do recurso de computação consumido por um vídeo importante com uma resolução de wb x \ para computar os recursos consumidos por um vídeo comum com uma resolução de ws xhs, r = wb xh /(ws xhs); ou, r indica uma proporção, obtida através de um experimento, de uma taxa de codificação do vídeo importante com uma resolução de wb x \ para a taxa de codificação do vídeo comum com uma resolução de ws xhs;
F indica a capacidade de processamento do terminal X, F = fpsenc wusage; em que, fpsenc indica uma velocidade de codificação para codificar um vídeo com uma resolução de ws xhs pelo terminal X com carga total; wusage indica uma taxa de uso desejada da operação de codificação para o processador do terminal X;
uma segunda subunidade de processamento, adaptada para transmitir as calculadas fb e fs para a terceira unidade de processamento.
Petição 870180030814, de 17/04/2018, pág. 9/46
7/8
Legenda acima: enc= cod; usage= uso
10. Terminal, de acordo com a reivindicação 9, caracterizado pelo fato de que a terceira unidade de processamento compreende:
uma terceira subunidade de processamento, adaptada para calcular fb = fb +Df, fs = fs-Df, Df > 0, e transmitir um resultado calculado para uma quarta subunidade de processamento;
a quarta subunidade de processamento, adaptada para determinar uma MOS do vídeo importante de acordo com a recentemente obtida fb, e determinar uma MOS do vídeo comum de acordo com a recentemente obtida fs;
determinar, se um valor absoluto de uma diferença entre uma pontuação média de opinião (MOS) do vídeo importante e uma MOS do vídeo comum é menor que um limite predefinido DMOSTheshold, e m fs + n fb < F, 1 < fb, fs < fmax, fmax indica a taxa de quadro de codificação mais alta possivelmente usada na comunicação de vídeo, que as recentemente obtidas fbe fs atendem à condição predefinida, e informar a terceira subunidade de processamento para executar novamente sua operação;
determinar, se de outro modo, a recentemente obtida fb-Df é assumida como a taxa de quadro de codificação mais alta do vídeo importante, determinar a recentemente obtida fs +Df como a taxa de quadro de codificação mais alta do vídeo comum, e informar cada codificador de vídeo importante em uso e cada codificador de vídeo comum em uso para realizar a codificação de vídeo de acordo com os parâmetros de codificação determinados.
Legenda acima: threshold= limite
11. Terminal, de acordo com a reivindicação 10, caracterizado pelo fato de que a quarta subunidade de processamento é ainda adaptada para:
Petição 870180030814, de 17/04/2018, pág. 10/46
8/8 calcular respectivamente a MOS correspondendo a cada taxa de quadro de codificação que pode ser usada na comunicação de vídeo de acordo com uma fórmula predefinida e armazenar a MOS calculada sob a forma de uma tabela, e obter a MOS correspondendo as recentemente obtidas fbe fs através de busca na tabela; ou calcular a MOS correspondendo as recentemente obtidas fb e fs diretamente de acordo com a fórmula predefinida;
em que a fórmula predefinida compreende: MOS,r,(f) = 5-a-[log(fm,x)-log(f)]b ; ou, MOS*(f) = 5-ln(jmJf) ; em que ae bsão fatores de cálculo.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210040481XA CN102547214B (zh) | 2012-02-22 | 2012-02-22 | 一种多人视频通信中的视频编码方法以及终端 |
| CN201210040481.X | 2012-02-22 | ||
| PCT/CN2013/070833 WO2013123839A1 (zh) | 2012-02-22 | 2013-01-22 | 一种多人视频通信中的视频编码方法以及终端 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| BR112014020225A2 BR112014020225A2 (pt) | 2017-06-20 |
| BR112014020225A8 BR112014020225A8 (pt) | 2017-07-11 |
| BR112014020225B1 true BR112014020225B1 (pt) | 2019-09-17 |
Family
ID=46353028
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| BR112014020225-7A BR112014020225B1 (pt) | 2012-02-22 | 2013-01-22 | Método de codificação de vídeo em comunicações de vídeo com múltiplas pessoas e terminal |
Country Status (14)
| Country | Link |
|---|---|
| US (1) | US9332267B2 (pt) |
| EP (1) | EP2819405B1 (pt) |
| KR (1) | KR101629226B1 (pt) |
| CN (1) | CN102547214B (pt) |
| AP (1) | AP2014007931A0 (pt) |
| BR (1) | BR112014020225B1 (pt) |
| CA (1) | CA2865045C (pt) |
| CL (1) | CL2014002194A1 (pt) |
| MY (1) | MY168126A (pt) |
| NZ (1) | NZ630215A (pt) |
| PH (1) | PH12014501820B1 (pt) |
| RU (1) | RU2570355C1 (pt) |
| SG (1) | SG11201404904VA (pt) |
| WO (1) | WO2013123839A1 (pt) |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015111289A1 (ja) * | 2014-01-23 | 2015-07-30 | ソニー株式会社 | 復号装置、復号方法、符号化装置及び符号化方法 |
| CN104254018B (zh) * | 2014-03-19 | 2018-04-03 | 深圳深讯和科技有限公司 | 多媒体播放中的视频帧处理方法和装置 |
| CN105657321A (zh) * | 2015-11-09 | 2016-06-08 | 乐视致新电子科技（天津）有限公司 | 视频清晰度自适应调节方法、装置及终端 |
| CN108076301A (zh) * | 2016-11-11 | 2018-05-25 | 联芯科技有限公司 | VoLTE视频多方电话的视频处理方法和系统 |
| KR20190033849A (ko) * | 2017-09-22 | 2019-04-01 | 삼성에스디에스 주식회사 | 다자간 회의 제공 장치 및 상기 장치에서의 인코더 할당 방법 |
| US11025964B2 (en) | 2019-04-02 | 2021-06-01 | Wangsu Science & Technology Co., Ltd. | Method, apparatus, server, and storage medium for generating live broadcast video of highlight collection |
| CN109862388A (zh) * | 2019-04-02 | 2019-06-07 | 网宿科技股份有限公司 | 直播视频集锦的生成方法、装置、服务器及存储介质 |
| US11470300B2 (en) | 2020-05-08 | 2022-10-11 | Tencent America LLC | Event-based trigger interval for signaling of RTCP viewport for immersive teleconferencing and telepresence for remote terminals |
| CN112511788B (zh) * | 2020-11-27 | 2022-04-01 | 厦门亿联网络技术股份有限公司 | 一种视频会议的视频传输控制方法及视频传输系统 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002305733A (ja) * | 2001-04-06 | 2002-10-18 | Matsushita Electric Ind Co Ltd | マルチキャスト会議装置、及びマルチキャスト会議プログラム |
| US7352809B2 (en) | 2003-02-21 | 2008-04-01 | Polycom, Inc. | System and method for optimal transmission of a multitude of video pictures to one or more destinations |
| WO2006126974A1 (en) | 2005-04-11 | 2006-11-30 | Tubitak Bilten | Optimal video adaptation for resource constrained mobile devices based on subjective utility models |
| RU2378790C1 (ru) * | 2005-09-27 | 2010-01-10 | Квэлкомм Инкорпорейтед | Методики масштабируемости на основе информации содержимого |
| US7456760B2 (en) * | 2006-09-11 | 2008-11-25 | Apple Inc. | Complexity-aware encoding |
| TWI343216B (en) * | 2007-06-12 | 2011-06-01 | Quanta Comp Inc | High-definition video conference system and method |
| US8345083B2 (en) * | 2007-07-31 | 2013-01-01 | Cisco Technology, Inc. | Dynamic management of picture quality in a video conference with diversified constraints |
| CN101588252B (zh) | 2008-05-23 | 2011-07-20 | 华为技术有限公司 | 一种多点会议的控制方法及装置 |
| CN101365125B (zh) * | 2008-09-27 | 2012-03-21 | 腾讯科技（深圳）有限公司 | 多路视频通信方法与系统 |
| CN101742223B (zh) * | 2010-01-19 | 2012-08-22 | 华平信息技术股份有限公司 | 视频流带宽智能调节方法 |
-
2012
- 2012-02-22 CN CN201210040481XA patent/CN102547214B/zh active Active
-
2013
- 2013-01-22 WO PCT/CN2013/070833 patent/WO2013123839A1/zh active Application Filing
- 2013-01-22 NZ NZ630215A patent/NZ630215A/en unknown
- 2013-01-22 EP EP13752176.1A patent/EP2819405B1/en active Active
- 2013-01-22 CA CA2865045A patent/CA2865045C/en active Active
- 2013-01-22 BR BR112014020225-7A patent/BR112014020225B1/pt active IP Right Grant
- 2013-01-22 KR KR1020147025280A patent/KR101629226B1/ko active IP Right Grant
- 2013-01-22 US US14/378,091 patent/US9332267B2/en active Active
- 2013-01-22 SG SG11201404904VA patent/SG11201404904VA/en unknown
- 2013-01-22 RU RU2014138120/07A patent/RU2570355C1/ru active
- 2013-01-22 MY MYPI2014702349A patent/MY168126A/en unknown
- 2013-01-22 AP AP2014007931A patent/AP2014007931A0/xx unknown
-
2014
- 2014-08-12 PH PH12014501820A patent/PH12014501820B1/en unknown
- 2014-08-18 CL CL2014002194A patent/CL2014002194A1/es unknown
Also Published As
| Publication number | Publication date |
|---|---|
| EP2819405B1 (en) | 2021-08-11 |
| KR101629226B1 (ko) | 2016-06-10 |
| MY168126A (en) | 2018-10-11 |
| BR112014020225A2 (pt) | 2017-06-20 |
| RU2570355C1 (ru) | 2015-12-10 |
| EP2819405A1 (en) | 2014-12-31 |
| CA2865045A1 (en) | 2013-08-29 |
| CN102547214A (zh) | 2012-07-04 |
| WO2013123839A1 (zh) | 2013-08-29 |
| PH12014501820A1 (en) | 2014-11-24 |
| PH12014501820B1 (en) | 2014-11-24 |
| EP2819405A4 (en) | 2015-03-04 |
| US9332267B2 (en) | 2016-05-03 |
| CA2865045C (en) | 2016-10-18 |
| US20150215627A1 (en) | 2015-07-30 |
| AP2014007931A0 (en) | 2014-09-30 |
| BR112014020225A8 (pt) | 2017-07-11 |
| NZ630215A (en) | 2015-05-29 |
| KR20140128420A (ko) | 2014-11-05 |
| CL2014002194A1 (es) | 2015-02-27 |
| SG11201404904VA (en) | 2014-10-30 |
| CN102547214B (zh) | 2013-05-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| BR112014020225B1 (pt) | Método de codificação de vídeo em comunicações de vídeo com múltiplas pessoas e terminal | |
| US10659847B2 (en) | Frame dropping method for video frame and video sending apparatus | |
| EP2624611B1 (en) | Method and system for visualizing an adaptive screen according to a terminal | |
| US9344735B2 (en) | Progressive shape based encoding of video content within a swarm environment | |
| US9509741B2 (en) | Snapshot capture for a communication session | |
| EP3606050A1 (en) | Video frame coding method, terminal, and storage medium | |
| MX2013004481A (es) | Ajuste de configuracion de codigo dinamico. | |
| US9967302B2 (en) | Method and system for complexity adaptive streaming | |
| CN113490055B (zh) | 数据处理方法和装置 | |
| TW201315241A (zh) | 於編碼位元流之間動態切換之技術 | |
| US20160285943A1 (en) | Cloud operation resource dynamic allocation system and method thereof | |
| US10284850B2 (en) | Method and system to control bit rate in video encoding | |
| CN107493478B (zh) | 编码帧率设置方法及设备 | |
| US20230018087A1 (en) | Data coding method and apparatus, and computer-readable storage medium | |
| CN115988269A (zh) | 一种视频播放方法、装置、系统、电子设备和存储介质 | |
| CN112312370B (zh) | 切换门限值处理方法、装置 | |
| WO2017031853A1 (zh) | 播放设备的分组管理方法及终端 | |
| CN116939212A (zh) | 视频处理方法、装置、计算机可读存储介质及计算机设备 | |
| EP3526918A1 (en) | Dynamically partitioning media streams | |
| US9118922B2 (en) | Progressive encoding of video content within a swarm environment | |
| WO2017096947A1 (zh) | 实时转码的实时控制方法及装置 | |
| OA17059A (en) | Video coding method in multi-person video communications and terminal. | |
| US20230164381A1 (en) | Bullet-screen comment presentation and sending methods and apparatuses in co-hosting during live streaming | |
| CN117956226A (zh) | 云手机的视频解码方法和装置 | |
| CN117528090A (zh) | 一种优化视频通信画质的方法、装置、电子设备和介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| B06F | Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette] | ||
| B15K | Others concerning applications: alteration of classification |
Free format text: A CLASSIFICACAO ANTERIOR ERA: H04N 7/15 Ipc: H04N 19/156 (2014.01), H04N 19/127 (2014.01), H04N |
|
| B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
| B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] |
Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 22/01/2013, OBSERVADAS AS CONDICOES LEGAIS. (CO) 20 (VINTE) ANOS CONTADOS A PARTIR DE 22/01/2013, OBSERVADAS AS CONDICOES LEGAIS |