ES2962996T3 - Dispositivo de procesamiento de imágenes y método de procesamiento de imágenes - Google Patents

Dispositivo de procesamiento de imágenes y método de procesamiento de imágenes Download PDF

Info

Publication number
ES2962996T3
ES2962996T3 ES20827185T ES20827185T ES2962996T3 ES 2962996 T3 ES2962996 T3 ES 2962996T3 ES 20827185 T ES20827185 T ES 20827185T ES 20827185 T ES20827185 T ES 20827185T ES 2962996 T3 ES2962996 T3 ES 2962996T3
Authority
ES
Spain
Prior art keywords
weight matrix
diagram illustrating
intra prediction
unit
generation method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES20827185T
Other languages
English (en)
Inventor
Kenji Kondo
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Group Corp
Original Assignee
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Group Corp filed Critical Sony Group Corp
Application granted granted Critical
Publication of ES2962996T3 publication Critical patent/ES2962996T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder

Abstract

La presente tecnología se refiere a un dispositivo de procesamiento de imágenes y a un método de procesamiento de imágenes con el que es posible simplificar un proceso. Cuando se realiza una intrapredicción matricial que es una intrapredicción que utiliza una operación matricial en el bloque predictivo actual que se va a codificar/decodificar, se realiza una intrapredicción matricial utilizando una cantidad de desplazamiento establecida en un valor fijo y una imagen predictiva del Se genera el bloque predictivo actual. Luego, el bloque predictivo actual se codifica/decodifica usando la imagen predictiva. La presente tecnología se puede aplicar, por ejemplo, cuando se realiza codificación y decodificación de imágenes. (Traducción automática con Google Translate, sin valor legal)

Description

DESCRIPCIÓN
Dispositivo de procesamiento de imágenes y método de procesamiento de imágenes
CAMPO TÉCNICO
La presente tecnología se refiere a un dispositivo de procesamiento de imágenes y a un método de procesamiento de imágenes, y más particularmente, a un dispositivo de procesamiento de imágenes y a un método de procesamiento de imágenes que pueden simplificar el procesamiento, por ejemplo.
ANTECEDENTES DE LA TÉCNICA
La organización de normalización conjunta de ITU-T e ISO/IEC, el Equipo Conjunto de Expertos en Vídeo (JVET), tiene como objetivo mejorar aún más la eficiencia de codificación en comparación con H.265/HEVC, y está trabajando en la normalización de la codificación de vídeo versátil (VVC), que es el método de codificación de imágenes de la próxima generación.
En la operación de normalización de VVC, se ha propuesto realizar intra-predicción basada en matrices (MIP), que es una intra predicción que usa una operación matricial en un bloque de predicción (por ejemplo, véanse los documentos no son de patente 1 y 2).
En MIP, se definen los parámetros de una matriz (matriz de pesos) y una desviación (vector de desviación) obtenidos mediante el aprendizaje de parámetros, y se realiza una operación usando la matriz y la desviación (parámetros).LISTA DE CITAS DOCUMENTO NO DE PATENTE
Documento no de patente 1: JVET-N0217-v3: CE3: Intra predicción ponderada lineal afín (CE3-4.1, CE3-4.2) (versión 7 - fecha 17-01 -2019)
Documento no de patente 2: PFAFF (FRAUNHOFER) J ET AL "8-bit implementation and simplification of MIP", 15. JVET MEETING; 20190703-20190712; GOTEMBURGO; (THE JOINT VIDEO EXPLORATION TEAM OF ISO/IEC JTC1/SC29/WG11 AND ITU-T SG.16 ), n.° JVET-00084, 18 de junio de 2019.
SUMARIO DE LA INVENCIÓN
Problemas a resolver por la invención
En la operación de MIP (operación realizada por la MIP), se realiza un desplazamiento en una cantidad de desplazamiento predeterminada. La cantidad de desplazamiento se cambia de acuerdo con MipSizeld, que indica un tamaño de matriz de la matriz y un número de modo de la MIP para mejorar la precisión de bits.
Como se ha descrito anteriormente, en la operación de MIP, dado que la cantidad de desplazamiento se cambia de acuerdo con MipSizeld y el número de modo de MIP, la cantidad de desplazamiento debe establecerse para cada combinación de MipSizeld y el número de modo de MIP y el procesamiento es complicado.
La tecnología actual se ha realizado teniendo en cuenta esta situación y hace posible simplificar el procesamiento.
SOLUCIONES A PROBLEMAS
El alcance de la invención protegida está definido por las reivindicaciones independientes adjuntas. Las reivindicaciones dependientes especifican además realizaciones preferidas. A continuación, se proporciona la divulgación de la invención protegida con las realizaciones descritas, respectivamente, como implementaciones del "segundo método de generación", el "tercer método de generación" y el "cuarto método de generación". Los aspectos, ejemplos y realizaciones restantes se proporcionan meramente con fines ilustrativos y no representan realizaciones independientes de la invención protegida.
BREVE DESCRIPCIÓN DE LOS DIBUJOS
La Figura 1 es un diagrama para describir un primer método de generación de una imagen prevista de MIP. La Figura 2 es un diagrama para describir un segundo método de generación de una imagen prevista de MIP. La Figura 3 es un diagrama que ilustra un ejemplo de una matriz de pesos mWeight [i] [j] de (M, m) = (1,3).
La Figura 4 es un diagrama que ilustra un ejemplo de una matriz de pesos mWeight [i] [j] de (M, m) = (1,8). La Figura 5 es un diagrama que ilustra un ejemplo de un vector de desviación vBias [j] con MipSizeld = 1. La Figura 6 es un diagrama para describir un tercer método de generación de una imagen prevista de MIP. La Figura 7 es un diagrama para describir un cuarto método de generación de una imagen prevista de MIP. La Figura 8 es un diagrama que ilustra una cantidad de desplazamiento sW descrita en la referencia A. La Figura 9 es un diagrama que ilustra una matriz de pesos convencional mWeight [i] [j] de (M, m) = (0, 0) descrita en la referencia A.
La Figura 10 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 1) descrita en la referencia A.
La Figura 11 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 2) descrita en la referencia A.
La Figura 12 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 3) descrita en la referencia A.
La Figura 13 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 4) descrita en la referencia A.
La Figura 14 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 5) descrita en la referencia A.
La Figura 15 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 6) descrita en la referencia A.
La Figura 16 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 7) descrita en la referencia A.
La Figura 17 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 8) descrita en la referencia A.
La Figura 18 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 9) descrita en la referencia A.
La Figura 19 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 10) descrita en la referencia A.
La Figura 20 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 11) descrita en la referencia A.
La Figura 21 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 12) descrita en la referencia A.
La Figura 22 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 13) descrita en la referencia A.
La Figura 23 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 14) descrita en la referencia A.
La Figura 24 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 15) descrita en la referencia A.
La Figura 25 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 16) descrita en la referencia A.
La Figura 26 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 17) descrita en la referencia A.
La Figura 27 es un diagrama que ilustra una variable convencional fO de MipSizeld = 0 descrita en la referencia A.
La Figura 28 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 0) descrita en la referencia A.
La Figura 29 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 1) descrita en la referencia A.
La Figura 30 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 2) descrita en la referencia A.
La Figura 31 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 3) descrita en la referencia A.
La Figura 32 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1,4) descrita en la referencia A.
La Figura 33 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 5) descrita en la referencia A.
La Figura 34 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 6) descrita en la referencia A.
La Figura 35 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 7) descrita en la referencia A.
La Figura 36 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 8) descrita en la referencia A.
La Figura 37 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 9) descrita en la referencia A.
La Figura 38 es un diagrama que ilustra una variable convencional fO de MipSizeld = 1 descrita en la referencia A.
La Figura 39 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 0) descrita en la referencia A.
La Figura 40 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 1) descrita en la referencia A.
La Figura 41 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 2) descrita en la referencia A.
La Figura 42 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 3) descrita en la referencia A.
La Figura 43 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 4) descrita en la referencia A.
La Figura 44 es un diagrama que ilustra una matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 5) descrita en la referencia A.
La Figura 45 es un diagrama que ilustra una variable convencional fO de MipSizeld = 2 descrita en la referencia A.
La Figura 46 es un diagrama que ilustra la cantidad de desplazamiento sW usada en el tercer método de generación.
La Figura 47 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 0) usada en el tercer método de generación.
La Figura 48 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 1) usada en el tercer método de generación.
La Figura 49 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 2) usada en el tercer método de generación.
La Figura 50 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 3) usada en el tercer método de generación.
La Figura 51 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 4) usada en el tercer método de generación.
La Figura 52 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 5) usada en el tercer método de generación.
La Figura 53 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 6) usada en el tercer método de generación.
La Figura 54 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 7) usada en el tercer método de generación.
La Figura 55 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 8) usada en el tercer método de generación.
La Figura 56 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 9) usada en el tercer método de generación.
La Figura 57 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 10) usada en el tercer método de generación.
La Figura 58 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 11) usada en el tercer método de generación.
La Figura 59 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 12) usada en el tercer método de generación.
La Figura 60 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 13) usada en el tercer método de generación.
La Figura 61 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 14) usada en el tercer método de generación.
La Figura 62 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 15) usada en el tercer método de generación.
La Figura 63 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 16) usada en el tercer método de generación.
La Figura 64 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 17) usada en el tercer método de generación.
La Figura 65 es un diagrama que ilustra una variable f ija fO de MipSizeld = 0 usada en el tercer método de generación.
La Figura 66 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,0) usada en el tercer método de generación.
La Figura 67 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 1) usada en el tercer método de generación.
La Figura 68 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,2) usada en el tercer método de generación.
La Figura 69 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,3) usada en el tercer método de generación.
La Figura 70 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,4) usada en el tercer método de generación.
La Figura 71 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,5) usada en el tercer método de generación.
La Figura 72 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,6) usada en el tercer método de generación.
La Figura 73 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,7) usada en el tercer método de generación.
La Figura 74 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,8) usada en el tercer método de generación.
La Figura 75 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,9) usada en el tercer método de generación.
La Figura 76 es un diagrama que ilustra una variable fija fO de MipSizeld = 1 usada en el tercer método de generación.
La Figura 77 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 0) usada en el tercer método de generación.
La Figura 78 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 1) usada en el tercer método de generación.
La Figura 79 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 2) usada en el tercer método de generación.
La Figura 80 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 3) usada en el tercer método de generación.
La Figura 81 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 4) usada en el tercer método de generación.
La Figura 82 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 5) usada en el tercer método de generación.
La Figura 83 es un diagrama que ilustra una variable fija fO de MipSizeld = 2 usada en el tercer método de generación.
La Figura 84 es un diagrama que ilustra una cantidad de desplazamiento sW usada en un cuarto método de generación.
La Figura 85 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 0) usada en el cuarto método de generación.
La Figura 86 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 1) usada en el cuarto método de generación.
La Figura 87 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 2) usada en el cuarto método de generación.
La Figura 88 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 3) usada en el cuarto método de generación.
La Figura 89 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 4) usada en el cuarto método de generación.
La Figura 90 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 5) usada en el cuarto método de generación.
La Figura 91 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 6) usada en el cuarto método de generación.
La Figura 92 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 7) usada en el cuarto método de generación.
La Figura 93 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 8) usada en el cuarto método de generación.
La Figura 94 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 9) usada en el cuarto método de generación.
La Figura 95 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 10) usada en el cuarto método de generación.
La Figura 96 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 11) usada en el cuarto método de generación.
La Figura 97 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 12) usada en el cuarto método de generación.
La Figura 98 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 13) usada en el cuarto método de generación.
La Figura 99 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 14) usada en el cuarto método de generación.
La Figura 100 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 15) usada en el cuarto método de generación.
La Figura 101 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 16) usada en el cuarto método de generación.
La Figura 102 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 17) usada en el cuarto método de generación.
La Figura 103 es un diagrama que ilustra una variable fija fO de MipSizeld = 0 usada en el cuarto método de generación.
La Figura 104 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 0) usada en el cuarto método de generación.
La Figura 105 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 1) usada en el cuarto método de generación.
La Figura 106 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 2) usada en el cuarto método de generación.
La Figura 107 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 3) usada en el cuarto método de generación.
La Figura 108 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,4) usada en el cuarto método de generación.
La Figura 109 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 5) usada en el cuarto método de generación.
La Figura 110 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 6) usada en el cuarto método de generación.
La Figura 111 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 7) usada en el cuarto método de generación.
La Figura 112 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 8) usada en el cuarto método de generación.
La Figura 113 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 9) usada en el cuarto método de generación.
La Figura 114 es un diagrama que ilustra una variable fija fO de MipSizeld = 1 usada en el cuarto método de generación.
La Figura 115 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 0) usada en el cuarto método de generación.
La Figura 116 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 1) usada en el cuarto método de generación.
La Figura 117 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 2) usada en el cuarto método de generación.
La Figura 118 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 3) usada en el cuarto método de generación.
La Figura 119 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 4) usada en el cuarto método de generación.
La Figura 120 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 5) usada en el cuarto método de generación.
La Figura 121 es un diagrama que ilustra una variable fija fO de MipSizeld = 2 usada en el cuarto método de generación.
La Figura 122 es un diagrama de bloques que ilustra un ejemplo de configuración de una realización de un sistema de procesamiento de imágenes al que se aplica la presente tecnología.
La Figura 123 es un diagrama de bloques que ilustra un ejemplo de configuración de un codificador 11. La Figura 124 es un diagrama de flujo que ilustra un ejemplo de procesamiento de codificación del codificador 11.
La Figura 125 es un diagrama de bloques que ilustra un ejemplo de configuración detallada de un decodificador 51.
La Figura 126 es un diagrama de flujo que ilustra un ejemplo de procesamiento de decodificación del decodificador 51.
La Figura 127 es un diagrama de bloques que ilustra un ejemplo de configuración de una realización de un ordenador al que se aplica la presente tecnología.
MODO PARA LLEVAR A CABO LA INVENCIÓN
<Referencias>
El contenido de las siguientes referencias REF 1 a REF 7, que se conocen en el momento de la presentación, forma parte del conocimiento general común. En otras palabras, incluso cuando se usa una estructura de bloques de árbol cuádruple, una estructura de bloques de árbol cuádruple más un árbol binario (QTBT) y una estructura de bloques de árbol de tipos múltiples (MTT) no se definen directamente en la descripción detallada de la invención, están dentro del alcance de la presente divulgación. Además, por ejemplo, incluso cuando términos técnicos tales como análisis, sintaxis y la semántica no están definidos directamente en la descripción detallada de la invención, de manera similar, está dentro del alcance de la presente divulgación
REF 1: Recomendación ITU-T H.264 (04/2017) "Advanced video coding for generic audiovisual services", abril de 2017
REF 2: Recomendación ITU-T H.265 (02/2018) "High efficiency video coding", febrero de 2018
REF 3: Benjamin Bross, Jianle Chen, Shan Liu, Versatile Video Coding (Draft 5), JVET-N1001-v7 (versión 7 - fecha 29-05-2019)
REF 4: Jianle Chen, Yan Ye, Seung Hwan Kim, Algorithm description for Versatile Video Coding and Test Model 5 (VTM 5), JVET- N1002-v1
REF 5: JVET-N0217-v3: CE3: Intra predicción ponderada lineal afín (CE3-4.1, CE3-4.2) (versión 7 - fecha 17-01-2019)
REF 6: JVET-M0043-v2: CE3: Affine linear weighted intra prediction (prueba 1.2.1, prueba 1.2.2) (versión 2 -fecha 09-01-2019)
REF 7: JVET-O0084-vl: 8-bit implementation and simplification of MIP (versión 1 - fecha 18-06-2019)<Defin¡ción>
Hablando de píxeles, los adyacentes incluyen no únicamente un caso en el que un píxel (una línea) es adyacente a un píxel de interés actual, sino también un caso en el que una pluralidad de píxeles (una pluralidad de líneas) son adyacentes. Por lo tanto, el píxel adyacente incluye no únicamente un píxel en una posición de un píxel directamente adyacente a un píxel actual, sino también píxeles en posiciones de una pluralidad de píxeles continuamente adyacentes al píxel actual. Además, el bloque adyacente incluye no únicamente un bloque en un intervalo de un bloque directamente adyacente al bloque actual de interés, sino también un bloque en un intervalo de una pluralidad de bloques continuamente adyacentes al bloque actual. Además, el bloque adyacente también puede incluir un bloque ubicado en las proximidades del bloque actual, según sea necesario.
El bloque de predicción significa un bloque (unidad de predicción (PU)) que es una unidad de procesamiento tras realizar la intra predicción, y también incluye subbloques en el bloque de predicción. Cuando el bloque de predicción, un bloque de transformada ortogonal (unidad de transformada (TU)), que es una unidad de procesamiento para realizar la transformada ortogonal, y un bloque de codificación (unidad de codificación (CU)), que es una unidad de procesamiento para codificar, se unifican en el mismo bloque, el bloque de predicción, el bloque de transformada ortogonal y el bloque de codificación significan el mismo bloque.
El modo de intra predicción significa ampliamente variables (parámetros) a las que se hace referencia cuando se deriva el modo de intra predicción, tales como un número de modo cuando se realiza la intra predicción, un índice del número de modo, un tamaño de bloque del bloque de predicción y un tamaño de un subbloque que es la unidad de procesamiento en el bloque de predicción.
Un modo de intra predicción de matriz (modo de MIP) se refiere ampliamente a las variables (parámetros) a las que se hace referencia cuando se deriva el modo de intra predicción de matriz, tal como un número de modo de la MIP, un índice del número de modo, un tipo de matriz usada cuando se realiza la operación de MIP, un tipo de tamaño de matriz de la matriz usada cuando se realiza la operación de MIP, y similares.
Cambiar significa cambiar basándose en los contenidos (valores, expresiones aritméticas, variables o similares) descritos en las referencias REF 3 o REF 7. El cambio puede incluir cambiar basándose en el contenido descrito en el documento "JVET-N1001-v7_proposal_text_MIP_8Bit.docx'' (en lo sucesivo en el presente documento, también denominado referencia A) que se publica en otros documentos que son conocidos en el momento de la presentación, por ejemplo, un sitio web (http://phenix.int-evry.fr/jvet/) de "JVET DOCUMENT MANAGEMENT SYSTEM".
Por ejemplo, en la referencia REF 3, 8 y 9 se mezclan como la cantidad de desplazamiento sW usada en la operación de MIP, pero el cambio incluye cambiar 9 de la cantidad de desplazamiento mezclada sW a 8, cambiar la operación de MIP (operación matricial) que incluye un peso de matriz mWeight, cambiar la operación de MIP que incluye un vector de desviación vBias, o similar.
Además, por ejemplo, en la referencia A (Referencia REF 7), 6, 7 y 8 se mezclan como la cantidad de desplazamiento sW, pero el cambio incluye cambiar 7 de la cantidad de desplazamiento mezclada sW a 6, cambiar de 8 a 7, cambiar la operación de MIP incluye la matriz de pesos mWeight, cambiar la operación de MIP incluye una variable oW correspondiente al vector de desviación vBias, o similares. El cambio de la operación de MIP incluye la matriz de pesos mWeight usada para la operación de MIP, el vector de desviación vBias, una variable fO usada para obtener la variable oW, o similares.
En la tecnología actual, los datos de identificación que identifican una pluralidad de patrones se pueden establecer como una sintaxis de flujo de bits obtenida codificando una imagen. El flujo de bits puede incluir los datos de identificación que identifican diversos patrones.
Como datos de identificación, por ejemplo, se puede adoptar la información sobre la cantidad de desplazamiento sW, por ejemplo, datos que indican si la cantidad de desplazamiento sW es o no el valor fijo (establecido a un valor fijo).
Cuando los datos de identificación se incluyen en el flujo de bits, el decodificador que decodifica el flujo de bits puede realizar el procesamiento de manera más eficiente analizando y haciendo referencia a los datos de identificación.
La Figura 1 es un diagrama para describir un primer método de generación de una imagen prevista de la MIP.
El primer método de generación es un método para generar una imagen prevista de MIP propuesta en la Referencia REF 3 (JVET-N1001 -v7).
En el primer método de generación, de acuerdo con la ecuación (1) descrita como ecuación (8-69) en la Referencia REF 3, se genera predMip [x] [y] (valores de píxeles) de (algunos) píxeles de la imagen prevista del bloque de predicción actual que es el bloque de predicción a codificar/decodificar.
predMip[x] [y] = ( (£mWeight[ i ]
[ y*incH*predC+x*incW ]*p[ i ] ) ( vBias[ y * incH *
predC x * incW ] << sB ) oW ) >> sW
. .. (1 )
predMip [x] [y] representa píxeles (valores de píxeles) en los que una posición horizontal de la imagen prevista es x y una posición vertical de la misma es y. El píxel de la imagen prevista también se denomina píxel previsto.
En la ecuación (1), un sumatorio I representa un sumatorio tomado mientras se cambia la variable i a un número entero de 0 a 2 * boundarySize-1. El boundarySize se establece correspondiente al tamaño de bloque del bloque de predicción actual. Específicamente, el boundarySize se establece de acuerdo con la Tabla 8-7 de la Referencia REF 3 de acuerdo con MipSizeld, que es un identificador del tamaño de matriz (matriz de pesos mWeight [i] [j]) usada para la operación (operación de matriz) con el píxel del bloque de predicción actual en la MIP. MipSizeld se establece a 0, 1 y 2, respectivamente, cuando el tamaño de la matriz es 4 x 4, 8 x 8 y 16 x 16.
mWeight [i] [j] representa los componentes de una fila de orden j y una columna de orden i de la matriz usada en la MIP, y se denomina matriz de pesos. La matriz de pesos mWeight [i] [j] se establece de acuerdo con MipSizeld y el modelado.
El número de valores tomados por los argumentos i y j de la matriz de pesos mWeight [i] [j] es igual al número de píxeles obtenidos promediando en la referencia REF 5 y al número de píxeles predMip [x] [y] de la imagen prevista, respectivamente.
Además, una aritmética de suma de producto ImWeight [i] [y * incH * predC x * incW] * p [i] realizada usando la matriz de pesos mWeight [i] [j] es la operación matricial realizada en (píxeles de) el bloque de predicción actual en la MIP. Es decir, la suma de producto ImWeight [i] [y * incH * predC x * incW] * p [i] es una operación matricial para obtener un producto de una matriz cuyo componente es la matriz de pesos mWeight [i] [j] y un vector cuyo componente es un píxel p[i] del bloque de predicción actual.
El modelado se establece a cualquier valor de 0 a 17 de acuerdo con la ecuación (8-64) de la referencia REF 3 de acuerdo con el modo de intra predicción predModeIntra.
incH e incW se establecen de acuerdo con las ecuaciones (8-67) y (8-68) de la Referencia REF 3, respectivamente, de acuerdo con PredC.
El PredC se establece de acuerdo con la Tabla 8-7 de la referencia REF 3 de acuerdo con el MipSizeld.
p[i] representa (el valor de píxel de) el píxel de orden i obtenido promediando usando los píxeles de la imagen de referencia a la que se hace referencia cuando se genera la imagen prevista del bloque de predicción actual. vBias [j] es la desviación añadida a los píxeles predMip [x] [y] de la imagen prevista y se denomina vector de desviación. El vector de desviación vBias [j] se establece de acuerdo con el sizeId y el modelado. El número de valores tomados por el argumento j del vector de desviación vBias [j] es igual al número de valores tomados por el argumento j de la matriz de pesos mWeight [i] [j], es decir, el número de píxeles predMip [x] [y] de la imagen prevista.
Se indica que sizeId toma 0, 1 o 2 en la Tabla 8-2 de la referencia REF 3.
sB se establece de acuerdo con el número de bits bitdpthY que representa el valor de píxel de acuerdo con la ecuación (8-66) de la referencia REF 3
oW se establece de acuerdo con sW (desplazamiento de peso) de acuerdo con la ecuación (8-65) en la referencia REF 3.
sW se establece de acuerdo con MipSizeld y se modela de acuerdo con la Tabla 8-8 de la referencia REF 3.
Obsérvese que A << B y A >> B indican que A se desplaza hacia la izquierda y hacia la derecha un bit B, respectivamente.
En el primer método de generación, sW es una cantidad de desplazamiento que desplaza ((ImWeight [i] [y * incH * predC x * incW] * p [i]) (vBias [y * incH * predC x * incW] << sB ) oW).
De acuerdo con la Tabla 8-8 de la referencia REF 3, la cantidad de desplazamiento sW se establece a uno de 8 y 9 de acuerdo con MipSizeld y el modelado como se ilustra en la Figura 1.
Por lo tanto, en el primer método de generación, es necesario restablecer la cantidad de desplazamiento sW para cada combinación de MipSizeld y el modelado, lo que complica el procesamiento de generación de la imagen prevista de la MIP.
Por ejemplo, cuando el primer método de generación se implementa mediante hardware, se requiere un selector para cambiar la cantidad de desplazamiento sW, lo que aumenta la escala del circuito. Además, cuando el primer método de generación se implementa mediante software, es necesario hacer referencia a la tabla especificada como Tabla 8 8 en la Referencia REF 3, y la velocidad de procesamiento se reduce en esa cantidad.
Por lo tanto, en la tecnología actual, la MIP se realiza usando una cantidad de desplazamiento establecida en un valor fijo. Es decir, por ejemplo, la operación de la ecuación (1) se cambia de acuerdo con la cantidad de desplazamiento sW establecida al valor fijo, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
La Figura 2 es un diagrama para describir un segundo método de generación de una imagen prevista de MIP.
En el segundo método de generación, la cantidad de desplazamiento sW de la ecuación (1) para generar la imagen prevista de MIP propuesta en la referencia REF 3 (JVET-N1001-v7) se establece a un valor fijo, por ejemplo, 8. A continuación, en el segundo método de generación, la operación de la ecuación (1) se cambia de acuerdo con la cantidad de desplazamiento sW = 8 establecida al valor fijo de 8, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
Específicamente, en el segundo método de generación, la matriz de pesos mWeight [i] [j] y/o el vector de desviación vBias [j] se cambian de acuerdo con la cantidad de desplazamiento sW = 8 establecida a un valor fijo, y la imagen prevista de la MIP se genera de acuerdo con la operación que incluye la matriz de pesos cambiada mWeight [i] [j] y/o el vector de desviación vBias [j].
En este punto, la combinación de MipSizeld y modelado se representa como (M, m). M representa MipSizeld y m representa el modelado.
Además, el píxel previsto predMip [x] [y] obtenido antes de establecer la cantidad de desplazamiento sW al valor fijo, en la Figura 2, el píxel previsto predMip [x] [y] obtenido cuando el píxel predMip previsto [x] [y] (de la imagen prevista de la MIP) obtenido de acuerdo con la referencia REF 3, es decir, el píxel previsto predMip [x] [y] obtenido cuando la cantidad de desplazamiento sW de (M, m) = (1, 3) y (M, m) = (1, 8) es 8, también se denomina píxel previsto convencional predMip[x] [y].
En la Tabla 8-8 de la Referencia REF 3, cuando (M, m) = (1, 3) y (M, m) = (1, 8), la cantidad de desplazamiento sW es 9, y en otras combinaciones de MipSizeld y de acuerdo con el modelado, la cantidad de desplazamiento sW es 8. Por lo tanto, en la Tabla 8-8 de la referencia REF 3, la cantidad de desplazamiento sW de (M, m) = (1, 3) y (M, m) = (1,8) se cambia de 9 a 8 y, por lo tanto, la cantidad de desplazamiento sW se puede fijar a 8 para cada combinación de MipSizeld y modelado.
En el segundo método de generación, la cantidad de desplazamiento sW de (M, m) = (1,3) y (M, m) = (1,8) se cambia de 9 a 8, y para cada combinación de MipSizeld y el modelo, la cantidad de desplazamiento sW se fija a 8. A continuación, la matriz de pesos mWeight [i] [j] y el vector de desviación vBias [j] de (M, m) = (1,3) y (M, m) = (1,8) se cambian de acuerdo con la cantidad de desplazamiento sW = 8, de modo que el píxel previsto (en lo sucesivo en el presente documento, también denominado píxel previsto fijo) obtenido después de establecer la cantidad de desplazamiento sW al valor fijo), en este punto, el píxel previsto predMip[x] [y] obtenido de acuerdo con la ecuación (1) cuando la cantidad de desplazamiento sW de (M, m) = (1, 3) y (M, m) = (1, 8) se cambia a 8 se convierte en un valor aproximado al píxel previsto convencional predMip[x] [ y].
En el segundo método de generación, la imagen prevista de la MIP se genera de acuerdo con la operación de la ecuación (1), que incluye la matriz de pesos mWeight [i] [j] cambiada de acuerdo con la cantidad de desplazamiento sW = 8 establecida al valor fijo como se ha descrito anteriormente y el vector de desviación vBias [j].
Por lo tanto, en el segundo método de generación, la cantidad de desplazamiento sW se fija independientemente del modelado y de la combinación de MipSizeld y modelado, por lo que se puede simplificar el procesamiento de la MIP. Como resultado, no es necesario especificar la tabla especificada como Tabla 8-8 en la Referencia REF 3 en la norma, y la norma se puede simplificar.
Además, por ejemplo, cuando el segundo método de generación se implementa mediante hardware, no se requiere el selector para cambiar la cantidad de desplazamiento sW, lo que puede suprimir los aumentos en la escala del circuito. Además, cuando el segundo método de generación se implementa mediante software, no es necesario hacer referencia a la tabla especificada como Tabla 8-8 en la Referencia REF 3, y es posible suprimir la disminución en la velocidad de procesamiento en comparación con el caso de hacer referencia a la tabla.
La Figura 3 es un diagrama que ilustra un ejemplo de una matriz de pesos mWeight [i] [j] de (M, m) = (1,3).
En este punto, cuando la matriz de pesos mWeight [i] [j] antes de establecer la cantidad de desplazamiento sW al valor fijo, por ejemplo, la cantidad de desplazamiento sW de (M, m) = (1, 3) especificada en la Referencia REF 3 es 9, la matriz de pesos mWeight [i] [j] de (M, m) = (1,3) se denomina matriz de pesos convencional mWeight [i] [j] de (M, m) = (1,3). Además, cuando la matriz de pesos mWeight [i] [j] después de establecer la cantidad de desplazamiento sW al valor fijo, por ejemplo, la cantidad de desplazamiento sW de (M, m) = (1, 3) se cambia a 8, la matriz de pesos mWeight [i] [j] en la que la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1,3) usada en la ecuación (1) se denomina matriz de pesos fija mWeight [i] [j] de (M, m) = (1,3).
A de la Figura 3 es un diagrama que ilustra la matriz de pesos convencional mWeight [i] [j] de (M, m) = (1, 3), y B de la Figura 3 es un diagrama que ilustra un ejemplo de la matriz de pesos fija mWeight [i] [j] de (M, m) = (1,3).
En la Figura 3, en el valor de orden i 1 desde la izquierda, el valor de orden j 1 desde arriba representa la matriz de pesos mWeight [i] [j].
En la Figura 3, la matriz de pesos fija mWeight [i] [j] (B de la Figura 3) de (M, m) = (1,3) se cambia a casi 1/2 veces la matriz de pesos convencional mWeight [i] [j] (A de la Figura 3) de (M, m) = (1, 3). Esto se debe a que la cantidad de desplazamiento sW realizado hacia la derecha en la ecuación (8-69) de la referencia REF 3 se ha cambiado (fijado) de 9 a 8.
Obsérvese que la matriz de pesos fija mWeight [i] [j] de (M, m) = (1, 3) no se limita al valor ilustrado en la Figura 3.
Para la matriz de pesos fija mWeight [i] [j] de (M, m) = (1, 3), la cantidad de desplazamiento sW establecida al valor fijo se usa para realizar la operación y se puede cambiar según sea apropiado dentro del intervalo en el que el efecto técnico se muestre apropiadamente. Además, dado que el intervalo en el que se muestra el efecto técnico cambia dependiendo del nivel aproximado que se va a establecer, se puede cambiar apropiadamente siempre que esté dentro de esos intervalos. Por ejemplo, se puede cambiar dentro del intervalo de ± 1 y se puede cambiar dentro del intervalo de ± 3. Además, es posible no cambiar únicamente todos los valores de manera uniforme, sino también cambiar únicamente algunos valores. También es posible establecer el intervalo de valores que van a cambiarse individualmente con respecto a los valores existentes.
Es decir, por ejemplo, cuando la operación de la ecuación (1) se realizó usando la cantidad de desplazamiento sW establecida al valor fijo, la matriz de pesos fija mWeight [i] [j] de (M, m) = (1, 3) se puede cambiar apropiadamente dentro del intervalo en el que se pueden obtener efectos técnicos tales como garantizar una precisión de predicción predeterminada o superior para la imagen prevista.
Además, el intervalo (grado) en el que se muestra el efecto técnico cambia dependiendo de cuánto se establezca el grado en el que el píxel de predicción fijo predMip [x] [y] se aproxima al píxel de predicción convencional predMip [x] [y] (en lo sucesivo en el presente documento, también denominado nivel de aproximación). La matriz de pesos fija mWeight [i] [j] de (M, m) = (1, 3) se puede cambiar según sea apropiado dentro del intervalo en el que se puede mantener el nivel de aproximación establecido.
Por ejemplo, la matriz de pesos fija mWeight [i] [j] de (M, m) = (1, 3) se puede cambiar dentro del intervalo de ± 1 basándose en el valor ilustrado en B de la Figura 3, o se puede cambiar dentro del intervalo de ±3.
El cambio de la matriz de pesos fija mWeight [i] [j] de (M, m) = (1,3) se puede realizar en toda la matriz de pesos fija mWeight [i] [j] de (M, m) = (1,3), pero se puede hacer únicamente en una parte de la matriz de pesos fija mWeight [i] [j] de (M, m) = (1,3).
Además, a medida que se cambia el intervalo de valores en el que se cambia la matriz de pesos fija mWeight [i] [j] de (M, m) = (1, 3), también es posible adoptar un intervalo uniforme para todos de la matriz de pesos fija mWeight [i] [j] de (M, m) = (1,3) y adoptar un intervalo separado para cada matriz de pesos fija mWeight [i] [j] de (M, m) = (1,3).
Por ejemplo, el intervalo de valores en el que se cambia la matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 3) se puede establecer individualmente para cada valor de la correspondiente matriz de pesos convencional mWeight [i] [j].
Lo mismo también se aplica a la matriz de pesos fija mWeight [i] [j] distinta de (M, m) = (1,3), el vector de desviación vBias [j] cambió de acuerdo con la cantidad de desplazamiento sW establecida en el valor fijo, y la variable fO descrita más adelante, que se cambia de acuerdo con la cantidad de desplazamiento sW establecida al valor fijo.
La Figura 4 es un diagrama que ilustra un ejemplo de una matriz de pesos mWeight [i] [j] de (M, m) = (1,8).
A de la Figura 4 es un diagrama que ilustra la matriz de pesos convencional mWeight [i] [j] de (M, m) = (1, 8), y B de la Figura 4 es un diagrama que ilustra un ejemplo de la matriz de pesos fija mWeight [i] [j] de (M, m) = (1,8).
En la Figura 4, de manera similar a la Figura 3, en el valor de orden i 1 desde la izquierda, el valor de orden j 1 desde arriba son la matriz de pesos mWeight [i] [j].
En la Figura 4, similar a la Figura 3, la matriz de pesos fija mWeight [i] [j] (B de la Figura 4) de (M, m) = (1,8) se cambia a casi 1/2 veces la matriz de pesos convencional mWeight [i] [j] (A de la Figura 4) de (M, m) = (1,8).
La Figura 5 es un diagrama que ilustra un ejemplo del vector de desviación vBias [j] de MipSizeld = 1.
En este punto, el vector de desviación vBias [j] antes de establecer la cantidad de desplazamiento sW al valor fijo, por ejemplo, el vector de desviación vBias[j] de MipSizeld = 1 cuando la cantidad de desplazamiento sW de MipSizeld = 1 especificada en la Referencia REF 3 es 9 también se denomina vector de desviación convencional vBias [j] de MipSizeld = 1.
Además, el vector de desviación vBias [j] después de establecer la cantidad de desplazamiento sW al valor fijo, por ejemplo, el vector de desviación vBias[j] en el que el vector de desviación convencional vBias [j] de MipSizeld = 1 usado en la ecuación (1) cuando la cantidad de desplazamiento sW de MipSizeld = 1 se cambia a 8 se denomina vector de desviación fijo vBias[j] de MipSizeld = 1.
A de la Figura 5 es un diagrama que ilustra el vector de desviación convencional vBias [j] con MipSizeld = 1, y B de la Figura 5 es un diagrama que ilustra un ejemplo del vector de desviación fijo vBias [j] de MipSizeld = 1.
En la Figura 5, en el valor de orden j 1 desde la izquierda, el valor de k 1 desde arriba es el vector de desviación vBias [j] de (M, m) = (1, k).
En la Figura 5, del vector de desviación fijo vBias[j] de (M, m) = (1, 0) a (1,9), el vector de desviación fijo vBias[j] de (M, m) = (1,3) y (1,8) se cambia a casi 1/2 veces el vector de desviación convencional vBias [j] de (M, m) = (1,3) y (1,8) para estar rodeado por una línea de puntos, y el otro vector de desviación fijo vBias [j] es el mismo que el vector de desviación convencional vBias [j].
La Figura 6 es un diagrama para describir un tercer método de generación de una imagen prevista de MIP.
En el tercer método de generación, la cantidad de desplazamiento sW de la operación para generar la imagen prevista de la MIP propuesta en la referencia A (JVET-N1001-v7_proposal_text_MIP_8Bit.docx) (y la Referencia REF 7) se establece al valor fijo, por ejemplo, 6. A continuación, en el tercer método de generación, la operación para generar la imagen prevista de la MIP se cambia de acuerdo con la cantidad de desplazamiento sW = 6 establecida al valor fijo de 6, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
En este punto, en la generación de la imagen prevista propuesta en la referencia A, se generan (algunos) píxeles predMip [x] [y] de la imagen prevista del bloque de predicción actual de acuerdo con la ecuación (2) descrita como ecuación (8-69) en la referencia A.
predMip[x] [y] = ( ( (£mWeight[ i ]
[ y*incH*predC+x*incW ]*p[ i ] ) oW ) » sW ) dcVal
... (2 )
En la ecuación (2), un sumatorio I representa un sumatorio tomado mientras se cambia la variable i a un número entero de 0 a inSize-1. El inSize se establece a 2 * boundarySize-1 o 2 * boundarySize.
La variable oW corresponde al vector de desviación vBias [j] en la ecuación (1). La variable oW se calcula de acuerdo con la ecuación (3) descrita como ecuación (8-65) en la referencia A.
oW = (1 « (sW - 1)) - fO * ( £ p [i] )
... (3 )
De manera similar a la ecuación (2), en la ecuación (3), un sumatorio I representa un sumatorio tomado mientras se cambia la variable i a un número entero de 0 a inSize-1.
La variable fO se establece de acuerdo con el MipSizeld y el modelado. Dado que la variable oW correspondiente al vector de desviación vBias [j] se calcula de acuerdo con la ecuación (3) usando la variable fO, similar a la variable oW, la variable fO también puede corresponder al vector de desviación vBias [j].
En la generación de la imagen prevista propuesta en la referencia A, sW es la cantidad de desplazamiento que se desplaza ((ImWeight [i] [y * incH * predC x * incW] * p [i]) oW).
De acuerdo con la Tabla 8-8 de la referencia A, la cantidad de desplazamiento sW se establece a 6, 7 y 8 de acuerdo con MipSizeld y el modelado como se ilustra en la Figura 6.
Por lo tanto, en la generación de la imagen prevista propuesta en la referencia A, existe un problema similar al primer método de generación en el sentido de que es necesario restablecer la cantidad de desplazamiento sW para cada combinación de MipSizeld y el modelado, el procesamiento de generación de imagen prevista de la MIP se vuelve complicado, o similar.
Por lo tanto, en el tercer método de generación, la cantidad de desplazamiento sW de la ecuación (2) para generar la imagen prevista de la MIP propuesta en la referencia A se establece al valor fijo.
Como valor fijo establecido en la cantidad de desplazamiento sW, por ejemplo, entre 6 y 8 descritos en la Tabla 8-8 de la referencia A, se usa el valor mínimo de 6, el valor máximo de 8 o el valor de mediana de 7, o se pueden adoptar otros valores. En la Figura 6, por ejemplo, entre 6 a 8 descritos en la Tabla 8-8 de la referencia A, el valor mínimo de 6 se adopta como el valor fijo establecido para la cantidad de desplazamiento sW.
A continuación, en el tercer método de generación, la operación de la ecuación (2) se cambia de acuerdo con la cantidad de desplazamiento sW = 6 establecida al valor fijo de 6, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
Específicamente, en el tercer método de generación, la cantidad de desplazamiento sW se fija a 6 para cada combinación de MipSizeld y modelado.
A continuación, de acuerdo con la cantidad de desplazamiento fija sW = 6, la matriz de pesos convencional mWeight [1] [j] y la variable fO (usada para obtener la variable oW) correspondiente al vector de desviación vBias [j] se cambian de modo que el píxel previsto fijo predMip [x] [y] obtenido de acuerdo con la ecuación (2) usando la cantidad de desplazamiento sW = 6 es un valor que se aproxima al de píxel previsto convencional predMip [x] [y].
En este punto, la variable fO antes de establecer la cantidad de desplazamiento sW al valor fijo, aquí, la variable fO especificada en la referencia A también se denomina variable convencional fO. Además, la variable fO después de establecer la cantidad de desplazamiento sW al valor fijo, en este punto, la variable fO obtenida cambiando la variable convencional fO de acuerdo con la cantidad de desplazamiento fija sW = 6 también se denomina variable fija fO.
En el tercer método de generación, la imagen prevista de la MIP se genera de acuerdo con la operación de la ecuación (2) (y la ecuación (3)), que incluye la matriz de pesos fija mWeight [i] [j] y la variable fija fO obtenida cambiando la matriz de pesos convencional mWeight [i] [j] y la variable convencional fO de acuerdo con la cantidad de desplazamiento sW = 6 establecida al valor fijo como se ha descrito anteriormente.
Como se ha descrito anteriormente, de manera similar al segundo método de generación, en el tercer método de generación, la MIP se realiza usando la cantidad de desplazamiento sW establecida al valor fijo. Es decir, la operación de la ecuación (2) se cambia de acuerdo con la cantidad de desplazamiento sW establecida al valor fijo, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
Por lo tanto, en el tercer método de generación, la cantidad de desplazamiento sW se fija independientemente del modelado y de la combinación de MipSizeld y modelado, por lo que se puede simplificar el procesamiento de la MIP. Como resultado, no es necesario especificar la tabla especificada como Tabla 8-8 en la Referencia A en la norma, y la norma se puede simplificar.
Además, por ejemplo, cuando el tercer método de generación se implementa mediante hardware, no se requiere el selector para cambiar la cantidad de desplazamiento sW, lo que puede suprimir los aumentos en la escala del circuito. Además, cuando el tercer método de generación se implementa mediante software, no es necesario hacer referencia a la tabla especificada como Tabla 8-8 en la Referencia A, y es posible suprimir la disminución en la velocidad de procesamiento en comparación con el caso de hacer referencia a la tabla.
La Figura 7 es un diagrama para describir un cuarto método de generación de una imagen prevista de MIP.
En el cuarto método de generación, la cantidad de desplazamiento sW de la operación para generar la imagen prevista de la MIP propuesta en la referencia A se establece al valor fijo de acuerdo con el tamaño de la matriz de pesos mWeight [i] [j] usada en la MIP.
En este punto, dado que MipSizeld es un identificador del tamaño de la matriz de pesos mWeight [i] [j], establecer la cantidad de desplazamiento sW al valor fijo de acuerdo con el tamaño de la matriz es equivalente a establecer la cantidad de desplazamiento sW al valor fijo de acuerdo con MipSizeld, por ejemplo, establecer la cantidad de desplazamiento sW al valor fijo para cada MipSizeld, o similar.
En el cuarto método de generación, la operación para generar la imagen prevista de la MIP se cambia de acuerdo con la cantidad de desplazamiento sW establecida al valor fijo para cada MipSizeld, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
En el cuarto método de generación, como el valor fijo para cada MipSizeld establecido en la cantidad de desplazamiento sW, por ejemplo, puede adoptarse el valor mínimo o el valor máximo de la cantidad de desplazamiento sW para cada MipSizeld descrito en la Tabla 8-8 de la referencia A u otros valores.
Por ejemplo, como valor fijo para cada MipSizeld establecido en la cantidad de desplazamiento sW, se adopta el valor mínimo de la cantidad de desplazamiento sW para cada MipSizeld descrito en la Tabla 8-8 de la referencia A.
En la referencia A, dado que la cantidad de desplazamiento sW de MipSizeld = 0 puede ser 6 o 7, cuando se adopta el valor mínimo de la cantidad de desplazamiento sW para cada MipSizeld descrito en la Tabla 8-8 de la referencia A como el valor fijo para cada de MipSizeld establecido en la cantidad de desplazamiento sW, en el cuarto método de generación, la cantidad de desplazamiento sW de MipSizeld = 0 se fija a 6, que es el valor mínimo de 6 y 7. Es decir, la cantidad de desplazamiento sW que es 7 de MipSizeld = 0 descrito en la Tabla 8-8 de la referencia A se cambia a 6.
En la referencia A, dado que la cantidad de desplazamiento sW de MipSizeld = 1 puede ser 7 u 8, cuando se adopta el valor mínimo de la cantidad de desplazamiento sW para cada MipSizeld descrito en la Tabla 8-8 de la referencia A como el valor fijo para cada de MipSizeld establecido en la cantidad de desplazamiento sW, en el cuarto método de generación, la cantidad de desplazamiento sW de MipSizeld = 1 se fija a 7, que es el valor mínimo de 7 y 8. Es decir, la cantidad de desplazamiento sW que es 8 de MipSizeld = 1 descrito en la Tabla 8-8 de la referencia A se cambia a 7.
En la referencia A, dado que la cantidad de desplazamiento sW de MipSizeld = 2 puede ser 6 o 7, cuando se adopta el valor mínimo de la cantidad de desplazamiento sW para cada MipSizeld descrito en la Tabla 8-8 de la referencia A como el valor fijo para cada de MipSizeld establecido en la cantidad de desplazamiento sW, en el cuarto método de generación, la cantidad de desplazamiento sW de MipSizeld = 2 se fija a 6, que es el valor mínimo de 6 y 7. Es decir, la cantidad de desplazamiento sW que es 7 de MipSizeld = 2 descrito en la Tabla 8-8 de la referencia A se cambia a 6.
En el cuarto método de generación, como se ha descrito anteriormente, la operación de la ecuación (2) se cambia de acuerdo con la cantidad de desplazamiento sW establecida al valor fijo para cada MipSizeld, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
Específicamente, en el cuarto método de generación, la cantidad de desplazamiento sW se fija a 6 para MipSizeld = 0 y 2.
Además, para la cantidad de desplazamiento fijo sW = 6, la matriz de pesos convencional mWeight [i] [j] y la variable convencional fO se cambian de modo que el píxel de predicción fijo predMip [x] [y] obtenido de acuerdo con la ecuación (2) usando la cantidad de desplazamiento sW = 6 es el valor que se aproxima al píxel de predicción convencional predMip [x] [y].
A continuación, la imagen prevista de la MIP se genera de acuerdo con la operación de la ecuación (2) que incluye la matriz de pesos fija mWeight [i] [j] y la variable fija fO obtenida cambiando la matriz de pesos convencional mWeight [1] [j] y la variable convencional fO de acuerdo con la cantidad de desplazamiento sW = 6 establecida al valor fijo.
Además, para MipSizeld = 1, la cantidad de desplazamiento sW se fija a 7.
Además, para la cantidad de desplazamiento fijo sW = 7, la matriz de pesos convencional mWeight [i] [j] y la variable convencional fO se cambian de modo que el píxel de predicción fijo predMip [x] [y] obtenido de acuerdo con la ecuación (2) usando la cantidad de desplazamiento sW = 7 es el valor que se aproxima al píxel de predicción convencional predMip [x] [y].
A continuación, la imagen prevista de la MIP se genera de acuerdo con la operación de la ecuación (2) que incluye la matriz de pesos fija mWeight [i] [j] y la variable fija fO obtenida cambiando la matriz de pesos convencional mWeight [i] [j] y la variable convencional fO de acuerdo con la cantidad de desplazamiento sW = 7 establecida al valor fijo.
Por lo tanto, en el cuarto método de generación, dos ecuaciones de la ecuación de la operación en la que la operación de la ecuación (2) se cambia de acuerdo con la cantidad de desplazamiento sW fijada a 6, y la ecuación de la operación en la que la operación de la ecuación ( 2) se cambia de acuerdo con la cantidad de desplazamiento sW fijada a 7 se usan para cambiar de acuerdo con el MipSizeld.
Como se ha descrito anteriormente, en el cuarto método de generación, la MIP se realiza usando la cantidad de desplazamiento establecida en el valor fijo para cada MipSizeld. Es decir, la operación de la ecuación (2) se cambia de acuerdo con la cantidad de desplazamiento sW establecida al valor fijo para cada MiPSizeld, y la imagen prevista de la MIP se genera de acuerdo con la operación cambiada.
Por lo tanto, en el cuarto método de generación, la cantidad de desplazamiento sW se fija independientemente del modelado, por lo que el procesamiento de MIP se puede simplificar, y la tabla para cada modelado especificada como Tabla 8-8 en la referencia A no está definida en la norma, y la norma se puede simplificar.
Además, por ejemplo, cuando el cuarto método de generación se implementa mediante hardware, no se requiere el selector para cambiar la cantidad de desplazamiento sW, lo que puede suprimir los aumentos en la escala del circuito. Además, cuando el cuarto método de generación se implementa mediante software, no es necesario hacer referencia a la tabla especificada como Tabla 8-8 en la Referencia A, y es posible suprimir la disminución en la velocidad de procesamiento en comparación con el caso de hacer referencia a la tabla.
En lo sucesivo en el presente documento, se describirá con más detalle la cantidad de desplazamiento sW descrita en la referencia A, la matriz de pesos (convencional) mWeight [i] [j], la variable (convencional) fO, la cantidad de desplazamiento sW usada en el tercer método de generación y el cuarto método de generación, la matriz de pesos (fija) mWeight [i] [j], y la variable (fija) fO.
La Figura 8 es un diagrama que ilustra la cantidad de desplazamiento sW descrita en la referencia A.
En la Figura 8, en el valor de orden m 1 desde la izquierda, el valor de orden M 1 desde arriba representa la cantidad de desplazamiento sW de (M, m). Lo mismo se aplica al diagrama de la cantidad de desplazamiento sW descrita más adelante.
La Figura 9 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 0) descrita en la referencia A.
En la Figura 9, en el valor de orden i 1 desde la izquierda, el valor de orden j 1 desde arriba representa la matriz de pesos convencional mWeight [i] [j]. Lo mismo se aplica al diagrama de la matriz de pesos mWeight [i] [j] descrita más adelante.
La Figura 10 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 1) descrita en la referencia A.
La Figura 11 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 2) descrita en la referencia A.
La Figura 12 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 3) descrita en la referencia A.
La Figura 13 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 4) descrita en la referencia A.
La Figura 14 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 5) descrita en la referencia A.
La Figura 15 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 6) descrita en la referencia A.
La Figura 16 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 7) descrita en la referencia A.
La Figura 17 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 8) descrita en la referencia A.
La Figura 18 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 9) descrita en la referencia A.
La Figura 19 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 10) descrita en la referencia A.
La Figura 20 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 11) descrita en la referencia A.
La Figura 21 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 12) descrita en la referencia A.
La Figura 22 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 13) descrita en a referencia A.
.a Figura 23 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 14) descrita en la referencia A.
.a Figura 24 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 15) descrita en la referencia A.
.a Figura 25 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 16) descrita en la referencia A.
.a Figura 26 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (0, 17) descrita en la referencia A.
.a Figura 27 es un diagrama que ilustra la variable convencional fO de MipSizeld = 0 descrita en la referencia A. En la variable convencional fO de MipSizeld = 0 en la Figura 27, el valor de oren m 1 desde la izquierda representa a variable convencional fO del modelado = m. .o mismo se aplica al diagrama de la variable fO descrita más adelante. .a Figura 28 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 0) descrita en la referencia A.
.a Figura 29 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 1) descrita en la referencia A.
.a Figura 30 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 2) descrita en la referencia A.
.a Figura 31 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 3) descrita en la referencia A.
.a Figura 32 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1,4) descrita en la referencia A.
.a Figura 33 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 5) descrita en la referencia A.
.a Figura 34 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 6) descrita en la referencia A.
.a Figura 35 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 7) descrita en la referencia A.
.a Figura 36 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 8) descrita en la referencia A.
.a Figura 37 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (1, 9) descrita en la referencia A.
.a Figura 38 es un diagrama que ilustra la variable convencional fO de MipSizeld = 1 descrita en la referencia A. .a Figura 39 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 0) descrita en la referencia A.
.a Figura 40 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 1) descrita en la referencia A.
.a Figura 41 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 2) descrita en la referencia A.
.a Figura 42 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 3) descrita en la referencia A.
La Figura 43 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 4) descrita en la referencia A.
La Figura 44 es un diagrama que ilustra la matriz de pesos convencional mWeight[i] [j] de (M, m) = (2, 5) descrita en la referencia A.
La Figura 45 es un diagrama que ilustra la variable convencional fO de MipSizeld = 2 descrita en la referencia A. La Figura 46 es un diagrama que ilustra la cantidad de desplazamiento sW usada en el tercer método de generación. En el tercer método de generación, la cantidad de desplazamiento sW se establece al valor fijo, por ejemplo, 6. A continuación, en el tercer método de generación, se usa la matriz de pesos convencional mWeight [i] [j], la matriz de pesos fija mWeight [i] [j] obtenida cambiando la variable convencional fO y la variable fija fO de modo que el píxel previsto fijo predMip [x] [y] obtenido después de establecer la cantidad de desplazamiento sW al valor fijo de 6 es un valor que se aproxima al píxel previsto convencional predMip [x] [y].
La Figura 47 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 0) usada en el tercer método de generación.
La Figura 48 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 1) usada en el tercer método de generación.
La Figura 49 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 2) usada en el tercer método de generación.
La Figura 50 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 3) usada en el tercer método de generación.
La Figura 51 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 4) usada en el tercer método de generación.
La Figura 52 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 5) usada en el tercer método de generación.
La Figura 53 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 6) usada en el tercer método de generación.
La Figura 54 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 7) usada en el tercer método de generación.
La Figura 55 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 8) usada en el tercer método de generación.
La Figura 56 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 9) usada en el tercer método de generación.
La Figura 57 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 10) usada en el tercer método de generación.
La Figura 58 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 11) usada en el tercer método de generación.
La Figura 59 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 12) usada en el tercer método de generación.
La Figura 60 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 13) usada en el tercer método de generación.
La Figura 61 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 14) usada en el tercer método de generación.
La Figura 62 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 15) usada en el tercer método de generación.
La Figura 63 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 16) usada en el tercer método de generación.
La Figura 64 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 17) usada en el tercer método de generación.
La Figura 65 es un diagrama que ilustra la variable fija fO de MipSizeld = 0 usada en el tercer método de generación. La Figura 66 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 0) usada en el tercer método de generación.
La Figura 67 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 1) usada en el tercer método de generación.
La Figura 68 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 2) usada en el tercer método de generación.
La Figura 69 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 3) usada en el tercer método de generación.
La Figura 70 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 4) usada en el tercer método de generación.
La Figura 71 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 5) usada en el tercer método de generación.
La Figura 72 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 6) usada en el tercer método de generación.
La Figura 73 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 7) usada en el tercer método de generación.
La Figura 74 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 8) usada en el tercer método de generación.
La Figura 75 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 9) usada en el tercer método de generación.
La Figura 76 es un diagrama que ilustra la variable fija fO de MipSizeld = 1 usada en el tercer método de generación. La Figura 77 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 0) usada en el tercer método de generación.
La Figura 78 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 1) usada en el tercer método de generación.
La Figura 79 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 2) usada en el tercer método de generación.
La Figura 80 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 3) usada en el tercer método de generación.
La Figura 81 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 4) usada en el tercer método de generación.
La Figura 82 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 5) usada en el tercer método de generación.
La Figura 83 es un diagrama que ilustra la variable fija fO de MipSizeld = 2 usada en el tercer método de generación. La Figura 84 es un diagrama que ilustra la cantidad de desplazamiento sW usada en el cuarto método de generación. En el cuarto método de generación, la cantidad de desplazamiento sW se establece al valor fijo de acuerdo con el tamaño de la matriz de pesos mWeight [i] [j] indicado por MipSizeld. Es decir, en el cuarto método de generación, la cantidad de desplazamiento sW se establece al valor fijo para cada MipSizeld. Específicamente, la cantidad de desplazamiento sW se establece a 6, 7 y 6 cuando MipSizeld = 0, 1 y 2, respectivamente.
A continuación, de manera similar al tercer método de generación, en el cuarto método de generación, se usa la matriz de pesos convencional mWeight [i] [j], la matriz de pesos fija mWeight [i] [j] obtenida cambiando la variable convencional fO y la variable fija fO de modo que el píxel previsto fijo predMip [x] [y] obtenido después de establecer la cantidad de desplazamiento sW al valor fijo que es un valor que se aproxima al píxel previsto convencional predMip [x] [y].
La Figura 85 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 0) usada en el cuarto método de generación.
La Figura 86 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 1) usada en el cuarto método de generación.
La Figura 87 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 2) usada en el cuarto método de generación.
La Figura 88 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 3) usada en el cuarto método de generación.
La Figura 89 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 4) usada en el cuarto método de generación.
La Figura 90 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 5) usada en el cuarto método de generación.
La Figura 91 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 6) usada en el cuarto método de generación.
La Figura 92 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 7) usada en el cuarto método de generación.
La Figura 93 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 8) usada en el cuarto método de generación.
La Figura 94 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 9) usada en el cuarto método de generación.
La Figura 95 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 10) usada en el cuarto método de generación.
La Figura 96 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 11) usada en el cuarto método de generación.
La Figura 97 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 12) usada en el cuarto método de generación.
La Figura 98 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 13) usada en el cuarto método de generación.
La Figura 99 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 14) usada en el cuarto método de generación.
La Figura 100 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 15) usada en el cuarto método de generación.
La Figura 101 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 16) usada en el cuarto método de generación.
La Figura 102 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (0, 17) usada en el cuarto método de generación.
La Figura 103 es un diagrama que ilustra la variable fija fO de MipSizeld = 0 usada en el cuarto método de generación. La Figura 104 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,0) usada en el cuarto método de generación.
La Figura 105 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1, 1) usada en el cuarto método de generación.
La Figura 106 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,2) usada en el cuarto método de generación.
La Figura 107 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,3) usada en el cuarto método de generación.
La Figura 108 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,4) usada en el cuarto método de generación.
La Figura 109 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,5) usada en el cuarto método de generación.
La Figura 110 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,6) usada en el cuarto método de generación.
La Figura 111 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,7) usada en el cuarto método de generación.
La Figura 112 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,8) usada en el cuarto método de generación.
La Figura 113 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (1,9) usada en el cuarto método de generación.
La Figura 114 es un diagrama que ilustra la variable fija fO de MipSizeld = 1 usada en el cuarto método de generación. La Figura 115 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 0) usada en el cuarto método de generación.
La Figura 116 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 1) usada en el cuarto método de generación.
La Figura 117 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 2) usada en el cuarto método de generación.
La Figura 118 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 3) usada en el cuarto método de generación.
La Figura 119 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 4) usada en el cuarto método de generación.
La Figura 120 es un diagrama que ilustra una matriz de pesos fija mWeight[i] [j] de (M, m) = (2, 5) usada en el cuarto método de generación.
La Figura 121 es un diagrama que ilustra la variable fija fO de MipSizeld = 2 usada en el cuarto método de generación.
<Sistema de procesamiento de imágenes al que se aplica la tecnología actual>
La Figura 122 es un diagrama de bloques que ilustra un ejemplo de configuración de una realización de un sistema de procesamiento de imágenes al que se aplica la presente tecnología.
El sistema de procesamiento de imágenes 10 tiene un dispositivo de procesamiento de imágenes como codificador 11 y un dispositivo de procesamiento de imágenes como decodificador 51.
El codificador 11 codifica la imagen original a codificar suministrada al codificador 11 y emite un flujo de bits codificado obtenido mediante la codificación. El flujo de bits codificado se suministra al decodificador 51 a través de un medio de grabación o un medio de transmisión (no ilustrado).
El decodificador 51 decodifica el flujo de bits codificado que se le suministra y emite la imagen decodificada obtenida mediante la decodificación.
<Ejemplo de configuración del codificador 11>
La Figura 123 es un diagrama de bloques que ilustra un ejemplo de configuración del codificador 11 de la Figura 122.
Obsérvese que, en el diagrama de bloques que se describe a continuación, la descripción de la línea que suministra la información (datos) requerida para el procesamiento de cada bloque se omite según sea apropiado para evitar complicar el diagrama.
En la Figura 123, el codificador 11 incluye una unidad de conversión A/D 21, una memoria intermedia de reorganización 22, una unidad de cálculo 23, una unidad de transformada ortogonal 24, una unidad de cuantificación 25, una unidad de codificación reversible 26 y una memoria intermedia de acumulación 27. Además, el codificador 11 incluye una unidad de cuantificación inversa 28, una unidad de transformada ortogonal inversa 29, una unidad de cálculo 30, una memoria de fotograma 32, una unidad de selección 33, una unidad de intra predicción 34, una unidad de predicción/compensación de movimiento 35, una unidad de selección de imagen de predicción 36, y una unidad de control de tasa 37. Además, el codificador 11 tiene un filtro de desbloqueo 31a, un filtro de compensación adaptativo 41 y un filtro de bucle adaptativo (ALF) 42.
La unidad de conversión A/D 21 convierte A/D la imagen original (objetivo de codificación) de la señal analógica en una imagen original de una señal digital, y suministra y almacena la imagen original convertida A/D a y en la memoria intermedia de reorganización 22. Obsérvese que, cuando la imagen original de la señal digital se suministra al codificador 11, el codificador 11 se puede configurar sin proporcionar la unidad de conversión A/D 21.
La memoria intermedia de reorganización 22 reorganiza el fotograma de la imagen original desde el orden de visualización al orden de codificación (decodificación) de acuerdo con un grupo de imágenes (GOP), y suministra el fotograma a la unidad de cálculo 23, la unidad de intra predicción 34 y la unidad de predicción/compensación de movimiento 35.
La unidad de cálculo 23 resta la imagen prevista suministrada desde la unidad de intra predicción 34 o la unidad de predicción/compensación de movimiento 35 a través de la unidad de selección de imagen de predicción 36 de la imagen original de la memoria intermedia de reorganización 22, y suministra el residual (residual previsto) obtenido por la resta a la unidad de transformada ortogonal 24.
La unidad de transformada ortogonal 24 realiza una transformada ortogonal tal como una transformada de coseno discreta o una transformada de Karhunen-Loeve en el residual suministrado desde la unidad de cálculo 23, y suministra el coeficiente de transformada ortogonal obtenido mediante la transformada ortogonal a la unidad de cuantificación 25.
La unidad de cuantificación 25 cuantifica el coeficiente de transformada ortogonal suministrado desde la unidad de transformada ortogonal 24. La unidad de cuantificación 25 establece un parámetro de cuantificación basándose en un valor objetivo de una cantidad de código (valor objetivo de cantidad de código) suministrada desde la unidad de control de tasa 37, y realiza la cuantificación del coeficiente de transformada ortogonal. La unidad de cuantificación 25 suministra datos codificados, que es el coeficiente de transformada ortogonal cuantificado, a la unidad de codificación reversible 26.
La unidad de codificación reversible 26 codifica el coeficiente de transformada ortogonal cuantificado como los datos codificados de la unidad de cuantificación 25 mediante un método de codificación reversible predeterminado.
Además, la unidad de codificación reversible 26 adquiere información de codificación requerida para decodificar por el dispositivo de decodificación 170 de cada bloque entre la información de codificación relacionada con la codificación predictiva en el codificador 11.
En este punto, como información de codificación, hay, por ejemplo, un modo de predicción de intra predicción o inter predicción, información de movimiento tal como vector de movimiento, un valor objetivo de cantidad de código, un parámetro de cuantificación, tipos de imagen (I, P, B), filtro. parámetros tales como el filtro de desbloqueo 31a y el filtro de compensación adaptativo 41, y similares.
El modo de predicción puede obtenerse de la unidad de intra predicción 34 o de la unidad de predicción/compensación de movimiento 35. La información de movimiento puede adquirirse desde la unidad de predicción/compensación de movimiento 35. Los parámetros de filtro del filtro de desbloqueo 31a y del filtro de compensación adaptativo 41 pueden adquirirse desde el filtro de desbloqueo 31a y el filtro de compensación adaptativo 41, respectivamente.
La unidad de codificación reversible 26 codifica la información de codificación mediante, por ejemplo, codificación de longitud variable o codificación aritmética tal como codificación de longitud variable adaptativa al contexto (CAVLC) o codificación aritmética binaria adaptativa al contexto (CABAC), u otros métodos de codificación reversible, genera la flujo de bits codificado que incluye (multiplexado) la información codificada después de la codificación, los datos codificados de la unidad de cuantificación 25 y suministra el flujo de bits codificado generado a la memoria intermedia de acumulación 27.
En este punto, la unidad de cálculo 23 anterior o la unidad de codificación reversible 26 constituye una unidad de codificación que codifica una imagen, y el procesamiento (proceso) realizado por la unidad de codificación es el proceso de codificación.
La memoria intermedia de acumulación 27 acumula temporalmente el flujo de bits codificado suministrado desde la unidad de codificación reversible 26. El flujo de bits codificado almacenado en la memoria intermedia de acumulación 27 se lee y se transmite a una temporización predeterminada.
Los datos codificados, que son el coeficiente de transformada ortogonal cuantificado en la unidad de cuantificación 25, no únicamente se suministran a la unidad de codificación reversible 26, sino también a la unidad de cuantificación inversa 28. La unidad de cuantificación inversa 28 cuantifica a la inversa el coeficiente de transformada ortogonal cuantificado mediante un método correspondiente a la cuantificación mediante la unidad de cuantificación 25, y suministra el coeficiente de transformada ortogonal obtenido mediante la cuantificación inversa que se transmite a la unidad de transformada ortogonal inversa 29.
La unidad de transformada ortogonal inversa 29 transforma ortogonalmente a la inversa el coeficiente de transformada ortogonal suministrado desde la unidad de cuantificación inversa 28 mediante un método correspondiente al procesamiento de transformada ortogonal mediante la unidad de transformada ortogonal 24, y suministra los residuales obtenidos como resultado de la transformada ortogonal inversa a la unidad de cálculo 30.
La unidad de cálculo 30 suma la imagen prevista suministrada desde la unidad de intra predicción 34 o la unidad de predicción/compensación de movimiento 35 a través de la unidad de selección de imagen de predicción 36 al residual suministrado desde la unidad de transformada ortogonal inversa 29, obteniendo de esta manera una salida (una parte de) la imagen decodificada a partir de la que se decodifica la imagen original.
La imagen decodificada emitida por la unidad de cálculo 30 se suministra al filtro de desbloqueo 31a o a la memoria de fotograma 32.
La memoria de fotograma 32 almacena temporalmente la imagen decodificada suministrada desde la unidad de cálculo 30 y la imagen decodificada (imagen de filtro) suministrada desde el ALF 42 y a la que se aplican el filtro de desbloqueo 31a, el filtro de compensación adaptativo 41 y el ALF 42. La imagen decodificada almacenada en la memoria de fotograma 32 se suministra a la unidad de selección 33 como la imagen de referencia usada para generar la imagen prevista en a una temporización requerida.
La unidad de selección 33 selecciona el destino de suministro de la imagen de referencia suministrada desde la memoria de fotograma 32. Cuando la intra predicción se realiza en la unidad de intra predicción 34, la unidad de selección 33 suministra la imagen de referencia suministrada desde la memoria de fotograma 32 a la unidad de intra predicción 34. Cuando se realiza la inter predicción en la unidad de predicción/compensación de movimiento 35, la unidad de selección 33 suministra la imagen de referencia suministrada desde la memoria de fotograma 32 a la unidad de predicción/compensación de movimiento 35.
La unidad de intra predicción 34 realiza la intra predicción (predicción en pantalla) usando la imagen original suministrada desde la memoria intermedia de reorganización 22 y la imagen de referencia suministrada desde la memoria de fotograma 32 a través de la unidad de selección 33. La unidad de intra predicción 34 selecciona el modo de predicción de la intra predicción óptima basándose en una función de coste predeterminada, y suministra la imagen prevista generada a partir de la imagen de referencia en el modo de predicción de la intra predicción óptima a la unidad de selección de imagen de predicción 36. Además, la unidad de intra predicción 34 suministra apropiadamente el modo de predicción de la intra predicción seleccionado basándose en la función de coste a la unidad de codificación reversible 26 y similares.
La unidad de predicción/compensación de movimiento 35 realiza la predicción de movimiento usando la imagen original suministrada desde la memoria intermedia de reorganización 22 y la imagen de referencia suministrada desde la memoria de fotograma 32 a través de la unidad de selección 33. Además, la unidad de predicción/compensación de movimiento 35 realiza compensación de movimiento de acuerdo con el vector de movimiento detectado por la predicción de movimiento y genera la imagen prevista. La unidad de predicción/compensación de movimiento 35 realiza inter predicción en un modo de predicción de una pluralidad de inter predicciones preparadas de antemano, y genera la imagen prevista a partir de la imagen de referencia.
La unidad de predicción/compensación de movimiento 35 selecciona el modo de predicción de la inter predicción óptima del modo de predicción de la pluralidad de inter predicciones basándose en una función de coste predeterminada. Además, la unidad de predicción/compensación de movimiento 35 suministra la imagen prevista generada en el modo de predicción de inter predicción óptima a la unidad de selección de imagen de predicción 36.
Además, la unidad de predicción/compensación de movimiento 35 proporciona el modo de predicción de la inter predicción óptima seleccionada basándose en la función de coste o información de movimiento tal como un vector de movimiento requerido para decodificar los datos codificados, codificados en el modo de predicción de la inter predicción a la unidad de codificación reversible 26.
La unidad de selección de imagen de predicción 36 selecciona una fuente de suministro de la imagen prevista que se suministrará a la unidad de cálculo 23 y a la unidad de cálculo 30 desde la unidad de intra predicción 34 y la unidad de predicción/compensación de movimiento 35, y selecciona la imagen prevista suministrada desde la fuente de suministro seleccionada a la unidad de cálculo 23 y a la unidad de cálculo 30.
La unidad de control de tasa 37 controla la tasa de la operación de cuantificación de la unidad de cuantificación 25 basándose en la cantidad de código del flujo de bits codificado acumulado en la memoria intermedia de acumulación 27 de modo que no se produzca desbordamiento o subdesbordamiento. Es decir, la unidad de control de tasa 37 establece la cantidad de código objetivo del flujo de bits codificado y suministra la cantidad de código objetivo establecida a la unidad de cuantificación 25 de modo que no se produzca el desbordamiento o el subdesbordamiento de la memoria intermedia de acumulación 27.
El filtro de desbloqueo 31 a aplica el filtro de desbloqueo a la imagen decodificada desde la unidad de cálculo 30 según sea necesario, y suministra la imagen decodificada (imagen filtrada) a la que se aplica el filtro de desbloqueo, o la imagen decodificada a la que no se le aplica el filtro de desbloqueo al filtro de compensación adaptativo 41.
El filtro de compensación adaptativo 41 aplica el filtro de compensación adaptativo a la imagen decodificada del filtro de desbloqueo 31a según sea necesario, y suministra la imagen decodificada (imagen de filtro) a la que se aplica el filtro de compensación adaptativo o la imagen decodificada a la que no se aplica el filtro de compensación adaptativo al ALF 42.
El ALF 42 aplica el ALF a la imagen decodificada desde el filtro de compensación adaptativo 41 según sea necesario, y suministra la imagen decodificada a la que se aplica el ALF o la imagen decodificada a la que no se aplica ALF a la memoria de fotograma 32.
<Procesamiento de codificación>
La Figura 124 es un diagrama de flujo que ilustra un ejemplo de procesamiento de codificación del codificador 11 de la Figura 123.
El orden de cada etapa del procesamiento de codificación ilustrado en la Figura 124 es un orden para facilitar la explicación, y cada etapa del procesamiento de codificación real se realiza en el orden necesario en paralelo, según sea apropiado. Lo mismo se aplica también a los procesos descritos más adelante.
En la etapa S11, en el codificador 11, la unidad de conversión A/D 21 convierte A/D una imagen original y suministra la imagen original convertida A/D a la memoria intermedia de reorganización 22, y el proceso continúa a la etapa S12.
En la etapa S12, la memoria intermedia de reorganización 22 almacena las imágenes originales de la unidad de conversión A/D 21, reorganiza las imágenes originales en el orden de codificación y emite las imágenes originales reorganizadas, y el proceso continúa a la etapa S13.
En la etapa S13, la unidad de intra predicción 34 realiza la intra predicción (proceso de intra predicción), y el proceso continúa a la etapa S14. En la etapa S14, la unidad de predicción/compensación de movimiento 35 realiza inter predicción para predicción de movimiento o compensación de movimiento, y el proceso continúa a la etapa S15.
En la intra predicción de la unidad de intra predicción 34 y la inter predicción de la unidad de predicción/compensación de movimiento 35, se calculan las funciones de coste de diversos modos de predicción y se genera la imagen prevista.
En la etapa S15, la unidad de selección de imagen de predicción 36 determina el modo de predicción óptimo basándose en cada función de costo obtenida por la unidad de intra predicción 34 y la unidad de predicción/compensación de movimiento 35. A continuación, la unidad de selección de imagen de predicción 36 selecciona y genera la imagen prevista del modo de predicción óptimo a partir de la imagen prevista generada por la unidad de intra predicción 34 y la imagen prevista generada por la unidad de predicción/compensación de movimiento 35, y el proceso continúa desde la etapa S15 a la etapa S16.
En la etapa S16, la unidad de cálculo 23 calcula el residual entre la imagen objetivo a codificar, que es la imagen original emitida por la memoria intermedia de reorganización 22, y la imagen prevista emitida por la unidad de selección de imagen de predicción 36, y suministra el residual calculado a la unidad de transformada ortogonal 24, y el proceso continúa a la etapa S17.
En la etapa S17, la unidad de transformada ortogonal 24 transforma ortogonalmente el residual de la unidad de cálculo 23 y suministra el coeficiente de transformada ortogonal resultante a la unidad de cuantificación 25, y el proceso continúa a la etapa S18.
En la etapa S18, la unidad de cuantificación 25 cuantifica el coeficiente de transformada ortogonal de la unidad de transformada ortogonal 24 y suministra el coeficiente de cuantificación obtenido mediante la cuantificación a la unidad de codificación reversible 26 y a la unidad de cuantificación inversa 28, y el proceso continúa a la etapa S19.
En la etapa S19, la unidad de cuantificación inversa 28 cuantifica a la inversa el coeficiente de cuantificación de la unidad de cuantificación 25 y suministra el coeficiente de transformada ortogonal resultante a la unidad de transformada ortogonal inversa 29, y el proceso continúa a la etapa S20. En la etapa S20, la unidad de transformada ortogonal inversa 29 transforma ortogonalmente a la inversa el coeficiente de transformada ortogonal de la unidad de cuantificación inversa 28 y suministra el residual resultante a la unidad de cálculo 30, y el proceso continúa a la etapa S21.
En la etapa S21, la unidad de cálculo 30 añade el residual de la unidad de transformada ortogonal inversa 29 y la imagen prevista emitida por la unidad de selección de imagen de predicción 36, y genera la imagen decodificada correspondiente a la imagen original que se convierte en el objetivo del cálculo de los residuales por la unidad de cálculo 23. La unidad de cálculo 30 suministra la imagen decodificada al filtro de desbloqueo 31 a, y el proceso continúa desde la etapa S21 a la etapa S22.
En la etapa S22, el filtro de desbloqueo 31a aplica el filtro de desbloqueo a la imagen decodificada de la unidad de cálculo 30 y suministra la imagen filtrada resultante al filtro de compensación adaptativo 41, y el proceso continúa a la etapa S23.
En la etapa S23, el filtro de compensación adaptativo 41 aplica el filtro de compensación adaptativo a la imagen de filtro del filtro de desbloqueo 31a y suministra la imagen de filtro resultante a ALF42, y el proceso continúa a la etapa S24.
En la etapa S24, el ALF42 aplica ALF a la imagen de filtro del filtro de compensación adaptativo 41 y suministra la imagen de filtro resultante a la memoria de fotograma 32, y el proceso continúa a la etapa S25.
En la etapa S25, la memoria de fotograma 32 almacena la imagen de filtro suministrada desde el ALF42 y el proceso continúa a la etapa S26. La imagen filtrada almacenada en la memoria de fotograma 32 se usa como imagen de referencia a partir de la que se genera la imagen prevista en las etapas S13 o S14.
En la etapa S26, la unidad de codificación reversible 26 codifica los datos codificados, que es el coeficiente de cuantificación de la unidad de cuantificación 25, y genera el flujo de bits codificado que incluye los datos codificados. Además, la unidad de codificación reversible 26 codifica la información de codificación, tal como el parámetro de cuantificación usado para la cuantificación en la unidad de cuantificación 25, el modo de predicción obtenido mediante la intra predicción en la unidad de intra predicción 34, el modo de predicción o la información de movimiento obtenida mediante la inter predicción en la unidad de predicción/compensación de movimiento 35, o los parámetros de filtro del filtro de desbloqueo 31a y el filtro de compensación adaptativo 41, según sea necesario, e incluye la información codificada en el flujo de bits codificado.
A continuación, la unidad de codificación reversible 26 suministra el flujo de bits codificado a la memoria intermedia de acumulación 27, y el proceso continúa desde la etapa S26 a la etapa S27.
En la etapa S27, la memoria intermedia de acumulación 27 acumula el flujo de bits codificado de la unidad de codificación reversible 26 y el proceso continúa a la etapa S28. El flujo de bits codificado acumulado en la memoria intermedia de acumulación 27 se lee y transmite apropiadamente.
En la etapa S28, la unidad de control de tasa 37 controla la operación de cuantificación de la unidad de cuantificación 25 basándose en la cantidad de código (cantidad de código generada) del flujo de bits codificado acumulado en la memoria intermedia de acumulación 27 de modo que no se produzca desbordamiento o subdesbordamiento, y finaliza el procesamiento de codificación.
<Ejemplo de configuración del decodificador 51>
La Figura 125 es un diagrama de bloques que ilustra un ejemplo de configuración del decodificador 51 de la Figura 122.
En la Figura 125, el decodificador 51 tiene una memoria intermedia de acumulación 61, una unidad de decodificación reversible 62, una unidad de cuantificación inversa 63, una unidad de transformada ortogonal inversa 64, una unidad de cálculo 65, una memoria intermedia de reorganización 67 y una unidad de conversión D/A. 68. Además, el decodificador 51 tiene una memoria de fotograma 69, una unidad de selección 70, una unidad de intra predicción 71, una unidad de predicción/compensación de movimiento 72 y una unidad de selección 73. Además, el decodificador 51 tiene un filtro de desbloqueo 31b, un filtro de compensación adaptativo 81 y un ALF 82.
La memoria intermedia de acumulación 61 acumula temporalmente el flujo de bits codificado transmitido desde el codificador 11 y suministra el flujo de bits codificado a la unidad de decodificación reversible 62 a una temporización predeterminada.
La unidad de decodificación reversible 62 recibe el flujo de bits codificado desde la memoria intermedia de acumulación 61 y decodifica el flujo de bits codificado recibido mediante un método correspondiente al método de codificación de la unidad de codificación reversible 26 en la Figura 123
A continuación, la unidad de decodificación reversible 62 suministra el coeficiente de cuantificación como los datos codificados incluidos en el resultado de decodificación del flujo de bits codificado a la unidad de cuantificación inversa 63.
Además, la unidad de decodificación reversible 62 tiene la función de realizar el análisis. La unidad de decodificación reversible 62 analiza la información de codificación necesaria incluida en el resultado de decodificación del flujo de bits codificado y suministra la información de codificación a la unidad de intra predicción 71, la unidad de predicción/compensación de movimiento 72, el filtro de desbloqueo 31b, el filtro de compensación adaptativo 81, y otros bloques necesarios.
La unidad de cuantificación inversa 63 cuantifica a la inversa el coeficiente de cuantificación como los datos codificados de la unidad de decodificación reversible 62 mediante el método correspondiente al método de cuantificación de la unidad de cuantificación 25 en la Figura 123, y suministra el coeficiente de transformada ortogonal obtenido mediante la cuantificación inversa a la unidad de transformada ortogonal inversa 64.
La unidad de transformada ortogonal inversa 64 transforma ortogonalmente a la inversa el coeficiente de transformada ortogonal suministrado desde la unidad de cuantificación inversa 63 mediante el método correspondiente al método de transformada ortogonal de la unidad de transformada ortogonal 24 en la Figura 123, y suministra el residual resultante a la unidad de cálculo 65.
Además de que el residual se suministre desde la unidad de transformada ortogonal inversa 64 a la unidad de cálculo 65, la imagen prevista se suministra desde la unidad de intra predicción 71 o la unidad de predicción/compensación de movimiento 72 a través de la unidad de selección 73.
La unidad de cálculo 65 añade el residual de la unidad de transformada ortogonal inversa 64 y la imagen prevista de la unidad de selección 73, genera la imagen decodificada y suministra la imagen decodificada generada al filtro de desbloqueo 31b.
En este punto, la unidad de decodificación reversible 62 a la unidad de cálculo 65 anterior constituyen una unidad de decodificación que decodifica una imagen, y el procesamiento (proceso) realizado por la unidad de decodificación es el proceso de decodificación.
La memoria intermedia de reorganización 67 almacena temporalmente la imagen decodificada suministrada desde el ALF 82, reorganiza la disposición de los fotogramas (imágenes) de la imagen decodificada desde el orden de codificación (decodificación) al orden de visualización, y suministra el fotograma reorganizado a la unidad de conversión D/A 68.
La unidad de conversión D/A 68 convierte D/A la imagen decodificada suministrada desde la memoria intermedia de reorganización 67 y envía la imagen decodificada convertida D/A a una pantalla (no ilustrada) para su visualización. Obsérvese que, cuando el dispositivo conectado al decodificador 51 acepta una imagen de una señal digital, el decodificador 51 se puede configurar sin proporcionar la unidad de conversión D/A 68.
La memoria de fotograma 69 almacena temporalmente la imagen decodificada suministrada desde el ALF 82. Además, la memoria de fotograma 69 suministra la imagen decodificada a la unidad de selección 70 como una imagen de referencia para generar la imagen prevista a una temporización predeterminada o basándose en una solicitud externa tal como la unidad de intra predicción 71 o la unidad de predicción/compensación de movimiento 72.
La unidad de selección 70 selecciona el destino de suministro de la imagen de referencia suministrada desde la memoria de fotograma 69. Cuando se decodifica la imagen codificada por la intra predicción, la unidad de selección 70 suministra la imagen de referencia suministrada desde la memoria de fotograma 69 a la unidad de intra predicción 71. Además, cuando se decodifica la imagen codificada por la inter predicción, la unidad de selección 70 suministra la imagen de referencia suministrada desde la memoria de fotograma 69 a la unidad de predicción/compensación de movimiento 72.
La unidad de intra predicción 71 realiza la intra predicción similar a la unidad de intra predicción 34 de la Figura 123 usando la imagen de referencia suministrada desde la memoria de fotograma 69 a través de la unidad de selección 70, de acuerdo con el modo de predicción incluido en la información codificada suministrada desde el la unidad de decodificación reversible 62. A continuación, la unidad de intra predicción 71 suministra la imagen prevista obtenida mediante la intra predicción a la unidad de selección 73.
De manera similar a la unidad de predicción/compensación de movimiento 35 de la Figura 123, la unidad de predicción/compensación de movimiento 72 realiza la inter predicción usando la imagen de referencia suministrada desde la memoria de fotograma 69 a través de la unidad de selección 70, de acuerdo con el modo de predicción incluido en la información de codificación suministrada desde la unidad decodificadora reversible 62. La inter predicción se realiza usando la información de movimiento y similares incluidas en la información de codificación suministrada desde la unidad de decodificación reversible 62 según sea necesario.
La unidad de predicción/compensación de movimiento 72 suministra la imagen prevista obtenida mediante la inter predicción a la unidad de selección 73.
La unidad de selección 73 selecciona la imagen prevista suministrada desde la unidad de intra predicción 71 o la imagen prevista suministrada desde la unidad de predicción/compensación de movimiento 72, y suministra la imagen prevista a la unidad de cálculo 65.
El filtro de desbloqueo 31b aplica el filtro de desbloqueo a la imagen decodificada desde la unidad de cálculo 65 de acuerdo con el parámetro de filtro incluido en la información de codificación suministrada desde la unidad de decodificación reversible 62. El filtro de desbloqueo 31b suministra la imagen decodificada (imagen filtrada) a la que se aplica el filtro de desbloqueo, o la imagen decodificada a la que no se le aplica el filtro de desbloqueo al filtro de compensación adaptativo 81.
El filtro de compensación adaptativo 81 aplica el filtro de compensación adaptativo a la imagen decodificada desde el filtro de desbloqueo 31b según sea necesario de acuerdo con el parámetro de filtro incluido en la información de codificación suministrada desde la unidad de decodificación reversible 62. El filtro de compensación adaptativo 81 suministra la imagen decodificada (imagen filtrada) a la que se aplica el filtro de compensación adaptativo o la imagen decodificada a la que no se aplica el filtro de compensación adaptativo al ALF 82.
El ALF 82 aplica el ALF a la imagen decodificada desde el filtro de compensación adaptativo 81 según sea necesario, y suministra la imagen decodificada a la que se aplica el ALF o la imagen decodificada a la que no se aplica ALF a la memoria intermedia de reorganización 67 y a la memoria de fotograma 69.
<Procesamiento de decodificación>
La Figura 126 es un diagrama de flujo que ilustra un ejemplo de procesamiento de decodificación del decodificador 51 de la Figura 125.
En la etapa S51, en el procesamiento de decodificación, la memoria intermedia de acumulación 61 almacena temporalmente el flujo de bits codificado transmitido desde el codificador 11 y suministra el flujo de bits codificado almacenado a la unidad de decodificación reversible 62 según sea apropiado, y el proceso continúa a la etapa S52.
En la etapa S52, la unidad de decodificación reversible 62 recibe y decodifica el flujo de bits codificado suministrado desde la memoria intermedia de acumulación 61, y suministra el coeficiente de cuantificación como los datos codificados incluidos en el resultado de decodificación del flujo de bits codificado a la unidad de cuantificación inversa 63.
Además, la unidad de decodificación reversible 62 analiza la información de codificación incluida en el resultado de decodificación del flujo de bits codificado. A continuación, la unidad de decodificación reversible 62 suministra la información de codificación necesaria a la unidad de intra predicción 71, a la unidad de predicción/compensación de movimiento 72, al filtro de desbloqueo 31b, al filtro de compensación adaptativo 81 y a otros bloques necesarios.
A continuación, el proceso continúa desde la etapa S52 a la etapa S53, y la unidad de intra predicción 71 o la unidad de predicción/compensación de movimiento 72 realiza la intra predicción o la inter predicción (proceso de intra predicción o proceso de inter predicción) generando la imagen prevista, de acuerdo con la imagen de referencia suministrada desde la memoria de fotograma 69 a través de la unidad de selección 70 y la información de codificación suministrada desde la unidad de decodificación reversible 62. A continuación, la unidad de intra predicción 71 o la unidad de predicción/compensación de movimiento 72 suministra la imagen prevista obtenida mediante la intra predicción o la inter predicción a la unidad de selección 73, y el proceso continúa desde la etapa S53 a la etapa S54.
En la etapa S54, la unidad de selección 73 selecciona la imagen prevista suministrada desde la unidad de intra predicción 71 o la unidad de predicción/compensación de movimiento 72 y suministra la imagen prevista seleccionada a la unidad de cálculo 65, y el proceso continúa a la etapa S55.
En la etapa S55, la unidad de cuantificación inversa 63 cuantifica a la inversa el coeficiente de cuantificación de la unidad de decodificación reversible 62 y suministra el coeficiente de transformada ortogonal resultante a la unidad de transformada ortogonal inversa 64, y el proceso continúa a la etapa S56.
En la etapa S56, la unidad de transformada ortogonal inversa 64 transforma ortogonalmente a la inversa el coeficiente de transformada ortogonal de la unidad de cuantificación inversa 63 y suministra el residual resultante a la unidad de cálculo 65, y el proceso continúa a la etapa S57.
En la etapa S57, la unidad de cálculo 65 genera la imagen decodificada añadiendo el residual de la unidad de transformada ortogonal inversa 64 y la imagen prevista de la unidad de selección 73. A continuación, la unidad de cálculo 65 suministra la imagen decodificada al filtro de desbloqueo 31b, y el proceso continúa desde la etapa S57 a la etapa S58.
En la etapa S58, el filtro de desbloqueo 31 b aplica el filtro de desbloqueo a la imagen decodificada desde la unidad de cálculo 65 de acuerdo con el parámetro de filtro incluido en la información de codificación suministrada desde la unidad de decodificación reversible 62. El filtro de desbloqueo 31b suministra la imagen filtrada obtenida como resultado de aplicar el filtro de desbloqueo al filtro de compensación adaptativo 81, y el proceso avanza desde la etapa S58 a la etapa S59.
En la etapa S59, el filtro de compensación adaptativo 81 aplica el filtro de compensación adaptativo a la imagen filtrada desde el filtro de desbloqueo 31b de acuerdo con el parámetro de filtro incluido en la información de codificación suministrada desde la unidad de decodificación reversible 62. El filtro de compensación adaptativo 81 suministra la imagen filtrada obtenida como resultado de aplicar el filtro de compensación adaptativo al ALF 82, y el proceso continúa desde la etapa S59 a la etapa S60.
El ALF 82 aplica ALF a la imagen de filtro del filtro de desplazamiento adaptativo 81 y suministra la imagen de filtro resultante a la memoria intermedia de reorganización 67 y a la memoria de fotograma 69, y el proceso continúa a la etapa S61.
En la etapa S61, la memoria de fotograma 69 almacena temporalmente la imagen filtrada suministrada desde el ALF 82, y el proceso continúa a la etapa S62. La imagen filtrada (imagen decodificada) almacenada en la memoria de fotograma 69 se usa como imagen de referencia a partir de la que se genera la imagen prevista mediante la intra predicción o la inter predicción en la etapa S53.
En la etapa S62, la memoria intermedia de reorganización 67 reorganiza las imágenes filtradas suministradas desde ALF 82 en el orden de visualización y suministra las imágenes filtradas reorganizadas a la unidad de conversión D/A 68, y el proceso continúa a la etapa S63.
En la etapa S63, la unidad de conversión D/A 68 convierte D/A la imagen filtrada desde la memoria intermedia de reorganización 67, y el proceso finaliza el procesamiento de decodificación. La imagen del filtro (imagen decodificada) después de la conversión D/A se emite y se muestra en una pantalla (no ilustrada).
La intra predicción realizada por la unidad de intra predicción 34 de la Figura 123 y la unidad de intra predicción 71 de la Figura 125 incluye la MIP. En las unidades de intra predicción 34 y 71, la generación de la imagen prevista de la MIP se genera mediante cualquiera del segundo a cuarto métodos de generación.
(Otros)
En la presente memoria descriptiva, a menos que se especifique lo contrario, un "bloque" (no un bloque que indique una unidad de procesamiento) usado como un área parcial o una unidad de procesamiento de una imagen (foto) indica un área parcial arbitraria en la imagen, y un tamaño, una forma y las características del bloque no están limitadas. Por ejemplo, el "bloque" incluye cualquier área parcial (unidad de procesamiento) tal como un bloque de transformada (TB), una unidad de transformada (TU), un bloque de predicción (PB), una unidad de predicción (PU), una unidad de codificación más pequeña (SCU), una unidad de codificación (CU), una unidad de codificación más grande (LCU), un bloque de árbol de codificación (CTB), una unidad de árbol de codificación (CTU), un bloque de conversión, un subbloque, un macrobloque, una pieza o un corte, que se describen en las referencias REF 1 a REF 3 o similares.
Una unidad de datos en la que se establecen diversas piezas de información descritas anteriormente y una unidad de datos a la que se dirigen diversos tipos de procesamiento son arbitrarias y no están limitadas a los ejemplos descritos anteriormente. Por ejemplo, estas piezas de información o procesamiento pueden establecerse para cada unidad de transformada (TU), bloque de transformada (TB), unidad de predicción (PU), bloque de predicción (PB), unidad de codificación (CU), unidad de codificación más grande (LCU), subbloque, bloque, pieza, corte, imagen, secuencia o componente, o pueden dirigirse a los datos en esas unidades de datos. Por supuesto, esta unidad de datos puede establecerse para cada información o procesamiento, y no es necesario que la unidad de datos de toda la información o procesamiento esté unificada. Obsérvese que, la ubicación de almacenamiento de estas piezas de información es arbitraria, y estas piezas de información pueden almacenarse en un encabezado, un conjunto de parámetros o similar de la unidad de datos descrita anteriormente. Además, estas piezas de información pueden almacenarse en una pluralidad de ubicaciones.
La información de control relacionada con la presente tecnología descrita anteriormente también puede transmitirse desde el lado de codificación al lado de decodificación. Por ejemplo, se puede transmitir información de control (por ejemplo, enable_flag) que controla si está permitida o no la aplicación de la presente tecnología descrita anteriormente (o está prohibida o no). Además, por ejemplo, se puede transmitir la información de control que indica un objetivo (o un objetivo al que no se aplica la presente tecnología) al que se aplica la presente tecnología. Por ejemplo, se puede transmitir la información de control que especifica el tamaño de bloque (límites superior e inferior, o ambos) al que se aplica (o se permite o prohíbe) la presente tecnología, fotogramas, componentes, capas o similares.
Además, cuando se especifica un tamaño de un bloque de este tipo al que se aplica la presente tecnología, no únicamente se puede especificar directamente el tamaño de bloque, sino que también se puede especificar indirectamente el tamaño de bloque. Por ejemplo, el tamaño de bloque puede especificarse usando datos de identificación para identificar el tamaño. Además, por ejemplo, el tamaño de bloque puede especificarse mediante una relación o una diferencia con un tamaño de un bloque de referencia (por ejemplo, LCU, SCU o similar). Por ejemplo, cuando se transmite información para especificar el tamaño de bloque como un elemento de sintaxis o similar, se puede usar como información la información para especificar indirectamente el tamaño como se ha descrito anteriormente. Al hacerlo, se puede reducir la cantidad de información y se puede mejorar la eficiencia de la codificación. Además, la especificación del tamaño de bloque también incluye la especificación del intervalo del tamaño de bloque (por ejemplo, una especificación o similar de un intervalo de tamaño de bloque permitido).
Obsérvese que, en la presente memoria descriptiva, los "datos de identificación" son información para identificar una pluralidad de estados, e incluyen "banderas" y aquellas de otros nombres. Además, los "datos de identificación" incluyen no únicamente información usada para identificar dos estados de verdadero (1) o falso (0), sino también información que puede identificar tres o más estados. Por tanto, el valor que pueden tomar estos "datos de identificación" puede ser, por ejemplo, 2 valores de 1/0, o 3 o más valores. Es decir, el número de bits que constituyen los "datos de identificación" es arbitrario y puede ser 1 bit o una pluralidad de bits. Además, dado que se supone que los datos de identificación incluyen no únicamente los datos de identificación en el flujo de bits, sino también información de diferencia de los datos de identificación que se convierte en una cierta información de referencia en el flujo de bits, en la presente memoria descriptiva, los "datos de identificación" incluyen no únicamente la información, sino también la información de diferencia que se convierte en la información de referencia.
Además, se pueden transmitir o grabar diversos tipos de información (metadatos o similares) sobre datos codificados (flujo de bits) en cualquier forma siempre que la información esté asociada con los datos codificados. En este punto, el término "asociar" significa, por ejemplo, hacer que otros datos estén disponibles (enlazables) cuando se procesa un dato. Es decir, los datos asociados entre sí pueden combinarse como un dato o pueden ser datos individuales. Por ejemplo, la información asociada con los datos codificados (imagen) puede transmitirse en una ruta de transmisión diferente de esos datos codificados (imagen). Además, por ejemplo, la información asociada con los datos codificados (imagen) también puede grabarse en un medio de grabación (u otra área de grabación del mismo medio de grabación) diferente de los datos codificados (imagen). Obsérvese que, esta "asociación" puede ser parte de los datos, no todos los datos. Por ejemplo, una imagen y la información correspondiente a la imagen pueden asociarse entre sí en unidades arbitrarias tales como una pluralidad de fotogramas, un fotograma o una parte dentro de un fotograma.
Además, en esta memoria descriptiva, los términos tales como "sintetizar", "multiplexar", "añadir", "integrar", "incluir", "almacenar", "enviar en", "poner" e "insertar" significan combinar una pluralidad de cosas en una, por ejemplo, combinar datos codificados y metadatos en un dato, y significan un método de "asociación" descrito anteriormente.
La presente tecnología se puede implementar como cualquier configuración que constituye un dispositivo o un sistema, por ejemplo, un procesador como sistema de integración a gran escala (LSI) o similar, un módulo que usa una pluralidad de procesadores o similar, una unidad que usa una pluralidad de módulos o similares, y un conjunto con otras funciones añadidas adicionalmente a la unidad, o similar (es decir, una parte de la configuración del dispositivo).
<Descripción del ordenador al que se aplica la tecnología actual>
A continuación, algunas o todas las series de procesamiento descritos anteriormente pueden realizarse mediante hardware o software. Cuando parte o la totalidad de una serie de procesos se realiza mediante software, los programas que constituyen el software se instalan en un ordenador de uso general o similar.
La Figura 127 es un diagrama de bloques que ilustra un ejemplo de configuración de una realización del ordenador en el que está instalado el programa para ejecutar algunas o todas las series de procesos descritos anteriormente.
El programa puede grabarse previamente en un disco duro 905 o en una ROM 903 como medio de grabación integrado en el ordenador.
Como alternativa, el programa puede almacenarse (grabarse) en un medio de grabación extraíble 911 accionado por una unidad 909. Un medio de grabación extraíble 911 de este tipo puede proporcionarse como el denominado paquete de software. En este punto, los ejemplos del medio de grabación extraíble 911 incluyen un disco flexible, un disco compacto de memoria de sólo lectura (CD-ROM), un disco magneto-óptico (MO), un disco versátil digital (DVD), un disco magnético, una memoria de semiconductores, y similares.
Obsérvese que, el programa no únicamente puede instalarse en el ordenador desde el medio de grabación extraíble 911 como se ha descrito anteriormente, sino que también puede descargarse al ordenador a través de una red de comunicación o una red de transmisión e instalarse en el disco duro incorporado 905. Es decir, por ejemplo, el programa puede transmitirse de forma inalámbrica desde un sitio de descarga a un ordenador a través de un satélite artificial para transmisión digital por satélite, o puede transmitirse a un ordenador por cable a través de una red tal como una red de área local (LAN) o Internet.
El ordenador tiene una unidad central de procesamiento (CPU) 902 incorporada, y la interfaz de entrada/salida 910 está conectada a la CPU 902 a través del bus 901.
Cuando se introduce un comando por usuario a través de la interfaz de entrada/salida 910 operando la unidad de entrada 907 o similar, la CPU 902 ejecuta el programa almacenado en la memoria de solo lectura (ROM) 903 en consecuencia. Como alternativa, la CPU 902 carga el programa almacenado en el disco duro 905 en una memoria de acceso aleatorio (RAM) 904 y ejecuta el programa cargado.
Como resultado, la CPU 902 realiza el procesamiento de acuerdo con el diagrama de flujo descrito anteriormente o el procesamiento realizado de acuerdo con la configuración del diagrama de bloques descrito anteriormente. A continuación, la CPU 902 emite el resultado del procesamiento desde la unidad de salida 906 desde la unidad de comunicación 908, o transmite el resultado del procesamiento desde la unidad de comunicación 908 a través de, por ejemplo, la interfaz de entrada/salida 910, según sea necesario, y además registra el resultado del procesamiento en el disco duro 905.
Obsérvese que, la unidad de entrada 907 está constituida por un teclado, un ratón, un micrófono y similares. Además, la unidad de salida 906 está constituida por una pantalla de cristal líquido (LCD), un altavoz o similar.
En este punto, en la presente memoria descriptiva, el procesamiento realizado por el ordenador de acuerdo con el programa no tiene necesariamente que realizarse en una secuencia de tiempo de acuerdo con el orden descrito como el diagrama de flujo. Es decir, el procesamiento realizado por el ordenador de acuerdo con el programa también incluye procesamiento (por ejemplo, procesamiento paralelo o procesamiento por un objeto) ejecutado en paralelo o individualmente.
Además, el programa puede procesarse por un ordenador (procesador) o puede distribuirse y procesarse por una pluralidad de ordenadores. Además, el programa puede transmitirse a un ordenador distante y ejecutarse.
Además, en la presente memoria descriptiva, el sistema significa un conjunto de una pluralidad de componentes (dispositivos, módulos (partes), etc.), y no importa si todos los componentes están o no en el mismo alojamiento. Por lo tanto, cualquiera de una pluralidad de dispositivos alojados en carcasas separadas y conectados a través de una red y un dispositivo en el que están alojados una pluralidad de módulos en una carcasa son sistemas.
La tecnología actual puede configurarse como computación en la nube, en la que se comparte una función por una pluralidad de dispositivos a través de una red y se procesa conjuntamente.
Además, cada etapa descrita en el diagrama de flujo descrito anteriormente puede no ejecutarse también por un dispositivo, sino que puede compartirse y ejecutarse por una pluralidad de dispositivos.
Además, cuando una etapa incluye una pluralidad de procesos, la pluralidad de procesos incluidos en una etapa pueden ejecutarse por un dispositivo o compartirse y ejecutarse por una pluralidad de dispositivos.
Además, los efectos descritos en la presente memoria descriptiva son simplemente ejemplos y no están limitados, y se pueden obtener otros efectos.
Lista de signos de referencia
10 sistema de procesamiento de imágenes
11 codificador
21 unidad de conversión A/D
22 memoria intermedia de reorganización 22
23 unidad de cálculo
24 unidad de transformada ortogonal
25 unidad de cuantificación
26 unidad de codificación reversible
27 memoria intermedia de acumulación
28 unidad de cuantificación inversa
29 unidad de transformada ortogonal inversa
30 unidad de cálculo
31 a, 31 b filtro de desbloqueo
32 memoria de fotograma
33 unidad de selección
34 unidad de predicción intra
35 unidad de predicción/compensación de movimiento
36 unidad de selección de imagen de predicción
37 unidad de control de tasa
41 filtro de compensación adaptativo
42 ALF
51 decodificador
61 memoria intermedia de acumulación
62 unidad de decodificación reversible
63 unidad de cuantificación inversa
64 unidad de transformada ortogonal inversa
65 unidad de cálculo
67 memoria intermedia de reorganización
68 unidad de conversión D/A
69 memoria de fotograma
70 unidad de selección
71 unidad de predicción intra
72 unidad de predicción/compensación de movimiento
73 unidad de selección
81 filtro de compensación adaptativo
82 ALF
901 Bus
902 CPU
903 ROM
904 RAM
905 disco duro
906 unidad de salida
907 unidad de entrada
908 unidad de comunicación
909 mecanismo
910 interfaz de entrada/salida
911 medio de grabación extraíble

Claims (14)

REIVINDICACIONES
1. Un dispositivo de procesamiento de imágenes (11), que comprende:
una unidad de intra predicción (34) configurada para realizar intra predicción de matriz, MIP, dentro de la estructura de la normalización del códec de vídeo de codificación de vídeo versátil (VVC) usando una cantidad de desplazamiento sW establecida a un valor fijo, en donde el valor fijo es un valor que es fijo independientemente del número de modo de la intra predicción de matriz, para generar una imagen prevista de un bloque de predicción actual, cuando la intra predicción de matriz que es una intra predicción que usa una operación de matriz se realiza en el bloque de predicción actual a codificar; y
una unidad de codificación (26) configurada para codificar el bloque de predicción actual usando la imagen prevista generada por la unidad de intra predicción.
2. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 1, en donde
la unidad de intra predicción realiza la intra predicción de matriz basándose en una operación que usa parámetros establecidos de acuerdo con la cantidad de desplazamiento establecida al valor fijo.
3. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 2, en donde
la unidad de intra predicción realiza la intra predicción de matriz basándose en una operación que incluye una matriz de pesos establecida de acuerdo con la cantidad de desplazamiento establecida al valor fijo.
4. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 3, en donde
la unidad de intra predicción realiza la intra predicción de matriz basándose en una operación que incluye un vector de desviación de una variable fO de acuerdo con la cantidad de desplazamiento establecida al valor fijo.
5. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 2, en donde
el valor fijo es un valor establecido de acuerdo con un tamaño de matriz usado en la intra predicción de matriz.
6. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 5, en donde
el valor fijo es un valor fijo establecido para cada identificador de un tamaño de matriz usado en la intra predicción de matriz.
7. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 6, en donde
el valor fijo es 6 cuando el valor del identificador del tamaño de matriz es 0.
8. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 6, en donde
el valor fijo es 7 cuando el valor del identificador del tamaño de matriz es 1.
9. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 6, en donde
el valor fijo es 6 cuando el valor del identificador del tamaño de matriz es 2.
10. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 2, en donde
el valor fijo es 6.
11. El dispositivo de procesamiento de imágenes de acuerdo con la reivindicación 2, en donde
el valor fijo es 8.
12. Un método de procesamiento de imágenes, que comprende:
un proceso de intra predicción (S13) para realizar intra predicción de matriz, MIP, dentro de la estructura de la normalización del códec de vídeo de codificación de vídeo versátil (VVC) usando una cantidad de desplazamiento sW establecida a un valor fijo, en donde el valor fijo es un valor que es fijo independientemente del número de modo de la intra predicción de matriz, para generar una imagen prevista de un bloque de predicción actual, cuando la intra predicción de matriz que es una intra predicción que usa una operación de matriz se realiza en el bloque de predicción actual a codificar; y
un proceso de codificación (S26) para codificar el bloque de predicción actual usando la imagen prevista generada en el proceso de intra predicción.
13. Un dispositivo de procesamiento de imágenes (51), que comprende:
una unidad de intra predicción (71) configurada para realizar intra predicción de matriz, MIP, dentro de la estructura de la normalización del códec de vídeo de codificación de vídeo versátil (VVC) usando una cantidad de desplazamiento sW establecida a un valor fijo, en donde el valor fijo es un valor que es fijo independientemente del número de modo de la intra predicción de matriz, para generar una imagen prevista de un bloque de predicción actual, cuando la intra predicción de matriz que es una intra predicción que usa una operación de matriz se realiza en el bloque de predicción actual a decodificar; y
una unidad de decodificación (62, 63, 64, 65) configurada para decodificar el bloque de predicción actual usando la imagen prevista generada por la unidad de intra predicción.
14. Un método de procesamiento de imágenes, que comprende:
un proceso de intra predicción (S53) para realizar intra predicción de matriz, MIP, dentro de la estructura de la normalización del códec de vídeo de codificación de vídeo versátil (VVC) usando una cantidad de desplazamiento sW establecida a un valor fijo, en donde el valor fijo es un valor que es fijo independientemente del número de modo de la intra predicción de matriz, para generar una imagen prevista de un bloque de predicción actual, cuando la intra predicción de matriz que es una intra predicción que usa una operación de matriz se realiza en el bloque de predicción actual a decodificar; y
un proceso de decodificación (S57) para decodificar el bloque de predicción actual usando la imagen prevista generada en el proceso de intra predicción.
ES20827185T 2019-06-19 2020-06-08 Dispositivo de procesamiento de imágenes y método de procesamiento de imágenes Active ES2962996T3 (es)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962863664P 2019-06-19 2019-06-19
US201962866281P 2019-06-25 2019-06-25
PCT/JP2020/022485 WO2020255769A1 (ja) 2019-06-19 2020-06-08 画像処理装置及び画像処理方法

Publications (1)

Publication Number Publication Date
ES2962996T3 true ES2962996T3 (es) 2024-03-22

Family

ID=74037296

Family Applications (1)

Application Number Title Priority Date Filing Date
ES20827185T Active ES2962996T3 (es) 2019-06-19 2020-06-08 Dispositivo de procesamiento de imágenes y método de procesamiento de imágenes

Country Status (13)

Country Link
US (1) US20220353546A1 (es)
EP (2) EP4274230A3 (es)
JP (1) JPWO2020255769A1 (es)
KR (1) KR20220021471A (es)
CN (1) CN114051733A (es)
DK (1) DK3989578T3 (es)
ES (1) ES2962996T3 (es)
FI (1) FI3989578T3 (es)
HU (1) HUE063717T2 (es)
LT (1) LT3989578T (es)
PL (1) PL3989578T3 (es)
SI (1) SI3989578T1 (es)
WO (1) WO2020255769A1 (es)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220023324A (ko) 2019-06-25 2022-03-02 광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드 이미지 인코딩 방법, 이미지 디코딩 방법, 인코더, 디코더 및 저장 매체
GB2588406B (en) * 2019-10-22 2022-12-07 British Broadcasting Corp Video encoding and video decoding

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102086145B1 (ko) * 2010-12-13 2020-03-09 한국전자통신연구원 인트라 예측 방법 및 그 장치
KR20220113708A (ko) * 2019-12-20 2022-08-16 소니그룹주식회사 화상 처리 장치 및 화상 처리 방법

Also Published As

Publication number Publication date
JPWO2020255769A1 (es) 2020-12-24
DK3989578T3 (da) 2023-10-30
KR20220021471A (ko) 2022-02-22
LT3989578T (lt) 2023-11-10
FI3989578T3 (fi) 2023-11-02
EP4274230A3 (en) 2024-01-17
HUE063717T2 (hu) 2024-01-28
EP3989578B1 (en) 2023-09-13
PL3989578T3 (pl) 2024-02-26
SI3989578T1 (sl) 2024-02-29
WO2020255769A1 (ja) 2020-12-24
CN114051733A (zh) 2022-02-15
EP3989578A1 (en) 2022-04-27
EP4274230A2 (en) 2023-11-08
EP3989578A4 (en) 2022-08-17
US20220353546A1 (en) 2022-11-03

Similar Documents

Publication Publication Date Title
ES2946909T3 (es) Método, aparato y producto de programa informático para interpredicción
ES2845673T3 (es) Copia intrabloque a nivel de fragmento
ES2892964T3 (es) Inicialización de predictor de paleta y fusión para codificación de vídeo
ES2966479T3 (es) Un codificador, un decodificador y métodos correspondientes para la intrapredicción
ES2633947T3 (es) Predicción de paletas en la codificación de vídeo basada en paleta
ES2661930T3 (es) Normalización de cuantificación y transformada entera conjuntas utilizando una representación de mantisa - exponente de un parámetro de cuantificación
KR102467038B1 (ko) 효율적인 다-시점/계층 코딩을 허용하는 코딩 개념
ES2773887T3 (es) Codificación de intra-predicción mejorada usando representaciones planas
BR112016015546B1 (pt) Codificação de índice de cor para codificação de vídeo com base em paleta
BR112014010794B1 (pt) Aparelho e método de codificação de imagem, aparelho e método de decodificação de imagem, e meio de armazenamento
ES2962996T3 (es) Dispositivo de procesamiento de imágenes y método de procesamiento de imágenes
BR112015016253B1 (pt) Sinalização de informação de derivação de tique de relógio para temporização de vídeo em codificação de vídeo
BR122020003031B1 (pt) Método de decodificação e método de codificação
BR122018003088B1 (pt) Método para codificação e decodificação de imagem e a realização de interpredição em um bloco de pixels divididos
US20180014009A1 (en) Virtual Memory Access Bandwidth Verification (VMBV) in Video Coding
US11711514B2 (en) Joint transform coding of multiple color components
JPWO2020175145A1 (ja) 画像処理装置及び画像処理方法
ES2749747T3 (es) Sistemas y procedimientos para definir por separado las dependencias para la predicción entre capas basada en subcapas
US20220321910A1 (en) Image processing device and image processing method
JP7235031B2 (ja) 画像処理装置および方法
EP4054193A1 (en) Image processing device and image processing method
JP2016149793A (ja) 符号化方法、復号方法、符号化装置、及び復号装置
JP2015092705A (ja) 動画像復号化方法及び画像符号化方法