DE19758252A1 - Skalierbare Kodiervorrichtung und Verfahren mit verbesserter Funktion der Energiekompensation/inversen Kompensation - Google Patents

Skalierbare Kodiervorrichtung und Verfahren mit verbesserter Funktion der Energiekompensation/inversen Kompensation

Info

Publication number
DE19758252A1
DE19758252A1 DE1997158252 DE19758252A DE19758252A1 DE 19758252 A1 DE19758252 A1 DE 19758252A1 DE 1997158252 DE1997158252 DE 1997158252 DE 19758252 A DE19758252 A DE 19758252A DE 19758252 A1 DE19758252 A1 DE 19758252A1
Authority
DE
Germany
Prior art keywords
energy
block
video signal
inverse
compensation value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
DE1997158252
Other languages
English (en)
Inventor
Jong Nam Kim
Tae Hwan Shin
Tae Sun Choi
Il Yoon
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electro Mechanics Co Ltd
Original Assignee
Samsung Electro Mechanics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electro Mechanics Co Ltd filed Critical Samsung Electro Mechanics Co Ltd
Publication of DE19758252A1 publication Critical patent/DE19758252A1/de
Ceased legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Description

GEBIET DER ERFINDUNG
Die vorliegende Erfindung bezieht sich auf einen skalierbaren Kodierer und sein Kodierverfahren für das Kodieren sowohl eines hochauflösenden Bildes als auch eines niedrig auflösen­ den Bildes in einem Sender mit einer Videokomprimierfunktion. Insbesondere betrifft diese Erfindung einen skalierbaren Kodierer und sein Kodierverfahren mit einer verbesserten Energiekompensation/inversen Kompensation, die den Driftef­ fekt eliminiert, der die Qualität des Bildes auf dem Schirm vermindert, durch eine präzise Durchführung der Dezimierung der niedrig auflösenden Bildes vom hoch auflösenden Bild.
HINTERGRUND DER ERFINDUNG
Allgemein gesagt ist die Menge der Videodaten extrem groß verglichen mit Sprach- oder Zeichendaten, so daß die Echt­ zeitverarbeitung im Speicher oder die Übertragung ohne eine Kodierung unmöglich wird.
Die Kodierung von Videodaten mit einem gewissen Verfahren gestattet es, daß sie in Echtzeit während der Speicherung oder der Übertragung verarbeitet werden können. Als interna­ tionale Standards für die Videokodierung werden aktuell JPEG für Standbilder, MPEG1 und MPEG2 für Bewegtbilder und MPEG4 in der Entwicklung für eine Übertragung mit langsamer Bitrate vorgeschlagen.
Bei Videodaten sind die Menge der Information, die praktisch enthalten ist, und die Menge der Information, die tatsächlich gebraucht wird, um diese auszudrücken, nicht gleich, was als Redundanz der Daten bezeichnet wird.
Die räumliche Redundanz wird durch die Ähnlichkeit der Werte zwischen den Bildpunkten verursacht. Es sei angemerkt, daß wenn ein vorbestimmter Bildpunkt ausgewählt wird, sein Wert und die Werte anderer benachbarter Bildpunkte ähnlich sind. Für die Verarbeitung der räumlichen Redundanz wird die dis­ krete Cosinustransformation (DCT) verwendet.
Als zweites rührt die Wahrscheinlichkeitsredundanz von der Redundanz der Symbole her, die Daten ausdrücken. Die Vertei­ lung der Daten ist nicht gleichmäßig wahrscheinlich und es gibt Symbole, die häufiger als gewöhnlich auftreten. Wegen dieser Redundanz wird eine Entropiekodierung verwendet, die eine variable Längenkodierung betrifft.
Die zeitliche Redundanz wird erzeugt durch die Gleichzeitig­ keit zwischen vorherigen und aktuellen Rahmenbildern. Dies wird durch eine Bewegungsschätzung/Bewegungskompensation verarbeitet.
Mittlerweile gibt es durch die schnelle Entwicklung der In­ formations/Kommunikations-Industrie viele Dienste, wie Video auf Anforderung, Teleunterricht, Videokonferenzen, hochauflö­ sendes Fernsehen, Telediagnose, Teleshopping, oder diese Dienste sind in Vorbereitung. Wenn komprimierte Videosignale dieser unterschiedlichen Dienste unter Verwendung der jewei­ ligen Empfänger geliefert werden sollen, so sind so viele Empfänger notwendig, wie Dienste vorhanden sind. Um einen solchen Nachteil zu überwinden, wurde eine skalierbare Kodie­ rung vorgeschlagen, in welcher Dienstesignale in einem einzi­ gen Modus komprimiert sind und gemäß den jeweiligen Empfän­ gern dekodiert werden. Mit dieser skalierbaren Kodierung können somit viele Dienste durch nur einen Empfänger angebo­ ten werden. Die skalierbare Kodierung weist grob zwei Arten von Subband-Kodierung und Pyramiden-Kodierung auf, die sich bei der Aufteilung der ursprünglichen Bildes in kleinere Stücke unterscheiden.
Fig. 1 ist ein Diagramm der gesamten Konfiguration eines konventionellen skalierbaren Kodierers. Dieser Kodierer ko­ diert Videosignale, die durch Rahmen eingegeben werden, in ein hochauflösendes Bild und ein niedrig auflösendes Bild. Die Innenrahmenkodierung wird im hochauflösenden Rahmen durchgeführt, und dann wird die Zwischenrahmenkodierung aus­ geführt. Von nun an werden die Innenrahmenkodierung und die Zwischenrahmenkodierung erläutert.
Als erstes umfaßt die Konfiguration einer Innenrahmenkodie­ rung einen 8.8 Block Teiler 11 für das Teilen eines Videosi­ gnals Sin, das durch Rahmen eingegeben wird, in 8.8 Blöcke, einen diskreten 8.8 Block Cosinustransformierer 12 für das Umwandeln der Flächenebene des Videosignals, das in 8.8 Blöc­ ke aufgeteilt ist, in die Frequenzebenen durch eine DCT- Transformation, einen 8.8 Block Quantisierer 13 für das Quan­ tisieren des Differenzsignals (ein Videosignal ohne ein über­ lappendes Bild) zwischen dem Videosignal (8.8 Block Rahmen), das in die Frequenzebenen umgewandelt wurde, und dem Videosi­ gnal (4.4 Block Rahmen) des inversen Blockkompensierers 33, einen 8.8 Block Kodierabschnitt 14 variabler Länge für das Kodieren des quantisierten Videosignals und das anschließende Ausgeben des kodierten Signals S14 an einen Multiplexer 60, einen 4.4 Block Dezimierer 21 für das Dezimieren von 4.4 Blöcken des Videosignals von den 8.8 Blöcken des Videosi­ gnals, das vom 8.8 Block DCT 12 ausgegeben wird, einen Ener­ giekoeffizientenkompensierer 22 für das Multiplizieren des Videosignals, das in die 4.4 Blöcke extrahiert wurde, mit 0,25 (1/4), um eine Energiekompensation durchzuführen, einen 4.4 Block Quantisierer 23 für das Quantisieren des energie­ kompensierten Videosignals, einen 4.4 Block Kodierabschnitt 24 variabler Länge für das Kodieren des quantisierten Video­ signals und das anschließende Ausgeben des kodierten Signals S24 an den Multiplexer 60, einen inversen 4.4 Block Quanti­ sierer 31 für das inverse Quantisieren des Videosignals vom 4.4 Block Quantisierer 23, einen 8.8 Block Interpolierer 32 für das Interpolieren des invers quantisierten 4.4 Block Videosignals in 8.8 Blöcke des Videosignals unter Verwendung von Null, einen inversen Blockkompensierer 33 für das inverse Kompensieren der Energie des interpolierten Videosignals, einen inversen 8.8 Block Quantisierer 41 für das inverse Quantisieren des Videosignals vom 8.8 Block Quantisierer 13, einen inverse 8.8 Block DCT 42 für das Durchführen der inver­ sen DCT des Summensignals (ein genähertes Signal des Videosi­ gnals des 8.8 Block DCT 12) zwischen dem Videosignal des inversen 8.8 Block Quantisierers 41 und dem Videosignal des inversen Blockkompensierers 33, einen Addierer 43 für das Summieren des Videosignals des inversen 8.8 Block DCT 42 und des Videosignals (Null) des Bewegungskompensierers 53, und einen Rahmenspeicher 44 für das Speichen des Rahmensignals, das durch den Addierer 43 hindurch gelangt ist, für die Zwec­ ke der Zwischenrahmenkodierung. Da das Videosignal des Bewe­ gungskompensierers 53 nur während der Innenrahmenkodierung betroffen ist, so wird es während der Zwischenrahmenkodierung null, und während der Zwischenrahmenkodierung gibt es ein Videosignal von 8.8 Blöcken, das einen vorbestimmten Wert hat.
Die Konfiguration der Zwischenrahmenkodierung im konventio­ nellen Kodierer wird zur vorher erwähnten Konstruktion der Innenrahmenkodierung hinzugefügt. Die Zwischenrahmenkodier­ konfiguration umfaßt einen 16.16 Block Teiler 51 für das Teilen eines Videosignals in 16.16 Blöcke, einen Bewegungs­ vektorschätzteil 52 für das Erkennen eines Bewegungsvektors MV aus dem Videosignal (aktueller Rahmen), geteilt in 16.16 Blöcke und dem Videosignal (vorheriger Rahmen) des Rahmen­ speichers 44, und einen Bewegungskompensierer 53 für das Erzeugen eines neuen Rahmens unter Verwendung des Bewegungs­ vektors MV des Bewegungsvektorschätzteils 52 und dem Rahmen des Rahmenspeichers 44. Zusätzlich gibt es einen Multiplexer 60 für das selektive Ausgeben eines Videosignals (8.8 Block Videosignal) S14 des 8.8 Block Kodierteils 14 variabler Länge, eines Videosignals S24 (4.4 Block Videosignal) des 4.4 Block Kodierteils 24 variabler Länge und eines Bewegungsvek­ tors MV des Bewegungsvektorschätzteils 52 in einer vorbe­ stimmten Reihenfolge.
Fig. 2a ist ein Diagramm der Konfiguration eines konventio­ nellen hochauflösenden Dekodierers, Fig. 2b ist ein Diagramm eines konventionellen niedrig auflösenden Dekodierers. Mit den Fig. 2a und 2b werden die Konfigurationen der Dekodie­ rer erläutert, die die Signale, die im vorher erwähnten Ko­ dierer kodiert wurden, dekodieren. Als erstes umfaßt unter Bezug auf Fig. 2a der hochauflösenden Dekodierer (der sich auf ein 8.8 Blockbild bezieht) einen Demultiplexer 111 für das getrennte Ausgeben des eingegebenen komprimierten Video­ signals Sin in die Signale S14 und S24 der 8.8 Blöcke und der 4.4 Blöcke, und in einen Bewegungsvektor MV, einen inversen 8.8 Block Quantisierer 112 für das inverse Quantisieren der 8.8 Blöcke des Videosignals S14, einen inversen 4.4 Block Quantisierer 113 für das inverse Quantisieren von 4.4 Blöcken des Videosignals S24, einen 8.8 Block Interpolierer 114 für das Interpolieren des 4.4 Block Videosignals, das im inversen 4.4 Block Quantisierer 113 invers quantisiert wurde, in 8.8 Blöcke des Videosignals, einen inversen 8.8 Block DCT 115 für das Umwandeln der Frequenz ebene des Summensignals zwischen dem Videosignal des inversen 8.8 Block Quantisierers 112 und dem Videosignal des 8.8 Block Interpolierers 114 in die Flä­ chenebene durch inverse DCT, einen Addierer 116 für das Sum­ mieren des Videosignals, das in die Flächenebene umgewandelt wurde, und des Videosignals des Bewegungskompensierers 118, und das anschließende Ausgeben eines Videosignals Sout des Dekodierers, einen Rahmenspeicher 117 für das Speichern des Signals, das durch den Addierer 116 gelangt, für die Zwecke der Wiedergewinnung der zwischenrahmenkodierten Daten, und einen Bewegungskompensierer 118 für das Kompensieren des Videosignals, das im Rahmenspeicher 117 gespeichert ist, gemäß dem Bewegungsvektor des Demultiplexers 111, und das anschließende Anbieten des kompensierten Ergebnisses an den Addierer 116.
Wendet man sich nun Fig. 2b zu, so umfaßt der niedrig auflö­ sende Dekodierer einen Demultiplexer 121 für das getrennte Ausgeben des komprimierten Eingabevideosignals Sin in das Videosignal S24 der 4.4 Blöcke und den Bewegungsvektor MV, einen inversen 4.4 Block Quantisierer 122 für das inverse Quantisieren von 4.4 Blöcken des Videosignals S24, einen inversen 4.4 Block DCT 123 für das Umwandeln der Frequenze­ bene des Videosignals des inversen 4.4 Block Quantisierers 122 in die Flächenebene durch inverse DCT, einen Bewegungs­ vektorskalierteil 124 für das Skalieren des Bewegungsvektors MV des Demultiplexers 121, einen Addierer 127 für das Summie­ ren des inversen 4.4 Block DCT Videosignals 123 und des Vi­ deosignals des Bewegungskompensierers 126 und die anschlie­ ßende Ausgabe eines Videosignals Sout des Dekodierers, einen Rahmenspeicher 125 für das Speichern des Signals, das durch den Addierer 127 gelangt, und einen Bewegungskompensierer 126 für das Kompensieren des Videosignals, das im Rahmenspeicher 125 gespeichert ist, gemäß dem Ausgangssignal des Bewegungs­ vektorskalierteils 124, und dem anschließenden Liefern des kompensierten Ergebnisses an den Addierer 127.
Der konventionelle skalierbare Kodierer nimmt die Pyramiden­ kodierung auf. Wenn die oberen linken 4.4 Blöcke jedoch vom 8.8 Block Rahmen dezimiert werden, ist die Energie der 8.8 Blöcke nicht für die extrahierten 4.4 Blöcke geeignet, so daß eine Kompensation stattfinden muß.
Bis jetzt wurde die Konfiguration des konventionellen ska­ lierbaren Kodierers zusätzlich zum konventionellen Dekodierer als Referenz erläutert. Der skalierbare Kodierer hat die folgenden Nachteile.
Im konventionellen skalierbaren Kodierer wird die Energiekom­ pensation durchgeführt durch Multiplizieren des Energiewertes eines Bildpunktes, der vom 8.8 Blockrahmen dezimiert wurde, mit einem Gewicht 0,25 (1/4). Ohne Berücksichtigung der opti­ malen Energie für den 4.4 Block Rahmen, der sich auf die Energieverteilung des 8.8 Block Rahmens bezieht, wird immer das konstante Gewicht W 0,25 angewandt. Der Energiewert in einem Rahmen hängt jedoch nicht nur von der Größe des Rahmens ab, so daß man ein unpassend dezimiertes Bild erhalten kann durch die unpräzise Energiekompensation während der wieder­ holten Zwischenrahmenkodierung. Ein Bild, das mit dem Bewe­ gungsvektor erzeugt wurde, wird ungenau. Mit diesen Problemen nehmen mit Voranschreiten der Zwischenrahmenkodierung die Fehler zu, was einen Drifteffekt bewirkt, wobei ein Bild wellenartig wird, was die Qualität des Bildes verschlechtert.
ZUSAMMENFASSUNG DER ERFINDUNG
Um solche Nachteile des Standes der Technik zu überwinden, besteht eine Aufgabe der vorliegenden Erfindung darin, eine skalierbare Kodiervorrichtung und ein Verfahren mit einer verbesserten Energiekompensation/inversen Kompensation zur Verfügung zu stellen, das eine präzise Rahmendezimierung und Interpolation durchführt durch Ausführen einer Energiekompen­ sation und inversen Energiekompensation auf der Basis der Energieverteilung des Rahmens, wenn niedrig auflösender Rah­ men von einem hochauflösenden Rahmen dezimiert/interpoliert wird.
Um die Aufgabe der vorliegenden Erfindung zu lösen, wird ein skalierbarer Kodierer für das Kompensieren der Energie eines niedrig auflösenden Bildes, das von einem hochauflösenden Bild durch Rahmen dezimiert wurde, und das inverse Kompensie­ ren der Energie eines Videosignals, das vom niedrig auflösen­ den Bild zum hochauflösenden Bild interpoliert wurde bereit­ gestellt, wobei der Kodierer folgendes umfaßt: einen 8.8 Block DCT für das Aufteilen eines Videosignals, das durch Rahmen eingegeben wird, in 8.8 Blöcke, und das Durchführen der DCT mit dem aufgeteilten Videosignal; einen 8.8 Block Quantisierer für das Quantisieren eines Differenzsignals zwischen dem DCT-transformierten Videosignal und dem interpo­ lierten Videosignal, einen 4.4 Block Dezimierer für das Dezi­ mieren von 4.4 Blöcken des Videosignals vom DCT transformier­ ten Videosignal; einen 4.4 Block Quantisierer für das Quanti­ sieren des dezimierten Videosignals; einen 8.8 Block Interpo­ lierer für das Interpolieren des energiekompensierten Video­ signals in 8.8 Blöcke; einen Energiekompensierer für das Erhalten eines Energiekompensationswertes auf der Basis des Videosignals vom 8.8 Block DCT, und das Kompensieren der Energie des 4.4 Block Videosignals vom 4.4 Block Dezimierer gemäß dem Energiekompensationswert; und einen inversen Ener­ giekompensierer für das inverse Kompensieren der Energie des Bildes vom 8.8 Block Interpolierer gemäß dem Energiekompensa­ tionswert vom Energiekompensierer.
KURZE BESCHREIBUNG DER ANGEFÜGTEN ZEICHNUNGEN
Diese und andere Merkmale der Erfindung werden deutlicher verständlich anhand der folgenden Beschreibung, wenn diese in Verbindung mit den Zeichnungen gelesen wird:
Fig. 1 ist ein Blockdiagramm der gesamten Konfiguration eines konventionellen skalierbaren Kodierers;
Fig. 2a ist ein Blockdiagramm eines konventionellen hochauf­ lösenden Dekodierers, Fig. 2b ist ein Blockdiagramm eines niedrig auflösenden Dekodierers;
Fig. 3 ist ein Konzeptdiagramm für das Erläutern der Energie­ kompensation gemäß dem Stand der Technik;
Fig. 4 ist ein Blockdiagramm eines skalierbaren Kodierers der vorliegenden Erfindung;
Fig. 5 ist ein internes Blockdiagramm des Energiekoeffizien­ tenkompensierers der Fig. 4;
Fig. 6 ist ein Flußdiagramm zur Darstellung der Energiekom­ pensation im Energiekoeffizientenkompensierer der Fig. 5;
Fig. 7 ist ein internes Blockdiagramm des inversen Blockkom­ pensierers der Fig. 4;
Fig. 8 ist ein Flußdiagramm zur Darstellung der inversen Energiekompensation des inversen Blockkompensierers der Fig. 7;
Fig. 9 ist ein internes Blockdiagramm des optimalen Gewicht­ generators 70 der Fig. 4;
Fig. 10 ist ein Flußdiagramm zur Darstellung einer optimalen Gewichterzeugung im optimalen Gewichtgenerator der Fig. 9;
Fig. 11 ist ein Konzeptdiagramm zur Erläuterung der Energie­ kompensation gemäß der vorliegenden Erfindung; und
Fig. 12 ist eine Kurve für die Erläuterung der Differenz zwischen der konventionellen Energiekompensation und der Energiekompensation der vorliegenden Erfindung.
DETAILLIERTE BESCHREIBUNG DER ERFINDUNG
Nachfolgend wird eine bevorzugte Ausführungsform eines ska­ lierbaren Kodierers der vorliegenden Erfindung im Detail unter Bezug auf die begleitenden Zeichnungen beschrieben. In diesen Zeichnungen sind Komponenten, die im wesentlichen die gleiche Konstruktion und Funktion haben, mit den gleichen Bezugszeichen bezeichnet.
Grob gesagt umfaßt die gesamte Konfiguration des skalierbaren Kodierers der vorliegenden Erfindung einen Kodierer, der einen verbesserten Energiekompensierer und einen inversen Energiekompensierer aufweist, um den Drifteffekt zu vermin­ dern, zusätzlich zur Konfiguration des konventionellen ska­ lierbaren Kodierers.
Bezieht man sich auf Fig. 4, so umfaßt die Konfiguration der Innenrahmenkodierung der vorliegenden Erfindung einen 8.8 Block Teiler 11 für das Aufteilen eines Videosignals Sin, das durch Rahmen eingegeben wird, in 8.8 Blöcke, einen 8.8 Block DCT 12 für eine DCT Transformation des Videosignals, das in 8.8 Blöcke aufgeteilt ist, einen 8.8 Block Quantisierer 13 für das Quantisieren des Differenzsignals (ein Videosignal ohne überlapptes Bild) zwischen dem DCT transformierten Vi­ deosignal (8.8 Block Rahmen) und dem Videosignal (4.4 Block Rahmen) des inversen Blockkompensierers 33', einen 8.8 Block Kodierteil 14 variabler Länge für das Kodieren des quanti­ sierten Videosignals und das anschließende Ausgeben des ko­ dierten Signals S14 an einen Multiplexer 60, und einen 4.4 Block Dezimierer 21 für das Dezimieren der oberen linken 4.4 Blöcke des Videosignals von den 8.8 Blöcken des Videosignals, die vom 8.8 Block DCT 12 ausgegeben werden.
Zusätzlich zu solchen Komponenten gibt es ferner einen Ener­ giekoeffizientenkompensierer 22 für das Erhalten eines Ener­ giekompensationswertes ECV auf der Basis der Energie des Videosignals des 8.8 Block DCT 12, und das Kompensieren der Energie des 4.4 Block Videosignals vom 4.4 Block Dezimierer 21 gemäß dem Energiekompensationswert ECV, einen 4.4 Block Quantisierer 23 für das Quantisieren des energiekompensierten Videosignals, einen 4.4 Block Kodierteil 24 variabler Länge für das Kodieren des quantisierten Videosignals und das an­ schließende Ausgeben des kodierten Signals S24 an einen Mul­ tiplexer 60, einen inversen 4.4 Block Quantisierer 31 für das inverse Quantisieren des Videosignals vom 4.4 Block Quanti­ sierer 23, einen 8.8 Block Interpolierer 32 für das Interpo­ lieren des invers quantisierten 4.4 Block Videosignals in 8.8 Blöcke des Videosignals unter Verwendung von Null, und einen inversen Blockkompensierer 33' für das inverse Kompensieren der Energie des Videosignals vom 8.8 Block Interpolierer 32 gemäß dem Energiekompensationswert ECV des Energiekoeffizien­ tenkompensierers 22'.
Weiterhin sind enthalten, ein inverser 8.8 Block Quantisierer 41 für das inverse Quantisieren des Videosignals vom 8.8 Block Quantisierer 13, ein inverser 8.8 Block DCT 42 für das Durchführen der inversen DCT des Summensignals (ein angenä­ hertes Signal des Videosignals des 8.8 Block DCT 12) zwischen dem Videosignal des inversen 8.8 Block Quantisierers 41 und dem Videosignal des inversen Blockkompensierers 33', ein erster Addierer 43 für das Summieren des Videosignals des inversen 8.8 Block DCT 42 und des Videosignals (null) des Bewegungskompensierers 53, und ein erster Rahmenspeicher 44 für das Speichern des Rahmensignals, das durch den ersten Addierer 43 gelangt, für die Zwecke einer Zwischenrahmenko­ dierung. Da das Videosignal des Bewegungskompensierers 53 nur während der Zwischenrahmenkodierung betroffen ist, wird es während der Innenrahmenkodierung null, und während der Zwi­ schenrahmenkodierung besteht es aus einem Videosignal von 8.8 Blöcken, die einen vorbestimmten Wert haben.
Die Konfiguration der Zwischenrahmenkodierung wird in der vorliegenden Erfindung zur vorher erwähnten Konstruktion der Innenrahmenkodierung addiert. Die Zwischenrahmenkodierkonfi­ guration umfaßt einen 16.16 Block Teiler 51 für das Aufteilen eines Videosignals Sin in 16.16 Blöcke, einen Bewegungsvek­ torschätzteil 52 für das Erkennen eines Bewegungsvektors MV vom Videosignal, das in 16.16 Blöcke aufgeteilt ist, und dem Videosignal des Rahmenspeichers, einen Bewegungskompensierer 53 für das Erzeugen eines neuen Rahmens unter Verwendung des Bewegungsvektors MV des Bewegungsvektorschätzteils 52 und des Rahmens des Rahmenspeichers 44, und einen optimalen Gewicht­ generator 70 für das Skalieren des Bewegungsvektors MV, der vom Bewegungsvektorschätzteil 52 ausgegeben wird, in eine Vielzahl (MV'=MV.W) gemäß mehreren Gewichten W innerhalb eines vorbestimmten Bereiches, und für das Erzeugen eines optimalen Gewichts, das das beste SNR unter den SNRs hat, basierend auf einem abgetasteten Rahmen und der Vielzahl der 4.4 Block Rahmen, die gemäß dem skalierten Bewegungsvektor MV' erzeugt wurden. Zusätzlich gibt es einen Multiplexer 60 für das selektive Ausgeben eines hochauflösenden Videosignals (8.8 Block Videosignal) S14 des 8.8 Block Kodierteils 14 variabler Länge, eines niedrig auflösenden Videosignals S24 (4.4 Block Videosignal) eines 4.4 Block Kodierteils 24 varia­ bler Länge, eines Bewegungsvektors MV des Bewegungsvektor­ schätzteils 52, und eines optimalen Gewichts W des optimalen Gewichtsgenerators 70 in einer vorbestimmten Reihenfolge.
Bezieht man sich auf Fig. 5, so wird der konventionelle Ener­ giekoeffizientenkompensierer 22 geändert in den Energiekoef­ fizientenkompensierer 22'. Der Energiekoeffizientenkompensie­ rer 22' der vorliegenden Erfindung umfaßt einen Energiebe­ rechner 22'a für das Berechnen einer Gesamtenergie TE für das Videosignal S12 vom 8.8 Block DCT 12 und der Teilenergie PE für das Videosignal der oberen linken 4.4 Blöcke in den 8.8 Blöcken, einen Energieverhältnisberechner 22'b für das Be­ rechnen des Verhältnisses TE/PE der Gesamtenergie TE zur Teilenergie PE, die man im Energieberechner 22'a erhält, einen Quadratwurzelberechner 22'c für das Anlegen einer Qua­ dratwurzel an das Energieverhältnis TE/PE, das man vom Ener­ gieverhältnisberechner 22'b erhält, und einen Multiplizierer 22'd für das Multiplizieren des Gewichts W mit der Quadrat­ wurzel des Energieverhältnisses, um schließlich einen Ener­ giekompensationswert ECV zu erhalten, der dann dem inversen Blockkompensierer 33 zugeleitet wird, wobei der Energiekom­ pensationswert ECV auch mit dem Signal S21 (DCT Koeffizient) vom 4.4 Block Dezimierer 21 multipliziert wird, um dessen Energie zu kompensieren, und für das Liefern des energiekom­ pensierten Videosignals S22' an den 4.4 Block Quantisierer 23. Man erhält den DCT Koeffizienten, wenn DCT durchgeführt wird.
Unter Bezug auf Fig. 7 wird der konventionelle inverse Block­ kompensierer 33 in den inversen Blockkompensierer 33' geän­ dert. Der inverse Blockkompensierer 33' der vorliegenden Erfindung umfaßt den inversen Energiekompensationswertberech­ ner 33'a für das Berechnen des inversen Energiekompensations­ wertes IECV (=1/ECV) mit der inversen Zahl des Energiekompen­ sationswertes ECV vom Energiekoeffizientenkompensierer 22', und einen Multiplizierer 33'b für das Multiplizieren des inversen Energiekompensationswertes IECV zum Signal S32 (DCT Koeffizient) vom 8.8 Block Interpolierer 32, um eine inverse Energiekompensation durchzuführen und die Energie des kompen­ sierten Videosignals an den 8.8 Block Quantisierer 13 zu liefern.
Bezieht man sich auf Fig. 9, so umfaßt der optimale Gewicht­ generator 70 der vorliegenden Erfindung einen inversen 4.4 Block DCT 74 für das Durchführen einer inversen DCT des Vi­ deosignals S31 vom inversen 4.4 Block Quantisierer 31, einen zweiten Rahmenspeicher 76 für das Summieren und Speichern des Videosignals des inversen 4.4 Block DCT 74 und des Videosi­ gnals des dritten Rahmenspeichers 79, ein Faktorzerlegungs­ teil 78 für das Skalieren des Bewegungsvektors MV vom Bewe­ gungsvektorschätzteil 52 in eine Vielzahl MV' gemäß den meh­ reren Gewichten W innerhalb eines vorbestimmten Bereichs, einen zweiten Bewegungskompensierer 77 für das Kompensieren des Videosignals des zweiten Rahmenspeichers 76 gemäß den jeweiligen Bewegungsvektoren MV', die im Faktorzerlegungsteil 78 skaliert wurden, um mehrere vorhergesagte Bilder zu erzeu­ gen, und sie dem dritten Rahmenspeicher 79 und einem S/N Verhältnisberechner 72 anzubieten, einen Abtastteil 71 für das Abtasten des Videosignals S51 der 16.16 Blöcke vom 16.16 Block Teiler 51 in 8.8 Blöcke des Videosignals, einen S/N Verhältnisrechner 72 für das Berechnen des S/N-Verhältnisses unter Verwendung des abgetasteten Videosignals und des er­ zeugten Videosignals, einen S/N-Verhältnisvergleicher 73 für das Erzeugen eines optimalen Gewichts, das den größten Ver­ hältnissen unter den berechneten S/N-Verhältnissen ent­ spricht, und einen dritten Rahmenspeicher 79 für das Spei­ chern des Videosignals vom zweiten Bewegungskompensierer 77 und das Liefern eines Rahmenbildes, das dem optimalen Gewicht W entspricht, vom S/N Verhältnisvergleicher 73 an den Addie­ rer 75.
Fig. 6 ist ein Flußdiagramm zur Darstellung der Energiekom­ pensation im Energiekoeffizientenkompensierer 22' der Fig. 5. Fig. 8 ist ein Flußdiagramm zur Darstellung der inversen Energiekompensation im inversen Blockkompensierer 33' der Fig. 7. Fig. 10 ist ein Flußdiagramm zur Darstellung der optimalen Gewichterzeugung im optimalen Gewichtgenerator 70 der Fig. 9.
Fig. 11 ist ein Konzeptdiagramm der Energiekompensation gemäß der vorliegenden Erfindung. Wenn ein 4.4 Block niedrig auflö­ sendes Bild vom 8.8 Block hochauflösenden Bild dezimiert wird, ist die Energiekompensierung unvermeidlich nötig, da die Energie der 8.8 Blöcke für den dezimierten 4.4 Block nicht geeignet ist.
Fig. 12 ist ein Frequenzspektrum für die Darstellung der Differenz zwischen der Energiekompensierung gemäß der vorlie­ genden Erfindung und der des Standes der Technik.
Der Betrieb des Kodierers der vorliegenden Erfindung wird nachfolgend detailliert unter Bezug auf die angefügten Zeich­ nungen beschrieben.
Zunächst verarbeitet unter Bezug auf Fig. 4 der skalierbare Kodierer der vorliegenden Erfindung das Videosignal Sin in Einheiten eines Rahmens. Dieses Rahmenvideosignal wird in 8.8 Blöcke im 8.8 Blockteiler 11 aufgeteilt. Der 8.8 Block DCT 12 wandelt die Flächenebene des Videosignals in die Frequenze­ bene durch DCT um. Das umgewandelte Signal wird dem 8.8 Block Quantisierer 13 und dem 4.4 Block Dezimierer 21 zugeführt. Im 8.8 Block Quantisierer 14 wird die Frequenzebene des Videosi­ gnals quantisiert, und es wird dann im 8.8 Block Kodierteil 14 variabler Länge kodiert. Das kodierte Signal S14 wird an den Multiplexer 60 ausgegeben.
Der 4.4 Block Dezimierer 21 dezimiert das 4.4 Block Videosi­ gnal vom 8.8 Block Videosignal, das vom 8.8 Block DCT 12 ausgegeben wird, um ein niedrig auflösendes Rahmenbild aus einem hochauflösenden Rahmenbild zu erzeugen. In dieser Aus­ führungsform wird der obere linke 4.4 Block aus den 8.8 Blöc­ ken herausgezogen, wie das in Fig. 11 gezeigt ist.
Für das dezimierte 4.4 Block Videosignal führt der Energie­ koeffizientenkompensierer 22' eine Energiekompensation durch. Dies wird durchgeführt, da die Energie der 8.8 Blöcke für die dezimierten 4.4 Blöcke nicht geeignet ist. Durch dieses Ver­ fahren wird die Energie des Videosignals, das von einem hochauflösenden Bild extrahiert wurde, passend für ein nied­ rig auflösendes Bild.
Es erfolgt speziell eine Erläuterung der Energiekompensation, die im Energiekoeffizientenkompensierer 22' der vorliegenden Erfindung durchgeführt wird, unter Bezug auf Fig. 5, wobei im Energieberechner 22'a des Energiekoeffizientenkompensierers 22' die Gesamtenergie TE des Videosignals vom 8.8 Block DCT 12 und die Teilenergie PE des Videosignals von den oberen linken 4.4 Blöcken in den 8.8 Blöcken berechnet werden. Die Gesamtenergie wird gemäß der Gleichung 1, und die Teilenergie PE gemäß der Gleichung 2 erhalten.
Hier ist Ci ein DCT-Koeffizient (CDCT), der nach der DCT der 8.8 Block und 4.4 Block Rahmenbilder erzeugt wird.
Im Energieverhältnisberechner 22'b wird das Verhältnis TE/PE der Gesamtenergie TE zur Teilenergie PE, die im Energiebe­ rechner 22'a erhalten werden, berechnet und an den Quadrat­ wurzelberechner 22'c gegeben. Im Quadratwurzelberechner 22'c wird die Quadratwurzel vom Energieverhältnis TE/PE genommen, das man im Energieverhältnisberechner 22' erhalten hat, die dann an den Multiplizierer 22'd gegeben wird. Im Multiplizie­ rer 22'd wird die Quadratwurzel des Energieverhältnisses mit dem Gewicht W, das ist 0,25, multipliziert, um einen endgül­ tigen Energiekompensationswert ECV zu finden. Dieser Energie­ kompensationswert wird an den inversen Blockkompensierer 33' gegeben, und wird in Gleichung 3 ausgedrückt. Der Multipli­ zierer 22'd multipliziert den Energiekompensationswert ECV mit dem Signal (DCT-Koeffizient) vom 4.4 Block Dezimierer 21 für den Zweck der Energiekompensierung. Das energiekompen­ sierte Videosignal wird dann an den 4.4 Block Quantisierer 23 gegeben.
Die Erläuterung, die sich auf Fig. 5 bezieht, ist ein Fall, bei dem der Energiekoeffizientenkompensierer 22' mit Hardware ausgebildet wird. Der Energiekoeffizientenkompensierer 22' kann jedoch mit Software ausgebildet werden. Die Beschreibung des Energiekoeffizientenkompensierer, der mit Software ausge­ bildet wird, entspricht den Schritten 221 bis 227 in Fig. 6 und ist gleich der des Energiekoeffizientenkompensierers 22', der mit Hardware ausgeführt wird.
Mittlerweile wird die Energiekompensation, die die Energie des 8.8 Block Rahmens im Energiekoeffizientenkompensierer 22' der vorliegenden Erfindung betrachtet, nur für die AC-Kompo­ nente in der Frequenzebene durchgeführt. DC-Komponenten zei­ gen eine mittlere Luminanz für den 4.4 Block Rahmen an. Diese mittlere Luminanz ändert sich sogar nach der Dezimierung der 4.4 Blöcke von den 8.8 Blöcken nicht. Die Energiekompensie­ rung für die DC-Komponenten wird durch Multiplizieren des DCT-Koeffizienten der 4.4 Blöcke mit dem Gewicht 0,25 ohne irgend eine Skalierung durchgeführt.
Das obige Verfahren umfaßt im Hinblick auf das erste eingege­ bene Rahmenbild einen Schritt der Kodierung eines hochauflö­ senden Bildes und einen Schritt des Dezimierens und Kodierens eines niedrig auflösenden Bildes vom hochauflösenden Bild.
Als nächstes werden die Innenrahmenkodierung und die Zwi­ schenrahmenkodierung erläutert.
Zuerst wird bei der Innenrahmenkodierung das Videosignal des 4.4 Block Quantisierers 23 invers quantisiert im inversen 4.4 Block Quantisierer 31 und Null wird zu den Restblöcken mit Ausnahme der 4.4 Blöcke im 8.8 Block Interpolierer 32 inter­ poliert, um die 8.8 Blöcke des Videosignals zu erzeugen. Die Energie des 8.8 Block Videosignals wird invers kompensiert im inversen Blockkompensierer 33', so daß sie für ein hochauflö­ sendes Bild (8.8 Block Bild) geeignet ist, da sie im Energie­ koeffizientenkompensierer 22' kompensiert wurde, so daß sie für die niedrige Auflösung geeignet ist. Die inverse Energie­ kompensation im Energiekoeffizientenkompensierer 22' wird unten erläutert.
Bezieht man sich auf Fig. 7, so wird im inversen Energiekom­ pensationswertberechner 33'a des inversen Blockkompensierers 33' der inverse Energiekompensationswert IECV (=1/ECV) mit der inversen Zahl des Energiekompensationswertes ECV vom Energiekoeffizientenkompensierer 22' berechnet und dann an den Multiplizierer 33'b gegeben. Der Multiplizierer 33'b multipliziert den inversen Energiekompensationswert IECV mit dem Signal (DCT-Koeffizient) vom 8.8 Block Interpolierer 32 für den Zweck der inversen Energiekompensation. Das invers energiekompensierte Videosignal wird dann sowohl an den 8.8 Block Quantisierer 13 als auch den inversen 8.8 Block DCT 42 gegeben.
Die Erläuterung, die sich auf Fig. 7 bezieht, betrifft einen Fall, in dem der inverse Blockkompensierer 33' mittels Hard­ ware ausgebildet ist. Der Kompensierer 33' kann jedoch auch mittels Software ausgebildet sein. Die Beschreibung des in­ versen Blockkompensierers, der mit Software ausgebildet ist, entspricht den Schritten 331 bis 334 der Fig. 8 und ist gleich der des Kompensierers 33' der mit Hardware ausgeführt ist.
Der 8.8 Block Quantisierer 13 quantisiert und gibt das Diffe­ renzsignal aus, wobei das Videosignal vom inversen Blockkom­ pensierer 33' vom zweiten Eingabevideosignal subtrahiert wird. Hier wird, wenn das Videosignal vom inversen Blockkom­ pensierer 33' vom zweiten Eingaberahmenvideosignal subtra­ hiert wird, das überlappte Videosignal, das den 4.4 Blöcken entspricht, die im 4.4 Block Dezimierer 21 dezimiert wurden, vom 8.8 Block Rahmen durch Durchführen einer Zwischenrahmen­ kodierung entfernt.
Es wird nun eine Vorbereitung vor der Zwischenrahmenkodierung erläutert. Das 8.8 Block Videosignal (Videosignal ohne den 4.4 Block Signalwert), das im 8.8 Block Quantisierer 13 quan­ tisiert wird, wird invers quantisiert und an den inversen 8.8 Block DCT 42 ausgegeben. Der inverse 8.8 Block DCT 42 sum­ miert das 8.8 Block Videosignal vom 8.8 Block Quantisierer 13 und das 8.8 Block Videosignal (Videosignal, wobei ein Signal­ wert nur in den 4.4 Blöcken existiert) vom inversen Blockkom­ pensierer 33' und wandelt dann die Frequenzebene durch eine inverse DCT in die Flächenebene um. Das in die Flächenebene umgewandelte 8.8 Block Videosignal wird gespeichert, nachdem es durch den Addierer 43 hindurchgegangen ist. Damit ist die Vorbereitung für die Zwischenrahmenkodierung abgeschlossen.
Bei der Zwischenrahmenkodierung wird das Videosignal, das in den skalierbaren Kodierer der vorliegenden Erfindung eingege­ ben wird, in 16.16 Blöcke im 16.16 Block Teiler 51 aufgeteilt und dann sowohl an den Bewegungsvektorschätzteil 52 als auch den optimalen Gewichtsgenerator 70 gegeben. Der Bewegungsvek­ torschätzteil 52 erkennt den Bewegungsvektor MV aus dem Vi­ deosignal, das in 16.16 Blöcke aufgeteilt ist, und dem Video­ signal vom Rahmenspeicher 44, und der Bewegungsvektor wird an den ersten Bewegungskompensierer 53, den Multiplexer 60 und den optimalen Gewichtsgenerator 70 gegeben. Der erste Bewe­ gungskompensierer 53 kompensiert das Videosignal des ersten Rahmenspeichers 44 unter Verwendung des Bewegungsvektors, so daß ein neues Rahmenvideosignal an den 8.8 Block DCT 12 und den Addierer 43 gesandt wird. Der 8.8 Block DCT 12 subtra­ hiert das neue Rahmenvideosignal vom Videosignal vom 8.8 Blockteiler 11. Das Differenzsignal, bei dem nur die Signal­ komponente, die der Kontur entspricht, verbleibt, wird in die Frequenzebene durch DCT umgewandelt. Das weitere Verfahren ist dasselbe wie bei der hochauflösenden Kodierung und wird hier nicht nochmals beschrieben.
Oben wurde sequentiell die Kodierung eines hochauflösenden Videosignals, die Kodierung eines niedrig auflösenden Video­ signals, die Innenrahmenkodierung und die Zwischenrahmenko­ dierung beschrieben. Von nun an wird die spezielle Operation des optimalen Gewichtsgenerators 70 für das Erzeugen eines optimalen Gewichts für einen optimalen Bewegungsvektor MV durch seine Skalierung erläutert.
Bezieht man sich auf Fig. 9 so wird im inversen 4.4 Block DCT 74 des optimalen Gewichtgenerators 70 das Videosignal der 4.4 Blöcke vom inversen 4.4 Block Quantisierer 31 in die Flächen­ ebene durch die inversen DCT umgewandelt und dann an den zweiten Rahmenspeicher 76 durch den zweiten Addierer 75 aus­ gegeben, so daß das Videosignal im zweiten Rahmenspeicher 76 gespeichert wird.
Mittlerweile wird im Faktorzerlegungsteil 78 des optimalen Gewichtgenerators 70 der Bewegungsvektor MV vom Bewegungsvek­ torschätzteil 52 gemäß den mehreren Gewichten innerhalb eines vorbestimmten Bereichs skaliert. Beispielsweise wird der Bereich des Gewichtes auf 0,1 bis 0,8 gesetzt und das Inter­ vall zwischen den Gewichten betrage 0,1, so nehmen die Ge­ wicht W die Werte 0,1; 0,2; 0,3; 0,4; 0,5; 0,6; 0,7 und 0,8 an. Wenn der Bewegungsvektor mit den mehreren Gewichten ska­ liert wird, so betragen die skalierten Bewegungsvektoren 0,1.MV; 0,2.MV; 0,3.MV, . . ., 0,8.MV, die an den zweiten Bewe­ gungskompensierer 77 gesandt werden. In dieser Ausführungs­ form wird für ein klares Verständnis der Bereich des Gewichts von 0,3 bis 0,6 eingestellt, wobei ihr Intervall 0,1 beträgt. Somit werden die Bewegungsvektor MV' skaliert zu 0,3.MV; 0,4.MV; 0,5.MV; 0,6.MV, die dann an den zweiten Bewegungskom­ pensierer 77 gesandt werden.
Hier sagt der zweite Bewegungskompensierer 77 mehrere neue Rahmenbilder vorher durch Anwendung der skalierten Bewegungs­ vektoren MV' (=0,3.MV; 0,4.MV; 0,5.MV; 0,6.MV), die vom Fak­ torzerlegungsteil 78 an die jeweiligen Videosignale gegeben werden, die im Rahmenspeicher 76 gespeichert sind, und die vorhergesagten Rahmenbilder werden im Rahmenspeicher 79 ge­ speichert.
Die vorhergesagten Rahmenbilder werden gestaltet, um es dem Dekodierer zu ermöglichen, ein optimales Dekodierverfahren durchzuführen, wenn das Bild, das während des Dekodierens im Dekodierer erhalten werden soll, vorher erzeugt wird, wobei dann ein optimales Gewicht das das beste SNR unter SNRs hat, basierend auf dem vorher vorhergesagten Bild und dem aktuel­ len Bild erzeugt wird, und schließlich wird das optimale Gewicht an den Dekodierer gesandt.
Im Abtastteil 71 des optimalen Gewichtgenerators 70 wird das Videosignal der 16.16 Blöcke vom 16.16 Blockteiler 51 in 8.8 Blöcke abgetastet, die dann an den S/N Verhältnisberechner 72 gesandt werden. Im S/N-Verhältnisberechner 72 wird das S/N- Verhältnis jedes 8.8 Block Videosignals vom Abtastteil 71 und des Videosignals vom zweiten Bewegungskompensierer 77 berech­ net, und das Ergebnis wird an den S/N-Verhältnis Vergleicher 73 gesandt. Dann vergleicht der S/N-Verhältnisvergleicher 73 die bereitgestellten S/N-Verhältniswerte und sendet das opti­ male Gewicht, das dem größten Wert entspricht, an den Multi­ plexer 60 und den dritten Rahmenspeicher 79. Der dritte Rah­ menspeicher 79 gibt ein Rahmenvideosignal aus, das dem opti­ malen Gewicht vom S/N-Verhältnisvergleicher 73 entspricht, an den Addierer 75. Der Addierer 75 summiert das Videosignal vom Rahmenspeicher 79 und das Videosignal durch den inversen 4.4 Block DCT 74 und sendet das Ergebnis an den Rahmenspeicher 76.
Die Erläuterung unter Bezug auf Fig. 9 betrifft einen Fall, bei dem der optimale Gewichtsgenerator 70 mittels Hardware ausgebildet ist. Der Generator kann jedoch auch mittels Soft­ ware ausgebildet werden. Die Beschreibung des mittels Soft­ ware ausgebildeten Generators entspricht den Schritten 710 bis 740 in Fig. 10 und ist gleich der des Generators 70, der mittels Hardware ausgebildet ist.
Schließlich gibt der Multiplexer 60 ein Kodiersignal S14 vom 8.8 Block Kodierteil 14 variabler Länge aus, kodiert das Signal S24 vom 4.4 Block Kodierteil variabler Länge 24, den Bewegungsvektor MV vom Bewegungsvektorschätzteil 52 und das optimale Gewicht W vom optimalen Gewichtgenerator 70 in einer sequentiellen Reihenfolge.
Wie oben beschreiben wurde, wird die Energiekompensation der vorliegenden Erfindung bei der Dezimierung des niedrig auflö­ senden Bildes vom hochauflösenden Bild mit einer optimalen Energie bezüglich des niedrig auflösenden Bildes durchge­ führt, indem das Verhältnis zwischen der Gesamtenergie TE der hohen Auflösung und der Teilenergie PE eines entsprechenden zu dezimierenden Blockes betrachtet wird. Im Stand der Tech­ nik erfolgt die Energiekompensation jedoch sehr einfach durch Multiplizieren des DCT-Koeffizienten mit dem Gewicht W 0,25. Sogar beim Skalieren des Bewegungsvektors führt der Stand der Technik dies mit einem festen Wert 0,5 durch. In dieser Er­ findung wird das optimale Gewicht erzeugt, so daß ein zu dekodierendes Bild das beste S/N-Verhältnis hat, und somit bei der Bewegungsvektorskalierung angewandt wird. Die Ener­ giekompensation und die Bewegungsvektorskalierung der vorlie­ genden Erfindung eliminiert den Drifteffekt, bei dem die Qualität des Bildes abnimmt, so daß eine gute Videowiedergabe beim Dekodieren ermöglicht wird.
Für die kurze Erläuterung des skalierbaren Kodierers ist zunächst die Operation der hochauflösenden Dekodierung die gleiche wie die unter Bezug auf Fig. 2a. Die niedrig auflö­ sende Dekodieroperation ist nahezu die gleiche wie die unter Bezug auf Fig. 2b beschriebene. Der Unterschied besteht darin, daß an Stelle eines festen Gewichts von 0,5 für die Bewegungsvektorskalierung die vorliegende Erfindung ein opti­ males Gewicht anwendet, das die beste Qualität des Bildes gewährleistet.
Insgesamt führt die vorliegende Erfindung eine genaue Dezi­ mierung des niedrig auflösenden Rahmens vom hochauflösenden Rahmen gemäß einer verbesserten Energiekompensationstechnik durch, um so den Drifteffekt im Bild zu eliminieren und eine gute Videowiedergabe zu ermöglichen.
Für den Leser wird es deutlich sein, daß die vorangehende Beschreibung der Erfindung nur aus Gründen der Darstellung und Beschreibung und für ein Verständnis der Erfindung vorge­ stellt wurde, und daß viele Änderungen und Modifikationen vorgenommen werden können, ohne vom Umfang der Erfindung abzuweichen. Es ist daher beabsichtigt, daß der Umfang der Erfindung eher durch die angefügten Ansprüche als die voran­ gehende Beschreibung angezeigt werden soll; und daß alle Änderung, die innerhalb der Bedeutung und dem Umfang der Äquivalenz der Ansprüche liegen, von diesen umfaßt sein sol­ len.

Claims (8)

1. Skalierbarer Kodierer für das Kompensieren der Energie eines niedrig auflösenden Bildes, das von einem hoch auflö­ senden Bild durch Rahmen dezimiert wurde, und das inverse Kompensieren der Energie eines Videosignals, das von einem niedrig auflösenden Bild zum hochauflösenden Bild interpo­ liert wurde, wobei der Kodierer folgendes umfaßt:
einen 8.8 Block DCT für das Teilen eines Videosignals, das durch Rahmen eingegeben wurde, in 8.8 Blöcke, und das Durchführen der DCT beim aufgeteilten Videosignal;
einen 8.8 Block Quantisierer für das Quantisieren eines Differenzsignals zwischen dem DCT transformierten Videosignal und dem interpolierten Videosignal;
einen 4.4 Block Dezimierer für das Dezimieren der 4.4 Blöcke des Videosignals vom DCT transformierten Videosignal;
einen 4.4 Block Quantisierer für das Quantisieren des dezimierten Videosignals;
einen 8.8 Block Interpolierer für das Interpolieren des energiekompensierten Videosignals in 8.8 Blöcke;
einen Energiekompensierer für das Erhalten eines Ener­ giekompensationswertes auf der Basis der Energie des Videosi­ gnals vom 8.8 Block DCT, und das Kompensieren der Energie des 4.4 Block Videosignals vom 4.4 Block Dezimierer gemäß dem Energiekompensationswert; und
einen inversen Energiekompensierer für das inverse Kom­ pensieren der Energie des Bildes vom 8.8 Block Interpolierer, gemäß dem Energiekompensationswert vom Energiekompensierer.
2. Kodierer nach Anspruch 1, wobei der Energiekompensierer folgendes umfaßt:
einen Energieberechner für das Berechnen einer Gesamt­ energie des Videosignals vom 8.8 Block DCT und einer Teil­ energie des oberen linken 4.4 Block Videosignals in den 8.8 Blöcken;
einen Energieverhältnisberechner für das Berechnen des Verhältnisses der Gesamtenergie zur Teilenergie, die man vom Energieberechner erhält;
einen Quadratwurzelberechner für das Berechnen einer Quadratwurzel des Energieverhältnisses, das man vom Energie­ verhältnisberechner erhält; und
einen Multiplizierer für das Multiplizieren der Quadrat­ wurzel des Energieverhältnisses mit einem Gewicht, um einen endgültigen Energiekompensationswert zu erhalten, das Liefern des Energiekompensationswertes an den inversen Energiekompen­ sierer, das Multiplizieren des Signals vom 4.4 Block Dezimie­ rer mit dem Energiekompensationswert für den Zweck der Ener­ giekompensation, und das Bereitstellen eines energiekompen­ sierten Videosignals an den 4.4 Block Quantisierer.
3. Kodierer nach Anspruch 1, wobei der inverse Energiekompen­ sierer folgendes umfaßt:
einen inversen Energiekompensationswertberechner für das Berechnen eines inversen Energiekompensationswertes mit der inversen Zahl des Energiekompensationswertes vom Energiekom­ pensierer; und
einen Multiplizierer für das Multiplizieren des Signals vom 8.8 Block Interpolierer mit dem inversen Energiekompensa­ tionswert für die Zwecke der inversen Energiekompensation, und das Liefern des energiekompensierten Videosignals an den 8.8 Block Quantisierer.
4. Kodierer nach Anspruch 2, wobei der Energieberechner die Gesamtenergie berechnet zu
und die Teilenergie zu
5. Skalierbares Kodierverfahren für das Kompensieren der Energie des dezimierten 4.4 Block Videosignals und das inver­ se Kompensieren der Energie eines interpolierten Videosignals unter Verwendung einer 8.8 Block DCT für das Aufteilen eines eingegebenen Videosignals durch Rahmen in 8.8 Blöcke, und das Durchführen der DCT mit dem aufgeteilten Videosignal; einen 8.8 Block Quantisierer für das Quantisieren eines Differenz­ signals zwischen dem DCT transformierten Videosignal und dem interpolierten Videosignal; einen 4.4 Block Dezimierer für das Dezimieren der 4.4 Blöcke des Videosignals vom DCT trans­ formierten Videosignal; einen 4.4 Block Quantisierer für das Quantisieren des dezimierten Videosignals; und einen 8.8 Block Interpolierer für das Interpolieren des energiekompen­ sierten Videosignals in 8.8 Blöcke, wobei das Verfahren fol­ gende Schritte umfaßt:
  • a) Erhalten eines Energiekompensationswertes auf der Basis der Energie des Videosignals vom 8.8 Block DCT, und Kompensieren der Energie des 4.4 Block Videosignals vom 4.4 Block Dezimierer gemäß dem Energiekompensationswert; und
  • b) inverses Kompensieren der Energie des Videosignals vom 8.8 Block Interpolierer gemäß dem Energiekompensations­ wert vom Energiekompensierer.
6. Verfahren nach Anspruch 5, wobei der Schritt (a) folgende Unterschritte umfaßt:
  • c) Berechnen einer Gesamtenergie, die den 8.8 Blöcken entspricht, aus einem Videosignal, das vom 8.8 Block DCT eingegeben wird, und Berechnen einer Teilenergie, die den oberen linken 4.4 Blöcken der 8.8 Blöcke entspricht;
  • d) Berechnen des Verhältnisses der Gesamtenergie zur Teilenergie aus Schritt (c);
  • e) Berechnen einer Quadratwurzel des Energieverhältnis­ ses vom Schritt (d); und
  • f) Multiplizieren der Quadratwurzel mit einem Gewicht, um den Energiekompensationswert zu erhalten, Liefern des Energiekompensationswertes an den inversen Energiekompensie­ rer, Multiplizieren des Signals vom 4.4 Block Dezimierer mit dem Energiekompensationswert für den Zweck einer Energiekom­ pensation, und Liefern des energiekompensierten Videosignals an den 4.4 Block Quantisierer.
7. Verfahren nach Anspruch 5, wobei der Schritt (b) folgende Unterschritte umfaßt:
  • g) Berechnen eines inversen Energiekompensationswertes mit der inversen Zahl des Energiekompensationswertes, wenn diese vom Energiekompensierer eingegeben wird; und
  • h) Multiplizieren des Signals vom 8.8 Block Interpolie­ rer mit dem inversen Energiekompensationswert, wenn dieser vom 8.8 Block Interpolierer eingegeben wird, um eine inverse Kompensation der Energie durchzuführen.
8. Kodierer nach Anspruch 6, wobei der Schritt (c) die Ge­ samtenergie erhält durch
und die Teilenergie durch
DE1997158252 1997-07-11 1997-12-30 Skalierbare Kodiervorrichtung und Verfahren mit verbesserter Funktion der Energiekompensation/inversen Kompensation Ceased DE19758252A1 (de)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019970032254A KR100240770B1 (ko) 1997-07-11 1997-07-11 에너지보상/역보상기능을개선한스케러블부호화기및그방법

Publications (1)

Publication Number Publication Date
DE19758252A1 true DE19758252A1 (de) 1999-01-14

Family

ID=19514179

Family Applications (1)

Application Number Title Priority Date Filing Date
DE1997158252 Ceased DE19758252A1 (de) 1997-07-11 1997-12-30 Skalierbare Kodiervorrichtung und Verfahren mit verbesserter Funktion der Energiekompensation/inversen Kompensation

Country Status (5)

Country Link
US (1) US6072834A (de)
JP (1) JP3241653B2 (de)
KR (2) KR100240770B1 (de)
DE (1) DE19758252A1 (de)
GB (1) GB2327311A (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10200901A1 (de) * 2001-09-14 2003-05-22 Siemens Ag Effiziente Codierung von Videosignalen für skalierbare Simul-cast-Speicherung und -Übertragung sowie zugehöriger Codec

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6510178B1 (en) * 1999-12-15 2003-01-21 Zenith Electronics Corporation Compensating for drift in the down conversion of high definition sequences to lower resolution sequences
US7088780B2 (en) * 2001-05-11 2006-08-08 Mitsubishi Electric Research Labs, Inc. Video transcoder with drift compensation
JP2003006643A (ja) * 2001-06-25 2003-01-10 Canon Inc 画像処理装置及びその方法、プログラム
US9894379B2 (en) * 2001-07-10 2018-02-13 The Directv Group, Inc. System and methodology for video compression
KR100450939B1 (ko) * 2001-10-23 2004-10-02 삼성전자주식회사 이미지 축소를 위한 스케일-다운 기능을 가지는 압축비디오 복호화기 및 방법
US7088776B2 (en) * 2002-07-15 2006-08-08 Apple Computer, Inc. Method and apparatus for variable accuracy inter-picture timing specification for digital video encoding
AU2008201106C1 (en) * 2002-07-15 2011-06-09 Apple Inc. Method and bitstream for variable accuracy inter-picture timing specification for digital video encoding
US8254461B2 (en) * 2002-07-24 2012-08-28 Apple Inc. Method and apparatus for variable accuracy inter-picture timing specification for digital video encoding with reduced requirements for division operations
US6728315B2 (en) * 2002-07-24 2004-04-27 Apple Computer, Inc. Method and apparatus for variable accuracy inter-picture timing specification for digital video encoding with reduced requirements for division operations
KR100930436B1 (ko) * 2002-10-17 2009-12-08 (주)휴맥스 홀딩스 이산 여현 역변환을 이용한 이미지 크기 재설정 방법
US20040101042A1 (en) * 2002-11-25 2004-05-27 Yi-Kai Chen Method for shot change detection for a video clip
KR20040046892A (ko) * 2002-11-28 2004-06-05 엘지전자 주식회사 움직임 벡터 예측 부호화 및 복호화 방법
US7660487B2 (en) * 2003-12-10 2010-02-09 Sony Corporation Image processing method and apparatus with image resolution conversion related to relative movement detection
JP4687252B2 (ja) * 2005-06-02 2011-05-25 ソニー株式会社 画像処理装置、その方法、そのプログラムおよび記録媒体
KR100712531B1 (ko) * 2005-09-10 2007-04-27 삼성전자주식회사 Mpeg-2 데이터를 h.264 데이터로변환부호화하는 장치 및 방법
US7660486B2 (en) * 2006-07-10 2010-02-09 Aten International Co., Ltd. Method and apparatus of removing opaque area as rescaling an image
CN101472179A (zh) * 2007-12-29 2009-07-01 辉达公司 多个视频标准下的运动补偿的二维内插结构
US20140098880A1 (en) * 2012-10-05 2014-04-10 Qualcomm Incorporated Prediction mode information upsampling for scalable video coding
CN107534623B (zh) * 2015-05-27 2021-02-12 惠普发展公司有限责任合伙企业 从输入比特流数据中恢复独立波形的方法,设备和介质
GB2619627B (en) * 2019-03-20 2024-02-28 V Nova Int Ltd Low complexity enhancement video coding
CN113906746A (zh) * 2019-06-12 2022-01-07 索尼集团公司 图像处理装置和方法
CN113422951B (zh) * 2019-09-20 2022-05-31 杭州海康威视数字技术股份有限公司 一种解码、编码方法、装置及其设备
WO2021054805A1 (ko) * 2019-09-20 2021-03-25 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
MX2022005905A (es) * 2019-11-15 2022-06-24 Hfi Innovation Inc Metodo y aparato para se?alizacion de compensacion de movimiento envolvente horizontal en la codificacion de video vr360.
US20220408114A1 (en) * 2019-11-22 2022-12-22 Sharp Kabushiki Kaisha Systems and methods for signaling tiles and slices in video coding
CN115349263A (zh) * 2020-05-19 2022-11-15 谷歌有限责任公司 质量归一化视频转码的动态参数选择

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5001559A (en) * 1989-10-12 1991-03-19 International Business Machines Corporation Transform coding using coefficient prediction techniques
DE69132268T2 (de) * 1990-09-29 2000-10-26 Victor Company Of Japan Bildsignalkodierer/Dekodierer mit adaptiver Quantisierung
FR2677836B1 (fr) * 1991-06-11 1997-08-29 Thomson Csf Codeur-decodeur sous bandes de signaux de television a niveaux compatibilite differents.
US5414469A (en) * 1991-10-31 1995-05-09 International Business Machines Corporation Motion video compression system with multiresolution features
US5331414A (en) * 1991-12-23 1994-07-19 Intel Corporation Method and apparatus for encoding a digital motion video signal using pyramid specific filtering
US5371544A (en) * 1992-02-07 1994-12-06 At&T Corp. Geometric vector quantization
KR0176474B1 (ko) * 1992-12-01 1999-04-15 김광호 고속화상 재생에 적합한 디지탈 비디오 테이프레코더용 데이타 코딩기술
CA2126467A1 (en) * 1993-07-13 1995-01-14 Barin Geoffry Haskell Scalable encoding and decoding of high-resolution progressive video
US5608652A (en) * 1995-05-12 1997-03-04 Intel Corporation Reducing blocking effects in block transfer encoders
JP3788823B2 (ja) * 1995-10-27 2006-06-21 株式会社東芝 動画像符号化装置および動画像復号化装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10200901A1 (de) * 2001-09-14 2003-05-22 Siemens Ag Effiziente Codierung von Videosignalen für skalierbare Simul-cast-Speicherung und -Übertragung sowie zugehöriger Codec
DE10200901B4 (de) * 2001-09-14 2004-09-16 Siemens Ag Effiziente Codierung von Videosignalen für skalierbare Simul-cast-Speicherung und -Übertragung sowie zugehöriger Codec

Also Published As

Publication number Publication date
JP3241653B2 (ja) 2001-12-25
GB2327311A (en) 1999-01-20
JPH1155666A (ja) 1999-02-26
KR19990013261A (ko) 1999-02-25
GB9727388D0 (en) 1998-02-25
KR19990009757A (ko) 1999-02-05
KR100240770B1 (ko) 2000-01-15
KR100240771B1 (ko) 2000-01-15
US6072834A (en) 2000-06-06

Similar Documents

Publication Publication Date Title
DE19758252A1 (de) Skalierbare Kodiervorrichtung und Verfahren mit verbesserter Funktion der Energiekompensation/inversen Kompensation
DE69535228T2 (de) Bildumsetzungsvorrichtung
EP0359094B1 (de) Übertragungssystem für ein zeitlich und örtlich hochaufgelöstes Bildsignal
DE4343211B4 (de) Adaptives Bildkompressionsverfahren und adaptive Bildkompressionsvorrichtung
DE69824554T2 (de) Verfahren und anordnung zum erzeugen eines standbildes mit hoher auflösung
DE60015566T2 (de) Verfahren und vorrichtung zur komprimierung eines bewegungsvektorfeldes
DE69530336T2 (de) Bewegungskompensation für digitale Videosignale mit Zeilensprung
DE69825811T2 (de) Kodiergerät und Kodierverfahren mit Bewegungskompensation für hocheffiziente Videokodierung durch selektive Auswahl von vergangenen Bewegungsvektoren statt Benutzung von Bewegungsvektoren abgeleitet von Bewegungsschätzung
DE69933483T2 (de) Vorrichtung und Verfahren zum Codieren mit bewegungskompensierter Vorhersage
DE3908890C2 (de)
DE602004002455T2 (de) Bewegungsvektorschätzung durch adaptive zeitliche Vorhersage
DE19704439C2 (de) Verfahren und Vorrichtung zur Bewegungsschätzung in einem digitalen Videocodierer unter Verwendung von Trajektorien
DE69932429T2 (de) Verfahren und gerät für die inverse quantisierung von mpeg-4 video
DE69732865T2 (de) Kodierer mit Mitteln zur Ergänzung eines digitalen Bildes mit Bildelementen
US6018368A (en) Scalable encoding apparatus and method with improved function of scaling motion vector
DE4442643B4 (de) Verfahren zum Abschätzen der Bewegung in einem Bewegtbild
DE69915843T2 (de) Teilbandkodierung/-dekodierung
DE19757630A1 (de) Bewegungsbestimmungsverfahren
DE10343220B3 (de) Verfahren und Vorrichtung zur Transcodierung eines Datenstroms, der ein oder mehrere codierte digitalisierte Bilder umfasst
EP1025708A1 (de) Verfahren und vorrichtung zur verarbeitung eines digitalisierten bildes
WO2006015947A1 (de) Verfahren und vorrichtung zum codieren und decodieren
DE19717608B4 (de) Wahrnehmungsfehlerbearbeitungsverfahren und Bildkodierungsvorrichtung, welche dieses Verfahren verwendet
DE60214835T2 (de) Videokodierungsverfahren und -vorrichtung
DE19907132B4 (de) Videodecoder für einen Digitalfernseher
DE69824983T2 (de) Verfahren und Gerät zur Codierung durch Luminanzschätzung

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
8131 Rejection