DE10393211T5 - Handhabung von Videokomprimierung - Google Patents

Handhabung von Videokomprimierung Download PDF

Info

Publication number
DE10393211T5
DE10393211T5 DE10393211T DE10393211T DE10393211T5 DE 10393211 T5 DE10393211 T5 DE 10393211T5 DE 10393211 T DE10393211 T DE 10393211T DE 10393211 T DE10393211 T DE 10393211T DE 10393211 T5 DE10393211 T5 DE 10393211T5
Authority
DE
Germany
Prior art keywords
sequence
image
quality
image set
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
DE10393211T
Other languages
English (en)
Inventor
Violet Snell
Michael James Knee
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Snell Advanced Media Ltd
Original Assignee
Snell and Wilcox Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Snell and Wilcox Ltd filed Critical Snell and Wilcox Ltd
Publication of DE10393211T5 publication Critical patent/DE10393211T5/de
Ceased legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/15Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Color Television Systems (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

System zum Komprimieren einer Bildsequenz mit: einer Einrichtung zum Komprimieren der Bildsequenz zur Erzeugung einer komprimierten Sequenz, wobei ein erster Bildsatz eine hohe Codierungsqualität aufweist, und wobei ein zweiter Bildsatz, von dem einzelne Bilder Zwischenbilder des ersten Satzes sind, eine niedrigere Codierungsqualität aufweist; und nachgeordnet einer Einrichtung zum Trennen des ersten Bildsatzes von der Sequenz und Spielen des ersten Bildsatzes als separate Bildsequenz mit hoher Qualität.

Description

  • HANDHABUNG VON VIDEOKOMPRIMIERUNG
  • Die vorliegende Erfindung betrifft die Komprimierung von Bildsequenzen; insbesondere Aspekte der Handhabung von Komprimierungstechniken durch Steuerung der relativen Qualität von Bildern einer Bildsequenz.
  • Verfahren zur Videosequenz-Komprimierung sind im Stand der Technik bekannt. Sie umfassen auch Techniken zum Variieren der Codierungsqualität.
  • Aufgabe der vorliegenden Erfindung ist es, neue und flexible Techniken zur Handhabung der Komprimierung von Bildsequenzen bereitzustellen.
  • Demgemäss besteht ein Aspekt der Erfindung in einem System zum Komprimieren einer Bildsequenz mit: einer Einrichtung zum Komprimieren der Bildsequenz zur Erzeugung einer komprimierten Sequenz, wobei ein erster Bildsatz eine hohe Codierungsqualität aufweist, und wobei ein zweiter Bildsatz, von dem einzelne Bilder Zwischenbilder des ersten Satzes sind, eine niedrigere Codierungsqualität aufweist; und nachgeordnet einer Einrichtung zum Trennen des ersten Bildsatzes von der Sequenz und Spielen des ersten Bildsatzes als separate Bildsequenz mit hoher Qualität.
  • Ein anderer Aspekt der Erfindung besteht in einem Verfahren zum Komprimieren einer Bildsequenz, bei der ein erster Bildsatz in der Sequenz in einem regelmäßigen Muster auftritt und Bilder eines zweiten Bildsatzes als Zwischenbilder des ersten Bildsatzes auftreten, wobei das Verfahren das Codieren des ersten Bildsatzes in eine hohe Codierungsqualität und das Codieren des zweiten Bildsatzes in eine Qualität, die von den verbleibenden Bitraten-Ressourcen bestimmt wird, umfasst.
  • Geeigneterweise wird der erste Bildsatz unabhängig von dem zweiten Zwischenbildsatz codiert, wobei alle Bilder vorzugsweise intracodiert werden. Auf diese Weise wird die Sequenz mit sehr geringem Gesamtqualitätsverlust komprimiert.
  • Der Komprimierungs-Algorithmus basiert vorteilhafterweise auf MPEG.
  • Bei einer Form der Erfindung wird die Bitrate des zweiten Zwischenbildsatzes durch Variieren der Quantizer Gewichtungsmatrix-Werte gesteuert. Geeigneterweise sind diese Quantizer Gewichtungsmatrix-Werte eine lineare Kombination aus den Werten einer Flat Gewichtungsmatrix und einer Standard Non-Flat Matrix.
  • Vorteilhafterweise wird eine festgelegte Anzahl von Bits für den Zeitraum erzeugt, der von einem Bild des ersten Bildsatzes und den assoziierten Zwischenbildern belegt wird.
  • Bei einem weiteren Aspekt sieht die Erfindung ein Verfahren zur Videosignal-Komprimierung vor, das folgende Schritte umfasst: Empfangen eines Videosignals, Durchführen einer Transformation für das Videosignal und Quantisieren des transformierten Signals, wobei der Schritt des Quantisierens das Anwenden einer variablen Quantisierungs-Matrix umfasst, wobei die Variation der Matrix durch einen Parameter gesteuert wird, der sich auf die Komprimierungs-Bitrate bezieht.
  • Der Parameter ist bevorzugt von der Anzahl der für ein laufendes Bild benötigten Bits abhängig. Geeigneterweise umfasst das Verfahren das Bestimmen der Anzahl der für ein laufendes Bild benötigten Bits nach einem regelmäßigen Muster.
  • Bei einem weiteren Aspekt sieht die Erfindung ein komprimiertes Signal vor, das eine erste Sequenz von Hochqualitäts-Bildern aufweist, die mit einer zweiten Sequenz von Bildern niedrigerer Qualität überlagert ist, wobei die erste Se quenz von dem Signal getrennt werden kann, um ein Videosignal zu erzeugen, und die zweite Bildsequenz zum Editieren oder zur Weiterbearbeitung des Videosignals eingesetzt wird.
  • Die Erfindung wird nun beispielhaft unter Bezug auf die beigefügten Zeichnungen beschrieben. Es zeigt:
  • 1 ein Diagramm, das die Vorrichtung gemäß einer Ausführungsform eines erfindungsgemäßen Aspekts zeigt;
  • 2 bis 6 Bildsequenzen, die von einer Eingangssequenz gemäß Aspekten der Erfindung abgeleitet werden können;
  • 7 ein Diagramm, das die Funktion eines Verfahrens gemäß einer Ausführungsform eines anderen erfindungsgemäßen Aspekts zeigt.
  • 1 zeigt ein High Definition 72 Hz Bildaufnahmegerät 102, das ein Eingangs-Videosignal einer Komprimierungsstufe 104 zur Verfügung stellt. Hier wird das Videosignal gemäß einem Steuersignal 106 komprimiert, das Key Frames identifiziert, die in höhere Qualität zu codieren sind als die anderer Frames. In 1 werden die Key Frames bei jedem dritten Frame identifiziert. Der komprimierte Ausgang wird dann übertragen und von einer Dekomprimierungsstufe 108 und nachfolgend von einer weiteren Bearbeitungsstufe 110 empfangen. Diese wählen und dekomprimieren nur die Key Frames und geben diese Frames als 24 Hz High Definition Videosignal aus. Die Stufen 108 und 110 können optional ein zusätzliches 72 Hz Signal ausgeben, wie in Bezug auf 2 bis 6 beschrieben werden wird.
  • Das nachfolgende beschriebene besondere Verwendungsbeispiel der Erfindung betrifft die Aufnahme von High Definition Bildsequenzen mit hoher Bildfrequenz in einer Umgebung, in der Einschränkungen bei der Abtastungs-, Speicherungs- oder Übertragungs-Bandbreite oder bei der Verarbeitungskomplexität vorliegen. Es beschreibt ein Verfahren zum Komprimieren von High Definition Bildsequenzen mit hoher Bildfrequenz mit sehr geringem Qualitätsverlust. Das Verfahren stellt sicher, dass für eine temporär unterabgetastete Version der Eingangssequenz die höchstmögliche Qualität erhalten wird, während es einen Qualitätsverlust für Intermediate Frames gemäß der zur Verfügung stehenden codierten Bitrate zulässt.
  • Die Erfindung betrifft auch die Verwendung von Bildsignalen mit hoher Qualität bei niedriger Bildfrequenz zusammen mit solchen niedrigerer Qualität bei höherer Bildfrequenz, als Mittel zum Reduzieren der Gesamt-Abtastungs-, Speicher- oder Übertragungs-Bandbreite der Bildinformationen, wie noch beschrieben werden wird. Im Stand der Technik wird die unterschiedliche Qualität der beiden Bildarten in Form von Auflösung ausgedrückt. So wird beispielsweise im deutschen Patent DE-A-41 32 359 eine High Definition 25 Hz Sequenz mit einer Standard Definition 100 Hz Sequenz gemultiplext. Bewegungsinformationen können von beiden Sequenzen abgeleitet und zur bewegungskompensierten Umwandlung der High Definition Sequenz in die höhere Bildfrequenz oder auch jede beliebige andere Bildfrequenz verwendet werden.
  • Der Stand der Technik stellt nicht notwendigerweise die erforderliche Kombination aus der höchstmöglichen Qualität bei niedriger Bildfrequenz und optimalem Ausgleich zwischen Qualität, Bitrate und Verarbeitungskomplexität für die Version der Sequenz mit höherer Bildfrequenz zur Verfügung. Das in der DE-A-41 32 359 beschriebene Verfahren beruht beispielsweise auf bewegungskompensierter Upkonversion, um die volle Auflösung des Bildes bei höherer Bildfrequenz wiederherzustellen.
  • 2 zeigt eine Ausführungsform der Erfindung im Einsatz, bei der mit einem High Definition (z. B. 1920 Pixel mal 1080 Linien) Bildsignal mit einer Bildfrequenz von 72 Hz und mit einer 4 : 2 : 2 Luminanz- und Farbdifferenz-Abtastungsstruktur (repräsentiert von einer Eingangssequenz von Frames 202) begonnen wird, wie es bei den meisten üblichen digitalen Fernseh-Abtastungs-Standards, z. B. SMPTE 274M, verwendet wird. Mit 8-Bit-Abtastung beträgt die Bitrate eines derartigen Signals ca. 2,4 Gbit/s. Nehmen wir an, dass es an einem Punkt in der nachfolgenden Bearbeitungskette eine Bitratenbegrenzung von beispielsweise 500 Mbit/s gibt. Wir brauchen ein Verfahren zum Komprimieren des Signals in die Ausgangs-Bitrate mit den folgenden Eigenschaften:
    • – Eine Version mit niedriger Bildfrequenz (z. B. 24 Hz) des Eingangssignals kann unabhängig mit null oder vernachlässigbarem Qualitätsverlust decodiert werden.
    • – Die verbleibenden Eingangsframes werden mit einem Qualitätsverlust, der trotzdem minimal sein sollte, übertragen. Die Decodierung dieser Frames kann von derenigen der 24 Hz Frames abhängen, da die nachfolgende Bearbeitung dieser Frames ebenfalls von den 24 Hz Frames abhängen kann.
  • Die Eingangssequenz 202 wird daher codiert und ergibt die codierte Sequenz 204. "Key" Frames (jeder dritte) werden in hohe Qualität codiert, wie durch die durchgehenden Pfeile 206 (und die resultierenden codierten Frames, die eine dunklere Tönung aufweisen), angezeigt ist, wohingegen Intermediate Frames in niedrigere Qualität codiert werden, wie durch die unterbrochenen Pfeile 208 (und die resultierenden codierten Frames mit hellerer Tönung) angezeigt ist. Vorteilhafterweise brauchen die Frames, die zwischen den "Key" Frames liegen, nicht unterabgetastet zu werden. – sie werden einfach mit niedrigerer Qualität codiert. Das Verfahren hält die Key Frames auch auf dem Qualitätsgrad, der am Ausgang benötigt wird. Hier benötigt der Ausgang beispielsweise ein 24 Hz High Definition Signal. Typischerweise hängt die Gesamtbitrate, die den verbleibenden, Intermediate Frames zugeordnet wird, von der Bitrate ab, die für die Hochqualitäts-Frames benötigt wird und von der verbleibenden Bitrate, die von dem verwendeten Übertragungskanal ermöglicht wird. Bevorzugt werden diese Intermediate Frames, hinsichtlich des Bildgehalts, nicht in Abhängigkeit von den Key Frames codiert, in dem Sinne, dass normale P- und B-Frames von MPEG nach Vorhersage von nahen I-Frames abhängen. Auf diese Weise besteht die codierte Sequenz bevorzugt ganz aus intracodierten Frames (d.h. Frames, die ohne Bezug auf irgendwelche andere Frames in der Sequenz codiert wurden). Die Qualität dieser intracodierten Frames ist jedoch unterschiedlich. In gewissen Fällen kann es jedoch nötig sein, Vorhersage-Codierung für die Intermediate Frames zu verwenden, z. B. wenn eine bestimmte Bitraten-Begrenzung dies fordert.
  • Jede beliebige bekannte Komprimierungstechnik könnte verwendet werden, um die tatsächliche Komprimierung durchzuführen, sobald die Key Frames ausgewählt sind und die Qualitätsstufe festgelegt ist, beispielsweise ein gängiges Komprimierungs-Schema wie MPEG-2 oder JPEG. In diesem Fall gäbe es einen geringen, aber möglicherweise signifikanten Qualitätsverlust bei allen Eingangsframes, nicht nur bei den Intermediate Frames.
  • Eine bestimmte Ausführungsform verwendet MPEG-2 für die Komprimierung der Quell-Bildsequenz, wobei ein neuartiges Verfahren verwendet wird, um sicherzustellen, dass die höchstmögliche Qualität für das Signal niedriger Bildfrequenz, das bei diesem Beispiel jeder dritte Frame ist, erhalten wird. Dies kann durchgeführt werden, indem dieser "Key Frame" als I-Frame mit einem sehr feinen Quantizer und einer Flat Quantizer Gewichtungsmatrix encodiert wird. Die verbleibenden Bits werden den anderen beiden "Intermediate" Frames zugeordnet, die ebenfalls als I-Frames codiert sind. Wie oben erwähnt, kann es jedoch in gewissen Fällen notwendig sein, diese Frames als B-Frames mit oder ohne Bewegungskompensation zu codieren.
  • Wie in 2 gezeigt ist, werden nachgeordnet des Codierungsprozesses die Key Frames von den Intermediate Frames getrennt, um die 24 Hz Sequenz 210 mit hoher Qualität zu erzeugen.
  • In den 3 und 4 sind verschiedene Verfahren zum Herstellen eines 72 Hz Browse Tracks zur Begleitung der Key Frame Sequenz gezeigt. In 3 werden Intermediate Frames aus der Sequenz 204 standardgemäß decodiert, wie durch die durchgehenden Pfeile 212 angezeigt ist, während die Key Frames auf geeignete Weise decodiert und herunterkonvertiert werden, wie durch die gestrichelten Pfeile 214 angezeigt ist, um jeden dritten Frame in dem Browse Track 216 zur Verfügung zu stellen. Alternativ zeigt 4 eine alternative Art der Herstellung eines 72 Hz Browse Tracks. Hier brauchen nur Intermediate Frames aus der Sequenz 204 extrahiert zu werden, wie durch die Sequenz 218 angegeben ist. Dies stellt im wesentlichen den gewünschten Browse Track zur Verfügung, jedoch mit "Löchern" bei jedem dritten Frame. In diesem bestimmten Beispiel werden die "Löcher" durch Interpolation (ggf. unter Verwendung von Bewegungskompensation) von benachbarten Intermediate Frames gefüllt, wie durch die Pfeile 220 gezeigt wird, um einen vollständigen Browse Track 222 zu erzeugen.
  • 5 und 6 zeigen weitere Vorteile der vorliegenden Erfindung. 5 zeigt ein erstes Verfahren zur Herstellung einer Ausgangssequenz bei einer Frequenz, die kein ganzzahliges Vielfaches der Aufnahmegeschwindigkeit ist. Hier wird die Ausgangssequenz 504 durch Interpolation der Eingangssequenz 502 abgeleitet, die erfindungsgemäß codiert worden ist. Ausgangsframes werden von den Frames, die temporär dem jeweiligen Ausgangsframe am nächsten sind, interpoliert, wie durch die durchgehenden Pfeile 514 angezeigt wird. Es ist ersichtlich, dass dies für einige Ausgangsframes einen Key Frame und einen Intermediate Frame (beispielsweise bei Frame 506) involviert, während es in anderen Fällen zwei Intermediate Frames (z. B. Frame 508) sind. Ausgangsframes wie 506 erhalten immer noch einen Qualitätsvorteil von einem Key Frame (in diesem Fall Frame 510). Während dies nicht automatisch für Frames wie 508 zutrifft, kann immer noch von den Key Frames Gebrauch gemacht werden, indem dem Ausgangsframe Struktur von Key Frames hinzugefügt wird, die temporär dem Ausgangsframe nahe sind. Dies wird durch die gestrichelten Pfeile 512 angezeigt.
  • 6 zeigt ein alternatives Verfahren zum Herstellen einer Ausgangssequenz bei einer Frequenz, die kein ganzzahliges Vielfaches der Aufnahmegeschwindigkeit ist. Hier werden nur die Key Frames 610 des Eingangs (der erfindungsgemäß codiert worden ist) verwendet, und der Ausgang wird von diesen Key Frames mit herkömmlichen Verfahren interpoliert, wie durch die Pfeile 612 gezeigt wird. Bei einer Abänderung des in 6 gezeigten Verfahrens werden die Intermediate Frames zum Zweck des Bestimmens von Bewegungsvektoren eingesetzt, die bei der Interpolation der Key Frames zu verwenden sind.
  • In vielen Fällen wird es erforderlich sein, die Codierungsqualität dieser Intermediate Frames zu reduzieren, um das Bitraten-Ziel zu erfüllen. Die herkömmliche An der Steuerung der Bitrate bei der MPEG-2 Codierung ist es, den Quantizer Skalenparameter zu ändern. Leider ist die zur Verfügung stehende Steuerung bei hohen Qualitätsstufen sehr grob. Beispielsweise vervierfacht das Ändern der Quantizerskala von 1 auf 2 die Quantizer-Rauschleistung und reduziert typischerweise die Anzahl der Bits, die für einen gegebenen Bereich des Bildes erzeugt werden, um 40%. Bei der vorliegenden Erfindung wird eine feinere Steuerung der Bitrate und der Codierungsqualität durch Modifizieren der Quantizer Gewichtungsmatrix erreicht. Es folgt nun ein Beispiel, wie eine derart modifizierte Matrix im Falle von Intraframe-Codierung abgeleitet werden kann:
    • f sei der Wert der Elemente einer Flat Quantizer Gewichtungsmatrix.
    • wij seien die Elemente einer typischen Quantizer Gewichtungsmatrix, die so ausgelegt ist, dass sie die Sichtbarkeit von Quantizer-Rauschen über das Spektrum des Bildes ausgleicht (ein Beispiel hierfür ist die MPEG-2 Standard Intra-Matrix).
    • α sei ein Bitraten-Steuerparameter.
  • Dann sind die Werte uij der Matrix, die tatsächlich für den Frame verwendet wird, der codiert wird, gegeben durch uij =(1 – α)⨍ + awij
  • Somit implementiert die Änderung des Steuerparameters eine Überblendung zwischen einer Flat Matrix und einer subjektiv verlustfreien Matrix. Ein Wert α = 0 entspricht der Flat Matrix und α = 1 der Standard-Matrix. Ein Wert von α zwischen 0 und 1 ergibt eine Matrix, die zu einer subjektiv verlustfreien Codierung bei normalen Sehbedingungen führt, während ein Wert α > 1 zu subjektivem Verlust führen kann.
  • 7 zeigt, wie sich die Gewichtungsmatrix gemäß dem Steuerparameter ändern kann. In der Graphik ist aus Gründen der Einfachheit ein eindimensionaler Schnitt der Matrix dargestellt.
  • Für einen gegebenen Intermediate Frame kann der Wert des Steuerparameters α berechnet werden, indem man ein bestehendes Modell der Beziehung zwischen α und der Anzahl der erzeugten Bits verwendet. Die Anzahl der tatsächlich verwendeten Bits kann dazu dienen, eine Korrektur des Modells für nachfolgende Intermediate Frames zu berechnen. Die Bitraten-Steuerung kann unter Verwendung eines bekannten First-in-first-out-Puffers durchgeführt werden. Alternativ kann die Steuerung darauf abzielen, eine festgelegte Anzahl von Bits für jede Gruppe aus drei Frames zu erzeugen, damit das 24 Hz Bild leichter extrahiert werden kann.
  • Sowohl für die Key Frames als auch für die Intermediate Frames können bekannte Fallback-Verfahren zur Bitraten-Steuerung verwendet werden um sicherzustellen, dass das Bitraten-Ziel erfüllt wird und dass die Codierungsqualität sowohl für die Key Frames als auch für die Intermediate Frames akzeptiert werden kann.
  • Für den Fachmann ist es selbstverständlich, dass die Erfindung nur beispielhaft beschrieben worden ist und dass es ein breites Spektrum alternativer Ansätze gibt.
  • Zusammenfassung
  • Verfahren zum Komprimieren einer Bildsequenz, bei dem ein erster Bildsatz in der Sequenz und ein zweiter Bildsatz, der den ersten Bildsatz in der Sequenz überlagert, identifiziert werden, und bei dem der erste Bildsatz in hohe Codierungsqualität codiert wird und der zweite Bildsatz in eine Qualität codiert wird, die von den verbleibenden Bitraten-Ressourcen bestimmt wird. Nachgeordnet kann der erste Bildsatz extrahiert werden, um eine separate Bildsequenz von hoher Qualität zu erzeugen. Die Komprimierungscodierung basiert vorzugsweise auf MPEG und die Steuerung der Codierungsqualität kann dadurch erreicht werden, dass die Quantizer Gewichtungsmatrix-Werte in einer linearen Kombination aus einer Flat Matrix und einer Standard Non-Flat Matrix variiert werden.

Claims (24)

  1. System zum Komprimieren einer Bildsequenz mit: einer Einrichtung zum Komprimieren der Bildsequenz zur Erzeugung einer komprimierten Sequenz, wobei ein erster Bildsatz eine hohe Codierungsqualität aufweist, und wobei ein zweiter Bildsatz, von dem einzelne Bilder Zwischenbilder des ersten Satzes sind, eine niedrigere Codierungsqualität aufweist; und nachgeordnet einer Einrichtung zum Trennen des ersten Bildsatzes von der Sequenz und Spielen des ersten Bildsatzes als separate Bildsequenz mit hoher Qualität.
  2. System nach Anspruch 1, bei dem der erste Bildsatz unabhängig von dem zweiten Zwischenbildsatz codiert wird.
  3. System nach Anspruch 1 oder 2, bei dem der verwendete Komprimierungs-Algorithmus auf MPEG basiert.
  4. System nach einem der Ansprüche 1 bis 3, bei dem die Codierungsqualität des zweiten Zwischenbildsatzes durch die verbleibenden Bitraten-Ressourcen bestimmt wird.
  5. System nach Anspruch 4, bei dem die Bitrate des zweiten Zwischenbildsatzes durch Variieren von Quantizer Gewichtungsmatrix-Werten gesteuert wird.
  6. System nach Anspruch 5, bei dem die Quantizer Gewichtungsmatrix-Werte eine lineare Kombination aus den Werten einer Flat Gewichtungsmatrix und einer Standard Non-Flat Matrix sind.
  7. System nach einem der vorhergehenden Ansprüche, bei dem eine festgelegte Anzahl von Bits für den Zeitraum erzeugt wird, der von einem Bild des ersten Bildsatzes und den assoziierten Zwischenbildern belegt wird.
  8. System nach einem der vorhergehenden Ansprüche, das des weiteren eine Einrichtung zur Ausgabe einer Bildsequenz aufweist, die eine höhere Bildfrequenz, aber eine geringere Qualität aufweist als die getrennte Bildsequenz hoher Qualität.
  9. Verfahren zum Komprimieren einer Bildsequenz, bei der ein erster Bildsatz in der Sequenz in einem regelmäßigen Muster auftritt und Bilder eines zweiten Bildsatzes in Zwischenbildern des ersten Bildsatzes auftreten, wobei das Verfahren das Codieren des ersten Bildsatzes in eine hohe Codierungsqualität und das Codieren des zweiten Bildsatzes in eine Qualität, die von den verbleibenden Bitraten-Ressourcen bestimmt wird, umfasst.
  10. Verfahren nach Anspruch 9, bei dem der erste Bildsatz unabhängig von dem zweiten Zwischenbildsatz codiert wird.
  11. Verfahren nach Anspruch 9 oder 10, bei dem alle Bilder intracodiert werden.
  12. Verfahren nach einem der Ansprüche 9 bis 11, bei dem der Komprimierungs-Algorithmus auf MPEG basiert.
  13. Verfahren nach einem der Ansprüche 9 bis 12, bei dem die Bitrate des zweiten Zwischenbildsatzes durch Variieren der Quantizer Gewichtungsmatrix-Werte gesteuert wird.
  14. Verfahren nach Anspruch 13, bei dem die Quantizer Gewichtungsmatrix-Werte eine lineare Kombination aus den Werten einer Flat Gewichtungsmatrix und einer Standard Non-Flat Matrix sind.
  15. Verfahren nach einem der Ansprüche 9 bis 14, bei dem eine festgelegte Anzahl von Bits für den Zeitraum erzeugt wird, der von einem Bild des ersten Bildsatzes und den assoziierten Zwischenbildern belegt wird.
  16. Videobearbeitungs-Gerät zum Komprimieren einer Bildsequenz mit: einer Einrichtung zum Teilen der Bildsequenz in Sätze, wobei jeder Satz ein Key Bild und ein oder mehrere Zwischenbilder aufweist; einem ersten Codierer zum Komprimieren der Key Bilder mit einer ersten Codierungsqualität; einer Einrichtung zum Bestimmen der für die Zwischenbilder zur Verfügung stehenden Bitraten-Ressourcen; und einem zweiten Codierer zum Komprimieren der Zwischenbilder mit einer zweiten Codierungsqualität abhängig von den zur Verfügung stehenden Bitraten-Ressourcen, wobei die zweite Codierungsqualität niedriger ist als die erste Codierungsqualität.
  17. Videobearbeitungsgerät nach Anspruch 16, wobei der erste und der zweite Codierer unabhängig arbeiten.
  18. Videobearbeitungsgerät nach Anspruch 16 oder 17, bei dem alle Bilder durch Verwendung von Intra-Codierung komprimiert werden.
  19. Videobearbeitungsgerät nach einem der Ansprüche 16 bis 18, wobei die verbleibenden Bitraten-Ressourcen so bestimmt werden, dass für jeden Satz von Bildern eine konstante Anzahl von Bits erzeugt wird.
  20. Verfahren zur Videosignal-Komprimierung, das folgende Schritte aufweist: Empfangen eines Videosignals, Durchführen einer Transformation für das Videosignal und Quantisieren des transformierten Signals, wobei der Schritt des Quantisierens das Anwenden einer variablen Quantisierungsmatrix umfasst, wobei die Variation der Matrix durch einen Parameter gesteuert wird, der sich auf die Komprimierungs-Bitrate bezieht.
  21. Verfahren nach Anspruch 20, wobei der Parameter von der Anzahl der für ein laufendes Bild benötigten Bits abhängt.
  22. Verfahren nach Anspruch 20 oder 21, das das Bestimmen der Anzahl von Bits, die für ein laufendes Bild benötigt werden, gemäß einem regelmäßigen Muster umfasst.
  23. Verfahren nach einem der Ansprüche 20 bis 22, wobei die Quantisierungsmatrix eine lineare Kombination aus einer Flat Gewichtungsmatrix und einer Standard Non-Flat Matrix ist.
  24. Komprimiertes Signal, das eine erste Sequenz von Hochqualitäts-Bildern aufweist, die mit einer zweiten Sequenz von Bildern niedrigerer Qualität überlagert ist, wobei die erste Sequenz von dem Signal getrennt werden kann, um ein Videosignal zu erzeugen, und die zweite Bildsequenz zum Editieren oder weiteren Bearbeiten des Videosignals verwendet wird.
DE10393211T 2002-09-12 2003-09-12 Handhabung von Videokomprimierung Ceased DE10393211T5 (de)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB0221146A GB2393060B (en) 2002-09-12 2002-09-12 Manipulation of video compression
GB0221146.4 2002-09-12
PCT/GB2003/003991 WO2004025964A2 (en) 2002-09-12 2003-09-12 Manipulation of video compression

Publications (1)

Publication Number Publication Date
DE10393211T5 true DE10393211T5 (de) 2005-10-13

Family

ID=9943919

Family Applications (1)

Application Number Title Priority Date Filing Date
DE10393211T Ceased DE10393211T5 (de) 2002-09-12 2003-09-12 Handhabung von Videokomprimierung

Country Status (4)

Country Link
AU (1) AU2003269142A1 (de)
DE (1) DE10393211T5 (de)
GB (2) GB2393060B (de)
WO (1) WO2004025964A2 (de)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1860886A4 (de) * 2005-03-14 2011-08-03 Panasonic Corp Codierungseinrichtung und dynamisches bildaufzeichnungssystem mit der codierungseinrichtung
JPWO2008132890A1 (ja) * 2007-04-16 2010-07-22 株式会社東芝 画像符号化と画像復号化の方法及び装置
ES2350664B1 (es) * 2008-09-01 2011-11-16 Fundacion Cetena Método de control de bit-rate en sistemas de compresión de video digital basados en mjpeg.
WO2013158293A1 (en) * 2012-04-19 2013-10-24 Vid Scale, Inc. System and method for error-resilient video coding

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0514663A3 (en) * 1991-05-24 1993-07-14 International Business Machines Corporation An apparatus and method for motion video encoding employing an adaptive quantizer
DE4132359A1 (de) * 1991-09-27 1993-04-01 Grundig Emv Verfahren zur aufnahme von bewegtbildern fuer eine nachfolgende, bewegungsinformationsgestuetzte signalverarbeitung
US5384598A (en) * 1992-10-20 1995-01-24 International Business Machines Corporation System and method for frame differencing video compression and decompression with frame rate scalability
CA2105209A1 (en) * 1993-08-31 1995-03-01 Limin Wang Bit rate control for hybrid dpcm/dct video codec
JP3774914B2 (ja) * 1995-09-27 2006-05-17 ソニー株式会社 ビデオ装置
US5731837A (en) * 1996-01-25 1998-03-24 Thomson Multimedia, S.A. Quantization circuitry as for video signal compression systems
US6480541B1 (en) * 1996-11-27 2002-11-12 Realnetworks, Inc. Method and apparatus for providing scalable pre-compressed digital video with reduced quantization based artifacts
AR016812A1 (es) * 1997-08-14 2001-08-01 Samsung Electronics Co Ltd Metodo para transmitir informacion de video comprimida, disposiciones de compresion y de grabacion de video y aparato de reproduccion de video
US6118822A (en) * 1997-12-01 2000-09-12 Conexant Systems, Inc. Adaptive entropy coding in adaptive quantization framework for video signal coding systems and processes
JPH11196422A (ja) * 1997-12-16 1999-07-21 Texas Instr Inc <Ti> 画像信号のエンコード方法
US6611530B1 (en) * 1999-09-21 2003-08-26 Hewlett-Packard Development Company, L.P. Video communication using multiple streams
FR2811187B1 (fr) * 2000-07-03 2003-03-14 Telediffusion De France Tdf Procede et installation de videosurveillance a codage adaptif pour la transmission et/ou le stockage de sequences video

Also Published As

Publication number Publication date
AU2003269142A1 (en) 2004-04-30
WO2004025964A3 (en) 2004-07-29
GB0504586D0 (en) 2005-04-13
GB2410852B (en) 2006-01-04
WO2004025964A2 (en) 2004-03-25
AU2003269142A8 (en) 2004-04-30
GB2393060B (en) 2006-01-25
GB2410852A (en) 2005-08-10
GB0221146D0 (en) 2002-10-23
GB2393060A (en) 2004-03-17

Similar Documents

Publication Publication Date Title
DE69432142T2 (de) Verfahren und vorrichtung zur effizienten transkodierung
DE69414899T2 (de) Bildsignalverarbeitung
DE4343211B4 (de) Adaptives Bildkompressionsverfahren und adaptive Bildkompressionsvorrichtung
DE69535228T2 (de) Bildumsetzungsvorrichtung
DE69425047T2 (de) Adaptives variables längenkodierungs- und -dekodierungsverfahren für bilddaten
DE69324993T2 (de) Verfahren und Vorrichtung zum Quantisieren und Dequantisieren von Bildsignalen
DE69414931T2 (de) Transkodierer
DE69116869T2 (de) Digitale bildkodierung mit einer zufallsabtastung der bilder
DE60027495T2 (de) Video-codierverfahren und video-codiervorrichtung
DE69322079T2 (de) Videokoder mit zwei schichten
DE69323123T2 (de) Kodierung und Dekodierung von Bildsignalen
DE69933483T2 (de) Vorrichtung und Verfahren zum Codieren mit bewegungskompensierter Vorhersage
DE69535553T2 (de) Videokompression
DE69635369T2 (de) Videokodierungsvorrichtung
DE69522861T2 (de) Verfahren und Einrichtung zur Codeumwandlung von codiertem Datenstrom
DE60215241T2 (de) Verfahren und Vorrichtung zur Reduzierung von Störungen in dekodierten Bildern mit Nachfilterung
DE3751416T2 (de) Bildcodiersystem zum Ueberwachen einer Informationsmenge durch Bildung eines Histogramms.
DE69734831T2 (de) Adaptive steuerung der datenrate für digitale videokompression
DE3853225T2 (de) Aufzeichnungssystem zur Aufzeichnung einer Sequenz von optimal codierten Signalen auf einen ROM.
DE69418372T2 (de) Übertragung und Dekodierung von Bildsignalen
DE69637335T2 (de) Bildsignalkodierungsmethode und -vorrichtung
DE69916027T2 (de) Videokompressionssystem welches auch codierungsentscheidungsdaten komprimiert
DE69921108T2 (de) Verfahren und vorrichtung zur adaptiven codierung eines videodatenstroms
DE69421449T2 (de) Kodierer zur adaptiven Kodierung von Videobilddaten getrennt nach der ihnen zugeordneten Priorität
DE10343220B3 (de) Verfahren und Vorrichtung zur Transcodierung eines Datenstroms, der ein oder mehrere codierte digitalisierte Bilder umfasst

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law

Ref document number: 10393211

Country of ref document: DE

Date of ref document: 20051013

Kind code of ref document: P

8139 Disposal/non-payment of the annual fee
8170 Reinstatement of the former position
8131 Rejection