WO2006108765A1 - Adaptive interpolation bei der bild- oder videokodierung - Google Patents

Adaptive interpolation bei der bild- oder videokodierung Download PDF

Info

Publication number
WO2006108765A1
WO2006108765A1 PCT/EP2006/061168 EP2006061168W WO2006108765A1 WO 2006108765 A1 WO2006108765 A1 WO 2006108765A1 EP 2006061168 W EP2006061168 W EP 2006061168W WO 2006108765 A1 WO2006108765 A1 WO 2006108765A1
Authority
WO
WIPO (PCT)
Prior art keywords
cif
image
qcif
image data
resolution
Prior art date
Application number
PCT/EP2006/061168
Other languages
English (en)
French (fr)
Inventor
Peter Amon
Original Assignee
Siemens Aktiengesellschaft
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Aktiengesellschaft filed Critical Siemens Aktiengesellschaft
Priority to KR1020077026262A priority Critical patent/KR101303222B1/ko
Priority to EP06725424A priority patent/EP1869889A1/de
Priority to CN2006800209364A priority patent/CN101194514B/zh
Priority to JP2008505859A priority patent/JP5069218B2/ja
Priority to US11/918,400 priority patent/US8270489B2/en
Publication of WO2006108765A1 publication Critical patent/WO2006108765A1/de

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence

Definitions

  • the invention relates to methods for processing and sending, as well as for receiving and processing data. Furthermore, the invention relates to transmitter and receiver for carrying out the method.
  • radio communication systems In communication systems, messages are transmitted between sender and receiver.
  • a specific example of commu ⁇ nikationssysteme are radio communication systems.
  • messages for example, with voice information, image information, video information, SMS (Short Message Service), MMS (Multimedia Messaging Service) or other data using electromagnetic waves over a radio interface between transmitter and receiver.
  • the radio stations may be various subscriber-side radio stations, repeaters, or network-side radio devices such as base stations or radio access points.
  • at least part of the subscriber-side radio stations are mobile radio stations.
  • the radiation of the electromagnetic waves takes place with carrier frequencies which lie in the frequency band provided for the respective system.
  • Mobile radio communication systems are often designed as cellular systems, for example according to the standard GSM (Global System for Mobile Communication) or UMTS (Universal Mobile Telecommunications System) with a network infrastructure consisting for example of base stations, facilities for controlling and controlling the base stations and other network-side facilities.
  • GSM Global System for Mobile Communication
  • UMTS Universal Mobile Telecommunications System
  • WLANs wireless local area networks
  • Examples of information transmitted in communication systems are images or videos, the latter being sequences of images. Due to the high data rates required for the transmission of image or video data, suitable coding methods for the image or video data are used in particular in radio communication systems.
  • the use of scalable information is suitable, whereby the base information is transmitted during the transmission of scalable information, and additionally the basic information contains supplementary information.
  • Scalable data thus have the property that they can be in ver ⁇ any reduction quality at the receiver by decoding the receiver only the basic information or the basic information and some of the additional information, and not the basic information and all supplementary information.
  • the scalability of the image or video data can relate to several scaling dimensions, such as the spatial resolution of individual images.
  • the invention is based on the object, efficient Verfah ⁇ ren for processing and sending or receiving data show. Furthermore, suitable devices for carrying out the method should be presented.
  • image data of an image are present on the transmitter side in a first resolution level and in a second resolution level higher than the first resolution level.
  • At least one interpolation parameter is determined for determination by interpolation of image data of the second resolution level from image data of the first resolution level.
  • an indication of the at least one particular Interpolationspa ⁇ rameters will be sent.
  • the processed data is preferably video data, ie a sequence of images.
  • An image can be represented by a plurality of image data, which may in particular be the numerical values with which the individual pixels of the image are occupied.
  • the transmitter before ⁇ preferably a video or picture encoder are image data in at least two levels of resolution before. The resolution level indicates the number of pixels of the image, a higher one
  • Resolution level is characterized by more pixels than a lower resolution level.
  • At least one interpolation parameter is determined on the transmitter side.
  • Using an interpolation ⁇ parameters can be by interpolating image data of the second resolution level from image data of the first resolution level ⁇ it averages at least.
  • the at least one interpolation parameter specifies a rule or a specific design of a provision by which the identifying image data of the second resolution level from image data of the first resolution ⁇ stage can take place.
  • further variables flow into the determination of the image data of the second resolution level, ie the image data of the second resolution level determined by interpolation need not be determined exclusively from image data of the first resolution level.
  • the at least one interpolation parameter may relate to the entire image of the second resolution level, but it is also possible that the at least one interpolation parameter only serves to determine image data of a region of the image of the second resolution level.
  • the image data of the other ranges can be determined, for example, by other interpolation parameters, or even sent without the use of interpolation parameters.
  • the transmitter takes into account the at least one fixed interpolation preferably by image data by interpolation application under a certain encryption Interpolationsparame ⁇ ters can be determined of the at least, are not sent.
  • the sending of the image data and the indication of at least one certain interpolation parameter occurs vorzugswei ⁇ se by radio, it can, however, other transmission Techno ⁇ technologies are applied. It is advantageous when the image data and the indication of at least sent a certain Interpola ⁇ tion parameters in a common message ⁇ the, alternatively, the use of separate messages for the image data on the one hand and the indication of the other possible at least a certain interpolation parameter.
  • the determination of the at least one interpolation parameter comprises a selection from a plurality of interpolation parameters, wherein in the selection a quality of image data of the second resolution level determined using the at least one interpolation parameter is taken into account.
  • the choice of min ⁇ least one interpolation parameter can be performed by a algo ⁇ algorithm, for example, according to a rate-distortion optimization.
  • At least one interpolation parameter is determined to be determined by interpolation of image data of the image in a second resolution level higher than the first resolution level from image data of the first resolution level.
  • the at least one interpolation parameter is determined by ei ⁇ ne indication received a Interpolationspara ⁇ meters is evaluated the at least.
  • the at least one interpolation parameter is det ⁇ verwen- for determining image data of the second resolution level from image data of the first resolution level.
  • the indication of the at least one interpolation parameter comprises information which relates exclusively to the at least one interpolation parameter.
  • image data of an image are present on the transmitter side in a first resolution level and in a second resolution level higher than the first resolution level.
  • At least one interpolation parameter is determined for determining by interpolation of image data of a first area of the image in the second resolution level from image data ⁇ the first resolution level.
  • the at least one interpolation parameter is determined by evaluating information relating to at least a second region of the image of the second resolution step and / or concerning at least a region of the image of the first resolution step.
  • information is evaluated which does not relate to the considered first region of the image of the second resolution step for which the at least one interpolation parameter is determined.
  • This information may refer to one or more other areas of the second resolution level image. Additionally or alternatively, the information can hen to one or more areas of the image of the first resolution level Bezie ⁇ , that is, on the first region of the first resolution level and / or at one or more other portions of the first resolution level.
  • received image data of an image are present in a first resolution stage on the receiver side.
  • At least one interpolation parameter is determined for determining by interpolation of image data of a first loading rich the image at the second resolution level from Schmda ⁇ th of the first resolution level.
  • the at least one INTERPO ⁇ lationsparameter is determined by information concerning at least evaluated a second area of the image of the second resolution level and / or on at least a portion of the image of the first resolution level.
  • the at least one interpolation parameter is used for determining image data of the first area of the second resolution level from image data of the first resolution level.
  • the information concerning the at least one second area of the image of the second resolution level and / or concerning the at least one area of the image of the first resolution level comprises:
  • Information concerning the coding and / or decoding of the at least one second region of the second resolution step and / or the at least one region of the first resolution step e.g. a block mode.
  • the image is an integral part of video data, and for determining the at least one interpolation parameter in addition to the information relating to at least a second region of the image of the second resolution stage and / or at least a portion of
  • Image of the first resolution level also uses information about a temporal correlation between the image and at least one other image.
  • the at least one interpolation parameter can in particular a filtering method, characterized for example by filter length and filter weights, and / or size of an image area ⁇ and / or a rule for interpolation on a Schmbe- range limit.
  • a rule for interpolation at an image area boundary preferably indicates how to continue the image data for purposes of interpolation at an image area boundary.
  • the first invention shown SSE method of processing and sending of data and temporarily the second method of the invention for processing and sending of data is applied temporarily, or in relation to egg NEN or more interpolation, the first method of the invention for processing and Sending data and in relation to one or more other Interpolationspa ⁇ parameters the second inventive method for processing and sending data is applied.
  • the inventive method for receiving and editing data is advantageous.
  • the transmitters and receivers according to the invention are particularly suitable for carrying out the methods according to the invention, whereby this can also apply to the embodiments and further developments. For this purpose, they can have other suitable means ⁇ .
  • the transmitter and receiver according to the invention can be realized by a plurality of interconnected devices.
  • FIG. 1 shows a section of a radio communication system
  • Figure 3 a division of an image into blocks.
  • FIG. 1 shows a section of a radio communication ⁇ system comprising an encoder and a decoder ENCODER DECODER.
  • the encoder ENCODER encodes video data VIDEO to then wirelessly send them as scalable video data SCLABLE VIDEO STREAM to the decoder DECODER. While it will be assumed hereafter that the transmission between the encoder ENCODER and the decoder DECODER takes place by radio, the invention is also applicable to other transmission technologies.
  • the steps described below are carried out in order to simultaneously transmit several spatial resolution levels of the images of the video data VIDEO by means of the scalable video data SCLABLE VIDEO STREAM, without transmitting information at the various resolution levels several times:
  • the original images of the video sequence VIDEO for example, in the size 4CIF (4 times Common Intermediate Format, which corresponds to an image size of 704x576 pixels) in Figure 1, are subsampled and / or low-pass filtered to produce images of lower resolution levels / image sizes, 1 CIF (Common Intermediate Format, this corresponds to a picture size with 352x288 pixels) and QCIF (Quarter Common Intermediate Format, this corresponds to a picture size with 176x144 pixels) to generate.
  • 1 CIF Common Intermediate Format
  • QCIF Quadrater Common Intermediate Format
  • coded e are ELEMENTS, such as motion vectors, pixel values Modusinformatio ⁇ nen such as block modes, a resolution level of the next lowest resolution level predicted. That is, there are co-founded ⁇ elements of resolution level from coded CIF elemene ⁇ QCIF resolution level th calculated and coded elements of resolution level 4CIF coded elements of the CIF resolution level.
  • the scalable video data SCLABLE VIDEO STREAM does not contain the entire 4CIF and CIF video sequences generated due to the coding CODING, but a smaller amount of coded 4CIF and CIF data, since the decoder DECODER can detect untransmitted data by prediction.
  • the encoder ENCODER thus determines per image and per level of resolution of the picture Interpolationsverfah ⁇ reindeer, and selects the concerning this image and this resolu ⁇ sungsprocess to the decoder DECODER data to be sent from depending on the used interpolation.
  • the decoder DECODER can resolution levels of the scalable video data SCLABLE VIDEO STREAM extract and, optionally, unnecessary information hö ⁇ herer resolution levels omit or not decode.
  • the pixel positions of the lower resolution level are first supplemented by intermediate pixel positions with the value 0, symbolized in the middle row by zeros in circles.
  • the pixel values are multiplied by filter weights, in Figure 2 -1/16, 0, 9/16, 16/16, 9/16, 0 and -1/16, and summed.
  • filter weights in Figure 2 -1/16, 0, 9/16, 16/16, 9/16, 0 and -1/16, and summed.
  • FIG. 2 shows a 4-tab filtering.
  • the number 4 here denotes the number of filter weights which ver ⁇ turns are in the specific example the numbers -1/16, 9/16, 9/16, and -1/16.
  • Further examples of filters are a 2-tab filter, for example, with the filter weights ⁇ and ⁇ , and a 6-tab filter, for example, with the filter weights 1/32, -5/32, 20/32, 20/32, -5 / 32 and 1/32.
  • the described interpolation can take place over the entire image area. However, it is also possible to divide an image into several areas and to calculate the filtering for each area.
  • 3 shows an example of such Auftei ⁇ development of a 16x16 area of an image: this can be divided according to the second illustration from the left in two equal 16x8 blocks, according to the third illustration from the left in two equal 8x16 blocks, and according to the right-hand illustration in an 8x8 block, two 8x4 blocks, two 4x8 blocks and four 4x4 blocks.
  • pixels needed to compute the filtering may be outside the image or block.
  • One way of resolving this problem, known as constant border extension, is to set off for those outside the area considered
  • Pixel the value of the pixel is used at the edge of the picture.
  • pixel values are mirrored on the image or block boundary, and diesel
  • the pixels generated by the reflection are used to calculate the filtering.
  • the encoder ENCODER selects suitable interpolation parameters for each image and for each resolution level of the image. These interpolation parameters are the filter, the block size, and the rules for generating pixel values at the image and / or block boundaries. Examples of specific embodiments of these parameters are listed above, but other configurations can also be used. It is possible that the encoder ENCODER selects other variables that can be used for interpolation in addition to the interpolation parameters mentioned.
  • the off ⁇ optionally the interpolation is adaptive, that is, the interpolation parameters are depending on each image to be processed and the image area. In principle, the same interpolation parameters are not used for specific image types. Rather, the interpolation parameters used for the same type of image varies with the flexible konkre ⁇ th image to send.
  • a rate-distortion optimization is preferably carried out, ie the encoder ENCODER compares the quality of images which are generated by using different interpolation parameters, and sets this in relation to the spark ⁇ transmission of images using these interpolation parameters required data rate. Those interpolation parameters are used which, given the data rate, are the best image or which need the lowest data rate for a given image quality. Compared to the prior art, in which the interpolation parameters are rigid, thereby a higher quality with the same or lower data rate of the radio transmission and a disproportionately he ⁇ creased quality at increased data rate is achieved.
  • the decoder DECODER must be aware of the interpolation parameters used by the encoder ENCODER in order to be able to determine from the received image data of a resolution level image data of the next higher resolution level by interpolation.
  • the encoder ENCODER the decoder DECODER explicitly signal the interpolation parameters used by him.
  • the interpolation parameters are transmitted to the decoder DECODER as side information. This can be done independently of syntax elements used in the prior art. However, it is advantageous to expand according to the prior art ver ⁇ spent syntax elements, such as through the introduction of new block modes.
  • the encoder ENCODER thus sends information elements which serve exclusively to indicate the interpolation parameters to be used.
  • the decoder DECODER can extract these information elements explicitly and directly from the interpolation parameters to be used.
  • the decoder DECODER can determine to use interpolation from other information: • To determine the interpolation parameters for a specific image area other image areas herangezo ⁇ can be gen: o using the interpolation parameters of other blocks:
  • the interpolation parameters for a block of an image may be calculated from interpolation parameters of one or more other blocks of the same image.
  • the encoder ENCODER can explicitly use the decoder DECODER via the interpolation parameter.
  • the encoder ENCODER notifies the decoder DECODER that decoding results of one or more blocks of an image are to be used to decode another block of the same image. This can be transferred to the interpolation parameters of the different blocks, so that e.g. then, when the intra-coding mode indicates to the decoder DECODER that the decoding result of a first block of an image is to be used to calculate the decoding result of a second block of the same image, the decoder DECODER uses the interpolation parameters of the first block as the interpolation parameter of the second block.
  • information about the temporal correlation of different images can be used to determine the interpolation parameters: o the block size for the motion estimation and compensation of the area to be encoded, o the block size for the motion estimation and compensation of an adjacent one already encoded region or other already coded portions of the moving ⁇ chen image o the block size of the transform, that is for the transfer of image points in the frequency range at lower resolution levels of the to the coding region or other regions of the same image, o block modes at lower resolution levels of the adjacent area to be coded, o prediction modes.
  • the decoder DECODER uses this information to determine the interpolation parameters. If the interpolation parameters are not explicitly signaled to the decoder DECODER, the encoder ENCODER and the decoder DECODER must use the same determination rule for the determination of the interpolation parameters from the information used for this purpose.
  • the encoder ENCODER determines from the transmitted to the decoder DECODER Intrakodiermodus the interpolation, and uses these interpolation parameters in the selection of the decoder DECODER to be sent image data.
  • DECODER is the determination of the provision Interpolationspara ⁇ meter known from the Intrakodiermodus, it that the sliding surfaces ⁇ interpolation used as the encoder ENCODER.
  • interpolation parameters depend on each other. For example, it is advantageous to use short filters for small areas / block sizes. If a dependency exists between different interpolation parameters, then not all interpolation parameters must be communicated in explicit signaling. It is also possible to fix one or more of the interpolation parameters so that only the design of the other interpolation parameters must be signaled to the decoder DECODER or determined by the decoder DECODER.
  • a combination of the two methods presented is advantageous, ie the explicit signaling of the interpolation parameters and the implicit signaling, ie the determination of the interpolation parameters by the decoder DECODER from other information.
  • the amount of page information required is reduced that more radio resources are available for the transmission of payload information.
  • the interpolation can be explicitly signaled to the quality ⁇ ty in terms of the rate-distortion optimization to increase.

Abstract

Die Erfindung betrifft ein Verfahren zum Bearbeiten und Versenden von Daten (VIDEO) , bei dem senderseitig Bilddaten eines Bildes in einer ersten Auflösungsstufe (QCIF, CIF) und in einer zweiten gegenüber der ersten Auflösungsstufe (QCIF, CIF) höheren Auflösungsstufe (CIF, 4CIF) vorliegen. Es wird mindestens ein Interpolationsparameter bestimmt zur Ermittlung (PREDICT) von Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) . Zumindest manche der Bilddaten der ersten (QCIF, CIF) und der zweiten (CIF, 4CIF) Auflösungsstufe werden gesendet, wobei die Versendung der Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) von dem mindestens einen bestimmten Interpolationsparameter abhängt. Weiterhin wird eine Angabe des mindestens einen bestimmten Interpolationsparameters gesendet. Die Erfindung betrifft auch das entsprechende empfängerseiti- ge Verfahren. Weiterhin betrifft die Erfindung einen Sender (ENCODER) und einen Empfänger (DECODER) zur Durchführung des Verfahrens .

Description

Beschreibung
Adaptive Interpolation bei der Bild- oder Videokodierung
Die Erfindung betrifft Verfahren zum Bearbeiten und Versenden, sowie zum Empfangen und Bearbeiten von Daten. Weiterhin betrifft die Erfindung Sender und Empfänger zur Durchführung der Verfahren.
In Kommunikationssystemen werden Nachrichten zwischen Sender und Empfänger übertragen. Ein spezielles Beispiel für Kommu¬ nikationssysteme sind Funkkommunikationssysteme. Hier werden Nachrichten, beispielsweise mit Sprachinformation, Bildinformation, Videoinformation, SMS (Short Message Service) , MMS (Multimedia Messaging Service) oder anderen Daten mit Hilfe von elektromagnetischen Wellen über eine Funkschnittstelle zwischen Sender und Empfänger übertragen. Bei den Funkstationen kann es sich hierbei je nach konkreter Ausgestaltung des Funkkommunikations Systems um verschiedenartige teilnehmersei- tige Funkstationen, Repeater, oder netzseitige Funkeinrichtungen wie Basisstationen oder Funkzugangspunkte handeln. In einem Mobilfunkkommunikationssystem handelt es sich bei zumindest einem Teil der teilnehmerseitigen Funkstationen um mobile Funkstationen. Das Abstrahlen der elektromagnetischen Wellen erfolgt mit Trägerfrequenzen, die in dem für das jeweilige System vorgesehenen Frequenzband liegen.
Mobilfunkkommunikationssysteme sind oftmals als zellulare Systeme z.B. nach dem Standard GSM (Global System for Mobile Communication) oder UMTS (Universal Mobile Telecommunications System) mit einer Netzinfrastruktur bestehend z.B. aus Basisstationen, Einrichtungen zur Kontrolle und Steuerung der Basisstationen und weiteren netzseitigen Einrichtungen ausgebildet. Außer diesen weiträumig organisierten (supralokalen) zellularen, hierarchischen Funknetzen gibt es auch drahtlose lokale Netze (WLANs, Wireless Local Area Networks) mit einem in der Regel räumlich deutlich stärker begrenzten Funkabdeckungsbereich . Beispiele für Informationen, welche in KommunikationsSystemen übertragen werden, sind Bilder oder Videos, wobei es sich bei letzteren um Sequenzen von Bildern handelt. Aufgrund der ho- hen für die Übertragung von Bild- oder Videodaten benötigten Datenraten werden insbesondere in Funkkommunikationssystemen geeignete Kodierverfahren für die Bild- oder Videodaten eingesetzt. Hierbei eignet sich die Verwendung von skalierbaren Informationen, wobei bei der Übertragung von skalierbaren In- formationen die Basisinformation übertragen wird, und zusätzlich die Basisinformation ergänzende Informationen. Skalierbare Daten weisen somit die Eigenschaft auf, dass sie in ver¬ minderter Qualität bei dem Empfänger vorliegen können, indem der Empfänger nur die Basisinformation oder die Basisinforma- tion und einen Teil der ergänzenden Informationen dekodiert, und nicht die Basisinformation und alle ergänzenden Informationen. Die Skalierbarkeit der Bild- oder Videodaten kann sich auf mehrere Skalierungsdimensionen beziehen, so z.B. auf die örtliche Auflösung einzelner Bilder.
Der Erfindung liegt die Aufgabe zugrunde, effiziente Verfah¬ ren zur Bearbeitung und Versendung oder Empfang von Daten aufzuzeigen. Weiterhin sollen geeignete Vorrichtungen zur Durchführung der Verfahren vorgestellt werden.
Diese Aufgabe wird durch ein Verfahren mit den Merkmalen des Anspruchs 1, sowie durch Verfahren und Vorrichtungen mit Merkmalen von nebengeordneten Ansprüchen gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen sind Gegenstand von Un- teransprüchen.
Gemäß dem ersten erfindungsgemäßen Verfahren zum Bearbeiten und Versenden von Daten liegen senderseitig Bilddaten eines Bildes in einer ersten Auflösungsstufe und in einer zweiten gegenüber der ersten Auflösungsstufe höheren Auflösungsstufe vor. Es wird mindestens ein Interpolationsparameter bestimmt zur Ermittlung durch Interpolation von Bilddaten der zweiten Auflösungsstufe aus Bilddaten der ersten Auflösungsstufe. Zu- mindest manche der Bilddaten der ersten und der zweiten Auflösungsstufe werden gesendet, wobei die Versendung der Bild¬ daten der zweiten Auflösungsstufe von dem mindestens einen bestimmten Interpolationsparameter abhängt. Weiterhin wird eine Angabe des mindestens einen bestimmten Interpolationspa¬ rameters gesendet.
Bei den bearbeiteten Daten handelt es sich vorzugsweise um Videodaten, d.h. um eine Folge aus Bildern. Ein Bild ist durch eine Mehrzahl von Bilddaten darstellbar, hierbei kann es sich insbesondere um die Zahlenwerte handeln, mit welchen die einzelnen Pixel des Bildes belegt sind. Dem Sender, vor¬ zugsweise einem Video- oder Bildkodierer, liegen Bilddaten in zumindest zwei Auflösungsstufen vor. Die Auflösungsstufe be- zeichnet die Anzahl der Bildpunkte des Bildes, eine höhere
Auflösungsstufe zeichnet sich durch mehr Bildpunkte als eine niedrigere Auflösungsstufe aus.
Senderseitig wird mindestens ein Interpolationsparameter be- stimmt. Unter Verwendung des mindestens einen Interpolations¬ parameters können durch Interpolation Bilddaten der zweiten Auflösungsstufe aus Bilddaten der ersten Auflösungsstufe er¬ mittelt werden. Der mindestens eine Interpolationsparameter gibt eine Vorschrift oder eine konkrete Ausgestaltung einer Vorschrift an, durch welche die Ermittlung von Bilddaten der zweiten Auflösungsstufe aus Bilddaten der ersten Auflösungs¬ stufe erfolgen kann. Hierbei ist es möglich, dass neben dem mindestens einen Interpolationsparameter und den Bilddaten der ersten Auflösungsstufe weitere Größen in die Ermittlung der Bilddaten der zweiten Auflösungsstufe einfließen, d.h. die durch Interpolation ermittelten Bilddaten der zweiten Auflösungsstufe müssen nicht ausschließlich aus Bilddaten der ersten Auflösungsstufe ermittelt werden. Der mindestens eine Interpolationsparameter kann sich auf das gesamte Bild der zweiten Auflösungsstufe beziehen, es ist jedoch auch möglich, dass der mindestens eine Interpolationsparameter lediglich zur Ermittlung von Bilddaten eines Bereiches des Bildes der zweiten Auflösungsstufe dient. Die Bilddaten der anderen Be- reiche können z.B. durch andere Interpolationsparameter ermittelt werden, oder auch ohne Verwendung von Interpolationsparametern versendet werden.
Nach der Ermittlung des mindestens einen Interpolationspara¬ meters wird zumindest ein Teil der Bilddaten der zweiten Auf¬ lösungsstufe gesendet. Hierbei berücksichtigt der Sender den mindestens einen bestimmten Interpolationsparameter, vorzugsweise indem Bilddaten, welche durch Interpolation unter Ver- wendung des mindestens einen bestimmten Interpolationsparame¬ ters ermittelt werden können, nicht gesendet werden. Der Um¬ fang und die Zusammensetzung der Bilddaten der zweiten Auflösungsstufe, welche gesendet werden, hängen somit von dem min¬ destens einen bestimmten Interpolationsparameter ab.
Die Versendung der Bilddaten und der Angabe des mindestens einen bestimmten Interpolationsparameters erfolgt vorzugswei¬ se per Funk, es können jedoch auch andere Übertragungstechno¬ logien angewandt werden. Vorteilhaft ist es, wenn die Bildda- ten und die Angabe des mindestens einen bestimmten Interpola¬ tionsparameters in einer gemeinsamen Nachricht gesendet wer¬ den, alternativ ist der Einsatz getrennter Nachrichten für die Bilddaten einerseits und die Angabe des mindestens einen bestimmten Interpolationsparameters andererseits möglich.
In Weiterbildung der Erfindung umfasst die Bestimmung des mindestens einen Interpolationsparameters eine Auswahl aus einer Mehrzahl von Interpolationsparametern, wobei bei der Auswahl eine Qualität von unter Verwendung des mindestens ei- nen Interpolationsparameters ermittelten Bilddaten der zwei¬ ten Auflösungsstufe berücksichtigt wird. Die Auswahl des min¬ destens einen Interpolationsparameters kann nach einem Algo¬ rithmus erfolgen, so z.B. gemäß einer rate-distortion- Optimierung.
Bei dem ersten erfindungsgemäßen Verfahren zum Empfangen und Bearbeiten von Daten liegen empfängerseitig empfangene Bild¬ daten eines Bildes in einer ersten Auflösungsstufe vor. Min- destens ein Interpolationsparameter wird bestimmt zur Ermittlung durch Interpolation von Bilddaten des Bildes in einer zweiten gegenüber der ersten Auflösungsstufe höheren Auflösungsstufe aus Bilddaten der ersten Auflösungsstufe. Der min- destens eine Interpolationsparameter wird bestimmt, indem ei¬ ne empfangene Angabe des mindestens einen Interpolationspara¬ meters ausgewertet wird. Der mindestens eine Interpolations¬ parameter wird zur Ermittlung von Bilddaten der zweiten Auflösungsstufe aus Bilddaten der ersten Auflösungsstufe verwen- det.
Oben stehende allgemeine Ausführungen bezüglich das erste erfindungsgemäßen Verfahrens zum Bearbeiten und Versenden von Daten sind auf das erste erfindungsgemäße Verfahren zum Emp- fangen und Bearbeiten von Daten übertragbar.
In Ausgestaltung der Erfindung umfasst die Angabe des mindestens einen Interpolationsparameters Informationen, welche ausschließlich den mindestens einen Interpolationsparameter betreffen.
Dem zweiten erfindungsgemäßen Verfahren zum Bearbeiten und Versenden von Daten gemäß liegen senderseitig Bilddaten eines Bildes in einer ersten Auflösungsstufe und in einer zweiten gegenüber der ersten Auflösungsstufe höheren Auflösungsstufe vor. Es wird mindestens ein Interpolationsparameter bestimmt zur Ermittlung durch Interpolation von Bilddaten eines ersten Bereiches des Bildes in der zweiten Auflösungsstufe aus Bild¬ daten der ersten Auflösungsstufe. Der mindestens eine Inter- polationsparameter wird bestimmt, indem Informationen betreffend zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe und/oder betreffend zumindest einen Bereich des Bildes der ersten Auflösungsstufe ausgewertet werden. Zu¬ mindest manche der Bilddaten der ersten und der zweiten Auf- lösungsstufe werden gesendet, wobei die Versendung der Bild¬ daten der zweiten Auflösungsstufe von dem mindestens einen bestimmten Interpolationsparameter abhängt. Oben stehende allgemeine Ausführungen bezüglich das erste erfindungsgemäßen Verfahrens zum Bearbeiten und Versenden von Daten sind auf das zweite erfindungsgemäße Verfahren zum Be¬ arbeiten und Senden von Daten übertragbar.
Zur Bestimmung des mindestens einen Interpolationsparameters werden gemäß dem zweiten erfindungsgemäßen Verfahren zum Bearbeiten und Senden von Daten Informationen ausgewertet, welche sich nicht auf den betrachteten ersten Bereich des Bildes der zweiten Auflösungsstufe beziehen, für welchen der mindestens eine Interpolationsparameter bestimmt wird. Diese Informationen können sich auf einen oder mehrere andere Bereiche des Bildes der zweiten Auflösungsstufe beziehen. Zusätzlich oder alternativ können sich die Informationen auf einen oder mehrere Bereiche des Bildes der ersten Auflösungsstufe bezie¬ hen, d.h. auf den ersten Bereich der ersten Auflösungsstufe und/oder auf einen oder mehrere andere Bereiche der ersten Auflösungsstufe .
Dem zweiten erfindungsgemäßen Verfahren zum Empfangen und Bearbeiten von Daten gemäß liegen empfängerseitig empfangene Bilddaten eines Bildes in einer ersten Auflösungsstufe vor. Es wird mindestens ein Interpolationsparameter bestimmt zur Ermittlung durch Interpolation von Bilddaten eines ersten Be- reiches des Bildes in der zweiten Auflösungsstufe aus Bildda¬ ten der ersten Auflösungsstufe. Der mindestens eine Interpo¬ lationsparameter wird bestimmt, indem Informationen betreffend zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe und/oder betreffend zumindest einen Bereich des Bildes der ersten Auflösungsstufe ausgewertet werden. Der mindestens eine Interpolationsparameter wird zur Ermittlung von Bilddaten des ersten Bereiches der zweiten Auflösungsstufe aus Bilddaten der ersten Auflösungsstufe verwendet.
Oben stehende allgemeine Ausführungen bezüglich das zweite erfindungsgemäßen Verfahrens zum Bearbeiten und Versenden von Daten sind auf das zweite erfindungsgemäße Verfahren zum Emp¬ fangen und Bearbeiten von Daten übertragbar. Mit Vorzug umfassen die Informationen betreffend den zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe und/oder betreffend den zumindest einen Bereich des Bildes der ersten Auflösungsstufe:
• Interpolationsparameter für den zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe und/oder für den zumindest einen Bereich des Bildes der ersten Auflösungsstufe, und/oder • Informationen zur Kodierung und/oder Dekodierung des ersten Bereiches der zweiten Auflösungsstufe in Abhän¬ gigkeit von einem Dekodierergebnis des zumindest einen zweiten Bereichs der zweiten Auflösungsstufe, wie z.B. den Intrakodiermodus, und/oder • eine Blockgröße für den zumindest einen zweiten Bereich der zweiten Auflösungsstufe und/oder für den zumindest einen Bereich der ersten Auflösungsstufe, wie z.B. eine Blockgröße für die Bewegungsschätzung und/oder Bewegungskompensation oder eine Blockgröße für eine Trans- formation von Bilddaten in den Frequenzbereich, und/oder
• Informationen betreffend die Kodierung und/oder Dekodierung des zumindest einen zweiten Bereichs der zweiten Auflösungsstufe und/oder des zumindest einen Bereichs der ersten Auflösungsstufe, wie z.B. einen Blockmodus.
In Ausgestaltung der Erfindung ist das Bild Bestandteil von Videodaten, und zur Bestimmung des mindestens einen Interpolationsparameters werden neben den Informationen betreffend zumindest einen zweiten Bereich des Bildes der zweiten Auflö- sungsstufe und/oder betreffend zumindest einen Bereich des
Bildes der ersten Auflösungsstufe weiterhin Informationen ü- ber eine zeitliche Korrelation zwischen dem Bild und zumindest einem anderen Bild verwendet.
Der mindestens eine Interpolationsparameter kann insbesondere ein Filterverfahren, charakterisiert beispielsweise durch Filterlänge und Filtergewichte, und/oder eine Bildbereichs¬ größe und/oder eine Regel zur Interpolation an einer Bildbe- reichsgrenze umfassen. Eine Regel zur Interpolation an einer Bildbereichsgrenze gibt vorzugsweise an, wie die Bilddaten zu Zwecken der Interpolation an einer Bildbereichsgrenze fortzusetzen sind.
Vorteilhaft ist es, wenn zeitweilig das erste erfindungsgemä¬ ße Verfahren zum Bearbeiten und Versenden von Daten und zeitweilig das zweite erfindungsgemäße Verfahrens zum Bearbeiten und Versenden von Daten angewandt wird, oder in Bezug auf ei- nen oder mehrere Interpolationsparameter das erste erfindungsgemäße Verfahren zum Bearbeiten und Versenden von Daten und in Bezug auf einen oder mehrere andere Interpolationspa¬ rameter das zweite erfindungsgemäße Verfahrens zum Bearbeiten und Versenden von Daten angewandt wird. Entsprechendes gilt auch für die erfindungsgemäßen Verfahren zum Empfangen und Bearbeiten von Daten.
Die erfindungsgemäßen Sender und Empfänger eignen sich insbesondere zur Durchführung der erfindungsgemäßen Verfahren, wo- bei dies auch auf die Ausgestaltungen und Weiterbildungen zutreffen kann. Hierzu können sie weitere geeignete Mittel auf¬ weisen. Die erfindungsgemäßen Sender und Empfänger können durch mehrere miteinander verbundene Einrichtungen realisiert werden.
Im Folgenden wird die Erfindung anhand eines Ausführungsbei¬ spiels näher erläutert. Dabei zeigen:
Figur 1: einen Ausschnitt aus einem Funkkommunikationssys- tem,
Figur 2: schematisch ein Interpolationsverfahren,
Figur 3: eine Aufteilung eines Bildes in Blöcke.
Figur 1 zeigt einen Ausschnitt aus einem Funkkommunikations¬ system, welches einen Kodierer ENCODER und einen Dekodierer DECODER umfasst. Der Kodierer ENCODER kodiert Videodaten VIDEO, um diese dann per Funk als skalierbare Videodaten SCLABLE VIDEO STREAM an den Dekodierer DECODER zu senden. Während im folgenden davon ausgegangen wird, dass die Übertragung zwischen dem Kodierer ENCODER und dem Dekodierer DECODER per Funk erfolgt, ist die Erfindung auch auf andere Übertragungstechnologien anwendbar. Bei der skalierbaren Kodierung der Videosequenz VIDEO werden die im folgenden beschriebenen Schritte durchgeführt, um durch die skalierbaren Videodaten SCLABLE VIDEO STREAM gleichzeitig mehrere räumli- che Auflösungsstufen der Bilder der Videodaten VIDEO zu übertragen, ohne dass Informationen in den verschiedenen Auflösungsstufen mehrfach übertragen werden:
Zuerst werden die Originalbilder der Videosequenz VIDEO, in Figur 1 beispielsweise in der Größe 4CIF (4 times Common In- termediate Format, dies entspricht einer Bildgröße mit 704x576 Bildpunkten) , unterabgetastet und/oder tiefpassgefil- tert, um Bilder niedrigerer Auflösungsstufen/Bildgrößen, in Figur 1 CIF (Common Intermediate Format, dies entspricht ei- ner Bildgröße mit 352x288 Bildpunkten) und QCIF (Quarter Common Intermediate Format, dies entspricht einer Bildgröße mit 176x144 Bildpunkten), zu generieren.
Die 4CIF, CIF und QCIF Videosequenzen werden im Schritt CODING getrennt voneinander kodiert. Um die mehrfache Über¬ tragung derselben oder ähnlicher Informationen zu vermeiden und somit die Kodiereffizienz zu erhöhen, werden kodierte E- lemente, z.B. Bewegungsvektoren, Pixelwerte, Modusinformatio¬ nen wie z.B. Blockmodi, einer Auflösungsstufe von der nächst niedrigeren Auflösungsstufe prädiziert. D.h. es werden ko¬ dierte Elemente der Auflösungsstufe CIF aus kodierten Elemen¬ ten der Auflösungsstufe QCIF berechnet, und kodierte Elemente der Auflösungsstufe 4CIF kodierten Elementen der Auflösungsstufe CIF. Bei der Prädiktion der Pixelwerte eines Bildes wird eine Interpolation verwendet, bei der aus den Pixelwerten des gleichen Bilder der niedrigeren Auflösungsstufe die Pixelwerte der nächst höheren Auflösungsstufe bestimmt wer¬ den. Die prädizierten Werte werden dazu verwendet, senderseitig zu bestimmen, welche Daten an den Dekodierer DECODER übertragen werden müssen. D.h. die skalierbaren Videodaten SCLABLE VIDEO STREAM enthalten nicht die gesamten aufgrund der Kodierung CODING erzeugten 4CIF und CIF Videosequenzen, sondern einen kleineren Umfang an kodierten 4CIF und CIF Daten, da der Dekodierer DECODER nicht übertragene Daten durch Prädiktion ermitteln kann. Der Kodierer ENCODER bestimmt somit pro Bild und pro Auflösungsstufe des Bildes ein Interpolationsverfah¬ ren, und wählt die betreffend dieses Bild und diese Auflö¬ sungsstufe an den Dekodierer DECODER zu versendenden Daten abhängig von dem verwendeten Interpolationsverfahren aus. Je nach den empfängerseitigen Qualitätsanforderungen und Fähig- keiten des Endgerätes kann der Dekodierer DECODER Auflösungsstufen der skalierbaren Videodaten SCLABLE VIDEO STREAM extrahieren und gegebenenfalls nicht benötigte Informationen hö¬ herer Auflösungsstufen auslassen bzw. nicht dekodieren.
Bei der Interpolation müssen neue Pixelwerte, d.h. die Pixel¬ werte des Bildes der höheren Auflösungsstufe, aus den vorhan¬ denen Pixelwerten, d.h. aus den Pixelwerten des gleichen Bildes der niedrigeren Auflösungsstufe, bestimmt werden. Dies geschieht in der Regel mittels Filterung, wobei die zweidi- mensionale Filterung eines Bildes vorteilhafterweise zur Re¬ duzierung des Rechenaufwandes in zwei eindimensionale Filte¬ rungen, d.h. in eine horizontale und eine vertikale Filte¬ rung, zerlegt wird. Diese beiden Filterungen können nacheinander berechnet werden. Eine eindimensionale Filterung ist in Figur 2 dargestellt, wobei in diesem Beispiels die Größe des Bildes verdoppelt wird. Die Kreise der oberen Zeile der Figur 2 entsprechen den Bildpunkten des Bildes der niedrigeren Auflösungsstufe. Die Pixelpositionen der niedrigeren Auflösungsstufe werden zunächst um Zwischenpixelpositionen mit dem Wert 0 ergänzt, in der mittleren Zeile durch Nullen in Kreisen symbolisiert. Bei der Filterung werden die Pixelwerte mit Filtergewichten, in der Figur 2 mit -1/16, 0, 9/16, 16/16, 9/16, 0 und -1/16, multipliziert und summiert. Durch die Sum- mation der gewichteten Pixelwerte des Bildes der niedrigeren Auflösungsstufe ergibt sich jeweils ein Pixelwert des Bildes der höheren Auflösungsstufe, in der unteren Zeile der Figur 2 durch Kreuze symbolisiert. Dieses Vorgehen wird für jedes Pi- xel der höheren Auflösungsstufe wiederholt, indem die Filter¬ gewichte jeweils um eine Position verschoben werden. Bei dem Beispiel der Filtergewichte gemäß Figur 2 werden für die Pi¬ xel auf den Positionen des Bildes der niedrigeren Auflösungsstufe die Pixelwerte der niedrigeren Auflösungsstufe in das Bild der höheren Auflösungsstufe übernommen.
In Figur 2 ist eine 4-tab Filterung dargestellt. Die Zahl 4 bezeichnet hierbei die Anzahl der Filtergewichte, welche ver¬ wendet werden, im konkreten Beispiel die Zahlen -1/16, 9/16, 9/16 und -1/16. Weitere Beispiele für Filter sind ein 2-tab Filter, beispielsweise mit den Filtergewichten ^ und ^, und ein 6-tab Filter, beispielsweise mit den Filtergewichten 1/32, -5/32, 20/32, 20/32, -5/32 und 1/32.
Die beschriebene Interpolation kann über den gesamten Bildbereich erfolgen. Es ist jedoch auch möglich, ein Bild in mehrere Bereiche aufzuteilen und für jeden Bereich die Filterung zu berechnen. Figur 3 zeigt beispielhaft eine solche Auftei¬ lung eines 16x16 Bereiches eines Bildes: dieser kann gemäß der zweiten Darstellung von links in zwei gleich große 16x8 Blöcke aufgeteilt werden, gemäß der dritten Darstellung von links in zwei gleich große 8x16 Blöcke, und gemäß der rechten Darstellung in einen 8x8 Block, zwei 8x4 Blöcke, zwei 4x8 Blöcke und vier 4x4 Blöcke.
An den Rändern eines Bildes oder eines Blockes können für die Berechnung der Filterung benötigte Pixel außerhalb des Bildes bzw. Blockes liegen. Eine als constant border extension bekannte Möglichkeit zur Behebung dieses Problems liegt darin, dass für die außerhalb des betrachteten Bereichs gelegenen
Pixel der Wert des Pixels am Bildrand verwendet wird. Bei ei¬ ner anderen als Mirroring bekannten Möglichkeit werden die Pixelwerte an der Bild- oder Blockgrenze gespiegelt, und die- se durch die Spiegelung erzeugten Pixel werden zur Berechnung der Filterung verwendet.
Gemäß dem Stand der Technik, beschrieben z.B. in H. Schwarz, T. Hinz, D. Marpe, T. Wiegand: „Further im- provements of the HHI proposal for SVC CE 1", M11398, Palma, Spanien, Oktober 2004 verwendet der Kodierer abhängig vom Bildtyp, welcher durch die zeitliche Korrelation verschiedener Bilder festgelegt ist, ein bestimmtes festgelegtes dem Empfänger bekanntes In¬ terpolationsverfahren.
Gemäß der Erfindung wählt der Kodierer ENCODER für jedes Bild und für jede Auflösungsstufe des Bildes geeignete Interpola- tionsparameter aus. Bei diesen Interpolationsparametern handelt es sich um den Filter, die Blockgröße und die Regeln für die Erzeugung von Pixelwerten an den Bild- und/oder Blockgrenzen. Beispiele für konkrete Ausgestaltungen dieser Parameter sind oben aufgeführt, es können auch andere Ausgestal- tungen zum Einsatz kommen. Es ist möglich, dass der Kodierer ENCODER neben den genannten Interpolationsparametern weitere bei der Interpolation verwendbare Größen auswählt. Die Aus¬ wahl der Interpolationsparameter erfolgt adaptiv, d.h. die Interpolationsparameter sind abhängig vom jeweils zu verar- beitenden Bild bzw. Bildbereich. Es werden nicht für bestimmte Bildtypen grundsätzlich die gleichen Interpolationsparameter eingesetzt. Vielmehr variieren die verwendeten Interpolationsparameter bei gleichem Bildtyp flexibel mit dem konkre¬ ten zu versendenden Bild.
Zur Auswahl geeigneter Interpolationsparameter wird vorzugsweise eine Rate-Distortion-Optimierung durchgeführt, d.h. der Kodierer ENCODER vergleicht die Qualität von Bildern, welche durch die Verwendung verschiedener Interpolationsparameter erzeugt werden, und setzt dies in Bezug zur für die Funküber¬ tragung der Bilder unter Verwendung dieser Interpolationsparameter benötigten Datenrate. Es werden diejenigen Interpolationsparameter verwendet, welche bei gegebener Datenrate das beste Bild ergeben bzw. welche bei gegebener Bildqualität die niedrigste Datenrate benötigen. Gegenüber dem Stand der Technik, bei welchem die Interpolationsparameter starr sind, wird hierdurch eine höhere Qualität bei gleicher oder niedrigerer Datenrate der Funkübertragung bzw. eine überproportional er¬ höhte Qualität bei erhöhter Datenrate erzielt.
Dem Dekodierer DECODER müssen die vom Kodierer ENCODER verwendeten Interpolationsparameter bekannt sein, um aus den empfangenen Bilddaten einer Auflösungsstufe Bilddaten der nächst höheren Auflösungsstufe durch Interpolation ermitteln zu können. Hierzu kann der Kodierer ENCODER dem Dekodierer DECODER die von ihm verwendeten Interpolationsparameter explizit signalisieren. Bei der expliziten Signalisierung wer- den die Interpolationsparameter an den Dekodierer DECODER als Seiteninformation übertragen. Dies kann unabhängig von gemäß dem Stand der Technik verwendeten Syntaxelementen erfolgen. Vorteilhaft ist es jedoch, gemäß dem Stand der Technik ver¬ wendete Syntaxelemente zu erweitern, so z.B. durch die Ein- führung neuer Blockmodi. Bei der expliziten Signalisierung werden somit von dem Kodierer ENCODER Informationselemente gesendet, welche ausschließlich der Angabe der zu verwendenden Interpolationsparameter dienen. Der Dekodierer DECODER kann diesen Informationselementen explizit und direkt die zu verwendenden Interpolationsparameter entnehmen.
Alternativ oder zusätzlich zur expliziten Signalisierung kann der Dekodierer DECODER die zu verwendenden Interpolationsparameter aus anderen Informationen ermitteln: • Zur Ermittlung der Interpolationsparameter für einen bestimmten Bildbereich können andere Bildbereiche herangezo¬ gen werden: o Verwendung der Interpolationsparameter anderer Blöcke:
Die Interpolationsparameter für einen Block eines Bildes können aus Interpolationsparametern von einem oder mehreren anderen Blöcken des gleichen Bildes berechnet werden. Auf diese Weise kann z.B. der Kodierer ENCODER den Dekodierer DECODER explizit über die Interpolationspara- meter von zumindest einem Block eines Bildes informie¬ ren, und der Dekodierer DECODER verwendet diese Interpo¬ lationsparameter dann zur Berechnung von Interpolationsparametern anderer Blöcke des gleichen Bildes. o Verwendung des Intrakodiermodus :
Mit dem Intrakodiermodus teilt der Kodierer ENCODER dem Dekodierer DECODER mit, dass Dekodierergebnisse eines oder mehrerer Blöcke eines Bildes zur Dekodierung eines anderen Blockes des gleichen Bildes zu verwenden sind. Dies kann auf die Interpolationsparameter der verschiedenen Blöcke übertragen werden, so dass z.B. dann, wenn der Intrakodiermodus dem Dekodierer DECODER anzeigt, dass das Dekodierergebnis eines ersten Blockes eines Bildes zur Berechnung des Dekodierergebnisses eines zweiten Blockes des gleichen Bildes zu verwenden ist, der Dekodierer DECODER die Interpolationsparameter des ersten Blockes als Interpolationsparameter des zweiten Blockes verwendet.
• Zusätzlich zu den o.g. Größen können zur Ermittlung der In- terpolationsparameter Informationen über die zeitliche Korrelation von verschiedenen Bildern herangezogen werden: o die Blockgröße für die Bewegungsschätzung und - kompensation des zu kodierenden Bereiches, o die Blockgröße für die Bewegungsschätzung und - kompensation eines benachbarten bereits kodierten Bereiches oder anderer bereits kodierter Bereiche des glei¬ chen Bildes, o die Blockgröße der Transformation, d.h. für die Überführung von Bildpunkten in den Frequenzbereich, auf niedri- geren Auflösungsstufen des zu kodierenden Bereiches oder anderer Bereiche des gleichen Bildes, o Blockmodi auf niedrigeren Auflösungsstufen des benachbarten und zu kodierenden Bereiches, o Prädiktionsmodi.
Zur Ermittlung der Interpolationsparameter können Kombinationen der oben aufgeführten Größen verwendet werden. Bei der im letzten Absatz beschriebenen impliziten Signalisierung emp- fängt der Dekodierer DECODER somit Informationen, welche sich nicht auf die Interpolationsparameter des aktuell betrachte¬ ten Bildbereichs beziehen. Der Dekodierer DECODER verwendet diese Informationen zur Ermittlung der Interpolationsparame- ter. Werden die Interpolationsparameter dem Dekodierer DECODER nicht explizit signalisiert, müssen der Kodierer ENCODER und der Dekodierer DECODER die gleiche Ermittlungsvorschrift für die Bestimmung der Interpolationsparameter aus den hierzu verwendeten Informationen verwenden. Wird bei- spielsweise der Intrakodiermodus zur impliziten Signalisie¬ rung der Interpolationsparameter verwendet, ermittelt der Kodierer ENCODER aus dem an den Dekodierer DECODER übertragenen Intrakodiermodus die Interpolationsparameter und verwendet diese Interpolationsparameter bei der Auswahl der an den De- kodierer DECODER zu versendenden Bilddaten. Dem Dekodierer
DECODER ist die Ermittlungsvorschrift der Interpolationspara¬ meter aus dem Intrakodiermodus bekannt, so dass er die glei¬ chen Interpolationsparameter verwendet wie der Kodierer ENCODER.
Es ist möglich, dass die Interpolationsparameter voneinander abhängen. So ist es beispielsweise vorteilhaft, bei kleinen Bereichen/Blockgrößen kurze Filter zu verwenden. Existiert eine Abhängigkeit zwischen verschiedenen Interpolationspara- metern, so müssen bei der expliziten Signalisierung nicht alle Interpolationsparameter mitgeteilt werden. Auch ist es möglich, einen oder mehrere der Interpolationsparameter fix zu halten, so dass lediglich die Ausgestaltung der anderen Interpolationsparameter dem Dekodierer DECODER signalisiert oder von dem Dekodierer DECODER ermittelt werden muss.
Vorteilhaft ist eine Kombination der beiden vorgestellten Verfahren, d.h. der expliziten Signalisierung der Interpolationsparameter und der impliziten Signalisierung, d.h. der Ermittlung der Interpolationsparameter durch den Dekodierer DECODER aus anderen Informationen. Durch die Ermittlung der Interpolationsparameter durch den Dekodierer DECODER wird die Menge der erforderlichen Seiteninformationen reduziert, so dass mehr Funkressourcen zur Übertragung von Nutzinformationen zur Verfügung stehen. Bei Qualitätsverlusten durch mangelhafte Interpolationsparameter aufgrund der Ermittlungsvorschrift der Interpolationsparameter aus den anderen Informationen bei der impliziten Signalisierung können die Interpolationsparameter explizit signalisiert werden, um die Quali¬ tät im Sinne der Rate-Distortion-Optimierung zu erhöhen.

Claims

Patentansprüche
1. Verfahren zum Bearbeiten und Versenden von Daten (VIDEO), bei dem senderseitig Bilddaten eines Bildes in einer ersten Auflösungsstufe (QCIF, CIF) und in einer zweiten gegenüber der ersten Auflösungsstufe (QCIF, CIF) höheren Auflösungsstufe (CIF, 4CIF) vorliegen, mindestens ein Interpolationsparameter bestimmt wird zur Ermittlung durch Interpolation (PREDICT) von Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) , zumindest manche der Bilddaten der ersten (QCIF, CIF) und der zweiten (CIF, 4CIF) Auflösungsstufe gesendet werden, wobei die Versendung der Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) von dem mindestens einen bestimmten Interpolationsparameter abhängt, und eine Angabe des mindestens einen bestimmten Interpolati¬ onsparameters gesendet wird.
2. Verfahren nach Anspruch 1, bei dem die Bestimmung des mindestens einen Interpolationsparame¬ ters eine Auswahl aus einer Mehrzahl von Interpolations¬ parametern umfasst, wobei bei der Auswahl eine Qualität von unter Verwendung des mindestens einen Interpolations¬ parameters ermittelten Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) berücksichtigt wird.
3. Verfahren, vorzugsweise nach Anspruch 1 oder 2, zum Emp- fangen und Bearbeiten von Daten (SCALABLE VIDEO STREAM) , bei dem empfängerseitig empfangene Bilddaten eines Bildes in einer ersten Auflö¬ sungsstufe (QCIF, CIF) vorliegen, mindestens ein Interpolationsparameter bestimmt wird zur Ermittlung durch Interpolation (PREDICT) von Bilddaten des Bildes in einer zweiten gegenüber der ersten Auflösungsstufe (QCIF, CIF) höheren Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) , der mindestens eine Interpolationsparameter bestimmt wird, indem eine empfangene Angabe des mindestens einen Interpolationsparameters ausgewertet wird, und der mindestens eine bestimmte Interpolationsparameter zur Ermittlung von Bilddaten der zweiten Auflösungsstufe
(CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe
(QCIF, CIF) verwendet wird.
4. Verfahren nach einem der Ansprüche 1 bis 3, bei dem die Angabe des mindestens einen Interpolationsparameters Informationen umfasst, welche ausschließlich den mindestens einen Interpolationsparameter betreffen.
5. Verfahren zum Bearbeiten und Versenden von Daten (VIDEO), bei dem senderseitig
Bilddaten eines Bildes in einer ersten Auflösungsstufe (QCIF, CIF) und in einer zweiten gegenüber der ersten Auflösungsstufe (QCIF, CIF) höheren Auflösungsstufe (CIF, 4CIF) vorliegen, mindestens ein Interpolationsparameter bestimmt wird zur Ermittlung durch Interpolation (PREDICT) von Bilddaten eines ersten Bereiches des Bildes in der zweiten Auflö¬ sungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflö- sungsstufe (QCIF, CIF), der mindestens eine Interpolationsparameter bestimmt wird, indem Informationen betreffend zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe (CIF, 4CIF) und/oder betreffend zumindest einen Bereich des Bildes der ersten Auflösungsstufe (QCIF, CIF) ausge¬ wertet werden, zumindest manche der Bilddaten der ersten (QCIF, CIF) und der zweiten Auflösungsstufe (CIF, 4CIF) gesendet werden, wobei die Versendung der Bilddaten der zweiten Auflö- sungsstufe (CIF, 4CIF) von dem mindestens einen bestimmten Interpolationsparameter abhängt.
6. Verfahren, vorzugsweise nach Anspruch 5, zum Empfangen und Bearbeiten von Daten (SCALABLE VIDEO STREAM) , bei dem empfängerseitig empfangene Bilddaten eines Bildes in einer ersten Auflö- sungsstufe (QCIF, CIF) vorliegen, mindestens ein Interpolationsparameter bestimmt wird zur Ermittlung durch Interpolation (PREDICT) von Bilddaten eines ersten Bereiches des Bildes in einer zweiten gegenüber der ersten Auflösungsstufe (QCIF, CIF) höheren Auf- lösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF), der mindestens eine Interpolationsparameter bestimmt wird, indem Informationen betreffend zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe (CIF, 4CIF) und/oder betreffend zumindest einen Bereich des Bildes der ersten Auflösungsstufe (QCIF, CIF) ausge¬ wertet werden, und der mindestens eine bestimmte Interpolationsparameter verwendet wird zur Ermittlung von Bilddaten des ersten Bereiches der zweiten Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) .
7. Verfahren nach Anspruch 5 oder 6, bei dem die Informationen betreffend den zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe (CIF,
4CIF) und/oder betreffend den zumindest einen Bereich des Bildes der ersten Auflösungsstufe (QCIF, CIF) umfassen:
• Interpolationsparameter für den zumindest einen zweiten Bereich der zweiten Auflösungsstufe (CIF, 4CIF) und/oder für den zumindest einen Bereich der ersten Auflösungsstufe (QCIF, CIF), und/oder
• Informationen zur Kodierung und/oder Dekodierung des ersten Bereiches der zweiten Auflösungsstufe (CIF, 4CIF) in Abhängigkeit von einem Dekodierergebnis des zumindest einen zweiten Bereichs der zweiten Auflö¬ sungsstufe (CIF, 4CIF) , und/oder
• eine Blockgröße für den zumindest einen zweiten Be¬ reich der zweiten Auflösungsstufe (CIF, 4CIF) und/oder für den zumindest einen Bereich der ersten Auflösungsstufe (QCIF, CIF), und/oder
• Informationen betreffend die Kodierung und/oder Dekodierung des zumindest einen zweiten Bereichs der zwei- ten Auflösungsstufe (CIF, 4CIF) und/oder des zumindest einen Bereichs der ersten Auflösungsstufe (QCIF, CIF).
8. Verfahren nach Anspruch 7, bei dem die Blockgröße für den zumindest einen zweiten Bereich der zweiten Auflösungsstufe (CIF, 4CIF) und/oder für den zumindest einen Bereich der ersten Auflösungsstufe (QCIF, CIF) betrifft: • eine Blockgröße für die Bewegungs Schätzung und/oder
Bewegungskompensation, und/oder • eine Blockgröße für eine Transformation von Bilddaten in den Frequenzbereich.
9. Verfahren nach einem der Ansprüche 5 bis 8, bei dem das Bild Bestandteil von Videodaten (VIDEO) ist, und zur Bestimmung des mindestens einen Interpolationsparame¬ ters Informationen über eine zeitliche Korrelation zwischen dem Bild und zumindest einem anderen Bild verwendet werden.
10. Verfahren nach einem der Ansprüche 1 bis 9, bei dem der mindestens eine Interpolationsparameter ein Filterverfahren und/oder eine Bildbereichsgröße und/oder eine Regel zur Interpolation an einer Bildbereichsgrenze um- fasst .
11. Verfahren nach einem der Ansprüche 1 bis 2 und Anspruch 5.
12. Verfahren nach einem der Ansprüche 3 bis 4 und einem der Ansprüche 6 bis 9.
13. Sender (ENCODER) zum Bearbeiten und Versenden von Daten (VIDEO) , mit Mitteln zum Bestimmen von mindestens einem Interpolationsparameter zur Ermittlung durch Interpolation (PREDICT) von Bilddaten eines Bildes in einer zweiten gegenüber einer ersten Auflösungsstufe (QCIF, CIF) höheren Auflö- sungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF),
Mitteln zum Auswählen von zu sendenden Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) in Abhängigkeit von dem mindestens einen bestimmten Interpolationsparameter, Mitteln zum Senden von zumindest manchen der Bilddaten der ersten (QCIF, CIF) und der zweiten Auflösungsstufe (CIF, 4CIF), und
Mitteln zum Senden einer Angabe des mindestens einen bestimmten Interpolationsparameters .
14. Sender (ENCODER) zum Bearbeiten und Versenden von Daten (VIDEO) , mit
Mitteln zum Bestimmen von mindestens einem Interpolationsparameter zur Ermittlung durch Interpolation (PREDICT) von Bilddaten eines ersten Bereiches eines Bildes in ei¬ ner zweiten gegenüber einer ersten Auflösungsstufe (QCIF, CIF) höheren Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) , wobei der mindes¬ tens eine Interpolationsparameter bestimmt wird, indem Informationen betreffend zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe (CIF, 4CIF) und/oder betreffend zumindest einen Bereich des Bildes der ersten Auflösungsstufe (QCIF, CIF) ausgewertet wer¬ den, Mitteln zum Auswählen von zu sendenden Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) in Abhängigkeit von dem mindestens einen bestimmten Interpolationsparameter, und
Mitteln zum Senden von zumindest manchen der Bilddaten der ersten (QCIF, CIF) und der zweiten Auflösungsstufe (CIF, 4CIF) .
15. Empfänger (DECODER) zum Empfangen und Bearbeiten von Daten (SCALABLE VIDEO STREAM) , mit
Mitteln zum Empfangen von Bilddaten eines Bildes in einer ersten Auflösungsstufe (QCIF, CIF) , Mitteln zum Bestimmen von mindestens einem Interpolationsparameter zur Ermittlung durch Interpolation (PREDICT) von Bilddaten des Bildes in einer zweiten gegenüber der ersten Auflösungsstufe (QCIF, CIF) höheren Auflösungsstu¬ fe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) , wobei der mindestens eine Interpolationspa¬ rameter bestimmt wird, indem eine empfangene Angabe des mindestens einen Interpolationsparameters ausgewertet wird, und Mitteln zum Verwenden des mindestens eine bestimmten In- terpolationsparameters zur Ermittlung von Bilddaten der zweiten Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) .
16. Empfänger (DECODER) zum Empfangen und Bearbeiten von Da- ten (SCALABLE VIDEO STREAM) , mit
Mitteln zum Empfangen von Bilddaten eines Bildes in einer ersten Auflösungsstufe (QCIF, CIF) ,
Mitteln zum Bestimmen von mindestens einem Interpolationsparameter zur Ermittlung durch Interpolation (PREDICT) von Bilddaten eines ersten Bereiches des Bildes in einer zweiten gegenüber der ersten Auflösungsstufe (QCIF, CIF) höheren Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) , wobei der mindestens eine Interpolationsparameter bestimmt wird, indem Infor- mationen betreffend zumindest einen zweiten Bereich des Bildes der zweiten Auflösungsstufe (CIF, 4CIF) und/oder betreffend zumindest einen Bereich des Bildes der ersten Auflösungsstufe (QCIF, CIF) ausgewertet werden, und Mitteln zum Verwenden des mindestens eine bestimmten In- terpolationsparameters zur Ermittlung von Bilddaten des ersten Bereiches der zweiten Auflösungsstufe (CIF, 4CIF) aus Bilddaten der ersten Auflösungsstufe (QCIF, CIF) .
PCT/EP2006/061168 2005-04-12 2006-03-30 Adaptive interpolation bei der bild- oder videokodierung WO2006108765A1 (de)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020077026262A KR101303222B1 (ko) 2005-04-12 2006-03-30 이미지 또는 비디오 인코딩의 적응적 보간법
EP06725424A EP1869889A1 (de) 2005-04-12 2006-03-30 Adaptive interpolation bei der bild- oder videokodierung
CN2006800209364A CN101194514B (zh) 2005-04-12 2006-03-30 在图像编码或视频编码中的适应性插值
JP2008505859A JP5069218B2 (ja) 2005-04-12 2006-03-30 ビデオ画像符号化における適応型補間を用いたデータ送信処理方法、データ受信処理方法、送信機および受信機
US11/918,400 US8270489B2 (en) 2005-04-12 2006-03-30 Adaptive interpolation in image or video encoding

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102005016827A DE102005016827A1 (de) 2005-04-12 2005-04-12 Adaptive Interpolation bei der Bild- oder Videokodierung
DE102005016827.2 2005-04-12

Publications (1)

Publication Number Publication Date
WO2006108765A1 true WO2006108765A1 (de) 2006-10-19

Family

ID=36763188

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2006/061168 WO2006108765A1 (de) 2005-04-12 2006-03-30 Adaptive interpolation bei der bild- oder videokodierung

Country Status (7)

Country Link
US (1) US8270489B2 (de)
EP (1) EP1869889A1 (de)
JP (2) JP5069218B2 (de)
KR (1) KR101303222B1 (de)
CN (1) CN101194514B (de)
DE (1) DE102005016827A1 (de)
WO (1) WO2006108765A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010144408A1 (en) * 2009-06-11 2010-12-16 Motorola Mobility, Inc. Digital image compression by adaptive macroblock resolution coding

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005016827A1 (de) * 2005-04-12 2006-10-19 Siemens Ag Adaptive Interpolation bei der Bild- oder Videokodierung
JP5639436B2 (ja) * 2010-10-18 2014-12-10 株式会社メガチップス 画像処理装置、および画像処理装置の動作方法
US8761543B2 (en) * 2011-08-30 2014-06-24 Microsoft Corporation Image processing using bounds adjustment
US9313495B2 (en) 2012-05-14 2016-04-12 Luca Rossato Encoding and decoding based on blending of sequences of samples along time
AU2013261845A1 (en) 2012-05-14 2014-12-11 Guido MEARDI Encoding and reconstruction of residual data based on support information
US20160241882A1 (en) * 2013-10-11 2016-08-18 Sony Corporation Image processing apparatus and image processing method
FR3109685A1 (fr) * 2020-04-22 2021-10-29 Orange Procédés et dispositifs de codage et de décodage d'une séquence vidéo multi-vues

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5663764A (en) * 1993-09-30 1997-09-02 Sony Corporation Hierarchical encoding and decoding apparatus for a digital image signal
US6591398B1 (en) * 1999-02-12 2003-07-08 Sony Corporation Multiple processing system
US20050018916A1 (en) * 1996-07-17 2005-01-27 Sony Corporation Apparatus for and method of processing image and apparatus for and method of encoding image

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0211079A (ja) * 1988-06-29 1990-01-16 Nec Corp 画像信号帯域圧縮方式
JPH0211078A (ja) * 1988-06-29 1990-01-16 Nec Corp 画像信号帯域圧縮方式
JPH0410768A (ja) * 1990-02-19 1992-01-14 Canon Inc サブサンプリング復号装置
US5546130A (en) * 1993-10-11 1996-08-13 Thomson Consumer Electronics S.A. Method and apparatus for forming a video signal using motion estimation and signal paths with different interpolation processing
JP3758211B2 (ja) 1994-07-19 2006-03-22 ソニー株式会社 ディジタル画像信号の階層符号化装置および方法、並びに復号装置および方法
US5828788A (en) * 1995-06-29 1998-10-27 Thomson Multimedia, S.A. System for processing data in variable segments and with variable data resolution
JP3540447B2 (ja) 1995-07-20 2004-07-07 三洋電機株式会社 動画像符号化装置及び復号装置
TW358296B (en) * 1996-11-12 1999-05-11 Matsushita Electric Ind Co Ltd Digital picture encoding method and digital picture encoding apparatus, digital picture decoding method and digital picture decoding apparatus, and data storage medium
KR100252194B1 (ko) * 1997-10-10 2000-04-15 박호군 참당귀에서분리한신규한펙틴질다당류와그분리정제방법및그의면역증강제로서의용도
US6782143B1 (en) * 1999-12-30 2004-08-24 Stmicroelectronics, Inc. Method and apparatus for processing an image
KR100360893B1 (ko) * 2001-02-01 2002-11-13 엘지전자 주식회사 영상 움직임 보상 장치 및 방법
KR100783396B1 (ko) * 2001-04-19 2007-12-10 엘지전자 주식회사 부호기의 서브밴드 분할을 이용한 시공간 스케일러빌러티방법
JP4129374B2 (ja) 2001-09-18 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
EP1442601A1 (de) * 2001-10-26 2004-08-04 Koninklijke Philips Electronics N.V. Verfahren und vorrichtung für räumlicher skalierbarkeit kodierung
JP4120301B2 (ja) * 2002-04-25 2008-07-16 ソニー株式会社 画像処理装置およびその方法
DE102004041664A1 (de) * 2004-08-27 2006-03-09 Siemens Ag Verfahren zum Codieren und Decodieren, sowie Codier- und Decodiervorrichtung zur Videocodierung
KR100888963B1 (ko) * 2004-12-06 2009-03-17 엘지전자 주식회사 영상 신호의 스케일러블 인코딩 및 디코딩 방법
DE102005016827A1 (de) * 2005-04-12 2006-10-19 Siemens Ag Adaptive Interpolation bei der Bild- oder Videokodierung

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5663764A (en) * 1993-09-30 1997-09-02 Sony Corporation Hierarchical encoding and decoding apparatus for a digital image signal
US20050018916A1 (en) * 1996-07-17 2005-01-27 Sony Corporation Apparatus for and method of processing image and apparatus for and method of encoding image
US6591398B1 (en) * 1999-02-12 2003-07-08 Sony Corporation Multiple processing system

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
H. SCHWARZ; T. HINZ; D. MARPE; T. WIEGAND, FURTHER IMPROVEMENTS OF THE HHI PROPOSAL FOR SVC CE 1, October 2004 (2004-10-01)
See also references of EP1869889A1 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010144408A1 (en) * 2009-06-11 2010-12-16 Motorola Mobility, Inc. Digital image compression by adaptive macroblock resolution coding

Also Published As

Publication number Publication date
JP5069218B2 (ja) 2012-11-07
US8270489B2 (en) 2012-09-18
DE102005016827A1 (de) 2006-10-19
JP2008536417A (ja) 2008-09-04
US20090232212A1 (en) 2009-09-17
JP2012010388A (ja) 2012-01-12
CN101194514B (zh) 2011-07-06
KR20080006606A (ko) 2008-01-16
CN101194514A (zh) 2008-06-04
KR101303222B1 (ko) 2013-09-04
EP1869889A1 (de) 2007-12-26
JP5404715B2 (ja) 2014-02-05

Similar Documents

Publication Publication Date Title
WO2006108765A1 (de) Adaptive interpolation bei der bild- oder videokodierung
DE69928010T2 (de) Erhöhte videowiedergabebildfrequenz in videoanwendungen
DE60305880T2 (de) Skalierbare gezielte videomehrfachsendung auf basis der bandbreite oder fähigkeit des clients
DE69907689T2 (de) Adaptives digitales video-codec für drahtlose übertragung
DE102013105461A1 (de) Ratensteuerverfahren für mehrschichtige Videocodierung, sowie Videocodiervorrichtung und Videosignalverarbeitungsvorrichtung, welche das Ratensteuerverfahren verwenden
WO2006074851A1 (de) Verfahren und vorrichtung zur verarbeitung von skalierbaren daten
EP1782634A1 (de) Verfahren und vorrichtung zum codieren und decodieren
EP1836852B1 (de) Verfahren und vorrichtungen zur übertragung von skalierbaren daten
DE19644510A1 (de) Verfahren zum Festlegen von Codiertyp und Codiermethode zur Objektformcodierung
EP0892557A1 (de) Bildkompression
EP1829378B1 (de) Bildencodierverfahren, sowie dazugehöriges bilddecodierverfahren, encodiervorrichtung und decodiervorrichtung
US6956973B1 (en) Image compression
DE10022520A1 (de) Verfahren zur örtlichen skalierbaren Bewegtbildcodierung
DE60310128T2 (de) Verfahren zur wavelet-bildcodierung und entsprechendes decodierungsverfahren
EP1285537B1 (de) Verfahren und eine anordnung zur codierung bzw. decodierung einer folge von bildern
WO2002054779A2 (de) Verfahren zur header-kompression bei einer video-codierung
Biemond et al. Hierarchical subband coding of HDTV in BISDN
DE102004011421B4 (de) Vorrichtung und Verfahren zum Erzeugen eines skalierten Datenstroms
DE102004063902B4 (de) Computerprogramm mit einem Verfahren zum Verarbeiten einer Gruppe von Bildern und mit einem Verfahren zum Verarbeiten eines Basisbildes und eines oder mehrerer Erweiterungsbilder
DE69826820T2 (de) Kommunikationssystem und Verfahren für die Übertragung eines Videosignals
EP4169253A1 (de) Verfahren und vorrichtungen zur codierung von bilddaten
DE102004011422B4 (de) Vorrichtung und Verfahren zum Verarbeiten einer Gruppe von Bildern und Vorrichtung und Verfahren zum Verarbeiten eines Basisbildes und eines oder mehrerer Erweiterungsbilder
WO2001028252A1 (de) Progressive fehlertolerante codierung bzw. decodierung einer folge von bildern
WO2000046998A1 (de) Verfahren und anordnung zur transformation eines bildbereichs
WO2008006806A2 (de) Skalierbare videokodierung

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
REEP Request for entry into the european phase

Ref document number: 2006725424

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2006725424

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2008505859

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 11918400

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWW Wipo information: withdrawn in national office

Ref document number: DE

NENP Non-entry into the national phase

Ref country code: RU

WWE Wipo information: entry into national phase

Ref document number: 1020077026262

Country of ref document: KR

WWW Wipo information: withdrawn in national office

Ref document number: RU

WWE Wipo information: entry into national phase

Ref document number: 200680020936.4

Country of ref document: CN

WWP Wipo information: published in national office

Ref document number: 2006725424

Country of ref document: EP