EP1057292B1 - Technique rapide de transformation de frequences destinee a des codeurs audio a transformee - Google Patents

Technique rapide de transformation de frequences destinee a des codeurs audio a transformee Download PDF

Info

Publication number
EP1057292B1
EP1057292B1 EP98909964A EP98909964A EP1057292B1 EP 1057292 B1 EP1057292 B1 EP 1057292B1 EP 98909964 A EP98909964 A EP 98909964A EP 98909964 A EP98909964 A EP 98909964A EP 1057292 B1 EP1057292 B1 EP 1057292B1
Authority
EP
European Patent Office
Prior art keywords
sequence
complex
samples
transform
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
EP98909964A
Other languages
German (de)
English (en)
Other versions
EP1057292A1 (fr
Inventor
Mohammed Javed Absar
Sapna George
Antonio Mario Alvarez-Tinoco
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
STMicroelectronics Asia Pacific Pte Ltd
Original Assignee
STMicroelectronics Asia Pacific Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by STMicroelectronics Asia Pacific Pte Ltd filed Critical STMicroelectronics Asia Pacific Pte Ltd
Publication of EP1057292A1 publication Critical patent/EP1057292A1/fr
Application granted granted Critical
Publication of EP1057292B1 publication Critical patent/EP1057292B1/fr
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/86—Arrangements characterised by the broadcast information itself
    • H04H20/88—Stereophonic broadcast systems
    • H04H20/89—Stereophonic broadcast systems using three or more audio channels, e.g. triphonic or quadraphonic

Definitions

  • This invention is applicable in the field of multi-channel audio coders which use modified discrete cosine transform as a step in the compression of audio signals.
  • the amount of information required to represent the audio signals may be reduced.
  • the amount of digital information needed to accurately reproduce the original pulse code modulation (PCM) samples may be reduced by applying a digital compression algorithm, resulting in a digitally compressed representation of the original signal.
  • the goal of the digital compression algorithm is to produce a digital representation of an audio signal which, when decoded and reproduced, sounds the same as the original signal, while using a minimum of digital information for the compressed or encoded representation.
  • the time domain audio signal is first converted to the frequency domain using a bank of filters.
  • the frequency domain coefficients, thus generated, are converted to fixed point representation.
  • each coefficient is represented as a mantissa and an exponent.
  • the bulk of the compressed bitstream transmitted to the decoder comprises these exponents and mantissas.
  • each mantissa must be truncated to a fixed or variable number of decimal places.
  • the number of bits to be used for coding each mantissa is obtained from a bit allocation algorithm which may be based on the masking property of the human auditory system. Lower numbers of bits result in higher compression ratios because less space is required to transmit the coefficients. However, this may cause high quantization errors, leading to audible distortion.
  • a good distribution of available bits to each mantissa forms the core of the advanced audio coders.
  • the frequency transformation phase has one of the greatest computation requirements in a transform coder. Therefore, an efficient implementation of this phase can decrease the computation requirement of the system significantly and make real time operation of the encoder more easily attainable.
  • the frequency domain transformation of signals is performed by the modified discrete cosine transform (MDCT).
  • MDCT discrete cosine transform
  • the MDCT requires O ( N 2 ) additions and multiplications.
  • FFT Fast Fourier Transform
  • J.W. Cooley and J.W. Tukey (1960) A known application of an FFT to an MDCT is disclosed in, for example, EP-A-0564089.
  • the present invention seeks to provide an alternative computation method using a Fast Fourier Transform. Moreover, the invention seeks to use a single FFT for two channels to achieve greater reduction in computational requirements of the system.
  • the present invention further provides a method for coding audio data as defined in claim 14, including the steps of:
  • the modified discrete cosine transform equation can be expressed as where x[n] is the input sequence for a channel and N is the transform length. Instead of evaluating X k in the form given above it could be computed as where The symbol j represents the imaginary number -1 .
  • a complex variable z[ n ] x [ n ] ⁇ e j ⁇ n / N + jy [ n ] ⁇ e j ⁇ n / N is defined, where x [ n ] and y[ n ] are sample sequence for the two channels and e j ⁇ n / N represents the pre-multiplication factor.
  • the frequency coefficient Z k for the variable z [ n ] is computed.
  • the windowing function can be combined with the pre-processing stage.
  • the input to an audio coder comprises a stream of digitised samples of the time domain analog signal.
  • the stream consists of interleaved samples for each channel.
  • the input stream is sectioned into blocks, each block containing N consecutive samples of each channel (see Fig. 1).
  • the N samples of a channel form a sequence ⁇ x [0], x [1], x [2], ..., x [ N -1] ⁇ .
  • the time domain samples are next converted to the frequency domain using an analysis filter bank (see Fig. 2).
  • the frequency domain coefficients, thus generated, form a coefficient set which can be identified as ( X 0 , X 1 , X 2 , ..., X N /2-1 ).Since the signal is real only the first N /2 frequency components are considered.
  • X 0 is the lowest frequency (DC) component while X N / 2-1 is the highest frequency component of the signal.
  • Audio compression essentially entails finding how much of the information in the set ( X 0 , X 1 , X 2 , ..., X N /2-1 ) is necessary to reproduce the original analog signal at the decoder with minimal audible distortion.
  • the coefficient set is normally converted into floating point format, where each coefficient is represented by an exponent and mantissa.
  • The.exponent set is usually transmitted in its original form.
  • the mantissa is truncated to a fixed or variable number of decimal places.
  • the value of number of bits for coding a mantissa is usually obtained from a bit allocation algorithm which for advanced psychoacoustic coders may be based on the masking property of the human auditory system.
  • a low number of bits results in high compression ratio because less space is required to transmit the coefficients. However this causes very high quantization error leading to audible distortion.
  • a good distribution of available bits to each mantissa forms the core of the most advanced encoders.
  • the frequency domain transformation of signals is performed by the (MDCT) modified discrete cosine transform (Eq. 1). If directly implemented in the form given above, the MDCT requires O(N 2 ) additions and multiplications.
  • Eq. 1 can be transformed to Eq. 2, a careful analysis shows that this is indeed possible.
  • a 1 can thus be evaluated from Eq. 8 and Eq. 9
  • G k g k,r +g k,i , where g k,r and g k,i ⁇ (set of real numbers) in Eq. 12 is essentially the same as F k in Eq. 2. Therefore the FFT approach can be used to evaluate G k . This brings down computation from O ( N 2 ) to O ( N log N ). Similarly, the second term A 2 in Eq. 8 and Eq. 9 can be evaluated where
  • G k g k,r + jg k,l is computed in O ( N log N ) operation by use of FFT algorithms.
  • the additional operation outlined in Eq. 16 to extract the final X k is only of order O ( N ). Therefore the MDCT can now be computed in O ( N log 2 N ) time.
  • the operations required to obtain the MDCT are illustrated in Fig. 3.
  • the multi-channel encoder is required to process m audio channels. Instead of computing an FFT for each channel as described in the previous section, it is possible to further reduce the computational requirement of the coder by combining two channels and using a single FFT only. In effect, instead of m FFTs only m / 2 FFTS need to be computed.
  • DFT for any two channels can be computed with only one FFT block by considering the input as a complex number.
  • the real part is formed from the sequence for any one channel and the imaginary part is from data of another channel. After the Fourier Transform is computed for the resulting complex variable, the resulting transform for each channel can be easily retrieved.
  • the input data to the FFT block is actually a complex number (formed by multiplying the real data by complex variable e j ⁇ n / N ).
  • e j ⁇ n / N complex variable
  • using some processing after the FFT one can still compute the DFT of two channel using a single FFT block.
  • the frequency transform length N is decided by the encoder based on temporal and spectral resolution requirements.
  • the input signal is usually analysed with a high frequency bandpass filter to detect the presence of transients. This information is used to adjust the block length, restricting quantization noise associated with the transient within a small temporal region about the transient, avoiding temporal masking.
  • two short transform of length N / 2 each are taken.
  • a single long transform of length N is used, thus providing higher spectral resolution.
  • l is an even number, then since the total is even, it follows that l-m is also even.
  • l / 2 pairs are formed and for each of the l / 2 pairs a single FFT is computed to estimate the MDCT for the original paired channels.
  • the l-m channels are paired to form ( l-m) /2 pairs and for the ( l - m )/2 pairs two short FFTs are computed.
  • a windowing function is usually applied before the time domain signal x [ n ] is transformed to the frequency domain.
  • the invention has been described herein primarily in terms of its mathematical derivation and application, and the procedures required for implementation, it will be readily recognised by those skilled in the art that the procedures described can be implemented by means of any desired computational apparatus.
  • the invention may be embodied in computer software operating on general purpose computing equipment, or may be embodied in purpose built circuitry or contained in microcode or the like in an integrated circuit or set of integrated circuits.
  • T 1 1/2( e j ⁇ ( k +1/2)/ N G k + e - j ⁇ ( k +1/2)/ N G k * )
  • T 2 1/2 j ( e j ⁇ ( k +1/2)/ N G k - e - j ⁇ ( k -1/2)/ N G k * )

Claims (14)

  1. Procédé de codage de données audio comprenant les étapes de :
    obtention d'au moins une séquence d'entrée d'échantillons audio numériques ;
    prétraitement des échantillons de séquence d'entrée, comportant l'application d'un facteur de multiplication préalable afin d'obtenir des échantillons de séquence d'entrée modifiés ;
    transformation des échantillons de séquence d'entrée modifiés en une séquence de coefficients de transformée utilisant une transformée rapide de Fourier ; et
    post-traitement de la séquence de coefficients de transformée comprenant l'application de premiers facteurs de multiplication postérieurs aux composantes de coefficients réelles et imaginaires, soustraction et combinaison des composantes réelles et imaginaires après multiplication, application de seconds facteurs de multiplication postérieurs aux résultats de la soustraction et de la combinaison, et soustraction afin d'obtenir une séquence de coefficients de transformée en cosinus discrets modifiés représentant ladite séquence d'entrée d'échantillons audio numériques.
  2. Procédé selon la revendication 1, dans lequel le facteur de multiplication préalable et les premiers et seconds facteurs de multiplication postérieurs sont des facteurs sous la forme de fonction trigonométrique.
  3. Procédé selon la revendication 2, dans lequel le facteur de multiplication préalable appliqué à chaque échantillon audio numérique dans la séquence d'entrée est une fonction trigonométrique de la position de séquence d'échantillon audio et du nombre d'échantillons dans la séquence.
  4. Procédé selon la revendication 2, dans lequel les premiers facteurs de multiplication postérieurs pour chaque coefficient de transformée dans la séquence sont des fonctions trigonométriques de la position de séquence de coefficient de transformée et du nombre de coefficients dans la séquence.
  5. Procédé selon la revendication 2, dans lequel le second facteur de multiplication postérieur pour chaque résultat de soustraction ou de combinaison est une fonction trigonométrique de la position de séquence de coefficient de transformée des coefficients utilisés dans la soustraction ou la combinaison.
  6. Procédé selon l'une quelconque des revendications 1 à 5, dans lequel les opérations de prétraitement sont exécutées de manière individuelle sur chaque échantillon dans la séquence d'entrée.
  7. Procédé selon l'une quelconque des revendications 1 à 6, dans lequel les opérations de post-traitement sont exécutées de manière individuelle sur chaque coefficient de transformée dans la séquence.
  8. Procédé de codage de données audio comprenant les étapes de:
    obtention de première et seconde séquences d'entrée d'échantillons audio numériques correspondant à des premier et second canaux audio respectifs ;
    combinaison des première et seconde séquences d'entrée d'échantillons audio numériques en une séquence d'échantillon d'entrée complexe unique ;
    prétraitement des échantillons de séquence d'entrée complexes, comprenant l'application d'un facteur de multiplication préalable afin d'obtenir des échantillons de séquence d'entrée complexes modifiés ;
    transformation des échantillons de séquence d'entrée complexes modifiés en une séquence de coefficient de transformée complexe en utilisant une transformée rapide de Fourier ; et
    post-traitement de la séquence des coefficients de transformée complexes afin d'obtenir des première et seconde séquences de coefficients du domaine fréquentiel à codage audio correspondant aux premier et second canaux audio comprenant, pour chaque coefficient du domaine fréquentiel correspondant dans les première et seconde séquences, la sélection des premier et second coefficients de transformée complexes à partir de ladite séquence de coefficients de transformée complexes, la combinaison du premier coefficient de transformée complexe et du conjugué complexe du second coefficient de transformée complexe pour ledit premier canal et la soustraction du premier coefficient de transformée complexe et du conjugué complexe du second coefficient de transformée complexe pour ledit second canal, et l'application de facteurs de multiplication postérieurs respectifs lors de la combinaison et de la soustraction afin d'obtenir des coefficients du domaine fréquentiel à codage audio correspondant aux premier et second canaux audio.
  9. Procédé selon la revendication 8, dans lequel le facteur de multiplication préalable pour chaque échantillon dans la séquence d'échantillon d'entrée complexe comprend une fonction trigonométrique complexe de la position de séquence d'échantillon d'entrée complexe et du nombre d'échantillons dans la séquence.
  10. Procédé selon la revendication 8 ou 9, dans lequel le post-traitement pour chacun des premier et second canaux comprend l'application de premiers facteurs de multiplication postérieurs aux composantes de coefficients réelles et imaginaires, la soustraction et la combinaison des composantes réelles et imaginaires après multiplication, l'application de seconds facteurs de multiplication postérieurs aux résultats de soustraction et de combinaison et la soustraction afin d'obtenir une séquence de coefficients de transformée en cosinus discrets modifiés représentant ladite séquence d'entrée d'échantillons audio numériques.
  11. Procédé de codage de données audio selon la revendication 8, comprenant l'examen desdites première et seconde séquences d'échantillons audio numériques afin de déterminer une longueur de transformée faible ou élevée, et le codage des échantillons audio en utilisant une longueur de transformée faible ou élevée telle que déterminée.
  12. Procédé de codage de données audio comprenant des séquences d'échantillons audio numériques à partir d'une pluralité de canaux audio, comprenant la détermination d'une longueur de transformée pour chacun des canaux, l'appairage des canaux en fonction de leur longueur de transformée déterminée et le codage des échantillons audio des premier et second canaux dans chaque paire, selon la revendication 8, en fonction de la longueur de transformée déterminée.
  13. Procédé de codage de données audio selon l'une quelconque des revendications précédentes, comprenant l'application d'une fonction de fenêtrage en combinaison avec ladite étape d'application d'un facteur de multiplication préalable.
  14. Procédé de codage de données audio, comprenant les étapes de :
    obtention de première et seconde séquences d'entrée d'échantillons audio numériques x[n], y[n] correspondant aux premier et second canaux audio respectifs ;
    combinaison des première et seconde séquences d'entrée d'échantillons audio numériques en une séquence d'échantillons d'entrée complexes unique z[n], dans laquelle z[n] = x[n] +jy[n] ;
    prétraitement des échantillons de séquences d'entrée complexes comprenant l'application d'un facteur de multiplication préalable cos(πn/N) + jsin(πn/N) afin d'obtenir des échantillons de séquence d'entrée complexes modifiés, où N représente le nombre d'échantillons audio dans chacune des première et seconde séquences d'entrée et n = 0, ..., (N-1);
    transformation des échantillons de séquence d'entrée complexes modifiés en une séquence de coefficient de transformée complexe Z k en utilisant une transformée rapide de Fourier, où k = 0, ..., (N/2 - 1) ; et
    post-traitement de la séquence de coefficients de transformée complexes afin d'obtenir des première et seconde séquences de coefficients du domaine fréquentiel à codage audio correspondant aux premier et second canaux audio X k , Y k selon : G k = ( Z k + Z N-k -1 * )/2    k =0... N /2-1 G ' k = ( Z k - Z N-k -1 * )/2 j     k =0... N /2-1 X k = cosγ ∗ ( g k,r cos(π( k +1/2)/ N )- g k,i sin(π( k +1/2)/ N ) - sinγ ∗ ( g k,r sin(π( k +1/2)/ N )+ g k,i cos(π( k +1/2)/ N ) Y k = cosγ ∗ ( g ' k,r cos(π( k +1/2)/ N )- g' k,i sin(π( k +1/2)/ N ) - sinγ ∗ ( g' k,r sin(π( k +1/2)/ N )+ g' k,i cos(π( k +1/2)/ N )
    où G k représente une séquence de coefficient de transformée pour le premier canal ;
       G' k représente une séquence de coefficient de transformée pour le second canal ;
       g k,r et g k,i représentent les composantes de coefficient de transformée réelle et imaginaire de G k ;
       g' k,r et g' k,i représentent les composantes de coefficient de transformée réelle et imaginaire de G' k ;
       Z * N-k-l représente le conjugué complexe de Z N-k-l ; et
       γ(k) = π(2k + 1)/4.
EP98909964A 1998-02-21 1998-02-21 Technique rapide de transformation de frequences destinee a des codeurs audio a transformee Expired - Lifetime EP1057292B1 (fr)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/SG1998/000014 WO1999043110A1 (fr) 1998-02-21 1998-02-21 Technique rapide de transformation de frequences destinee a des codeurs audio a transformee

Publications (2)

Publication Number Publication Date
EP1057292A1 EP1057292A1 (fr) 2000-12-06
EP1057292B1 true EP1057292B1 (fr) 2004-04-28

Family

ID=20429840

Family Applications (1)

Application Number Title Priority Date Filing Date
EP98909964A Expired - Lifetime EP1057292B1 (fr) 1998-02-21 1998-02-21 Technique rapide de transformation de frequences destinee a des codeurs audio a transformee

Country Status (3)

Country Link
EP (1) EP1057292B1 (fr)
DE (1) DE69823557T2 (fr)
WO (1) WO1999043110A1 (fr)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1125235B1 (fr) 1998-10-26 2003-04-23 STMicroelectronics Asia Pacific Pte Ltd. Technique multiprecision destinee a un codeur audio numerique
DE19959156C2 (de) 1999-12-08 2002-01-31 Fraunhofer Ges Forschung Verfahren und Vorrichtung zum Verarbeiten eines zu codierenden Stereoaudiosignals
US6934677B2 (en) 2001-12-14 2005-08-23 Microsoft Corporation Quantization matrices based on critical band pattern information for digital audio wherein quantization bands differ from critical bands
US7240001B2 (en) 2001-12-14 2007-07-03 Microsoft Corporation Quality improvement techniques in an audio encoder
US7502743B2 (en) 2002-09-04 2009-03-10 Microsoft Corporation Multi-channel audio encoding and decoding with multi-channel transform selection
US7299190B2 (en) 2002-09-04 2007-11-20 Microsoft Corporation Quantization and inverse quantization for audio
GB2423451A (en) * 2005-02-16 2006-08-23 Ishce Ltd Inserting a watermark code into a digitally compressed audio or audio-visual signal or file
US7539612B2 (en) 2005-07-15 2009-05-26 Microsoft Corporation Coding and decoding scale factor information
US7831434B2 (en) 2006-01-20 2010-11-09 Microsoft Corporation Complex-transform channel coding with extended-band frequency coding
US7953604B2 (en) 2006-01-20 2011-05-31 Microsoft Corporation Shape and scale parameters for extended-band frequency coding
US7885819B2 (en) 2007-06-29 2011-02-08 Microsoft Corporation Bitstream syntax for multi-process audio decoding

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2646778B2 (ja) * 1990-01-17 1997-08-27 日本電気株式会社 ディジタル信号処理装置
JP2866754B2 (ja) * 1991-03-27 1999-03-08 三菱電機株式会社 演算処理装置
CA2090052C (fr) * 1992-03-02 1998-11-24 Anibal Joao De Sousa Ferreira Methode et appareil de codage di signaux audio
JPH06112909A (ja) * 1992-09-28 1994-04-22 Sony Corp 改良ｄｃｔの信号変換装置
EP0718746B1 (fr) * 1994-12-21 2005-03-23 Koninklijke Philips Electronics N.V. Multiplieur de booth pour fonctions trigonométriques

Also Published As

Publication number Publication date
EP1057292A1 (fr) 2000-12-06
DE69823557T2 (de) 2005-02-03
DE69823557D1 (de) 2004-06-03
WO1999043110A1 (fr) 1999-08-26

Similar Documents

Publication Publication Date Title
EP0990368B1 (fr) Procede et appareil d'abaissement du domaine frequentiel a forcage de commutation de blocs pour fonctions de decodage audio
CN102150207B (zh) 通过二维变换压缩音频比例因子
US5508949A (en) Fast subband filtering in digital signal coding
KR100253136B1 (ko) 저계산 복잡도의 디지탈 필터뱅크
KR100892152B1 (ko) 시간-이산 오디오 신호를 부호화하기 위한 장치 및 방법그리고 부호화 오디오 데이터를 복호화하기 위한 장치 및방법
US5199078A (en) Method and apparatus of data reduction for digital audio signals and of approximated recovery of the digital audio signals from reduced data
EP1393303B1 (fr) Suppression de la redondance de signaux intercanaux dans le codage audio perceptuel
EP1057292B1 (fr) Technique rapide de transformation de frequences destinee a des codeurs audio a transformee
US7680671B2 (en) Multi-precision technique for digital audio encoder
US7512539B2 (en) Method and device for processing time-discrete audio sampled values
EP3020041A1 (fr) Procédé et appareil pour générer, à partir d'une représentation de domaine coefficient de signaux ambiophoniques d'ordre supérieur, une représentation de domaine mixte spatial/coefficient desdits signaux ambiophoniques d'ordre supérieur
KR20110021803A (ko) 2개의 블록 변환으로의 중첩 변환의 분해
US5732386A (en) Digital audio encoder with window size depending on voice multiplex data presence
EP1175030B1 (fr) Méthode et système pour le codage perceptuel de signaux audiophoniques multicanal par transformation en cosinus discrète et cosinus discrète modifiée à cascades
US20070036228A1 (en) Method and apparatus for audio encoding and decoding
US5511094A (en) Signal processor for a sub-band coding system
KR20060036724A (ko) 오디오 신호 부호화 및 복호화 방법 및 그 장치
US6775587B1 (en) Method of encoding frequency coefficients in an AC-3 encoder
US7203717B1 (en) Fast modified discrete cosine transform method
KR100287861B1 (ko) 디지탈 오디오 스테레오 모드에서의 각 채널 비균등 비트할당 장치 및 방법
EP1076295A1 (fr) Méthode de traitement et appareil de codage pour données de trames audio ou vidéo
JP3593201B2 (ja) オーディオ復号装置
US20110191112A1 (en) Encoder
US6873950B1 (en) Method and encoder for bit-rate saving encoding of audio signals
Lanciani Compressed-domain processing of MPEG audio signals

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20000920

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): DE FR GB IT

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: STMICROELECTRONICS ASIA PACIFIC PTE LTD.

17Q First examination report despatched

Effective date: 20030305

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): DE FR GB IT

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

REF Corresponds to:

Ref document number: 69823557

Country of ref document: DE

Date of ref document: 20040603

Kind code of ref document: P

ET Fr: translation filed
PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20050131

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20080213

Year of fee payment: 11

Ref country code: GB

Payment date: 20080129

Year of fee payment: 11

Ref country code: DE

Payment date: 20080208

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20080228

Year of fee payment: 11

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20090221

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20091030

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20090901

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20090221

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20090302

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20090221