EP2176861B1 - Codage hierarchique de signaux audionumeriques - Google Patents

Codage hierarchique de signaux audionumeriques Download PDF

Info

Publication number
EP2176861B1
EP2176861B1 EP08806166A EP08806166A EP2176861B1 EP 2176861 B1 EP2176861 B1 EP 2176861B1 EP 08806166 A EP08806166 A EP 08806166A EP 08806166 A EP08806166 A EP 08806166A EP 2176861 B1 EP2176861 B1 EP 2176861B1
Authority
EP
European Patent Office
Prior art keywords
bits
quantization
shift
coding
law
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
EP08806166A
Other languages
German (de)
English (en)
Other versions
EP2176861A1 (fr
Inventor
Balazs Kovesi
Stéphane RAGOT
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
France Telecom SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by France Telecom SA filed Critical France Telecom SA
Publication of EP2176861A1 publication Critical patent/EP2176861A1/fr
Application granted granted Critical
Publication of EP2176861B1 publication Critical patent/EP2176861B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/18Vocoders using multiple modes
    • G10L19/24Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding

Definitions

  • the present invention relates to a method for hierarchical coding of sound data more particularly for scalar quantization coding.
  • This coding is adapted in particular for the transmission and / or storage of digital signals such as audio-frequency signals (speech, music or other).
  • the present invention relates more particularly to the coding of waveforms such as the coding MIC (for "Coded Pulse Modulation") said PCM (for "Pulse Code Modulation ”) in English where each input sample is individually coded, without prediction.
  • waveforms such as the coding MIC (for "Coded Pulse Modulation") said PCM (for "Pulse Code Modulation ”) in English where each input sample is individually coded, without prediction.
  • the general principle of PCM coding / decoding specified by ITU-T Recommendation G.711 1 is as described with reference to the figure 1 .
  • the input signal is assumed to be defined with a minimum bandwidth of [300-3400 Hz] and sampled at 8 kHz, with a resolution of 16 bits per sample (in so-called "linear PCM" format).
  • the encoder MIC 13 comprises a quantization module PCM10 which receives as input the input signal S.
  • the quantization index I MIC at the output of the quantization module 10 is transmitted via the transmission channel 11 to the decoder 14.
  • the decoder MIC 14 receives at the input the indices I ' MIC coming from the transmission channel, version possibly disturbed by binary errors of I MIC, and realizes an inverse quantization by the inverse quantization module Q -1 MIC 12 to obtain the coded signal S ' Mic .
  • the ITU-T G.711 standardized MIC coding (hereinafter G.711) compresses the signal amplitude by a logarithmic curve before uniform scalar quantization, thereby obtaining a signal-to-noise ratio near constant for a wide dynamic signals.
  • the quantization step in the domain of the original signal is therefore proportional to the amplitude of the signals.
  • the successive samples of the compressed signal are quantized on 8 bits, ie 256 levels.
  • PSTN switched telephone network
  • PSTN Public Switched Telephone Network
  • these 8 bits are transmitted at a frequency of 8 kHz to give a bit rate of 64 kbit / s.
  • a quantized signal frame according to the G.711 standard consists of 8-bit coded quantization indices.
  • the inverse quantization is implemented per table, it simply consists of a pointing by the index of one of the 256 possible decoded values.
  • the PCM compression has been approximated by a linear curve by segments.
  • coding laws make it possible to perform on the signal a compression of the amplitude (or else "companding" in English).
  • the amplitude of the signal is thus “compressed” by a non-linear function at the encoder, sent on a transmission channel and “decompressed” by the inverse function at the decoder.
  • the advantage of amplitude compression is that it makes it possible to transform the probability distribution of the amplitude of the input audio signal into a quasi-uniform probability law, on which a uniform scalar quantization can be applied.
  • the amplitude compression laws are generally laws of the logarithmic type which therefore make it possible to encode a sampled signal with a resolution of 16 bits (in “linear PCM” format) on 8 bits (in “PCM” type A-law format or mu).
  • an original sample of the signal S to be encoded has an amplitude equal to -75. Therefore, this amplitude is in the range [-80, -65] of line 123 (or "level" 123) of the table.
  • the coding of this information consists in delivering a final coded index, referenced I ' Mic on the figure 1 and in Table 1, which is equal to 0x51.
  • VQ 32256 to all the samples whose initial amplitude was in the interval [31744, 32767], or in all 1024 possible values, which corresponds to a quantization step of 1024.
  • the signal-to-noise ratio (SNR) obtained by the PCM coding is approximately constant ( ⁇ 38 dB) for wide signal dynamics.
  • the quantization step in the domain of the original signal is proportional to the amplitude of the signals.
  • This signal-to-noise ratio is not enough to make the quantization noise inaudible over the entire frequency band 0-4000 Hz.
  • the SNR is very bad for low level signals (which are encoded with the first segment)
  • the G.711 standard is generally considered to be of good quality for narrowband telephony applications with terminals limiting the band at [300-3400 Hz]. However, the quality is unsatisfactory when using G.711 for other applications such as for example terminals for good fidelity in the band [50.4000 Hz] or for the expanded bandwidth extension of the G-code. .711.
  • DAVIS AG, TURNBULL RS: "A Scaleable Audio Codec”, EXTERNAL RESEARCH WEB SITE OF BRITISH TELECOM, 1998 discloses a method for rendering a coded data stream sclable by scalar quantization performed sample by sample.
  • Hierarchical coding methods consisting in providing a refinement layer determined from the coding noise of the G.711 coder. This coding noise is then coded by a technique different from G.711, which constitutes the so-called base layer (or core layer).
  • G.711 which constitutes the so-called base layer (or core layer).
  • Such a hierarchical coding method is for example described in the document Y. Hiwasaki, H. Ohmuro, T. Mori, S. Kurihara and A. Kataoka. "A G.711 embedded wideband speech coding for VoIP conferences", IEICE Trans. Inf. & Syst, Vol. E89-D, n ° 9, September 2006 .
  • This type of method has the disadvantage of significantly increasing the complexity of the encoder whereas the type of coding MIC is deemed to be of low complexity.
  • the PCM coding noise being a white noise, and thus uncorrelated, the coding of this type of noise is difficult to implement since the compression techniques are essentially based on
  • the present invention provides a solution that improves the situation.
  • the invention proposes an encoding method as set forth in claim 1.
  • an improvement stream is transmitted at the same time as the bit frame of quantization indices.
  • This extension stream is determined by taking advantage of low-order bits that are not used during encoding. This method therefore has the advantage of not adding complexity to the encoder and to provide the desired quality improvement by providing the decoder the possibility of obtaining a better decoding accuracy.
  • the stored bits are the most significant bits among the bits that are not taken into account in the bit frame of quantization indices.
  • the number of bits taken into account to determine the improvement stream is a function of the available bit rate during a transmission to a decoder.
  • extension stream is scalable during transmission as a function of the available throughput.
  • the invention is particularly suitable in the case where the scalar quantization step is a PCM type quantization according to a logarithmic type A compression compression law or mu type compliant with the ITU-T G.711 standard.
  • the invention also applies to a decoding method as recited in claim 5.
  • the decoder which receives extension bits, thus improves the accuracy of its expansion or "decompression” by concatenating the received extension bits with those present in the quantization index frame received from the base stream.
  • the method further comprises a step of adapting a rounding value according to the number of received extension bits to obtain the decoded audio signal.
  • the detection of the coded audio signal is thus adapted as a function of the number of bits of the extension stream.
  • the invention also relates to an audio encoder as set forth in claim 7.
  • the invention relates to an audio decoder as recited in claim 8.
  • the invention finally relates to a computer program as set forth in claim 9.
  • the figure 2 illustrates a coding / decoding system according to the invention.
  • An encoder 23 comprises a quantizer Q MIC 20 capable of quantizing the input signal S to obtain a quantization index frame I MIC which is transmitted on the transmission channel 21 to a decoder 24.
  • this encoder is of the PCM encoder type and implements a type A or mu encoding law as described in the G.711 standard.
  • the quantization index frame obtained is therefore represented at 15 and conforms to the G.711 law A or mu frame.
  • the pseudo code shown in Appendix A-10 gives an example of the implementation of Law A as described in the G.711 standard (with a piecewise linear approximation of amplitude compression law).
  • a concrete implementation of this pseudo code is also given as an example in Appendix A-10.
  • This implementation complies with the ITU-T Recommendation G.191 Sofware Tool Library (STL-2005), Chapter 13 "ITU-T Basic Operators". This recommendation is available on the ITU website:
  • the 8-bit quantization index comprises the sign bit, the segment index (exp) and the position on the segment (mant).
  • the 4 bits constituting the position on the segment are set at positions 4, 5, 6 and 7 as represented at 15.
  • the decoding can be implemented by simple operations as illustrated by the ITU-T STL-2005 pseudo-code and implementation shown in Appendix A-11.
  • the mu-law version of G.711 is similar to the A-law.
  • the main difference is that we add 128 to the values to ensure that in the first segment bit 7 is always equal to 1, which makes it unnecessary to transmit this bit and therefore increases the precision of the first segment (no quantization 8 in the first segment against 16 in the law A). This also allows identical processing of all segments.
  • we add 4 (so 128 + 4 132 in total) for the rounding to have the level 0 among the quantified values (the law A does not have level 0, the smallest values are 8 or -8) .
  • the price of this best resolution in the first segment is the shift of all segments by 132.
  • Table 3 below gives the thresholds and the quantization step according to each segment for the G.711 mu law.
  • MSB most significant bits
  • the minimum value of the variable "pos" for the coding according to the mu law is 7 since as previously mentioned in the case of the mu law the first segment is treated in the same way as the other segments. There is therefore for all segments at least 3 bits of lower weight that are lost.
  • the decoding can be carried out simply by a simple algorithm, an example is given in appendix A-13.
  • the encoder 23 takes advantage of the coding method according to the laws A or mu by storing in a memory space represented at 27, a part of the low-order bits which have not been taken into account for the coding of the binary field of quantization indices I MIC .
  • the number of bits lost by the A or mu law coding methods increases with the segment number, up to 10 bits for the last segment.
  • the method according to the invention makes it possible to recover at least the most significant bits among these lost bits.
  • the method according to the invention will store in memory 27, the two most significant bits bits that are not taken into account. in the compression operation to determine the quantization index frame.
  • the decoder 24 comprising an inverse quantizer, here an inverse PCM quantizer Q -1 PCM 22, receives in parallel the base stream I ' MIC and the improvement stream I' EXT .
  • the decoder In case of reception of this improvement stream by the reception means 29 of the decoder 24, the decoder will then have a greater precision on the location of the decoded sample in the segment. For this, it concatenates the extension bits to the bits received in the base stream I ' PCM by means of concatenation bits, and then perform an inverse quantization at 22.
  • the improvement stream I EXT consists of two extension bits per sample, ie a bit rate of 16 kbit / s. These extension bits can be obtained by bit shifting in two operations as shown by the pseudo code shown in Appendix A-14.
  • the two stored bits are sent in the extension stream.
  • the two extension bits are the 8th and the 9th bit of the compressed signal.
  • the figure 4 shows a comparison of the quantized values with respect to the input values between the classical A-law (in dashed line) and the A-law with two bits per sample extension (solid line), for the first 128 values.
  • figure 5 shows a comparison of the quantized values with respect to the input values between the classical mu law (in dashed line) and the mu law with two bits per sample extension (solid line), for the first 128 values.
  • the decoder Upon receipt of the enhancement stream I ' EXT , the decoder concatenates the extension bits thus received behind position bits of the base flow I' MIC to effect the amplitude or expansion decompression which is inverse operation of the amplitude compression process.
  • the segment is divided into two. The accuracy on the location in the segment of the decoded value is then greater.
  • the Roundval rounding value that finds the value of the middle of the segment is also adapted according to the number of extension bits received.
  • the information of the number of extension bits received is for example given via an external signaling as represented by the arrow 26 on the figure 2 .
  • the encoder as represented in figure 2 comprises a DSP processor (for "Digital Signal Processor"), not shown here, a memory space 27 for storing at least the bits that will be used to determine the extension stream.
  • DSP processor for "Digital Signal Processor”
  • memory space 27 for storing at least the bits that will be used to determine the extension stream.
  • This memory space 27 may be part of a memory block which furthermore comprises a storage memory and / or a working memory.
  • the storage means may comprise a computer program comprising code instructions for implementing the steps of the coding method according to the invention when they are executed by the encoder processor.
  • the computer program can also be stored on a memory medium readable by an encoder reader or downloadable in the encoder memory space.
  • This encoder thus implements the method according to the invention as set forth in claim 1.
  • the decoder comprises a processor of the DSP type not shown here and is able to implement the method as set forth in claim 5.
  • This decoder further comprises a storage means (not shown) capable of storing a computer program comprising code instructions for implementing the steps of the decoding method according to the invention when they are executed by the decoder processor. .
  • the computer program can also be stored on a memory medium readable by a decoder reader or downloadable in the decoder memory space.
  • the LSB "ext_bits" of the "ext” variable are sent to the enhancement stream.
  • the invention also applies in the case where the transmission rate the flow must be reduced.
  • the extension stream comprises two bits, the least significant bit of this extension stream is no longer transmitted.
  • the decoder then receives only one extension bit per sample.
  • the decoder as described in the exemplary pseudo-code will work correctly with this one bit-per-sample extension layer provided that the received extension bit is set in the variable "ext" to position 1, the position bit 0 of the variable "ext” is then set to 0 and the value of "roundval" is adapted accordingly.
  • variable "roundval” as used in the examples given is therefore a function of the number of bits received by the encoder and the law used (A or mu). Table 4 below gives the value of the variable "roundval” in the different situations. Table 4 The value of the variable "round val” in different configurations improvement bits received by the encoder 0 1 2 3 Law A 8 4 2 1 Mu law 4 2 1 0
  • the increase of the RSB is 12 dB, if a bit is received, the increase of the RSB is 6 dB.
  • the encoder can send 4 bits per sample in the extension layer and the decoder can receive 4, 3, 2, 1 or 0 of these bits, the quality of the decoded signal will be proportional with the number of extension bits received.
  • the invention will be implemented not according to the algorithms previously specified by pseudo-code but by pre-calculating and storing in levels at the coder and / or the decoder the levels making it possible to obtain the bits. extension.
  • this solution has the disadvantage of requiring greater memory capacity in both the encoder and the decoder for a gain in low complexity.

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Description

  • La présente invention concerne un procédé de codage hiérarchique de données sonores plus particulièrement pour un codage par quantification scalaire.
  • Ce codage est adapté notamment pour la transmission et/ou au stockage de signaux numériques tels que des signaux audiofréquences (parole, musique ou autres).
  • La présente invention se rapporte plus particulièrement au codage de formes d'onde tel que le codage MIC (pour "Modulation par Impulsions Codées") dit PCM (pour "Pulse Code Modulation") en anglais où chaque échantillon d'entrée est codé individuellement, sans prédiction.
  • Le principe général du codage/décodage MIC spécifié par la recommandation UIT-T G.711 1 est tel que décrit en référence à la figure 1. Le signal d'entrée est supposé défini avec une largeur de bande minimale de [300-3400 Hz] et échantillonné à 8 kHz, avec une résolution de 16 bits par échantillon (en format dit "MIC linéaire").
  • Le codeur MIC 13 comporte un module de quantification QMIC 10 qui reçoit en entrée le signal d'entrée S. L'indice de quantification IMIC en sortie du module de quantification 10 est transmis via le canal de transmission 11 au décodeur 14.
  • Le décodeur MIC 14 reçoit en entrée les indices I'MIC issu du canal de transmission, version éventuellement perturbée par des erreurs binaires de IMIC, et réalise une quantification inverse par le module de quantification inverse Q-1 MIC 12 pour obtenir le signal codé S'Mic.
  • Le codage MIC normalisé UIT-T G.711 (ci-après nommé G.711) réalise une compression de l'amplitude des signaux par une courbe logarithmique avant quantification scalaire uniforme, ce qui permet d'obtenir un rapport signal à bruit à peu près constant pour une large dynamique de signaux. Le pas de quantification dans le domaine du signal original est donc proportionnel à l'amplitude des signaux.
  • Les échantillons successifs du signal compressé sont quantifiés sur 8 bits, soit 256 niveaux. Dans le réseau téléphonique commuté (RTC) dit Public Switched Telephone Network (PSTN) en anglais, ces 8 bits sont transmis à une fréquence de 8 kHz pour donner un débit de 64 kbits/s.
  • Une trame de signal quantifié selon la norme G.711 est constituée d'indices de quantification codés sur 8 bits. Ainsi, si la quantification inverse est implantée par table, elle consiste simplement à un pointage par l'indice de l'une des 256 valeurs décodées possibles.
  • Pour des raisons de complexité de mise en oeuvre, la compression MIC a été approximée par une courbe linéaire par segments.
  • Deux lois de codages sont définies dans la norme G.711, la loi A utilisée principalement en Europe et la loi mu (µ) utilisée en Amérique du Nord et au Japon.
  • Ces lois de codage permettent d'effectuer sur le signal une compression de l'amplitude (ou encore "companding" en anglais). L'amplitude du signal est ainsi "compressée" par une fonction non-linéaire au niveau du codeur, envoyée sur un canal de transmission et "décompressée" par la fonction inverse au niveau du décodeur. L'intérêt de la compression d'amplitude est qu'elle permet de transformer la distribution de probabilité de l'amplitude du signal audio d'entrée en une loi de probabilité quasi-uniforme, sur laquelle on peut appliquer une quantification scalaire uniforme.
  • Les lois de compression d'amplitude sont en général des lois de type logarithmique qui permettent donc de coder un signal échantillonné avec une résolution de 16 bits (en format "PCM linéaire") sur 8 bits (en format "PCM" de type loi A ou mu).
  • Les 8 bits par échantillon dans G.711 sont répartis de la façon suivante telle que représenté en 15 à la figure 1:
    • 1 bit de signe S (0 pour une valeur négative, 1 sinon), portant la référence sgn sur la figure 1,
    • 3 bits pour indiquer le segment (référence ID-SEG sur la figure 1), l'extrémité de chaque segment étant donnée par 256*2n pour la loi A et 256*2n-132 pour la loi mu où n = 0,1,...,7. Le pas de quantification est donc multiplié par 2 quand on passe sur le segment supérieur (à partir du 2ème segment pour la loi A).
    • 4 bits pour indiquer l'emplacement sur le segment, portant la référence ID-POS sur la figure 1.
  • Les derniers 7 bits constituent donc la valeur absolue codée. Dans la suite nous étudierons d'abord le cas de loi A, puis nous généralisons les résultats pour la loi mu. Selon la norme G.711 loi A, l'indice final est obtenu en inversant chaque deuxième bit à partir de bit de poids le plus faible (Least Significant Bit LSB en anglais). Cette loi de codage permet d'avoir une précision de quantification scalaire de 12 bits (donc un pas de quantification de 16) quand on est sur les deux premiers segments, puis la précision diminue de 1 bit quand le numéro de segment augmente de 1.
  • On peut noter qu'il est possible de réaliser la quantification MIC G.711 à partir d'un signal numérique représenté sur 16 bits en effectuant de simples comparaisons entre l'amplitude de l'échantillon à coder et les seuils de décision du quantificateur. L'utilisation d'une dichotomie accélère de façon significative ces comparaisons. Cette solution nécessite le stockage d'un tableau de 256 entrées, le Tableau 1 ci-après donne un extrait d'un tel tableau pour la loi A G.711. Tableau 1 Seuils pour la recherche par dichotomie
    N° de l'intervalle Seuil inférieur Seuil supérieur Signe Valeur absolue codé Indice final Valeur quantifiée
    0 -32768 -31745 0 127 0x2a -32256
    1 -31744 -30721 0 126 0x2b -31232
    ... ... ... ... ...
    122 -96 -81 0 5 0x50 -88
    123 -80 -65 0 4 0x51 -72
    124 -64 -49 0 3 0x56 -56
    125 -48 -33 0 2 0x57 -40
    126 -32 -17 0 1 0x54 -24
    127 -16 -1 0 0 0x55 -8
    128 0 15 1 0 0xd5 8
    129 16 31 1 1 0xd4 24
    130 32 47 1 2 0xd7 40
    131 48 63 1 3 0xd6 56
    132 64 79 1 4 0xd1 72
    133 80 95 1 5 0xd0 88
    ... ... ... ... ...
    254 30720 31743 1 126 0xab 31232
    255 31744 32767 1 127 0xaa 32256
  • Par exemple, un échantillon d'origine du signal S à coder a une amplitude égale à -75. Par conséquent, cette amplitude est comprise dans l'intervalle [-80, -65] de la ligne 123 (ou « niveau » 123) du tableau. Le codage de cette information consiste à délivrer un indice final codé, référencé I'Mic sur la figure 1 et sur le tableau 1, qui est égal à 0x51. Au décodage, l'opération de quantification inverse consiste donc à récupérer l'indice I'Mic = 0x51 et à lui faire correspondre une valeur quantifiée VQ, telle que VQ = -72. Par conséquent, le décodage affecte à l'amplitude de l'échantillon correspondant, du signal décodé S'Mic , cette valeur -72. On relèvera que l'on affecterait cette même valeur VQ = -72 à tous les échantillons à décoder et dont l'amplitude initiale avait une valeur dans l'intervalle [-80, -65], soit en tout 16 valeurs possibles dans l'intervalle, ce qui correspond au pas de quantification ici de 16. En revanche, on relèvera que l'on affecterait la même valeur VQ = 32256 à tous les échantillons dont l'amplitude initiale était dans l'intervalle [31744, 32767], soit en tout 1024 valeurs possibles, ce qui correspond à un pas de quantification de 1024.
  • Le rapport signal à bruit (RSB) obtenu par le codage MIC est à peu près constant (~38 dB) pour une large dynamique de signaux. Le pas de quantification dans le domaine du signal original est proportionnel à l'amplitude des signaux. Ce rapport signal à bruit n'est pas suffisant pour rendre le bruit de quantification inaudible sur toute la bande de fréquences 0-4000 Hz. De plus, pour les signaux de faibles niveaux (qui sont codés avec le premier segment) le RSB est très mauvais.
  • La norme G.711 est généralement considérée comme étant de bonne qualité pour les applications de téléphonie en bande étroite avec des terminaux limitant la bande à [300-3400 Hz]. Cependant, la qualité n'est pas satisfaisante quand on utilise G.711 pour d'autres applications comme par exemple pour des terminaux de bonne fidélité dans la bande [50,4000 Hz] ou pour l'extension hiérarchique en bande élargie du codage G.711.
  • DAVIS A G, TURNBULL R S: "A Scaleable Audio Codec", EXTERNAL RESEARCH WEB SITE OF BRITISH TELECOM, 1998, divulgue une méthode pour rendre sclable un flux de données codé par une quantification scalaire effectuée échantillon par échantillon.
  • Il existe en effet des méthodes de codage hiérarchique consistant à apporter une couche d'amélioration déterminée à partir du bruit de codage du codeur G.711. Ce bruit de codage est alors codé par une technique différente de G.711, lequel constitue la couche dite de base (ou couche coeur). Une telle méthode de codage hiérarchique est par exemple décrite dans le document Y. Hiwasaki, H. Ohmuro, T. Mori, S. Kurihara and A Kataoka. "A G.711 embedded wideband speech coding for VoIP conferences", IEICE Trans. Inf. & Syst, Vol. E89-D,n°9, September 2006. Ce type de méthode a l'inconvénient d'augmenter de façon très significative de la complexité au codeur alors que le codage de type MIC est réputée être de faible complexité. De plus, le bruit de codage MIC étant un bruit blanc, donc non corrélé, le codage de ce type de bruit est difficile à mettre en oeuvre puisque les techniques de compression reposent essentiellement sur des propriétés d'extraction de la corrélation du signal à coder.
  • La présente invention offre une solution qui améliore la situation.
  • A cet effet, l'invention propose un procédé de codage comme éconcé dans la revendication 1.
  • Ainsi, un flux d'amélioration est transmis en même temps que le la trame binaire d'indices de quantification.
  • Ce flux d'extension est déterminé en tirant profit des bits de poids faible qui ne sont pas utilisé lors du codage. Cette méthode a donc l'avantage de ne pas ajouter de complexité au codeur et d'apporter l'amélioration de qualité souhaitée en apportant au décodeur la possibilité d'obtenir une meilleure précision de décodage.
  • Dans un mode de réalisation, les bits mémorisés sont les bits de poids le plus fort parmi les bits qui ne sont pas pris en compte dans la trame binaire d'indices de quantification.
  • Tous les bits laissés de coté lors de l'application de la loi de codage logarithmique ne sont pas forcément repris dans le flux d'extension. Il est ainsi possible de déterminer un flux d'extension en fonction des besoins en qualité et disponibilité en termes de débit.
  • Dans une variante de réalisation, le nombre de bits pris en compte pour déterminer le flux d'amélioration est fonction du débit disponible au cours d'une transmission vers un décodeur.
  • Ainsi, le flux d'extension est modulable au cours de la transmission en fonction du débit disponible.
  • L'invention est particulièrement adaptée au cas où l'étape de quantification scalaire est une quantification de type MIC selon une loi de codage logarithmique de compression d'amplitude de type A ou de type mu conforme à la norme ITU-T G.711.
  • L'invention s'applique également à un procédé de décodage comme éconcé dans la revendication 5..
  • Le décodeur qui reçoit des bits d'extension, améliore ainsi la précision de son expansion ou "décompression" en concaténant les bits d'extension reçus à ceux présents dans la trame d'indices de quantification reçu du flux de base.
  • Dans un mode préféré de réalisation, le procédé comporte en outre une étape d'adaptation d'une valeur d'arrondi en fonction du nombre de bits d'extension reçu pour obtenir le signal audio décodé.
  • La détection du signal audio codé est ainsi adaptée en fonction du nombre de bits du flux d'extension.
  • L'invention se rapporte également à un codeur audio comme éconcé dans la revendication 7.
  • L'invention se rapporte à un décodeur audio comme éconcé dans la revendication 8.
  • L'invention vise enfin à un programme informatique comme éconcé dans la revendication 9.
  • De même, l'invention vise à un programme informatique comme éconcé dans la revendication 10.
  • D'autres caractéristiques et avantages de l'invention apparaîtront plus clairement à la lecture de la description suivante, donnée uniquement à titre d'exemple non limitatif, et faite en référence aux dessins annexés, sur lesquels:
    • la figure 1 illustre un système de codage/décodage MIC G.711 classique de l'état de l'art;
    • la figure 2 illustre un système de codage/décodage selon l'invention ainsi que les procédés selon l'invention, mis en oeuvre par les éléments de ce système;
    • les figures 3a et 3b représentent les valeurs quantifiées par rapport aux valeurs d'entrée après application des lois de codage respectives A et mu selon la norme G.711;
    • les figures 4 et 5 représentent une comparaison avec et sans mise en oeuvre de l'invention des valeurs quantifiées par rapport aux valeurs d'entrée après application des lois de codage A et mu respectivement.
  • La figure 2 illustre un système de codage /décodage selon l'invention.
  • Un codeur 23 comprend un quantificateur QMIC 20 apte à quantifier le signal d'entrée S pour obtenir une trame d'indices de quantification IMIC qui est transmis sur le canal de transmission 21 vers un décodeur 24.
  • Dans un mode particulier de réalisation, ce codeur est du type codeur MIC et met en oeuvre une loi de codage de type A ou mu tel que décrit dans la norme G.711.
  • La trame d'indices de quantification obtenue est donc représentée en 15 et est conforme à la trame de type G.711 loi A ou mu.
  • Des méthodes d'implémentation des lois de codage A et mu sont proposées dans la norme G.711. Elles consistent à déterminer l'indice final de quantification par des opérations simples de basse complexité qui évitent le stockage d'importants tableaux de valeurs.
  • Ainsi, le pseudo code représenté dans l'annexe A-10 donne un exemple de mise en oeuvre de la loi A tel que décrit dans la norme G.711 (avec une approximation linéaire par morceaux de loi de compression d'amplitude). Une implémentation concrète de ce pseudo code est également donnée à titre d'exemple dans l'annexe A-10. Cette implémentation est conforme à la recommandation ITU-T G.191 Sofware Tool Library (STL-2005), chapitre 13 « ITU-T Basic Operators ». Cette recommandation est accessible sur le site Internet de l'ITU :
  • http://www.itu.int/rec/T-REC-G.191-200508-I/en
  • On voit dans ce pseudo-code que l'indice de quantification sur 8 bits comprend le bit signe (signe), l'indice du segment (exp) et la position sur le segment (mant).
  • Dans une première partie de ce codage, on détermine le bit de signe que l'on met à la position 0 comme indiqué en 15 sur la figure 1. Ensuite, on cherche la position du bit de poids le plus fort "pos" et on calcule le numéro de segment que l'on code sur 3 bits que l'on met à la position 1, 2 et 3 comme représenté en 15 à la figure 1.
  • Les 4 bits constituant la position sur le segment sont mis aux positions 4, 5, 6 et 7 comme représenté en 15.
  • Il y a toujours un décalage de bits à droite d'au moins 4 bits (x = shift_rignt (x, pos - 4)) et donc 4 bits perdus;
  • On n'utilise donc que les bits de poids le plus fort (Most Significant Bit MSB en anglais) pour constituer la trame d'indices de quantification. La variable minimum de la variable "pos" pour le codage selon la loi A est de 8. Il y a donc pour tous les segments au moins 4 bits de poids plus faible qui sont perdus. La compression du processus de compression d'amplitude est ainsi effectuée.
  • Pour un signal d'entrée d'une résolution de 16 bits par échantillon (en format "PCM linéaire"), le plus petit pas de quantification est 16, les 4 bits de poids plus faible étant perdus. Le tableau 2 ci-après donne les seuils et pas de quantification en fonction de chaque segment pour la G.711 loi A. Tableau 2 Pas de quantification G.711 loi A
    Segment Seuil inférieur Seuil supérieur Pas de quantification
    0 0 255 16
    1 256 511 16
    2 512 1023 32
    3 1024 2047 64
    4 2048 4095 128
    5 4096 8191 256
    6 8192 16383 512
    7 16384 32767 1024
  • De la même façon, le décodage peut être mis en oeuvre par des opérations simples comme l'illustre le pseudo-code et l'implémentation ITU-T STL-2005 représentés dans l'annexe A-11.
  • On peut voir dans ce pseudo code que le signe (signe), le segment (exp) et la valeur dans le segment (val) sont retrouvés à partir de l'indice de 8 bits (indice). Une valeur d'arrondi égale à 8 et correspondant à la moitié du pas de quantification utilisé pour un segment est appliqué pour obtenir la valeur du milieu de l'intervalle de quantification. Ainsi, l'inversion du processus de compression d'amplitude est effectuée. Les bits les moins significatifs qui ont été rejetés au codage sont retrouvés ici après approximation.
  • La version loi mu de G.711 est similaire à la loi A. La différence principale est qu'on additionne 128 aux valeurs pour assurer que dans le premier segment le bit 7 est toujours égal à 1 ce qui rend inutile la transmission de ce bit et donc augmente la précision du premier segment (pas de quantification 8 dans le premier segment contre 16 dans la loi A). Cela permet également un traitement identique de tous les segments. De plus on additionne 4 (donc 128+4 = 132 au total) pour l'arrondi pour avoir le niveau 0 parmi les valeurs quantifiées (la loi A n'a pas de niveau 0, les plus petites valeurs sont 8 ou -8). Le prix de cette meilleure résolution dans le premier segment est le décalage de tous les segments par 132. Le Tableau 3 ci-après donne les seuils et le pas de quantification en fonction de chaque segment pour la G.711 loi mu. Tableau 3 Pas de quantification G.711 loi mu
    Segment Seuil inférieur Seuil supérieur Pas de quantification
    0 0 123 8
    1 124 379 16
    2 380 891 32
    3 892 1915 64
    4 1916 3963 128
    5 3964 8059 256
    6 8060 16251 512
    7 16252 32635 1024
  • Les figures 3a et 3b permettent de comparer la résolution de ces deux lois pour les 512 premières valeurs.
  • De la même façon que pour la loi A, une méthode de mise en oeuvre sans stockage de tableaux de valeurs est donnée par un exemple de pseudo-code d'encodage selon la norme G.711 loi mu représenté dans l'annexe A-12.
  • De la même façon que pour la loi A, on voit dans ce pseudo-code qu'il y a toujours un décalage de bits à droite d'au moins 3 bits (x = shift-right (x, pos - 4)), la valeur minimale de « pos » étant 7 pour la loi mu.
  • On n'utilise donc que les bits de poids le plus fort (MSB) pour constituer la trame d'indices de quantification et ainsi effectuer l'étape de compression d'amplitude.
  • La valeur minimale de la variable "pos" pour le codage selon la loi mu est de 7 puisque comme mentionné précédemment dans le cas de la loi mu le premier segment est traité de même façon que les autres segments. Il y a donc pour tous les segments au moins 3 bits de poids plus faible qui sont perdus.
  • Comme pour la loi A, le décodage peut s'effectuer simplement par un algorithme simple, un exemple est donné en annexe A-13.
  • Le codeur 23 selon l'invention tire partie de la méthode de codage selon les lois A ou mu en mémorisant dans un espace mémoire représenté en 27, une partie des bits de poids faible qui n'ont pas été pris en compte pour le codage de la trame binaire d'indices de quantification IMIC.
  • Ainsi, comme mentionné précédemment pour le codage logarithmique selon les lois A ou mu, au moins 3 bits pour tous les segments peuvent être mémorisées.
  • Le nombre de bits perdus par les méthodes de codage selon la loi A ou mu, augmente avec le numéro du segment, jusqu'à 10 bits pour le dernier segment.
  • Le procédé selon l'invention permet de récupérer au moins les bits de poids le plus fort parmi ces bits perdus.
  • Pour déterminer un flux d'amélioration d'un débit de 16 kbit/s, donc de 2 bits par échantillon, le procédé selon l'invention mémorisera en mémoire 27, les deux bits de poids forts des bits qui ne sont pas pris en compte dans l'opération de compression pour déterminer la trame d'indices de quantification.
  • Ces bits sont récupérés pour déterminer en 28 par des moyens de détermination du flux d'extension, le flux d'amélioration IEXT. Ce flux d'amélioration est ensuite transmis via un autre canal de transmission 25 vers un décodeur 24.
  • Ainsi, le décodeur 24 comportant un quantificateur inverse, ici un quantificateur MIC inverse Q-1 MIC 22, reçoit en parallèle le flux de base I'MIC et le flux d'amélioration I'EXT.
  • Ces flux I'MIC et I'EXT sont des versions éventuellement perturbées par des erreurs binaires de IMIC et de IEXT respectivement.
  • En cas de réception de ce flux d'amélioration par les moyens de réception 29 du décodeur 24, le décodeur aura alors une plus grande précision sur l'emplacement de l'échantillon décodé dans le segment. Pour cela, il concatène les bits d'extension aux bits reçus dans le flux de base I'MIC par des moyens 30 de concaténation de bits, pour ensuite effectuer une quantification inverse en 22.
  • En effet, l'apport d'un bit supplémentaire permet de multiplier par deux le nombre de niveaux des segments. Le fait de doubler le nombre de niveaux, augmente aussi le rapport signal à bruit de 6 dB. Ainsi, pour chaque bit ajouté dans le flux d'amélioration et reçu au décodeur, le rapport signal à bruit sera augmenté de 6 dB, ce qui augmente ainsi la qualité du signal décodé sans pour autant augmenter considérablement la complexité au codeur.
  • Dans l'exemple illustré à la figure 2, le flux d'amélioration IEXT est constitué de deux bits d'extension par échantillon, soit un débit de 16kbit/s. Ces bits d'extension peuvent être obtenus en faisant un décalage de bits en deux opérations comme le montre le pseudo code représenté en annexe A-14.
  • On peut voir qu'au lieu de décaler en un seul coup les bits par "pos-4" position pour ne garder que les 5 bits de poids le plus fort, comme c'est le cas dans le codage selon la loi A, on décale dans un premier temps 2 positions de moins (donc "pos-6" positions) pour garder les 7 bits de poids le plus fort et on mémorise en 27 les deux derniers bits. Puis dans une autre étape, on décale encore de deux bits pour obtenir les 5 bits de poids fort dont le premier bit toujours à 1 est non transmis. Les 4 autres sont utilisés pour le flux de base.
  • Les deux bits mémorisés sont envoyés dans le flux d'extension.
  • Comme représenté sur la figure 2, on peut considérer que ces deux bits d'extension sont le 8ième et le 9ième bit du signal compressé.
  • Le pseudo code permettant de faire l'ensemble des opérations au codeur pour la loi A est donné en annexe A-15.
  • On voit que les différences par rapport au codage G.711 classique (passages soulignés et en gras dans l'annexe) sont les étapes de décalage en deux temps comme explicité précédemment et la prise en compte de ces deux bits mémorisés pour déterminer le flux d'amélioration "ext" et le transmettre.
  • De même pour l'implémentation de la loi mu, le pseudo code correspondant pour le codage est représenté dans l'annexe A-16.
  • On remarque les mêmes différences avec le codage classique que pour le codage selon la loi A.
  • La figure 4 montre une comparaison des valeurs quantifiées par rapport aux valeurs d'entrée entre la loi A classique (en pointillé) et la loi A avec extension de deux bits par échantillon (trait continu), pour les 128 premières valeurs.
  • De même, la figure 5 montre une comparaison des valeurs quantifiées par rapport aux valeurs d'entrée entre la loi mu classique (en pointillé) et la loi mu avec extension de deux bits par échantillon (trait continu), pour les 128 premières valeurs.
  • A la réception du flux d'amélioration I'EXT, le décodeur concatène en 30 les bits d'extension ainsi reçus derrière des bits de position du flux de base I'MIC pour effectuer la décompression d'amplitude - ou expansion - qui est l'opération inverse du processus de compression d'amplitude.
  • La prise en compte de ces bits supplémentaires permet ainsi d'obtenir une plus grande précision de l'emplacement de l'échantillon décodé dans le segment.
  • En effet, pour un bit supplémentaire, le segment est divisé en deux. La précision sur l'emplacement dans le segment de la valeur décodée est alors plus importante.
  • La valeur d'arrondi « roundval » qui permet de trouver la valeur du milieu du segment est aussi adaptée en fonction de nombre bits d'extension reçus.
  • L'information du nombre de bits d'extension reçus est par exemple donnée par l'intermédiaire d'une signalisation externe comme représenté par la flèche 26 sur la figure 2.
  • Cette information pourrait également être déduite directement par l'analyse du flux d'extension.
  • Un exemple de décodage prenant en compte ces bits d'extension est donné en annexe A-17 par les pseudos codes pour la loi A et la loi mu respectivement:
    • Les différences entre le décodage classique et celui de l'invention (passages soulignés et en gras dans l'annexe) représentent la prise en compte des bits du flux d'extension et l'application d'une valeur d'arrondi "roundval".
  • Le codeur tel que représenté en figure 2 comporte un processeur de type DSP (pour "Digital Signal Processor"), non représenté ici, un espace mémoire 27 pour mémoriser au moins les bits qui serviront à déterminer le flux d'extension.
  • Cet espace mémoire 27 peut faire partie d'un bloc mémoire qui comporte en outre une mémoire de stockage et/ou une mémoire de travail.
  • Le moyen de stockage peut comporter un programme informatique comportant des instructions de code pour la mise en oeuvre des étapes du procédé de codage selon l'invention lorsqu'elles sont exécutées par le processeur du codeur.
  • Le programme informatique peut être également stocké sur un support mémoire lisible par un lecteur du codeur ou téléchargeable dans l'espace mémoire du codeur.
  • Ce codeur met ainsi en oeuvre le procédé selon l'invention comme éconcé dans la revendication 1.
  • De même, le décodeur selon l'invention comporte un processeur de type DSP non représenté ici et est apte à mettre en oeuvre le procédé comme éconcé dans la revendication 5.
  • Ce décodeur comporte en outre un moyen de stockage (non représenté), apte à stocker un programme informatique comportant des instructions de code pour la mise en oeuvre des étapes du procédé de décodage selon l'invention lorsqu'elles sont exécutées par le processeur du décodeur.
  • Le programme informatique peut être également stocké sur un support mémoire lisible par un lecteur du décodeur ou téléchargeable dans l'espace mémoire du décodeur.
  • L'exemple représenté et expliqué en référence à la figure 2 est donné pour une couche d'extension de 2 bits par échantillon. Ce procédé est bien évidemment généralisable pour un autre nombre de bits, par exemple 1, 2, 3 bits ou plus. Le pseudo code correspondant serait alors comme représenté en annexe A-18.
  • Les « ext_bits » LSB de la variable « ext » sont envoyés dans le flux d'amélioration.
  • A noter que le terme "pos-4-ext"_bits peut être négatif pour ext_bits > 3 dans les premiers segments et selon la loi utilisé (A ou mu). Même dans ces conditions le pseudo code donné fonctionnerait correctement car shift_right(x, -v) = shift_left(x, v). En d'autres termes, dans le cas où le nombre de bits de poids faible qui ne sont pas pris en compte dans la trame d'indices de quantification est inférieur au nombre de bits du flux d'extension, en particulier dans les premiers segments, il suffit de compléter dans le flux d'extension les bits manquants par des zéros. Ainsi, les bits de poids le plus fort du flux d'extension seront les bits mémorisés et récupérés selon l'invention, les bits de poids le plus faible seront mis à 0.
  • Pour les segments suivants, le nombre de bits mémorisés augmentant, il ne sera plus nécessaire de compléter par des zéros.
  • De même, l'invention s'applique également dans le cas où au cours de transmission le débit doit être réduit. Dans le cas où le flux d'extension comporte deux bits, le bit de poids faible de ce flux d'extension n'est alors plus transmis.
  • Le décodeur ne reçoit alors qu'un bit d'extension par échantillon. Le décodeur tel qu' il est décrit dans le pseudo-code à titre d'exemple fonctionnera correctement avec cette couche d'extension réduite à un bit par échantillon à condition que le bit d'extension reçu soit mis dans la variable « ext » à la position 1, le bit de position 0 de la variable « ext » est alors mis à 0 et la valeur de "roundval" est adaptée en conséquence.
  • La valeur de la variable "roundval" telle qu'utilisé dans les exemples donnés est donc en fonction du nombre de bits reçus par l'encodeur et de la loi utilisée (A ou mu). Le tableau 4 ci-après donne la valeur de la variable "roundval" dans les différentes situations. Tableau 4 La valeur de la variable "round val" dans différentes configurations
    bits d'amélioration reçus par l'encodeur 0 1 2 3
    Loi A 8 4 2 1
    Loi mu 4 2 1 0
  • Cet exemple montre donc un autre avantage de la solution présentée qui est que le train binaire de la couche d'extension est hiérarchique. Il est donc possible de diminuer son débit au cours de la transmission.
  • Ainsi, si les deux bits sont reçus par le décodeur, l'augmentation du RSB est de 12 dB, si un bit est reçu, l'augmentation du RSB est de 6 dB.
  • Bien sur cet exemple est également généralisable, par exemple l'encodeur peut envoyer 4 bits par échantillon dans la couche d'extension et le décodeur peut recevoir 4, 3, 2, 1 ou 0 de ces bits, la qualité du signal décodé sera proportionnelle avec le nombre de bits d'extension reçus.
  • On peut observer dans les pseudo-codes donnés que la complexité additionnelle du décodage de la couche d'extension est seulement de deux opérations par échantillons à l'encodeur et 4 opérations par échantillons au décodeur soit ∼0.05 million d'opérations pondérées par seconde, ou "Weighted Million Operations per Second" (WMOPS) en anglais, ce qui est négligeable. Cette faible complexité peut être exploitée dans le cas d'un codage hiérarchique étendant G.711 tout en permettant par exemple dans des applications de conférence audio de réaliser un mixage "conventionnel" de faible complexité de flux G.711 ou G.711 étendu selon l'invention, alors que dans l'article de Hiwasaki un mixage dit "partiel", impliquant une dégradation de qualité par rapport au mixage conventionnel, est mis en oeuvre pour limiter la complexité du mixage avec codage G.711 scalable.
  • Dans un mode de réalisation alternatif, l'invention sera mise en oeuvre non pas suivant les algorithmes spécifiés précédemment par pseudo-code mais en pré-calculant et stockant dans des tables au codeur et/ou au décodeur les niveaux permettant d'obtenir les bits d'extension. Cette solution a cependant l'inconvénient de nécessiter de plus grande capacité en mémoire à la fois au codeur et au décodeur pour un gain en complexité faible.
  • ANNEXES:
  • A-10:
  function lin_to_Alaw(input_16bit)
    x = input_16bit
    signe = 0x80 /*supposing + */
    if x < 0
      x = ∼x /*abs(x) - 1*/
      signe = 0
    end
    if x > 255 /* 1st bit 1 + 4 saved bits */
     pos = cherche_position_bit_1_poids_fort(x) /* 14 >= pos
     >= 8 */
      exp = shift_left(pos - 7, 4)
      x = shift_right(x, pos - 4)
      mant = x - 16 /* remove leading 1 */
    else
      exp = 0
      mant = shift_right(x, 4)
    end
    ind_tmp = signe + exp + mant
    indice = xor(ind_tmp, 0x0055) /* toggle odd bits */
  return indice /* only 8LSB bits are used */
  • Version ITU-T STL-2005 :
  •   short lin_to_Alaw(short input_16bit) {
        short x, signe, pos, exp, mant, ind_tmp, indice;
        x = input_16bit;
        signe = 0x80; /*supposing + */
        IF(x < 0)
        {
          x = s_xor(x, (short)0xFFFF); /*abs(x) - 1*/
          signe = 0;
        }
        IF (sub(x, 255) > 0) /* 1st bit 1 + 4 saved bits */
        {
          pos = sub(14, norm_s(x)); /* 14 >= pos >= 8 */
         exp = shl(sub(pos, 7), 4);
         x = shr(x, sub(pos, 4));
         mant = sub(x, 16); /* remove leading 1 */
        }
       ELSE
        {
          exp = 0;
         mant = shr(x, 4);
        }
        ind_tmp = add(signe, add(exp, mant) );
        indice = s_xor(ind_tmp, 0x0055); /* toogle odd bits */
        return(indice); /* only 8LSB bits are used */
       }
  • A-11:
  •   function Alaw_to_lin(indice)
        signe = and(indice, 0x80);
        y = and(xor(indice, 0x0055), 0x7F) /* without sign */
        exp = shift_right(y, 4)
        val = shift_left(and(y, 0xF), 4) + 8 /* with rounding */
        if exp > 0
          val = shift_left(val + 256, exp - 1) /* add leading 1 */
        end
        if signe == 0 /* sign bit ==0 → negative value */
          val = -val
        end
      return val
  • Version ITU-T STL-2005 :
  •   short Alaw_to_lin (short indice)
      {
        short y, signe, exp, val;
        signe = s_and(indice, 0x80);
        y = s_and(s_xor (indice, 0x0055), 0x7F); /* without sign */
        exp = shr(y, 4);
        val = add(shl(s_and(y, 0xF), 4), 8); /* rounding */
        if(exp > 0)
        {
          val = shl(add(val, 256), sub(exp, 1)); /*add leading 1 */
        }
        if(signe == 0) /* sign bit ==0 'negative value */
        {
          val = negate(val);
        }
        return(val);
      }
  • A-12:
  •   function lin_to_mulaw(input_16bit)
        x = input_16bit
        signe = 0x80 /* supposing + */
        if x > 32635 /* to avoid overflow after adding 132*/
          x = 32635
        end
        if x < -32635
          x = -32635
        end
        if x < 0
          x = ∼x /*abs(x) - 1*/
          signe = 0x00
        end
        x = x + 132
        /* always 1st bit 1 + 4 saved bits */
        pos = cherche_position_bit_1_poids_fort(x) /* 14 >= pos >=
        7 */
        exp = shift_left(pos - 7, 4)
        x = shift_right(x, pos - 4)
        mant = x - 16 /* remove leading 1 */
        ind_tmp = signe + exp + mant
        indice = xor(ind_tmp, 0x007F) /* toggle all bits */
      return indice /* only 8LSB bits are used */
  • A-13:
  • function mulaw_to_lin(indice)
        signe = and(indice, 0x80);
        y = and(xor(indice, 0x00FF), 0x7F) /* without sign */
        exp = shift_right(y, 4)
        val = shift_left(and(y, 0xF), 3) + 132 /* leading 1 &
        rounding */
        val = shift_left(val, exp) - 132 /* suppress encoder offset
        */
        if signe == 0 /* sign bit ==0 → negative value */
          val = -val
        end
      return val
  • A-14:
  •   x = shift_right(x, pos - 6) /* first part of shift*/
        ext = and(x, 0x3) /*save last two bits*/
        x = shift_right(x, 2) /* finish shift*/
  • A-15:
  •   function lin_to_Alaw_enh(input_16bit)
        x = input_16bit
        signe = 0x80 /*supposing + */
        if x < 0
          x = ∼x /*abs(x) - 1*/
          signe = 0
        end
        if x > 255 /* 1st bit 1 + 4 saved bits */
          pos = cherche_position_bit_1_poids_fort (x) /* 14 >= pos
          >= 8 */
          exp = shift_left(pos - 7, 4)
          x = shift_right(x, pos - 6) /* first part of shift */
          ext = and(x, 0x3 /* save last to bits */
          x = shift_right(x, 2) /* finish shift */
          mant = x - 16 /* remove leading 1 */
        else
          exp = 0
          x = shift_right(x, 2)
          ext = and(x, 0x3) /* save last two bits */
          x = shift_right(x, 2) /* finish shift */
        end
        ind_tmp = signe + exp + mant
        indice = xor(ind_tmp, 0x0055) /* toggle odd bits */
      return indice, ext /* only 8LSB bits are used in indice and
      2LSB bits in ext*/
  • A-16:
  •   function lin_to_mulaw_enh(input_16bit)
        x = input_16bit
        signe = 0x80 /* supposing + */
        if x > 32635 /* to avoid overflow after adding 132*/
          x = 32635
        end
        if x < -32635
          x = -32635
        end
        if x < 0
          x = ∼x /*abs(x) - 1*/
          signe = 0x00
        end
        x = x + 132
        /* always 1st bit 1 + 4 saved bits */
        pos = cherche_position_bit_1_poids_fort(x) /* 14 >= pos >=
        7 */
        exp = shift_left(pos - 7, 4)
        x = shift_right(x, pos - 6) /* first part of shift */
        ext = and(x, 0x3) /* save last two bits */
        x = shift_right(x, 2) /* finish shift */
        mant = x - 16 /* remove leading 1 */
        ind_tmp = signe + exp + mant
        indice = xor (ind_tmp, 0x007F) /* toggle all bits */
      return indice, ext /* only 8LSB bits are used in indice and
      2LSB bits in ext*/
  • A-17:
    Loi A:
  •   function Alaw_to_lin_enh(indice, ext, roundval)
        signe = and(indice, 0x80);
        y = and(xor(indice, 0x0055), 0x7F) /* without sign */
        exp = shift_right(y, 4)
        ext = shift_left(and(ext, 0x03), 2) /* put extension bits in
        position 2 & 3 */
        val = shift_left(and(y, 0xF), 4) + ext + roundval /* with
        rounding */
        if exp > 0
          val = shift_left(val + 256, exp - 1) /* adding leading 1
          */
        end
        if signe == 0 /* sign bit ==0 → negative value */
          val = -val
        end
      return val
    Loi mu:
      function mulaw_to_lin_enh(indice, ext, roundval)
        signe = and(indice, 0x80);
        y = and(xor(indice, 0x007F), 0x7F) /* without sign */
        exp = shift_right(y, 4)
        ext = shift_left(and(ext, 0x03), 1) /* put extension bits in
        position 1 & 2 */
        val = shift_left(and(y, 0xF), 3) + 128 + ext + roundval /*
        leading 1 & rounding */
        val = shift_left(val, exp) - 132 /* suppress encoder offset
        */
        if signe == 0 /* sign bit ==0 → negative value */
          val = -val
        end
      return val
  • A-18:
  •   x = shift_right(x, pos - 4 - ext_bits) /* first part of
      shift*/
        ext = and(x, shift_left(1, ext_bits) -1) /* last ext_bits
        bits*/
        x = shift_right(x, ext_bits) /* finish shift*/

    Claims (10)

    1. Procédé de codage par quantification scalaire des échantillons d'un signal audionumérique (S), les échantillons étant codés sur un nombre prédéterminés de bits pour obtenir une trame binaire d'indices de quantification (IMIC), le codage s'effectuant selon une loi logarithmique de compression d'amplitude, un nombre prédéterminé de bits de poids faible du signal audionumérique en format MIC linéaire n'étant pas pris en compte dans l'opération de compression pour former la trame binaire d'indices de quantification, caractérisé en ce qu'il comporte les étapes suivantes:
      - mémorisation (27) d'au moins une partie des bits de poids faible qui ne sont pas pris en compte dans l'opération de compression pour former la trame binaire d'indice de quantification;
      - détermination (28) d'un flux d'amélioration (IEXT) comportant au moins un bit ainsi mémorisé.
    2. Procédé selon la revendication 1, caractérisé en ce que les bits mémorisés sont les bits de poids le plus fort parmi les bits qui ne sont pas pris en compte dans l'opération de compression pour former la trame binaire d'indices de quantification.
    3. Procédé selon l'une des revendications 1 à 2, caractérisé en ce que le nombre de bits pris en compte pour déterminer le flux d'amélioration est fonction du débit disponible au cours d'une transmission vers un décodeur.
    4. Procédé selon l'une des revendications 1 à 3, caractérisé en ce que l'étape de quantification scalaire est une quantification de type MIC selon une loi de codage logarithmique de compression d'amplitude de type A ou de type mu conforme à la norme ITU-T G.711.
    5. Procédé de décodage d'une trame binaire d'indices de quantification (I'MIC) comportant un nombre prédéterminé de bits par une étape de quantification inverse (22) et selon une loi logarithmique de compression d'amplitude caractérisé en ce qu'il comporte les étapes suivantes:
      - réception (29) d'un flux d'amélioration (I'EXT) comportant un ou plusieurs bits d'extension déterminés selon un procédé de codage conforme à la revendication 1;
      - concaténation (30) des bits d'extension derrière les bits issus de la trame binaire pour obtenir un signal audio décodé.
    6. Procédé de décodage selon la revendication 5, caractérisé en ce qu'il comporte en outre une étape d'adaptation d'une valeur d'arrondi en fonction du nombre de bits d'extension reçu pour obtenir le signal audio décodé.
    7. Codeur audio comportant un module de quantification scalaire (20) des échantillons d'un signal audionumérique (S), les échantillons étant codés sur un nombre prédéterminés de bits pour obtenir une trame binaire d'indices de quantification (IMIC), le codage s'effectuant selon une loi logarithmique de compression d'amplitude, un nombre prédéterminé de bits de poids faible du signal audionumérique en format MIC linéaire n'étant pas pris en compte dans l'opération de compression pour former la trame binaire d'indices de quantification, caractérisé en ce qu'il comporte:
      - un espace mémoire (27) apte à mémoriser au moins une partie des bits de poids faible qui ne sont pas pris en compte dans l'opération de compression pour former la trame binaire d'indice de quantification;
      - des moyens de détermination (28) d'un flux d'amélioration (IEXT) comportant au moins un bit ainsi mémorisé.
    8. Décodeur audio apte à décoder une trame binaire d'indices de quantification (I'MIC) comportant un nombre prédéterminé de bits par un module de quantification inverse (22) et selon une loi logarithmique de compression d'amplitude caractérisé en ce qu'il comporte:
      - des moyens de réception (29) d'un flux d'amélioration comportant un ou plusieurs bits d'extension déterminés par un codeur conforme à la revendication 7;
      - des moyens de concaténation (30) des bits d'extension derrière les bits issus de la trame binaire pour obtenir un signal audio décodé.
    9. Programme informatique destiné à être stocké dans une mémoire d'un codeur et /ou un support mémoire apte à coopérer avec un lecteur du codeur, comportant des instructions de code pour la mise en oeuvre des étapes du procédé de codage selon l'une quelconque des revendications 1 à 4 lorsqu'il est exécuté par un processeur du codeur.
    10. Programme informatique destiné à être stocké dans une mémoire d'un décodeur et /ou un support mémoire apte à coopérer avec un lecteur du décodeur, comportant des instructions de code pour la mise en oeuvre des étapes du procédé de décodage selon l'une quelconque des revendications 5 à 6 lorsqu'il est exécuté par un processeur du décodeur.
    EP08806166A 2007-07-06 2008-07-04 Codage hierarchique de signaux audionumeriques Active EP2176861B1 (fr)

    Applications Claiming Priority (2)

    Application Number Priority Date Filing Date Title
    FR0756326 2007-07-06
    PCT/FR2008/051248 WO2009010674A1 (fr) 2007-07-06 2008-07-04 Codage hierarchique de signaux audionumeriques

    Publications (2)

    Publication Number Publication Date
    EP2176861A1 EP2176861A1 (fr) 2010-04-21
    EP2176861B1 true EP2176861B1 (fr) 2013-03-27

    Family

    ID=39133713

    Family Applications (1)

    Application Number Title Priority Date Filing Date
    EP08806166A Active EP2176861B1 (fr) 2007-07-06 2008-07-04 Codage hierarchique de signaux audionumeriques

    Country Status (7)

    Country Link
    US (1) US8577687B2 (fr)
    EP (1) EP2176861B1 (fr)
    JP (1) JP5264901B2 (fr)
    KR (1) KR101476699B1 (fr)
    CN (1) CN101796579B (fr)
    ES (1) ES2416056T3 (fr)
    WO (1) WO2009010674A1 (fr)

    Families Citing this family (11)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    KR100912826B1 (ko) * 2007-08-16 2009-08-18 한국전자통신연구원 G.711 코덱의 음질 향상을 위한 향상 계층 부호화 및복호화 장치와 그 방법
    FR2938688A1 (fr) * 2008-11-18 2010-05-21 France Telecom Codage avec mise en forme du bruit dans un codeur hierarchique
    FR2969360A1 (fr) * 2010-12-16 2012-06-22 France Telecom Codage perfectionne d'un etage d'amelioration dans un codeur hierarchique
    ES2718654T3 (es) 2011-02-22 2019-07-03 Sun Patent Trust Procedimiento de codificación de imagen, procedimiento de descodificación de imagen, dispositivo de codificación de imagen, dispositivo de descodificación de imagen y dispositivo de codificación / descodificación de imagen
    CN105245903B (zh) 2011-02-22 2018-09-07 太格文-Ii有限责任公司 图像解码方法和图像解码装置
    FR2981781A1 (fr) 2011-10-19 2013-04-26 France Telecom Codage hierarchique perfectionne
    WO2016041204A1 (fr) * 2014-09-19 2016-03-24 Telefonaktiebolaget L M Ericsson (Publ) Procédés de compression et de décompression de données iq, et dispositifs associés
    EP3051701A1 (fr) * 2015-01-30 2016-08-03 Nxp B.V. Quantification non uniforme de logarithmes de rapports de vraisemblance
    CN104966517B (zh) * 2015-06-02 2019-02-01 华为技术有限公司 一种音频信号增强方法和装置
    CN107680607B (zh) * 2017-09-29 2021-05-18 联想(北京)有限公司 一种信号压缩方法、信号解压方法及其装置
    US11935550B1 (en) * 2023-03-31 2024-03-19 The Adt Security Corporation Audio compression for low overhead decompression

    Family Cites Families (17)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    US3688097A (en) * 1970-05-20 1972-08-29 Bell Telephone Labor Inc Digital attenuator for non-linear pulse code modulation signals
    US4386237A (en) * 1980-12-22 1983-05-31 Intelsat NIC Processor using variable precision block quantization
    DE3411962A1 (de) * 1983-03-31 1984-10-31 Sansui Electric Co., Ltd., Tokio/Tokyo Datenuebertragungseinrichtung
    CA1220282A (fr) * 1985-04-03 1987-04-07 Northern Telecom Limited Transmission de signaux vocaux a large bande
    JP3237178B2 (ja) * 1992-03-18 2001-12-10 ソニー株式会社 符号化方法及び復号化方法
    KR100335611B1 (ko) * 1997-11-20 2002-10-09 삼성전자 주식회사 비트율 조절이 가능한 스테레오 오디오 부호화/복호화 방법 및 장치
    KR100335609B1 (ko) * 1997-11-20 2002-10-04 삼성전자 주식회사 비트율조절이가능한오디오부호화/복호화방법및장치
    GB9820655D0 (en) * 1998-09-22 1998-11-18 British Telecomm Packet transmission
    US6931058B1 (en) * 2000-05-19 2005-08-16 Scientific-Atlanta, Inc. Method and apparatus for the compression and/or transport and/or decompression of a digital signal
    TW501099B (en) * 1999-08-13 2002-09-01 Koninkl Philips Electronics Nv Transmission of a digital information signal having M bit PCM samples
    SE0001727L (sv) * 2000-05-10 2001-11-11 Global Ip Sound Ab Överföring över paketförmedlade nät
    US7158572B2 (en) * 2002-02-14 2007-01-02 Tellabs Operations, Inc. Audio enhancement communication techniques
    US7330812B2 (en) * 2002-10-04 2008-02-12 National Research Council Of Canada Method and apparatus for transmitting an audio stream having additional payload in a hidden sub-channel
    US7408918B1 (en) * 2002-10-07 2008-08-05 Cisco Technology, Inc. Methods and apparatus for lossless compression of delay sensitive signals
    KR100528327B1 (ko) * 2003-01-02 2005-11-15 삼성전자주식회사 비트율 조절가능한 오디오 부호화 방법, 복호화 방법,부호화 장치 및 복호화 장치
    US20040208169A1 (en) * 2003-04-18 2004-10-21 Reznik Yuriy A. Digital audio signal compression method and apparatus
    US7272567B2 (en) * 2004-03-25 2007-09-18 Zoran Fejzo Scalable lossless audio codec and authoring tool

    Also Published As

    Publication number Publication date
    KR20100049579A (ko) 2010-05-12
    CN101796579A (zh) 2010-08-04
    US8577687B2 (en) 2013-11-05
    WO2009010674A1 (fr) 2009-01-22
    KR101476699B1 (ko) 2014-12-26
    CN101796579B (zh) 2014-12-10
    EP2176861A1 (fr) 2010-04-21
    JP2010532876A (ja) 2010-10-14
    US20100191538A1 (en) 2010-07-29
    JP5264901B2 (ja) 2013-08-14
    ES2416056T3 (es) 2013-07-30

    Similar Documents

    Publication Publication Date Title
    EP2176861B1 (fr) Codage hierarchique de signaux audionumeriques
    EP1107230A1 (fr) Procédé de traitement de plusieurs flux binaires de données audio
    EP2769378B1 (fr) Codage hierarchique perfectionne
    FR2891098A1 (fr) Procede et dispositif de mixage de flux audio numerique dans le domaine compresse.
    EP2979266B1 (fr) Mixage partiel optimisé de flux audio codés selon un codage par sous-bandes
    EP1037196B1 (fr) Procédé de codage, de décodage et de transcodage audio
    WO2012080649A1 (fr) Codage perfectionne d&#39;un etage d&#39;amelioration dans un codeur hierarchique
    EP2979437B1 (fr) Mixage optimisé de flux audio codés selon un codage par sous-bandes
    EP2203915B1 (fr) Dissimulation d&#39;erreur de transmission dans un signal numerique avec repartition de la complexite
    WO2010001020A2 (fr) Codage/decodage par plans de bits, perfectionne
    WO2004012339A1 (fr) Compression de donnees numeriques robuste au bruit de transmission
    EP0995274B1 (fr) Codeur audio
    WO2009080982A2 (fr) Traitement d&#39;erreurs binaires dans une trame binaire audionumerique
    FR2842670A1 (fr) Perfectionnement a la compression de donnees numeriques
    EP1037390A1 (fr) Procédé de codage, de décodage et de transcodage
    FR2997250A1 (fr) Detection d&#39;une bande de frequence predeterminee dans un contenu audio code par sous-bandes selon un codage de type modulation par impulsions
    EP1131928A1 (fr) Codage source-canal conjoint en blocs
    FR2863792A1 (fr) Procede de compression de signaux audio sans contrainte de delai

    Legal Events

    Date Code Title Description
    PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

    Free format text: ORIGINAL CODE: 0009012

    17P Request for examination filed

    Effective date: 20100125

    AK Designated contracting states

    Kind code of ref document: A1

    Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MT NL NO PL PT RO SE SI SK TR

    AX Request for extension of the european patent

    Extension state: AL BA MK RS

    17Q First examination report despatched

    Effective date: 20100503

    DAX Request for extension of the european patent (deleted)
    GRAP Despatch of communication of intention to grant a patent

    Free format text: ORIGINAL CODE: EPIDOSNIGR1

    RIN1 Information on inventor provided before grant (corrected)

    Inventor name: KOVESI, BALAZS

    Inventor name: RAGOT, STEPHANE

    GRAS Grant fee paid

    Free format text: ORIGINAL CODE: EPIDOSNIGR3

    REG Reference to a national code

    Ref country code: DE

    Ref legal event code: R079

    Ref document number: 602008023308

    Country of ref document: DE

    Free format text: PREVIOUS MAIN CLASS: G10L0019140000

    Ipc: G10L0019240000

    GRAA (expected) grant

    Free format text: ORIGINAL CODE: 0009210

    AK Designated contracting states

    Kind code of ref document: B1

    Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MT NL NO PL PT RO SE SI SK TR

    REG Reference to a national code

    Ref country code: GB

    Ref legal event code: FG4D

    Free format text: NOT ENGLISH

    RIC1 Information provided on ipc code assigned before grant

    Ipc: G10L 19/24 20130101AFI20130215BHEP

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: EP

    REG Reference to a national code

    Ref country code: AT

    Ref legal event code: REF

    Ref document number: 603859

    Country of ref document: AT

    Kind code of ref document: T

    Effective date: 20130415

    REG Reference to a national code

    Ref country code: IE

    Ref legal event code: FG4D

    Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

    REG Reference to a national code

    Ref country code: DE

    Ref legal event code: R096

    Ref document number: 602008023308

    Country of ref document: DE

    Effective date: 20130529

    REG Reference to a national code

    Ref country code: ES

    Ref legal event code: FG2A

    Ref document number: 2416056

    Country of ref document: ES

    Kind code of ref document: T3

    Effective date: 20130730

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: SE

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: LT

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: BG

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130627

    Ref country code: NO

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130627

    REG Reference to a national code

    Ref country code: LT

    Ref legal event code: MG4D

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: GR

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130628

    Ref country code: LV

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: FI

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: SI

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: PUE

    Owner name: ORANGE, FR

    Free format text: FORMER OWNER: FRANCE TELECOM, FR

    REG Reference to a national code

    Ref country code: NL

    Ref legal event code: VDEP

    Effective date: 20130327

    RAP2 Party data changed (patent owner data changed or rights of a patent transferred)

    Owner name: ORANGE

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: HR

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: RO

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: SK

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: NL

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: PT

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130729

    Ref country code: IS

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130727

    Ref country code: EE

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: CZ

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: CY

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: PL

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    BERE Be: lapsed

    Owner name: FRANCE TELECOM

    Effective date: 20130731

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: DK

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    PLBE No opposition filed within time limit

    Free format text: ORIGINAL CODE: 0009261

    STAA Information on the status of an ep patent application or granted ep patent

    Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: MC

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: PL

    26N No opposition filed

    Effective date: 20140103

    REG Reference to a national code

    Ref country code: DE

    Ref legal event code: R097

    Ref document number: 602008023308

    Country of ref document: DE

    Effective date: 20140103

    REG Reference to a national code

    Ref country code: IE

    Ref legal event code: MM4A

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: BE

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20130731

    Ref country code: CH

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20130731

    Ref country code: LI

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20130731

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: IE

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20130704

    REG Reference to a national code

    Ref country code: AT

    Ref legal event code: MM01

    Ref document number: 603859

    Country of ref document: AT

    Kind code of ref document: T

    Effective date: 20130704

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: AT

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20130704

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: MT

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    Ref country code: TR

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20130327

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: LU

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20130704

    Ref country code: HU

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

    Effective date: 20080704

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: PLFP

    Year of fee payment: 9

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: PLFP

    Year of fee payment: 10

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: PLFP

    Year of fee payment: 11

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: IT

    Payment date: 20230620

    Year of fee payment: 16

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: ES

    Payment date: 20230801

    Year of fee payment: 16

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: DE

    Payment date: 20230620

    Year of fee payment: 16

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: GB

    Payment date: 20240620

    Year of fee payment: 17

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: FR

    Payment date: 20240619

    Year of fee payment: 17