EP1714273A1 - Procede de restauration de partiels d'un signal sonore - Google Patents

Procede de restauration de partiels d'un signal sonore

Info

Publication number
EP1714273A1
EP1714273A1 EP05717367A EP05717367A EP1714273A1 EP 1714273 A1 EP1714273 A1 EP 1714273A1 EP 05717367 A EP05717367 A EP 05717367A EP 05717367 A EP05717367 A EP 05717367A EP 1714273 A1 EP1714273 A1 EP 1714273A1
Authority
EP
European Patent Office
Prior art keywords
phase
peak
partial
sound signal
frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP05717367A
Other languages
German (de)
English (en)
Inventor
Jean-Bernard Rault
Mathieu Lagrange
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
France Telecom SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by France Telecom SA filed Critical France Telecom SA
Publication of EP1714273A1 publication Critical patent/EP1714273A1/fr
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/005Correction of errors induced by the transmission channel, if related to the coding algorithm
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/06Determination or coding of the spectral characteristics, e.g. of the short-term prediction coefficients
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/08Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
    • G10L19/093Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters using sinusoidal excitation models

Definitions

  • the present invention relates to the field of telecommunications and in particular to the field of digital processing of a sound signal and to the harmonic representation of such a signal.
  • the sound signal is represented by a set of oscillators whose parameters (frequency, amplitude, phase) vary slowly over time.
  • the harmonic analysis includes a short-term time / frequency analysis which makes it possible to determine the values of these parameters, followed by an extraction of peaks then a monitoring of partials.
  • a first short-term time / frequency analysis module (which typically performs a Fourier transform) makes it possible to calculate the spectrum of the short-term signal for each frame.
  • a second peak extraction module makes it possible to retain only the most relevant peaks a priori, a criterion being for example to keep only the most energetic peaks.
  • a third and final module seeks to link the peaks together over time, that is to say from one frame to another to form the partials. Each partial corresponds during its lifetime to an oscillator.
  • This type of analysis and representation can be used in particular during a rate reduction coding, during a parametric coding (that is to say a coding which processes the signal according to three aspects: transient, sinusoids , noise), when separating and indexing sound sources, and when restoring sound files. It is commonly accepted that the synthesis of partials is of better quality by using phase interpolation techniques proposed by Robert J.
  • the three unknowns ⁇ , ⁇ , ⁇ are calculated by solving a system of equations involving -
  • 2 ⁇ f ( (n) 2 ⁇ f t + ⁇ f t nTe + 3 ⁇ (nTef + 4 ⁇ (nTef + 5 ⁇ (nTef (5))
  • they may be absent at the input of the decoder in a application for broadcasting sound programs on the Internet in the event of packet loss, they may be corrupted in the event of disturbance of the signal to be analyzed by a spurious signal (noise, click, other signal, etc.), or they may be discontinuous in the case where they have too low an energy to be detected correctly continuously. It then becomes necessary to implement techniques for restoring the missing peaks in order to be able to recreate a synthesized signal as close as possible to the original signal. This requires recreating peaks each characterized by an amplitude, a frequency and a phase. The previous interpolation techniques, known from the prior art, are used to synthesize the parts corresponding to the missing peaks and restore the partials.
  • An object of the invention is to propose an alternative solution to the problem of restoring the missing part identified as such of a partial, in particular when the missing part corresponds to long times (greater than 10 ms) for which the techniques known are not very effective.
  • the technical problem to be solved by the object of the present invention is to propose a method for restoring missing parts of the parts of a sound signal, during a harmonic analysis according to which the sound signal is divided into time frames over which is applied a time / frequency analysis which provides successive short-term spectra represented by frequency frames of samples, the analysis further consisting in extracting spectral peaks in the frequency frames and in binding them together over time to form partials, this method being an alternative to known solutions.
  • a solution to the technical problem posed consists, according to the present invention, in that said method for restoring a partial between a peak P t and a peak P i + N whose frequencies ⁇ and phases ⁇ are known is such that it includes the steps of: - to estimate the frequency ⁇ of each of the missing peaks P M to i + ⁇ of this partial, - to calculate the unwound phase ⁇ from peak to peak, from the phase of peak P.
  • a method according to the invention differs from known methods in that it performs finer control of the frequency of the missing peaks and an after-the-fact calculation of the corresponding phases to ensure continuity with the phases of the existing peaks.
  • a method according to the invention allows a re-synthesis without artefacts of the signals corresponding to the pieces of missing partials unlike the known methods previously described.
  • a method according to the invention allows a reconstruction of the signal closer in the sense of the reconstruction error of the original signal than that obtained by known methods.
  • a method according to the invention advantageously presents a low complexity algorithm.
  • the invention further relates to a device for synthesizing a sound signal for the implementation of a method for restoring a partial between a peak P t and a peak P i + N.
  • This device is for example an audio decoder or a parametric coder suitable for implementing a method according to the invention.
  • the invention further relates to a computer program product which can be loaded directly into the internal memory of a previous device, or of a group of devices.
  • This computer program product comprises portions of software code for executing the steps of a method according to the invention when the program is executed on the device or group of devices.
  • the invention further relates to a medium usable in a previous device or a group of devices and on which is recorded a computer program product which can be loaded directly into the internal memory of the device or group of devices, comprising portions of code.
  • software for executing the steps of a method according to the invention when the program is executed on the device or group of devices.
  • Method 1 consists in restoring a partial between a peak P i and a peak P i + N whose frequencies ⁇ and phases ⁇ are known.
  • the method estimates the frequency ⁇ and the amplitude A of each of the missing peaks P M to P i + N _ x . This estimation is carried out for example by interpolation or linear prediction according to known methods.
  • the amplitude A of the missing peaks is estimated for example by means of a linear interpolation between A i and A + N> or by means of a linear prediction on the past or the future or even by means of d '' a combination weighted on the past or the future.
  • a second step 3 the method calculates the unwound phase ⁇ from peak to peak, from the phase of the peak P t to that of the peak P i + N. This calculation is carried out for each of the frequencies ⁇ previously estimated. Let ⁇ t and ⁇ t be the starting phase and frequency and ⁇ . +1 , ..., ⁇ I. + ⁇ M ⁇ an estimate of the frequencies in the interval to reconstruct. To extend the partial between the following expression:
  • the method distributes the phase error err ⁇ calculated at time i + N among all the missing and previously reconstructed peaks P M to P i + N _ x by means of the following steps.
  • the method calculates the phase error err ⁇ between the unwound phase ⁇ i + N and the phase as ⁇ i + N at the same peak P ! + N.
  • the distribution may not be uniform and follow a non-linear law for example.
  • the example of use illustrated in FIG. 2 consists in restoring the partials using a method 1 according to the invention during a harmonic analysis of a sound signal, for example during parametric coding.
  • the sound signal s (n) is represented by a set of oscillators whose parameters (frequency, amplitude) vary slowly over time.
  • the harmonic analysis comprises a short-term 6 time / frequency analysis which makes it possible to determine the values of these parameters, followed by an extraction 7 of peaks then a follow-up 8 of partials.
  • a detection 9 of holes in the partials precedes the implementation of a method 1 of restoration of the partials according to the invention.
  • the reconstructed peaks P l + n ) during from the implementation of method 1, are then treated as peaks resulting from harmonic analysis and the additive synthesis of the signal corresponding to the partial restored from these reconstructed peaks can be done, for example, by one of the known methods phase interpolation (order 3 or order 5).

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)

Abstract

La présente invention se rapporte à un procédé (1) de restauration de partiels d'un signal sonore entre un pic Pi et un pic Pi+N dont les fréquences ω et phases ϕ sont connues. Le procédé (1) comprend les étapes qui consistent : à estimer (2) la fréquence ω de chacun des pics manquants Pi+1 à Pi+N-1 d'un partiel, - à calculer (3) la phase déroulée ϕ de pic en pic, depuis la phase du pic Pi jusqu'à celle du pic Pi+N et ce, pour toutes les fréquences ω précédemment estimées, - à calculer (4) l'erreur de phase errϕ entre la phase déroulée ϕ et la phase connue au même pic Pi+N à corriger (5) chaque phase déroulée ϕ d'une valeur fonction de l'erreur de phase errϕ.

Description

PROCEDE DE RESTAURATION DE PARTIELS D'UN SIGNAL SONORE
La présente invention se rapporte au domaine des télécommunications et en particulier au domaine du traitement numérique d'un signal sonore et à la représentation harmonique d'un tel signal. En modélisation harmonique des signaux audionumériques, le signal sonore est représenté par un ensemble d'oscillateurs dont les paramètres (fréquence, amplitude, phase) varient lentement au cours du temps. L'analyse harmonique comprend une analyse temps/fréquence à court terme qui permet de déterminer les valeurs de ces paramètres, suivie d'une extraction de pics puis d'un suivi de partiels. Le signal à modéliser est découpé en trames de t échantillons (typiquement £ = 1024). Un premier module d'analyse temps/fréquence à court terme (qui effectue typiquement une transformée de Fourier) permet de calculer le spectre du signal à court terme pour chaque trame. Un deuxième module d'extraction de pics permet de ne retenir que les pics les plus pertinents à priori, un critère étant par exemple de ne garder que les pics les plus énergétiques. Un troisième et dernier module cherche à lier les pics entre eux au cours du temps, c'est-à-dire d'une trame à l'autre pour former les partiels. Chaque partiel correspond pendant sa durée de vie à un oscillateur. Ce type d'analyse et de représentation peut être utilisé en particulier lors d'un codage à réduction de débit, lors d'un codage paramétrique (c'est-à-dire un codage qui traite le signal suivant trois aspects : transitoires, sinusoïdes, bruit), lors de la séparation et l'indexation de sources sonores et lors de la restauration de fichiers sonores. Il est couramment admis que la synthèse des partiels est de meilleure qualité en utilisant des techniques d'interpolation des phases proposées par Robert J.McAulay et Thomas F.Quatieri dans l'article "Speech Analysis/Synthesis Based on a Sinusoidal Représentation", IEEE Transaction on Acoustics, Speech and Signal Processing, PP 744-754, 1986 ou encore proposées par Laurent Girin, Sylvain Marchand, Joseph di Martino, axel Rδbel et Geoffroy Peeters dans l'article "Comparing the order of a Polynomial Phase Model for the Synthesis of Quasi-Harmonie Audio Signais", WASPAA, New Paltz, NY, USA, October 2003. Ces techniques permettent la synthèse d'un partiel d'un pic ( -, /;,<?,•) à un pic (AM,fi+ïM) en calculant toutes les phases intermédiaires à l'aide de polynômes d'ordre 3 ou 5, les fréquences se déduisant par dérivation. Une interpolation d'ordre 3 est utilisée quand seules sont connues les fréquences et les phases de départ et d'arrivée. Une interpolation d'ordre 5 est utilisée quand sont, en outre, connues les variations d'ordre 2 de la phase (équivalentes aux variations à l'ordre 1 de la fréquence puisque par définition la fréquence est la dérivée de la phase). La synthèse d'un partiel entre les pics P^A,,/^) et i?+1(4+ι»./ω» /+ι) consiste à calculer les valeurs p(n) du partiel entre les trames i et i+1 : Pi (n) = P(H + n) = Ai (ra)cos(#>(. (72)) , n = 0,... -1 G) A cette fin, il est connu de calculer toutes les phases intermédiaires par l'une des deux méthodes d'interpolation suivantes. Pour l'interpolation d'ordre 3 selon Mac Aulay et al, la phase est calculée au moyen de l'expression suivante : φi (n) = φ. + 2πfinTe + a (nie) + β (n Je) (2) Où Te est la période d'échantillonnage Les deux inconnues a et β se calculent par résolution d'un système d'équations mettant enjeu (fi,φt,fMM) • Les fréquences se déduisent par dérivation
2πf; (n) = 2πfι + 2anTe + 3β (nTef (3) Pour l'interpolation d'ordre 5 selon Girin et al, les variations δft et δfM à l'ordre 1 de la fréquence aux pics Pt et PM sont supposées connues. La phase est alors calculée au moyen de l'expression suivante : φ, (n) = φ, + 2πf,nTe +— (nTef + β (nTef + γ (nTef + δ (nTef
(4)
Les trois inconnues β, δ, γ se calculent par résolution d'un système d'équations mettant enjeu - Les fréquences se déduisent par dérivation : 2πf( (n) = 2πft + δftnTe + 3β (nTef + 4γ(nTef + 5δ (nTef (5) Pour des raisons diverses, il peut arriver que certains partiels existants dans le signal soient absents, corrompus ou discontinus en sortie d'analyse et/ou en entrée de synthèse. Par exemple, ils peuvent être absents en entrée du décodeur dans une application de diffusion de programmes sonores sur Internet en cas de perte de paquets, ils peuvent être corrompus en cas de perturbations du signal à analyser par un signal parasite (bruit, clic, autre signal, etc), ou ils peuvent être discontinus dans le cas où ils ont une énergie trop faible pour être détectés correctement de façon continue. Il s'avère alors nécessaire de mettre en œuvre des techniques de restauration des pics manquants pour pouvoir recréer un signal synthétisé le plus proche possible du signal original. Ceci nécessite de recréer des pics caractérisés chacun par une amplitude, une fréquence et une phase. Les techniques précédentes d'interpolation, connues de l'art antérieur, sont utilisées pour synthétiser les parties correspondant aux pics manquants et restaurer les partiels. Cependant ces techniques d'interpolation connues sont adaptées au court terme, c'est-à-dire pour une période inférieure à 10ms. Pour des durées plus longues, le signal re-synthétisé est souvent éloigné de l'original et des artefacts désagréables peuvent apparaître. En effet, ces techniques assurent une continuité de phase entre les pics existants et les pics restaurés, mais en contre partie elles ne permettent pas de contrôler les fréquences induites données par les équations (3) et (5). Cet effet est d'autant plus marqué que la distance d'interpolation est grande. Un but de l'invention est de proposer une solution alternative au problème de la restauration de la partie manquante et identifiée comme telle d'un partiel, notamment lorsque la partie manquante correspond à des temps longs (supérieurs à 10 ms) pour lesquels les techniques connues sont peu efficaces. Aussi, le problème technique à résoudre par l'objet de la présente invention est de proposer un procédé de restauration de parties manquantes des partiels d'un signal sonore, lors d'une analyse harmonique suivant laquelle le signal sonore est découpé en trames temporelles sur lesquelles est appliquée une analyse temps/fréquence qui fournit des spectres successifs à court terme représentés par des trames fréquentielles d'échantillons, l'analyse consistant en outre à extraire des pics spectraux dans les trames fréquentielles et à les lier entre eux au cours du temps pour former des partiels, ce procédé étant une alternative aux solutions connues. Une solution au problème technique posé consiste, selon la présente invention, en ce que ledit procédé de restauration d'un partiel entre un pic Pt et un pic Pi+N dont les fréquences ω et phases φ sont connues est tel qu'il comprend les étapes qui consistent : - à estimer la fréquence ω de chacun des pics manquants PM à i de ce partiel, - à calculer la phase déroulée φ de pic en pic, depuis la phase du pic P. jusqu'à celle du pic Pi+N et pour toutes les fréquences ώ précédemment estimées, à calculer l'erreur de phase errφ entre la phase déroulée φ et la phase connue au même pic Pi+N , à corriger chaque phase déroulée φ d'une valeur fonction de l'erreur de phase errφ . Un procédé selon l'invention se différencie des méthodes connues en ce qu'il effectue un contrôle plus fin de la fréquence des pics manquants et un calcul après coup des phases correspondantes pour assurer la continuité avec les phases des pics existants. Ainsi, un procédé selon l'invention permet une re-synthèse sans artefacts des signaux correspondants aux morceaux de partiels manquants contrairement aux méthodes connues préalablement décrites. En outre, de manière avantageuse, un procédé selon l'invention permet une reconstruction du signal plus proche au sens de l'erreur de reconstruction du signal original que celle obtenue par les méthodes connues. Enfin, un procédé selon l'invention présente avantageusement un algorithme à faible complexité. L'invention a en outre pour objet un dispositif de synthèse d'un signal sonore pour la mise en œuvre d'un procédé de restauration d'un partiel entre un pic Pt et un pic Pi+N . Ce dispositif est par exemple un décodeur audio ou un codeur paramétrique adapté pour la mise en œuvre d'un procédé selon l'invention. L'invention a en outre pour objet un produit programme d'ordinateur chargeable directement dans la mémoire interne d'un dispositif précédent, ou d'un groupe de dispositifs. Ce produit programme d'ordinateur comprend des portions de code logiciel pour l'exécution des étapes d'un procédé selon l'invention lorsque le programme est exécuté sur le dispositif ou le groupe de dispositifs. L'invention a en outre pour objet un support utilisable dans un dispositif précédent ou un groupement de dispositifs et sur lequel est enregistré un produit programme d'ordinateur chargeable directement dans la mémoire interne du dispositif ou du groupe de dispositifs, comprenant des portions de code logiciel pour l'exécution des étapes d'un procédé selon l'invention, lorsque le programme est exécuté sur le dispositif ou le groupe de dispositifs. D'autres caractéristiques et avantages de l'invention apparaîtront lors de la description qui suit faite en regard de figures annexées données à titre d'exemples non limitatifs. La figure 1 est un organigramme d'un exemple de déroulement d'un procédé selon l'invention. La figure 2 est un schéma d'un exemple d'utilisation d'un procédé selon l'invention. Un procédé selon l'invention se déroule de la façon suivante décrite en regard de l'organigramme de la figure 1. Le procédé 1 consiste à restaurer un partiel entre un pic Pi et un pic Pi+N dont les fréquences ω et phases φ sont connues. Dans une première étape 2, le procédé estime la fréquence ώ et l'amplitude A de chacun des pics manquants PM à Pi+N_x . Cette estimation est effectuée par exemple par interpolation ou prédiction linéaire selon des méthodes connues. Soit un partiel constitué d'une succession de pics Pi (Aiii) liés entre eux, connus à des instants iT et caractérisés par : 4- , l'amplitude du pic au temps iT ωi , la fréquence du pic au temps iT <Pj , la phase du pic au temps iT, donnée modulo 2π. L'estimation de la fréquence des pics manquants entre les pics P. et Pi+N est effectuée par exemple au moyen d'une interpolation linéaire entre ωi et ωl+N , ou au moyen d'une prédiction linéaire sur le passé ou sur le futur, décrite par exemple dans l'article "Enhanced Partial Tracking using linear Prédiction", de Mathieu Lagrange, Sylvain Marchand, martin Raspaud et Jean-Bernard Rault, Proceedings of the Digital Audio Effects (DAFx) Conférence, pp 141 -146, Queen Mary, University of London, UK, September 2003, ou encore au moyen d'une combinaison pondérée sur le passé ou sur le futur. L'estimation de l'amplitude A des pics manquants est effectuée par exemple au moyen d'une interpolation linéaire entre Ai et A+N > ou au moyen d'une prédiction linéaire sur le passé ou sur le futur ou encore au moyen d'une combinaison pondérée sur le passé ou sur le futur. Dans une deuxième étape 3, le procédé calcule la phase déroulée φ de pic en pic, depuis la phase du pic Pt jusqu'à celle du pic Pi+N . Ce calcul est effectué pour chacune des fréquences ω précédemment estimées. Soient φt et ωt la phase et la fréquence de départ et {ώ.+1,...,ώI.+ΛM}une estimation des fréquences dans l'intervalle à reconstruire. Pour prolonger le partiel entre le lon l'expression suivante :
(6)
Pour ne pas engendrer de discontinuités nuisibles à la qualité de la re-synthèse, il faut obtenir à l'instant i+N une phase reconstruite φi+N égale à φi+N . Les données intervenant dans l'expression (6) précédente étant soient approximées, soient prédites, il est statistiquement impossible d'obtenir cette égalité. Par conséquent, le procédé répartit l'erreur de phase errφ calculée à l'instant i+N entre tous les pics manquants et préalablement reconstruits PM à Pi+N_x au moyen des étapes suivantes. Dans une troisième étape 4, le procédé calcule l'erreur de phase errφ entre la phase déroulée φi+N et la phase comme φi+N au même pic P!+N . Ce calcul peut être effectué selon le système d'équations suivant : errφ = φi+N - φi+N + 2π si \φi+N - φi+N + 2π\ < \φi+N - φi+N\ (7) errφ = φi+N - φi+N - 2π si \φi+N - φi+N - 2π\ < \φi+N - (8) errφ = φi+Ni+N sinon. (9) Dans une quatrième étape 5, le procédé corrige chaque phase déroulée φi+/! d'une valeur fonction de l'erreur de phase errφ . Typiquement l'erreur de phase calculée à l'instant i+N est répartie de manière uniforme sur chacune des phases déroulées selon l'expression suivante : φcorrigéel+n = mod f φ,i+n + errφ — n ,2π λ n = l,...,N-l N (10) La répartition peut ne pas être uniforme et suivre une loi non linéaire par exemple. L'exemple d'utilisation illustré par la figure 2, consiste à restaurer les partiels au moyen d'un procédé 1 selon l'invention lors d'une analyse harmonique d'un signal sonore par exemple lors d'un codage paramétrique. Le signal sonore s(n) est représenté par un ensemble d'oscillateurs dont les paramètres (fréquence, amplitude) varient lentement au cours du temps. De manière classique, l'analyse harmonique comprend une analyse 6 temps/fréquence à court terme qui permet de déterminer les valeurs de ces paramètres, suivie d'une extraction 7 de pics puis d'un suivi 8 de partiels. Une détection 9 de trous dans les partiels précède la mise en œuvre d'un procédé 1 de restauration des partiels selon l'invention. Les pics reconstruits Pl+n ) lors de la mise en œuvre du procédé 1, sont ensuite traités comme des pics issus de l'analyse harmonique et la synthèse 10 additive du signal correspondant au partiel restauré à partir de ces pics reconstruits peut se faire, par exemple, par une des méthodes connues d'interpolation des phases (ordre 3 ou ordre 5).

Claims

REVENDICATIONS
1. Procédé (1) de restauration de partiels d'un signal sonore, lors d'une analyse harmonique suivant laquelle le signal sonore est découpé en trames temporelles sur lesquelles est appliquée une analyse temps/fréquence qui fournit des spectres successifs à court terme représentés par des trames fréquentielles d'échantillons, l'analyse consistant en outre à extraire des pics spectraux dans les trames fréquentielles et à les lier entre eux au cours du temps pour former des partiels, le procédé de restauration d'un partiel entre un pic P. et un pic Pi+N dont les fréquences et phases sont connues est caractérisé en ce qu'il comprend les étapes qui consistent : à estimer (2) la fréquence ώ de chacun des pics manquants PM à Pi+N_λ de ce partiel, - à calculer (3) la phase déroulée φ de pic en pic, depuis la phase du pic Pt jusqu'à celle du pic Pi+N et ce, pour toutes les fréquences ώ précédemment estimées, à calculer (4) l'erreur de phase errφ entre la phase déroulée φ et la phase connue au même pic Pi+N , - à corriger (5) chaque phase déroulée φ d'une valeur fonction de l'erreur de phase errφ .
2. Procédé (1) de restauration de partiels d'un signal sonore selon la revendication 1, dans lequel la phase déroulée φ est calculée par la formule : φi+n n = l,...,N avec φ{ et ώi = ω{ la phase et la fréquence du pic Pt , φi+N et ώi+N = ωi+N la phase et la fréquence du pic P!+N .
3. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications 1 et 2, dans lequel l'estimation de la fréquence ώ des pics manquants PM à ^+w_t est effectuée au moyen d'une interpolation linéaire entre les fréquences des pics connus Pt et Pi+N .
4. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications 1 et 2, dans lequel l'estimation de la fréquence ώ des pics manquants Pi+1 à ;+AM est effectuée au moyen d'une prédiction linéaire sur le passé.
5. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications 1 et 2, dans lequel l'estimation de la fréquence ώ des pics manquants PM à PiJrN_x est effectuée au moyen d'une prédiction linéaire sur le futur.
6. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications 1 et 2, dans lequel l'estimation de la fréquence ώ des pics manquants PM à Pi+N_λ est effectuée au moyen d'une combinaison pondérée d'une prédiction linéaire sur le passé et d'une prédiction linéaire sur le futur.
7. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications précédentes, qui comprend en outre l'étape qui consiste : à estimer l'amplitude de chacun des pics manquants PM à ? de ce partiel au moyen d'une interpolation linéaire entre les amplitudes A des pics connus P. et p * i+N
8. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications 1 à 6, qui comprend en outre l'étape qui consiste : à estimer l'amplitude de chacun des pics manquants PM à Pi .N_x de ce partiel au moyen d'une prédiction linéaire sur le passé.
9. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications 1 à 6, qui comprend en outre l'étape qui consiste : - à estimer l'amplitude de chacun des pics manquants PM à Pi+N_x de ce partiel au moyen d'une prédiction linéaire sur le futur.
10. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications 1 à 6, qui comprend en outre l'étape qui consiste : - à estimer l'amplitude de chacun des pics manquants PM à τ?;+ΛM de ce partiel au moyen d'une prédiction linéaire sur le passé et d'une prédiction linéaire sur le futur.
11. Procédé (1) de restauration de partiels d'un signal sonore selon l'une des revendications précédentes, dans lequel la correction de phase consiste à répartir uniformément l'erreur de phase errφ calculée à l'instant i+N entre tous les pics manquants PM à Pi+N^ du partiel.
12. Procédé (1) de restauration de partiels d'un signal sonore selon la revendication précédente, dans lequel la phase corrigée est déterminée par l'équation : f n φcorrigée^n = mod φi+n + errφ — ,2π n =l,...,N-l N
13. Procédé (1) de restauration de partiels d'un signal sonore selon la revendication précédente, dans lequel l'erreur de phase errφ est déterminée par le système d'équations : errφ = φi+N - φi+N + 2π si \φi+N - φi+N + 2π\ < errφ = φi+N - φi+N - 2π si \<pl+N - i+N - 2π\ < \φi+N - errφ = φi+N - φi+N sinon.
14. Dispositif de synthèse d'un signal sonore pour la mise en œuvre d'un procédé selon l'une des revendications précédentes, caractérisé en ce qu'il comprend : - des moyens d'estimation de la fréquence ώ de chacun des pics manquants PM à Pi+N-ι de ce partiel, des moyens de calcul de la phase déroulée φ de pic en pic, depuis la phase du pic Pt jusqu'à celle du pic Pi+N et ce, pour toutes les fréquences ώ précédemment estimées, des moyens de calcul de l'erreur de phase errφ entre la phase déroulée φ et la phase connue au même pic Pi+N , des moyens de correction de chaque phase déroulée φ d'une valeur fonction de l'erreur de phase errφ .
15. Un produit programme d'ordinateur chargeable directement dans la mémoire interne d'un dispositif ou d'un groupe de dispositifs selon la revendication précédente, comprenant des portions de code logiciel pour l'exécution des étapes d'un procédé (1) selon l'une des revendications 1 à 13, lorsque le programme est exécuté sur le dispositif ou le groupe de dispositifs.
16. Support utilisable dans un dispositif ou un groupement de dispositifs selon la revendication 14 et sur lequel est enregistré un produit programme d'ordinateur chargeable directement dans la mémoire interne du dispositif ou du groupe de dispositifs, comprenant des portions de code logiciel pour l'exécution des étapes d'un procédé (1) selon l'une des revendications 1 à 13, lorsque le programme est exécuté sur le dispositif ou le groupe de dispositifs.
EP05717367A 2004-01-20 2005-01-04 Procede de restauration de partiels d'un signal sonore Withdrawn EP1714273A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0400619A FR2865310A1 (fr) 2004-01-20 2004-01-20 Procede de restauration de partiels d'un signal sonore
PCT/FR2005/000019 WO2005081228A1 (fr) 2004-01-20 2005-01-04 Procede de restauration de partiels d’un signal sonore

Publications (1)

Publication Number Publication Date
EP1714273A1 true EP1714273A1 (fr) 2006-10-25

Family

ID=34707988

Family Applications (1)

Application Number Title Priority Date Filing Date
EP05717367A Withdrawn EP1714273A1 (fr) 2004-01-20 2005-01-04 Procede de restauration de partiels d'un signal sonore

Country Status (7)

Country Link
US (1) US20080243493A1 (fr)
EP (1) EP1714273A1 (fr)
JP (1) JP2007519043A (fr)
KR (1) KR20060131844A (fr)
CN (1) CN1934618A (fr)
FR (1) FR2865310A1 (fr)
WO (1) WO2005081228A1 (fr)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101016224B1 (ko) 2006-12-12 2011-02-25 프라운호퍼-게젤샤프트 추르 푀르데룽 데어 안제반텐 포르슝 에 파우 인코더, 디코더 및 시간 영역 데이터 스트림을 나타내는 데이터 세그먼트를 인코딩하고 디코딩하는 방법
KR20080073925A (ko) * 2007-02-07 2008-08-12 삼성전자주식회사 파라메트릭 부호화된 오디오 신호를 복호화하는 방법 및장치
EP2963646A1 (fr) 2014-07-01 2016-01-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Décodeur et procédé de décodage d'un signal audio, codeur et procédé pour coder un signal audio

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0243562B1 (fr) * 1986-04-30 1992-01-29 International Business Machines Corporation Procédé de codage de la parole et dispositif pour la mise en oeuvre dudit procédé
US5054072A (en) * 1987-04-02 1991-10-01 Massachusetts Institute Of Technology Coding of acoustic waveforms
US5261027A (en) * 1989-06-28 1993-11-09 Fujitsu Limited Code excited linear prediction speech coding system
CA2153170C (fr) * 1993-11-30 2000-12-19 At&T Corp. Reduction du bruit transmis dans les systemes de telecommunications
US5574825A (en) * 1994-03-14 1996-11-12 Lucent Technologies Inc. Linear prediction coefficient generation during frame erasure or packet loss
AU3708597A (en) * 1996-08-02 1998-02-25 Matsushita Electric Industrial Co., Ltd. Voice encoder, voice decoder, recording medium on which program for realizing voice encoding/decoding is recorded and mobile communication apparatus
US5886276A (en) * 1997-01-16 1999-03-23 The Board Of Trustees Of The Leland Stanford Junior University System and method for multiresolution scalable audio signal encoding
SE9903553D0 (sv) * 1999-01-27 1999-10-01 Lars Liljeryd Enhancing percepptual performance of SBR and related coding methods by adaptive noise addition (ANA) and noise substitution limiting (NSL)
US6757654B1 (en) * 2000-05-11 2004-06-29 Telefonaktiebolaget Lm Ericsson Forward error correction in speech coding
GB2378064A (en) * 2001-03-12 2003-01-29 Simoco Int Ltd A feed-forward signal level control arrangement with a delay in the signal path
US7386217B2 (en) * 2001-12-14 2008-06-10 Hewlett-Packard Development Company, L.P. Indexing video by detecting speech and music in audio
US7243064B2 (en) * 2002-11-14 2007-07-10 Verizon Business Global Llc Signal processing of multi-channel data
SG120121A1 (en) * 2003-09-26 2006-03-28 St Microelectronics Asia Pitch detection of speech signals
DE10354557B4 (de) * 2003-11-21 2007-11-29 Infineon Technologies Ag Verfahren und Vorrichtungen zur Prädiktion von in einem Empfangssignal enthaltenen Rauschen sowie ein digitaler Empfänger
US7672835B2 (en) * 2004-12-24 2010-03-02 Casio Computer Co., Ltd. Voice analysis/synthesis apparatus and program
US8229106B2 (en) * 2007-01-22 2012-07-24 D.S.P. Group, Ltd. Apparatus and methods for enhancement of speech

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See references of WO2005081228A1 *

Also Published As

Publication number Publication date
US20080243493A1 (en) 2008-10-02
KR20060131844A (ko) 2006-12-20
CN1934618A (zh) 2007-03-21
JP2007519043A (ja) 2007-07-12
WO2005081228A1 (fr) 2005-09-01
FR2865310A1 (fr) 2005-07-22

Similar Documents

Publication Publication Date Title
EP1789956B1 (fr) Procede de traitement d&#39;un signal sonore bruite et dispositif pour la mise en oeuvre du procede
EP1356461A1 (fr) Procede et dispositif de reduction de bruit
EP1016072A1 (fr) Procede de debruitage d&#39;un signal de parole numerique
FR3001593A1 (fr) Correction perfectionnee de perte de trame au decodage d&#39;un signal.
FR3031225A1 (fr) Procede de separation ameliore et produit programme d&#39;ordinateur
WO2003005229A1 (fr) Procede et circuit d&#39;analyse frequentielle en temps reel d&#39;un signal non stationnaire
EP1016071A1 (fr) Procede de detection d&#39;activite vocale
CA1225745A (fr) Procede et installation d&#39;analyse et de restitution de signal a echantillonnage et interpolation
JP5975880B2 (ja) フォルマントの速い抽出のための複数の並列複素フィルタを用いる音声認識
EP1714273A1 (fr) Procede de restauration de partiels d&#39;un signal sonore
US9311929B2 (en) Digital processor based complex acoustic resonance digital speech analysis system
EP2515300A1 (fr) Procédé et système de réduction du bruit
FR3020732A1 (fr) Correction de perte de trame perfectionnee avec information de voisement
EP1021805B1 (fr) Procede et disposition de conditionnement d&#39;un signal de parole numerique
CA2304015A1 (fr) Procede de debruitage d&#39;un signal de parole numerique
EP1895433A1 (fr) Procédé d&#39;estimation de phase pour la modélisation sinusoidale d&#39;un signal numérique
EP2091149A1 (fr) Procédé et dispositif de conversion descendante de fréquence d&#39;échantillonnage d&#39;un signal numérique.
EP1192619B1 (fr) Codage et decodage audio par interpolation
EP1478096B1 (fr) Dispositif et procédé de réjection d&#39;interférences auto-adaptatif
WO2002091362A1 (fr) Procede d&#39;extraction de parametres d&#39;un signal audio, et codeur mettant en oeuvre un tel procede
EP1192621B1 (fr) Codage audio avec composants harmoniques
EP1192618B1 (fr) Codage audio avec liftrage adaptif
FR2871593A1 (fr) Procede de determination des signaux de separation respectivement relatifs a des sources sonores a partir d&#39;un signal issu du melange de ces signaux
FR2771543A1 (fr) Procede de debruitage de signaux sonores, notamment pour le traitement de la parole
FR2773653A1 (fr) Dispositifs de codage/decodage de donnees, et supports d&#39;enregistrement memorisant un programme de codage/decodage de donnees au moyen d&#39;un filtre de ponderation frequentielle

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20060819

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LI LT LU MC NL PL PT RO SE SI SK TR

DAX Request for extension of the european patent (deleted)
GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

RTI1 Title (correction)

Free format text: METHOD AND DEVICE FOR RESTORING PARTIALS OF A SOUND SIGNAL

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: FRANCE TELECOM

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20090709