EP3111667B1 - Procede et systeme d'egalisation acoustique automatise - Google Patents

Procede et systeme d'egalisation acoustique automatise Download PDF

Info

Publication number
EP3111667B1
EP3111667B1 EP15703951.2A EP15703951A EP3111667B1 EP 3111667 B1 EP3111667 B1 EP 3111667B1 EP 15703951 A EP15703951 A EP 15703951A EP 3111667 B1 EP3111667 B1 EP 3111667B1
Authority
EP
European Patent Office
Prior art keywords
response
target
mean
offset
curve
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
EP15703951.2A
Other languages
German (de)
English (en)
Other versions
EP3111667A1 (fr
Inventor
Frédéric AMADU
Delphine Devallez
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Arkamys SA
Original Assignee
Arkamys SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Arkamys SA filed Critical Arkamys SA
Publication of EP3111667A1 publication Critical patent/EP3111667A1/fr
Application granted granted Critical
Publication of EP3111667B1 publication Critical patent/EP3111667B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/04Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/13Acoustic transducers and sound field adaptation in vehicles

Definitions

  • the present invention relates to the field of sound signal processing.
  • the present invention relates more particularly to a method and an automated acoustic equalization system.
  • a case of use of the present invention is as follows: in the automotive field: a plurality of microphones are placed in a vehicle and pre-calibrated sound sequences are broadcast in the vehicle speakers. A system compares the sound signals emitted and the sound signals received and recorded. We deduce the "acoustic signature" of the passenger compartment of the vehicle. The user then defines a target acoustic signature curve, which is different from the vehicle's native acoustic signature. A second algorithm calculates digital filter coefficients so that, when these filters are applied before sound signals are broadcast in the vehicle speakers, the acoustic signature of the vehicle becomes the target sound signature curve, not the native acoustic signature of the vehicle.
  • IIR Infinite Impulse Response filters
  • Biquad filters of the second order are used.
  • the method and the system according to the present invention concern the equalization of the amplitude of the frequency response of the passenger compartment.
  • This technical solution of the prior art proposes to measure the emitting response, a theater observed at the receiver by using, in particular, a measurement signal supplied by a noise generator or any other measurement method making it possible to observe the system response in open loop.
  • the equalizer device works to make said response come closest to a desired response.
  • This technical solution of the prior art has for application the modification of the acoustic properties of theaters.
  • the prior art is also known from US Pat. US 6,721,428 B1 (Texas Instruments), an automatic speaker equalizer.
  • This prior art US patent relates more particularly to a method for generating digital filters for equalizing a loudspeaker.
  • First digital data is provided, for a tolerance interval for a tone-based target response response versus frequency for the loudspeaker.
  • Second digital data is generated, for an actual acoustic signal response curve as a function of frequency for the loudspeaker.
  • the first digital data is compared with the second digital data, and it is determined whether the actual response curve is in the tolerance range.
  • digital audio filters are iteratively generated, and the digital audio filters are applied to the second digital data to generate third digital data for a compensated response curve. .
  • the frequency, gain and bandwidth of the digital audio filters are automatically optimized until the compensated response curve is within the tolerance range or a predetermined limit of the number of digital audio filters has been reached. of the two taking place first.
  • the present invention provides a method for providing equalization of a signal by determining filter parameters to reduce the difference between the amplitude of a frequency response representing the acoustic signature of a set of speakers in their environment and a target sound signature curve.
  • the method according to the present invention makes it possible to obtain automated acoustic equalization thanks to a precise and optimized calculation of filter parameters.
  • the interpolation step of the target sound signature curve is performed using the Hermite method.
  • said method further comprises a step of automatically optimizing the offset of the target response C ec , repeated at each iteration.
  • said method further comprises a step of smoothing the N frequency responses.
  • said method implements filters corresponding to the following types: "peak”, “notch”"high-shelf” and “ low-shelf " depending on the shape of local maxima and local minima.
  • said method furthermore implements a global optimization algorithm to minimize the error.
  • the Figure 1 illustrates the different steps of the process according to the present invention.
  • a logarithmic frequency scale translation of said average M of the N frequency responses is performed.
  • a target sound signature curve C ec is interpolated and then translated into a logarithmic frequency scale.
  • the averaged response M and the target sound signature response C ec are compared by calculating the difference between the averaged response M and the target response C ec .
  • the curve C diff resulting from the difference between said averaged response M and said target response C ec is analyzed.
  • filter parameters are determined for reducing the difference between said averaged response M and said target response C ec by firstly processing the local maxima in descending order according to their gain, then the local minima, and performing successive iterations.
  • the method according to the present invention further comprises a step of optimizing the parameters of the filters in order to improve the performance of the system.
  • Frequency responses can be averaged "standard” (that is, with identical weights), or with different weights.
  • the Figure 2 represents the target sound signature curve C ec within the meaning of the present invention, the frequency responses derived from the N impulse response measurements, as well as the average M.
  • a comparison of the averaged response is carried out. M and the target response C ec , by calculating the difference between the averaged response M and the target response C ec .
  • the Figure 3 illustrates the detection and ranking of local maxima ("peaks") and local minima ("troughs").
  • the local maxima (peaks) are first processed in descending order according to their gain, then the local minima (troughs) are processed in ascending order. This makes it possible to determine filter parameters for reducing the difference between the averaged response M and the target response C ec . Successive iterations are performed.
  • Parameters and number of filters are optimized using an algorithm.
  • the parameters f, Q and G (respectively central frequency, quality factor and gain of the biquads) are optimized from intervals of values that can be predefined by a user, and the ranges of values of Q and G may depend on frequency. Thus, for example in high frequencies, the low gain filters are more easily eliminated because they are not perceptible.
  • the objective is to find the optimal parameters (fc opt , G opt , Q opt ) of a filter and the optimal offset of the target curve Offset opt.
  • the limits of the parameters are determined like this: max f vs 2 1 12 , FreqRange 1 ⁇ f vs Opt ⁇ min f vs ⁇ 2 1 12 , FreqRange 2 - BOY WUT ⁇ 0.9 ⁇ BOY WUT Opt ⁇ BOY WUT ⁇ 1.1 s i BOY WUT ⁇ 0 e t - BOY WUT ⁇ 1.1 ⁇ BOY WUT Opt ⁇ BOY WUT ⁇ 0.9 s i BOY WUT > 0 QRange 1 ⁇ Q Opt ⁇ QRange 2 TargetGain - 100 ⁇ TargetGain boy Wut Opt ⁇ TargetGain + 100 where f c and G are respectively the center frequency and the gain of a biquad filter modeling the nth peak and QRange is the range of admiss
  • a post-optimization process is performed. This post-optimization process consists of reclassifying the filters by increasing frequency and reoptimizing the coefficients. If a filter is canceled during this process, a new peak / dip is searched in order to output the maximum number of filters. The optimization process is implemented until the maximum number of filters is reached.
  • the interpolation step of the target curve is performed using the Hermite method.
  • the method according to the present invention further comprises a step of automatically optimizing the offset of the target response C ec , repeated at each iteration.
  • the method according to the present invention further comprises a step of smoothing the N frequency responses.
  • filters corresponding to the following types are used: " peak”,”notch”,”high-shelf” “And” low-shelf “depending on the shape of local maxima (peaks) and local minima (troughs).
  • the filter is made according to whether or not a certain threshold is exceeded by the quality factor.
  • the method according to the present invention furthermore implements a global optimization algorithm to minimize the error.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Stereophonic System (AREA)

Description

    Domaine de l'invention
  • La présente invention se rapporte au domaine du traitement du signal sonore.
  • La présente invention se rapporte plus particulièrement à un procédé et à un système d'égalisation acoustique automatisé.
  • Un cas d'usage de la présente invention est le suivant : dans le domaine de l'automobile : on place une pluralité de microphones dans un véhicule et on diffuse des séquences sonores pré-calibrées dans les haut-parleurs du véhicule. Un système compare les signaux sonores émis et les signaux sonores reçus et enregistrés. On en déduit « la signature acoustique » de l'habitacle du véhicule. L'utilisateur définit ensuite une courbe de signature acoustique cible, qui est différente de la signature acoustique native du véhicule. Un second algorithme calcule des coefficients de filtres numériques de manière à ce que, lorsqu'on applique ces filtres avant diffusion de signaux sonores dans les haut-parleurs du véhicule, la signature acoustique du véhicule devienne la courbe de signature sonore cible, et non la signature acoustique native du véhicule.
  • Dans le cadre de la présente invention, on utilise des filtres « IIR » ou « Infinite Impulse Response » en terminologie anglo-saxonne.
  • Plus particulièrement, on utilise dans le cadre de la présente invention des filtres dits « Biquad », d'ordre deux.
  • Le procédé et le système selon la présente invention concernent l'égalisation de l'amplitude de la réponse fréquentielle de l'habitacle.
  • Etat de la technique
  • Le document US2007/0025559 décrit un système d'égalisation acoustique automatisé comportant les caractéristiques du préambule des revendications indépendantes 1 et 7. On connaît dans l'état de la technique la demande de brevet français N° FR 2 967 848 (Centre Scientifique et Technique du Bâtiment), qui se rapporte à un système de correction de spectre destiné notamment à une salle de spectacle. Cette demande de brevet de l'art antérieur décrit un système électroacoustique comportant une pluralité de cellules. Dans ces cellules sont prévus : un dispositif d'égalisation, un émetteur, un récepteur, un circuit d'amplification pour amplifier les signaux issus du récepteur vers ledit émetteur et un organe de calcul qui va agir, entre autres, sur le dispositif d'égalisation. Cette solution technique de l'art antérieur se propose de mesurer la réponse émetteur, salle de spectacle observée au niveau du récepteur en utilisant, notamment, un signal de mesure fourni par un générateur de bruit ou toute autre méthode de mesure permettant d'observer la réponse du système en boucle ouverte. Le dispositif d'égalisation oeuvre pour que ladite réponse se rapproche le plus d'une réponse désirée. Cette solution technique de l'art antérieur a pour application la modification des propriétés acoustiques de salles de spectacle.
  • L'art antérieur connaît également, par le brevet américain N° US 6 721 428 B1 (Texas Instruments), un égaliseur automatique de haut-parleurs. Ce brevet américain de l'art antérieur se rapporte plus particulièrement à un procédé pour générer des filtres numériques pour égaliser un haut-parleur. Des premières données numériques sont fournies, pour un intervalle de tolérance pour une courbe de réponse cible de signal sonore en fonction de la fréquence pour le haut-parleur. Des secondes données numériques sont générées, pour une courbe de réponse réelle du signal sonore en fonction de la fréquence pour le haut-parleur. Les premières données numériques sont comparées avec les secondes données numériques, et il est déterminé si la courbe de réponse réelle est dans l'intervalle de tolérance. Si la courbe de réponse réelle n'est pas dans l'intervalle de tolérance, des filtres audio numériques sont générés de façon itérative, et les filtres audio numériques sont appliqués aux secondes données numériques pour générer des troisièmes données numériques pour une courbe de réponse compensée. La fréquence, le gain et la bande passante des filtres audio numériques sont optimisés de façon automatique jusqu'à ce que la courbe de réponse compensée soit dans l'intervalle de tolérance ou une limite prédéterminée du nombre de filtres audio numériques ait été atteinte, celle des deux ayant lieu en premier.
  • On connaît également dans l'état de la technique la publication scientifique « Filter Design Method for Loudspeaker Equalization Based on IIR Parametric Filters » de German Ramos et Jose J. Lopez.
  • Exposé de l'invention
  • La présente invention propose un procédé permettant de fournir une égalisation d'un signal en déterminant des paramètres de filtres permettant de réduire l'écart entre l'amplitude d'une réponse fréquentielle représentant la signature acoustique d'un ensemble de haut-parleurs dans leur environnement et une courbe de signature sonore cible.
  • A cet effet, la présente invention concerne, dans son acception la plus générale, un procédé d'égalisation acoustique automatisé, caractérisé en ce qu'il comporte les étapes suivantes :
    • Mesure de N réponses impulsionnelles RI1, RI2, ..., RIN après émission d'un signal sonore précalibré reçu par N microphones ;
    • Calcul des N réponses fréquentielles correspondantes par Transformée de Fourier rapide ;
    • Etablissement d'une moyenne M des N réponses fréquentielles ;
    • Traduction en échelle fréquentielle logarithmique de ladite moyenne M des N réponses fréquentielles ;
    • Interpolation d'une courbe de signature sonore cible Cec à partir d'un certain nombre de points choisis par un utilisateur ;
    • Traduction en échelle fréquentielle logarithmique de ladite courbe de signature sonore cible Cec ;
    • Comparaison de ladite réponse moyennée M et de ladite réponse cible Cec, en calculant la différence entre ladite réponse moyennée M et ladite réponse de signature sonore cible Cec ;
    • Analyse de la courbe Cdiff résultant de la différence entre ladite réponse moyennée M et ladite réponse cible Cec ; et
    • Détermination de paramètres de filtres pour la réduction de la différence entre ladite réponse moyennée M et ladite réponse cible Cec en traitant tout d'abord les maxima locaux par ordre décroissant suivant leur gain, puis les minima locaux, et en réalisant des itérations successives ;
    ledit procédé comportant en outre une étape d'optimisation des paramètres des filtres afin d'améliorer la performance du système.
  • Ainsi, le procédé selon la présente invention permet d'obtenir une égalisation acoustique automatisée grâce à un calcul précis et optimisé de paramètres de filtres.
  • De préférence, l'étape d'interpolation de la courbe de signature sonore cible est réalisée au moyen de la méthode d'Hermite.
  • Avantageusement, ledit procédé comporte en outre une étape d'optimisation automatique de l'offset de la réponse cible Cec, répétée à chaque itération.
  • Avantageusement, ledit procédé comporte en outre une étape de lissage des N réponses fréquentielles.
  • De préférence, ledit procédé met en oeuvre des filtres correspondants aux types suivants: « peak », « notch » « high-shelf » et « low-shelf » en fonction de la forme des maxima locaux et des minima locaux.
  • Selon un mode de mise en oeuvre particulier, ledit procédé met en outre en oeuvre un algorithme d'optimisation globale pour minimiser l'erreur.
  • La présente invention se rapporte également à un système d'égalisation acoustique automatisé, caractérisé en ce qu'il comporte des moyens pour :
    • mesurer N réponses impulsionnelles RI1, RI2, ..., RIN après émission d'un signal sonore précalibré reçu par N microphones ;
    • calculer les N réponses fréquentielles correspondantes par Transformée de Fourier rapide ;
    • établir une moyenne M des N réponses fréquentielles ;
    • traduire en échelle fréquentielle logarithmique ladite moyenne M des N réponses fréquentielles ;
    • interpoler une courbe cible Cec à partir d'un certain nombre de points définis par un utilisateur;
    • traduire en échelle fréquentielle logarithmique ladite courbe cible Cec ;
    • comparer ladite réponse moyennée M et ladite réponse cible Cec, en calculant la différence entre ladite réponse moyennée M et ladite réponse cible Cec ;
    • analyser la courbe Cdiff résultant de la différence entre ladite réponse moyennée M et ladite réponse cible Cec ; et
    • déterminer des paramètres de filtres pour la réduction de la différence entre ladite réponse moyennée M et ladite réponse cible Cec en traitant tout d'abord les maxima locaux par ordre décroissant suivant leur gain, puis les minima locaux, et en réalisant des itérations successives ;
    ledit procédé comportant en outre des moyens pour optimiser des paramètres des filtres afin d'améliorer la performance du système. Brève description des dessins
  • On comprendra mieux l'invention à l'aide de la description, faite ci-après à titre purement explicatif, d'un mode de réalisation de l'invention, en référence aux Figures dans lesquelles :
    • la Figure 1 illustre les différentes étapes du procédé selon la présente invention ;
    • la Figure 2 représente la courbe de signature sonore cible Cec au sens de la présente invention, les réponses fréquentielles dérivées des N mesures de réponses impulsionnelles, ainsi que la moyenne M ; et
    • la Figure 3 illustre la détection et le classement des maxima locaux (« pics ») et des minima locaux (« creux »).
    Description détaillée des modes de réalisation de l'invention
  • La Figure 1 illustre les différentes étapes du procédé selon la présente invention.
  • Le procédé d'égalisation acoustique automatisé conforme à la présente invention comporte les étapes suivantes :
    • Dans un premier temps, on mesure N réponses impulsionnelles RI1, RI2, ..., RIN après émission d'un signal sonore précalibré reçu par N microphones.
  • Ensuite on calcule les N réponses fréquentielles correspondantes par Transformée de Fourier rapide.
  • Ensuite, on établit une moyenne M des N réponses fréquentielles calculées.
  • Une traduction en échelle fréquentielle logarithmique de ladite moyenne M des N réponses fréquentielles -est effectuée.
  • Une courbe de signature sonore cible Cec est interpolée, puis est traduite en échelle fréquentielle logarithmique.
  • Ensuite, on compare la réponse moyennée M et la réponse de signature sonore cible Cec, en calculant la différence entre la réponse moyennée M et la réponse cible Cec.
  • La courbe Cdiff résultant de la différence entre ladite réponse moyennée M et ladite réponse cible Cec est analysée.
  • Enfin, on détermine des paramètres de filtres pour la réduction de la différence entre ladite réponse moyennée M et ladite réponse cible Cec en traitant tout d'abord les maxima locaux par ordre décroissant suivant leur gain, puis les minima locaux, et en réalisant des itérations successives.
  • Le procédé selon la présente invention comporte en outre une étape d'optimisation des paramètres des filtres afin d'améliorer la performance du système.
  • Les réponses fréquentielles peuvent être moyennées de façon « standard » (c'est-à-dire avec des poids identiques), ou bien avec des poids différents.
  • La Figure 2 représente la courbe de signature sonore cible Cec au sens de la présente invention, les réponses fréquentielles dérivées des N mesures de réponses impulsionnelles, ainsi que la moyenne M. Dans le cadre de la présente invention, on procède à une comparaison de la réponse moyennée M et de la réponse cible Cec, en calculant la différence entre la réponse moyennée M et la réponse cible Cec.
  • La Figure 3 illustre la détection et le classement des maxima locaux (« pics ») et des minima locaux (« creux »). Conformément à la présente invention, on traite tout d'abord les maxima locaux (pics) par ordre décroissant suivant leur gain, puis on traite les minima locaux (creux) par ordre croissant. Ceci permet de déterminer des paramètres de filtres pour la réduction de la différence entre la réponse moyennée M et la réponse cible Cec. Des itérations successives sont réalisées.
  • Il a été démontré dans des études scientifiques qu'il est préférable d'égaliser d'abord les pics, puis ensuite les creux. En effet, l'oreille humaine est plus sensible aux pics qu'aux creux.
  • Dans un mode de réalisation, l'optimisation de l'offset de la courbe cible est réalisée comme suit :
    • La courbe cible et la réponse fréquentielle moyenne sont recalculées sur une échelle logarithmique afin d'approximer la résolution non uniforme du système auditif. Ceci est réalisé par une fonction de lissage qui rééchantillonne la réponse fréquentielle sur une échelle logarithmique avec par exemple une résolution fréquentielle de 1/48 octave.
      1. i) La bande de fréquence d'optimisation « FreqRange » est appliquée comme un vecteur de poids FreqWeight qui vaut 0 en dehors de la bande de fréquence et 1 à l'intérieur de la bande de fréquence.
      2. ii) La valeur initiale de l'offset « Offset » (en dB) est calculée comme la valeur moyenne de la réponse fréquentielle moyenne dans la bande de fréquence d'égalisation : Offset = mean C ec n i : n f
        Figure imgb0001
        ni et nf sont respectivement le premier et le dernier des points de fréquence de la bande de fréquence logarithmique d'égalisation.
      3. iii) L'algorithme d'optimisation consiste à trouver l'offset optimal, Offset, qui minimise l'erreur entre M et Cec (=Shape+Offset), définie comme suit : e mean = 1 n f n i + 1 k = n i n f | M f k C ec f k |
        Figure imgb0002
        Avec Cec =Offset+Shape
      Ceci est réalisé avec l'algorithme d'optimisation, qui calcule de façon itérative l'erreur emean, et recherche l'offset optimal dans un intervalle de +/- 100 dB autour de la valeur initiale. En plus de la minimisation de l'erreur emean, une contrainte est ajoutée au problème d'optimisation, afin de limiter le gain des pics à Gmax en dB. Il est défini comme suit : max n i k n f | M f k C ec f k | G max
      Figure imgb0003
  • Les paramètres et le nombre des filtres sont optimisés au moyen d'un algorithme. Les paramètres f, Q et G (respectivement fréquence centrale, facteur de qualité et gain des filtres biquads) sont optimisés à partir d'intervalles de valeurs qui peuvent être prédéfinis par un utilisateur, et les plages de valeurs de Q et G peuvent dépendre de la fréquence. Ainsi, par exemple dans les hautes fréquences, les filtres de faible gain sont plus facilement éliminés car ils ne sont pas perceptibles.
  • Dans un mode de réalisation, l'objectif est de trouver les paramètres optimaux (fcopt, Gopt, Qopt) d'un filtre et l'offset optimal de la courbe cible Offsetopt. Les limites des paramètres sont déterminées comme ceci : max f c 2 1 12 , FreqRange 1 f c opt min f c × 2 1 12 , FreqRange 2
    Figure imgb0004
    G × 0.9 G opt G × 1.1 s i G 0 e t G × 1.1 G opt G × 0.9 s i G > 0
    Figure imgb0005
    QRange 1 Q opt QRange 2
    Figure imgb0006
    TargetGain 100 TargetGain g opt TargetGain + 100
    Figure imgb0007
    fc et G sont respectivement la fréquence centrale et le gain d'un filtre biquad modélisant le nième pic, et QRange est la plage de valeurs admissibles du facteur de qualité Q.
  • Un processus de post-optimisation est réalisé. Ce processus de post-optimisation consiste à reclasser les filtres par fréquence croissante et à réoptimiser les coefficients. Si un filtre est annulé lors de ce processus, un nouveau pic/creux est recherché afin d'avoir en sortie le nombre maximum de filtres. Le processus d'optimisation est mis en oeuvre jusqu'à ce que le nombre maximum de filtres soit atteint.
  • Dans un mode de réalisation, l'étape d'interpolation de la courbe cible est réalisée au moyen de la méthode d'Hermite.
  • Dans un mode de réalisation, le procédé selon la présente invention comporte en outre une étape d'optimisation automatique de l'offset de la réponse cible Cec, répétée à chaque itération.
  • Dans un mode de réalisation, le procédé selon la présente invention comporte en outre une étape de lissage des N réponses fréquentielles.
  • Dans le cadre du procédé selon la présente invention, on met en oeuvre des filtres correspondants aux types suivants : « peak », « notch » « high-shelf » et « low-shelf » en fonction de la forme des maxima locaux (pics) et des minima locaux (creux).
  • Dans certains cas, il est préférable de choisir un filtre de type « peak ». Dans d'autres cas, il est préférable de choisir un filtre de type « shelf ». La sélection du filtre est effectuée en fonction du dépassement ou non d'un certain seuil par le facteur de qualité.
  • Dans un mode de réalisation, le procédé selon la présente invention met en outre en oeuvre un algorithme d'optimisation globale pour minimiser l'erreur.
  • La présente invention se rapporte également à un système d'égalisation acoustique automatisé, comportant des moyens pour :
    • mesurer N réponses impulsionnelles RI1, RI2, ..., RIN après émission d'un signal sonore précalibré reçu par N microphones ;
    • calculer les N réponses fréquentielles correspondantes par Transformée de Fourier rapide ;
    • établir une moyenne M des N réponses fréquentielles ;
    • traduire en échelle fréquentielle logarithmique ladite moyenne M des N réponses fréquentielles ;
    • interpoler une courbe cible Cec à partir d'un certain nombre de points définis par un utilisateur;
    • traduire en échelle fréquentielle logarithmique ladite courbe cible Cec ;
    • comparer ladite réponse moyennée M et ladite réponse cible Cec, en calculant la différence entre ladite réponse moyennée M et ladite réponse cible Cec ;
    • analyser la courbe Cdiff résultant de la différence entre ladite réponse moyennée M et ladite réponse cible Cec ; et
    • déterminer des paramètres de filtres pour la réduction de la différence entre ladite réponse moyennée M et ladite réponse cible Cec en traitant tout d'abord les maxima locaux par ordre décroissant suivant leur gain, puis les minima locaux, et en réalisant des itérations successives ;
    ledit système comportant en outre des moyens pour optimiser des paramètres des filtres afin d'améliorer la performance du système.
  • L'invention est décrite dans ce qui précède à titre d'exemple. Il est entendu que l'homme du métier est à même de réaliser différentes variantes de l'invention sans pour autant sortir du cadre du brevet.

Claims (7)

  1. Procédé d'égalisation acoustique automatisé, comportant les étapes suivantes :
    • Mesure de N réponses impulsionnelles RI1, RI2, ..., RIN après émission d'un signal sonore précalibré reçu par N microphones ;
    • Calcul des N réponses fréquentielles correspondantes par Transformée de Fourier rapide ;
    • Etablissement d'une moyenne M des N réponses fréquentielles ;
    • Traduction en échelle fréquentielle logarithmique de ladite moyenne M des N réponses fréquentielles ;
    • Interpolation d'une courbe de signature sonore cible Cec à partir d'un certain nombre de points choisis par un utilisateur ;
    • Traduction en échelle fréquentielle logarithmique de ladite courbe de signature sonore cible Cec ;
    • Comparaison de ladite réponse moyennée M et de ladite réponse cible Cec, en calculant la différence entre ladite réponse moyennée M et ladite réponse de signature sonore cible Cec ;
    • Analyse de la courbe Cdiff résultant de la différence entre ladite réponse moyennée M et ladite réponse cible Cec ; et caractérisé en ce qu'il comporte l'étape suivante:
    • Détermination de paramètres de filtres pour la réduction de la différence entre ladite réponse moyennée M et ladite réponse cible Cec en traitant tout d'abord les maxima locaux par ordre décroissant suivant leur gain, puis les minima locaux, et en réalisant des itérations successives ;
    ledit procédé comportant en outre une étape d'optimisation des paramètres des filtres afin d'améliorer la performance du système.
  2. Procédé d'égalisation acoustique automatisé selon la revendication 1, caractérisé en ce que l'étape d'interpolation de la courbe de signature sonore cible est réalisée au moyen de la méthode d'Hermite.
  3. Procédé d'égalisation acoustique automatisé selon la revendication 1 ou 2, caractérisé en ce qu'il comporte en outre une étape d'optimisation automatique de l'offset de la réponse cible Cec, répétée à chaque itération.
  4. Procédé d'égalisation acoustique automatisé selon la revendication 1, 2 ou 3, caractérisé en ce qu'il comporte en outre une étape de lissage des N réponses fréquentielles.
  5. Procédé d'égalisation acoustique automatisé selon l'une au moins des revendications précédentes, caractérisé en ce qu'il met en oeuvre des filtres correspondants aux types suivants : « peak », « notch » « high-shelf » et « low-shelf » en fonction de la forme des maxima locaux et des minima locaux.
  6. Procédé d'égalisation acoustique automatisé selon l'une au moins des revendications précédentes, caractérisé en ce qu'il met en outre en oeuvre un algorithme d'optimisation globale pour minimiser l'erreur.
  7. Système d'égalisation acoustique automatisé, comportant des moyens pour :
    • mesurer N réponses impulsionnelles RI1, RI2, ..., RIN après émission d'un signal sonore précalibré reçu par N microphones ;
    • calculer les N réponses fréquentielles correspondantes par Transformée de Fourier rapide ;
    • établir une moyenne M des N réponses fréquentielles ;
    • traduire en échelle fréquentielle logarithmique ladite moyenne M des N réponses fréquentielles ;
    • interpoler une courbe cible Cec à partir d'un certain nombre de points définis par un utilisateur;
    • traduire en échelle fréquentielle logarithmique ladite courbe cible Cec ;
    • comparer ladite réponse moyennée M et ladite réponse cible Cec, en calculant la différence entre ladite réponse moyennée M et ladite réponse cible Cec ;
    • analyser la courbe Cdiff résultant de la différence entre ladite réponse moyennée M et ladite réponse cible Cec ; et caractérisé en ce qu'il comporte des moyens pour
    • déterminer des paramètres de filtres pour la réduction de la différence entre ladite réponse moyennée M et ladite réponse cible Cec en traitant tout d'abord les maxima locaux par ordre décroissant suivant leur gain, puis les minima locaux, et en réalisant des itérations successives ;
    ledit système comportant en outre des moyens pour optimiser des paramètres des filtres afin d'améliorer la performance du système.
EP15703951.2A 2014-02-25 2015-02-03 Procede et systeme d'egalisation acoustique automatise Active EP3111667B1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1451504A FR3018015B1 (fr) 2014-02-25 2014-02-25 Procede et systeme d'egalisation acoustique automatise
PCT/EP2015/052199 WO2015128160A1 (fr) 2014-02-25 2015-02-03 Procede et systeme d'egalisation acoustique automatise

Publications (2)

Publication Number Publication Date
EP3111667A1 EP3111667A1 (fr) 2017-01-04
EP3111667B1 true EP3111667B1 (fr) 2018-04-11

Family

ID=50933309

Family Applications (1)

Application Number Title Priority Date Filing Date
EP15703951.2A Active EP3111667B1 (fr) 2014-02-25 2015-02-03 Procede et systeme d'egalisation acoustique automatise

Country Status (5)

Country Link
EP (1) EP3111667B1 (fr)
CN (1) CN106063293B (fr)
ES (1) ES2676577T3 (fr)
FR (1) FR3018015B1 (fr)
WO (1) WO2015128160A1 (fr)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021175979A1 (fr) * 2020-03-05 2021-09-10 Faurecia Clarion Electronics Europe Procédé et système de détermination de filtres d'égalisation sonore d'un système audio

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3050601B1 (fr) 2016-04-26 2018-06-22 Arkamys Procede et systeme de diffusion d'un signal audio a 360°
CN106877820B (zh) * 2017-01-12 2020-08-11 广州市迪声音响有限公司 一种动态改变均衡增益的均衡系统和方法
CN109889955B (zh) * 2019-01-28 2021-01-12 中科上声(苏州)电子有限公司 一种车内声场的鲁棒性自动均衡方法和系统
CN114287137B (zh) 2019-09-20 2024-07-23 哈曼国际工业有限公司 基于高斯分布和k最近邻算法的房间校准
CN112584274B (zh) * 2019-09-27 2022-05-03 宏碁股份有限公司 等化处理的调整系统及其调整方法
CN112769410B (zh) * 2020-12-25 2024-06-11 西安讯飞超脑信息科技有限公司 滤波器构建方法、音频处理方法及电子设备、存储装置
FR3119723B1 (fr) 2021-02-09 2023-08-04 Arkamys Procédé pour le réglage automatisé de paramètres de traitements numériques appliqués à des signaux avant diffusion par des haut-parleurs et dispositif pour la mise en œuvre d’un tel procédé
CN113949968A (zh) * 2021-09-07 2022-01-18 万魔声学股份有限公司 一种频响校正方法、电子设备及信号处理方法
CN114157965B (zh) * 2021-11-26 2024-03-29 国光电器股份有限公司 一种音效补偿方法、装置、耳机和存储介质
CN115604628B (zh) * 2022-12-12 2023-04-07 杭州兆华电子股份有限公司 一种基于耳机喇叭频响的滤波器校准方法及装置
GB2628409A (en) * 2023-03-24 2024-09-25 Tymphany Worldwide Enterprises Ltd Calibration of a loudspeaker system

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7583806B2 (en) * 2003-06-09 2009-09-01 Bose Corporation Convertible automobile sound system equalizing
KR100897971B1 (ko) * 2005-07-29 2009-05-18 하르만 인터내셔날 인더스트리즈, 인코포레이티드 오디오 튜닝 시스템
JP4888163B2 (ja) * 2007-03-09 2012-02-29 ヤマハ株式会社 カラオケ装置
EP2326108B1 (fr) * 2009-11-02 2015-06-03 Harman Becker Automotive Systems GmbH Égalisation de phase de système audio
FR2967861B1 (fr) * 2010-11-18 2013-11-22 Ct Scient Tech Batiment Cstb Systeme electroacoustique pour une salle de spectacle

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021175979A1 (fr) * 2020-03-05 2021-09-10 Faurecia Clarion Electronics Europe Procédé et système de détermination de filtres d'égalisation sonore d'un système audio
FR3107982A1 (fr) * 2020-03-05 2021-09-10 Faurecia Clarion Electronics Europe Procédé et système de détermination de filtres d’égalisation sonore d’un système audio
US20230108904A1 (en) * 2020-03-05 2023-04-06 Faurecia Clarion Electronics Europe Method and system for determining sound equalising filters of an audio system

Also Published As

Publication number Publication date
FR3018015B1 (fr) 2016-04-29
WO2015128160A1 (fr) 2015-09-03
EP3111667A1 (fr) 2017-01-04
CN106063293A (zh) 2016-10-26
CN106063293B (zh) 2019-06-07
FR3018015A1 (fr) 2015-08-28
ES2676577T3 (es) 2018-07-23

Similar Documents

Publication Publication Date Title
EP3111667B1 (fr) Procede et systeme d'egalisation acoustique automatise
EP2898707B1 (fr) Calibration optimisee d'un systeme de restitution sonore multi haut-parleurs
US9118290B2 (en) Speed dependent equalizing control system
EP2772916B1 (fr) Procédé de débruitage d'un signal audio par un algorithme à gain spectral variable à dureté modulable dynamiquement
EP1546916B1 (fr) Procede et systeme de traitement d'une representation d'un champ acoustique
EP1586220B1 (fr) Procede et dispositif de pilotage d'un ensemble de restitution a partir d'un signal multicanal
EP2042000B1 (fr) Procede et dispositif de diagnostic de l'etat de fonctionnement d'un systeme de sonorisation
CN107409256B (zh) 声场校正装置、声场校正方法和计算机可读介质
CN115862657B (zh) 随噪增益方法和装置、车载系统、电子设备及存储介质
EP4040810A1 (fr) Procédé pour le réglage automatisé de paramètres de traitements numériques appliqués à des signaux avant diffusion par des haut-parleurs et dispositif pour la mise en oeuvre d'un tel procédé
EP2940863B1 (fr) Methode de compression et compresseur de dynamique audio
WO2020074522A1 (fr) Procédé et dispositif de contrôle de la distorsion d'un système de haut-parleurs embarqué dans un véhicule
FR2967848A1 (fr) Systeme de correction de spectre destine notamment a une salle de spectacle
FR3112017A1 (fr) Equipement électronique comprenant un simulateur de distorsion
FR3107982A1 (fr) Procédé et système de détermination de filtres d’égalisation sonore d’un système audio
WO2016096130A1 (fr) Egalisateur aveugle de canal
EP4184505A1 (fr) Spatialisation sonore avec effet de salle, optimisee en complexite
EP1540987B1 (fr) Procédé de réglage d'un système de sonorisation.
JP7020955B2 (ja) 音場補正装置、音場補正方法及び音場補正プログラム
EP3934282A1 (fr) Procédé de conversion d'un premier ensemble de signaux représentatifs d'un champ sonore en un second ensemble de signaux et dispositif électronique associé
EP3248286B1 (fr) Amplificateur à réglage de niveau sonore automatique
EP4372986A1 (fr) Procédé d égalisation d'un signal audiofréquences diffusé dans un environnement de diffusion, produit programme d ordinateur et dispositif correspondant
EP1271473B1 (fr) Procédé et système de pré et de post-traitement d'un signal audio pour la transmission sur un canal fortement pertubé
EP2686845B1 (fr) Procede et systeme de prediction de l'audibilite d'une emergence frequentielle d'un signal
EP4287648A1 (fr) Dispositif électronique et procédé de traitement, appareil acoustique et programme d'ordinateur associés

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20160819

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAX Request for extension of the european patent (deleted)
GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

INTG Intention to grant announced

Effective date: 20171016

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 989247

Country of ref document: AT

Kind code of ref document: T

Effective date: 20180415

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 602015009826

Country of ref document: DE

REG Reference to a national code

Ref country code: ES

Ref legal event code: FG2A

Ref document number: 2676577

Country of ref document: ES

Kind code of ref document: T3

Effective date: 20180723

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20180411

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180711

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180711

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180712

REG Reference to a national code

Ref country code: AT

Ref legal event code: MK05

Ref document number: 989247

Country of ref document: AT

Kind code of ref document: T

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180813

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 602015009826

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: AT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

26N No opposition filed

Effective date: 20190114

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20190203

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190203

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20190228

REG Reference to a national code

Ref country code: IE

Ref legal event code: MM4A

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190228

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190228

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190203

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190203

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190203

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190228

REG Reference to a national code

Ref country code: ES

Ref legal event code: FD2A

Effective date: 20200327

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190204

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180811

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20150203

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230512

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20240226

Year of fee payment: 10

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20240228

Year of fee payment: 10