EP3975583A1 - Écouteur intra-auriculaire - Google Patents

Écouteur intra-auriculaire Download PDF

Info

Publication number
EP3975583A1
EP3975583A1 EP21198881.1A EP21198881A EP3975583A1 EP 3975583 A1 EP3975583 A1 EP 3975583A1 EP 21198881 A EP21198881 A EP 21198881A EP 3975583 A1 EP3975583 A1 EP 3975583A1
Authority
EP
European Patent Office
Prior art keywords
earphone
signal
intra
filter
auricular
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP21198881.1A
Other languages
German (de)
English (en)
Other versions
EP3975583B1 (fr
Inventor
Vu Hoang Co Thuy
Artur ZORZO
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Devialet SA
Original Assignee
Devialet SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Devialet SA filed Critical Devialet SA
Publication of EP3975583A1 publication Critical patent/EP3975583A1/fr
Application granted granted Critical
Publication of EP3975583B1 publication Critical patent/EP3975583B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083—Reduction of ambient noise
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
    • G10K11/17813—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms
    • G10K11/17815—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms between the reference signals and the error signals, i.e. primary path
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
    • G10K11/17813—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms
    • G10K11/17817—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms between the output signals and the error signals, i.e. secondary path
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1785—Methods, e.g. algorithms; Devices
    • G10K11/17853—Methods, e.g. algorithms; Devices of the filter
    • G10K11/17854—Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1016—Earpieces of the intra-aural type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/10—Applications
    • G10K2210/108—Communication systems, e.g. where useful sound is kept and noise is cancelled
    • G10K2210/1081—Earphones, e.g. for telephones, ear protectors or headsets
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/30—Means
    • G10K2210/301—Computational
    • G10K2210/3028—Filtering, e.g. Kalman filters or special analogue or digital filters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/05—Electronic compensation of the occlusion effect
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/15—Determination of the acoustic seal of ear moulds or ear tips of hearing devices

Definitions

  • the present invention relates to an intra-auricular earphone of the type comprising, in an anatomical case, an electro-acoustic transducer capable of diffusing sound into an auditory canal, a control unit of the electro-acoustic transducer capable of receiving a signal to be reproduced comprising a equalization filter applied to the signal to be reproduced, which unit is connected to an internal microphone of the earphone arranged to measure an audio signal in the auditory canal, the unit further comprising means for continuously estimating a path secondary acoustic defined between the transducer and the internal microphone and means for continuously defining and applying the equalization filter according to the estimation of the secondary acoustic path.
  • the in-ear earphone has an anatomical shape allowing it to be inserted into the ear canal. It defines a small, essentially enclosed volume of air between the earpiece and the eardrum, which makes it possible to generate sound in relatively low frequencies down to 5 Hz.
  • the object of the invention is to propose a solution allowing better correction of the audio signal to take account of the lack of sealing between the in-ear earphone and the auditory canal.
  • the subject of the invention is an in-ear earphone of the aforementioned type, characterized in that it comprises an external microphone arranged to measure a sound signal outside the auditory canal, and the means for estimating the secondary path are specific in estimating the secondary acoustic path as a function also of the sound signal outside the auditory canal measured by the external microphone.
  • a dotted line shows part of a face 8.
  • An intra-auricular earpiece 10 is engaged in the auditory canal denoted 12 of the ear.
  • the user has a pair of headphones symmetrical to each other and wears them in both ears. Only one will be described here.
  • the in-ear earphone 10 comprises, as known per se, an anatomical housing 14 having a slightly frustoconical shape suitable for fitting as tightly as possible into the auditory canal 12.
  • the earphone comprises means 22 for receiving an audio signal to be reproduced from a broadcasting means, such as a mobile phone 24. Communication between the mobile phone and the receiver 22 of the in-ear earphone is ensured, for example, via Bluetooth.
  • the control unit 20 further comprises a computer 26 suitable for performing the computer processing described below and means 28 for amplifying the excitation signal of the transducer 18.
  • the amplifier 28 has its output connected to the transducer 18.
  • the computer 26 is also connected to a first internal microphone 30 arranged on the outer surface of the case placed in the auditory canal 12. This microphone is suitable for measuring the acoustic wave in the auditory canal and more precisely applied to the eardrum.
  • the box 14 comprises, on its surface outside the auditory canal 12, an external microphone 32 also connected to the computer 26 and capable of measuring the sound signal outside the auditory cavity and corresponding to the ambient noise.
  • FIG. 2 there are schematically the electro-acoustic transducer 18 and the internal microphone 30. Between these is defined a secondary acoustic path 50 commonly referred to as "secondary path" in English.
  • the secondary path designates the sound flow emitted by the transducer 18 and received by the eardrum and it is in practice measured by the microphone 30 whose measurement is assumed to be representative of the measurement on the eardrum.
  • the primary path designates the sound flow received from outside the earphone by the eardrum and corresponds to the surrounding noises.
  • the receiver 22 is monitored at the output by an equalization filter 52 with variable parameters implemented in the computer 26.
  • the filter is for example a Shelving filter or stepped filter in French.
  • the equalization filter 52 is an infinite (IIR) or finite (FIR) impulse response filter, a cascade of filters or any other filter.
  • the output of the filter 52 for the signal to be reproduced thus equalized is connected to the amplifier 28 through a digital/analog converter 54.
  • the earpiece further comprises, implemented in the computer 26, means 60 for continuously estimating the secondary path 50 associated with means 62 for continuously defining and applying the parameters of the equalization filter 52.
  • the estimation means 60 comprise a model 70 of the transfer function of the secondary path 50.
  • This model 70 receives as input the equalized signal to be reproduced coming from the equalization filter 52.
  • the output signal of the model 70 is subtracted, in a subtractor 72, from a composite signal coming in particular from the internal microphone 30.
  • the analog signal at the output of the internal microphone 30 is routed through an analog/digital converter 86 whose output is connected to the input of the subtractor 72 with the interposition of a subtractor 88.
  • the negative input of the subtractor is connected to the external microphone 32 successively through an analog/digital converter 89 then a module 90 for modeling the passive attenuation resulting from the structure of the earphone.
  • a switch 92 controlled by the control unit 20 is interposed between the module 90 and the subtractor 88.
  • the module 90 is suitable for applying to the digitized signal corresponding to the external sound flow, a filter corresponding to the attenuation due to the structure of the earphone so that the output signal from the module 90 is representative of the sound flow in the auditory canal in presence of the earphone and resulting solely from the external sound flow.
  • the attenuation function of the filter is experimentally measured on the earphone and stored in memory.
  • the output of the subtractor 72 is connected to an input of an evaluation unit 100 which receives, on another input, the equalized signal coming from the output of the filter 52.
  • the evaluation unit 100 is capable of implementing a least squares algorithm and is linked to the model 70 to ensure its regulation according to a suitable optimization algorithm. Thus, unit 100 forms a model 70 control loop.
  • the means 62 for defining the parameters of the filter include means 120 for continuously calculating the parameters of the filter 52 and in particular the gain denoted G, the cut-off frequency denoted Fc and the quality factor denoted Q.
  • the means 60 for estimating the secondary path from the information received from the equalized signal to be reproduced and from the two microphones 30, 32, generate the impulse response of the secondary path 50.
  • a fast Fourier transform is applied to the impulse response obtained by model 70.
  • a calculation of the energy of the frequency signal in a range of low frequencies is carried out in step 214.
  • the range of low frequencies is for example from 50 to 200 Hertz.
  • a calculation of the frequency signal energy in a range of median frequencies, chosen outside the range of frequencies where the sound is impacted by a possible leak, is performed during this same step 214.
  • the range of median frequencies is for example 300 to 500 Hz.
  • the calculated energies are smoothed over time to make them more stable with respect to external noises, due to their variations as a function of time.
  • an energy factor EF is continuously defined at step 218. It is equal to the quotient of the energy of the frequency signal in the low frequency range over the energy of the frequency signal in the mid-frequency range.
  • the means 60 produce an error signal, intended to produce a confidence score SNE as explained below.
  • the error signal corresponds to the signal obtained at the output of the subtractor 72 and is equal to the difference on the one hand of the equalized signal to be reproduced to which the transfer function of the secondary path modeled by the module 70 has been applied and on the other hand of the digitized signal from the internal microphone 30 corrected for the digitized signal measured by the external microphone 32 and filtered to take account of the attenuation of the structure of the earpiece.
  • the error signal and the equalized signal to be reproduced coming from the filter 52 are filtered in a range of median frequencies, for example from 50 to 750 Hz. They are then smoothed at step 314.
  • the confidence score SNE is calculated at step 316. It is equal to the quotient of the amplitude of the equalized signal to be reproduced filtered and smoothed by the amplitude of the error signal filtered and smoothed.
  • Step 400 consists of defining and applying the parameters of the filter from the energy factor EF and the confidence score SNE.
  • These parameters are each calculated as a function of the energy factor EF obtained in step 218 from a predefined polynomial function, provided that the confidence score SNE is greater than a predetermined threshold. If this SNE confidence score is greater than the predetermined threshold, the new filter parameters are applied to the filter 52 and the algorithm is implemented again. Otherwise, the algorithm is implemented again without modification of the parameters.
  • the switch 72 is kept closed under the control of the control unit 20.
  • the latter ensures the temporary opening of this switch only as long as the energy factor EF is lower. at a predetermined threshold.
  • the sound signal corresponding to the external flow measured by the external microphone 32 is then not taken into account during periods when the level of leakage is too high.
  • the filter is permanently adapted in an improved manner to any leaks that may occur around the earpiece.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Headphones And Earphones (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

La présente invention concerne un écouteur intra-auriculaire (10) comportant, dans un boitier anatomique (14), un transducteur électro-acoustique (18) propre à diffuser un son et une unité (20) de pilotage du transducteur (18) propre à recevoir un signal à reproduire comportant un filtre d'égalisation appliqué au signal à reproduire, laquelle unité (20) est connectée à un microphone interne (30) de l'écouteur. L'unité (20) comporte en outre des moyens d'estimation d'un chemin secondaire acoustique et des moyens de définition et d'application en continu du filtre d'égalisation en fonction de l'estimation du chemin secondaire acoustique.
L'écouteur comporte un microphone externe (32). Les moyens d'estimation du chemin secondaire sont propres à estimer le chemin secondaire acoustique en fonction également du signal sonore mesuré par le microphone externe (32).

Description

  • La présente invention concerne écouteur intra-auriculaire du type comportant, dans un boitier anatomique, un transducteur électro-acoustique propre à diffuser un son dans un conduit auditif, une unité de pilotage du transducteur électro-acoustique propre à recevoir un signal à reproduire comportant un filtre d'égalisation appliqué au signal à reproduire, laquelle unité est connectée à un microphone interne de l'écouteur agencé pour mesurer un signal audio dans le conduit auditif, l'unité comportant en outre des moyens d'estimation en continu d'un chemin secondaire acoustique défini entre le transducteur et le microphone interne et des moyens de définition et d'application en continu du filtre d'égalisation en fonction de l'estimation du chemin secondaire acoustique.
  • L'écouteur intra-auriculaire présente une forme anatomique permettant son insertion dans le canal auditif. Il définit un petit volume d'air essentiellement clos entre l'écouteur et le tympan, ce qui rend possible la génération de son dans des fréquences relativement faibles jusqu'à 5 Hz. Toutefois, compte tenu de la grande variation des formats d'oreilles, il est parfois impossible d'obtenir un volume totalement clos entre l'écouteur et le tympan, des fuites apparaissant entre le canal auditif et l'écouteur.
  • Ces fuites changent considérablement la réponse en fréquence de l'écouteur aux basses fréquences.
  • Ce phénomène est connu et il a été proposé des solutions de traitement du signal permettant de compenser ces fuites en corrigeant le signal à reproduire par le transducteur électro-acoustique de l'écouteur.
  • La solution est décrite par exemple dans le document US9,264,823B2 . Dans ce document, il est proposé de traiter le signal à partir d'un filtre d'égalisation, formé dans le document par un filtre étagé désigné par « Shelving filter » en anglais. Le gain de ce filtre est variable en continu à partir du signal d'un microphone mesurant l'onde acoustique dans le canal auditif. Le gain du filtre est ajusté en fonction de ratios entre l'énergie du signal produit par le transducteur électromagnétique et l'énergie du signal audio mesuré par le microphone interne dans des gammes de fréquences différentes.
  • Cette solution ne permet de compenser que partiellement le problème de fuite au niveau de l'écouteur intra-auriculaire en basse fréquence.
  • L'invention a pour but de proposer une solution permettant une meilleure correction du signal audio pour tenir compte de la non étanchéité entre l'écouteur intra-auriculaire et le conduit auditif.
  • A cet effet l'invention a pour objet un écouteur intra-auriculaire du type précité, caractérisé en ce qu'il comporte un microphone externe agencé pour mesurer un signal sonore hors du conduit auditif, et les moyens d'estimation du chemin secondaire sont propres à estimer le chemin secondaire acoustique en fonction également du signal sonore hors du conduit auditif mesuré par le microphone externe.
  • Suivant des modes de réalisations particuliers, l'écouteur intra-auriculaire comporte l'une ou plusieurs des caractéristiques suivantes :
    • l'unité de pilotage comporte des moyens de correction du signal sonore mesuré par le microphone externe hors du canal auditif en fonction d'un modèle de l'atténuation propre à l'écouteur ;
    • il comporte des moyens de non prise en compte du signal sonore hors du conduit auditif mesuré par le microphone externe, lorsque le niveau de fuite entre l'écouteur intra-auriculaire et le conduit auditif est supérieur à un seuil prédéterminé ;
    • les moyens de définition et d'application sont propres à définir et à appliquer en continu au filtre d'égalisation à la fois un gain, une fréquence de coupure et un facteur de qualité du filtre en fonction de l'estimation du chemin secondaire acoustique ;
    • les moyens d'estimation en continu du chemin secondaire acoustique comportant un modèle de la fonction de transfert du chemin secondaire acoustique ;
    • les moyens d'estimation comportent une boucle de régulation mettant en œuvre un algorithme d'optimisation appliquée sur le modèle ;
    • les moyens d'estimation en continu du chemin secondaire comportent des moyens de calcul d'un facteur d'énergie formé du quotient de l'énergie du signal fréquentiel dans une gamme de fréquence basse sur l'énergie du signal fréquentiel dans une gamme de fréquence médiane ;
    • les moyens de définition du filtre comportent des moyens de calcul du gain de la fréquence de coupure et du facteur de qualité du filtre par application de fonctions prédéfinies en fonction du facteur d'énergie ; et
    • il comporte des moyens d'établissement d'un score de confiance défini à partir du signal audio égalisé à reproduire appliqué au transducteur et de l'erreur entre le signal audio à reproduire auquel est appliqué l'estimation du chemin secondaire fournie par le modèle et le signal mesuré par le microphone interne et des moyens d'arrêt de l'évolution du gain, de la fréquence de coupure et du facteur de qualité du filtre, tant que le score de confiance est inférieur à un seuil prédéterminé.
  • L'invention sera mieux comprise à la lecture de la description qui va suivre, donnée uniquement à titre d'exemple et faite se référant aux dessins sur lesquels :
    • [Fig1] la figure 1 est une vue schématique d'un écouteur intra-auriculaire porté dans une oreille ;
    • [Fig 2] la figure 2 est un schéma fonctionnel de l'écouteur intra-auriculaire ;
    • [Fig 3] la figure 3 est un organigramme des traitements acoustiques de l'écouteur intra-auriculaire ; et
    • [Fig 4] [Fig 5] [Fig 6] les figures 4, 5 et 6 sont des courbes montrant la valeur respectivement du gain, de la fréquence de coupure et du facteur de qualité du filtre en fonction du facteur d'énergie.
  • Sur la figure 1 est illustrée en pointillé une partie d'un visage 8. Un écouteur intra-auriculaire 10 est engagé dans le conduit auditif noté 12 de l'oreille. En pratique, l'utilisateur dispose d'une paire d'écouteurs symétriques l'un de l'autre et les porte dans les deux oreilles. Seul un sera décrit ici.
  • L'écouteur intra-auriculaire 10 comporte, comme connu en soi, un boîtier anatomique 14 présentant une forme légèrement tronconique propre à s'insérer au plus juste dans le conduit auditif 12.
  • A l'extrémité de cette partie tronconique est ménagée une ouverture 16 pour la sortie du son en regard de laquelle est disposé un transducteur électro-acoustique 18 relié, pour son excitation, à une unité de pilotage 20.
  • L'écouteur comporte des moyens de réception 22 d'un signal audio à reproduire issu d'un moyen de diffusion, tel qu'un téléphone portable 24. La communication entre le téléphone portable et le récepteur 22 de l'écouteur intra-auriculaire est assurée par exemple en Bluetooth.
  • L'unité de pilotage 20 comporte en outre un calculateur 26 propre à assurer des traitements informatiques décrit dans la suite et des moyens d'amplification 28 du signal d'excitation du transducteur 18. L'amplificateur 28 a sa sortie reliée au transducteur 18.
  • Le calculateur 26 est en outre relié à un premier microphone interne 30 disposé à la surface externe du boîtier placée dans le conduit auditif 12. Ce microphone est propre à mesurer l'onde acoustique dans le conduit auditif et plus précisément appliquée sur le tympan.
  • De même, le boîtier 14 comporte, sur sa surface extérieure au conduit auditif 12, un microphone externe 32 également relié au calculateur 26 et propre à mesurer le signal sonore hors de la cavité auditive et correspondant au bruit ambiant.
  • Sur la figure 2, on retrouve schématiquement le transducteur électro-acoustique 18 et le microphone interne 30. Entre ceux-ci est défini un chemin secondaire acoustique 50 couramment désigné par « secondary path » en anglais. Le chemin secondaire désigne le flux sonore émis par le transducteur 18 et reçu par le tympan et il est en pratique mesuré par le micro 30 dont la mesure est supposée représentative de la mesure sur le tympan. Le chemin primaire désigne le flux sonore reçu de l'extérieur de l'écouteur par le tympan et correspond aux bruits environnants.
  • Sur cette figure, le récepteur 22 est suivi en sortie par un filtre d'égalisation 52 à paramètres variables mis en œuvre dans le calculateur 26. Le filtre est par exemple un filtre Shelving ou filtre étagé en français. En variante, le filtre d'égalisation 52 est un filtre à réponse impulsionnelle infinie (IIR), ou finie (FIR), une cascade de filtres ou tout autre filtre.
  • La sortie du filtre 52 pour le signal à reproduire ainsi égalisé est reliée à l'amplificateur 28 au travers d'un convertisseur numérique/analogique 54.
  • L'écouteur comporte en outre, implémentés dans le calculateur 26, des moyens 60 d'estimation en continu du chemin secondaire 50 associés à des moyens 62 de définition et d'application en continu des paramètres du filtre d'égalisation 52.
  • Plus précisément, les moyens d'estimation 60 comportent un modèle 70 de la fonction de transfert du chemin secondaire 50. Ce modèle 70 reçoit en entrée le signal à reproduire égalisé issu du filtre d'égalisation 52.
  • Le signal de sortie du modèle 70 est soustrait, dans un soustracteur 72, à un signal composite issu notamment du microphone interne 30.
  • Le signal analogique en sortie du microphone interne 30 est acheminé dans un convertisseur analogique/numérique 86 dont la sortie est reliée à l'entrée du soustracteur 72 avec interposition d'un soustracteur 88. L'entrée négative du soustracteur est reliée au microphone externe 32 au travers successivement d'un convertisseur analogique/numérique 89 puis d'un module 90 de modélisation de l'atténuation passive résultant de la structure de l'écouteur. Un interrupteur 92 commandé par l'unité de pilotage 20 est interposé entre le module 90 et le soustracteur 88.
  • Le module 90 est propre appliquer au signal numérisé correspondant au flux sonore externe, un filtre correspondant à l'atténuation due à la structure de l'écouteur de sorte que le signal de sortie du module 90 est représentatif du flux sonore dans le conduit auditif en présence de l'écouteur et résultant du seul flux sonore externe.
  • La fonction d'atténuation du filtre est mesurée expérimentalement sur l'écouteur et stockée en mémoire.
  • La sortie du soustracteur 72 est reliée à une entrée d'une unité d'évaluation 100 laquelle reçoit, sur une autre entrée, le signal égalisé provenant en sortie du filtre 52.
  • L'unité d'évaluation 100 est propre à mettre en œuvre un algorithme des moindres carrés et est reliée au modèle 70 pour assurer sa régulation en fonction d'un algorithme d'optimisation adapté. Ainsi, l'unité 100 forme une boucle de régulation du modèle 70.
  • Les moyens 62 de définition des paramètres du filtre comportent des moyens 120 de calcul en continu des paramètres du filtre 52 et notamment du gain noté G, de la fréquence de coupure notée Fc et du facteur de qualité noté Q.
  • Sur la figure 3 est illustré l'algorithme mis en œuvre par le calculateur 26 de l'écouteur.
  • En partie haute sont toutefois représentés pour la compréhension la source de signal sonore 22, le filtre 52, les microphones interne et externe 30, 32.
  • Les moyens 60 d'estimation du chemin secondaire, à partir des informations reçues du signal égalisé à reproduire et des deux microphones 30, 32, engendrent la réponse impulsionnelle du chemin secondaire 50.
  • A l'étape 212 une transformée de Fourier rapide est appliquée à la réponse impulsionnelle obtenu par le modèle 70.
  • Un calcul de l'énergie du signal fréquentiel dans une gamme de fréquences basses est effectué à l'étape 214. La gamme de fréquences basses est par exemple de 50 à 200 Hertz.
  • De même, un calcul de l'énergie de signal fréquentiel dans une gamme de fréquences médianes, choisie hors de la gamme de fréquences où le son est impacté par une éventuelle fuite, est effectué lors de cette même étape 214. La gamme de fréquences médianes est par exemple de 300 à 500 Hz.
  • A l'étape 216, les énergies calculées sont lissées temporellement pour les rendre plus stables vis-à-vis des bruits extérieurs, du fait de leurs variations en fonction du temps.
  • A partir des valeurs lissées des énergies, un facteur d'énergie EF est défini en continu à l'étape 218. Il est égal au quotient de l'énergie du signal fréquentiel dans la gamme de fréquences basses sur l'énergie du signal fréquentiel dans la gamme de fréquences médianes.
  • En outre et indépendamment du calcul du facteur d'énergie EF, les moyens 60 produisent un signal d'erreur, destiné à produire un score de confiance SNE comme expliqué ci-dessous.
  • Le signal d'erreur correspond au signal obtenu en sortie du soustracteur 72 et est égal à la différence d'une part du signal égalisé à reproduire auquel a été appliquée la fonction de transfert du chemin secondaire modélisée par le module 70 et d'autre part du signal numérisé issu du microphone interne 30 corrigé du signal numérisé mesuré par le microphone externe 32 et filtré pour tenir compte de l'atténuation de la structure de l'écouteur.
  • A l'étape 312, le signal d'erreur et le signal égalisé à reproduire issu du filtre 52 sont filtrés dans une gamme de fréquences médianes par exemple de de 50 à 750 Hz. Ils sont ensuite lissés à l'étape 314.
  • Le score de confiance SNE est calculé à l'étape 316. Il est égal au quotient de l'amplitude du signal égalisé à reproduire filtré et lissé par l'amplitude du signal d'erreur filtré et lissé.
  • L'étape 400 consiste en la définition et l'application des paramètres du filtre à partir du facteur d'énergie EF et du score de confiance SNE.
  • Ces paramètres sont chacun calculés en fonction du facteur d'énergie EF obtenu à l'étape 218 à partir d'une fonction polynomiale prédéfinie, sous réserve que le score de confiance SNE soit supérieur à un seuil prédéterminé. Si ce score de confiance SNE est supérieur au seuil prédéterminé, les nouveaux paramètres du filtre sont appliqués au filtre 52 et l'algorithme est à nouveau mis en œuvre. Sinon, l'algorithme est à nouveau mis en œuvre sans modification des paramètres.
  • Sur les figures 4, 5 et 6 sont illustrées les fonctions polynomiales donnant respectivement le gain G (figure 4), la fréquence de coupure Fc (figure 5) et le facteur de qualité Q (figure 6) en fonction du facteur d'énergie EF.
  • Ces courbes sont établies par essais successifs à partir de tests effectués sur l'écouteur.
  • Pendant toute la mise en œuvre de l'algorithme, l'interrupteur 72 est maintenu fermé sous la commande de l'unité de pilotage 20. Cette dernière assure l'ouverture temporaire de cet interrupteur seulement tant que le facteur d'énergie EF est inférieur à un seuil prédéterminé. Le signal sonore correspondant au flux extérieur mesuré par le microphone externe 32 n'est alors pas pris en compte pendant des périodes où le niveau de fuite est trop élevé.
  • On comprend que grâce à la prise en compte du signal sonore du microphone externe 32, le filtre est en permanence adapté de manière améliorée aux fuites éventuelles pouvant se produire autour de l'écouteur.

Claims (9)

  1. Ecouteur intra-auriculaire (10) comportant, dans un boitier anatomique (14), un transducteur électro-acoustique (18) propre à diffuser un son dans un conduit auditif (12), une unité (20) de pilotage du transducteur électro-acoustique (18) propre à recevoir un signal à reproduire comportant un filtre d'égalisation (52) appliqué au signal à reproduire, laquelle unité (20) est connectée à un microphone interne (30) de l'écouteur agencé pour mesurer un signal audio dans le conduit auditif (12), l'unité (20) comportant en outre des moyens (60) d'estimation en continu d'un chemin secondaire acoustique (50) défini entre le transducteur (18) et le microphone interne (30) et des moyens (62) de définition et d'application en continu du filtre d'égalisation (52) en fonction de l'estimation du chemin secondaire acoustique (50),
    caractérisé en ce qu'il comporte un microphone externe (32) agencé pour mesurer un signal sonore hors du conduit auditif (12), et les moyens (60) d'estimation du chemin secondaire sont propres à estimer le chemin secondaire acoustique (50) en fonction également du signal sonore hors du conduit auditif (12) mesuré par le microphone externe (32).
  2. Ecouteur intra-auriculaire (10) selon la revendication 1, caractérisé en ce que l'unité de pilotage (20) comporte des moyens (90) de correction du signal sonore mesuré par le microphone externe (32) hors du canal auditif (12) en fonction d'un modèle (90) de l'atténuation propre à l'écouteur.
  3. Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications précédentes, caractérisé en ce qu'il comporte des moyens (92) de non prise en compte du signal sonore hors du conduit auditif (12) mesuré par le microphone externe (32), lorsque le niveau de fuite entre l'écouteur intra-auriculaire (10) et le conduit auditif (12) est supérieur à un seuil prédéterminé.
  4. Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications précédentes, caractérisé en ce que les moyens de définition et d'application (62) sont propres à définir et à appliquer en continu au filtre d'égalisation (52) à la fois un gain (G), une fréquence de coupure (Fc) et un facteur de qualité (Q) du filtre en fonction de l'estimation du chemin secondaire acoustique (50).
  5. Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications précédentes, caractérisé en ce que les moyens (60) d'estimation en continu du chemin secondaire acoustique (50) comportant un modèle (70) de la fonction de transfert du chemin secondaire acoustique (50).
  6. Ecouteur intra-auriculaire (10) selon la revendication 5, caractérisé en ce que les moyens d'estimation (60) comportent une boucle de régulation (100) mettant en oeuvre un algorithme d'optimisation appliquée sur le modèle (70).
  7. Ecouteur intra-auriculaire (10) selon la revendication 5 ou 6, caractérisé en ce que les moyens (60) d'estimation en continu du chemin secondaire (50) comportent des moyens (218) de calcul d'un facteur d'énergie (EF) formé du quotient de l'énergie du signal fréquentiel dans une gamme de fréquence basse sur l'énergie du signal fréquentiel dans une gamme de fréquence médiane.
  8. Ecouteur intra-auriculaire (10) selon la revendication 7, caractérisé en ce que les moyens (62) de définition du filtre comportent des moyens de calcul (400) du gain (G), de la fréquence de coupure (Fc) et du facteur de qualité du filtre (Q) par application de fonctions prédéfinies en fonction du facteur d'énergie (EF).
  9. Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications 5 à 8, caractérisé en ce qu'il comporte des moyens (312, 314, 316) d'établissement d'un score de confiance défini à partir du signal audio égalisé à reproduire appliqué au transducteur (18) et de l'erreur entre le signal audio à reproduire auquel est appliqué l'estimation du chemin secondaire fournie par le modèle (70) et le signal mesuré par le microphone interne (30) et des moyens (400) d'arrêt de l'évolution du gain (G), de la fréquence de coupure (Fc) et du facteur de qualité (Q) du filtre, tant que le score de confiance est inférieur à un seuil prédéterminé.
EP21198881.1A 2020-09-25 2021-09-24 Écouteur intra-auriculaire Active EP3975583B1 (fr)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR2009767A FR3114722B1 (fr) 2020-09-25 2020-09-25 écouteur intra-auriculaire

Publications (2)

Publication Number Publication Date
EP3975583A1 true EP3975583A1 (fr) 2022-03-30
EP3975583B1 EP3975583B1 (fr) 2023-06-28

Family

ID=74125366

Family Applications (1)

Application Number Title Priority Date Filing Date
EP21198881.1A Active EP3975583B1 (fr) 2020-09-25 2021-09-24 Écouteur intra-auriculaire

Country Status (3)

Country Link
EP (1) EP3975583B1 (fr)
CN (1) CN114257913A (fr)
FR (1) FR3114722B1 (fr)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080107287A1 (en) * 2006-11-06 2008-05-08 Terry Beard Personal hearing control system and method
US20140247948A1 (en) * 2006-11-18 2014-09-04 Personics Holdings, Llc Method and device for personalized hearing
US9264823B2 (en) 2012-09-28 2016-02-16 Apple Inc. Audio headset with automatic equalization
US20200125318A1 (en) * 2018-10-18 2020-04-23 Yamaha Corporation Sound Output Device and Sound Output Method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080107287A1 (en) * 2006-11-06 2008-05-08 Terry Beard Personal hearing control system and method
US20140247948A1 (en) * 2006-11-18 2014-09-04 Personics Holdings, Llc Method and device for personalized hearing
US9264823B2 (en) 2012-09-28 2016-02-16 Apple Inc. Audio headset with automatic equalization
US20200125318A1 (en) * 2018-10-18 2020-04-23 Yamaha Corporation Sound Output Device and Sound Output Method

Also Published As

Publication number Publication date
FR3114722B1 (fr) 2022-09-30
EP3975583B1 (fr) 2023-06-28
CN114257913A (zh) 2022-03-29
FR3114722A1 (fr) 2022-04-01

Similar Documents

Publication Publication Date Title
CA1265063A (fr) Procedes et dispositifs pour attenuer les bruits d'origine externe parvenant au tympan et ameliorer l'intelligibilite des communications electro- acoustiques
EP2945399B1 (fr) Casque audio à contrôle actif de bruit anc avec prévention des effets d'une saturation du signal microphonique feedback
US9305568B2 (en) Active acoustic filter with socially determined location-based filter characteristics
US8315400B2 (en) Method and device for acoustic management control of multiple microphones
EP1001652A2 (fr) Egaliseur automatique pour haut-parleur
EP3171612A1 (fr) Casque audio à contrôle actif de bruit, contrôle anti-occlusion et annulation de l'atténuation passive, en fonction de la présence ou de l'absence d'une activité vocale de l'utilisateur de casque
US20030063763A1 (en) Method and apparatus for tuning digital hearing aids
EP2930942A1 (fr) Casque audio à contrôle actif de bruit anc avec réduction du souffle électrique
EP2518724A1 (fr) Combiné audio micro/casque comprenant des moyens de débruitage d'un signal de parole proche, notamment pour un système de téléphonie "mains libres"
WO2009136953A1 (fr) Procédé et dispositif destinés au contrôle de la gestion acoustique de microphones multiples
US20180213343A1 (en) System, method, and apparatus for generating and digitally processing a head related audio transfer function
US10425733B1 (en) Microphone equalization for room acoustics
EP3975583B1 (fr) Écouteur intra-auriculaire
US20230199368A1 (en) Acoustic device and methods
EP3050319B1 (fr) Equipement de restitution sonore audio haute fidélité
EP4040810A1 (fr) Procédé pour le réglage automatisé de paramètres de traitements numériques appliqués à des signaux avant diffusion par des haut-parleurs et dispositif pour la mise en oeuvre d'un tel procédé
FR3052319A1 (fr) Combine audio micro/casque comprenant des moyens de detection d'activite vocale multiples a classifieur supervise.
EP4319201A1 (fr) Procédé de calibrage d'un dispositif audio nomade, système de calibrage d'un dispositif audio nomade et produit programme d'ordinateur associés
FR2989859A1 (fr) Procede de protection thermique d'un haut-parleur et dispositif de protection thermique d'un haut-parleur associe
FR3051959A1 (fr) Procede et dispositif pour estimer un signal dereverbere
US20230370765A1 (en) Method and system for estimating environmental noise attenuation
EP3979663A1 (fr) Casque audio à réducteur de bruit
CN116634321A (zh) 检测方法、装置、耳机及计算机可读介质
FR3141302A1 (fr) Procédé de détection d’un effet larsen
FR3136308A1 (fr) Casque audio à réducteur de bruit

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN PUBLISHED

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20220830

RBV Designated contracting states (corrected)

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

INTG Intention to grant announced

Effective date: 20230120

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230425

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 1583801

Country of ref document: AT

Kind code of ref document: T

Effective date: 20230715

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 602021003138

Country of ref document: DE

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG9D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230928

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20230628

REG Reference to a national code

Ref country code: AT

Ref legal event code: MK05

Ref document number: 1583801

Country of ref document: AT

Kind code of ref document: T

Effective date: 20230628

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230929

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20230912

Year of fee payment: 3

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20231028

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20231030

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20231028

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: AT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20231011

Year of fee payment: 3

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 602021003138

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20230924

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20230930

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20230924

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230628

26N No opposition filed

Effective date: 20240402