EP3975583B1 - Écouteur intra-auriculaire - Google Patents
Écouteur intra-auriculaire Download PDFInfo
- Publication number
- EP3975583B1 EP3975583B1 EP21198881.1A EP21198881A EP3975583B1 EP 3975583 B1 EP3975583 B1 EP 3975583B1 EP 21198881 A EP21198881 A EP 21198881A EP 3975583 B1 EP3975583 B1 EP 3975583B1
- Authority
- EP
- European Patent Office
- Prior art keywords
- signal
- filter
- ear
- secondary path
- earphone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000006870 function Effects 0.000 claims description 21
- 230000005236 sound signal Effects 0.000 claims description 21
- 210000000613 ear canal Anatomy 0.000 claims description 6
- 238000012546 transfer Methods 0.000 claims description 4
- 210000003454 tympanic membrane Anatomy 0.000 description 6
- 230000004044 response Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 101150004367 Il4i1 gene Proteins 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000005284 excitation Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 101100536354 Drosophila melanogaster tant gene Proteins 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000000034 method Methods 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1083—Reduction of ambient noise
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17813—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms
- G10K11/17815—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms between the reference signals and the error signals, i.e. primary path
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17813—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms
- G10K11/17817—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms between the output signals and the error signals, i.e. secondary path
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1785—Methods, e.g. algorithms; Devices
- G10K11/17853—Methods, e.g. algorithms; Devices of the filter
- G10K11/17854—Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1016—Earpieces of the intra-aural type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/10—Applications
- G10K2210/108—Communication systems, e.g. where useful sound is kept and noise is cancelled
- G10K2210/1081—Earphones, e.g. for telephones, ear protectors or headsets
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3028—Filtering, e.g. Kalman filters or special analogue or digital filters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
- H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/05—Electronic compensation of the occlusion effect
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/15—Determination of the acoustic seal of ear moulds or ear tips of hearing devices
Definitions
- the present invention relates to an in-ear earphone of the type comprising, in an anatomical case, an electro-acoustic transducer capable of diffusing sound into an auditory canal, a control unit of the electro-acoustic transducer capable of receiving a signal to be reproduced comprising a equalization filter applied to the signal to be reproduced, which unit is connected to an internal microphone of the earphone arranged to measure an audio signal in the auditory canal, the unit further comprising means for continuously estimating a path secondary acoustic defined between the transducer and the internal microphone and means for continuously defining and applying the equalization filter according to the estimation of the secondary acoustic path.
- the in-ear earphone has an anatomical shape allowing it to be inserted into the ear canal. It defines a small, essentially enclosed volume of air between the earpiece and the eardrum, which makes it possible to generate sound in relatively low frequencies down to 5 Hz.
- the object of the invention is to propose a solution allowing better correction of the audio signal to take into account the lack of sealing between the in-ear earphone and the auditory canal.
- the subject of the invention is an in-ear earphone of the aforementioned type, characterized in that it comprises an external microphone arranged to measure a sound signal outside the auditory canal, and the means for estimating the secondary path are specific in estimating the acoustic secondary path as a function also of the sound signal outside the auditory canal measured by the external microphone.
- a dotted line shows part of a face 8.
- An intra-auricular earpiece 10 is engaged in the auditory canal denoted 12 of the ear.
- the user has a pair of headphones symmetrical to each other and wears them in both ears. Only one will be described here.
- the in-ear earphone 10 comprises, as known per se, an anatomical housing 14 having a slightly frustoconical shape suitable for fitting as tightly as possible into the auditory canal 12.
- the earphone comprises means 22 for receiving an audio signal to be reproduced from a broadcasting means, such as a mobile phone 24. Communication between the mobile phone and the receiver 22 of the in-ear earphone is ensured, for example, via Bluetooth.
- the control unit 20 further comprises a computer 26 suitable for performing the computer processing described below and means 28 for amplifying the excitation signal of the transducer 18.
- the amplifier 28 has its output connected to the transducer 18.
- the computer 26 is also connected to a first internal microphone 30 arranged on the external surface of the case placed in the auditory canal 12. This microphone is suitable for measuring the acoustic wave in the auditory canal and more precisely applied to the eardrum.
- the box 14 comprises, on its surface outside the auditory canal 12, an external microphone 32 also connected to the computer 26 and capable of measuring the sound signal outside the auditory cavity and corresponding to the ambient noise.
- FIG. 2 there are schematically the electro-acoustic transducer 18 and the internal microphone 30. Between these is defined a secondary acoustic path 50 commonly referred to as "secondary path" in English.
- the secondary path designates the sound flow emitted by the transducer 18 and received by the eardrum and it is in practice measured by the microphone 30 whose measurement is assumed to be representative of the measurement on the eardrum.
- the primary path designates the sound flow received from outside the earphone by the eardrum and corresponds to the surrounding noises.
- the receiver 22 is monitored at the output by an equalization filter 52 with variable parameters implemented in the computer 26.
- the filter is for example a Shelving filter or stepped filter in French.
- the equalization filter 52 is an infinite (IIR) or finite (FIR) impulse response filter, a cascade of filters or any other filter.
- the output of the filter 52 for the signal to be reproduced thus equalized is connected to the amplifier 28 through a digital/analog converter 54.
- the earpiece further comprises, implemented in the computer 26, means 60 for continuously estimating the secondary path 50 associated with means 62 for continuously defining and applying the parameters of the equalization filter 52.
- the estimation means 60 comprise a model 70 of the transfer function of the secondary path 50.
- This model 70 receives as input the equalized signal to be reproduced coming from the equalization filter 52.
- the output signal of the model 70 is subtracted, in a subtractor 72, from a composite signal originating in particular from the internal microphone 30.
- the analog signal at the output of the internal microphone 30 is routed through an analog/digital converter 86 whose output is connected to the input of the subtractor 72 with the interposition of a subtractor 88.
- the negative input of the subtractor is connected to the external microphone 32 successively through an analog/digital converter 89 then a module 90 for modeling the passive attenuation resulting from the structure of the earphone.
- a switch 92 controlled by the control unit 20 is interposed between the module 90 and the subtractor 88.
- the module 90 is suitable for applying to the digitized signal corresponding to the external sound flow, a filter corresponding to the attenuation due to the structure of the earphone so that the output signal from the module 90 is representative of the sound flow in the auditory canal in presence of the earpiece and resulting solely from the external sound flow.
- the attenuation function of the filter is experimentally measured on the earphone and stored in memory.
- the output of the subtractor 72 is connected to an input of an evaluation unit 100 which receives, on another input, the equalized signal coming from the output of the filter 52.
- the evaluation unit 100 is able to implement a least squares algorithm and is linked to the model 70 to ensure its regulation according to a suitable optimization algorithm. Thus, unit 100 forms a model 70 control loop.
- the means 62 for defining the parameters of the filter include means 120 for continuously calculating the parameters of the filter 52 and in particular the gain denoted G, the cut-off frequency denoted Fc and the quality factor denoted Q.
- the means 60 for estimating the secondary path from the information received from the equalized signal to be reproduced and from the two microphones 30, 32, generate the impulse response of the secondary path 50.
- a fast Fourier transform is applied to the impulse response obtained by model 70.
- a calculation of the energy of the frequency signal in a range of low frequencies is carried out in step 214.
- the range of low frequencies is for example from 50 to 200 Hertz.
- a calculation of the frequency signal energy in a range of median frequencies, chosen outside the range of frequencies where the sound is impacted by a possible leak, is performed during this same step 214.
- the range of median frequencies is for example 300 to 500 Hz.
- the calculated energies are smoothed over time to make them more stable with respect to external noises, due to their variations as a function of time.
- an energy factor EF is continuously defined at step 218. It is equal to the quotient of the energy of the frequency signal in the low frequency range over the energy of the frequency signal in the mid-frequency range.
- the means 60 produce an error signal, intended to produce a confidence score SNE as explained below.
- the error signal corresponds to the signal obtained at the output of the subtractor 72 and is equal to the difference on the one hand of the equalized signal to be reproduced to which the transfer function of the secondary path modeled by the module 70 has been applied and on the other hand of the digitized signal from the internal microphone 30 corrected for the digitized signal measured by the external microphone 32 and filtered to take account of the attenuation of the structure of the earpiece.
- the error signal and the equalized signal to be reproduced coming from the filter 52 are filtered in a range of median frequencies, for example from 50 to 750 Hz. They are then smoothed at step 314.
- the confidence score SNE is calculated at step 316. It is equal to the quotient of the amplitude of the equalized signal to be reproduced filtered and smoothed by the amplitude of the error signal filtered and smoothed.
- Step 400 consists of defining and applying the parameters of the filter from the energy factor EF and the confidence score SNE.
- These parameters are each calculated as a function of the energy factor EF obtained in step 218 from a predefined polynomial function, provided that the confidence score SNE is greater than a predetermined threshold. If this confidence score SNE is greater than the predetermined threshold, the new filter parameters are applied to the filter 52 and the algorithm is implemented again. Otherwise, the algorithm is implemented again without modifying the parameters.
- the switch 72 is kept closed under the control of the control unit 20.
- the latter ensures the temporary opening of this switch only as long as the energy factor EF is lower. at a predetermined threshold.
- the sound signal corresponding to the external flow measured by the external microphone 32 is then not taken into account during periods when the level of leakage is too high.
- the filter is permanently adapted in an improved manner to any leaks that may occur around the earpiece.
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Circuit For Audible Band Transducer (AREA)
- Headphones And Earphones (AREA)
- User Interface Of Digital Computer (AREA)
Description
- La présente invention concerne écouteur intra-auriculaire du type comportant, dans un boitier anatomique, un transducteur électro-acoustique propre à diffuser un son dans un conduit auditif, une unité de pilotage du transducteur électro-acoustique propre à recevoir un signal à reproduire comportant un filtre d'égalisation appliqué au signal à reproduire, laquelle unité est connectée à un microphone interne de l'écouteur agencé pour mesurer un signal audio dans le conduit auditif, l'unité comportant en outre des moyens d'estimation en continu d'un chemin secondaire acoustique défini entre le transducteur et le microphone interne et des moyens de définition et d'application en continu du filtre d'égalisation en fonction de l'estimation du chemin secondaire acoustique.
- L'écouteur intra-auriculaire présente une forme anatomique permettant son insertion dans le canal auditif. Il définit un petit volume d'air essentiellement clos entre l'écouteur et le tympan, ce qui rend possible la génération de son dans des fréquences relativement faibles jusqu'à 5 Hz. Toutefois, compte tenu de la grande variation des formats d'oreilles, il est parfois impossible d'obtenir un volume totalement clos entre l'écouteur et le tympan, des fuites apparaissant entre le canal auditif et l'écouteur.
- Ces fuites changent considérablement la réponse en fréquence de l'écouteur aux basses fréquences.
- Ce phénomène est connu et il a été proposé des solutions de traitement du signal permettant de compenser ces fuites en corrigeant le signal à reproduire par le transducteur électro-acoustique de l'écouteur.
- La solution est décrite par exemple dans le document
US9,264,823B2 - Cette solution ne permet de compenser que partiellement le problème de fuite au niveau de l'écouteur intra-auriculaire en basse fréquence.
- Une solution similaire à celle du document
US9,264,823B2 US 2020/125318 A1 . - L'invention a pour but de proposer une solution permettant une meilleure correction du signal audio pour tenir compte de la non étanchéité entre l'écouteur intra-auriculaire et le conduit auditif.
- A cet effet l'invention a pour objet un écouteur intra-auriculaire du type précité, caractérisé en ce qu'il comporte un microphone externe agencé pour mesurer un signal sonore hors du conduit auditif, et les moyens d'estimation du chemin secondaire sont propres à estimer le chemin secondaire acoustique en fonction également du signal sonore hors du conduit auditif mesuré par le microphone externe.
- Suivant des modes de réalisations particuliers, l'écouteur intra-auriculaire comporte l'une ou plusieurs des caractéristiques suivantes :
- l'unité de pilotage comporte des moyens de correction du signal sonore mesuré par le microphone externe hors du canal auditif en fonction d'un modèle de l'atténuation propre à l'écouteur ;
- il comporte des moyens de non prise en compte du signal sonore hors du conduit auditif mesuré par le microphone externe, lorsque le niveau de fuite entre l'écouteur intra-auriculaire et le conduit auditif est supérieur à un seuil prédéterminé ;
- les moyens de définition et d'application sont propres à définir et à appliquer en continu au filtre d'égalisation à la fois un gain, une fréquence de coupure et un facteur de qualité du filtre en fonction de l'estimation du chemin secondaire acoustique ;
- les moyens d'estimation en continu du chemin secondaire acoustique comportant un modèle de la fonction de transfert du chemin secondaire acoustique ;
- les moyens d'estimation comportent une boucle de régulation mettant en oeuvre un algorithme d'optimisation appliquée sur le modèle ;
- les moyens d'estimation en continu du chemin secondaire comportent des moyens de calcul d'un facteur d'énergie formé du quotient de l'énergie du signal fréquentiel dans une gamme de fréquence basse sur l'énergie du signal fréquentiel dans une gamme de fréquence médiane ;
- les moyens de définition du filtre comportent des moyens de calcul du gain de la fréquence de coupure et du facteur de qualité du filtre par application de fonctions prédéfinies en fonction du facteur d'énergie ; et
- il comporte des moyens d'établissement d'un score de confiance défini à partir du signal audio égalisé à reproduire appliqué au transducteur et de l'erreur entre le signal audio à reproduire auquel est appliqué l'estimation du chemin secondaire fournie par le modèle et le signal mesuré par le microphone interne et des moyens d'arrêt de l'évolution du gain, de la fréquence de coupure et du facteur de qualité du filtre, tant que le score de confiance est inférieur à un seuil prédéterminé.
- L'invention sera mieux comprise à la lecture de la description qui va suivre, donnée uniquement à titre d'exemple et faite se référant aux dessins sur lesquels :
- [
Fig1 ] lafigure 1 est une vue schématique d'un écouteur intra-auriculaire porté dans une oreille ; - [
Fig 2 ] lafigure 2 est un schéma fonctionnel de l'écouteur intra-auriculaire ; - [
Fig 3 ] lafigure 3 est un organigramme des traitements acoustiques de l'écouteur intra-auriculaire ; et - [
Fig 4 ] [Fig 5 ] [Fig 6 ] lesfigures 4 ,5 et6 sont des courbes montrant la valeur respectivement du gain, de la fréquence de coupure et du facteur de qualité du filtre en fonction du facteur d'énergie. - Sur la
figure 1 est illustrée en pointillé une partie d'un visage 8. Un écouteur intra-auriculaire 10 est engagé dans le conduit auditif noté 12 de l'oreille. En pratique, l'utilisateur dispose d'une paire d'écouteurs symétriques l'un de l'autre et les porte dans les deux oreilles. Seul un sera décrit ici. - L'écouteur intra-auriculaire 10 comporte, comme connu en soi, un boîtier anatomique 14 présentant une forme légèrement tronconique propre à s'insérer au plus juste dans le conduit auditif 12.
- A l'extrémité de cette partie tronconique est ménagée une ouverture 16 pour la sortie du son en regard de laquelle est disposé un transducteur électro-acoustique 18 relié, pour son excitation, à une unité de pilotage 20.
- L'écouteur comporte des moyens de réception 22 d'un signal audio à reproduire issu d'un moyen de diffusion, tel qu'un téléphone portable 24. La communication entre le téléphone portable et le récepteur 22 de l'écouteur intra-auriculaire est assurée par exemple en Bluetooth.
- L'unité de pilotage 20 comporte en outre un calculateur 26 propre à assurer des traitements informatiques décrit dans la suite et des moyens d'amplification 28 du signal d'excitation du transducteur 18. L'amplificateur 28 a sa sortie reliée au transducteur 18.
- Le calculateur 26 est en outre relié à un premier microphone interne 30 disposé à la surface externe du boîtier placée dans le conduit auditif 12. Ce microphone est propre à mesurer l'onde acoustique dans le conduit auditif et plus précisément appliquée sur le tympan.
- De même, le boîtier 14 comporte, sur sa surface extérieure au conduit auditif 12, un microphone externe 32 également relié au calculateur 26 et propre à mesurer le signal sonore hors de la cavité auditive et correspondant au bruit ambiant.
- Sur la
figure 2 , on retrouve schématiquement le transducteur électro-acoustique 18 et le microphone interne 30. Entre ceux-ci est défini un chemin secondaire acoustique 50 couramment désigné par « secondary path » en anglais. Le chemin secondaire désigne le flux sonore émis par le transducteur 18 et reçu par le tympan et il est en pratique mesuré par le micro 30 dont la mesure est supposée représentative de la mesure sur le tympan. Le chemin primaire désigne le flux sonore reçu de l'extérieur de l'écouteur par le tympan et correspond aux bruits environnants. - Sur cette figure, le récepteur 22 est suivi en sortie par un filtre d'égalisation 52 à paramètres variables mis en oeuvre dans le calculateur 26. Le filtre est par exemple un filtre Shelving ou filtre étagé en français. En variante, le filtre d'égalisation 52 est un filtre à réponse impulsionnelle infinie (IIR), ou finie (FIR), une cascade de filtres ou tout autre filtre.
- La sortie du filtre 52 pour le signal à reproduire ainsi égalisé est reliée à l'amplificateur 28 au travers d'un convertisseur numérique/analogique 54.
- L'écouteur comporte en outre, implémentés dans le calculateur 26, des moyens 60 d'estimation en continu du chemin secondaire 50 associés à des moyens 62 de définition et d'application en continu des paramètres du filtre d'égalisation 52.
- Plus précisément, les moyens d'estimation 60 comportent un modèle 70 de la fonction de transfert du chemin secondaire 50. Ce modèle 70 reçoit en entrée le signal à reproduire égalisé issu du filtre d'égalisation 52.
- Le signal de sortie du modèle 70 est soustrait, dans un soustracteur 72, à un signal composite issu notamment du microphone interne 30.
- Le signal analogique en sortie du microphone interne 30 est acheminé dans un convertisseur analogique/numérique 86 dont la sortie est reliée à l'entrée du soustracteur 72 avec interposition d'un soustracteur 88. L'entrée négative du soustracteur est reliée au microphone externe 32 au travers successivement d'un convertisseur analogique/numérique 89 puis d'un module 90 de modélisation de l'atténuation passive résultant de la structure de l'écouteur. Un interrupteur 92 commandé par l'unité de pilotage 20 est interposé entre le module 90 et le soustracteur 88.
- Le module 90 est propre appliquer au signal numérisé correspondant au flux sonore externe, un filtre correspondant à l'atténuation due à la structure de l'écouteur de sorte que le signal de sortie du module 90 est représentatif du flux sonore dans le conduit auditif en présence de l'écouteur et résultant du seul flux sonore externe.
- La fonction d'atténuation du filtre est mesurée expérimentalement sur l'écouteur et stockée en mémoire.
- La sortie du soustracteur 72 est reliée à une entrée d'une unité d'évaluation 100 laquelle reçoit, sur une autre entrée, le signal égalisé provenant en sortie du filtre 52.
- L'unité d'évaluation 100 est propre à mettre en oeuvre un algorithme des moindres carrés et est reliée au modèle 70 pour assurer sa régulation en fonction d'un algorithme d'optimisation adapté. Ainsi, l'unité 100 forme une boucle de régulation du modèle 70.
- Les moyens 62 de définition des paramètres du filtre comportent des moyens 120 de calcul en continu des paramètres du filtre 52 et notamment du gain noté G, de la fréquence de coupure notée Fc et du facteur de qualité noté Q.
- Sur la
figure 3 est illustré l'algorithme mis en oeuvre par le calculateur 26 de l'écouteur. - En partie haute sont toutefois représentés pour la compréhension la source de signal sonore 22, le filtre 52, les microphones interne et externe 30, 32.
- Les moyens 60 d'estimation du chemin secondaire, à partir des informations reçues du signal égalisé à reproduire et des deux microphones 30, 32, engendrent la réponse impulsionnelle du chemin secondaire 50.
- A l'étape 212 une transformée de Fourier rapide est appliquée à la réponse impulsionnelle obtenu par le modèle 70.
- Un calcul de l'énergie du signal fréquentiel dans une gamme de fréquences basses est effectué à l'étape 214. La gamme de fréquences basses est par exemple de 50 à 200 Hertz.
- De même, un calcul de l'énergie de signal fréquentiel dans une gamme de fréquences médianes, choisie hors de la gamme de fréquences où le son est impacté par une éventuelle fuite, est effectué lors de cette même étape 214. La gamme de fréquences médianes est par exemple de 300 à 500 Hz.
- A l'étape 216, les énergies calculées sont lissées temporellement pour les rendre plus stables vis-à-vis des bruits extérieurs, du fait de leurs variations en fonction du temps.
- A partir des valeurs lissées des énergies, un facteur d'énergie EF est défini en continu à l'étape 218. Il est égal au quotient de l'énergie du signal fréquentiel dans la gamme de fréquences basses sur l'énergie du signal fréquentiel dans la gamme de fréquences médianes.
- En outre et indépendamment du calcul du facteur d'énergie EF, les moyens 60 produisent un signal d'erreur, destiné à produire un score de confiance SNE comme expliqué ci-dessous.
- Le signal d'erreur correspond au signal obtenu en sortie du soustracteur 72 et est égal à la différence d'une part du signal égalisé à reproduire auquel a été appliquée la fonction de transfert du chemin secondaire modélisée par le module 70 et d'autre part du signal numérisé issu du microphone interne 30 corrigé du signal numérisé mesuré par le microphone externe 32 et filtré pour tenir compte de l'atténuation de la structure de l'écouteur.
- A l'étape 312, le signal d'erreur et le signal égalisé à reproduire issu du filtre 52 sont filtrés dans une gamme de fréquences médianes par exemple de de 50 à 750 Hz. Ils sont ensuite lissés à l'étape 314.
- Le score de confiance SNE est calculé à l'étape 316. Il est égal au quotient de l'amplitude du signal égalisé à reproduire filtré et lissé par l'amplitude du signal d'erreur filtré et lissé.
- L'étape 400 consiste en la définition et l'application des paramètres du filtre à partir du facteur d'énergie EF et du score de confiance SNE.
- Ces paramètres sont chacun calculés en fonction du facteur d'énergie EF obtenu à l'étape 218 à partir d'une fonction polynomiale prédéfinie, sous réserve que le score de confiance SNE soit supérieur à un seuil prédéterminé. Si ce score de confiance SNE est supérieur au seuil prédéterminé, les nouveaux paramètres du filtre sont appliqués au filtre 52 et l'algorithme est à nouveau mis en oeuvre. Sinon, l'algorithme est à nouveau mis en oeuvre sans modification des paramètres.
- Sur les
figures 4 ,5 et6 sont illustrées les fonctions polynomiales donnant respectivement le gain G (figure 4 ), la fréquence de coupure Fc (figure 5 ) et le facteur de qualité Q (figure 6 ) en fonction du facteur d'énergie EF. - Ces courbes sont établies par essais successifs à partir de tests effectués sur l'écouteur.
- Pendant toute la mise en oeuvre de l'algorithme, l'interrupteur 72 est maintenu fermé sous la commande de l'unité de pilotage 20. Cette dernière assure l'ouverture temporaire de cet interrupteur seulement tant que le facteur d'énergie EF est inférieur à un seuil prédéterminé. Le signal sonore correspondant au flux extérieur mesuré par le microphone externe 32 n'est alors pas pris en compte pendant des périodes où le niveau de fuite est trop élevé.
- On comprend que grâce à la prise en compte du signal sonore du microphone externe 32, le filtre est en permanence adapté de manière améliorée aux fuites éventuelles pouvant se produire autour de l'écouteur.
Claims (9)
- Ecouteur intra-auriculaire (10) comportant, dans un boitier anatomique (14), un transducteur électro-acoustique (18) propre à diffuser un son dans un conduit auditif (12), une unité (20) de pilotage du transducteur électro-acoustique (18) propre à recevoir un signal à reproduire comportant un filtre d'égalisation (52) appliqué au signal à reproduire, laquelle unité (20) est connectée à un microphone interne (30) de l'écouteur agencé pour mesurer un signal audio dans le conduit auditif (12), l'unité (20) comportant en outre des moyens (60) d'estimation en continu d'un chemin secondaire acoustique (50) défini entre le transducteur (18) et le microphone interne (30) et des moyens (62) de définition et d'application en continu du filtre d'égalisation (52) en fonction de l'estimation du chemin secondaire acoustique (50),
caractérisé en ce qu'il comporte un microphone externe (32) agencé pour mesurer un signal sonore hors du conduit auditif (12), et les moyens (60) d'estimation du chemin secondaire sont propres à estimer le chemin secondaire acoustique (50) en fonction également du signal sonore hors du conduit auditif (12) mesuré par le microphone externe (32). - Ecouteur intra-auriculaire (10) selon la revendication 1, caractérisé en ce que l'unité de pilotage (20) comporte des moyens (90) de correction du signal sonore mesuré par le microphone externe (32) hors du canal auditif (12) en fonction d'un modèle (90) de l'atténuation propre à l'écouteur.
- Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications précédentes, caractérisé en ce qu'il comporte des moyens (92) de non prise en compte du signal sonore hors du conduit auditif (12) mesuré par le microphone externe (32), lorsque le niveau de fuite entre l'écouteur intra-auriculaire (10) et le conduit auditif (12) est supérieur à un seuil prédéterminé.
- Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications précédentes, caractérisé en ce que les moyens de définition et d'application (62) sont propres à définir et à appliquer en continu au filtre d'égalisation (52) à la fois un gain (G), une fréquence de coupure (Fc) et un facteur de qualité (Q) du filtre en fonction de l'estimation du chemin secondaire acoustique (50).
- Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications précédentes, caractérisé en ce que les moyens (60) d'estimation en continu du chemin secondaire acoustique (50) comportant un modèle (70) de la fonction de transfert du chemin secondaire acoustique (50).
- Ecouteur intra-auriculaire (10) selon la revendication 5, caractérisé en ce que les moyens d'estimation (60) comportent une boucle de régulation (100) mettant en oeuvre un algorithme d'optimisation appliquée sur le modèle (70).
- Ecouteur intra-auriculaire (10) selon la revendication 5 ou 6, caractérisé en ce que les moyens (60) d'estimation en continu du chemin secondaire (50) comportent des moyens (218) de calcul d'un facteur d'énergie (EF) formé du quotient de l'énergie du signal fréquentiel dans une gamme de fréquence basse sur l'énergie du signal fréquentiel dans une gamme de fréquence médiane.
- Ecouteur intra-auriculaire (10) selon la revendication 7, caractérisé en ce que les moyens (62) de définition du filtre comportent des moyens de calcul (400) du gain (G), de la fréquence de coupure (Fc) et du facteur de qualité du filtre (Q) par application de fonctions prédéfinies en fonction du facteur d'énergie (EF).
- Ecouteur intra-auriculaire (10) selon l'une quelconque des revendications 5 à 8, caractérisé en ce qu'il comporte des moyens (312, 314, 316) d'établissement d'un score de confiance défini à partir du signal audio égalisé à reproduire appliqué au transducteur (18) et de l'erreur entre le signal audio à reproduire auquel est appliqué l'estimation du chemin secondaire fournie par le modèle (70) et le signal mesuré par le microphone interne (30) et des moyens (400) d'arrêt de l'évolution du gain (G), de la fréquence de coupure (Fc) et du facteur de qualité (Q) du filtre, tant que le score de confiance est inférieur à un seuil prédéterminé.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR2009767A FR3114722B1 (fr) | 2020-09-25 | 2020-09-25 | écouteur intra-auriculaire |
Publications (2)
Publication Number | Publication Date |
---|---|
EP3975583A1 EP3975583A1 (fr) | 2022-03-30 |
EP3975583B1 true EP3975583B1 (fr) | 2023-06-28 |
Family
ID=74125366
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP21198881.1A Active EP3975583B1 (fr) | 2020-09-25 | 2021-09-24 | Écouteur intra-auriculaire |
Country Status (3)
Country | Link |
---|---|
EP (1) | EP3975583B1 (fr) |
CN (1) | CN114257913A (fr) |
FR (1) | FR3114722B1 (fr) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8027481B2 (en) * | 2006-11-06 | 2011-09-27 | Terry Beard | Personal hearing control system and method |
WO2008061260A2 (fr) * | 2006-11-18 | 2008-05-22 | Personics Holdings Inc. | Procédé et dispositif d'écoute personnalisée |
US9264823B2 (en) | 2012-09-28 | 2016-02-16 | Apple Inc. | Audio headset with automatic equalization |
JP7286938B2 (ja) * | 2018-10-18 | 2023-06-06 | ヤマハ株式会社 | 音響出力装置および音響出力方法 |
-
2020
- 2020-09-25 FR FR2009767A patent/FR3114722B1/fr active Active
-
2021
- 2021-09-24 EP EP21198881.1A patent/EP3975583B1/fr active Active
- 2021-09-24 CN CN202111122714.6A patent/CN114257913A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
FR3114722A1 (fr) | 2022-04-01 |
CN114257913A (zh) | 2022-03-29 |
FR3114722B1 (fr) | 2022-09-30 |
EP3975583A1 (fr) | 2022-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA1265063A (fr) | Procedes et dispositifs pour attenuer les bruits d'origine externe parvenant au tympan et ameliorer l'intelligibilite des communications electro- acoustiques | |
EP2945399B1 (fr) | Casque audio à contrôle actif de bruit anc avec prévention des effets d'une saturation du signal microphonique feedback | |
US8855343B2 (en) | Method and device to maintain audio content level reproduction | |
US8315400B2 (en) | Method and device for acoustic management control of multiple microphones | |
US10937410B1 (en) | Managing characteristics of active noise reduction | |
EP3171612A1 (fr) | Casque audio à contrôle actif de bruit, contrôle anti-occlusion et annulation de l'atténuation passive, en fonction de la présence ou de l'absence d'une activité vocale de l'utilisateur de casque | |
US20030063763A1 (en) | Method and apparatus for tuning digital hearing aids | |
EP2930942A1 (fr) | Casque audio à contrôle actif de bruit anc avec réduction du souffle électrique | |
EP2518724A1 (fr) | Combiné audio micro/casque comprenant des moyens de débruitage d'un signal de parole proche, notamment pour un système de téléphonie "mains libres" | |
GB2546563A (en) | Dynamic frequency-dependent sidetone generation | |
WO2021089987A1 (fr) | Système d'annulation de bruit actif | |
EP3847827A1 (fr) | Procédé et appareil destinés à traiter un signal audio sur la base d'un filtre d'égalisation | |
Denk et al. | Equalization filter design for achieving acoustic transparency in a semi-open fit hearing device | |
US10425733B1 (en) | Microphone equalization for room acoustics | |
EP3975583B1 (fr) | Écouteur intra-auriculaire | |
US20230199368A1 (en) | Acoustic device and methods | |
EP3050319B1 (fr) | Equipement de restitution sonore audio haute fidélité | |
US11206004B1 (en) | Automatic equalization for consistent headphone playback | |
FR3052319A1 (fr) | Combine audio micro/casque comprenant des moyens de detection d'activite vocale multiples a classifieur supervise. | |
Denk et al. | The Hearpiece database of individual transfer functions of an openly available in-the-ear earpiece for hearing device research | |
US11688383B2 (en) | Context aware compressor for headphone audio feedback path | |
EP4319201A1 (fr) | Procédé de calibrage d'un dispositif audio nomade, système de calibrage d'un dispositif audio nomade et produit programme d'ordinateur associés | |
EP3979663B1 (fr) | Casque audio à réduction de bruit | |
FR3051959A1 (fr) | Procede et dispositif pour estimer un signal dereverbere | |
FR3118526A1 (fr) | Casque audio a reduction de bruit active |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: THE APPLICATION HAS BEEN PUBLISHED |
|
AK | Designated contracting states |
Kind code of ref document: A1 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE |
|
17P | Request for examination filed |
Effective date: 20220830 |
|
RBV | Designated contracting states (corrected) |
Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
GRAP | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOSNIGR1 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: GRANT OF PATENT IS INTENDED |
|
INTG | Intention to grant announced |
Effective date: 20230120 |
|
GRAS | Grant fee paid |
Free format text: ORIGINAL CODE: EPIDOSNIGR3 |
|
GRAA | (expected) grant |
Free format text: ORIGINAL CODE: 0009210 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: THE PATENT HAS BEEN GRANTED |
|
P01 | Opt-out of the competence of the unified patent court (upc) registered |
Effective date: 20230425 |
|
AK | Designated contracting states |
Kind code of ref document: B1 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: EP |
|
REG | Reference to a national code |
Ref country code: AT Ref legal event code: REF Ref document number: 1583801 Country of ref document: AT Kind code of ref document: T Effective date: 20230715 |
|
REG | Reference to a national code |
Ref country code: IE Ref legal event code: FG4D Free format text: LANGUAGE OF EP DOCUMENT: FRENCH |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R096 Ref document number: 602021003138 Country of ref document: DE |
|
REG | Reference to a national code |
Ref country code: LT Ref legal event code: MG9D |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: SE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: NO Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230928 |
|
REG | Reference to a national code |
Ref country code: NL Ref legal event code: MP Effective date: 20230628 |
|
REG | Reference to a national code |
Ref country code: AT Ref legal event code: MK05 Ref document number: 1583801 Country of ref document: AT Kind code of ref document: T Effective date: 20230628 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: RS Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: NL Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: LV Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: LT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: HR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: GR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230929 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: FR Payment date: 20230912 Year of fee payment: 3 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: FI Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: SK Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: ES Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IS Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20231028 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: SM Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: SK Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: RO Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: PT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20231030 Ref country code: IS Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20231028 Ref country code: ES Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: EE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: CZ Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: AT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: DE Payment date: 20231011 Year of fee payment: 3 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: PL Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R097 Ref document number: 602021003138 Country of ref document: DE |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: DK Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 |
|
PLBE | No opposition filed within time limit |
Free format text: ORIGINAL CODE: 0009261 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: LU Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20230924 |
|
REG | Reference to a national code |
Ref country code: BE Ref legal event code: MM Effective date: 20230930 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: LU Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20230924 Ref country code: IT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 Ref country code: MC Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20230628 |
|
26N | No opposition filed |
Effective date: 20240402 |
|
REG | Reference to a national code |
Ref country code: IE Ref legal event code: MM4A |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20230924 |