EP2654321A1 - Method for operating a hearing aid - Google Patents

Method for operating a hearing aid Download PDF

Info

Publication number
EP2654321A1
EP2654321A1 EP13158959.0A EP13158959A EP2654321A1 EP 2654321 A1 EP2654321 A1 EP 2654321A1 EP 13158959 A EP13158959 A EP 13158959A EP 2654321 A1 EP2654321 A1 EP 2654321A1
Authority
EP
European Patent Office
Prior art keywords
counter
value
operating parameter
output
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP13158959.0A
Other languages
German (de)
French (fr)
Other versions
EP2654321B1 (en
Inventor
Roland Barthel
Uwe Rass
Florian Steinke
Clemens Otte
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sivantos Pte Ltd
Original Assignee
Siemens Medical Instruments Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Medical Instruments Pte Ltd filed Critical Siemens Medical Instruments Pte Ltd
Publication of EP2654321A1 publication Critical patent/EP2654321A1/en
Application granted granted Critical
Publication of EP2654321B1 publication Critical patent/EP2654321B1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/50Customised settings for obtaining desired overall acoustical characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/50Customised settings for obtaining desired overall acoustical characteristics
    • H04R25/505Customised settings for obtaining desired overall acoustical characteristics using digital signal processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R11/00Transducers of moving-armature or moving-core type
    • H04R11/02Loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/45Prevention of acoustic reaction, i.e. acoustic oscillatory feedback
    • H04R25/456Prevention of acoustic reaction, i.e. acoustic oscillatory feedback mechanically
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/41Detection or adaptation of hearing aid parameters or programs to listening situation, e.g. pub, forest
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/43Signal processing in hearing aids to enhance the speech intelligibility

Definitions

  • an input value in this variant of the method affects not only the counter of the class to which it belongs directly, but also the counters of adjacent classes. This leads to additional smoothing and improves the robustness of the algorithm.
  • the invention further relates to a hearing device of the type mentioned above, whose signal processing device is designed to classify the input value according to its membership in a plurality of predetermined classes for smoothing the operating parameter for each input value and a counter associated with the respective class to which the input value belongs to increase, to determine the counter with the largest counter value and output an operating parameter value associated with the counter with the largest counter value as the output size of the filter.
  • a robust and memory-efficient smoothing of the operating parameters of the hearing device can be achieved in this way.
  • the operating parameters are determined in dependence on an acoustic input signal of the hearing device. ever Depending on the type of acoustic event, it can lead to strong, sudden fluctuations in the operating parameters, which affect hearing comfort. For this reason, it is necessary to smooth the timing of these operating parameters.
  • the described method exhibits a smoothing behavior similar to that of the exponentially weighted moving average strongly resembles. With higher robustness against outliers, however, much less space is needed.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurosurgery (AREA)
  • Otolaryngology (AREA)
  • Electromagnetism (AREA)
  • Filters That Use Time-Delay Elements (AREA)
  • Tone Control, Compression And Expansion, Limiting Amplitude (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

The method involves determining an operating parameter of a hearing apparatus. The operating parameter is smoothened by a filter. An input value (10) is classified in accordance with association with a set of predetermined classes (12) for the input value of the operating parameter, and a counter assigned to the respective class associated with the input value is increased. The counter with a greatest counter value is determined, and an operating parameter value assigned to the counter is output with the greatest counter value as an output variable of the filter. An independent claim is also included for a hearing apparatus.

Description

Die Erfindung betrifft ein Verfahren zum Betreiben einer Hörvorrichtung, bei welchem ein Betriebsparameter der Hörvorrichtung bestimmt und mittels eines Filters geglättet wird. Die Erfindung betrifft ferner eine Hörvorrichtung mit einer Signalverarbeitungsvorrichtung, wobei zumindest ein Betriebsparameter der Signalverarbeitungsvorrichtung einstellbar und durch ein Filter glättbar istThe invention relates to a method for operating a hearing device, in which an operating parameter of the hearing device is determined and smoothed by means of a filter. The invention further relates to a hearing device with a signal processing device, wherein at least one operating parameter of the signal processing device is adjustable and can be smoothed by a filter

Unter einer Hörvorrichtung wird hier jedes im oder am Ohr tragbare, einen Hörreiz verursachende Gerät verstanden, insbesondere ein Hörgerät, ein Headset, Kopfhörer und dergleichen.A hearing device here means any device which can be worn in or on the ear and causes a hearing, in particular a hearing aid, a headset, headphones and the like.

Hörgeräte sind tragbare Hörvorrichtungen, die zur Versorgung von Schwerhörenden dienen. Um den zahlreichen individuellen Bedürfnissen entgegenzukommen, werden unterschiedliche Bauformen von Hörgeräten wie Hinter-dem-Ohr-Hörgeräte (HdO), Hörgerät mit externem Hörer (RIC: receiver in the canal) und In-dem-Ohr-Hörgeräte (IdO), z.B. auch Concha-Hörgeräte oder Kanal-Hörgeräte (ITE, CIC), bereitgestellt. Die beispielhaft aufgeführten Hörgeräte werden am Außenohr oder im Gehörgang getragen. Darüber hinaus stehen auf dem Markt aber auch Knochenleitungshörhilfen, implantierbare oder vibrotaktile Hörhilfen zur Verfügung. Dabei erfolgt die Stimulation des geschädigten Gehörs entweder mechanisch oder elektrisch.Hearing aids are portable hearing aids that are used to care for the hearing impaired. In order to meet the numerous individual needs, different types of hearing aids such as behind-the-ear hearing aids (BTE), hearing aid with external receiver (RIC: receiver in the canal) and in-the-ear hearing aids (ITE), e.g. Concha hearing aids or canal hearing aids (ITE, CIC). The hearing aids listed by way of example are worn on the outer ear or in the ear canal. In addition, bone conduction hearing aids, implantable or vibrotactile hearing aids are also available on the market. The stimulation of the damaged hearing takes place either mechanically or electrically.

Hörgeräte besitzen prinzipiell als wesentliche Komponenten einen Eingangswandler, einen Verstärker und einen Ausgangswandler. Der Eingangswandler ist in der Regel ein Schallempfänger, z. B. ein Mikrofon, und/oder ein elektromagnetischer Empfänger, z. B. eine Induktionsspule. Der Ausgangswandler ist meist als elektroakustischer Wandler, z. B. Miniaturlautsprecher, oder als elektromechanischer Wandler, z. B. Knochenleitungshörer, realisiert. Der Verstärker ist üblicherweise in eine Signalverarbeitungseinheit integriert. Dieser prinzipielle Aufbau ist in FIG 1 am Beispiel eines Hinter-dem-Ohr-Hörgeräts dargestellt. In ein Hörgerätegehäuse 1 zum Tragen hinter dem Ohr sind ein oder mehrere Mikrofone 2 zur Aufnahme des Schalls aus der Umgebung eingebaut. Eine Signalverarbeitungseinheit 3, die ebenfalls in das Hörgerätegehäuse 1 integriert ist, verarbeitet die Mikrofonsignale und verstärkt sie. Das Ausgangssignal der Signalverarbeitungseinheit 3 wird an einen Lautsprecher bzw. Hörer 4 übertragen, der ein akustisches Signal ausgibt. Der Schall wird gegebenenfalls über einen Schallschlauch, der mit einer Otoplastik im Gehörgang fixiert ist, zum Trommelfell des Geräteträgers übertragen. Die Energieversorgung des Hörgeräts und insbesondere die der Signalverarbeitungseinheit 3 erfolgt durch eine ebenfalls ins Hörgerätegehäuse 1 integrierte Batterie 5.Hearing aids have in principle as essential components an input transducer, an amplifier and an output transducer. The input transducer is usually a sound receiver, z. As a microphone, and / or an electromagnetic receiver, for. B. an induction coil. The output transducer is usually used as an electroacoustic transducer, z. As miniature speaker, or as an electromechanical transducer, z. B. bone conduction, realized. The amplifier is standard integrated into a signal processing unit. This basic structure is in FIG. 1 shown using the example of a behind-the-ear hearing aid. In a hearing aid housing 1 for carrying behind the ear, one or more microphones 2 for receiving the sound from the environment are installed. A signal processing unit 3, which is also integrated in the hearing aid housing 1, processes the microphone signals and amplifies them. The output signal of the signal processing unit 3 is transmitted to a loudspeaker or earpiece 4, which outputs an acoustic signal. The sound is optionally transmitted via a sound tube, which is fixed with an earmold in the ear canal, to the eardrum of the device carrier. The power supply of the hearing device and in particular the signal processing unit 3 is effected by a likewise integrated into the hearing aid housing 1 battery. 5

Die Signalverarbeitungseinheit weist Betriebsparameter auf, die von den Mikrofonsignalen abhängig sind. Beispielsweise wird in Abhängigkeit von einer Rauschintensität die Stärke einer Rauschfilterung variiert oder in Abhängigkeit von einer akustischen Umgebung ein zusätzliches Richtmikrofon mit einer gegebenen Stärke aktiviert.The signal processing unit has operating parameters that are dependent on the microphone signals. For example, depending on a noise intensity, the intensity of noise filtering is varied or an additional directional microphone of a given strength is activated depending on an acoustic environment.

Diese Betriebsparameter variieren also zeitlich mit der akustischen Umgebung. Um häufige sprunghafte Änderungen der Parameterwerte zu vermeiden, ist es üblich, den zeitlichen Verlauf der Parameterwerte mittels geeigneter Filter zu glätten.These operating parameters thus vary in time with the acoustic environment. In order to avoid frequent erratic changes in the parameter values, it is customary to smooth the time profile of the parameter values by means of suitable filters.

Ein Beispiel hierfür sind gleitende Mittelwertfilter, wie der exponentiell gewichtete gleitende Mittelwert. Um mit einem solchen Filter eine Glättung zu erzielen, müssen die zu glättenden Daten über die gesamte Fensterbreite, in der die Glättung stattfinden soll, im Speicher der Signalverarbeitungseinheit vorgehalten werden. Bei üblichen Betriebsbedingungen, beispielsweise einer Samplingrate von 24 kHz und einer Fensterbreite von 3 s, fallen daher beträchtliche Datenmengen an, die aufgrund der begrenzten Speicherkapazität üblicher Sig nalverarbeitungsvorrichtungen schnell zu Kapazitätsproblemen führen können.An example of this is moving average filters, such as the exponentially weighted moving average. In order to achieve smoothing with such a filter, the data to be smoothed over the entire window width in which the smoothing is to take place must be stored in the memory of the signal processing unit. Under normal operating conditions, for example a sampling rate of 24 kHz and a window width of 3 s, considerable amounts of data therefore accumulate due to the limited storage capacity of conventional sig nal processing devices can quickly lead to capacity problems.

Aus der US 2010/0232633 A1 ist ein Verfahren zum Aufzeichnen von Betriebsparametern eines Hörgeräts bekannt, bei welchem Eingangsdaten nach ihrer Zugehörigkeit zu Wertebereichen klassifiziert werden. Für jeden Eingangswert wird ein dem jeweiligen Wertebereich zugeordneter Zähler inkrementiert, so dass ein Histogramm erhalten wird, welches die Verteilung der Eingangswerte wiedergibt.From the US 2010/0232633 A1 For example, a method for recording operating parameters of a hearing device is known in which input data are classified according to their belonging to value ranges. For each input value, a counter assigned to the respective value range is incremented, so that a histogram is obtained which reflects the distribution of the input values.

Der vorliegenden Erfindung liegt somit die Aufgabe zugrunde, ein Verfahren und eine Vorrichtung der eingangs genannten Art bereitzustellen, welche eine Glättung von zeitlich variierenden Betriebsparameterwerten einer Hörvorrichtung bei möglichst geringem Speicherbedarf ermöglichen.It is therefore an object of the present invention to provide a method and a device of the type mentioned at the outset which make it possible to smooth out temporally varying operating parameter values of a hearing device with the least possible storage requirement.

Diese Aufgabe wird durch ein Verfahren mit den Merkmalen des Patentanspruchs 1 sowie durch eine Vorrichtung mit den Merkmalen des Patentanspruchs 8 gelöst.This object is achieved by a method having the features of patent claim 1 and by a device having the features of patent claim 8.

Bei einem erfindungsgemäßen Verfahren wird für jeden Eingangswert - also jeden ungeglätteten Wert - dieser Eingangswert gemäß dessen Zugehörigkeit zu einer Mehrzahl von vorgegebenen Klassen klassifiziert und ein der jeweiligen Klasse, welcher der Eingangswert zugehört, zugeordneter Zählers erhöht. Im einfachsten Fall kann der Zählerwert des Zählers dabei um eins inkrementiert werden, es können jedoch auch andere, gegebenenfalls von Schritt zu Schritt variierende Inkremente Verwendung finden. Anschließend wird der Zähler mit dem größten Zählerwert bestimmt und ein dem Zähler mit dem größten Zählerwert zugeordneter Betriebsparameterwert als Ausgabegröße des Filters ausgegeben.In a method according to the invention, for each input value-that is to say each unsmoothed value-this input value is classified in accordance with its membership in a plurality of predetermined classes and an associated counter of the respective class to which the input value belongs is incremented. In the simplest case, the counter value of the counter can be incremented by one, but it is also possible to use other increments, which may vary from step to step. Subsequently, the counter with the largest counter value is determined and an operating parameter value assigned to the counter with the largest counter value is output as the output variable of the filter.

Ein solches Glättungsverfahren kommt verglichen mit aus dem Stand der Technik bekannten Algorithmen mit deutlich weniger Speicher aus. Anstelle die Eingangsdaten über die gesamte Fensterbreite speichern zu müssen, wird lediglich Speicherplatz für die den jeweiligen Klassen zugeordneten Zähler benötigt, so dass das Verfahren insbesondere geeignet ist, unter den relativ limitierten Bedingungen von Hörvorrichtungen eingesetzt zu werden.Such a smoothing process comes out compared to algorithms known from the prior art with significantly less memory. Instead of the input data over the whole Having to save window width, only space is required for the counters associated with the respective classes, so that the method is particularly suitable to be used under the relatively limited conditions of hearing devices.

In einer ersten Variante des Verfahrens wird nur dann der dem Zähler mit dem größten Zählerwert zugeordnete Betriebsparameterwert als Ausgabegröße ausgegeben, wenn der Zähler einen vorgegebenen Schwellenwert überschreitet. Andernfalls wird der zuletzt ausgegebenen Betriebsparameterwert als Ausgangsgröße beibehalten. Die Wahl des Schwellenwertes bestimmt dabei im Wesentlichen die Fensterbreite des Glättungsalgorithmus.In a first variant of the method, the operating parameter value assigned to the counter with the largest counter value is output as the output variable only if the counter exceeds a predetermined threshold value. Otherwise, the last output operating parameter value is retained as output. The choice of the threshold value essentially determines the window width of the smoothing algorithm.

In diesem Fall ist es zweckmäßig, bei Überschreiten des Schwellenwerts durch einen der Zähler nach Ausgeben der Ausgabegröße alle Zähler auf Null zu setzen, so dass die Glättungswirkung erhalten bleibt und der Speicherplatz limitiert wird.In this case, it is expedient to set all counters to zero when the threshold value is exceeded by one of the counters after outputting the output variable, so that the smoothing effect is maintained and the memory space is limited.

In der bislang geschilderten Ausführungsform eignet sich das Verfahren insbesondere zur Glättung von Betriebsparametern der Hörvorrichtung, die bereits in diskretisierter Form vorliegen. Hierbei kann es sich beispielsweise um die Bewertung des akustischen Umfelds der Hörvorrichtung gemäß mehrerer diskreter Klassen (Gesprächssituation, Hintergrundmusik und dgl.) handeln.In the hitherto described embodiment, the method is particularly suitable for smoothing operating parameters of the hearing device, which are already present in discretized form. This may be, for example, the evaluation of the acoustic environment of the hearing device according to several discrete classes (conversation situation, background music and the like).

Das Verfahren eignet sich jedoch auch zur Behandlung nichtdiskreter, reellwertiger Betriebsparameter. In diesem Fall werden die Klassen vorzugsweise durch zusammenhängende Intervalle über vorgegebene, nicht-diskrete Wertebereiche repräsentiert, um im ersten Schritt des Verfahrens eine Diskretisierung zu erzielen, die eine besonders speichereffiziente Bearbeitung ermöglicht.However, the method is also suitable for the treatment of non-discrete, real-valued operating parameters. In this case, the classes are preferably represented by contiguous intervals over predefined, non-discrete value ranges in order to achieve a discretization in the first step of the method, which enables a particularly memory-efficient processing.

Es ist dabei ferner zweckmäßig, vor dem Erhöhen des Zählerwertes alle Zählerwerte um einen vorgegebenen Faktor λ mit 0≤λ≤1 zu skalieren. Eine solche Skalierung begrenzt das Wachstum der Zählerwerte und bestimmt damit indirekt die Fensterbreite des Glättungsalgorithmus. Ferner beeinflusst die Skalierung, inwieweit in der Vergangenheit liegende Werte die aktuelle Ausgangsgröße des Filters bestimmen, so dass durch die Wahl von λ die Eigenschaften des Filters besonders einfach angepasst werden können.
Anstelle, wie in der zuerst beschriebenen Variante, die Zähler für jede Klasse, der ein Eingangswert zugeordnet werden kann, einfach um eins zu inkrementieren, wird hier vorzugsweise eine komplexere Zählweise gewählt. Hierbei werden alle Zählerwerte um einen Betrag erhöht, welcher abhängig von einem Abstand des Eingangswertes von einem Mittelpunkt des der jeweiligen Klasse entsprechenden Intervalls ist.
In this case, it is also expedient to scale all counter values by a predetermined factor λ with 0≤λ≤1 before increasing the counter value. Such a scaling limits the growth of the counter values and thus indirectly determines the window width of the smoothing algorithm. Furthermore, the scaling influences the extent to which past values determine the current output of the filter, so that the choice of λ makes it particularly easy to adapt the properties of the filter.
Instead of simply incrementing the counters for each class that can be assigned an input value, as in the first described variant, a more complex way of counting is preferably chosen here. In this case, all counter values are increased by an amount which is dependent on a distance of the input value from a midpoint of the interval corresponding to the respective class.

Mit anderen Worten beeinflusst ein Eingangswert in dieser Variante des Verfahrens nicht nur den Zähler der Klasse, welcher er unmittelbar zugehört, sondern auch die Zähler benachbarter Klassen. Dies führt zu einer zusätzlichen Glättung und verbessert die Robustheit des Algorithmus.In other words, an input value in this variant of the method affects not only the counter of the class to which it belongs directly, but also the counters of adjacent classes. This leads to additional smoothing and improves the robustness of the algorithm.

Es ist dabei besonders zweckmäßig, für jeden Eingangswert yi des Betriebsparameters der Zählerwert vj einer Klasse j der Klassen, der ein Intervall mit dem Mittelpunkt bj zugeordnet ist, um (1-λ)max(0,1-(yi-bj|)/σ)) zu erhöhen, wobei σ einen vorgegebenen Einflussradius darstellt.It is particularly expedient for each input value y i of the operating parameter, the counter value v j of a class j of the classes, which is assigned an interval with the center b j , by (1-λ) max (0,1- (y i -. b j |) / σ)), where σ represents a predetermined radius of influence.

Klassen, deren Intervallmittelpunkt weiter als der Betrag von σ von dem Eingangswert entfernt sind, werden also nicht beeinflusst, so dass durch die Wahl von σ die Glättungseigenschaften des Filters eingestellt werden können.Classes whose interval center point is further from the input value than the absolute value of σ are therefore not affected, so that the choice of σ can be used to set the smoothing properties of the filter.

Insgesamt wird so ein Algorithmus geschaffen, der bei gleichbleibend geringem Speicherbedarf über eine beliebige Fensterbreite sowohl diskretisierte als auch nicht-diskrete, reellwertige Daten zu glätten vermag und dabei robust gegenüber Ausreißern und transienten Ereignissen ist.Overall, an algorithm is thus created which, with a constant low memory requirement, can discretize over any width of window as well as non-discrete, smoothing real-world data while being resilient to outliers and transient events.

Die Erfindung betrifft ferner eine Hörvorrichtung der eingangs genannten Art, deren Signalverarbeitungsvorrichtung dazu ausgelegt ist, zum Glätten des Betriebsparameters für jeden Eingangswert den Eingangswerts gemäß dessen Zugehörigkeit zu einer Mehrzahl von vorgegebenen Klassen zu klassifizieren und einen der jeweiligen Klasse, welcher der Eingangswert zugehört, zugeordneten Zählers zu erhöhen, den Zähler mit dem größten Zählerwert zu bestimmen und einen dem Zähler mit dem größten Zählerwert zugeordneten Betriebsparameterwerts als Ausgabegröße des Filters auszugeben. Wie bereits anhand des erfindungsgemäßen Verfahrens erläutert, kann hierdurch eine robuste und speichereffiziente Glättung der Betriebsparameter der Hörvorrichtung erzielt werden.The invention further relates to a hearing device of the type mentioned above, whose signal processing device is designed to classify the input value according to its membership in a plurality of predetermined classes for smoothing the operating parameter for each input value and a counter associated with the respective class to which the input value belongs to increase, to determine the counter with the largest counter value and output an operating parameter value associated with the counter with the largest counter value as the output size of the filter. As already explained with reference to the method according to the invention, a robust and memory-efficient smoothing of the operating parameters of the hearing device can be achieved in this way.

Im Folgenden werden die Erfindung und ihre Ausführungsformen anhand der Zeichnung näher erläutert. Es zeigen:

FIG 1
den schematischen Aufbau einer Hörvorrichtung gemäß dem Stand der Technik und
FIG 2
eine schematische Darstellung des Ablaufs eines Ausführungsbeispiels eines Erfindungsgemäßen Verfahrens;
In the following the invention and its embodiments will be explained in more detail with reference to the drawing. Show it:
FIG. 1
the schematic structure of a hearing device according to the prior art and
FIG. 2
a schematic representation of the sequence of an embodiment of a method according to the invention;

Um eine für den Benutzer optimale Ausgabe zu erzielen, müssen Hörvorrichtungen an die jeweilige akustische Umgebung, in welcher sie benutzt werden, angepasst werden. Hierzu können in Abhängigkeit von den Umgebungsbedingungen verschiedene Betriebsparameter der Hörvorrichtung eingestellt werden. Beispielsweise kann die Stärke einer Rauschfilterung verändert werden, zusätzliche Richtmikrofone mit unterschiedlicher Empfindlichkeit zugeschaltet werden und dergleichen.To achieve optimal output for the user, hearing devices must be adapted to the particular acoustic environment in which they are used. For this purpose, different operating parameters of the hearing device can be adjusted depending on the environmental conditions. For example, the strength of a noise filtering can be changed, additional directional microphones with different sensitivity can be switched on and the like.

Die Betriebsparameter werden dabei in Abhängigkeit von einem akustischen Eingangssignal der Hörvorrichtung bestimmt. Je nach Art des akustischen Geschehens kann es dabei zu starken, plötzlichen Schwankungen der Betriebsparameter kommen, die den Hörkomfort beeinträchtigen. Aus diesem Grund ist es notwendig, den zeitlichen Verlauf dieser Betriebsparameter zu glätten.The operating parameters are determined in dependence on an acoustic input signal of the hearing device. ever Depending on the type of acoustic event, it can lead to strong, sudden fluctuations in the operating parameters, which affect hearing comfort. For this reason, it is necessary to smooth the timing of these operating parameters.

Aus dem Stand der Technik bekannte Glättungsverfahren, wie beispielsweise die exponentiell gewichtete gleitende Mittelung, benötigen jedoch große Mengen an Speicherplatz, da die kompletten zu glättenden Eingangsdaten über die gesamte Fensterbreite des Glättungsalgorithmus im Speicher vorgehalten werden müssen, was die begrenzten Ressourcen der Signalverarbeitungsvorrichtung 3 schnell auslasten kann.However, prior art smoothing methods, such as exponentially weighted moving averaging, require large amounts of memory space because the entire smoothing input data must be held in memory throughout the window width of the smoothing algorithm, quickly leveraging the limited resources of signal processing device 3 can.

Eine wesentlich geringere Speichernutzung kann durch das in FIG 2 schematisch veranschaulichte Ausführungsbeispiel eines erfindungsgemäßen Verfahrens erzielt werden.A much lower memory usage can be achieved by the in FIG. 2 schematically illustrated embodiment of a method according to the invention can be achieved.

Eingangsdaten 10 für das Glättungsfilter werden hierbei gemäß ihrer Zugehörigkeit zu einer Mehrzahl von Klassen 12 klassifiziert. Fällt ein Eingangswert 10 in eine der Klassen 12, so wird ein der Klasse 12 zugehöriger Zähler inkrementiert. Überschreitet einer der Zähler einen vorgegebenen Schwellenwert 14, so wird als Ausgangswert des Filters ein der dem Zähler zugehörigen Klasse 12 zugeordneter Ausgangswert ausgegeben und alle Zähler auf Null zurückgesetzt. Andernfalls wird der bisherige Ausgangswert beibehalten.Input data 10 for the smoothing filter are classified according to their membership in a plurality of classes 12. If an input value 10 falls in one of the classes 12, a counter associated with class 12 is incremented. If one of the counters exceeds a predetermined threshold value 14, the output value of the filter is output as output value assigned to the class 12 belonging to the counter and all counters are reset to zero. Otherwise, the previous output value is retained.

Die Signalverarbeitungseinrichtung 3 muss also nur Speicherplatz für die Zähler der Klassen 12 bereitstellen. Der Speicherplatzbedarf ist dabei unabhängig von der Fensterbreite, die durch die Wahl des Schwellenwertes 14 bestimmt wird. Gleichzeitig ist der Algorithmus robust gegen Ausreißer und transiente Ereignisse und ermöglicht somit eine zuverlässige Glättung bereits diskretisierter Eingangswerte 10.The signal processing device 3 therefore only has to provide storage space for the counters of the classes 12. The storage space requirement is independent of the window width, which is determined by the choice of the threshold value 14. At the same time, the algorithm is robust against outliers and transient events and thus enables a reliable smoothing of already discretized input values 10.

Sollen reellwertige, nicht-diskrete Eingangsgrößen geglättet werden, kann das in FIG 2 schematisch gezeigte Verfahren verfeinert werden. Für eine Sequenz y0, y1, ..., yi von Eingangswerten wird dabei zunächst eine Diskretisierung durchgeführt. Jedes yi wird dabei einem Intervall j mit dem Mittelpunkt bj zugeordnet. Für jedes Intervall j existiert ferner ein Zähler vj, der zu Beginn des Verfahrens auf einen Anfangswert, vorzugsweise Null, initialisiert wird.If real-valued, non-discrete input quantities are to be smoothed, this can be done in FIG. 2 refines schematically shown method become. For a sequence y 0 , y 1 ,..., Y i of input values, a discretization is first carried out. Each y i is assigned to an interval j with the center b j . For each interval j there also exists a counter v j , which is initialized to an initial value, preferably zero, at the beginning of the method.

Für jeden neuen Eingangswert yi, den das Filter erhält, werden zunächst alle Zähler vj durch Multiplikation mit einem Faktor λ mit 0≤λ≤1 skaliert. Dies limitiert das Wachstum der Zählerwerte, so dass hier kein Nullsetzen der Zähler vj in vorgegebenen Abständen stattfinden muss. Weiterhin wird durch die Skalierung bestimmt, wie stark in der Vergangenheit bearbeitete Eingangswerte yi den gegenwärtigen Ausgabewerte des Filters beeinflussen. Die mittlere Lebensdauer der Zählerwerte beträgt aufgrund der Skalierung λ-1, was als Fensterbreite des Filters betrachtet werden kann.For each new input value y i , which the filter receives, first all counters v j are scaled by multiplication by a factor λ with 0≤λ≤1. This limits the growth of the counter values, so that here no zeroing of the counters v j has to take place at predetermined intervals. Furthermore, the scaling determines how heavily input-processed input values y i affect the current output values of the filter. The average lifetime of the counter values is λ -1 due to the scaling, which can be considered as the window width of the filter.

Nach der Skalierung werden die Zähler vj in Abhängigkeit von dem aktuellen Eingangswert yi modifiziert. Dies erfolgt gemäß der Funktion vj → λvj+(1-λ)max(0;1-(|yi-bj|)/σ). σ stellt dabei einen Einflussradius dar.
Für einen gegebenen Eingangswert yi werden also alle Zähler vj, die einem Intervall j zugeordnet sind, dessen Mittelpunkt bj weniger als σ vom Eingangswert yi entfernt liegt, proportional zum Abstand zwischen yi und bj erhöht. Dies führt zu einer zusätzlichen Glättung der Filterausgabe und verbessert die Robustheit des Filters.
After scaling, the counters v j are modified in dependence on the current input value y i . This is done according to the function v j → λ v j + (1-λ) max (0; 1- (| y i -b j |) / σ). σ represents an influence radius.
For a given input value y i , therefore, all counters v j associated with an interval j whose center b j is less than σ away from the input value y i are increased in proportion to the distance between y i and b j . This leads to an additional smoothing of the filter output and improves the robustness of the filter.

Nach dem Erhöhen der Zähler vj wird schließlich der größte Zählerwert vj bestimmt und als Ausgabewert des Filters der Mittelpunkt bj des diesem Zähler vj zugeordneten Intervalls j ausgegeben. Daraufhin kann der nächste Eingangswert yi bearbeitet werden.After increasing the counter j v j v of the largest counter value is finally determined and output as the output value of the filter, the center b of the j counter this v j associated interval j. Then the next input value y i can be processed.

Das beschriebene Verfahren zeigt ein Glättungsverhalten, welches demjenigen des exponentiell gewichteten gleitenden Mittels stark ähnelt. Bei höherer Robustheit gegenüber Ausreißern wird jedoch deutlich weniger Speicherplatz gebraucht.The described method exhibits a smoothing behavior similar to that of the exponentially weighted moving average strongly resembles. With higher robustness against outliers, however, much less space is needed.

Es ist weiterhin möglich, als Ausgangswerte der Zähler vj negative Werte zu verwenden, und nur dann den Ausgabewert des Filters zu ändern, wenn einer der Zähler vj Null erreicht oder überschreitet. Hierdurch kann sichergestellt werden, dass über vorbestimmbare Zeitabschnitte hinweg keine Änderung des Ausgabewertes erfolgt, um eine besonders glatte Ausgabe zu erzielen.It is also possible to use negative values as output values of the counters v j , and to change the output value of the filter only if one of the counters v j reaches or exceeds zero. In this way it can be ensured that no change in the output value takes place over predeterminable time segments in order to achieve a particularly smooth output.

Claims (8)

Verfahren zum Betreiben einer Hörvorrichtung, bei welchem ein Betriebsparameter der Hörvorrichtung bestimmt und mittels eines Filters geglättet wird,
dadurch gekennzeichnet, dass
die Glättung folgende Schritte umfasst: a) für jeden Eingangswert: Klassifizieren des Eingangswerts gemäß dessen Zugehörigkeit zu einer Mehrzahl von vorgegebenen Klassen und Erhöhen eines der jeweiligen Klasse, welcher der Eingangswert zugehört, zugeordneten Zählers; b) Bestimmen des Zählers mit dem größten Zählerwert; c) Ausgeben eines dem Zähler mit dem größten Zählerwert zugeordneten Betriebsparameterwerts als Ausgabegröße des Filters.
Method for operating a hearing device, in which an operating parameter of the hearing device is determined and smoothed by means of a filter,
characterized in that
Smoothing includes the following steps: a) for each input value: classifying the input value according to its belonging to a plurality of predetermined classes and incrementing one of the respective class to which the input value belongs associated counter; b) determining the counter with the largest counter value; c) outputting an operating parameter value assigned to the counter with the largest counter value as the output variable of the filter.
Verfahren nach Anspruch 1,
dadurch gekennzeichnet, dass in Schritt c) nur dann der dem Zähler mit dem größten Zählerwert zugeordnete Betriebsparameterwert als Ausgabegröße ausgegeben wird, wenn der Zählerwert einen vorgegebenen Schwellenwert überschreitet und dass ansonsten der zuletzt ausgegebenen Betriebsparameterwert als Ausgangsgröße beibehalten wird.
Method according to claim 1,
characterized in that, in step c), only the operating parameter value assigned to the counter with the largest counter value is output as output variable if the counter value exceeds a predetermined threshold value and otherwise the last output operating parameter value is retained as the output variable.
Verfahren nach Anspruch 2,
dadurch gekennzeichnet, dass bei Überschreiten des Schwellenwerts durch einen der Zählerwerte in Schritt c) nach Ausgeben der Ausgabegröße alle Zählerwerte auf Null gesetzt werden.
Method according to claim 2,
characterized in that when the threshold value is exceeded by one of the counter values in step c) after outputting the output quantity, all counter values are set to zero.
Verfahren nach Anspruch 1,
dadurch gekennzeichnet, dass jede der Klassen jeweils ein zusammenhängendes Intervall über einen vorgegebenen nichtdiskreten Wertebereich ist.
Method according to claim 1,
characterized in that each of the classes is each a contiguous interval over a predetermined non-discrete value range.
Verfahren nach Anspruch 4,
dadurch gekennzeichnet, dass vor dem Erhöhen des Zählerwerts in Schritt a) alle Zählerwerte um einen vorgegebenen Faktor λ mit 0≤λ≤1 skaliert werden.
Method according to claim 4,
characterized in that prior to increasing the counter value in step a) all counter values are scaled by a predetermined factor λ with 0≤λ≤1.
Verfahren nach Anspruch 5,
dadurch gekennzeichnet, dass in Schritt a) alle Zählerwerte um einen Betrag erhöht werden, welcher abhängig von einem Abstand des Eingangswertes von einem Mittelpunkt des der jeweiligen Klasse entsprechenden Intervalls ist.
Method according to claim 5,
characterized in that in step a) all counter values are increased by an amount which is dependent on a distance of the input value from a mid-point of the interval corresponding to the respective class.
Verfahren nach Anspruch 6,
dadurch gekennzeichnet, dass
für jeden Eingangswert yi des Betriebsparameters der Zähler vj einer Klasse j der Klassen, der ein Intervall mit dem Mittelpunkt bj zugeordnet ist, um (1-λ)max(0,1-(yi-bj|)/σ)) erhöht wird, wobei σ einen vorgegebenen Einflussradius darstellt.
Method according to claim 6,
characterized in that
for each input value y i of the operating parameter, the counters v j of a class j of the classes to which an interval having the center b j is assigned by (1-λ) max (0,1- (y i -b j |) / σ )), where σ represents a given radius of influence.
Hörvorrichtung mit einer Signalverarbeitungsvorrichtung (3) einschließlich eines Filters, wobei zumindest ein Betriebsparameter der Signalverarbeitungsvorrichtung (3) einstellbar und durch das Filter glättbar ist,
dadurch gekennzeichnet, dass
die Signalverarbeitungsvorrichtung (3) dazu ausgelegt ist, zum Glätten des Betriebsparameters für jeden Eingangswert den Eingangswerts gemäß dessen Zugehörigkeit zu einer Mehrzahl von vorgegebenen Klassen zu klassifizieren und einen der jeweiligen Klasse, welcher der Eingangswert zugehört, zugeordneten Zählers zu erhöhen, den Zähler mit dem größten Zählerwert zu bestimmen und einen dem Zähler mit dem größten Zählerwert zugeordneten Betriebsparameterwerts als Ausgabegröße des Filters auszugeben.
Hearing apparatus with a signal processing device (3) including a filter, wherein at least one operating parameter of the signal processing device (3) is adjustable and can be smoothed by the filter,
characterized in that
the signal processing device (3) is arranged to classify the input value according to its membership in a plurality of predetermined classes for smoothing the operating parameter for each input value and to increase a counter associated with the respective class to which the input value belongs, the counter with the largest one To determine counter value and output the counter with the largest counter value associated operating parameter value as the output size of the filter.
EP13158959.0A 2012-04-17 2013-03-13 Method for operating a hearing aid Active EP2654321B1 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102012206299.8A DE102012206299B4 (en) 2012-04-17 2012-04-17 Method for operating a hearing device and hearing device

Publications (2)

Publication Number Publication Date
EP2654321A1 true EP2654321A1 (en) 2013-10-23
EP2654321B1 EP2654321B1 (en) 2018-05-30

Family

ID=47884176

Family Applications (1)

Application Number Title Priority Date Filing Date
EP13158959.0A Active EP2654321B1 (en) 2012-04-17 2013-03-13 Method for operating a hearing aid

Country Status (5)

Country Link
US (1) US8976989B2 (en)
EP (1) EP2654321B1 (en)
AU (1) AU2013202642B2 (en)
DE (1) DE102012206299B4 (en)
DK (1) DK2654321T3 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004075093A2 (en) * 2003-02-14 2004-09-02 University Of Rochester Music feature extraction using wavelet coefficient histograms
US20100027820A1 (en) * 2006-09-05 2010-02-04 Gn Resound A/S Hearing aid with histogram based sound environment classification
US20100232633A1 (en) 2007-11-29 2010-09-16 Widex A/S Hearing aid and a method of managing a logging device

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DK1858292T4 (en) * 2006-05-16 2022-04-11 Phonak Ag Hearing device and method of operating a hearing device
DK2191662T3 (en) * 2007-09-26 2011-09-05 Phonak Ag Hearing system with a user preference control and method for using a hearing system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004075093A2 (en) * 2003-02-14 2004-09-02 University Of Rochester Music feature extraction using wavelet coefficient histograms
US20100027820A1 (en) * 2006-09-05 2010-02-04 Gn Resound A/S Hearing aid with histogram based sound environment classification
US20100232633A1 (en) 2007-11-29 2010-09-16 Widex A/S Hearing aid and a method of managing a logging device

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
AES, 60 EAST 42ND STREET, ROOM 2520 NEW YORK 10165-2520, USA, 1 July 2006 (2006-07-01), XP040377899 *

Also Published As

Publication number Publication date
US8976989B2 (en) 2015-03-10
AU2013202642B2 (en) 2015-01-22
US20130272552A1 (en) 2013-10-17
EP2654321B1 (en) 2018-05-30
AU2013202642A1 (en) 2013-10-31
DK2654321T3 (en) 2018-09-03
DE102012206299B4 (en) 2017-11-02
DE102012206299A1 (en) 2013-10-17

Similar Documents

Publication Publication Date Title
EP2180726B2 (en) Sound localization in binaural hearing aids
EP3451705B1 (en) Method and apparatus for the rapid detection of own voice
DE102007017761B4 (en) Method for adapting a binaural hearing aid system
EP2104376B1 (en) Method for active occlusion reduction with plausibility test and corresponding hearing aid
EP2991379B1 (en) Method and device for improved perception of own voice
EP3386215B1 (en) Hearing aid and method for operating a hearing aid
EP2620940A1 (en) Method and hearing device for estimating a component of one's own voice
DE102010041653A1 (en) Method and apparatus for frequency compression with selective frequency shift
EP2988529A1 (en) Adaptive separation frequency in hearing aids
EP1898670B1 (en) Method and device for determining an effective vent
DE102007035171A1 (en) Method for adapting a hearing aid by means of a perceptive model
EP1912470B1 (en) Method for the dynamic compression of an audio signal and corresponding hearing device
EP2584795B1 (en) Method for determining a compression characteristic curve
DE102014218672B3 (en) Method and apparatus for feedback suppression
EP3413588B1 (en) Method for characterizing a speaker in a hearing device, hearing device and test device for a hearing device
EP2658289B1 (en) Method for controlling an alignment characteristic and hearing aid
EP2654321B1 (en) Method for operating a hearing aid
EP2373063A1 (en) Hearing device and method for setting the same for acoustic feedback-free operation
DE102013207080B4 (en) Binaural microphone adaptation using your own voice
EP2635048B1 (en) Amplification of a speech signal based on the input level
EP2648424B1 (en) Method for limiting the output level in hearing aids
EP2590437B1 (en) Periodic adaptation of a feedback suppression device
WO2022175349A2 (en) Method and arrangement for signal processing
EP3876556A1 (en) Binaural hearing aid with two hearing instrument worn in or on the ear of the user and method for operating such a hearing system
DE102020207585A1 (en) Hearing system with at least one hearing instrument worn on the head of the user and a method for operating such a hearing system

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

17P Request for examination filed

Effective date: 20131106

RBV Designated contracting states (corrected)

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: SIVANTOS PTE. LTD.

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20161206

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: SIVANTOS PTE. LTD.

INTG Intention to grant announced

Effective date: 20180201

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: CH

Ref legal event code: NV

Representative=s name: E. BLUM AND CO. AG PATENT- UND MARKENANWAELTE , CH

Ref country code: AT

Ref legal event code: REF

Ref document number: 1004866

Country of ref document: AT

Kind code of ref document: T

Effective date: 20180615

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502013010230

Country of ref document: DE

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

REG Reference to a national code

Ref country code: DK

Ref legal event code: T3

Effective date: 20180827

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20180530

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180830

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180830

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180831

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502013010230

Country of ref document: DE

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20190301

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190313

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20190331

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190313

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190331

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20181001

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 1004866

Country of ref document: AT

Kind code of ref document: T

Effective date: 20190313

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190313

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180930

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20130313

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180530

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: CH

Payment date: 20230402

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20240321

Year of fee payment: 12

Ref country code: GB

Payment date: 20240322

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20240320

Year of fee payment: 12

Ref country code: DK

Payment date: 20240321

Year of fee payment: 12