EP1077013B1 - Verfahren und einrichtung zum betrieb von sprachunterstützten systemen in kraftfahrzeugen - Google Patents
Verfahren und einrichtung zum betrieb von sprachunterstützten systemen in kraftfahrzeugen Download PDFInfo
- Publication number
- EP1077013B1 EP1077013B1 EP99924872A EP99924872A EP1077013B1 EP 1077013 B1 EP1077013 B1 EP 1077013B1 EP 99924872 A EP99924872 A EP 99924872A EP 99924872 A EP99924872 A EP 99924872A EP 1077013 B1 EP1077013 B1 EP 1077013B1
- Authority
- EP
- European Patent Office
- Prior art keywords
- voice
- signal
- microphone
- loudspeaker
- signals
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers
- H04R3/02—Circuits for transducers for preventing acoustic reaction, i.e. acoustic oscillatory feedback
Definitions
- the invention relates to a method and a device for operating voice-assisted Systems such as communication and / or speech / intercom systems in motor vehicles, in which or via which Mehdachmlkrofonan extract recorded voice signals and at least one Speakers are passed on, according to the preamble of claims 1 and 5.
- EP 0078014 B1 is a speech recognition device for a motor vehicle is known, in which in the amplifier system of the speech recognition device Sensors are reported or fed in whether the engine is in operation and / or that Vehicle moves. Then a level control is then attempted will filter out the voice command from the background noise.
- a filtering is known from WO 97/34290 in which periodic interference signals are filtered out, in which their period is determined and by means of a generator is interfered so that the speech signal remains.
- DE 39 25 589 A1 discloses the use of a multiple microphone arrangement, being one of the microphones in the engine compartment and a when used in a motor vehicle is further arranged in the passenger compartment. The two signals are then subtracted. The result is that only the engine noise or the actual one Operating noise of the vehicle itself subtracted from the overall signal in the passenger compartment becomes. Specific background noises are not taken into account here. As well there is no feedback suppression, which is a particular problem. All over where microphones and loudspeakers are arranged in acoustically connectable proximity, it happens that the acoustic signal coupled out at the loudspeaker in turn the microphone feeds back. There is a so-called feedback and one subsequent override.
- the invention is therefore based on the object of a method and a device of generic type to the extent that feedback and Instabilities that occur when several microphones and loudspeakers are arranged, be suppressed.
- the object is in a method of the generic type according to the invention solved by the characterizing features of claim 1.
- the invention is based on both the method and the device Communication and / or intercom / intercom in motor vehicles. It it is also known to arrange a multiple microphone arrangement, in addition Record voice and noise signals and the total signal Subtract noise signals again so that the speech signal remains filtered.
- the essence of the invention is that the respective Microphone signal is first frequency shifted by a small amount ⁇ F, and only then on the speaker or on the input of a voice-controlled Facility is given.
- the frequency shift according to the invention is carried out at a defined point and is not arbitrary, supports the on the one hand the filtering and on the other hand there are feedbacks, also the echo signal decoupled by one of the not yet frequency shifted overall signal first microphone the overall signal of another or second shifted by ⁇ F Microphones is subtracted, and vice versa.
- the illustration shows the basic structure as well as the mode of operation, so that the image itself, both the procedural measures and the interconnection of the individual furnishing elements to each other in their logical entirety is or are recognizable.
- the vehicle interior is in divided into two sub-rooms, namely front and rear.
- the microphone M1 picks up the speech signal there and possibly noise signals.
- the noise signal consists of the noise level in the passenger compartment that results from the operation of the vehicle. This can be engine noises, wind noises and rolling noises, but also acoustic echo signals from the other tell room and the like.
- the sum signal from speech and noise backdrop (total signal) contained at M1 is fed to a first summation point S1.
- a correspondingly prepared signal is then also generated from this summation point an acoustic model AM1 in front, fed in the acoustic model AM1 generated subtraction signal in this embodiment comes from the im received rear part of the vehicle, and already frequency-shifted signal. Because this signal coming from M2 and frequency shifted in F2, which originates in the rear compartment of the passenger cell, via AM1 signaling is also taken into account at the front, that generated in the rear compartment of the vehicle and after vome, acoustically transported into the front compartment of the passenger cell Signal, which is also registered by M1, in turn at the summation point S1 subtracted. That is, the device AM1 becomes the rear compartment of the passenger compartment acoustically separated from the front compartment of the passenger compartment.
- the total perceptible acoustic signal is fed in, and at the summation point S1 first subtracts the echo from the rear compartment of the passenger compartment.
- the so obtained original signal from M1 from the front compartment of the passenger cell then becomes one Frequency shifting device F.1 supplied and by an amount ⁇ F, for example 5 Hz, shifted.
- the output signal of F1 thus obtained is then the Loudspeaker L1 of the rear compartment of the passenger compartment supplied and to the other at the same time again fed into the device AM2 in the same way.
- AM2 again represents the acoustic model for the rear part of the Passenger compartment.
- the transmission of a voice message from the back of the tell room Passenger cell via M2 to the front compartment of the passenger cell via L2 takes place in analogous way. That is, the microphone M2 registers the voice message together Noise in the rear compartment of the passenger compartment and transmits it to the Summation point S2, at which the acoustic recorded via M1 Overall signal, i.e. the echo and background noise is subtracted. So again the echo-free signal created by the microphone M2 then also becomes one Frequency shifter F2 supplied, which in turn a frequency shift by an amount ⁇ F. At the output of this frequency shifter F2 becomes the result or the signal thus processed in turn the front subspace the passenger compartment, namely the loudspeaker L2 positioned there.
- the Frequency shift for transmission from front to back can also be from that frequency shift from the back to the front be different.
Landscapes
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Circuit For Audible Band Transducer (AREA)
- Interconnected Communication Systems, Intercoms, And Interphones (AREA)
Description
Das Mikrofon M1 nimmt das dortige Sprachsignal und ggf. Geräuschsignale auf. Das Geräuschsignal besteht dabei aus der sich im Betrieb des Fahrzeuges ergebenden Geräuschkullsse im Fahrgastraum. Dies können Motorengeräusche, Windgeräusche sowie Abrollgeräusche aber auch akustische Echosignale aus dem anderen Tellraum und dergleichen mehr sein. Das an M1 enthaltene Summensignal aus Sprach- und Geräuschkulisse (Gesamtsignal), wird einem ersten Summationspunkt S1 zugeführt.
Claims (7)
- Verfahren zum Betrieb von sprachunterstützten Systemen, wie Kommunikations- und/oder Gegensprecheinrichtungen In Kraftfahrzeugen, bei welchem über eine Mehrfachmikrofonanordnung (M1, M2) Sprachsignale und Geräuschkulissensignale als Gesamtsignale aufgenommen und an mindestens einen Lautsprecher (L1, L2) weitergegeben werden, wobei das von dem jeweiligen Mikrofon (M1, M2) aufgenommene Gesamtsignal zunächst um einen Betrag ΔF frequenzverschoben wird und nachfolgend erst auf den oder die Lautsprecher (L1, L2) oder auf die Eingabe einer sprachgesteuerten Einrichtung gegeben wird,
dadurch gekennzeichnet, daß zur Eliminierung von Rückkopplungen und Echosignalen von dem noch nicht frequenzverschobenen Gesamtsignal eines ersten Mikrofones (M1, M2) das um ΔF verschobene Gesamtsignal eines anderen oder zweiten Mikrofones (M2, M1) subtrahiert wird, und umgekehrt. - Verfahren zum Betrieb von sprachunterstützten Systemen, nach Anspruch 1,
dadurch gekennzeichnet, daß zur akustischen Ankopplung oder Subtraktion der Geräuschkulissensignale ein beliebiges akustisches Modell (AM1, AM2) aus den aufgenommenen Gesamtsignalen gebildet wird und signaltechnisch zwischen jeweiligem Mikrofon (M1, M2) und jeweiliger Frequenzverschiebung (F1, F2) auf einen jeweiligen Summationspunkt (S1, S2) zur Subtraktion aufgegeben wird. - Verfahren zum Betrieb von sprachunterstützten Systemen nach Anspruch 2,
dadurch gekennzeichnet, daß der Fahrgastraum des Fahrzeuges in mindestens zwei akustische Teilräume aufgeteilt ist, derart, daß in jedem Teilraum zumindestens ein Mikrofonort als auch mindestens ein Lautsprecherort vorhanden ist, daß zwischen Mikrofonort des einen Teilraumes und dem Lautsprecherort des anderen Teilraumes die besagte Frequenzverschiebung Δ F erfolgt und zwischen den Lautsprecherorten und Mikrofonorten des einen Tellraumes und zwischen den Lautsprecherorten und Mikrofonorten des anderen Teilraumes die besagten akustischen Modelle (AM1, AM2) angewendet werden, so daß signaltechnisch ein geschlossener elektroakustischer Regelkreis entsteht - Verfahren zum Betrieb von sprachunterstützten Systemen nach Anspruch 3,
dadurch gekennzeichnet. daß über die besagten akustischen Modelle (AM1, AM2) nicht nur die Sprach- und/oder Geräuschkulissensignale der unterschiedlichen Teilräume In der Fahrgastzelle berücksichtigt werden, sondern zusätzlich ermittelte im gesamten Umfeld bestehende Geräusche mitberücksichtigt und vom Gesamtsignal subtrahiert werden, so daß im wesentlichen das Sprachsignal übrig blelbt. - Einrichtung zum Betrieb von sprachunterstützten Systemen, wie Kommunikations- und/oder Gegensprecheinrichtungen in Kraftfahrzeugen, mit einer Mehrzahl von Mikrofonen (M1, M2) und Lautsprechem (L1, L2), sowie mit Mitteln zur Übertragung von Sprachnachrichten oder Sprachbefehlen, wobei der Fahrgastraum im Kraftfahrzeug in mindestens zwei ggf. offene Teilbereiche mit jeweils mindestens einem Mikrofon (M1, M2) und mindestens einem Lautsprecher (L1, L2) untertellt ist und die besagten Mittel auch Frequenzverschiebeeinrichtungen (F1, F2) umfassen, welche jeweils zwischen jeweils einem der Mikrofone (M1, M2) und dem im jeweils anderen Teilbereich befindlichen Lautsprecher (L1, L2) geschaltet sind,
dadurch gekennzeichnet, daß das jeweils resultierende Lautsprechersignal parallel abgegriffen ist und dem jeweils Im selben Teilbereich vorhandenen Mikrofongesamtslgnal über jeweils einen Summationspunkt (S1, S2) subtraktlv überlagert ist, und die Elemente der gesamten Einrichtung zu einem elektroakustischen, geschlossenen Regelkreis zusammengeschaltet sind. - Einrichtung zum Betrieb von sprachunterstützten Systemen nach Anspruch 5,
dadurch gekennzeichnet, daß zwischen Parallelabgriff des jeweiligen Lautsprechersignales und dem jeweiligen Summationspunkt (S1, S2) Mittel (AM1, AM2) vorgesehen sind, über welche sogenannte akustische Modelle generiert werden, die das jeweilige Lautsprechersignal beeinflussen und/oder nachbearbelten, und daß das Ergebnissignal dieser Mittel (AM1, AM2) auf den jeweiligen Summationspunkt (S1, S2) geschaltet wird. - Einrichtung zum Betrieb von sprachunterstützten Systemen nach Anspruch 6,
dadurch gekennzeichnet, daß die akustischen Modelle (AM 1, AM 2) Mittel zur Geräuschmustererkennung enthalten, die zur Separierung von Motor- und/oder Fahrgeräuschen von sprachgenerierten akustischen Signalen, sowie zur Separierung primär sprachgenerierter Signale von rückgekoppelten Echosignalen dienen.
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE19820000 | 1998-05-06 | ||
| DE19820000 | 1998-05-06 | ||
| DE19827134A DE19827134A1 (de) | 1998-05-06 | 1998-06-18 | Verfahren und Einrichtung zum Betrieb von sprachunterstützten Systemen in Kraftfahrzeugen |
| DE19827134 | 1998-06-18 | ||
| PCT/EP1999/003031 WO1999057938A1 (de) | 1998-05-06 | 1999-05-04 | Verfahren und einrichtung zum betrieb von sprachunterstützten systemen in kraftfahrzeugen |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| EP1077013A1 EP1077013A1 (de) | 2001-02-21 |
| EP1077013B1 true EP1077013B1 (de) | 2002-03-06 |
Family
ID=26045962
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| EP99924872A Expired - Lifetime EP1077013B1 (de) | 1998-05-06 | 1999-05-04 | Verfahren und einrichtung zum betrieb von sprachunterstützten systemen in kraftfahrzeugen |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US7010129B1 (de) |
| EP (1) | EP1077013B1 (de) |
| JP (1) | JP2002514775A (de) |
| ES (1) | ES2174611T3 (de) |
| WO (1) | WO1999057938A1 (de) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1445761A1 (de) | 2003-02-07 | 2004-08-11 | Volkswagen Aktiengesellschaft | Einrichtung und Verfahren zum Betrieb von sprachunterstützten Systemen in Kraftfahrzeugen |
| WO2005018277A1 (de) | 2003-07-18 | 2005-02-24 | Volkswagen Aktiengesellschaft | Einrichtung und verfahren zum betrieb von sprachunterstützten systemen in kraftfahrzeugen |
| EP1625973A1 (de) | 2004-08-10 | 2006-02-15 | Volkswagen Aktiengesellschaft | Sprachunterstützungssystem für ein Kraftfahrzeug |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3886391B2 (ja) * | 2002-02-15 | 2007-02-28 | シャープ株式会社 | カード型装置、及び、それを備えた電子機器 |
| US8537030B2 (en) * | 2010-02-15 | 2013-09-17 | Ford Global Technologies, Llc | Pedestrian alert system and method |
| US9628930B2 (en) | 2010-04-08 | 2017-04-18 | City University Of Hong Kong | Audio spatial effect enhancement |
| JP6111955B2 (ja) * | 2013-09-27 | 2017-04-12 | アンデン株式会社 | 車両接近通報装置 |
| JP6231042B2 (ja) * | 2015-03-24 | 2017-11-15 | 本田技研工業株式会社 | 能動騒音抑制システム、及び車両用能動騒音抑制システム |
| US9595253B2 (en) | 2015-03-24 | 2017-03-14 | Honda Motor Co., Ltd. | Active noise reduction system, and vehicular active noise reduction system |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5870292A (ja) | 1981-10-22 | 1983-04-26 | 日産自動車株式会社 | 車両用音声認識装置 |
| JPH0746791B2 (ja) * | 1985-07-17 | 1995-05-17 | 日本電信電話株式会社 | ハウリング抑圧回路 |
| EP0304257A3 (de) * | 1987-08-19 | 1989-09-27 | McGregor, Thomas | Sprachverstärkungseinrichtung |
| US4912767A (en) | 1988-03-14 | 1990-03-27 | International Business Machines Corporation | Distributed noise cancellation system |
| DE3925589C2 (de) * | 1989-08-02 | 1994-03-17 | Blaupunkt Werke Gmbh | Verfahren und Anordnung zur Störbefreiung von Sprachsignalen |
| DE4106405C2 (de) | 1990-03-23 | 1996-02-29 | Ricoh Kk | Geräuschunterdrückungseinrichtung für ein Spracherkennungsystem |
| GB9026906D0 (en) * | 1990-12-11 | 1991-01-30 | B & W Loudspeakers | Compensating filters |
| DE4203436A1 (de) | 1991-02-06 | 1992-08-13 | Koenig Florian | Datenreduzierte sprachkommunikation |
| DE4227826C2 (de) | 1991-08-23 | 1999-07-22 | Hitachi Ltd | Digitales Verarbeitungsgerät für akustische Signale |
| JP2760373B2 (ja) * | 1995-03-03 | 1998-05-28 | 日本電気株式会社 | 雑音消去装置 |
| DE19524847C1 (de) | 1995-07-07 | 1997-02-13 | Siemens Ag | Vorrichtung zur Verbesserung gestörter Sprachsignale |
| US5903819A (en) | 1996-03-13 | 1999-05-11 | Ericsson Inc. | Noise suppressor circuit and associated method for suppressing periodic interference component portions of a communication signal |
| US5920834A (en) * | 1997-01-31 | 1999-07-06 | Qualcomm Incorporated | Echo canceller with talk state determination to control speech processor functional elements in a digital telephone system |
| DE19705471C2 (de) | 1997-02-13 | 1998-04-09 | Sican F & E Gmbh Sibet | Verfahren und Schaltungsanordnung zur Spracherkennung und zur Sprachsteuerung von Vorrichtungen |
| US5893056A (en) * | 1997-04-17 | 1999-04-06 | Northern Telecom Limited | Methods and apparatus for generating noise signals from speech signals |
| US6098040A (en) * | 1997-11-07 | 2000-08-01 | Nortel Networks Corporation | Method and apparatus for providing an improved feature set in speech recognition by performing noise cancellation and background masking |
-
1999
- 1999-05-04 JP JP2000547814A patent/JP2002514775A/ja active Pending
- 1999-05-04 EP EP99924872A patent/EP1077013B1/de not_active Expired - Lifetime
- 1999-05-04 WO PCT/EP1999/003031 patent/WO1999057938A1/de not_active Ceased
- 1999-05-04 ES ES99924872T patent/ES2174611T3/es not_active Expired - Lifetime
- 1999-05-04 US US09/674,839 patent/US7010129B1/en not_active Expired - Lifetime
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1445761A1 (de) | 2003-02-07 | 2004-08-11 | Volkswagen Aktiengesellschaft | Einrichtung und Verfahren zum Betrieb von sprachunterstützten Systemen in Kraftfahrzeugen |
| WO2005018277A1 (de) | 2003-07-18 | 2005-02-24 | Volkswagen Aktiengesellschaft | Einrichtung und verfahren zum betrieb von sprachunterstützten systemen in kraftfahrzeugen |
| EP1625973A1 (de) | 2004-08-10 | 2006-02-15 | Volkswagen Aktiengesellschaft | Sprachunterstützungssystem für ein Kraftfahrzeug |
Also Published As
| Publication number | Publication date |
|---|---|
| EP1077013A1 (de) | 2001-02-21 |
| ES2174611T3 (es) | 2002-11-01 |
| JP2002514775A (ja) | 2002-05-21 |
| US7010129B1 (en) | 2006-03-07 |
| WO1999057938A1 (de) | 1999-11-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE3925589C2 (de) | Verfahren und Anordnung zur Störbefreiung von Sprachsignalen | |
| EP2296356B1 (de) | Verfahren und Vorrichtung zur Analyse und Abstimmung akustischer Eigenschaften einer Kfz-Freisprecheinrichtung | |
| DE4021969C2 (de) | Automatische Lautstärkeregelung | |
| DE69318926T2 (de) | Tonwiedergabesystem | |
| DE69427323T2 (de) | Akustisches Wiedergabesystem | |
| DE19938158C1 (de) | Verfahren und Vorrichtung sowie ihre Verwendung zur Kompensation von Verlusten eines akustischen Signals | |
| DE19938171C2 (de) | Verfahren zur Verarbeitung von akustischen Signalen und Kommunikationsanlage für Insassen in einem Fahrzeug | |
| DE60031583T2 (de) | Sprachverteilungssystem | |
| EP3375204B1 (de) | Audiosignalverarbeitung in einem fahrzeug | |
| EP1077013B1 (de) | Verfahren und einrichtung zum betrieb von sprachunterstützten systemen in kraftfahrzeugen | |
| DE10357800B3 (de) | Hörgerät mit Störgeräuschunterdrückung und entsprechendes Störgeräuschunterdrückungsverfahren | |
| DE112016004394B4 (de) | Heulunterdrückungsvorrichtung | |
| EP1189419A2 (de) | Verfahren und Vorrichtung zur Elimination Lautsprecherinterferenzen aus Mikrofonsignalen | |
| EP1367856A2 (de) | Vorrichtung und Verfahren zur Feedbackreduktion bei Hörsystemen | |
| EP2200341B1 (de) | Verfahren zum Betrieb eines Hörhilfegerätes sowie Hörhilfegerät mit einer Quellentrennungseinrichtung | |
| DE10025496C2 (de) | Audiosystem, insbesondere für Kraftfahrzeuge | |
| DE102006047983A1 (de) | Verarbeitung eines Eingangssignals in einem Hörgerät | |
| EP1445761B1 (de) | Einrichtung und Verfahren zum Betrieb von sprachunterstützten Systemen in Kraftfahrzeugen | |
| DE19827134A1 (de) | Verfahren und Einrichtung zum Betrieb von sprachunterstützten Systemen in Kraftfahrzeugen | |
| EP1649719B1 (de) | Einrichtung und verfahren zum betrieb von sprachunterstützten systemen in kraftfahrzeugen | |
| DE4430931A1 (de) | Einrichtung zur fahrgeräuschabhängigen Steuerung der Lautstärke eines Autoradios | |
| DE102020114429A1 (de) | Verfahren, vorrichtung, kopfhörer und computerprogramm zur aktiven unterdrückung des okklusionseffektes bei der wiedergabe von audiosignalen | |
| DE10140523B4 (de) | Vorrichtung zum Feedback Cancelling bei der Ausgabe von Mikrofonsignalen durch Lautsprecher | |
| DE3411494A1 (de) | Verfahren zur unterdrueckung von schall sowie schaltungsanordnung und schallschutzvorrichtung zur durchfuehrung des verfahrens | |
| EP1929465A1 (de) | Verfahren zur aktiven geräuschverminderung und eine vorrichtung zur durchführung des verfahrens |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
| 17P | Request for examination filed |
Effective date: 20001206 |
|
| AK | Designated contracting states |
Kind code of ref document: A1 Designated state(s): DE ES FR GB IT SE |
|
| GRAG | Despatch of communication of intention to grant |
Free format text: ORIGINAL CODE: EPIDOS AGRA |
|
| GRAG | Despatch of communication of intention to grant |
Free format text: ORIGINAL CODE: EPIDOS AGRA |
|
| GRAH | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOS IGRA |
|
| 17Q | First examination report despatched |
Effective date: 20010725 |
|
| GRAH | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOS IGRA |
|
| REG | Reference to a national code |
Ref country code: GB Ref legal event code: IF02 |
|
| GRAA | (expected) grant |
Free format text: ORIGINAL CODE: 0009210 |
|
| AK | Designated contracting states |
Kind code of ref document: B1 Designated state(s): DE ES FR GB IT SE |
|
| REF | Corresponds to: |
Ref document number: 59900941 Country of ref document: DE Date of ref document: 20020411 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: SE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20020606 |
|
| ET | Fr: translation filed | ||
| REG | Reference to a national code |
Ref country code: ES Ref legal event code: FG2A Ref document number: 2174611 Country of ref document: ES Kind code of ref document: T3 |
|
| PLBE | No opposition filed within time limit |
Free format text: ORIGINAL CODE: 0009261 |
|
| STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT |
|
| 26N | No opposition filed |
Effective date: 20021209 |
|
| REG | Reference to a national code |
Ref country code: DE Ref legal event code: R084 Ref document number: 59900941 Country of ref document: DE Effective date: 20120121 |
|
| REG | Reference to a national code |
Ref country code: FR Ref legal event code: PLFP Year of fee payment: 17 |
|
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: GB Payment date: 20150529 Year of fee payment: 17 Ref country code: ES Payment date: 20150622 Year of fee payment: 17 |
|
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: FR Payment date: 20150529 Year of fee payment: 17 Ref country code: IT Payment date: 20150529 Year of fee payment: 17 |
|
| GBPC | Gb: european patent ceased through non-payment of renewal fee |
Effective date: 20160504 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IT Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20160504 |
|
| REG | Reference to a national code |
Ref country code: FR Ref legal event code: ST Effective date: 20170131 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: FR Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20160531 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: GB Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20160504 |
|
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: ES Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20160505 |
|
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: DE Payment date: 20180531 Year of fee payment: 20 |
|
| REG | Reference to a national code |
Ref country code: ES Ref legal event code: FD2A Effective date: 20181128 |
|
| REG | Reference to a national code |
Ref country code: DE Ref legal event code: R071 Ref document number: 59900941 Country of ref document: DE |
|
| P01 | Opt-out of the competence of the unified patent court (upc) registered |
Effective date: 20230523 |