EP3025514B1 - Klangverräumlichung mit raumwirkung - Google Patents

Klangverräumlichung mit raumwirkung Download PDF

Info

Publication number
EP3025514B1
EP3025514B1 EP14748239.2A EP14748239A EP3025514B1 EP 3025514 B1 EP3025514 B1 EP 3025514B1 EP 14748239 A EP14748239 A EP 14748239A EP 3025514 B1 EP3025514 B1 EP 3025514B1
Authority
EP
European Patent Office
Prior art keywords
signals
input signals
mean
transfer function
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
EP14748239.2A
Other languages
English (en)
French (fr)
Other versions
EP3025514A1 (de
Inventor
Grégory PALLONE
Marc Emerit
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
Orange SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange SA filed Critical Orange SA
Publication of EP3025514A1 publication Critical patent/EP3025514A1/de
Application granted granted Critical
Publication of EP3025514B1 publication Critical patent/EP3025514B1/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/305Electronic adaptation of stereophonic audio signals to reverberation of the listening space
    • H04S7/306For headphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S1/00Two-channel systems
    • H04S1/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S1/005For headphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/03Aspects of down-mixing multi-channel audio to configurations with lower numbers of playback channels, e.g. 7.1 -> 5.1
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13Aspects of volume control, not necessarily automatic, in stereophonic sound systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]

Definitions

  • the energy of the average filter E E mean g / d can be measured directly from the constructed filter B mean g / d .

Claims (13)

  1. Verfahren zur Klangverräumlichung, wobei mindestens ein Filtern auf mindestens zwei Eingangssignale (I(1), I(2), ... , I(L)) angewendet wird, um mindestens zwei Ausgangssignale (O(1), O(2), ... , O(K))abzugeben, wobei das Filtern aufweist:
    - Gewichten (M4B1, M4B2, ... , M4BL) der mindestens zwei Eingangssignale durch jeweilige Gewichtungsgewichte (Wk(1), ... , Wk(L)), wobei jedes Gewichtungsgewicht für jedes der Eingangssignale spezifisch ist,
    - für jede Impulsantwort, die eine Raumwirkung enthält, unter mehreren Impulsantworten, die eine Raumwirkung enthalten, wobei die Impulsantwort, die eine Raumwirkung enthält, jeweils einem Eingangssignal unter den mindestens zwei Eingangssignalen (I(1), I(2), ... , I(L)) und einem Ausgangssignal unter den mindestens zwei Ausgangssignalen (O(1), 0(2), ... , 0(K)) zugeordnet wird:
    ∘ Partitionieren (S22) der Impulsantwort in einem Zeitbereich in einen ersten Teil (A) und einen zweiten Teil (B), wobei das Partitionieren derart durchgeführt wird, dass:
    der erste Teil direkte Schallausbreitungen und erste Schallreflexionen der Ausbreitungen darstellt und sich über eine erste Anzahl von Abtastwerten erstreckt und
    der zweite Teil ein diffuses Schallfeld darstellt, das nach den ersten Reflexionen vorhanden ist und sich über eine zweite Anzahl von Abtastwerten erstreckt, wobei die zweite Anzahl von Abtastwerten ein Vielfaches der ersten Anzahl von Abtastwerten ist,
    ∘ Bestimmen von einer ersten Übertragungsfunktion (Ak(1), Ak(2), ..., Ak(L)) ausgehend von dem ersten Teil,
    ∘ Bestimmen von einer zweiten Übertragungsfunktion ausgehend von dem zweiten Teil,
    - für jedes Ausgangssignal (O(1), O(2), ... , O(K)) unter den mindestens zwei Ausgangssignalen (O(1), O(2), ... , O(K)):
    ∘ Bestimmen (S23B1) von einer dritten Übertragungsfunktion (Bmean k) ausgehend von einem Durchschnittswert der zweiten Übertragungsfunktionen, die dem Ausgangssignal (O(1), O(2), ... , O(K)) entspricht,
    ∘ Anwenden (S4A1, S4A2, ... , S4AL) auf jedes Eingangssignal (I(1), I(2), ... , I(L)) der ersten Übertragungsfunktion (Ak(1), Ak(2), ..., Ak(L)), die dem Eingangssignale (I(1), I(2), ... , I(L)) und dem Ausgangssignal (O(1), O(2), ... , O(K)) entspricht,
    ∘ Anwenden (S4Bl) auf jedes Eingangssignal der dritten Übertragungsfunktion (Bmean k), die dem Ausgangssignal (O(1), O(2), ... , O(K)) entspricht,
    wobei das Anwenden der ersten und dritten Übertragungsfunktionen durch FFT-Blöcke erfolgt,
    - Summieren der Signale, die sich aus den Anwendungen der ersten und dritten Übertragungsfunktionen ergeben, um die mindestens zwei Ausgangssignale (O(1), O(2), ... , O(K)) zu erhalten.
  2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass eine Energieausgleichsverstärkung (G) auf die Gewichtungsgewichte (Wk(1), ... , Wk(L)) angewendet wird (S4Bll).
  3. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Partitionieren der Impulsantwort die Vorgänge aufweist:
    - des Bestimmens (S211) eines Anfangszeitpunkts der Anwesenheit von direkten Schallwellen,
    - des Bestimmens eines Anfangszeitpunkts der Anwesenheit des diffusen Schallfeldes nach den ersten Reflexionen und
    - des Auswählens (S22) in der Impulsantwort eines Teils der Antwort, der sich zeitlich zwischen dem Anfangszeitpunkt der Anwesenheit von direkten Schallwellen bis zum Anfangszeitpunkt der Anwesenheit des diffusen Schallfeldes erstreckt, wobei der ausgewählte Antwortteil der ersten Übertragungsfunktion entspricht.
  4. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass das Filtern das Anwenden von mindestens einer Ausgleichsverzögerung (S4B2) aufweist, die einer Zeitdifferenz zwischen dem Anfangszeitpunkt von direkten Schallwellen und dem Anfangszeitpunkt der Anwesenheit des diffusen Schallfeldes entspricht.
  5. Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass die erste und die dritte Übertragungsfunktion parallel zu den Eingangssignalen angewendet werden und dadurch, dass die mindestens eine Ausgleichsverzögerung durch die dritten Übertragungsfunktionen auf die gefilterten Eingangssignale angewendet wird.
  6. Ein Verfahren nach einem der vorhergehenden Ansprüche, wobei die dritte Übertragungsfunktion gegeben ist durch: B mean k = 1 L l = 1 L B norm k l
    Figure imgb0037
    wobei: k ein Index in Bezug auf ein Ausgangssignal ist,
    l∈[1;L] ein Index in Bezug auf ein Eingangssignal unter den Eingangssignalen ist,
    L eine Anzahl von Eingangssignalen ist,
    Bnorm k (l) eine normalisierte Übertragungsfunktion ist, die ausgehend von einer zweiten Übertragungsfunktion unter den zweiten Übertragungsfunktionen erhalten wird.
  7. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass mindestens ein Ausgangssignal 0k des Verfahrens gegeben ist durch: O k = l = 1 L I l A k l + z iDD l = 1 L 1 W k l . I l B mean k
    Figure imgb0038
    wobei:
    I(l) ein Eingangssignal unter den Eingangssignalen ist,
    Ak (l) eine erste Übertragungsfunktion unter den ersten Übertragungsfunktionen ist,
    Wk (l) ein Gewichtungsgewicht unter den Gewichtungsgewichten ist,
    z-iDD einem Anwenden der Ausgleichsverzögerung entspricht,
    wobei . die Multiplikation ist und
    wobei * der Faltungsoperator ist.
  8. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass es einen Dekorrelationsschritt der dritten Eingangssignale vor dem Anwenden der zweiten Übertragungsfunktionen aufweist und dadurch, dass mindestens ein Ausgangssignal 0k des Verfahrens gegeben ist durch: O k = l = 1 L I l A k l + z iDD l = 1 L 1 W k l . I d l B mean k
    Figure imgb0039
    wobei:
    I(l) ein Eingangssignal unter den Eingangssignalen ist,
    Id(l) ein Eingangssignal unter den Eingangssignalen ist, das einem Dekorrelationsschritt unterworfen worden ist,
    Ak (l) eine erste Übertragungsfunktion unter den ersten Übertragungsfunktionen ist,
    Wk (l) ein Gewichtungsgewicht unter den Gewichtungsgewichten ist,
    z -iDD dem Anwenden der Ausgleichsverzögerung entspricht,
    wobei . die Multiplikation ist und
    wobei * der Faltungsoperator ist.
  9. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass es einen Schritt des Bestimmens einer Energieausgleichsverstärkung in Abhängigkeit von den Eingangssignalen aufweist und dadurch, dass mindestens ein Ausgangssignal gegeben ist durch: O k = l = 1 L I l A k l + z iDD l = 1 L G I l . 1 W k l . I l B mean k
    Figure imgb0040
    wobei:
    I(l) ein Eingangssignal unter den Eingangssignalen ist,
    G(I(l)) die bestimmte Energieausgleichsverstärkung ist,
    Ak (l) eine erste Übertragungsfunktion unter den ersten Übertragungsfunktionen ist,
    Wk (l) ein Gewichtungsgewicht unter den Gewichtungsgewichten ist,
    z -iDD dem Anwenden der Ausgleichsverzögerung entspricht,
    wobei . die Multiplikation ist und
    wobei * der Faltungsoperator ist.
  10. Verfahren nach einem der Ansprüche 6 bis 9, dadurch gekennzeichnet, dass das Gewicht gegeben ist durch: W k l = E B mean k E B k l
    Figure imgb0041
    wobei k ein Index in Bezug auf ein Ausgangssignal ist,
    l ∈ [1;L] der relative Index eines Eingangssignals unter den Eingangssignalen ist,
    L die Anzahl von Eingangssignalen ist,
    wobei EBmean k eine Energie in Bezug auf B mean k
    Figure imgb0042
    ist,
    EBk (l) eine Energie in Bezug auf eine zweite Übertragungsfunktion unter den zweiten Übertragungsfunktionen ist.
  11. Computerprogramm, umfassend Anweisungen für das Umsetzen der Schritte des Verfahrens nach einem der Ansprüche 1 bis 10, wenn diese Anweisungen von einem Prozessor ausgeführt werden.
  12. Vorrichtung zur Klangverräumlichung, umfassend mindestens einen Filter, der auf mindestens zwei Eingangssignale (I(1), I(2), ... , I(L)) angewendet ist, wobei die Vorrichtung geeignet ist, mindestens zwei Ausgangssignale (O(1), O(2), ... , O(K)) abzugeben,
    wobei die Vorrichtung Module zum Gewichten (M4B1, M4B2, ... , M4BL) aufweist, um die mindestens zwei Eingangssignale durch jeweilige Gewichtungsgewichte (Wk(1), ... , Wk(L)) zu gewichten, wobei jedes Gewichtungsgewicht für jedes der Eingangssignale spezifisch ist,
    wobei die Vorrichtung ferner konfiguriert ist, um:
    - für jede Impulsantwort, die eine Raumwirkung enthält, unter mehreren Impulsantworten, die eine Raumwirkung enthalten, wobei die Impulsantwort, die eine Raumwirkung enthält, jeweils einem Eingangssignal unter den mindestens zwei Eingangssignalen (I(1), I(2), ... , I(L)) und einem Ausgangssignal unter den mindestens zwei Ausgangssignalen (O(1), O(2), ... , O(K)) zugeordnet ist:
    ∘ die Impulsantwort in einem Zeitbereich in einen ersten Teil (A) und einen zweiten Teil (B) zu partitionieren (S22) der, wobei das Partitionieren derart durchgeführt wird, dass:
    der erste Teil direkte Schallausbreitungen und erste Schallreflexionen der Ausbreitungen darstellt und sich über eine erste Anzahl von Abtastwerten erstreckt und
    der zweite Teil ein diffuses Schallfeld darstellt, das nach den ersten Reflexionen vorhanden ist und sich über eine zweite Anzahl von Abtastwerten erstreckt, wobei die zweite Anzahl von Abtastwerten ein Vielfaches der ersten Anzahl von Abtastwerten ist,
    ∘ eine erste Übertragungsfunktion (Ak(1), Ak(2), ..., Ak(L)) ausgehend von dem ersten Teil zu bestimmen,
    ∘ eine zweite Übertragungsfunktion ausgehend von dem zweiten Teil zu bestimmen,
    wobei der Filter aufweist:
    - für jedes Ausgangssignal (O(1), O(2), ... , O(K)) unter den mindestens zwei Ausgangssignalen (O(1), O(2), ... , O(K)):
    ∘ Bestimmen (S23B1) von einer dritten Übertragungsfunktion (Bmean k) ausgehend von einem Durchschnittswert der zweiten Übertragungsfunktionen, die dem Ausgangssignal (O(1), O(2), ... , O(K)) entspricht,
    ∘ Anwenden (S4A1, S4A2, ..., S4AL) auf jedes Eingangssignal der ersten Übertragungsfunktionen, die dem Ausgangssignal (O(1), O(2), ... , O(K)) entsprechen,
    ∘ Anwenden (S4Bl) auf jedes Eingangssignal der dritten Übertragungsfunktion (Bmean k), die dem Ausgangssignal (O(1), O(2), ... , O(K)) entspricht,
    wobei das Anwenden der ersten und dritten Übertragungsfunktionen durch FFT-Blöcke erfolgt,
    wobei Signale, die sich aus den Anwendungen der ersten und dritten Übertragungsfunktionen ergeben, summiert werden, um die mindestens zwei Ausgangssignale (O(1), O(2), ... , O(K)) zu erhalten.
  13. Modul zum Decodieren der Schallsignale, umfassend eine Vorrichtung zur Klangverräumlichung nach Anspruch 12 der Schallsignale als Eingangssignale.
EP14748239.2A 2013-07-24 2014-07-04 Klangverräumlichung mit raumwirkung Active EP3025514B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1357299A FR3009158A1 (fr) 2013-07-24 2013-07-24 Spatialisation sonore avec effet de salle
PCT/FR2014/051728 WO2015011359A1 (fr) 2013-07-24 2014-07-04 Spatialisation sonore avec effet de salle

Publications (2)

Publication Number Publication Date
EP3025514A1 EP3025514A1 (de) 2016-06-01
EP3025514B1 true EP3025514B1 (de) 2019-09-11

Family

ID=49876752

Family Applications (1)

Application Number Title Priority Date Filing Date
EP14748239.2A Active EP3025514B1 (de) 2013-07-24 2014-07-04 Klangverräumlichung mit raumwirkung

Country Status (8)

Country Link
US (1) US9848274B2 (de)
EP (1) EP3025514B1 (de)
JP (1) JP6486351B2 (de)
KR (2) KR102310859B1 (de)
CN (1) CN105684465B (de)
ES (1) ES2754245T3 (de)
FR (1) FR3009158A1 (de)
WO (1) WO2015011359A1 (de)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3001701B1 (de) * 2014-09-24 2018-11-14 Harman Becker Automotive Systems GmbH Audiowiedergabesysteme und -verfahren
US10187740B2 (en) * 2016-09-23 2019-01-22 Apple Inc. Producing headphone driver signals in a digital audio signal processing binaural rendering environment
JP1640846S (de) * 2018-10-16 2019-09-09
CN109584892A (zh) * 2018-11-29 2019-04-05 网易(杭州)网络有限公司 音效模拟方法、装置、介质及电子设备

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2851879A1 (fr) * 2003-02-27 2004-09-03 France Telecom Procede de traitement de donnees sonores compressees, pour spatialisation.
GB0419346D0 (en) * 2004-09-01 2004-09-29 Smyth Stephen M F Method and apparatus for improved headphone virtualisation
JP2006279588A (ja) * 2005-03-29 2006-10-12 Yamaha Corp 多地点通信会議用端末
KR101370365B1 (ko) * 2005-09-13 2014-03-05 코닌클리케 필립스 엔.브이. 3d 사운드를 발생시키기 위한 방법 및 디바이스
US8654983B2 (en) * 2005-09-13 2014-02-18 Koninklijke Philips N.V. Audio coding
JP2010118978A (ja) * 2008-11-14 2010-05-27 Victor Co Of Japan Ltd 音像定位制御装置および音像定位制御方法
US9431987B2 (en) * 2013-06-04 2016-08-30 Sony Interactive Entertainment America Llc Sound synthesis with fixed partition size convolution of audio signals

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
None *

Also Published As

Publication number Publication date
US9848274B2 (en) 2017-12-19
EP3025514A1 (de) 2016-06-01
US20160174013A1 (en) 2016-06-16
CN105684465B (zh) 2018-06-12
KR102206572B1 (ko) 2021-01-22
KR20210008952A (ko) 2021-01-25
KR102310859B1 (ko) 2021-10-12
JP6486351B2 (ja) 2019-03-20
FR3009158A1 (fr) 2015-01-30
CN105684465A (zh) 2016-06-15
WO2015011359A1 (fr) 2015-01-29
JP2016527815A (ja) 2016-09-08
ES2754245T3 (es) 2020-04-16
KR20160034942A (ko) 2016-03-30

Similar Documents

Publication Publication Date Title
EP1992198B1 (de) Optimierung des binauralen raumklangeffektes durch mehrkanalkodierung
EP1600042B1 (de) Verfahren zum bearbeiten komprimierter audiodaten zur räumlichen wiedergabe
JP5406956B2 (ja) オーディオ入力信号の反響コンテンツを抽出および変更するためのシステム
EP2000002B1 (de) Verfahren und einrichtung zur effizienten binauralen raumklangerzeugung im transformierten bereich
EP2042001B1 (de) Binaurale spatialisierung kompressionsverschlüsselter tondaten
EP1999998A1 (de) Verfahren zur kunstkopf-synthese unter berücksichtigung eines theatereffekts
WO2007031905A1 (en) Method of and device for generating and processing parameters representing hrtfs
EP3025514B1 (de) Klangverräumlichung mit raumwirkung
US11979723B2 (en) Content based spatial remixing
US20160247518A1 (en) Apparatus and method for improving a perception of a sound signal
US20160212564A1 (en) Apparatus and Method for Compressing a Set of N Binaural Room Impulse Responses
EP2009891B1 (de) Übertragung eines Audiosignals in einem immersiven Audiokonferenzsystem
EP3400599B1 (de) Verbesserter ambisonic-codierer für eine tonquelle mit mehreren reflexionen
FR3065137A1 (fr) Procede de spatialisation sonore
EP1994526B1 (de) Gemeinsame schallsynthese und -spatialisierung
EP3058564B1 (de) Komplexitätsoptimierte klangverräumlichung mit nachhall
EP4042418B1 (de) Bestimmung von korrekturen zur anwendung auf ein mehrkanalaudiosignal, zugehörige codierung und decodierung
FR3136072A1 (fr) Procédé de traitement de signal
CN116261086A (zh) 声音信号处理方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20160107

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20180322

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

INTG Intention to grant announced

Effective date: 20190416

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 1180058

Country of ref document: AT

Kind code of ref document: T

Effective date: 20190915

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 602014053445

Country of ref document: DE

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20190911

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191211

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191211

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191212

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

REG Reference to a national code

Ref country code: AT

Ref legal event code: MK05

Ref document number: 1180058

Country of ref document: AT

Kind code of ref document: T

Effective date: 20190911

REG Reference to a national code

Ref country code: ES

Ref legal event code: FG2A

Ref document number: 2754245

Country of ref document: ES

Kind code of ref document: T3

Effective date: 20200416

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200113

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: AT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200224

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 602014053445

Country of ref document: DE

RAP2 Party data changed (patent owner data changed or rights of a patent transferred)

Owner name: ORANGE

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG2D Information on lapse in contracting state deleted

Ref country code: IS

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200112

26N No opposition filed

Effective date: 20200615

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20200731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200704

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200704

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200731

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190911

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20230620

Year of fee payment: 10

Ref country code: FR

Payment date: 20230621

Year of fee payment: 10

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20230620

Year of fee payment: 10

Ref country code: ES

Payment date: 20230801

Year of fee payment: 10

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20230620

Year of fee payment: 10