EP1071056B1 - Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner - Google Patents

Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner Download PDF

Info

Publication number
EP1071056B1
EP1071056B1 EP00112123A EP00112123A EP1071056B1 EP 1071056 B1 EP1071056 B1 EP 1071056B1 EP 00112123 A EP00112123 A EP 00112123A EP 00112123 A EP00112123 A EP 00112123A EP 1071056 B1 EP1071056 B1 EP 1071056B1
Authority
EP
European Patent Office
Prior art keywords
communication system
central computer
text
message
internal communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
EP00112123A
Other languages
English (en)
French (fr)
Other versions
EP1071056A2 (de
EP1071056A3 (de
Inventor
Ulrich Dr. Weinmann
Mike Peters
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Publication of EP1071056A2 publication Critical patent/EP1071056A2/de
Publication of EP1071056A3 publication Critical patent/EP1071056A3/de
Application granted granted Critical
Publication of EP1071056B1 publication Critical patent/EP1071056B1/de
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/08Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/091Traffic information broadcasting
    • G08G1/092Coding or decoding of the information
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/091Traffic information broadcasting

Definitions

  • the invention relates to a method for the wireless transmission of Messages between an in-vehicle communication system and an external vehicle central computer.
  • Method for the wireless transmission of messages between a in-vehicle communication system and an off-board central computer are, for example, in connection with RDS (Radio Data System) known for a long time.
  • RDS Radio Data System
  • current traffic news about RDS becomes available transmitted to the driver in the form of language, as for example in DE 19527187.
  • TTS text-to-speech
  • phonetic-prosodic parameters phonetic-prosodic parameters
  • the transmission and reception in motor vehicles should also be of longer text messages, such as dictations and / or e-mail messages, be enabled.
  • the input of text to send a message via a keyboard or reading a received text Message steers in particular while driving from the traffic from. Therefore, it is desirable on the vehicle side to send Messages that should arrive at the recipient in the form of text, and Receiving messages written by the sender in the form of text be enabled acoustically. With conventional systems this would be in the vehicle, a speech recognition system and a text-to-speech system required. This would be an in-vehicle communication system to expand greatly in its overhead. This is however not desirable, since such a communication system is still a Many other functions should take over, such as the operation a navigation system and / or a telephone system.
  • the in-vehicle communication system an acoustic output unit for reproducing a received message on.
  • the vehicle-external central computer is the first in text form present, to be sent to the in-vehicle communication system Message transformed into a phonetic transcription and in the form of the phonetic transcript to transmitted in-vehicle communication system.
  • the phonetic transcription is converted into speech and about the acoustic output unit is output.
  • a transferred to the central computer arrived e-mail to the vehicle and be read out.
  • the in-vehicle communication system also has one acoustic input unit on which recorded a spoken message becomes, after which this spoken message in the in-vehicle Communications system converted into phonetic transcription and to the vehicle external Is transmitted to the central computer, which then in phonetic transcription transformed message into text and stored in this form and / or further processed. For example, if there is an e-mail message this is forwarded from the central computer to the receiver.
  • the messages can be stored in the vehicle in the form of phonetic transcription and managed.
  • the less complex transformation of phonetic transcription into speech and vice versa is made according to the invention in the vehicle.
  • the high computing power, needed to translate the phonetic transcript into text and vice versa will be on an off-board system that has sufficient computing power has shifted.
  • a phonetic transcription gives voice in the form of compressed audio data again. Therefore, when transmitting and receiving the phonetic transcription the effective bandwidth requirement for signal transmission severely limited which reduces load times in the in-vehicle communication system be minimized.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • General Physics & Mathematics (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

Die Erfindung bezieht sich auf ein Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner.
Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner sind beispielsweise im Zusammenhang mit RDS (Radio-Data-System) seit langem bekannt. Über RDS werden insbesondere aktuelle Verkehrsnachrichten in Form von Sprache an den Fahrer übermittelt, wie zum Beispiel in der DE 19527187.
Weiterhin sind allgemein Verfahren zur elektronischen Erzeugung eines gesprochenen Textes bzw. Verfahren zur Umformung von Text in Sprache (TTS=Text-To-Speech) bekannt, bei den in einem ersten Schritt der Text in Lautschrift (phonetisch-prosodische Parameter) und in einem zweiten Schritt die Lautschrift in Sprache transformiert wird. Ein derartiges Verfahren ist beispielsweise in der US 5,592,585 und in der EP 0901000 beschrieben. Hierbei werden beide Schritte von einem einzigen speziellen Rechner durchgeführt.
In Zukunft soll in Kraftfahrzeugen das Senden und Empfangen auch von längeren Textnachrichten, wie beispielsweise von Diktaten und/oder von E-mail-Nachrichten, ermöglicht werden. Die Eingabe von Text zum Senden einer Nachricht über eine Tastatur oder das Lesen von Text einer empfangenen Nachricht lenkt insbesondere während der Fahrt vom Verkehrsgeschehen ab. Daher ist es wünschenswert, fahrzeugseitig das Senden von Nachrichten, die beim Empfänger in Form von Text ankommen sollen, und das Empfangen von Nachrichten, die vom Sender in Form von Text verfaßt werden, auf akustischem Wege zu ermöglichen. Mit herkömmlichen Systemen wäre hierzu im Fahrzeug ein Spracherkennungssystem und ein Text-To-Speech-System erforderlich. Hierzu wäre ein fahrzeuginternes Kommunikationssystem in seinem Systemaufwand stark zu erweitern. Dies ist jedoch nicht wünschenswert, da ein derartiges Kommunikationssystem noch eine Vielzahl anderer Funktionen übernehmen soll, wie beispielsweise den Betrieb eines Navigationssystems und/oder einer Telefonanlage.
Es ist Aufgabe der Erfindung, in Kraftfahrzeugen mittels eines fahrzeuginternen Kommunikationssystems das Senden und Empfangen auch von längeren Textnachrichten fahrzeugseitig auf akustischem Wege zu ermöglichen und dabei die erforderliche Rechenleistung des fahrzeuginternen Kommunikationssystems zu minimieren.
Diese Aufgabe wird durch die Merkmale des Patentanspruchs 1 gelöst.
Erfindungsgemäß weist zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner das fahrzeuginterne Kommunikationssystem eine akustische Ausgabeeinheit zur Wiedergabe einer empfangenen Nachricht auf. Im fahrzeugexternen Zentralrechner wird die zunächst in Textform vorliegende, an das fahrzeuginterne Kommunikationssystem zu sendende Nachricht in eine Lautschrift umgeformt und in Form der Lautschrift zum fahrzeuginternen Kommunikationssystem übermittelt. Im fahrzeuginternen Kommunikationssystem wird die Lautschrift in Sprache umgeformt und über die akustische Ausgabeeinheit ausgegeben. Somit kann beispielsweise eine am Zentralrechner angekommene E-mail an das Fahrzeug übertragen und vorgelesen werden.
Vorzugsweise weist das fahrzeuginterne Kommunikationssystem auch eine akustische Eingabeeinheit auf, über die eine gesprochene Nachricht aufgenommen wird, wonach diese gesprochene Nachricht im fahrzeuginternen Kommunikationssystem in Lautschrift umgeformt und an den fahrzeugexternen Zentralrechner übermittelt wird, der anschließend die in Lautschrift übermittelte Nachricht in Text umformt und in dieser Form abspeichert und/oder weiterverarbeitet. Liegt beispielsweise eine E-Mail-Nachricht vor wird diese vom Zentralrechner an den Empfänger weitergeleitet.
Die Nachrichten können im Fahrzeug in Form von Lautschrift gespeichert und verwaltet werden.
Die weniger aufwendige Umformung von Lautschrift in Sprache und umgekehrt wird erfindungsgemäß im Fahrzeug vorgenommen. Die hohe Rechenleistung, die zur Übersetzung der Lautschrift in Text und umgekehrt benötigt wird, wird auf ein fahrzeugexternes System, das ausreichende Rechenleistung aufweist, verlagert.
Darüber hinaus gibt eine Lautschrift Sprache in Form von komprimierten Audiodaten wieder. Daher kann beim Senden und Empfangen der Lautschrift der effektive Bandbreitebedarf zur Signalübertragung stark eingeschränkt werden, wodurch die Ladezeiten im fahrzeuginternen Kommunikationssystem minimiert werden.

Claims (1)

  1. Verfahren zur drahtlosen Übertragung von längeren Textnachrichten, zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner, bei dem fahrzeugseitig das Senden von Nachrichten, die beim Empfänger in Form von Text ankommen sollen, und das Empfangen von Nachrichten, die vom Sender in Form von Text verfasst werden, auf akustischem Wege ermöglicht wird, bei dem das fahrzeuginterne Kommunikationssystem eine akustische Ausgabeeinheit zur Wiedergabe einer empfangenen Nachricht aufweist, bei dem im fahrzeugexternen Zentralrechner die zunächst in Textform vorliegende, an das fahrzeuginterne Kommunikationssystem zu sendende Nachricht in eine Lautschrift umgeformt wird und in Form der Lautschrift zum fahrzeuginternen Kommunikationssystem übermittelt wird und bei dem im fahrzeuginternen Kommunikationssystem die Lautschrift in Sprache umgeformt wird und über die akustische Ausgabeeinheit ausgegeben wird, und wobei umgekehrt das fahrzeuginterne Kommunikationssystem auch eine akustische Eingabeeinheit aufweist, über die eine gesprochene Nachricht aufgenommen wird, wonach diese gesprochene Nachricht im fahrzeuginternen Kommunikationssystem in Lautschrift umgeformt und an den fahrzeugexternen Zentralrechner übermittelt wird, der anschließend die in Lautschrift übermittelte Nachricht in Text umformt und in dieser Form abspeichert und/oder weiterverarbeitet.
EP00112123A 1999-07-16 2000-06-06 Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner Expired - Lifetime EP1071056B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE19933318 1999-07-16
DE19933318A DE19933318C1 (de) 1999-07-16 1999-07-16 Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner

Publications (3)

Publication Number Publication Date
EP1071056A2 EP1071056A2 (de) 2001-01-24
EP1071056A3 EP1071056A3 (de) 2001-04-25
EP1071056B1 true EP1071056B1 (de) 2005-11-16

Family

ID=7914969

Family Applications (1)

Application Number Title Priority Date Filing Date
EP00112123A Expired - Lifetime EP1071056B1 (de) 1999-07-16 2000-06-06 Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner

Country Status (4)

Country Link
US (1) US7243067B1 (de)
EP (1) EP1071056B1 (de)
JP (1) JP4845249B2 (de)
DE (2) DE19933318C1 (de)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003186490A (ja) * 2001-12-21 2003-07-04 Nissan Motor Co Ltd テキスト音声読み上げ装置および情報提供システム
US20070219786A1 (en) * 2006-03-15 2007-09-20 Isaac Emad S Method for providing external user automatic speech recognition dictation recording and playback
EP1879000A1 (de) * 2006-07-10 2008-01-16 Harman Becker Automotive Systems GmbH Uebertragung von textnachrichten durch navigationssystemen

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2573886B3 (fr) * 1984-11-29 1987-03-20 Constr Telephoniques Terminal portatif
JPS63272129A (ja) * 1987-04-30 1988-11-09 Nec Corp 発音記号変換式無線呼出システム
JPH03132797A (ja) * 1989-10-19 1991-06-06 Matsushita Electric Ind Co Ltd 音声認識装置
US5903867A (en) * 1993-11-30 1999-05-11 Sony Corporation Information access system and recording system
JPH07152787A (ja) * 1994-01-13 1995-06-16 Sony Corp 情報アクセスシステムおよび記録媒体
AU684872B2 (en) * 1994-03-10 1998-01-08 Cable And Wireless Plc Communication system
US5592585A (en) * 1995-01-26 1997-01-07 Lernout & Hauspie Speech Products N.C. Method for electronically generating a spoken message
DE19527187A1 (de) * 1995-07-26 1997-01-30 Philips Patentverwaltung RDS-TMC-Rundfunkempfänger
US5884262A (en) * 1996-03-28 1999-03-16 Bell Atlantic Network Services, Inc. Computer network audio access and conversion system
US5732216A (en) * 1996-10-02 1998-03-24 Internet Angles, Inc. Audio message exchange system
US5933805A (en) * 1996-12-13 1999-08-03 Intel Corporation Retaining prosody during speech analysis for later playback
US5911129A (en) * 1996-12-13 1999-06-08 Intel Corporation Audio font used for capture and rendering
US6018710A (en) * 1996-12-13 2000-01-25 Siemens Corporate Research, Inc. Web-based interactive radio environment: WIRE
GB2323693B (en) * 1997-03-27 2001-09-26 Forum Technology Ltd Speech to text conversion
KR100280045B1 (ko) * 1997-05-02 2001-02-01 윤종용 외부전화를이용한메일독출방법및그장치
US6061718A (en) * 1997-07-23 2000-05-09 Ericsson Inc. Electronic mail delivery system in wired or wireless communications system
JP3287281B2 (ja) * 1997-07-31 2002-06-04 トヨタ自動車株式会社 メッセージ処理装置
JPH1185196A (ja) * 1997-09-10 1999-03-30 Toyo Commun Equip Co Ltd 音声符号化/復号化方式
US7027568B1 (en) * 1997-10-10 2006-04-11 Verizon Services Corp. Personal message service with enhanced text to speech synthesis
US6246672B1 (en) * 1998-04-28 2001-06-12 International Business Machines Corp. Singlecast interactive radio system
US6081780A (en) * 1998-04-28 2000-06-27 International Business Machines Corporation TTS and prosody based authoring system
US6236968B1 (en) * 1998-05-14 2001-05-22 International Business Machines Corporation Sleep prevention dialog based car system
US6539080B1 (en) * 1998-07-14 2003-03-25 Ameritech Corporation Method and system for providing quick directions
US6246983B1 (en) * 1998-08-05 2001-06-12 Matsushita Electric Corporation Of America Text-to-speech e-mail reader with multi-modal reply processor
FI106823B (fi) * 1998-10-23 2001-04-12 Nokia Mobile Phones Ltd Tiedonhakujärjestelmä
US20020087655A1 (en) * 1999-01-27 2002-07-04 Thomas E. Bridgman Information system for mobile users
US6563770B1 (en) * 1999-12-17 2003-05-13 Juliette Kokhab Method and apparatus for the distribution of audio data

Also Published As

Publication number Publication date
JP2001069071A (ja) 2001-03-16
EP1071056A2 (de) 2001-01-24
EP1071056A3 (de) 2001-04-25
DE19933318C1 (de) 2001-02-01
US7243067B1 (en) 2007-07-10
JP4845249B2 (ja) 2011-12-28
DE50011607D1 (de) 2005-12-22

Similar Documents

Publication Publication Date Title
US20010011302A1 (en) Method and apparatus for voice activated internet access and voice output of information retrieved from the internet via a wireless network
EP3095114B1 (de) Verfahren und system zur erzeugung eines steuerungsbefehls
EP1071056B1 (de) Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner
DE10317244B4 (de) In einem Fahrzeug installierte Navigationsvorrichtung und Kommunikationsverfahren für diese
DE10062379A1 (de) Verfahren und System zum Umsetzen von Text in Sprache
DE19933067A1 (de) Fahrzeugkommunikationsanlage
DE10149670A1 (de) Vorrichtung zur Lokalisierung eines Funkempfängers
EP0934637B1 (de) Verfahren zum empfangen von nachrichten und elektrisches gerät zur durchführung des verfahrens
DE102019203533A1 (de) Verfahren zur Wiedergabe von Audioinhalten und Audiowiedergabesystem
EP0984427B1 (de) Verfahren zum akustischen Ausgeben von Text
DE10003615A1 (de) Verfahren und Vorrichtung zur Steuerung der Sprachausgabe in einem Kraftfahrzeug
EP0725519A2 (de) Verfahren zur gemeinsamen Übertragung von digitalen Quell- und Steuerdaten zwischen über Datenleitungen verbundenen Datenquellen und -senken
DE102018213367B4 (de) Verfahren und Telefonievorrichtung zur Geräuschunterdrückung eines systemgenerierten Audiosignals bei einem Telefonat sowie ein Fahrzeug mit der Telefonievorrichtung
EP2127273B1 (de) Verfahren zum abspielen einer sounddatei auf einem empfänger-mobiltelefon mittels eines sender-mobiltelefons sowie computerprogrammprodukt
DE3300053A1 (de) Auf sprache ansprechende mobile statuseinheit
WO2018188907A1 (de) Verarbeitung einer spracheingabe
DE10132871B4 (de) Verfahren und Einrichtung zur Versendung von zuvor gespeicherten Sprachnachrichten
CN212624022U (zh) 一种数据传输装置、车载终端及车辆
EP3763144B1 (de) Haupteinheit, system und verfahren für ein infotainmentsystem eines fahrzeugs
DE10003617A1 (de) Verfahren und Vorrichtung zur Spracheingabe bei Autoradios
DE102013216427A1 (de) Vorrichtung und Verfahren zur fortbewegungsmittelbasierten Sprachverarbeitung
EP1028032A2 (de) Informationssystem für ein Fahrzeug
DE19806927A1 (de) Verfahren und Einrichtung zur Übertragung natürlicher Sprache
DE19737208A1 (de) Vorrichtung und Verfahren für eine automatische Verkehrsmittelauskunft
JP2974813B2 (ja) 交通情報放送システム

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A2

Designated state(s): DE FR GB SE

AX Request for extension of the european patent

Free format text: AL;LT;LV;MK;RO;SI

PUAL Search report despatched

Free format text: ORIGINAL CODE: 0009013

AK Designated contracting states

Kind code of ref document: A3

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE

AX Request for extension of the european patent

Free format text: AL;LT;LV;MK;RO;SI

17P Request for examination filed

Effective date: 20010518

AKX Designation fees paid

Free format text: DE FR GB SE

17Q First examination report despatched

Effective date: 20040518

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): DE FR GB SE

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)
REF Corresponds to:

Ref document number: 50011607

Country of ref document: DE

Date of ref document: 20051222

Kind code of ref document: P

REG Reference to a national code

Ref country code: SE

Ref legal event code: TRGR

ET Fr: translation filed
PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20060817

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: SE

Payment date: 20110613

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20110630

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20110720

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20110727

Year of fee payment: 12

REG Reference to a national code

Ref country code: SE

Ref legal event code: EUG

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20120606

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20120607

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20130228

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 50011607

Country of ref document: DE

Effective date: 20130101

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20130101

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20120702

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20120606