JP2005208421A - Document read-aloud system and method - Google Patents

Document read-aloud system and method Download PDF

Info

Publication number
JP2005208421A
JP2005208421A JP2004016099A JP2004016099A JP2005208421A JP 2005208421 A JP2005208421 A JP 2005208421A JP 2004016099 A JP2004016099 A JP 2004016099A JP 2004016099 A JP2004016099 A JP 2004016099A JP 2005208421 A JP2005208421 A JP 2005208421A
Authority
JP
Japan
Prior art keywords
server
language analysis
text
morpheme
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004016099A
Other languages
Japanese (ja)
Other versions
JP4539097B2 (en
Inventor
Seiichi Takeda
清一 武田
Kunihiro Yamada
邦博 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2004016099A priority Critical patent/JP4539097B2/en
Publication of JP2005208421A publication Critical patent/JP2005208421A/en
Application granted granted Critical
Publication of JP4539097B2 publication Critical patent/JP4539097B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To enable a document read-aloud apparatus to properly analyze distributed character data and correctly read the character data aloud although the document read-aloud apparatus refers to a dictionary having limited capacity by allowing a language analyzing server to analyze the character data distributed from an information providing server, extract a morpheme that the document read-aloud apparatus misreads, and transmit data showing a reading of the extracted morpheme to the document read-aloud apparatus. <P>SOLUTION: A document read-aloud system has: the information providing server 21 which distributes character data; the document read-aloud apparatus which analyzes and reads the character data aloud; and the language analyzing server 31 which extracts a morpheme that the document read-aloud apparatus misreads and transmits the data showing the reading of the extracted morpheme to the document read-aloud apparatus, wherein the document read-aloud apparatus analyzes and reads the character data aloud by using the data showing the reading of the extracted morpheme. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、文章読み上げシステム及び方法に関するものである。   The present invention relates to a text reading system and method.

従来、自動車等の車両に搭載されたナビゲーション装置においては、運転者等の操作者が所定の入力部を操作して目的地を設定すると、該目的地、及び、現在位置検出処理部によって検出された車両の現在位置に基づいて、該現在位置から目的地までの経路が探索され、探索された経路が案内される。また、近年では、情報センタから配信されるニュース等の文字データを取得して表示するとともに、必要に応じて前記ニュース等を音声出力して読み上げるナビゲーション装置が提案されている(例えば、特許文献1参照。)。これにより、操作者は、ナビゲーション装置の表示画面を注視することなく、読み上げられた音声を聞き取ることによって、ニュース等を把握することができる。
特開2003−121187号公報
Conventionally, in a navigation apparatus mounted on a vehicle such as an automobile, when an operator such as a driver operates a predetermined input unit to set a destination, the destination and the current position detection processing unit detect the destination. Based on the current position of the vehicle, a route from the current position to the destination is searched, and the searched route is guided. In recent years, a navigation device has been proposed in which character data such as news distributed from an information center is acquired and displayed, and the news or the like is output by voice and read as necessary (for example, Patent Document 1). reference.). Thereby, the operator can grasp news and the like by listening to the read-out voice without gazing at the display screen of the navigation device.
JP 2003-121187 A

しかしながら、前記従来のナビゲーション装置においては、前記ニュース等の文字データが漢字かな混じり文なので、前記ニュース等の内容を音声出力して読み上げるためには、読み上げ専用にひらがなやカタカナのような表音文字のデータが必要とされる。そのため、前記情報センタは、漢字かな混じり文の文字データとともに表音文字のデータも配信する必要があり、負担が大きくなってしまう。また、配信されるデータ量が大きくなってしまい、通信時間が長くなるとともに、通信費用が高くなってしまう。さらに、音声データを配信することも考えられるが、音声データは文字データよりもデータ量が大きいので、通信時間がさらに長くなるとともに、通信費用がさらに高くなってしまう。   However, in the conventional navigation device, since the character data such as the news is a kana-kana mixed sentence, the phonetic characters such as hiragana and katakana are read-only for reading out the contents of the news etc. Data is required. Therefore, it is necessary for the information center to distribute the phonetic character data together with the character data of the kana-kana mixed sentence, which increases the burden. In addition, the amount of data to be distributed is increased, the communication time is increased, and the communication cost is increased. Furthermore, although it is conceivable to distribute voice data, the voice data has a larger data amount than the character data, so that the communication time is further increased and the communication cost is further increased.

もっとも、最近では、漢字かな混じり文の文章を解析して、漢字の読み方を割り当てるシステムが開発されている。しかし、該システムにおいては、文章解析用辞書等の大きな記憶容量を必要とする辞書が使用されており、ナビゲーション装置のように記憶容量に制限のある装置に適用することが困難であった。また、前記システムをナビゲーション装置のように記憶容量に制限のある装置に適用するためには、文章解析用辞書等の辞書の容量を制限する必要があるが、この場合、解析精度が低下して頻繁に間違えて読み上げられるので、聞き取ることができなくなってしまう。   Recently, however, a system has been developed that analyzes kanji-kana mixed sentences and assigns how to read kanji. However, in this system, a dictionary that requires a large storage capacity such as a dictionary for sentence analysis is used, and it has been difficult to apply to a device having a limited storage capacity such as a navigation device. In addition, in order to apply the system to a device having a limited storage capacity such as a navigation device, it is necessary to limit the capacity of a dictionary such as a sentence analysis dictionary. Because they are often mistakenly read out, they cannot be heard.

本発明は、前記従来の問題点を解決して、言語解析サーバが情報提供サーバから配信された文字データを解析して、文書読み上げ装置において読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを前記文書読み上げ装置に送信することによって、該文書読み上げ装置は、容量の制限された辞書を参照しながらも、配信された文字データを適切に解析して、該文字データを間違いなく読み上げることができる文章読み上げシステム及び方法を提供することを目的とする。   The present invention solves the above-mentioned conventional problems, the linguistic analysis server analyzes the character data distributed from the information providing server, extracts the morpheme in which the reading error occurs in the document reading device, and reads the morpheme Is transmitted to the document reading device, the document reading device properly analyzes the distributed character data while referring to the dictionary having a limited capacity, and is surely analyzing the character data. An object is to provide a text-to-speech reading system and method that can be read aloud.

そのために、本発明の文章読み上げシステムにおいては、文字データを配信する情報提供サーバと、前記文字データを解析して読み上げる文書読み上げ装置と、該文書読み上げ装置において読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを前記文書読み上げ装置に送信する言語解析サーバとを有し、前記文書読み上げ装置は、前記形態素の読み方を示すデータを使用して前記文字データを解析して読み上げる。   Therefore, in the text-to-speech reading system of the present invention, an information providing server that distributes character data, a document reading device that analyzes and reads the character data, and a morpheme that causes a reading error in the document reading device, A language analysis server that transmits data indicating how to read the morpheme to the document reading device, and the document reading device analyzes and reads the character data using the data indicating how to read the morpheme.

本発明の他の文章読み上げシステムにおいては、さらに、前記文字データは漢字かな混じり文であり、前記文書読み上げ装置は言語解析用辞書及び該言語解析用辞書を参照して前記漢字かな混じり文を解析する音声合成処理部を備える。   In another sentence reading system of the present invention, the character data is a kanji / kana mixed sentence, and the document reading apparatus analyzes the kanji / kana mixed sentence with reference to a language analysis dictionary and the language analysis dictionary. A speech synthesis processing unit.

本発明の更に他の文章読み上げシステムにおいては、さらに、前記言語解析サーバは、前記文書読み上げ装置の音声合成処理部と同等の比較用音声合成処理部、及び、該比較用音声合成処理部よりも処理能力の高いサーバ用音声合成処理部を備え、前記比較用音声合成処理部の解析結果とサーバ用音声合成処理部の解析結果とを比較して、前記読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを作成する。   In yet another text-to-speech system according to the present invention, the language analysis server further includes a comparison speech synthesis processing unit equivalent to the speech synthesis processing unit of the document reading device, and the comparison speech synthesis processing unit. A server speech synthesis processing unit with high processing capability is provided, comparing the analysis result of the comparison speech synthesis processing unit and the analysis result of the server speech synthesis processing unit, and extracting the morpheme in which the reading error occurs, Data indicating how to read the morpheme is created.

本発明の更に他の文章読み上げシステムにおいては、さらに、前記言語解析サーバは、前記文書読み上げ装置の言語解析用辞書と同等の比較用言語解析用辞書、並びに、該比較用言語解析用辞書よりも大きな記憶容量及び豊富な辞書内容を備えるサーバ用言語解析用辞書を備え、前記比較用音声合成処理部は比較用言語解析用辞書を参照し、前記サーバ用音声合成処理部はサーバ用言語解析用辞書を参照する。   In still another text-to-speech system of the present invention, the language analysis server further includes a comparison language analysis dictionary equivalent to the language analysis dictionary of the document reading device, and the comparison language analysis dictionary. A server language analysis dictionary having a large storage capacity and abundant dictionary contents is provided, the comparison speech synthesis processing unit refers to a comparison language analysis dictionary, and the server speech synthesis processing unit is used for server language analysis Browse the dictionary.

本発明の更に他の文章読み上げシステムにおいては、さらに、前記形態素の読み方を示すデータは、前記読み間違いが発生する形態素及び該形態素の読み方の一覧データである。   In still another text reading system according to the present invention, the data indicating how to read the morpheme is a list of morphemes in which the reading error occurs and a list of how to read the morpheme.

本発明の更に他の文章読み上げシステムにおいては、さらに、前記形態素の読み方を示すデータは、前記文字データにおける前記読み間違いが発生する形態素に該当する文字を前記形態素の読み方を表す表音文字で置換した文字データである。   In still another text-to-speech system according to the present invention, the data indicating how to read the morpheme is replaced with a phonetic character representing the morpheme in which the reading error occurs in the character data. Character data.

本発明の文章読み上げ方法においては、情報提供サーバは文字データを配信し、言語解析サーバは、文書読み上げ装置において読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを前記文書読み上げ装置に送信し、該文書読み上げ装置は、前記形態素の読み方を示すデータを使用して前記文字データを解析して読み上げる。   In the text reading method of the present invention, the information providing server distributes character data, the language analysis server extracts a morpheme in which a reading error occurs in the document reading device, and data indicating how to read the morpheme is read out from the document reading device. The document reading device analyzes and reads out the character data using data indicating how to read the morpheme.

本発明の言語解析サーバにおいては、言語解析用辞書を参照して文字データを読み上げる車載装置に対して読み方を示すデータを送信する言語解析サーバであって、サーバ用言語解析用辞書と、車載装置用言語解析用辞書と、前記サーバ用言語解析用辞書を参照して前記文字データを解析するサーバ用音声合成処理部と、前記車載装置用言語解析用辞書を参照して前記文字データを解析する車載装置用音声合成処理部とを有し、前記サーバ用音声合成処理部の解析結果と前記車載装置用音声合成処理部の解析結果とを比較して、読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを作成する。   The language analysis server of the present invention is a language analysis server that transmits data indicating how to read to a vehicle-mounted device that reads out character data with reference to the language analysis dictionary, the server language analysis dictionary, and the vehicle-mounted device A language analysis dictionary for a server, a server speech synthesis processing unit that analyzes the character data with reference to the server language analysis dictionary, and a language analysis dictionary for the vehicle-mounted device that analyzes the character data A speech synthesis processing unit for in-vehicle devices, comparing the analysis result of the speech synthesis processing unit for server and the analysis result of the speech synthesis processing unit for in-vehicle device, and extracting morphemes that cause reading errors; Data indicating how to read the morpheme is created.

本発明の文章読み上げ装置においては、情報提供サーバが配信した文字データ、及び、言語解析サーバが送信した、前記文字データにおいて読み間違いが発生する形態素の読み方を示すデータを受信する受信部と、前記形態素の読み方を示すデータを使用して前記文字データを解析する言語解析部と、前記文字データを読み上げるための音声波形データを作成する音声波形生成部とを有する。   In the text-to-speech device of the present invention, the character data distributed by the information providing server, and the receiving unit that receives the data transmitted from the language analysis server and indicating the reading of the morpheme that causes the reading error in the character data, A language analysis unit that analyzes the character data using data indicating how to read morphemes, and a speech waveform generation unit that creates speech waveform data for reading the character data.

本発明によれば、文書読み上げ装置は、容量の制限された辞書を参照しながらも、配信された文字データを適切に解析して、該文字データを間違いなく読み上げることができる。   According to the present invention, the document reading device can properly analyze the distributed character data and read the character data without fail while referring to a dictionary with a limited capacity.

以下、本発明の実施の形態について図面を参照しながら詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は本発明の第1の実施の形態における文章読み上げシステムの構成を示す概念図である。   FIG. 1 is a conceptual diagram showing the configuration of a text-to-speech system according to the first embodiment of the present invention.

図において、10は文章読み上げシステムである。そして、21は情報提供サーバであり、CPU、MPU等の演算手段、半導体メモリ、磁気ディスク、光ディスク等の記憶手段、通信インターフェイス等を備えるコンピュータである。なお、前記情報提供サーバ21は単一のコンピュータでなく、複数のコンピュータが有機的に結合された、いわゆる、分散型サーバであってもよい。また、前記情報提供サーバ21の中に他のシステムが構築されていてもよい。さらに、前記情報提供サーバ21は、他のコンピュータの中に構築されたシステムの一つであってもよい。   In the figure, 10 is a text reading system. Reference numeral 21 denotes an information providing server, which is a computer provided with arithmetic means such as a CPU and MPU, storage means such as a semiconductor memory, a magnetic disk, and an optical disk, a communication interface, and the like. The information providing server 21 may not be a single computer, but may be a so-called distributed server in which a plurality of computers are organically coupled. Another system may be constructed in the information providing server 21. Furthermore, the information providing server 21 may be one of systems constructed in another computer.

そして、11は、操作者によって操作される文書読み上げ装置としての車載装置であり、例えば、乗用車、トラック、バス、オートバイ等の車両12に搭載されている。車載装置は、実際には多数であるが、本実施の形態においては、説明の都合上、車載装置11で代表する。また、前記操作者は、車両12の運転者、同乗者等である。   Reference numeral 11 denotes an in-vehicle device as a document reading device operated by an operator, and is mounted on a vehicle 12 such as a passenger car, a truck, a bus, and a motorcycle. There are actually a large number of in-vehicle devices, but in the present embodiment, for convenience of explanation, the in-vehicle devices 11 are represented. The operator is a driver of the vehicle 12, a passenger, or the like.

なお、前記車載装置11は、CPU、MPU等の演算装置、半導体メモリ、磁気ディスク、光ディスク等の記憶装置、液晶ディスプレイ、LED(Light Emitting Diode)ディスプレイ、CRT等の表示装置、キーボード、ジョイスティック、十字キー、押しボタン、リモートコントローラ、タッチパネル等の入力装置、後述されるスピーカ11a等の音声出力装置、及び、通信インターフェイス、無線LAN(Local Area Network)装置等の送受信装置を備える。前記車載装置11は、例えば、車両12に搭載されるナビゲーション装置であるが、据置電話機、携帯電話機、PHS(Personal Handy−Phone System)電話機、携帯情報端末、PDA(Personal Digital Assistant)、パーソナルコンピュータ、ゲーム機、デジタルテレビ等いかなるものであってもよい。そして、前記車載装置11は、必ずしも車両12に搭載されるものでなくてもよいが、ここでは、車両12に搭載されるものとして説明する。   The in-vehicle device 11 includes a calculation device such as a CPU and an MPU, a storage device such as a semiconductor memory, a magnetic disk, and an optical disc, a liquid crystal display, an LED (Light Emitting Diode) display, a display device such as a CRT, a keyboard, a joystick, and a cross. An input device such as a key, a push button, a remote controller, and a touch panel, an audio output device such as a speaker 11a described later, and a transmission / reception device such as a communication interface and a wireless LAN (Local Area Network) device. The in-vehicle device 11 is, for example, a navigation device mounted on the vehicle 12, but a stationary phone, a mobile phone, a PHS (Personal Handy-Phon System) phone, a personal digital assistant, a PDA (Personal Digital Assistant), a personal computer, Any device such as a game machine or a digital TV may be used. And although the said vehicle equipment 11 does not necessarily need to be mounted in the vehicle 12, it demonstrates as what is mounted in the vehicle 12 here.

さらに、前記車載装置11は、図示されない現在位置検出装置を有するものであってもよい。該現在位置検出装置は、前記車載装置11が、例えば、ナビゲーション装置である場合、一般的には、GPS(Global Positioning System)、地磁気センサ、距離センサ、ステアリングセンサ、ビーコンセンサ、ジャイロセンサ等によって現在位置を検出する。また、例えば、携帯電話機、携帯情報端末等である場合、一般的には、該携帯電話機、携帯情報端末等が在圏する基地局との通信に基づいて、該基地局の位置を現在位置として検出する。   Further, the in-vehicle device 11 may have a current position detection device (not shown). When the in-vehicle device 11 is a navigation device, for example, the current position detection device is generally based on GPS (Global Positioning System), geomagnetic sensor, distance sensor, steering sensor, beacon sensor, gyro sensor, etc. Detect position. Further, for example, in the case of a mobile phone, a portable information terminal, etc., generally, based on communication with the base station where the mobile phone, the portable information terminal, etc. are located, the position of the base station is set as the current position. To detect.

ここで、前記情報提供サーバ21と車載装置11とはネットワーク22を介して相互に通信可能に接続される。なお、該ネットワーク22は、有線又は無線の公衆通信回線網、専用通信回線網、携帯電話回線網、インターネット、イントラネット、LAN、WAN(Wide Area Network)、衛星通信回線網等いかなる通信回線網であってもよく、これらを適宜組み合わせたものであってもよい。また、放送衛星によるCS放送やBS放送を利用して通信してもよく、地上波デジタルテレビ放送を利用して通信してもよく、FM多重放送を利用して通信してもよく、また、道路脇(わき)、道路上等に設置されている光ビーコン、電波ビーコン、アンテナ等を利用して路車通信を行ってもよい。   Here, the information providing server 21 and the in-vehicle device 11 are connected to each other via a network 22 so that they can communicate with each other. The network 22 is any communication network such as a wired or wireless public communication network, a dedicated communication network, a mobile phone network, the Internet, an intranet, a LAN, a WAN (Wide Area Network), and a satellite communication network. They may be combined appropriately. Moreover, it may communicate using CS broadcasting or BS broadcasting by a broadcasting satellite, may communicate using terrestrial digital television broadcasting, may communicate using FM multiplex broadcasting, Road and vehicle communication may be performed using an optical beacon, a radio beacon, an antenna, or the like installed on the side of the road or on the road.

本実施の形態においては、車載装置11が、ネットワーク22に接続されたアクセスポイント23との間で無線LANシステムによって通信を行うことで、前記ネットワーク22に接続するものとして説明する。前記アクセスポイント23は、例えば、無線LANアダプタであり、2.4〔GHz〕ISM帯、5.2〔GHz〕帯、19〔GHz〕帯準ミリ波等を使用したり赤外線を使用したりして、前記車載装置11との間で無線LANシステムによって通信を行うものである。この場合の無線LANシステムとしては、例えば、IEEE802.11a、IEEE802.11b、IEEE802.11e、IEEE802.11g等や、家庭内無線システムとして採用されているブルートゥース等であるが、いかなるシステムであってもよい。なお、前記アクセスポイント23は、いかなる場所に配設されたものであってもよく、操作者の住居であってもよいし、多数の者が使用可能なように、ガソリンスタンド、飲食店、駐車場等に配設されたものであってもよい。   In the present embodiment, description will be made assuming that the in-vehicle device 11 is connected to the network 22 by communicating with the access point 23 connected to the network 22 by a wireless LAN system. The access point 23 is, for example, a wireless LAN adapter, and uses 2.4 [GHz] ISM band, 5.2 [GHz] band, 19 [GHz] band quasi-millimeter wave or the like, or uses infrared rays. Thus, communication with the in-vehicle device 11 is performed by a wireless LAN system. The wireless LAN system in this case is, for example, IEEE802.11a, IEEE802.11b, IEEE802.11e, IEEE802.11g, or Bluetooth used as a home wireless system. Good. The access point 23 may be located at any place, may be an operator's residence, or may be used by a large number of people such as a gas station, a restaurant, a parking lot. It may be arranged in a parking lot or the like.

そして、前記情報提供サーバ21は、ニュース、天気予報、企業情報、株式市況、為替市況等の各種情報をテキストデータ、すなわち、文字データとして配信する。該文字データは、本来、前記車載装置11の表示装置に各種情報を文章で表示するためのデータなので、通常、漢字かな混じり文として構成されている。文字データは、音声データに比較してデータ量が小さいので、テレビ電波を利用して送信することもできる。   The information providing server 21 distributes various types of information such as news, weather forecasts, company information, stock market conditions, and exchange market conditions as text data, that is, character data. Since the character data is originally data for displaying various information as text on the display device of the in-vehicle device 11, it is usually configured as a kanji-kana mixed text. Since the amount of character data is smaller than that of voice data, it can also be transmitted using TV radio waves.

また、本実施の形態における車載装置11は、機能の観点から、前記情報提供サーバ21や言語解析サーバ31が送信するデータを受信する受信部、音声合成処理部14、言語解析用辞書15、ユーザ定義言語解析用辞書16及び音声データ生成用辞書17を備える文書読み上げ処理部13を有する。該文書読み上げ処理部13は、前記情報提供サーバ21から受信した文字データにおける漢字かな混じり文の文章を解析して、漢字や記号の読み方を割り当てることによって、前記文字データを読み上げるようになっている。   Moreover, the vehicle-mounted apparatus 11 in this Embodiment is the receiving part which receives the data which the said information provision server 21 and the language analysis server 31 transmit, the speech synthesis process part 14, the language analysis dictionary 15, and a user from a functional viewpoint. It has a document reading processing unit 13 including a definition language analysis dictionary 16 and a voice data generation dictionary 17. The text-to-speech processing unit 13 reads out the text data by analyzing the text of the kanji / kana mixed text in the text data received from the information providing server 21 and assigning the reading style of the text. .

そして、前記ネットワーク22には、言語解析サーバ31が通信可能に接続されている。該言語解析サーバ31は、CPU、MPU等の演算手段、半導体メモリ、磁気ディスク、光ディスク等の記憶手段、通信インターフェイス等を備えるコンピュータである。なお、前記言語解析サーバ31は単一のコンピュータでなく、複数のコンピュータが有機的に結合された、いわゆる、分散型サーバであってもよい。また、前記言語解析サーバ31の中に他のシステムが構築されていてもよい。さらに、前記言語解析サーバ31は、他のコンピュータと一体的に構成されたものであってもよいし、他のコンピュータの中に構築されたシステムの一つであってもよい。例えば、前記言語解析サーバ31は、情報提供サーバ21と一体的に構成されたものであってもよいし、該情報提供サーバ21の中に構築されたシステムの一つであってもよい。   A language analysis server 31 is communicably connected to the network 22. The language analysis server 31 is a computer provided with arithmetic means such as a CPU and MPU, storage means such as a semiconductor memory, a magnetic disk, and an optical disk, a communication interface, and the like. The language analysis server 31 may not be a single computer but may be a so-called distributed server in which a plurality of computers are organically coupled. Another system may be constructed in the language analysis server 31. Furthermore, the language analysis server 31 may be configured integrally with another computer, or may be one of systems constructed in another computer. For example, the language analysis server 31 may be configured integrally with the information providing server 21 or may be one of the systems constructed in the information providing server 21.

ここで、前記言語解析サーバ31は、機能の観点から、サーバ用音声合成処理部32、サーバ用言語解析用辞書33、比較用音声合成処理部としての車載装置用音声合成処理部34、及び、比較用言語解析用辞書としての車載装置用言語解析用辞書35を有する。そして、前記車載装置用音声合成処理部34は前記車載装置11の音声合成処理部14と同等の処理能力を有し、また、前記車載装置用言語解析用辞書35は前記車載装置11の言語解析用辞書15と同等の記憶容量及び同等の辞書内容を有する。また、サーバ用音声合成処理部32は前記車載装置11の音声合成処理部14よりも高い処理能力を有し、さらに、前記サーバ用言語解析用辞書33は前記車載装置11の言語解析用辞書15よりも大きな記憶容量及び豊富な辞書内容を有する。例えば、前記車載装置11の言語解析用辞書15の記憶容量が1〔MB〕以下程度であるのに対して、前記サーバ用言語解析用辞書33の記憶容量は100〔MB〕程度である。   Here, the language analysis server 31 includes a server speech synthesis processing unit 32, a server language analysis dictionary 33, an in-vehicle device speech synthesis processing unit 34 as a comparison speech synthesis processing unit, and a functional viewpoint. It has an in-vehicle device language analysis dictionary 35 as a comparative language analysis dictionary. The in-vehicle device speech synthesis processing unit 34 has the same processing capability as the speech synthesis processing unit 14 in the in-vehicle device 11, and the in-vehicle device language analysis dictionary 35 is in the language analysis of the in-vehicle device 11. It has a storage capacity equivalent to that of the dictionary 15 and a dictionary content equivalent. The server speech synthesis processing unit 32 has a higher processing capability than the speech synthesis processing unit 14 of the in-vehicle device 11, and the server language analysis dictionary 33 is the language analysis dictionary 15 of the in-vehicle device 11. It has a larger storage capacity and rich dictionary content. For example, the storage capacity of the language analysis dictionary 15 of the in-vehicle device 11 is about 1 [MB] or less, whereas the storage capacity of the server language analysis dictionary 33 is about 100 [MB].

そして、前記言語解析サーバ31は、前記情報提供サーバ21から受信した文字データにおける漢字かな混じり文の文章を解析して漢字や記号の読み方を割り当てる。この場合、同一の文字データにおける漢字かな混じり文の文章を、サーバ用音声合成処理部32及び車載装置用音声合成処理部34がそれぞれ解析する。前記サーバ用音声合成処理部32は、高い処理能力を有し、しかも、大きな記憶容量及び豊富な辞書内容を有するサーバ用言語解析用辞書33を参照して前記文章を解析するので、高い精度で解析することができ、漢字の読み方を正確に割り当てることができる。これに対し、前記車載装置用音声合成処理部34は、前記車載装置11の音声合成処理部14と同等の処理能力を有し、しかも、前記車載装置11の言語解析用辞書15と同等の記憶容量及び同等の辞書内容を有する車載装置用言語解析用辞書35を参照して前記文章を解析するので、前記車載装置11の言語解析用辞書15と同等の精度でしか解析することができず、漢字の読み間違いが発生する。そこで、前記言語解析サーバ31は、前記サーバ用音声合成処理部32の解析結果と車載装置用音声合成処理部34の解析結果とを比較し、読み方の相違する形態素を抽出する。なお、形態素とは、意味を持つ最小の言語単位である。   Then, the language analysis server 31 analyzes the kanji-kana mixed sentence in the character data received from the information providing server 21 and assigns how to read kanji and symbols. In this case, the server speech synthesis processing unit 32 and the on-vehicle device speech synthesis processing unit 34 analyze the sentences of kanji / kana mixed sentences in the same character data. The server speech synthesis processing unit 32 analyzes the sentence with reference to the server language analysis dictionary 33 having a high processing capacity and a large storage capacity and abundant dictionary contents. It can be analyzed and how to read kanji can be assigned accurately. On the other hand, the in-vehicle device speech synthesis processing unit 34 has a processing capability equivalent to that of the speech synthesis processing unit 14 of the in-vehicle device 11, and also has a storage equivalent to the language analysis dictionary 15 of the in-vehicle device 11. Since the sentence is analyzed with reference to the language analysis dictionary 35 for the vehicle-mounted device having the capacity and the equivalent dictionary content, it can be analyzed only with the same accuracy as the language analysis dictionary 15 of the vehicle-mounted device 11, Misreading kanji occurs. Therefore, the language analysis server 31 compares the analysis result of the server speech synthesis processing unit 32 with the analysis result of the on-vehicle device speech synthesis processing unit 34, and extracts morphemes having different readings. A morpheme is the smallest meaningful language unit.

ここで、抽出された形態素は、車載装置11において読み間違いが発生する形態素であると考えることができるので、サーバ用音声合成処理部32が解析した前記形態素の読み方を示すデータとして、前記形態素及びその読み方の一覧データが前記車載装置11に送信されるようになっている。すると、該車載装置11は、受信した一覧データをユーザ定義言語解析用辞書16に格納する。なお、前記一覧データのデータ量は、通常、数〔KB〕程度であると考えられる。そして、車載装置11の音声合成処理部14は、言語解析用辞書15及びユーザ定義言語解析用辞書16を参照して、前記情報提供サーバ21から受信した文字データにおける漢字かな混じり文の文章を解析し、漢字や記号の読み方を割り当てる。そのため、前記文章を正確に解析することができ、漢字や記号の読み方を間違いなく割り当てることができる。このように、前記車載装置11は、前記形態素の読み方を示すデータを使用して前記情報提供サーバ21から受信した文字データを解析して読み上げるので、前記文字データを間違いなく読み上げることができる。   Here, since the extracted morpheme can be considered as a morpheme in which a reading error occurs in the in-vehicle device 11, the morpheme and the morpheme that are analyzed by the server speech synthesis processing unit 32 are used as data indicating how to read the morpheme. The reading list data is transmitted to the in-vehicle device 11. Then, the in-vehicle device 11 stores the received list data in the user-defined language analysis dictionary 16. It should be noted that the data amount of the list data is normally considered to be about several [KB]. Then, the speech synthesis processing unit 14 of the in-vehicle device 11 refers to the language analysis dictionary 15 and the user-defined language analysis dictionary 16 to analyze the sentence of the kanji / kana mixed sentence in the character data received from the information providing server 21. And assign how to read kanji and symbols. Therefore, the sentence can be analyzed accurately, and how to read kanji and symbols can be definitely assigned. Thus, since the in-vehicle device 11 analyzes and reads out the character data received from the information providing server 21 using the data indicating how to read the morpheme, the character data can be read out without fail.

次に、前記車載装置11の文書読み上げ処理部13の構成を詳細に説明する。   Next, the configuration of the document reading processing unit 13 of the in-vehicle device 11 will be described in detail.

図2は本発明の第1の実施の形態における車載装置の構成を示す図である。   FIG. 2 is a diagram showing the configuration of the in-vehicle device according to the first embodiment of the present invention.

ここでは、前記車載装置11が、ネットワーク22及びアクセスポイント23を介して、情報提供サーバ21から文字データとして配信された文字ニュースを受信した場合について説明する。該文字ニュースは、「5日午前9時現在の東京外国為替市場の円相場は、1ドル=109円57〜60銭。」という漢字かな混じり文の文章である。なお、前記車載装置11の音声合成処理部14は、図2に示されるように、言語解析部14a、音声波形生成部14b及び音声波形再生部14cを備える。また、該音声波形再生部14cには、音声出力装置としてスピーカ11aが接続されている。   Here, the case where the said vehicle-mounted apparatus 11 receives the character news delivered as character data from the information provision server 21 via the network 22 and the access point 23 is demonstrated. The text news is a sentence in a mixed kanji kana that “the yen exchange rate in the Tokyo foreign exchange market as of 9:00 am on the 5th is 1 dollar = 109 yen 57-60 yuan”. As shown in FIG. 2, the voice synthesis processing unit 14 of the in-vehicle apparatus 11 includes a language analysis unit 14a, a voice waveform generation unit 14b, and a voice waveform reproduction unit 14c. In addition, a speaker 11a is connected to the audio waveform reproducing unit 14c as an audio output device.

そして、前記言語解析部14aは、言語解析用辞書15及びユーザ定義言語解析用辞書16の二つの言語解析用辞書を参照して、前記文字ニュースを形態素に分解する。なお、前記ユーザ定義言語解析用辞書16には、言語解析サーバ31から受信した一覧データが一時的に登録されているものとする。この場合、前記文字ニュースは、「/5/日/午前/9/時/現在/の/東京/外国/為替/市場/の/円/相場/は/、/1/ドル/=/109/円/57/〜/60/銭/。/」というように分解される。   Then, the language analysis unit 14a refers to the two language analysis dictionaries, the language analysis dictionary 15 and the user-defined language analysis dictionary 16, to decompose the character news into morphemes. It is assumed that the list data received from the language analysis server 31 is temporarily registered in the user-defined language analysis dictionary 16. In this case, the text news is “/ 5 / day / am / 9 / hour / present / of / Tokyo / foreign / exchange / market / of / yen / market / ha /, / 1 / dollar / = / 109 /. Yen / 57 / ˜ / 60 / sen /./ ”.

さらに、前記言語解析部14aは、前記二つの言語解析用辞書を参照して、各形態素の読み方の文字列を作成する。なお、一つの形態素に対して読み方が複数ある場合には、あらかじめ設定されている優先度データを参照する。この場合、前記文字ニュースの読み方の文字列は、「/いつか/ごぜん/くじ/げんざい/の/とーきょー/がいこく/かわせ/しじょう/の/えん/そーば/わ/、/いち/どる//ひゃくきゅう/えん/ごじゅうなな/から/ろくじっ/せん/。/」となる。   Further, the language analysis unit 14a refers to the two language analysis dictionaries and creates a character string for reading each morpheme. When there are a plurality of readings for one morpheme, reference is made to preset priority data. In this case, the text string of how to read the text news is “/ someday / gozen / kuji / genzai / no / tokyo / gaikoku / kaze / shijo / no / en / soba / wa”. /, /Ichi/Doru//Hyakukyu/En/Gonana/Kara/Rokuji/Sen/./ ”.

そして、前記音声波形生成部14bは、音声データ生成用辞書17を参照して、前記言語解析部14aが作成した読み方の文字列から音声波形データを作成する。該音声波形データは、0と1とから構成されるバイナリーコードである。また、前記音声波形再生部14cは、前記音声波形生成部14bが作成した音声波形データを再生して、スピーカ11aから出力させる。これにより、前記文字ニュースは、「いつかごぜんくじげんざいのとーきょーがいこくかわせしじょうのえんそーばわいちどるひゃくきゅうえんごじゅうななからろくじっせん」というように読み上げられる。   Then, the speech waveform generation unit 14b refers to the speech data generation dictionary 17 and creates speech waveform data from the reading character string created by the language analysis unit 14a. The speech waveform data is a binary code composed of 0 and 1. In addition, the audio waveform reproduction unit 14c reproduces the audio waveform data created by the audio waveform generation unit 14b and outputs the audio waveform data from the speaker 11a. As a result, the text news will be read out as "Someday, there will be some sort of text that will be read someday". .

次に、前記構成の文章読み上げシステム10の動作について説明する。   Next, the operation of the text-to-speech reading system 10 having the above configuration will be described.

図3は本発明の第1の実施の形態における文章読み上げシステムの動作を示す第1のフローチャート、図4は本発明の第1の実施の形態における文章読み上げシステムの動作を示す第2のフローチャートである。   FIG. 3 is a first flowchart showing the operation of the text-to-speech system according to the first embodiment of the present invention. FIG. 4 is a second flowchart showing the operation of the text-to-speech system according to the first embodiment of the present invention. is there.

ここでは、操作者が車載装置11を操作して要求した文字ニュースを情報提供サーバ21から受信する場合の動作について説明する。この場合、前記操作者が車載装置11を操作して、所望のジャンルの文字ニュースを情報提供サーバ21から受信して読み上げる動作を前記車載装置11に実行させる。ここで、操作者は外国為替市況に関する文字ニュースを選択したものとする。すると、前記車載装置11は、アクセスポイント23及びネットワーク22を介して、文字ニュースの送信を要求する文字ニュース要求を情報提供サーバ21に送信する。   Here, the operation when the operator receives the text news requested by operating the in-vehicle device 11 from the information providing server 21 will be described. In this case, the operator operates the in-vehicle device 11 to cause the in-vehicle device 11 to perform an operation of receiving text news of a desired genre from the information providing server 21 and reading it out. Here, it is assumed that the operator has selected text news regarding the foreign exchange market conditions. Then, the in-vehicle device 11 transmits a text news request for requesting transmission of text news to the information providing server 21 via the access point 23 and the network 22.

一方、該情報提供サーバ21は、車載装置11からの文字ニュース要求を待機している文字ニュース要求受信待ちの状態にあり、文字ニュース要求を受信したか否かを継続的に判断している。そして、前記車載装置11から文字ニュース要求を受信すると、前記情報提供サーバ21は、前記文字ニュース要求の内容に応じたジャンルの文字ニュースを選択して決定する。ここでは、外国為替市況に関する文字ニュースを送信する文字ニュースとして決定する。続いて、前記情報提供サーバ21は、ネットワーク22を介して、文字ニュースを解析することを要求する文字ニュース解析要求を言語解析サーバ31に送信する。   On the other hand, the information providing server 21 is in a state waiting to receive a text news request waiting for a text news request from the in-vehicle device 11, and continuously determines whether or not a text news request has been received. Then, when a text news request is received from the in-vehicle device 11, the information providing server 21 selects and determines text news of a genre corresponding to the content of the text news request. Here, it is determined as character news to be transmitted character news regarding the foreign exchange market conditions. Subsequently, the information providing server 21 transmits a character news analysis request for analyzing character news to the language analysis server 31 via the network 22.

ここで、該言語解析サーバ31は、文字ニュース解析要求を待機している文字ニュース解析要受信求待ちの状態にあり、文字ニュース解析要求を受信したか否かを継続的に判断している。そして、前記情報提供サーバ21から文字ニュース解析要求を受信すると、前記言語解析サーバ31は、解析するべき文字ニュースの送信を要求する文字ニュース要求を情報提供サーバ21に送信する。   Here, the language analysis server 31 is waiting for a character news analysis request to be waiting for a character news analysis request, and continuously determines whether or not a character news analysis request has been received. When receiving the character news analysis request from the information providing server 21, the language analysis server 31 transmits a character news request for requesting transmission of the character news to be analyzed to the information providing server 21.

この場合、該情報提供サーバ21は、文字ニュース解析要求を送信した後、言語解析サーバ31からの文字ニュース要求を待機している文字ニュース要求受信待ちの状態にあり、文字ニュース要求を受信したか否かを継続的に判断している。そして、前記言語解析サーバ31から文字ニュース要求を受信すると、前記情報提供サーバ21は、決定された前記文字ニュース、すなわち、外国為替市況に関する文字ニュースを前記言語解析サーバ31に送信する。さらに、前記情報提供サーバ21は、解析結果の送信先を前記言語解析サーバ31に通知する。この場合、前記解析結果の送信先は、前記車載装置11であり、該車載装置11のID番号、IP(Internet Protocol)アドレス、MAC(Media Access Control)アドレス等が前記言語解析サーバ31に送信される。   In this case, whether or not the information providing server 21 is waiting for the character news request waiting for the character news request from the language analysis server 31 after transmitting the character news analysis request, and has received the character news request? Judgment is continuously made. When receiving a text news request from the language analysis server 31, the information providing server 21 transmits the determined text news, that is, text news regarding foreign exchange market conditions, to the language analysis server 31. Further, the information providing server 21 notifies the language analysis server 31 of the transmission destination of the analysis result. In this case, the destination of the analysis result is the in-vehicle device 11, and the ID number, IP (Internet Protocol) address, MAC (Media Access Control) address, etc. of the in-vehicle device 11 are transmitted to the language analysis server 31. The

一方、該言語解析サーバ31は、文字ニュース要求を送信した後、文字ニュースを待機している文字ニュース受信待ちの状態にあり、文字ニュースを受信したか否かを継続的に判断している。そして、前記情報提供サーバ21から文字ニュースを受信すると、文字ニュース解析処理を実行する。この場合、前記文字ニュースをサーバ用音声合成処理部32及び車載装置用音声合成処理部34がそれぞれ解析する。そして、前記言語解析サーバ31は、前記サーバ用音声合成処理部32の解析結果と車載装置用音声合成処理部34の解析結果とを比較し、読み方の相違する形態素を抽出する。続いて、前記言語解析サーバ31は、抽出された形態素と、前記サーバ用音声合成処理部32が解析した前記抽出された形態素の読み方の一覧データを作成し、該一覧データを解析結果として、前記車載装置11に送信する。そして、前記言語解析サーバ31は、文字ニュース解析処理が終了した旨の解析終了通知を情報提供サーバ21に送信して、処理を終了する。   On the other hand, after transmitting the text news request, the language analysis server 31 is waiting for the text news reception waiting for the text news, and continuously determines whether or not the text news has been received. When character news is received from the information providing server 21, character news analysis processing is executed. In this case, the character news is analyzed by the server speech synthesis processing unit 32 and the on-vehicle device speech synthesis processing unit 34, respectively. Then, the language analysis server 31 compares the analysis result of the server speech synthesis processing unit 32 with the analysis result of the in-vehicle device speech synthesis processing unit 34, and extracts morphemes having different readings. Subsequently, the language analysis server 31 creates list data of the extracted morphemes and how to read the extracted morphemes analyzed by the server speech synthesis processing unit 32, and uses the list data as an analysis result. It transmits to the vehicle equipment 11. Then, the language analysis server 31 transmits an analysis end notification to the effect that the character news analysis process has ended, to the information providing server 21 and ends the process.

また、前記情報提供サーバ21は、解析結果の送信先を通知した後、言語解析サーバ31からの解析終了通知を待機している文字ニュース解析終了待ちの状態にあり、解析終了通知を受信したか否かを継続的に判断している。そして、前記言語解析サーバ31から解析終了通知を受信すると、前記情報提供サーバ21は、決定された前記文字ニュース、すなわち、外国為替市況に関する文字ニュースを前記車載装置11に送信して、処理を終了する。   In addition, whether the information providing server 21 is in a state waiting for the analysis of the character news waiting for the analysis end notification from the language analysis server 31 after notifying the transmission destination of the analysis result, and whether the analysis end notification has been received. Judgment is continuously made. When receiving the analysis end notification from the language analysis server 31, the information providing server 21 transmits the determined character news, that is, the character news regarding the foreign exchange market conditions, to the in-vehicle device 11 and ends the processing. To do.

一方、前記車載装置11は、文字ニュース要求を送信した後、解析結果及び文字ニュースを待機している文字ニュース受信終了待ちの状態にあり、解析結果を受信したか否か、及び、文字ニュースを受信したか否かを継続的に判断している。そして、前記言語解析サーバ31から解析結果を受信すると、前記車載装置11は、前記抽出された形態素とその読み方の一覧データをユーザ定義言語解析用辞書16に一時的に登録する。続いて、前記外国為替市況に関する文字ニュースを情報提供サーバ21から受信すると、前記車載装置11は、文字ニュース解析処理を実行する。この場合、前記車載装置11の言語解析部14aは、言語解析用辞書15、及び、前記一覧データが一時的に登録されているユーザ定義言語解析用辞書16を参照して、前記文字ニュースを解析する。続いて、前記車載装置11の音声波形生成部14bは、音声データ生成用辞書17を参照して、前記言語解析部14aが作成した読み方の文字列から音声波形データを生成する音声波形生成処理を実行する。続いて、前記車載装置11の音声波形再生部14cは、前記音声波形生成部14bが生成した音声波形データを再生して、スピーカ11aから出力させる音声波形再生処理を実行する。これにより、前記文字ニュースが間違いなく読み上げられる。そして、前記車載装置11は、一時的に登録されていた前記一覧データをユーザ定義言語解析用辞書16から削除して、処理を終了する。   On the other hand, after transmitting the text news request, the in-vehicle device 11 is in a state waiting for the analysis result and the text news reception waiting for the text news, whether the analysis result has been received, and the text news. It is continuously determined whether or not it has been received. When the analysis result is received from the language analysis server 31, the in-vehicle device 11 temporarily registers the extracted morphemes and list data of how to read them in the user-defined language analysis dictionary 16. Subsequently, when the character news about the foreign exchange market situation is received from the information providing server 21, the in-vehicle device 11 executes a character news analysis process. In this case, the language analysis unit 14a of the in-vehicle device 11 analyzes the character news with reference to the language analysis dictionary 15 and the user-defined language analysis dictionary 16 in which the list data is temporarily registered. To do. Subsequently, the speech waveform generation unit 14b of the in-vehicle device 11 refers to the speech data generation dictionary 17 and performs speech waveform generation processing for generating speech waveform data from the reading character string created by the language analysis unit 14a. Execute. Subsequently, the audio waveform reproduction unit 14c of the in-vehicle device 11 performs audio waveform reproduction processing for reproducing the audio waveform data generated by the audio waveform generation unit 14b and outputting the data from the speaker 11a. As a result, the text news is definitely read out. And the said vehicle-mounted apparatus 11 deletes the said list data temporarily registered from the dictionary 16 for user-defined language analysis, and complete | finishes a process.

次に、フローチャートについて説明する。
ステップS1 車載装置11は、文字ニュース要求を情報提供サーバ21に送信する。
ステップS2 情報提供サーバ21は、車載装置11からの文字ニュース要求を待機する。
ステップS3 情報提供サーバ21は、文字ニュース要求を受信したか否かを判断する。文字ニュース要求を受信した場合はステップS4に進み、文字ニュース要求を受信していない場合はステップS2に戻る。
ステップS4 情報提供サーバ21は、車載装置11に送信する文字ニュースを決定する。
ステップS5 情報提供サーバ21は、文字ニュース解析要求を送信する。
ステップS6 言語解析サーバ31は、文字ニュース解析要求を待機する。
ステップS7 言語解析サーバ31は、文字ニュース解析要求を受信したか否かを判断する。文字ニュース解析要求を受信した場合はステップS8に進み、文字ニュース解析要求を受信していない場合はステップS6に戻る。
ステップS8 言語解析サーバ31は、解析する文字ニュース要求を送信する。
ステップS9 情報提供サーバ21は、言語解析サーバ31からの文字ニュース要求を待機する。
ステップS10 情報提供サーバ21は、文字ニュース要求を受信したか否かを判断する。文字ニュース要求を受信した場合はステップS11に進み、文字ニュース要求を受信していない場合はステップS9に戻る。
ステップS11 情報提供サーバ21は、文字ニュースを送信する。
ステップS12 情報提供サーバ21は、解析結果の送信先を通知する。
ステップS13 言語解析サーバ31は、文字ニュースを待機する。
ステップS14 言語解析サーバ31は、文字ニュースを受信したか否かを判断する。文字ニュースを受信した場合はステップS15に進み、文字ニュースを受信していない場合はステップS13に戻る。
ステップS15 言語解析サーバ31は、文字ニュース解析処理を実行する。
ステップS16 言語解析サーバ31は、解析結果を送信する。
ステップS17 言語解析サーバ31は、解析終了通知を送信して処理を終了する。
ステップS18 情報提供サーバ21は、文字ニュース解析終了を待機する。
ステップS19 情報提供サーバ21は、解析終了通知を受信したか否かを判断する。解析終了通知を受信した場合はステップS20に進み、解析終了通知を受信していない場合はステップS18に戻る。
ステップS20 情報提供サーバ21は、文字ニュースを送信して処理を終了する。
ステップS21 車載装置11は、文字ニュース受信終了を待機する。
ステップS22 車載装置11は、解析結果を受信したか否かを判断する。解析結果を受信した場合はステップS23に進み、解析結果を受信していない場合はステップS24に進む。
ステップS23 車載装置11は、ユーザ定義言語解析辞書16に一覧データを一時的に登録する。
ステップS24 車載装置11は、文字ニュースを受信したか否かを判断する。文字ニュースを受信した場合はステップS25に進み、文字ニュースを受信していない場合はステップS21に戻る。
ステップS25 車載装置11は、文字ニュース解析処理を実行する。
ステップS26 車載装置11は、音声波形生成処理を実行する。
ステップS27 車載装置11は、文字ニュースを読み上げる(音声波形再生処理)。
ステップS28 車載装置11は、ユーザ定義言語解析辞書16から一覧データを削除して処理を終了する。
Next, a flowchart will be described.
Step S <b> 1 The in-vehicle device 11 transmits a text news request to the information providing server 21.
Step S2 The information providing server 21 waits for a text news request from the in-vehicle device 11.
Step S3 The information providing server 21 determines whether or not a text news request has been received. If a text news request has been received, the process proceeds to step S4. If a text news request has not been received, the process returns to step S2.
Step S4 The information providing server 21 determines text news to be transmitted to the in-vehicle device 11.
Step S5 The information providing server 21 transmits a text news analysis request.
Step S6 The language analysis server 31 waits for a character news analysis request.
Step S7: The language analysis server 31 determines whether or not a character news analysis request has been received. If a character news analysis request has been received, the process proceeds to step S8. If a character news analysis request has not been received, the process returns to step S6.
Step S8: The language analysis server 31 transmits a character news request to be analyzed.
Step S9 The information providing server 21 waits for a text news request from the language analysis server 31.
Step S10: The information providing server 21 determines whether a text news request has been received. If a text news request has been received, the process proceeds to step S11. If a text news request has not been received, the process returns to step S9.
Step S11 The information providing server 21 transmits text news.
Step S12 The information providing server 21 notifies the transmission destination of the analysis result.
Step S13 The language analysis server 31 stands by for character news.
Step S14: The language analysis server 31 determines whether text news has been received. If character news has been received, the process proceeds to step S15. If character news has not been received, the process returns to step S13.
Step S15 The language analysis server 31 executes a character news analysis process.
Step S16: The language analysis server 31 transmits the analysis result.
Step S17 The language analysis server 31 transmits an analysis end notification and ends the process.
Step S18 The information providing server 21 stands by for the end of character news analysis.
Step S19: The information providing server 21 determines whether or not an analysis end notification has been received. If an analysis end notification has been received, the process proceeds to step S20. If an analysis end notification has not been received, the process returns to step S18.
Step S20 The information providing server 21 transmits the text news and ends the process.
Step S21 The in-vehicle device 11 waits for the end of the text news reception.
Step S22 The in-vehicle device 11 determines whether or not an analysis result has been received. When the analysis result is received, the process proceeds to step S23, and when the analysis result is not received, the process proceeds to step S24.
Step S <b> 23 The in-vehicle device 11 temporarily registers the list data in the user-defined language analysis dictionary 16.
Step S24: The in-vehicle device 11 determines whether or not text news has been received. If character news has been received, the process proceeds to step S25, and if character news has not been received, the process returns to step S21.
Step S25 The in-vehicle device 11 executes a character news analysis process.
Step S26 The in-vehicle device 11 executes a voice waveform generation process.
Step S27 The in-vehicle device 11 reads out the text news (voice waveform reproduction process).
Step S28 The in-vehicle device 11 deletes the list data from the user-defined language analysis dictionary 16 and ends the process.

次に、前記言語解析サーバ31が実行する文字ニュース解析処理について詳細に説明する。ここでは、文字ニュースが外国為替市況に関する文字ニュースであり、漢字かな混じり文の文章である場合について説明する。   Next, the character news analysis process executed by the language analysis server 31 will be described in detail. Here, a case will be described in which the text news is text news related to the foreign exchange market situation and is a sentence in a kanji-kana mixed sentence.

図5は本発明の第1の実施の形態における言語解析サーバの文字ニュース解析処理の動作を示すフローチャートである。   FIG. 5 is a flowchart showing the operation of the character news analysis process of the language analysis server in the first embodiment of the present invention.

まず、言語解析サーバ31は、解析するべき文字ニュースを情報提供サーバ21から受信する。ここで、前記文字ニュースは、外国為替市況に関する文字ニュースであり、図5(a)に示されるように、「5日午前9時現在の東京外国為替市場の円相場は、1ドル=109円57〜60銭。」という漢字かな混じり文の文章である。そして、前記言語解析サーバ31は、前記文字ニュースをサーバ用音声合成処理部32及び車載装置用音声合成処理部34にそれぞれ解析させる。   First, the language analysis server 31 receives character news to be analyzed from the information providing server 21. Here, the text news is text news regarding the foreign exchange market conditions, and as shown in FIG. 5 (a), "the yen exchange rate of the Tokyo foreign exchange market as of 9:00 am on the 5th is 1 dollar = 109 yen This is a kanji-kana mixed sentence "57-60 sen." Then, the language analysis server 31 causes the server speech synthesis processing unit 32 and the in-vehicle device speech synthesis processing unit 34 to analyze the character news.

ここで、前記サーバ用音声合成処理部32は、高い処理能力を有し、しかも、大きな記憶容量及び豊富な高精度の辞書内容を有するサーバ用言語解析用辞書33及び優先度データを参照して前記文字ニュースの文章を解析するので、高い精度で解析することができ、漢字の読み方を正確に割り当てることができる。そして、前記サーバ用音声合成処理部32は、前記文字ニュースの文章を形態素に分割する。この場合、前記文字ニュースは、図5(b)に示されるように、「/5/日/午前/9/時/現在/の/東京/外国/為替/市場/の/円/相場/は/、/1/ドル/=/109/円/57/〜/60/銭/。/」と分解される。続いて、前記サーバ用音声合成処理部32は、形態素のそれぞれに読み方を割り当て、読み方の文字列としての表音文字列を作成する。該表音文字列は、図5(c)に示されるように、「/いつか/ごぜん/くじ/げんざい/の/とーきょー/がいこく/かわせ/しじょう/の/えん/そーば/わ/、/いち/どる//ひゃくきゅう/えん/ごじゅうなな/から/ろくじっ/せん/。/」となる。   Here, the server speech synthesis processing unit 32 refers to the server language analysis dictionary 33 and the priority data having a high processing capacity and having a large storage capacity and abundant high-precision dictionary contents. Since the text of the text news is analyzed, it can be analyzed with high accuracy, and how to read kanji can be assigned accurately. Then, the server speech synthesis processing unit 32 divides the text of the text news into morphemes. In this case, as shown in FIG. 5B, the text news is “/ 5 / day / am / 9 / hour / present / of / Tokyo / foreign / exchange / market / of / yen / market / /, /1/dollar/=/109/yen/57/˜/60/sen/./ ”. Subsequently, the server speech synthesis processing unit 32 assigns a reading to each morpheme and creates a phonetic character string as a character string for the reading. As shown in FIG. 5 (c), the phonetic character string is “/ someday / gozen / kuji / genzai / no / tokyo / gaikoku / kaseki / shijo / no / en / Soba / Wa /, / Ichi / Doru // Hyakukyu / En / Goryuna / Kara / Rokuji / Sen /./ ”.

また、前記車載装置用音声合成処理部34は、前記サーバ用音声合成処理部32より低い処理能力を有し、小さな記憶容量及び豊富でなく低精度の辞書内容を有するサーバ用言語解析用辞書33及び優先度データを参照して前記文字ニュースの文章を解析するので、高い精度で解析することができず、漢字の読み間違いが発生する。なお、前記車載装置用音声合成処理部34の処理能力は前記車載装置11の音声合成処理部14と同等であり、車載装置用言語解析用辞書35及び優先度データの記憶容量及び辞書内容も前記車載装置11の言語解析用辞書15及び優先度データと同等である。   Further, the on-board device speech synthesis processing unit 34 has a lower processing capability than the server speech synthesis processing unit 32, and has a small storage capacity and not abundant but low-precision dictionary contents. Since the text of the text news is analyzed with reference to the priority data, it cannot be analyzed with high accuracy, and a reading error of kanji occurs. The in-vehicle device speech synthesis processing unit 34 has the same processing capacity as the in-vehicle device 11 speech synthesis processing unit 14, and the in-vehicle device language analysis dictionary 35 and the storage capacity and dictionary contents of the priority data are also described above. This is equivalent to the language analysis dictionary 15 and priority data of the in-vehicle device 11.

そして、前記車載装置用音声合成処理部34は、前記文字ニュースの文章を形態素に分割する。この場合、前記文字ニュースは、図5(d)に示されるように、「/5/日/午前/9/時/現在/の/東京/外国/為替/市場/の/円/相場/は/、/1/ドル/=/109/円/57/〜/60/銭/。/」と分解される。続いて、前記車載装置用音声合成処理部34は、形態素のそれぞれに読み方を割り当て、読み方の文字列としての表音文字列を作成する。該表音文字列は、図5(e)に示されるように、「/ご/にち/ごぜん/きゅう/じ/げんざい/の/とーきょー/がいこく/かわせ/いちば/の/えん/そーば/わ/、/いち/どる/いこーる/ひゃくきゅう/えん/ごじゅうなな//ろくじゅう/せん/。/」となる。   Then, the on-vehicle device speech synthesis processing unit 34 divides the text of the text news into morphemes. In this case, as shown in FIG. 5 (d), the text news is “/ 5 / day / am / 9 / hour / present / of / Tokyo / foreign / exchange / market / of / yen / market / /, /1/dollar/=/109/yen/57/˜/60/sen/./ ”. Subsequently, the on-vehicle device speech synthesis processing unit 34 assigns a reading to each morpheme, and creates a phonetic character string as a character string for the reading. As shown in FIG. 5 (e), the phonetic character string is “/ go / nichi / gozen / kyu / ji / genzai / no / tokyo / gaikoku / kaseki / ichiba”. /No/en/soba/wa/,/ichi/duru/ikol/hyakukyu/en/junyana//rokuju/sen/./ ".

続いて、前記言語解析サーバ31は、前記サーバ用音声合成処理部32の作成した表音文字列と車載装置用音声合成処理部34の作成した表音文字列とを比較し、読み方の相違する形態素を抽出する。前記二つの表音文字列において読み方の相違する形態素は、図5(f)及び(g)において○で囲んだ形態素である。このようにして抽出された形態素は、車載装置11において読み間違いが発生する形態素であると考えることができる。そこで、前記言語解析サーバ31は、読み方の相違する形態素とその読み方の一覧データを作成する。なお、該一覧データに含まれる読み方は、正確であると考えられるサーバ用音声合成処理部32によって割り当てられた読み方である。すなわち、前記一覧データは、車載装置11において読み間違いが発生する形態素とその正しい読み方の一覧データである。該一覧データは、図5(h)に示されるように、『「5日」:/いつか、「9時」:/くじ、「市場」:/しじょう、「=」:/(無音)、「〜」:/から、「60」:ろくじっ』となる。   Subsequently, the language analysis server 31 compares the phonetic character string created by the server voice synthesis processing unit 32 with the phonetic character string created by the on-vehicle device voice synthesis processing unit 34, and the reading is different. Extract morphemes. The morphemes with different readings in the two phonetic character strings are the morphemes surrounded by circles in FIGS. 5 (f) and 5 (g). The morpheme extracted in this way can be considered as a morpheme that causes a reading error in the in-vehicle device 11. Therefore, the language analysis server 31 creates morphemes with different readings and list data of the readings. Note that the reading included in the list data is the reading assigned by the server speech synthesis processing unit 32 that is considered to be accurate. That is, the list data is list data of morphemes in which reading errors occur in the in-vehicle device 11 and correct readings thereof. As shown in FIG. 5 (h), the list data includes ““ 5 days ”: / someday,“ 9 o'clock ”: / lottery,“ market ”: / jyo,“ = ”: / (silence), From “~”: /, “60”: Rokuji ”.

そして、前記言語解析サーバ31は、前記一覧データを前記車載装置11に送信して処理を終了する。   Then, the language analysis server 31 transmits the list data to the in-vehicle device 11 and ends the process.

次に、フローチャートについて説明する。
ステップS15−1 解析する文字ニュースを情報提供サーバ21から受信する。
ステップS15−2 サーバ用音声合成処理部32は文書を形態素に分割する。
ステップS15−3 サーバ用音声合成処理部32は形態素それぞれに読み方を割り当て、表音文字列を作成する。
ステップS15−4 車載装置用音声合成処理部34は文章を形態素に分割する。
ステップS15−5 車載装置用音声合成処理部34は形態素それぞれに読み方を割り当て、表音文字列を作成する。
ステップS15−6 二つの表音文字列を比較し、異なる形態素を抽出する。
ステップS15−7 読み間違いが発生する形態素の一覧データを作成する。
ステップS15−8 一覧データを車載装置11に送信して処理を終了する。
Next, a flowchart will be described.
Step S15-1: Character news to be analyzed is received from the information providing server 21.
Step S15-2: The server speech synthesis processing unit 32 divides the document into morphemes.
Step S15-3: The server speech synthesis processing unit 32 assigns a reading to each morpheme and creates a phonetic character string.
Step S15-4 The on-vehicle device speech synthesis processing unit 34 divides the sentence into morphemes.
Step S15-5: The on-vehicle device speech synthesis processing unit 34 assigns a reading to each morpheme and creates a phonetic character string.
Step S15-6: The two phonetic character strings are compared and different morphemes are extracted.
Step S15-7: List data of morphemes in which reading errors occur.
Step S15-8 The list data is transmitted to the in-vehicle device 11 and the process is terminated.

このように、本実施の形態においては、情報提供サーバ21から車載装置11に送信される文字データが言語解析サーバ31によって解析されるようになっている。ここで、該言語解析サーバ31は、高い処理能力を有し、大きな記憶容量及び豊富な辞書内容を有するサーバ用言語解析用辞書33を参照して文章を解析するサーバ用音声合成処理部32と、車載装置11の音声合成処理部14と同等の処理能力を有し、車載装置11の言語解析用辞書15と同等の記憶容量及び同等の辞書内容を有する車載装置用言語解析用辞書35を参照して文章を解析する車載装置用音声合成処理部34とを有する。そして、前記言語解析サーバ31は、サーバ用音声合成処理部32及び車載装置用音声合成処理部34がそれぞれ前記文字データの文章を解析した結果を比較して、車載装置11において読み間違いが発生する形態素とその正しい読み方の一覧データを作成し、該一覧データを車載装置11に送信するようになっている。そのため、前記車載装置11の音声合成処理部14は、前記一覧データを参照して前記文字データの文章を解析するので、前記文字データを間違いなく読み上げることができる。したがって、前記車載装置11は、処理能力が制限された音声合成処理部14及び容量の制限された言語解析用辞書15を使用しながらでも、配信された文字データを適切に解析して、該文字データを間違いなく読み上げることができる。   Thus, in this embodiment, the character data transmitted from the information providing server 21 to the in-vehicle device 11 is analyzed by the language analysis server 31. Here, the language analysis server 31 has a high processing capacity, a server speech synthesis processing unit 32 that analyzes sentences by referring to the server language analysis dictionary 33 having a large storage capacity and abundant dictionary contents; The in-vehicle device language analysis dictionary 35 has the same processing capability as the speech synthesis processing unit 14 of the in-vehicle device 11 and has the same storage capacity and equivalent dictionary content as the language analysis dictionary 15 of the in-vehicle device 11. And a speech synthesis processing unit 34 for in-vehicle devices that analyzes the sentence. Then, the language analysis server 31 compares the results of analyzing the text data of the character data by the server speech synthesis processing unit 32 and the on-vehicle device speech synthesis processing unit 34, and a reading error occurs in the on-vehicle device 11. A list data of the morpheme and its correct reading is created, and the list data is transmitted to the in-vehicle device 11. Therefore, the voice synthesis processing unit 14 of the in-vehicle device 11 analyzes the text of the character data with reference to the list data, so that the character data can be read out without fail. Therefore, the in-vehicle device 11 appropriately analyzes the distributed character data and uses the character synthesis data while using the speech synthesis processing unit 14 with limited processing capability and the language analysis dictionary 15 with limited capacity. You can definitely read the data.

また、情報提供サーバ21から車載装置11に送信される文字データは、漢字かな混じり文の文字データなので、ひらがなやカタカナのような表音文字だけからなる文字データよりも、データ量が小さくなる。そのため、前記情報提供サーバ21から車載装置11に送信するための通信負荷が小さく、通信時間を短くすることができ、また、通信費用を低くすることができる。さらに、前記一覧データは、データ量が小さいので、前記言語解析サーバ31から車載装置11に送信するための通信負荷が小さく、通信時間を短くすることができ、また、通信費用を低くすることができる。さらに、前記一覧データを一時的に登録する車載装置11のユーザ定義言語解析用辞書16の容量を大きくする必要がない。   Further, since the character data transmitted from the information providing server 21 to the in-vehicle device 11 is character data of a kanji / kana mixed sentence, the data amount is smaller than character data consisting only of phonetic characters such as hiragana and katakana. Therefore, the communication load for transmitting from the information providing server 21 to the in-vehicle device 11 is small, the communication time can be shortened, and the communication cost can be reduced. Furthermore, since the list data has a small data amount, the communication load for transmitting from the language analysis server 31 to the in-vehicle device 11 is small, the communication time can be shortened, and the communication cost can be reduced. it can. Furthermore, it is not necessary to increase the capacity of the user-defined language analysis dictionary 16 of the in-vehicle device 11 that temporarily registers the list data.

次に、本発明の第2の実施の形態について説明する。なお、第1の実施の形態と同じ構造を有するものについては、同じ符号を付与することによってその説明を省略する。また、前記第1の実施の形態と同じ動作及び同じ効果についても、その説明を省略する。   Next, a second embodiment of the present invention will be described. In addition, about the thing which has the same structure as 1st Embodiment, the description is abbreviate | omitted by providing the same code | symbol. The description of the same operation and the same effect as those of the first embodiment is also omitted.

本実施の形態において、言語解析サーバ31は、車載装置11において読み間違いが発生する形態素とその正しい読み方の一覧データを車載装置11に送信せず、前記一覧データに含まれる形態素の正しい読み方を表す表音文字に置換した文字データを車載装置11に送信するようになっている。この場合、車載装置11におけるユーザ定義言語解析用辞書16を省略することができる。なお、他の点についての構成は前記第1の実施の形態と同様であるので、その説明を省略する。   In the present embodiment, the language analysis server 31 does not transmit a list of morphemes that cause reading errors in the in-vehicle device 11 and correct readings thereof to the in-vehicle device 11, and represents the correct reading of the morphemes included in the list data. The character data replaced with the phonetic character is transmitted to the in-vehicle device 11. In this case, the user-defined language analysis dictionary 16 in the in-vehicle device 11 can be omitted. In addition, since the structure about another point is the same as that of the said 1st Embodiment, the description is abbreviate | omitted.

次に、本実施の形態における文章読み上げシステム10の動作について説明する。   Next, the operation of the text-to-speech system 10 in the present embodiment will be described.

図6は本発明の第2の実施の形態における文章読み上げシステムの動作を示す第1のフローチャート、図7は本発明の第2の実施の形態における文章読み上げシステムの動作を示す第2のフローチャートである。   FIG. 6 is a first flowchart showing the operation of the text-to-speech system in the second embodiment of the present invention, and FIG. 7 is a second flowchart showing the operation of the text-to-speech system in the second embodiment of the present invention. is there.

前記第1の実施の形態と同様に、操作者が車載装置11を操作して要求した文字ニュースを情報提供サーバ21から受信する場合の動作について説明する。なお、情報提供サーバ21が言語解析サーバ31に文字ニュースを送信して、解析結果の送信先を通知するまでの動作については、前記第1の実施の形態と同様であるので、その説明を省略する。   Similar to the first embodiment, an operation when the operator receives from the information providing server 21 the text news requested by operating the in-vehicle device 11 will be described. The operation from the time when the information providing server 21 transmits the text news to the language analysis server 31 and notifies the destination of the analysis result is the same as that in the first embodiment, and the description thereof is omitted. To do.

本実施の形態において、情報提供サーバ21は、解析結果の送信先を言語解析サーバ31に通知すると処理を終了する。一方、該言語解析サーバ31は、文字ニュース要求を送信した後、文字ニュースを待機している文字ニュース受信待ちの状態にあり、文字ニュースを受信したか否かを継続的に判断している。そして、前記情報提供サーバ21から文字ニュースを受信すると、文字ニュース解析処理を実行する。この場合、前記文字ニュースをサーバ用音声合成処理部32及び車載装置用音声合成処理部34がそれぞれ解析する。そして、前記言語解析サーバ31は、前記サーバ用音声合成処理部32の解析結果と車載装置用音声合成処理部34の解析結果とを比較し、読み方の相違する形態素を抽出する。続いて、前記言語解析サーバ31は、抽出された形態素と、前記サーバ用音声合成処理部32が解析した前記抽出された形態素の読み方の一覧データを作成する。続いて、前記言語解析サーバ31は、文字ニュースにおける前記抽出された形態素に該当する文字を、前記形態素の読み方を表す表音文字に置換して、表音文字化処理を実行する。そして、表音文字化処理によって再編された文字ニュース、すなわち、表音文字化処理済み文字ニュースを解析結果として車載装置11に送信して、処理を終了する。   In the present embodiment, the information providing server 21 terminates the process when the language analysis server 31 is notified of the transmission destination of the analysis result. On the other hand, after transmitting the text news request, the language analysis server 31 is waiting for the text news reception waiting for the text news, and continuously determines whether or not the text news has been received. When character news is received from the information providing server 21, character news analysis processing is executed. In this case, the character news is analyzed by the server speech synthesis processing unit 32 and the on-vehicle device speech synthesis processing unit 34, respectively. Then, the language analysis server 31 compares the analysis result of the server speech synthesis processing unit 32 with the analysis result of the in-vehicle device speech synthesis processing unit 34, and extracts morphemes having different readings. Subsequently, the language analysis server 31 creates list data of the extracted morphemes and how to read the extracted morphemes analyzed by the server speech synthesis processing unit 32. Subsequently, the language analysis server 31 replaces the character corresponding to the extracted morpheme in the character news with a phonetic character representing how to read the morpheme, and executes a phonetic character conversion process. Then, the character news reorganized by the phonogram conversion processing, that is, the phonogram conversion processed character news is transmitted to the in-vehicle device 11 as an analysis result, and the processing ends.

一方、前記車載装置11は、文字ニュース要求を送信した後、文字ニュースを待機している文字ニュース受信終了待ちの状態にあり、文字ニュースを受信したか否かを継続的に判断している。そして、前記言語解析サーバ31から解析結果としての表音文字化処理済み文字ニュースを受信すると、前記車載装置11は、文字ニュース解析処理を実行する。この場合、前記車載装置11の言語解析部14aは、言語解析用辞書15を参照して、前記表音文字化処理済み文字ニュースを解析する。続いて、前記車載装置11の音声波形生成部14bは、音声データ生成用辞書17を参照して、前記言語解析部14aが作成した読み方の文字列から音声波形データを生成する音声波形生成処理を実行する。続いて、前記車載装置11の音声波形再生部14cは、前記音声波形生成部14bが生成した音声波形データを再生して、スピーカ11aから出力させる音声波形再生処理を実行する。これにより、前記表音文字化処理済み文字ニュースが間違いなく読み上げられる。そして、前記車載装置11は処理を終了する。   On the other hand, after transmitting the text news request, the in-vehicle device 11 is in a state waiting for the text news reception waiting for the text news, and continuously determines whether or not the text news has been received. When the phonetic characterized processed character news as an analysis result is received from the language analysis server 31, the in-vehicle device 11 executes a character news analysis process. In this case, the language analysis unit 14a of the in-vehicle device 11 refers to the language analysis dictionary 15 and analyzes the phonogram conversion processed character news. Subsequently, the speech waveform generation unit 14b of the in-vehicle device 11 refers to the speech data generation dictionary 17 and performs speech waveform generation processing for generating speech waveform data from the reading character string created by the language analysis unit 14a. Execute. Subsequently, the audio waveform reproduction unit 14c of the in-vehicle device 11 performs audio waveform reproduction processing for reproducing the audio waveform data generated by the audio waveform generation unit 14b and outputting the data from the speaker 11a. As a result, the phonetic-letterized character news is definitely read out. And the said vehicle-mounted apparatus 11 complete | finishes a process.

次に、フローチャートについて説明する。
ステップS31 車載装置11は、文字ニュース要求を情報提供サーバ21に送信する。
ステップS32 情報提供サーバ21は、車載装置11からの文字ニュース要求を待機する。
ステップS33 情報提供サーバ21は、文字ニュース要求を受信したか否かを判断する。文字ニュース要求を受信した場合はステップS34に進み、文字ニュース要求を受信していない場合はステップS32に戻る。
ステップS34 情報提供サーバ21は、車載装置11に送信する文字ニュースを決定する。
ステップS35 情報提供サーバ21は、文字ニュース解析要求を送信する。
ステップS36 言語解析サーバ31は、文字ニュース要求を待機する。
ステップS37 言語解析サーバ31は、文字ニュース解析要求を受信したか否かを判断する。文字ニュース解析要求を受信した場合はステップS38に進み、文字ニュース解析要求を受信していない場合はステップS36に戻る。
ステップS38 言語解析サーバ31は、解析する文字ニュース要求を送信する。
ステップS39 情報提供サーバ21は、言語解析サーバ31からの文字ニュース要求を待機する。
ステップS40 情報提供サーバ21は、文字ニュース要求を受信したか否かを判断する。文字ニュース要求を受信した場合はステップS41に進み、文字ニュース要求を受信していない場合はステップS39に戻る。
ステップS41 情報提供サーバ21は、文字ニュースを送信する。
ステップS42 情報提供サーバ21は、解析結果の送信先を通知して処理を終了する。
ステップS43 言語解析サーバ31は、文字ニュースを待機する。
ステップS44 言語解析サーバ31は、文字ニュースを受信したか否かを判断する。文字ニュースを受信した場合はステップS45に進み、文字ニュースを受信していない場合はステップS43に戻る。
ステップS45 言語解析サーバ31は、文字ニュース解析処理を実行する。
ステップS46 言語解析サーバ31は、解析結果を送信して処理を終了する。
ステップS47 車載装置11は、文字ニュース受信終了を待機する。
ステップS48 車載装置11は、文字ニュースを受信したか否かを判断する。文字ニュースを受信した場合はステップS49に進み、文字ニュースを受信していない場合はステップS47に戻る。
ステップS49 車載装置11は、文字ニュース解析処理を実行する。
ステップS50 車載装置11は、音声波形生成処理を実行する。
ステップS51 車載装置11は、文字ニュースを読み上げて(音声波形再生処理)、処理を終了する。
Next, a flowchart will be described.
Step S31 The in-vehicle device 11 transmits a text news request to the information providing server 21.
Step S32 The information providing server 21 waits for a text news request from the in-vehicle device 11.
Step S33 The information providing server 21 determines whether or not a text news request has been received. If a text news request has been received, the process proceeds to step S34. If a text news request has not been received, the process returns to step S32.
Step S34 The information providing server 21 determines the text news to be transmitted to the in-vehicle device 11.
Step S35 The information providing server 21 transmits a character news analysis request.
Step S36 The language analysis server 31 waits for a text news request.
Step S37: The language analysis server 31 determines whether or not a character news analysis request has been received. If a character news analysis request has been received, the process proceeds to step S38. If a character news analysis request has not been received, the process returns to step S36.
Step S38: The language analysis server 31 transmits a character news request to be analyzed.
Step S39 The information providing server 21 waits for a text news request from the language analysis server 31.
Step S40 The information providing server 21 determines whether or not a text news request has been received. If a text news request has been received, the process proceeds to step S41. If a text news request has not been received, the process returns to step S39.
Step S41 The information providing server 21 transmits text news.
Step S42: The information providing server 21 notifies the transmission destination of the analysis result and ends the process.
Step S43 The language analysis server 31 stands by for character news.
Step S44: The language analysis server 31 determines whether text news has been received. If character news has been received, the process proceeds to step S45, and if character news has not been received, the process returns to step S43.
Step S45 The language analysis server 31 executes a character news analysis process.
Step S46: The language analysis server 31 transmits the analysis result and ends the process.
Step S47 The in-vehicle device 11 waits for the end of the text news reception.
Step S48 The in-vehicle device 11 determines whether or not text news has been received. If character news has been received, the process proceeds to step S49. If character news has not been received, the process returns to step S47.
Step S49 The in-vehicle device 11 executes a character news analysis process.
Step S50 The in-vehicle device 11 executes a voice waveform generation process.
Step S51 The in-vehicle device 11 reads out the text news (voice waveform reproduction process) and ends the process.

次に、前記言語解析サーバ31が実行する文字ニュース解析処理について詳細に説明する。ここでは、前記第1の実施の形態と同様に、文字ニュースが外国為替市況に関する文字ニュースであり、漢字かな混じり文の文章である場合について説明する。   Next, the character news analysis process executed by the language analysis server 31 will be described in detail. Here, as in the first embodiment, a case will be described in which the text news is text news related to foreign exchange market conditions and is a sentence in a kanji / kana mixed sentence.

図8は本発明の第2の実施の形態における言語解析サーバの文字ニュース解析処理の動作を示すフローチャートである。   FIG. 8 is a flowchart showing the operation of the character news analysis process of the language analysis server in the second embodiment of the present invention.

まず、言語解析サーバ31は、解析するべき文字ニュースを情報提供サーバ21から受信する。ここで、前記文字ニュースは、外国為替市況に関する文字ニュースであり、図8(a)に示されるように、「5日午前9時現在の東京外国為替市場の円相場は、1ドル=109円57〜60銭。」という漢字かな混じり文の文章である。なお、車載装置11において読み間違いが発生する形態素とその正しい読み方の一覧データを作成するまでの動作については、前記第1の実施の形態と同様であるので、その説明を省略する。   First, the language analysis server 31 receives character news to be analyzed from the information providing server 21. Here, the text news is text news regarding the foreign exchange market conditions, and as shown in FIG. 8A, “the yen exchange rate of the Tokyo foreign exchange market as of 9:00 am on the 5th is 1 dollar = 109 yen. This is a kanji-kana mixed sentence "57-60 sen." Note that the morphemes that cause erroneous reading in the in-vehicle device 11 and the operations up to the creation of the correct reading list data are the same as those in the first embodiment, and thus the description thereof is omitted.

続いて、前記言語解析サーバ31は、前記文字ニュースにおける抽出された形態素、すなわち、読み間違いが発生する形態素に該当する文字を、前記一覧データに含まれる形態素の正しい読み方を表す表音文字で置換する表音文字化処理を実行する。この場合、前記文字ニュースは、図8(i)に示されるように、「<いつか>午前<くじ>現在の東京外国為替<しじょう>の円相場は、1ドル<−>109円57<から><ろくじっ>銭。」となる。そして、前記言語解析サーバ31は、表音文字化処理によって再編された文字ニュースとしての表音文字化処理済み文字ニュースを前記車載装置11に送信して処理を終了する。   Subsequently, the language analysis server 31 replaces the character corresponding to the extracted morpheme in the character news, that is, the character corresponding to the morpheme in which the reading error occurs, with the phonetic character representing the correct reading of the morpheme included in the list data. The phonogram conversion process is executed. In this case, as shown in FIG. 8 (i), the text news is as follows: “<someday> AM <Lottery> The current yen exchange rate of Tokyo Foreign Exchange <Shoji> is 1 dollar <-> 109 yen57 < "> <Rokuji> Sen." Then, the language analysis server 31 transmits the phonogram conversion processed character news as the character news reorganized by the phonogram conversion processing to the in-vehicle device 11 and ends the processing.

次に、フローチャートについて説明する。
ステップS45−1 解析する文字ニュースを情報提供サーバ21から受信する。
ステップS45−2 サーバ用音声合成処理部32は文書を形態素に分割する。
ステップS45−3 サーバ用音声合成処理部32は形態素それぞれに読み方を割り当て、表音文字列を作成する。
ステップS45−4 車載装置用音声合成処理部34は文章を形態素に分割する。
ステップS45−5 車載装置用音声合成処理部34は形態素それぞれに読み方を割り当て、表音文字列を作成する。
ステップS45−6 二つの表音文字列を比較し、異なる形態素を抽出する。
ステップS45−7 読み間違いが発生する形態素の一覧データを作成する。
ステップS45−8 表音文字化処理済み文字ニュースを前記車載装置11に送信して処理を終了する。
Next, a flowchart will be described.
Step S45-1 Character news to be analyzed is received from the information providing server 21.
Step S45-2: The server speech synthesis processing unit 32 divides the document into morphemes.
Step S45-3: The server speech synthesis processing unit 32 assigns a reading to each morpheme and creates a phonetic character string.
Step S45-4: The on-vehicle device speech synthesis processing unit 34 divides the sentence into morphemes.
Step S45-5: The on-vehicle device speech synthesis processing unit 34 assigns a reading to each morpheme and creates a phonetic character string.
Step S45-6: The two phonetic character strings are compared, and different morphemes are extracted.
Step S45-7: List data of morphemes in which reading errors occur.
Step S45-8: The phonogram conversion-processed character news is transmitted to the in-vehicle device 11 and the process is terminated.

このように、本実施の形態において、言語解析サーバ31は、車載装置11において読み間違いが発生する形態素とその正しい読み方の一覧データを作成し、文字ニュースにおける読み間違いが発生する形態素に該当する文字を、前記一覧データに含まれる形態素の正しい読み方を表す表音文字で置換する表音文字化処理を実行する。そして、表音文字化処理済み文字ニュースが車載装置11に送信されるようになっている。そのため、前記車載装置11の音声合成処理部14は、前記文字データを間違いなく読み上げることができる。また、ユーザ定義言語解析用辞書16を省略することができるので、車載装置11の構成を簡素化することができる。   As described above, in the present embodiment, the language analysis server 31 creates a list of morphemes that cause reading errors in the in-vehicle device 11 and correct readings thereof, and the characters corresponding to the morphemes that cause reading errors in character news. Is replaced with a phonetic character conversion process that replaces the phonetic character with a phonetic character that represents the correct reading of the morphemes contained in the list data. Then, the phonetic characterized processed character news is transmitted to the in-vehicle device 11. Therefore, the speech synthesis processing unit 14 of the in-vehicle device 11 can definitely read the character data. Moreover, since the user-defined language analysis dictionary 16 can be omitted, the configuration of the in-vehicle device 11 can be simplified.

そして、言語解析サーバ31から車載装置11に送信される文字データは、基本的に漢字かな混じり文の文字データであり、読み間違いが発生する形態素に該当する文字だけが表音文字に置換されているので、データ量を最小限にすることができる。そのため、前記言語解析サーバ31から車載装置11に送信するための通信負荷が小さく、通信時間を短くすることができ、また、通信費用を低くすることができる。   The character data transmitted from the language analysis server 31 to the in-vehicle device 11 is basically character data of a kana-kana mixed sentence, and only the characters corresponding to the morpheme in which reading errors occur are replaced with phonograms. As a result, the amount of data can be minimized. Therefore, the communication load for transmitting from the language analysis server 31 to the in-vehicle device 11 is small, the communication time can be shortened, and the communication cost can be reduced.

なお、前記第1及び第2の実施の形態においては、情報提供サーバ21から配信される文字データが、車載装置11からの要求に応じて配信される、いわゆるプル型コンテンツである場合について説明したが、前記文字データは、車載装置11からの要求がなくても情報提供サーバ21から車載装置11に対して配信される、いわゆるプッシュ型コンテンツ又は放送(ブロードキャスト)型コンテンツであってもよい。   In the first and second embodiments, the case where the character data distributed from the information providing server 21 is so-called pull-type content distributed in response to a request from the in-vehicle device 11 has been described. However, the character data may be so-called push type content or broadcast type content that is distributed from the information providing server 21 to the in-vehicle device 11 without a request from the in-vehicle device 11.

また、本発明は前記実施の形態に限定されるものではなく、本発明の趣旨に基づいて種々変形させることが可能であり、それらを本発明の範囲から排除するものではない。   The present invention is not limited to the above-described embodiment, and various modifications can be made based on the spirit of the present invention, and they are not excluded from the scope of the present invention.

本発明の第1の実施の形態における文章読み上げシステムの構成を示す概念図である。It is a conceptual diagram which shows the structure of the text reading system in the 1st Embodiment of this invention. 本発明の第1の実施の形態における車載装置の構成を示す図である。It is a figure which shows the structure of the vehicle-mounted apparatus in the 1st Embodiment of this invention. 本発明の第1の実施の形態における文章読み上げシステムの動作を示す第1のフローチャートである。It is a 1st flowchart which shows operation | movement of the text-to-speech reading system in the 1st Embodiment of this invention. 本発明の第1の実施の形態における文章読み上げシステムの動作を示す第2のフローチャートである。It is a 2nd flowchart which shows operation | movement of the text-to-speech system in the 1st Embodiment of this invention. 本発明の第1の実施の形態における言語解析サーバの文字ニュース解析処理の動作を示すフローチャートである。It is a flowchart which shows the operation | movement of the character news analysis process of the language analysis server in the 1st Embodiment of this invention. 本発明の第2の実施の形態における文章読み上げシステムの動作を示す第1のフローチャートである。It is a 1st flowchart which shows operation | movement of the text reading system in the 2nd Embodiment of this invention. 本発明の第2の実施の形態における文章読み上げシステムの動作を示す第2のフローチャートである。It is a 2nd flowchart which shows operation | movement of the text-to-speech system in the 2nd Embodiment of this invention. 本発明の第2の実施の形態における言語解析サーバの文字ニュース解析処理の動作を示すフローチャートである。It is a flowchart which shows the operation | movement of the character news analysis process of the language analysis server in the 2nd Embodiment of this invention.

符号の説明Explanation of symbols

10 文章読み上げシステム
11 車載装置
14 音声合成処理部
15 言語解析用辞書
21 情報提供サーバ
31 言語解析サーバ
32 サーバ用音声合成処理部
33 サーバ用言語解析用辞書
34 車載装置用音声合成処理部
35 車載装置用言語解析用辞書
DESCRIPTION OF SYMBOLS 10 Text-to-speech reading system 11 In-vehicle device 14 Speech synthesis processing unit 15 Language analysis dictionary 21 Information providing server 31 Language analysis server 32 Server speech synthesis processing unit 33 Server language analysis dictionary 34 In-vehicle device speech synthesis processing unit 35 In-vehicle device Language analysis dictionary

Claims (9)

(a)文字データを配信する情報提供サーバと、
(b)前記文字データを解析して読み上げる文書読み上げ装置と、
(c)該文書読み上げ装置において読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを前記文書読み上げ装置に送信する言語解析サーバとを有し、
(d)前記文書読み上げ装置は、前記形態素の読み方を示すデータを使用して前記文字データを解析して読み上げることを特徴とする文章読み上げシステム。
(A) an information providing server for distributing character data;
(B) a document reading device that analyzes and reads out the character data;
(C) having a language analysis server that extracts morphemes in which reading errors occur in the document reading device and transmits data indicating how to read the morphemes to the document reading device;
(D) The text-to-speech device reads out the text data by analyzing the text data using data indicating how to read the morpheme.
(a)前記文字データは漢字かな混じり文であり、
(b)前記文書読み上げ装置は言語解析用辞書及び該言語解析用辞書を参照して前記漢字かな混じり文を解析する音声合成処理部を備える請求項1に記載の文章読み上げシステム。
(A) The character data is a kanji / kana mixed sentence,
(B) The text-to-speech system according to claim 1, wherein the text-to-speech device includes a language analysis dictionary and a speech synthesis processing unit that analyzes the kanji-kana mixed text with reference to the language analysis dictionary.
(a)前記言語解析サーバは、前記文書読み上げ装置の音声合成処理部と同等の比較用音声合成処理部、及び、該比較用音声合成処理部よりも処理能力の高いサーバ用音声合成処理部を備え、
(b)前記比較用音声合成処理部の解析結果とサーバ用音声合成処理部の解析結果とを比較して、前記読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを作成する請求項2に記載の文章読み上げシステム。
(A) The language analysis server includes a comparative speech synthesis processing unit equivalent to the speech synthesis processing unit of the document reading device, and a server speech synthesis processing unit having a higher processing capability than the comparative speech synthesis processing unit. Prepared,
(B) Compare the analysis result of the comparison speech synthesis processing unit with the analysis result of the server speech synthesis processing unit, extract the morpheme in which the reading error occurs, and create data indicating how to read the morpheme The text-to-speech system according to claim 2.
(a)前記言語解析サーバは、前記文書読み上げ装置の言語解析用辞書と同等の比較用言語解析用辞書、並びに、該比較用言語解析用辞書よりも大きな記憶容量及び豊富な辞書内容を備えるサーバ用言語解析用辞書を備え、
(b)前記比較用音声合成処理部は比較用言語解析用辞書を参照し、前記サーバ用音声合成処理部はサーバ用言語解析用辞書を参照する請求項3に記載の文章読み上げシステム。
(A) The language analysis server includes a comparative language analysis dictionary equivalent to the language analysis dictionary of the document reading device, and a server having a larger storage capacity and abundant dictionary contents than the comparison language analysis dictionary. Language analysis dictionary
(B) The text-to-speech system according to claim 3, wherein the comparative speech synthesis processing unit refers to a comparative language analysis dictionary, and the server speech synthesis processing unit refers to a server language analysis dictionary.
前記形態素の読み方を示すデータは、前記読み間違いが発生する形態素及び該形態素の読み方の一覧データである請求項1〜4のいずれか1項に記載の文章読み上げシステム。 The text-to-speech system according to any one of claims 1 to 4, wherein the data indicating how to read the morpheme is morpheme in which the reading error occurs and list data of how to read the morpheme. 前記形態素の読み方を示すデータは、前記文字データにおける前記読み間違いが発生する形態素に該当する文字を前記形態素の読み方を表す表音文字で置換した文字データである請求項1〜4のいずれか1項に記載の文章読み上げシステム。 The data indicating how to read the morpheme is character data obtained by replacing a character corresponding to the morpheme in which the reading error occurs in the character data with a phonetic character indicating how to read the morpheme. The text-to-speech system described in the section. (a)情報提供サーバは文字データを配信し、
(b)言語解析サーバは、文書読み上げ装置において読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを前記文書読み上げ装置に送信し、
(c)該文書読み上げ装置は、前記形態素の読み方を示すデータを使用して前記文字データを解析して読み上げることを特徴とする文章読み上げ方法。
(A) The information providing server distributes character data,
(B) the language analysis server extracts a morpheme in which a reading error occurs in the document reading device, and transmits data indicating how to read the morpheme to the document reading device;
(C) The text-to-speech device analyzes the text data using data indicating how to read the morpheme and reads the text.
(a)言語解析用辞書を参照して文字データを読み上げる車載装置に対して読み方を示すデータを送信する言語解析サーバであって、
(b)サーバ用言語解析用辞書と、
(c)車載装置用言語解析用辞書と、
(d)前記サーバ用言語解析用辞書を参照して前記文字データを解析するサーバ用音声合成処理部と、
(e)前記車載装置用言語解析用辞書を参照して前記文字データを解析する車載装置用音声合成処理部とを有し、
(f)前記サーバ用音声合成処理部の解析結果と前記車載装置用音声合成処理部の解析結果とを比較して、読み間違いが発生する形態素を抽出し、該形態素の読み方を示すデータを作成することを特徴とする言語解析サーバ。
(A) a language analysis server that transmits data indicating how to read to a vehicle-mounted device that reads out character data with reference to a language analysis dictionary;
(B) a language analysis dictionary for servers;
(C) an on-vehicle device language analysis dictionary;
(D) a server speech synthesis processing unit that analyzes the character data with reference to the server language analysis dictionary;
(E) having a speech synthesis processing unit for in-vehicle device that analyzes the character data with reference to the dictionary for language analysis for in-vehicle device,
(F) Comparing the analysis result of the speech synthesis processing unit for the server and the analysis result of the speech synthesis processing unit for the in-vehicle device, extracting a morpheme in which a reading error occurs, and creating data indicating how to read the morpheme A language analysis server characterized by
(a)情報提供サーバが配信した文字データ、及び、言語解析サーバが送信した、前記文字データにおいて読み間違いが発生する形態素の読み方を示すデータを受信する受信部と、
(b)前記形態素の読み方を示すデータを使用して前記文字データを解析する言語解析部と、
(c)前記文字データを読み上げるための音声波形データを作成する音声波形生成部とを有することを特徴とする文章読み上げ装置。
(A) a receiving unit that receives character data distributed by the information providing server and data indicating how to read a morpheme that is read by the language analysis server and that causes a reading error in the character data;
(B) a language analysis unit that analyzes the character data using data indicating how to read the morpheme;
(C) A text reading device having a voice waveform generation unit for generating voice waveform data for reading the character data.
JP2004016099A 2004-01-23 2004-01-23 Sentence reading system and method Expired - Fee Related JP4539097B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004016099A JP4539097B2 (en) 2004-01-23 2004-01-23 Sentence reading system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004016099A JP4539097B2 (en) 2004-01-23 2004-01-23 Sentence reading system and method

Publications (2)

Publication Number Publication Date
JP2005208421A true JP2005208421A (en) 2005-08-04
JP4539097B2 JP4539097B2 (en) 2010-09-08

Family

ID=34901357

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004016099A Expired - Fee Related JP4539097B2 (en) 2004-01-23 2004-01-23 Sentence reading system and method

Country Status (1)

Country Link
JP (1) JP4539097B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007047859A (en) * 2005-08-05 2007-02-22 Nissan Motor Co Ltd Text analyzing method, text analyzing program, text analyzing device and text analyzing system

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0844743A (en) * 1994-05-23 1996-02-16 Oki Electric Ind Co Ltd Morpheme analyzing device
JPH09223143A (en) * 1996-02-16 1997-08-26 Fujitsu Ltd Document information processor
JPH10149361A (en) * 1996-11-18 1998-06-02 Canon Inc Information processing method and its device, and storage medium
JPH10171485A (en) * 1996-12-12 1998-06-26 Matsushita Electric Ind Co Ltd Voice synthesizer
JPH11338498A (en) * 1998-05-21 1999-12-10 Mitsubishi Electric Corp Voice synthesizer
JP2001521195A (en) * 1997-10-22 2001-11-06 ソニコン,インク. System and method for aurally representing a page of SGML data
JP2002118624A (en) * 2000-10-10 2002-04-19 Taito Corp Generation system for sounding effect sound in portable mobile terminal

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0844743A (en) * 1994-05-23 1996-02-16 Oki Electric Ind Co Ltd Morpheme analyzing device
JPH09223143A (en) * 1996-02-16 1997-08-26 Fujitsu Ltd Document information processor
JPH10149361A (en) * 1996-11-18 1998-06-02 Canon Inc Information processing method and its device, and storage medium
JPH10171485A (en) * 1996-12-12 1998-06-26 Matsushita Electric Ind Co Ltd Voice synthesizer
JP2001521195A (en) * 1997-10-22 2001-11-06 ソニコン,インク. System and method for aurally representing a page of SGML data
JPH11338498A (en) * 1998-05-21 1999-12-10 Mitsubishi Electric Corp Voice synthesizer
JP2002118624A (en) * 2000-10-10 2002-04-19 Taito Corp Generation system for sounding effect sound in portable mobile terminal

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007047859A (en) * 2005-08-05 2007-02-22 Nissan Motor Co Ltd Text analyzing method, text analyzing program, text analyzing device and text analyzing system

Also Published As

Publication number Publication date
JP4539097B2 (en) 2010-09-08

Similar Documents

Publication Publication Date Title
US8370143B1 (en) Selectively processing user input
US7318054B2 (en) Update system and update method for updating search data
US8321375B2 (en) Search data update method and search data update system
US8583087B2 (en) Disambiguating ambiguous characters
KR101802487B1 (en) Location-based searching
US20030040341A1 (en) Multi-modal method for browsing graphical information displayed on mobile devices
US20110047456A1 (en) Method and Apparatus for Text Input
EP3591338A2 (en) Navigation method, navigation device, device and medium
JP2007010368A (en) Navigation device, navigation method, and navigation program
JP5529092B2 (en) Note data translation apparatus, note data translation method, and note data translation program
US20040098248A1 (en) Voice generator, method for generating voice, and navigation apparatus
JP3267202B2 (en) Vehicle navigation device
US20160047670A1 (en) Method and apparatus for navigation
JP4364300B1 (en) E-mail route search system, route search method, computer program
JP4539097B2 (en) Sentence reading system and method
JP2002099531A (en) Word registration system and word registration device, word transmission device and word registration method used therefor
JP6353199B2 (en) Information processing apparatus, information processing method, and program
JP4182490B2 (en) Vehicle navigation device and storage medium
JP2010117188A (en) Navigation device and navigation method
JP2008293507A (en) Mobile terminal and program for global navigation system
JP2007018104A (en) Global navigation system, information distribution server, portable terminal, and program
JP6498574B2 (en) Information processing device, program, terminal
JP2004145732A (en) Voice identification support chinese character input system and method
JP2017182251A (en) Analyzer
KR100644027B1 (en) Voice information providing system based on text data transmission

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061115

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091027

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100601

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100614

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130702

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140702

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees