JPH06202686A

JPH06202686A - 電子ブックプレーヤとその処理方法

Info

Publication number: JPH06202686A
Application number: JP4362169A
Authority: JP
Inventors: Tetsuya Kagami; 徹也加賀美
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1992-12-28
Filing date: 1992-12-28
Publication date: 1994-07-22

Abstract

(57)【要約】【目的】既存の書籍本文を元の活字のまま表示しつ
つ、朗読音を聴き、電子ペンからの自由な手書きを可能
にしつつその保存を可能にする電子ブックプレーヤを提
供する。【構成】電子ブックプレーヤは、書籍文字テキストを
入力する第１入力装置１、電子ペンからの手書き文字を
文字テキストとして入力する第２入力装置２、これら入
力された文字テキストを文章解析する文章解析部１９、
解析されたデータを音声としてスピーカなどの音声出力
装置１３に出力する音声合成規則部１０および音声合成
部２４を有する。文章解析部１９は、メモリ装置２１に
記憶されている第１の辞書１４、第２の辞書１５、第３
の辞書２２を参照して、音韻・韻律制御記号を生成す
る。この音韻・韻律記号が音声合成規則部１０および音
声合成部２４を介して音声出力装置１３に音として出力
される。好適には、音韻・韻律制御記号を液晶表示装置
１７、記録媒体記録装置１８に出力する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は既存の書籍本文をもの活
字のまま表示しつつ朗読音を聴くことができ、自由な手
書き書き込みとその保存を可能にする電子ブックプレー
ヤとその信号処理方法に関する。

【０００２】

【従来の技術】ＣＤなどに記録されている情報を音声と
して出力する電子ブックプレーヤは、たとえば、データ
ディスクマン（ソニー社、商品名）などとして、すでに
知られている。また、手書き文字を入力する電子ブック
プレーヤは、たとえば、パームトップコンピュータ（ソ
ニー社、商品名）などとして、すでに知られている。

【０００３】

【発明が解決しようとする課題】従来の音声出力を行う
電子ブックプレーヤは、記録媒体に記録されている本文
テキストに対応する音声として、文や句、あるいは、単
語単位の記録音を用いているから、肉声の特徴を再現し
やすいという反面、記憶容量に限界があり、大容量の本
文テキストを読み上げることができないという問題があ
る。

【０００４】また従来の手書き文字入力用電子ブックプ
レーヤは、データ検索専用であるため、文字情報を手軽
な電子ペンなどによって入力し保存することが出来る機
能が存在しないという問題がある。

【０００５】本発明は、上記問題に鑑み、基本の書籍本
文を元の活字のまま表示しつつ、朗読音を聴き、自由な
手書き文字の書き込みとその保存を可能にする電子ブッ
クプレーヤを提供することを目的とする。また本発明
は、上記電子ブックプレーヤに適用する信号処理方法を
提供することを目的とする。

【０００６】

【課題を解決するための手段】上記問題を解決し、上述
した目的を達成するため、本発明の電子ブックプレーヤ
は、文字テキストを読み取る手段と、該読み取った文字
テキストを辞書を参照して音韻・韻律に文章解析する手
段と、該文章解析した結果を出力する手段とを有する。

【０００７】特定的には、前記読み取り手段は、文字テ
キストが記録されている記録媒体から文字テキストを読
み取る。

【０００８】また特定的には、前記読み取り手段は、手
書き文字を読み取り、解析して文字テキストに変換す
る。好適には、前記読み取り手段は、表示画面に電子ペ
ンで手書きされた文字を読み取り、解析して文字テキス
トに変換する。さらに好適には、前記読み取り手段は、
認識用特徴辞書とストローク規則を用いて前記解析を行
う。

【０００９】また好適には、前記文章解析手段は、前記
読み取られた文字テキストを字種判定する手段と、前記
字種判定されたデータを、自立語辞書、付属語辞書、活
用辞書、接続辞書、および、単独漢字辞書を参照して、
辞書し検索し仮説候補を選択する手段と、該選択された
仮説候補を、アクセント変化規則とポーズ付与規則を用
いて、音韻・韻律制御記号を生成する手段とを有する。

【００１０】さらに好適には、前記文章解析手段は、前
記音韻・韻律制御記号を出力する手段をさらに有する。

【００１１】特定的には、前記音韻・韻律制御記号は、
表示装置に出力される。あるいは、前記音韻・韻律制御
記号は、記録媒体に記録される。

【００１２】好適には、前記文章解析した結果を出力す
る手段は、音声合成規則手段と、音声合成部とを有す
る。

【００１３】

【作用】電子ブックプレーヤにおいては、文字テキスト
を文章解析し、音韻韻律制御記号に変換し、音声合成規
則処理および音声合成し、合成音として出力する。

【００１４】また、電子ブックプレーヤにおいては、文
字テキストを文章解析し、音韻韻律制御記号に変換し、
音声合成規則処理および音声合成する。

【００１５】好適には、前記文字テキストを記録媒体か
ら読み取り、前記文章解析する。あるいは、前記文字テ
キストを手書き文字を読み取り、前記文章解析する。

【００１６】好適には、前記合成音を意味する記号を表
示手段に出力する。あるいは、前記合成音を意味する記
号を記録手段に出力する。

【００１７】

【実施例】図１は本発明の実施例の電子ブックプレーヤ
内の信号処理部分の構成を示す構成図である。電子ブッ
クプレーヤは、第１入力装置１、第２入力装置２、演算
処理装置２０、メモリ装置２１、液晶表示装置１７、記
録媒体記録装置１８、および、音声出力装置１３を有す
る。

【００１８】演算処理装置２０は、文章解析部１９と、
音声合成規則部１０と、音声合成部１１と音声出力部１
２とで構成される音声合成部２４を有する。文章解析部
１９は、入力部３、入力文保持部４、字種判定部５、辞
書検索部６、仮説候補選択部７、音韻・韻律制御信号生
成部８、および、文字／制御記号出力部９を有する。た
だし、文字／制御記号出力部９は本発明の電子ブックプ
レーヤにおいてオプショナルなものであり、必ずしも必
須の構成要件ではない。その詳細については後述する。

【００１９】メモリ装置２１には、第１の辞書１４、第
２の辞書１５、音声単位記憶部１６、および、第３の辞
書２２が記憶されている。第１の辞書１４は、自立語辞
書、付属語辞書、活用語尾辞書、接続辞書、単独漢字辞
書を含む。第２の辞書１５は、アクセント変化規則、ポ
ーズ付与規則を含む。第３の辞書２２は、認識用特長辞
書、ストローク規則を含む。

【００２０】第１入力装置１は、記録媒体駆動読み取り
装置であり、書籍からの本文テキストを入力文として入
力部３に入力する。第２入力装置２は電子ペン入力読み
取り装置であり、電子ペンから入力した情報を入力部３
に入力する。

【００２１】図２は、図１に示した電子ブックプレーヤ
の構成を具体化した電子ブックプレーヤ２００の斜視図
である。電子ブックプレーヤ２００の本体２０２内に図
１に示した演算処理装置２０、メモリ装置２１が内蔵さ
れている。電子ブックプレーヤ本体２０２に表面に、表
示装置の１例しての図１に示した液晶表示装置１７の液
晶画面２０４が配設され、また、図１に示した音声出力
装置１３の１例としてのスピーカ２０６配設されてい
る。さらに、電子ブックプレーヤ２００には、図１に示
した音声出力装置１３の他の形態としてスピーカジャッ
ク２０８に接続されたイヤホン２１０が設けられてい
る。図１に示した第２入力装置２として、図２において
は、電子ペン２３０が設けられている。さらに図１に示
した第１入力装置１と記録媒体記録装置１８に相当する
記録媒体として、図２においては、フロッピディスク２
２０が使用される。つまり、この実施例ではテキストデ
ータの読み込みと保存用データとを同じフロッピディス
ク２２０を用いる。もちろん、フロッピディスク２２０
に代えて、ＩＣメモリカードなどを用いることができ
る。

【００２２】上述した電子ブックプレーヤ２００におけ
る処理について述べる。記録媒体記録装置１８の１例と
して示したフロッピディスク２２０には、日本語漢字仮
名混じり文を通常のテキストデータとして記録されてい
る。第１入力装置１はフロッピディスク２２０を駆動し
てその中に記録されている上記テキストデータを読み取
り、入力部３に印加する。第２入力装置２は、電子ペン
２３０で利用者が液晶画面２０４に上に手書きした文字
をテキストデータに変換して読み取り、入力部３に印加
する。

【００２３】図３は第２入力装置２の読み取り処理を示
すフローチャートである。第２入力装置２は、液晶画面
２０４に電子ペン２３０を用いて手書きされた文字をサ
ンプリングし、平滑化処理を行う。ついで、第２入力装
置２は平滑化処理したデータを折れ線化する。第２入力
装置２は折れ線化したデータを文字の書体を分析してス
トロークとして表した種々の基本ストロークと比較し
て、特徴抽出を行う。このため、第２入力装置２はメモ
リ装置２１内の第３の辞書２２に含まれているストロー
ク規則を用いて基本ストロークとの比較を行う。第２入
力装置２は、メモリ装置２１内の第３の辞書２２に含ま
れている認識用特徴辞書を参照して、上記抽出された特
徴から認識辞書を検定する。認識用特徴辞書は文字辞書
と部首辞書とを含む。つまり、第２入力装置２は文字辞
書と部首自署しを用いて特徴抽出されたパターンを認識
辞書検定を行う。最後に第２入力装置２は候補文字列を
抽出して入力部３に印加する。これにより、液晶画面２
０４に電子ペン２３０を用いて手書きされた文字も、第
１入力装置１を介してフロッピディスク２２０から読み
出されたテキストデータと同様に、入力部３に入力され
る。

【００２４】このように、入力部３には、フロッピディ
スク２２０からのテキストデータ、および、電子ペン２
３０を用いて液晶画面２０４に手書きされた文字がテキ
ストデータ、またはいずれかかが、入力される。入力部
３に入力されたテキストデータは、後述する信号処理の
ために、入力文保持部４に保持される。入力文保持部４
としては、たとえば、演算処理装置２０に接続されたラ
ンダムアクセスメモリ（ＲＡＭ）などで実現された主記
憶装置（図示せず）が用いられる。

【００２５】字種判定部５は入力文の各文字列データの
字種を判定する。たとえば、Ｓｈｉｆｔ−ＪＩＳコード
など各種コードに対応させて、各文字が漢字か、平仮名
か、片仮名か、句読点か、あるいは、その他の記号か文
字であるかを判定する。

【００２６】辞書検索部６はこのようにして字種が判定
されたものを文頭から、自立語辞書、付属語辞書、活用
語尾辞書、接続辞書、単独漢字辞書を含む第１の辞書１
４を検索して、全ての読みや単語の区切りなどの仮説候
補を列挙する。

【００２７】仮説候補選択部７は、上記仮説候補から、
第１の辞書１４の中の接続辞書など参照して、最も相応
しい候補を選択していく。その候補選択の具体例を述べ
る。入力例文：「私は山に行く。」結果：（私＝読み：わたし、品詞：名詞、アクセント
型：０）（は＝読み：わ、品詞：助詞、アクセント型：−）（山＝読み：やま、品詞：名詞、アクセント型：０）（に＝読み：に、品詞：助詞、アクセント型：−）（行く＝読み：いく、品詞：カ行五段動詞、アクセント
型：０）（。＝句点）

【００２８】上記候補選択結果は音韻・韻律制御信号生
成部８に送出され、音韻・韻律制御信号生成部８におい
て、第２の辞書１５に記録されているアクセント変化規
則、ポーズ付与規則を検索して、音声合成規則部１０に
必要な音韻と韻律のパラメータ抽出に必要な制御記号と
して文字／制御記号出力部９に出力する。

【００２９】文字／制御記号出力部９は、上記音韻・韻
律制御信号生成部８で生成した音韻と韻律とを、好適に
は制御記号も、液晶表示装置１７に出力して液晶画面２
０４に表示し、さらに記録媒体記録装置１８としてのフ
ロッピディスク２２０に記憶する。液晶表示装置１７の
液晶画面２０４には入力文だけを表示すればよいが、必
要に応じて、音韻・韻律制御信号生成部８における解析
の途中結果や、下記に示す制御記号を表示させることも
できる。

【００３０】出力制御記号例：（WATASHI'-WA)2(YAMA'NI)1(IKU')

【００３１】この出力制御記号例において、括弧記号は
文の切れ目、数字はポーズ時間、ローマ字は音韻制
御、’記号はアクセント型を示し、これらをもとに音声
合成部２４の音韻と韻律ぱ抽出し、制御する。記録媒体
記録装置１８としてのフロッピディスク２２０にも、入
力文だけを記録させればよいが、必要に応じて、音韻・
韻律制御信号生成部８における解析の途中結果や、上記
に示す制御記号を記録させることもできる。

【００３２】音声合成規則部１０は音声単位記憶部１６
に記憶されている音声素片データを上記出力制御記号に
従って検索し、音声合成部１１において時系列に合成
し、時系列に合成したものを音声出力部１２において合
成音声として音声出力装置１３、つまり、図２における
スピーカ２０６またはイヤホン２１０から音声として出
力する。

【００３３】音声合成規則部１０については、好適に
は、「複素ケプストラム分析法を用いた音声合成法」と
して、本件出願人がすでに提案している方法を用いるこ
とができる。図４はその音声合成規則部１０の詳細構成
を示す。音声合成規則部１０は音韻制御・音声単位読み
出し部１０６と韻律制御パラメータ生成処理部１１４を
有する。音韻制御・音声単位読み出し部１０６は、音韻
について、音韻規則１０２と音韻記号列１０４を用い
て、合成波形データ１０８を生成する。韻律制御パラメ
ータ生成処理部１１４は、韻律について、韻律規則１１
０と文節アクセント・ポーズ１１２を用いて、ピッチパ
ターン１１６を生成する。このようにして、生成された
合成波形データ１０８とピッチパターン１１６が音声合
成部１１において、波形合成され、音声出力部１２から
朗読音などの音声として出力される。

【００３４】本発明の電子ブックプレーヤの実施に際し
ては、上述した実施例に限定されず、種々の変形態様を
採りうる。たとえば、図１に示した表示装置１７の１例
として、図２には液晶表示装置を用いた場合について述
べたが、液晶表示装置に限らず、その他種々の表示装置
を用いることができる。

【００３５】また、図１に示した第１入力装置１と記録
媒体記録装置１８の例として、図２においては同じフロ
ッピディスク２２０を用いた例を例示したが、たとえ
ば、第１入力装置１としてはＣＤなどから文字テキスト
を入力し、記録媒体記録装置１８として、フロッピディ
スク２２０またはＩＣカードまたはメモリカードなどを
用いるように、上記例とは異なる媒体を、第１入力装置
１と記録媒体記録装置１８とで異ならせて用いることも
できる。さらに、記録媒体記録装置１８の例としては、
上述したフロッピディスク２２０またはＩＣカードまた
はメモリカードなどのように、交換性、形態性に優れた
外部記録媒体に限らず、電子ブックプレーヤ内に収容さ
れている半導体記憶装置（図示せず）あるいは、辞書な
どが記憶されているメモリ装置２１などの、電子ブック
プレーヤの内部に保持させてもよい。

【００３６】上述した電子ブックプレーヤは、第１入力
装置１から書籍本文を元の活字のまま入力する例を示し
たが、書籍本文以外の文字を入力することもできる。

【００３７】図２においては、１枚の液晶画面２０４に
文字などを表示する例を示したが、この液晶画面２０４
を見開き様に使用して、あるいは、２つの液晶画面を用
いて、書籍を見るのと同様に感じで文字情報などを表示
することができる。

【００３８】

【発明の効果】本発明の電子ブックプレーヤは、大容量
の本文テキストを合成音で自動的に朗読出力できるか
ら、液晶などの表示装置の画面に表示された文字データ
を読まないでも、朗読音だけで本文の内容を理解するこ
とができるという効果を奏する。

【００３９】また本発明の電子ブックプレーヤにおいて
は、表示装置に表示された文字データを朗読音を聴きな
がら読むことによって読み方を知らない漢字の読みを学
習できたり、黙読の際に意識を集中しやすくするという
効果を奏する。

【００４０】さらに本発明の電子ブックプレーヤは、既
存の書籍本文を表示装置の画面に表示できるから基本の
大量の情報を電子化できるという効果を奏する。これに
より、大量情報の携帯性を改善し、書棚などの保管スペ
ースを減少させることができる。特に、従来の電子ブッ
クプレーヤが辞典などの検索を優先したジャンルに偏っ
ているのに対して、本発明の電子ブックプレーヤは一般
の書籍類の電子ブック化を促進する。

【００４１】本発明の電子ブックプレーヤはまた、電子
ペン入力技術を用いて、漢字と仮名との双方によるデー
タ入力を可能にし、それらを記録媒体に保存することを
も可能にするので、手帳にメモを残す機能も実現でき
る。

【００４２】本発明の電子ブックプレーヤはさらに、電
子ペン入力技術を用いることにより、従来の電子ブック
プレーヤの操作キー類をなくし、全ての操作を液晶表示
装置などの表示装置の画面上の電子ペン入力で行うこと
ができるという効果を奏する。

【図面の簡単な説明】

【図１】本発明の電子ブックプレーヤの１実施例として
の信号処理構成図である。

【図２】図１に示した処理装置を有する電子ブックプレ
ーヤの概略構成図である。

【図３】図１に示した信号処理構成における手書き文字
入力処理を示すフローチャートである。

【図４】図１に示した信号処理構成における音声合成規
則部と音声合成部の詳細構成図である。

【符号の説明】

１・・第１入力装置２・・第２入力装置３・・入力部４・・入力文保持部５・・字種判定部６・・辞書検索部７・・仮説候補選択部８・・音韻・韻律制御信号生成部９・・文字／制御記号出力部１０・・音声合成規則部１１・・音声合成部１２・・音声出力部１３・・音声出力装置１４・・第１の辞書１５・・第２の辞書１６・・音声単位記憶部１７・・液晶表示装置１８・・記録媒体記録装置１９・・文章解析部２０・・演算処理装置２１・・メモリ装置２２・・第３の辞書２４・・音声合成部１０２・・音韻規則１０４・・音韻記号列１０６・・音韻制御・音声単位読み出し部１０８・・合成波形データ１１０・・韻律規則１１２・・文節アクセント・ポーズ１１４・・韻律制御パラメータ生成処理部１１６・・ピッチパターン２００・・電子ブックプレーヤ２０２・・電子ブックプレーヤ本体２０４・・液晶画面２０６・・スピーカ２０８・・スピーカジャック２１０・・イヤホン２２０・・フロッピディスク２３０・・電子ペン

Claims

【特許請求の範囲】

【請求項１】文字テキストを読み取る手段と、該読み取った文字テキストを辞書を参照して音韻・韻律
に文章解析する手段と、該文章解析した結果を出力する手段とを有する電子ブッ
クプレーヤ。
【請求項２】前記読み取り手段は、文字テキストが記録
されている記録媒体から文字テキストを読み取る、請求
項１記載の電子ブックプレーヤ。
【請求項３】前記読み取り手段は、手書き文字を読み取
り、それを解析して文字テキストに変換する、請求項１
記載の電子ブックプレーヤ。
【請求項４】前記読み取り手段は、表示画面に電子ペン
で手書きされた文字を読み取り、それを解析して文字テ
キストに変換する、請求項３記載の電子ブックプレー
ヤ。
【請求項５】前記読み取り手段は、認識用特徴辞書とス
トローク規則を用いて前記解析を行う、請求項３または
４記載の電子ブックプレーヤ。
【請求項６】前記文章解析手段は、前記読み取られた文字テキストを字種判定する手段と、前記字種判定されたデータを、自立語辞書、付属語辞
書、活用辞書、接続辞書、および、単独漢字辞書を参照
して、辞書し検索し仮説候補を選択する手段と、該選択された仮説候補を、アクセント変化規則とポーズ
付与規則を用いて、音韻・韻律制御記号を生成する手段
とを有する請求項１〜５いずれか記載の電子ブックプレ
ーヤ。
【請求項７】前記文章解析手段は、前記音韻・韻律制御
記号を出力する手段をさらに有する、請求項６記載の電
子ブックプレーヤ。
【請求項８】前記音韻・韻律制御記号は、表示装置に出
力される、請求項７記載の電子ブックプレーヤ。
【請求項９】前記音韻・韻律制御記号は、記録媒体に記
録される、請求項７記載の電子ブックプレーヤ。
【請求項１０】該文章解析した結果を出力する手段は、音声合成規則手段と、音声合成部とを有する請求項１〜９いずれか記載の電子
ブックプレーヤ。
【請求項１１】文字テキストを文章解析し、音韻韻律制
御記号に変換し、音声合成規則処理および音声合成し、合成音として出力する文字テキストを合成音として出力
する電子ブックプレーヤの信号処理方法。
【請求項１２】文字テキストを文章解析し、音韻韻律制
御記号に変換し、音声合成規則処理および音声合成し、合成音を意味する記号を出力する文字テキストを合成音
を意味する記号として出力する電子ブックプレーヤの信
号処理方法。
【請求項１３】前記文字テキストを記録媒体から読み取
り、前記文章解析する請求項１１または１２記載の電子
ブックプレーヤの信号処理方法。
【請求項１４】前記文字テキストを手書き文字を読み取
り、前記文章解析する請求項１１または１２記載の電子
ブックプレーヤの信号処理方法。
【請求項１５】前記文字テキストを手書き文字を読み取
り、前記文章解析する請求項１３記載の電子ブックプレ
ーヤの信号処理方法。
【請求項１６】前記合成音を意味する記号を表示手段に
出力する請求項１１〜１５いずれか記載の電子ブックプ
レーヤの信号処理方法。
【請求項１７】前記合成音を意味する記号を記録手段に
出力する請求項１１〜１４いずれか記載の電子ブックプ
レーヤの信号処理方法。
【請求項１８】前記合成音を意味する記号を記録手段に
出力する請求項１５記載の電子ブックプレーヤの信号処
理方法。