JP4075349B2 - 電子書籍装置および電子書籍データ表示制御方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、書籍データに対応した書籍内容を有名人または声優等の音声で再生可能な電子書籍装置および電子書籍データ表示制御方法に関する。
【０００２】
【従来の技術】
近年、文字や音声や画像等の電子化が進み、これらのデータを組み合わせた所謂マルチメディアデータを、電話回線、インターネット等のネットワークまたは通信手段を介して、ＰＣ（パーソナルコンピュータ）等の端末に配信し、このマルチメディアデータを再生する携帯型の端末が開発されている。こうした携帯型の端末には電子化された書籍データを特定の音声で読み上げ再生する電子書籍装置がある。
【０００３】
電子書籍装置は電子化された書籍データを記憶する記憶媒体、液晶表示部、読みたい書籍データの選択やページ捲り等を手動操作する操作入力部、電子書籍装置の各部を制御する制御部等を備え、操作入力部により所望の書籍データが選択されると、制御部は記憶媒体から選択された書籍データを読み出して、その書籍データの１ページ目のデータを液晶表示部に表示する。また操作入力部においてページ捲りが指示されると液晶表示部に表示されている書籍データを次ページに切り替えて表示する。
【０００４】
上述の電子書籍装置は従来の紙の書籍と比較して、資源の消費を抑えることができ、また一つの装置で複数の書籍データを記憶できるので携帯に便利である。更に書籍の管理が容易である。このように様々な利点を持つことから、近年電子書籍装置の開発が急速に進められている。
【０００５】
【発明が解決しようとする課題】
しかしながら、上述の電子書籍装置は従来の紙の書籍と同様に文字データやイメージデータを表示することによる視覚からの読書を提供するだけなので表現力に乏しい。そのため、文字と音声や画像とを組み合わせたより豊かな表現力の実現が望まれる。
【０００６】
また、書籍といっても物語や小説のように主に文字で構成されるものから漫画のように画像と文字とが混在するものがある。漫画の場合は１ページ内に文字も画像も数多く表示されるため、携帯型の電子書籍装置では表示画面の大きさによる制約等によって文字や画
像を見にくいという問題があった。
【０００７】
一方、携帯電話端末の普及やその他の携帯端末の普及に伴い、読者は上述の携帯型の電子書籍装置を含め、多くの携帯機器を携帯して利用することが多い。そのため携帯する各機器それぞれの機能を同時に使用する場合における操作性や携帯時の利便性を向上することが望まれ、上述の電子書籍装置についても更なる開発の余地を残している。
【０００８】
本発明の課題は、書籍データに対応した書籍内容を希望する有名人、声優等の人物またはキャラクタの音声で読み上げ再生可能な電子書籍装置および電子書籍データ表示制御方法を提供することである。
【０００９】
また、本発明の課題は、書籍データに対応した書籍内容を読み上げてくれる読み上げキャラクタ画像、およびこのキャラクタ画像の音声データをいつでもどこにいても入手することができ、この入手した書籍データに対応した書籍内容を希望する有名人、声優等の人物、アニメまたはキャラクタ等の音声で、読み上げ再生可能な電子書籍装置および電子書籍データ表示制御方法を提供することである。
【００１０】
また、本発明の課題は、読者にとって快適な音声で書籍内容を読み上げ再生することが可能な電子書籍装置および電子書籍データ表示制御方法を提供することである。
【００１１】
【課題を解決するための手段】
本発明は、このような課題を達成するために、次のような特徴を備えている。
【００１２】
請求項１記載の発明に係る電子書籍装置は、
書籍データおよび画像を表示する表示部（図２、図３の表示部４）を備えた電子書籍装置（図２の電子書籍装置１）において、
複数の書籍名を前記表示部に一覧表示させる第１の表示制御手段（図３のＣＰＵ２；図８のＥ１；図１０（Ａ））と、
この第１の表示制御手段の制御により表示された複数の書籍名のなかから一つの書籍名を選択する書籍名選択手段（図３の入力部３；図７のＦ４；図８のＥ２）と、
この書籍名選択手段により選択された書籍名に対応する書籍データの配信を外部の書籍配信装置（図３の書籍配信センター３０）へ要求し、その後、前記書籍配信装置からこの要求された書籍データとこの書籍データに含まれている文字データを読み上げる者を示す複数の読み上げ者画像とを受信する受信手段（図３のアンテナ１０；図７のＦ８）と、
この受信手段により受信された書籍データに関連する複数の登場人物画像を前記表示部に表示させる第２の表示制御手段（図３のＣＰＵ２；図８のＥ４；図１０（Ｂ））と、
この第２の表示制御手段の制御により表示された複数の登場人物画像に割り当てられる複数の読み上げ者画像を前記表示部に表示させる第３の表示制御手段（図３のＣＰＵ２；図８のＥ５；図１１（Ａ））と、
この第３の表示制御手段の制御により複数の読み上げ者画像と複数の登場人物画像とを一覧表示させた状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定を行う画像指定手段（図３の入力部３；図８のＥ７；図１１（Ｂ））と、
この画像指定手段により指定された読み上げ者画像と登場人物画像とが対応付けられた後に、前記受信手段により受信された書籍データと前記登場人物画像とを表示させる第４の表示制御手段（図３のＣＰＵ２；図９のＤ６；図１２（Ｂ））と、
この第４の表示制御手段の制御により書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを前記画像指定手段により登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げる読み上げ制御手段（図３のＣＰＵ２；図９のＤ７；図１２（Ｂ））と、
を備えていることを特徴とする。
【００１３】
請求項２記載の発明に係る電子書籍装置は、
予め定められている書籍データおよび画像を表示する表示部（図２、図３の表示部４）を備えた電子書籍装置（図２の電子書籍装置１）において、
前記書籍データに関連する複数の登場人物画像と複数の読み上げ者画像を前記表示部に一覧表示させる第１の表示制御手段（図３のＣＰＵ２；図８のＥ４；図８のＥ５；図１１（Ｂ））と、
この第１の表示制御手段の制御により複数の読み上げ者画像と複数の登場人物画像とを一覧表示させた状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定を行う画像指定手段（図３の入力部３；図８のＥ７；図１１（Ｂ））と、
この画像指定手段により指定された読み上げ者画像と登場人物画像とが対応付けられた後に、前記書籍データと前記登場人物画像とを表示させる第２の表示制御手段（図３のＣＰＵ２；図９のＤ６；図１２（Ｂ））と、
この第２の表示制御手段の制御により書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを前記画像指定手段により登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げる読み上げ制御手段（図３のＣＰＵ２；図９のＤ７；図１２（Ｂ））と、
を備えていることを特徴とする。
【００１５】
【発明の実施の形態】
以下、図を参照して本発明に係る電子書籍装置、および音声再生システムの実施の形態を詳細に説明する。
〔第1の実施の形態〕
まず構成を説明する。
図１はこの発明の音声再生システムの使用状態例、音声再生システムと外部機器との通信の様子を模式的に示す図であり、図２は音声再生システムを構成する電子書籍装置と携帯機器との間のデータ通信の様子を模式的に示す図であり、図３は電子書籍装置の構成、外部の書籍データ配信センターに設置されたホストサーバの構成、及び携帯機器の構成を示すブロック図であり、図４は電子書籍 内部におけるＲＡＭのメモリ構成を示す図であり、図５は外部の書籍配信センターにおけるＲＯＭのメモリ構成を示す図であり、図６は著作権者端末内部におけるＲＡＭのメモリ構成を示す図である。
【００１６】
図１および図３に示すように、本実施の形態における音声再生システム１００は携帯型の電子書籍装置１及び携帯機器２０により構成される。
図１及び図２に示すように電子書籍装置１は、蝶番状部材（図示省略）を介して開閉自在に連結される表示パネル１Ａ，１Ｂにより構成されている。表示パネル１Ａには例えば液晶ディスプレイにより構成される表示部４が備えられる。また、表示パネル１Ｂにも同様の表示部４が備えられ、更に通話用のマイク１Ｃが備えられる。そして、表示パネル１Ａ，１Ｂの内部には図３に示す電子書籍装置１の電子回路が内蔵されている。また図示せぬが表示パネル１Ａ，１Ｂの表面や側面または裏面の所定位置には後述する入力部３（ダイヤル部３ｄ、オートダイヤルスイッチ３Ｓを含む）、後述する回転スイッチ１１、電源スイッチ、その他のスイッチが設けられるとともに携帯機器２０に対してデータ送信するためのデータ送信窓が設けられる。裏面には電池パックやスピーカ１Ｅ等が設けられている。
【００１７】
携帯機器２０は図１及び図２に示すように機器本体２０Ａとイヤホン２８とによって概略構成され、機器本体２０Ａ内部には図３に示す携帯機器２０の電子回路が内蔵される。また図示せぬが機器本体２０Ａの所定位置には後述する操作入力部２２が設けられるとともに電子書籍装置１から送信されるデータを受信するためのデータ受信窓が設けられる。また、規格品のイヤホンプラグを着脱可能に接続するイヤホンジャック等が設けられている。
この携帯機器２０は電子書籍装置１から無線送信される音声データ（通話音声データ及び書籍の読み上げ音声データを含む）を受信し、イヤホンまたはヘッドホン（以下、単にイヤホン２８という。）から音声を出力する。
【００１８】
本発明の電子書籍装置１は、書籍データを音声に変換して読み上げ再生する書籍データ読み上げ機能、外部との通話及びデータ通信を行う電話機能、及びカレンダー情報を表示する時計機能を備える。
以下の説明において「書籍データ」といった場合は書籍に含まれる文字データ、イメージデータ、書籍に関連するデータ、読み上げ音声再生用データを含む。書籍に関連するデータとは、例えば書籍名、著作者名、出版社名等といった書籍の内容以外の情報である。読み上げ音声再生用データとは、電子書籍装置１の後述する読み上げ音声生成部１３において読み上げ音声データを生成する際に必要な各種データである。例えば、漫画タイプ、小説タイプといった書籍の種類や、擬音（爆発音や風音等）の再生情報（以下、擬音データと呼ぶ。）、登場人物の音声タイプを設定した登場人物別音声テーブル等を含む。
【００１９】
書籍モードにおいて、電子書籍装置１は入力部３の操作により読者から選択された書籍データに含まれる文字データ及びイメージデータを表示部４に表示するとともに、前記書籍データの文字データを音声に変換（テキスト音声合成）し、電子書籍装置１本体に設けられるスピーカ１Ｅまたは携帯機器２０に設けられるイヤホン２８から出力する。イヤホン２８から出力する場合は前記書籍データに基づく読み上げ音声データ（詳細については後述する）を、送信部１６を介して携帯機器２０に送信する。携帯機器２０は受信部２６において受信した読み上げ音声データをイヤホン２８から出力する。
【００２０】
また、電話モードにおいて電子書籍装置１は、図１に示すように、携帯電話やＰＨＳ（Personal Handyphone System）等の移動体通信端末の基地局４３を介して移動体通信網に通信接続し、相手先の移動体通信端末４４と通話したり、更に公衆回線網等のネットワーク回線４０を介して相手先の固定電話と通話できる。また、ネットワーク４０からアクセス可能な書籍データ配信サイトのホストサーバ３０（書籍データ配信センターＨＳ）にアクセスして所望の書籍データをダウンロードしたり、外部のＰＣ（パーソナルコンピュータ）との間で電子メールを送受信できる。
【００２１】
更に、書店やコンビニエンスストア等に設置された書籍データ配信端末４２と電子書籍装置１を有線または無線で接続し、書籍データ配信端末４２に蓄積されている書籍データをダウンロードしたり、書籍データ配信端末４２を介してアクセス可能なホストサーバ３０に蓄積された書籍データをダウンロードすることも可能である。
また、電子書籍装置１において書籍データを音声に変換して読み上げ再生しているとき（書籍モード実行中）に電話の着信を検出すると、その旨を所定の着信音（アラーム音や着信メロディ等を含む）や音声やメッセージ表示または振動により報知するとともに書籍データの読み上げ再生を停止する。通話が終了すると、読み上げ再生を停止した位置から書籍データの読み上げを再開する。
更に、時計モードにおいて、電子書籍装置１は現在時刻や日付等のカレンダー情報を表示部４に表示する。
【００２２】
次に、電子書籍装置１と携帯機器２０との間におけるデータ通信の概要について、図２を参照して説明する。
電子書籍装置１は通話時には通話音声データを送信部１６（図３参照）から携帯機器２０へ送信する。また、書籍データ読み上げ再生中には読み上げ音声データを送信部１６か
ら携帯機器２０へ送信する。携帯機器２０は受信部２６において受信した通話音声データや読み上げ音声データをイヤホン２８から出力する。また、電子書籍装置１において電話の着信があると送信部１６から携帯機器２０に対して着信報知指示データを送信する。携帯機器２０は受信部２６において受信した着信報知指示データに従って着信を音や振動により報知する。また、書籍データの読み上げ再生中における電話の着信時には、電子書籍装置１は携帯機器２０に対して再生停止指示データを送信する。携帯機器２０は受信した再生停止指示データに従って読み上げ音声の再生を停止する。
【００２３】
次に図３を参照して、電子書籍装置１の回路構成、書籍データ配信センターＨＳに設置されたホストサーバ３０の回路構成、携帯機器２０の回路構成、及び著作権者端末３０Ｂの回路構成を説明する。
図３に示すように電子書籍装置１は、ＣＰＵ（Central Processing Unit）２、入力部３、表示部４、表示駆動回路５、ＲＯＭ（Read Only Memory）６、内部ＲＡＭ（Random Access Memory）７、外部ＲＡＭ８、通信Ｉ／Ｆ（InterFace）部９、アンテナ部１０、回転スイッチ部１１、計時部１２、読み上げ音声生成部１３、音声入力部１４、音声出力部１５、及び送信部１６から構成される。
【００２４】
電子書籍装置１のＣＰＵ２は、入力部３から供給されるキー操作信号に基づき、ＲＯＭ６の所定の記憶領域に格納されている各種制御プログラムを読み出して内部ＲＡＭ７に一時格納し、当該プログラムに基づく各種処理を実行して電子書籍装置１の各部を集中制御する。
すなわち、ＣＰＵ２は、前記読み出した所定プログラムに基づいて各種処理を実行し、その処理結果を内部ＲＡＭ７に格納するとともに、表示駆動回路５において当該処理結果に基づいて表示データを生成し表示部４に表示させる。
また、ＣＰＵ２はモードスイッチの押下操作（モード設定処理）に応じて、電話モード、時計モード、或いは書籍モードに対応する処理プログラムをＲＯＭ６から読み出し、各モードに対応した処理を実行する。例えば、電話処理、時計処理、書籍処理（図４参照）、書籍データのダウンロード処理（図７参照）等を実行する。
【００２５】
入力部３は、電話モード、時計モード、及び書籍モードのいずれかにモードを切り替える際に押圧操作されるモードスイッチ、ダイヤル操作や各種処理の実行指示を入力操作するためのダイヤル部３ｄ、各種選択操作を入力するためのカーソルスイッチ、書籍データ読み上げ開始を指示するプレイスイッチ，読み上げ停止を指示するストップスイッチ、音量調節スイッチ等を備える。更に、書籍データの早送りや巻き戻しを指示するスイッチや、意図的にページ捲りまたはコマ送りを指示するページ移行キーやコマ移行キーを設けるようにしてもよい。また、前記ダイヤル部３ｄのファンクションキーには、予め設定されている番号へ自動発呼する際に操作されるオートダイヤルスイッチ３Ｓや確認の際に押下操作されるＯＫキー等が含まれる。オートダイヤルスイッチ３Ｓは、書籍データ配信センターＨＳのホストサーバ３０にアクセスする際に押下操作されるスイッチであり、このオートダイヤルスイッチ３Ｓが押下操作されると、通信Ｉ／Ｆ部９に備えられた電話自動発信部によって自動的にホストサーバ３０へ回線を接続する。
【００２６】
表示部４は液晶ディスプレイ等により構成され、ＣＰＵ２からの表示指示に従って表示駆動回路５において生成された表示データを表示する。例えば、書籍モードでは書籍データに含まれる文字データやイメージデータ、書籍名や著作者名等の書籍に関連するデータ等を表示し、電話モードにおいては相手先の電話番号等を表示し、時計モードにおいては現在時刻や日付、曜日等の時計情報を表示する。また、外部から受信した電子メールの内容を表示する。書籍モード中に電話の着信がある場合はＣＰＵ２から入力される着信報知
指示データに基づいて電話の着信がある旨を表示する。
【００２７】
ＲＯＭ６は電子書籍装置１の基本プログラムや各種処理プログラム、データ、処理に必要なデータ等を記憶している。処理プログラムには、例えばモード設定処理、電話処理、時計処理、書籍処理、書籍データの読み上げ再生処理（図７参照）、書籍データ選択処理（図８参照）、及び書籍データ等のダウンロード処理（図７参照）を含む。これらの各処理プログラムは、読み取り可能なプログラムコードの形態でＲＯＭ６に格納され、ＣＰＵ２はこのプログラムコードにしたがった動作を逐次実行する。
また、ＲＯＭ６は、このほかに、配信された籍データを読み上げる際に用いられる複数の音声波形データを蓄積した音声データＲＯＭ６Ａを備えている。
【００２８】
この音声データＲＯＭ６Ａには、外部の書籍データ配信センターＨＳにおける音声データＲＯＭ内の音声データと同様、読み上げ音声生成部１３の採用する音声合成方式に適した音声波形データ（アナログデータまたはＰＣＭ（Pulse Code Modulation）データ）が記憶されている。
例えば、録音編集方式の場合では、人が発生した音声波形をそのまま、あるいは波形符号化して蓄積している。音声波形の単位は一語単位、単語単位または文節単位のいずれかである。またパラメータ編集方式の場合では、人が発声した音声波形を分析してパラメータに変換された形で蓄積している。また、規則合成方式の場合では、文字列あるいは音素記号列から音声学的・言語学的規則に基づいて切りだされた音節、音素、１ピッチ間の波形のような基本的な小さな単位の特徴パラメータを蓄積している。また、人間の音声以外にも動物の泣き声や自然界に存在する音（風音、爆発音等；擬音）の波形データも蓄積している。
【００２９】
読み上げ音声生成部１３は、書籍データのテキスト（文字）部分を音声データに変換するため、例えば、規則合成方式を用いたテキスト音声合成システムによって構成される。規則合成方式を用いたテキスト音声合成システムは、文章解析部と音声合成規則部と音声合成部とにより構成される。
文章解析部は単語を複数記憶した辞書を備える。辞書には読み仮名、文法情報、アクセント等の情報が蓄えられている。ここでは文章中の単語の文法的接続関係をチェック（構文解析）しながら、文章の頭から順に辞書に登録されている単語と照合を取り、単語の系列に区分化し、区分化された単語について読み仮名、文法情報、アクセント等の情報を取得する。
音声合成規則部は、語の連なりによって生じる語の連濁、鼻音化、無声化等の読みの変化（音韻規則）や、アクセントの移動、消失、生起といった変化（韻律規則）を解析し、発音記号とアクセントを決定して音声合成制御パラメータを決定する。音声合成制御パラメータは例えば文節のまとまりやポーズ（間）といった合成単位（ＣＶＣ単位等）や声の高さ、ストレス、イントネーションである。こうして音声合成の制御パラメータが定まると、音声合成部はＲＯＭ６の音声データＲＯＭ６Ａに蓄えられている合成単位と制御パラメータとに基づいて音声波形を合成する。
【００３０】
次に、図４を参照して内部ＲＡＭ７のメモリ構成、及び外部ＲＡＭ８のメモリ構成を説明する。
内部ＲＡＭ７は指定された処理プログラム、入力指示、入力データ及び処理結果等を一時格納するワークメモリのほかに、図４に示すように表示レジスタ７ａ、モードデータ記憶領域７ｂ、書籍Ｎｏ．記憶領域７ｃ、書籍データ記憶領域７ｄ、メールデータ記憶領域７ｅ、送信者ＩＤ記憶領域７ｆ、声優または有名人等の有名キャラクタ画像および書籍内に登場する登場キャラクタ画像を記憶するキャラクタ画像記憶領域７ｇ、このキャラクタ画像自身の音声データを記憶する音声データ記憶領域７ｈのほかに、ダイヤルデータ、着信レジスタ、計時レジスタを含む記憶領域７ｉを有する。なお、有名キャラクタ画像は、書籍内容を読み上げるために、読み上げキャラクタ画像とも称する。
表示レジスタ７ａには、表示駆動回路５において生成される表示部４に表示するための表示データが確保される。
モードデータ記憶領域７ｂには、モードスイッチの操作によって設定されたモード設定データが格納される。電子書籍装置１において選択可能なモードには、電話モード、時計モード、及び書籍モードがある。上記３つのモードのうち何れかのモードに対応するモードスイッチが押下操作されると、ＣＰＵ２は、押下されたスイッチに対応するモードを内部ＲＡＭ７のモードデータ記憶領域７ｂに設定し、モードに対応する処理プログラムをＲＯＭ６から読み出して実行開始する。
【００３１】
書籍Ｎｏ．記憶領域７ｃには、書籍の読み上げ再生するために選択された書籍の固有番号（以下、書籍Ｎｏ．と呼ぶ。）が格納される。書籍データ記憶領域７ｄには、選択された書籍Ｎｏ．に対応する書籍データが記憶される。
メールデータ記憶領域７ｅには、外部から受信した電子メールの内容である文字データ、イメージデータ等が格納される。
送信者ＩＤ記憶領域７ｆには、自己の電子書籍装置１の送信者ＩＤが格納される。送信者ＩＤは、例えば、ホストサーバ３０から与えられるＩＤコードや登録コード、または個々の電子書籍装置１に個別に付与されている個別コード（シリアルナンバー等）である。書籍データをダウンロードする際に、ホストサーバ３０に対して配信を要求するデータとともに送信者ＩＤを通信Ｉ／Ｆ部９から送信する。
記憶領域７ｉのうち、ダイヤルデータ記憶領域部分には、登録された電話番号データが格納される。例えば、書籍データ配信センターＨＳのホストサーバ３０へ通信接続するための電話番号データや、相手先の電話番号データが登録されて記憶される。
記憶領域７ｉのうち、計時レジスタ部分には、計時部１２において計時される時間データや日付データが、逐次更新記憶される。
記憶領域７ｉのうち、着信レジスタ部分には、書籍データによる読み上げ再生中に電話を着信した場合において、読み上げ再生を停止した位置についての情報が記憶される。
【００３２】
外部ＲＡＭ８は電子書籍装置１本体に固定的に設けられる、若しくは着脱自在に設けられる磁気的、光学的記録媒体、若しくは半導体メモリで構成される。特に、電子書籍装置１の携帯性を考慮した場合は小型・可搬の半導体メモリにより構成されるメモリカードを利用することが好適である。そして外部ＲＡＭ８には、外部から受信した書籍データを複数記憶する領域である書籍データ記憶領域８ａが設けられる。書籍データ記憶領域８ａには複数の書籍データ及び書籍Ｎｏ．が記憶される。
外部ＲＡＭ８に記憶されている書籍データは、例えば書籍データ配信センターＨＳからダウンロードしたものや、ＰＣ等の外部機器を利用して書き込まれたものである。読者は外部ＲＡＭ８に記憶されている複数の書籍データの中から、所望の書籍データを選択して、ＲＯＭ６Ａに記憶されている音声データに対応する音声で読み上げ再生することができる。
【００３３】
通信Ｉ／Ｆ部９は、例えば携帯電話やＰＨＳ等の外部との通話及びデータ通信が可能な移動体通信ユニットにより構成される。通信Ｉ／Ｆ部９は通話音声データや電子メールを外部と送受信することも、また書籍データ配信センターＨＳにアクセスして所望の書籍データをダウンロードするために各種データを送受信することもできる。また、アンテナ部１０において電話の着信を検出すると着信検出信号をＣＰＵ２へ出力する。
【００３４】
通信Ｉ／Ｆ部９を介して、電話の着信を検出した後に、ダイヤル部３ｄに設けられた通話スイッチが操作されると、ＣＰＵ２は通話処理を開始する。また、ダイヤル部３ｄの操作によって通話相手が指定されるとその相手先に対して発呼信号を送信し、相手の応答があると通話処理を開始する。
【００３５】
また、ダイヤル部３ｄに設けられたオートダイヤルスイッチ３Ｓが操作されると、通信Ｉ／Ｆ部９の電話自動発信部は書籍データ配信センターＨＳに設置されているホストサーバ３０へ自動的に回線を接続する。通信Ｉ／Ｆ部９はホストサーバ３０とデータ通信を行う。
【００３６】
図３に示す音声再生システム１００において、書籍データ配信センターＨＳと電子書籍装置１との間で送受信されるデータには、例えば、ホストサーバ３０から配信される書籍データ、及び電子書籍装置１から書籍データ配信センターＨＳへ送信される書籍データ配信要求データが含まれる。通信Ｉ／Ｆ部９は前記書籍データ配信要求データをホストサーバ３０へ送信する際、電子書籍装置１の送信者ＩＤをともに送信する。
【００３７】
なお、通信Ｉ／Ｆ部９として、携帯電話やＰＨＳ等の移動体通信ユニットを電子書籍装置１本体に直接搭載せずに、電子書籍装置１本体を携帯電話やＰＨＳに接続するためのコネクタやケーブルを備えたり、外部のデータ通信端末（例えばモデムやＴＡ（Terminal
Adapter）を備えたＰＣや書籍データ配信端末等）に接続するための赤外線通信ユニットや無線通信ユニット等の通信インターフェイスを備えて構成するようにしてもよい。
【００３８】
回転スイッチ部１１は、読者の指によって操作され、回転操作と押圧操作とをひとつのボタンで入力する機構である。回転操作では回転操作方向に連動して表示画面をスクロールしたり、カーソル位置を移動することができ、押圧操作では反転表示項目（カーソル位置）の選択を確定することができる。例えば、登録したダイヤル番号の選択や書籍データの選択等の選択・確定操作を容易に行うことができる。
【００３９】
計時部１２は時刻や日付を計時し、計時された時間データ等はＣＰＵ２を介して内部ＲＡＭ７の計時レジスタ７ｈに送られて順次更新セットされる。例えば、所定周波数の電気信号を発振する発振回路と該発振回路からの信号を分周して所定周波数の信号を得る分周回路とから構成され、その信号をカウントすることによって現在時刻を計時する構成としてもよい。
音声入力部１４は、マイク部１Ｃから入力される読者の音声信号（アナログ信号）をデジタル信号に変換して、ＣＰＵ２に出力する。
音声出力部１５は、通信Ｉ／Ｆ部９を介して受信した相手先の通話音声をスピーカ１Ｅ、または送信部１６のいずれかに出力する。また、読み上げ音声生成部１３において生成された読み上げ音声データをスピーカ１Ｅまたは送信部１６に出力する。
【００４０】
送信部１６は、例えば赤外線通信ユニットまたは無線通信ユニット等の携帯機器２０側に設けられる受信部２６と対応した通信装置により構成され、通話音声データや読み上げ音声生成部１３により生成された読み上げ音声データを携帯機器２０へ送信する。また、ＣＰＵ２から入力された着信報知指示データや再生停止指示データを携帯機器２０へ送信する。
【００４１】
次に、携帯機器２０の具体的構成について図３を参照して説明する。
携帯機器２０は、ＣＰＵ２１、着信報知部２３、内部ＲＡＭ２４、ＲＯＭ２５、受信部２６、音声出力部２７、及びイヤホン２８によって構成される。
ＣＰＵ２１は、受信部２６において受信する各種指示信号（着信報知指示信号、再生停止指示信号等）に従って、携帯機器２０の各部を集中制御する。
すなわち、ＣＰＵ２１は受信部２６において書籍データに基づく読み上げ音声データや通話音声データを受信すると、それらの音声データを音声出力部２７へ渡し、イヤホン２８から音声出力する。また、ＣＰＵ２１は受信部２６において着信報知指示データを受信すると、着信報知部２３に表示や音や振動によって電話の着信がある旨を報知させる。また再生停止指示データを受信すると読み上げ音声の出力を停止させる。
【００４２】
着信報知部２３は電子書籍装置１における電話の着信を報知するために、例えば所定の着信音を鳴動する着信音鳴動部や、バイブレータ等により構成される信号部や、着信の旨を表示する液晶表示部等のいずれか、またはこれらの組み合わせで構成され、ＣＰＵ２１から入力される着信報知指示信号に従って着信を報知する。
【００４３】
内部ＲＡＭ２４は受信部により受信した各種データや操作入力部３により入力されたデータを一時格納する領域であるワークメモリを有する。また、ＲＯＭ２５は半導体メモリ等によって構成され携帯機器２０において実行される基本的な処理プログラムが格納されている。
受信部２６は、例えば赤外線通信ユニットまたは無線通信ユニット等の電子書籍装置１側に設けられる送信部１６と対応した通信装置により構成され、読み上げ音声データ、通話音声データ、着信報知指示データ、再生停止指示データを受信して、ＣＰＵ２１に出力する。
【００４４】
音声出力部２７は増幅器等によって構成され、受信部２６において受信した音声データ（読み上げ音声データ及び通話音声データ）をＣＰＵ２１の指示によってイヤホン２８に対して出力する。イヤホン２８は音声出力部２７から出力された音声を放音する。
なお、電子書籍装置１を遠隔制御するための操作キー群によって構成される操作入力部２２を設けるとともに、操作に応じた遠隔制御信号を電子書籍装置１側へ送信する送信部（図示省略）を設けるようにしてもよい。この場合は、電子書籍装置１にも前記遠隔制御信号を受信する受信部（図示省略）を設ける。携帯機器２０の操作入力部２２からの遠隔操作によって、電子書籍装置１における書籍データの表示や読み上げ音声の再生・停止等を制御するようにしてもよい。
【００４５】
次に、書籍データ配信センターＨＳに設置されるホストサーバ３０の具体的構成について説明する。
ホストサーバ３０は、図３に示すように、書籍データを複数記憶している書籍データＲＯＭ３２と、通信接続された電子書籍装置１から要求された書籍データをその要求元に配信する配信部３３と、電子書籍装置１または電話端末４４との間で各種データを転送する転送部３４と、書籍データＲＯＭ３２に記憶されている書籍データ等の要求先への配信処理を制御するＣＰＵ３１とから構成される。
書籍データＲＯＭ３２は、図５に示すように、書籍データを構成している文字データ、書籍に登場する登場人物の登場キャラクタ画像、擬音データ等を記憶している書籍データ記憶領域３２Ａを備えている。また、書籍データＲＯＭ３２は、この書籍データ記憶領域３２Ａに記憶された書籍データを構成している文字データを読み上げるために用いられる複数の有名キャラクタ画像Ａ、Ｂ、Ｃ・・・Ｎの名前を記憶しているキャラクタ名記憶領域３２Ｂ、複数の有名キャラクタ画像Ａ、Ｂ、Ｃ・・・Ｎ自体を記憶しているキャラクタ名記憶領域３２Ｄ、これら各キャラクタ画像自身の音声を表わす複数の音声データａ、ｂ、ｃ…ｎを記憶している音声データ記憶領域３２Ｄを備えている。
キャラクタ記憶領域３２Ｃに記憶されている各有名キャラクタ画像は、声優または有名人等の顔画像（図１１（Ａ）を参照）、それの全身画像、動物、声を出す仮想の植物の画像のほか、有名なアニメ画像等を含む。また、音声データ記憶領域３２Ｄに記憶されている各音声データは、前述した声優または有名人等が発声した際における音声をアナログまたはデジタル録音した音声データである。このため、複数の有名キャラクタ画像Ａ、Ｂ、Ｃ・・・Ｎの名前毎に、それらの有名キャラクタ画像Ａ、Ｂ、Ｃ・・・Ｎと複数の音声データａ、ｂ、ｃ…ｎとは互いに対応づけて各記憶領域３２Ｃ、３２Ｄに記憶されている。
【００４６】
ＣＰＵ３１は通信接続された電子書籍装置１、ＰＣ、または書籍データ配信端末４２から書籍データ配信の申込みを受信すると、その申込みに応答して配信可能な書籍データに関連する情報（書籍名、著作者名、出版社名等のほかに、キャラクタ画像、このキャラクタ画像自身の音声データ）を書籍データＲＯＭ３２から読み出して申込み元の端末に配信部３３から送信する。更に電子書籍装置１、ＰＣ、または書籍データ配信端末４２から書籍データの配信要求を受信すると、その配信要求に応じて書籍データ等に対する料金データを送信する。配信要求元においてその料金が承諾されると、要求された書籍データを書籍データＲＯＭ３２から読み出して配信部３３から電子書籍装置１に向けて送信する。
次に、著作権者端末３０Ｂの具体的構成について説明する。
著作権者端末３０Ｂは、図３に示すように、著作物データを複数記憶している著作物データＲＡＭ３０ＢＲと、この著作物データＲＡＭ３０ＢＲに記憶されている著作物データを、書籍データ配信センターＨＳに設置されているホストサーバ３０に送信する送信部３０ＢＳと、この送信部３０ＢＳおよび著作物データＲＡＭ３２ＢＲを含む各部を制御するＣＰＵ３０ＢＣとから構成される。
前記著作物データは、有名人等の人物、有名なアニメ等をモチーフとした読み上げキャラクタ画像、この画像で示される人物またはアニメの名前、この人物またはアニメ固有の音声を示す音声データを含む著作物データを指す。
この著作権者端末３０Ｂは、書籍データを創作した著作者、読み上げキャラクタ画像の対象となっている有名人等の本人、読み上げキャラクタ画像の版権または肖像権を管理する管理会社を含む著作権者が所有する端末である。
【００４７】
次に動作を説明する。
本発明に係る電子書籍装置１は、モード設定処理において設定される各種モードに応じた処理を実行するが、電源ＯＮ時はまず時計モードに設定されており、計時部１２において現在時刻を計時している。また、モードスイッチの押下操作を待機している。
このモード設定処理おいて、電子書籍装置１は、モードスイッチの押下操作を待機し、押下されるとモード設定処理を開始する。
ＣＰＵ２は、押下されたモードスイッチの種類を判別する。ここで、電話モードに対応するモードスイッチが操作されたと判断した場合は、後述する電話処理を実行する。また、時計モードに対応するモードスイッチが操作されたと判断した場合は、後述する時計処理を実行する。書籍モードに対応するモードスイッチが操作されたと判断した場合は、後述する書籍処理を実行する。
【００４８】
以下、電話モードにおける電話処理、時計モードにおける時計処理、書籍モードにおける書籍処理、所望の書籍データ選択してダウンロードする処理についてそれぞれ説明する。
（電話処理）
電話の相手先へ発信する際に実行される電話処理（その１）と相手側からの呼び出しを着信する際に実行される電話処理（その２）とについて説明する。
まず、電子書籍装置１を用いて、相手先へ発信して通話する電話処理（その１）の際は、電話モードスイッチを押下操作する。
【００４９】
その後、ダイヤル部３ｄの操作によって電話番号が入力され、または、回転スイッチ部１１の操作によって、内部ＲＡＭ７のダイヤルデータ記憶領域に記憶されている電話番号データの中から所望の通話相手が指定され、あるいは、オートダイヤルスイッチ３Ｓの操作によって書籍データ配信センターＨＳへのダイヤル接続が指示され、その後ダイヤル部３ｄのダイヤルスイッチ（通話スイッチ）がＯＮされると、通信Ｉ／Ｆ部９は、入力または選択された相手先へ信号を送信する。そして、相手先または書籍データ配信センターＨＳから応答があり、ダイヤル接続されると、通話処理を実行する。
【００５０】
相手先への通話処理では、マイク部１Ｃから入力される読者の音声を音声入力部１４においてデジタル信号に変換し、所定の周波数に変調して通信Ｉ／Ｆ部９から通話相手に送信する。また、相手先からの信号を通信Ｉ／Ｆ部９において受信してＣＰＵ２に出力し、音声出力部１５において音声信号に変換してスピーカ１Ｅに出力したり、送信部１６から携帯機器２０へ送信し、イヤホン２８から適当な音量で出力する。また、ＣＰＵ２は、通話中には、相手先の電話番号等の通話関連データ（相手先の電話番号、氏名、通話時間等）を表示部４に表示してもよい。
【００５１】
電子書籍装置１を時計モードや書籍モードで使用している状態もとで、相手側からの呼び出しを着信すると、電話処理（その２）を開始する。
通信Ｉ／Ｆ部９において着信を検出し、着信検出信号がＣＰＵ２に出力されると、現在、書籍データの再生中であるか否かを判断する。書籍データの再生中である場合は、ＣＰＵ２は再生を停止させるための再生停止指示データを送信部１６へ渡す。このときＣＰＵ２は書籍データの読み上げ停止位置を内部ＲＡＭ７の着信レジスタ７ｉに記憶する。更にＣＰＵ２は着信を報知するための着信報知指示データを送信部１６へ渡す。送信部１６は再生停止指示データと着信報知指示データとを携帯機器２０に送信する。携帯機器２０は受信部２６において受信した再生停止指示データと着信報知指示データとに基づいて、音声出力部２７における読み上げ音声の再生を停止し、着信報知部２３において着信を報知する。着信の報知は例えば所定の着信音やメッセージ音声（ＲＯＭ２５に着信音データやメッセージ音声データが格納されている）による報知やバイブレータ等を用いた振動による。なお、電子書籍装置１の表示部４に着信のメッセージを表示するようにしてもよい。
【００５２】
その後、通話スイッチの押下操作により着信に応答すると、通話処理を開始する。そして、通話が終了すると、ＣＰＵ２は内部ＲＡＭ７の着信レジスタ７ｉから書籍データの読み上げ停止位置データを読み出し、読み上げ停止位置から書籍データの読み上げ再生を再開して通常の書籍モードに戻り、電話処理（その２）を終了する。
着信時に書籍データの読み上げ再生中ではない場合は、着信を報知し、通話スイッチの押下操作により着信に応答すると、通話処理を実行し、通話が終了すると、時計モードに戻り電話処理（その２）を終了する。
【００５３】
（時計処理）
次に、時計モードが設定された際に実行される時計処理を説明する。
電子書籍装置１を用いて、現在の時刻や日時等のカレンダー情報を表示部４に表示させる場合には、モードスイッチの操作により時計モードを設定する。
ＣＰＵ２は、内部ＲＡＭ７のモードデータ記憶領域７ｂに時計モードを設定すると、計時部１２において計時されている現在時刻を参照し、内部ＲＡＭ７の計時レジスタ７ｈに更新確保するとともに、表示駆動回路５へ出力し、表示駆動回路５において日付や現在時刻等を表示するための表示データを生成して、内部ＲＡＭ７の表示レジスタ７ａに記憶するとともに、表示部４に表示する。
このように、モードスイッチの簡単な押下操作で時計モードに瞬時に切替え、現在の時刻や日付を表示部４に表示させることができる。
【００５４】
（書籍処理）
次に、図７を参照して電子書籍装置等の処理について説明する。
図７は電子書籍装置、書籍データ配信センタおよび著作権者端末の各処理を説明する全体フローチャート、図８は書籍データおよび読み上げキャラクタ画像を選択するための書籍データ・キャラクタ選択処理を説明するフローチャート、図９は書籍データの読み上げ再生処理を説明するフローチャートである。
まず、電子書籍装置１の内部に記憶されている書籍データを、同じく装置１内の音声データＲＯＭ６Ａに記憶されている音声データを用いて、読み上げ再生処理を実行した場合について説明する。
電子書籍装置１において、外部ＲＡＭ８に複数の書籍データが記憶されているが、このうちのひとつの書籍データを選択しこの選択された書籍データを読み上げ再生しようとする場合には、書籍モードに対応するモードスイッチを押下操作する。
【００５５】
すると、ＣＰＵ２は、外部ＲＡＭ８に記憶されている複数の書籍データについて書籍に関連するデータ（書籍ＮＯ．や書籍名）を全て読み出し、表示部４に一覧表示する（図１０（Ａ）参照）。書籍選択画面が表示された表示部４では、「読みたい書籍を選んでください」というメッセージＭ２とともに、「１ 書籍名Ａ」、「２ 書籍名Ｂ」のように外部ＲＡＭ８に記憶されている複数の書籍についての書籍Ｎｏ．と書籍名とが一覧表示される。また、いずれかの書籍を選択するためのポインタが表示される。
この書籍選択画面において、入力部３のカーソルスイッチの上下操作または回転スイッチ部１１の回転操作により再生したい書籍が選択された上で、更にプレイスイッチがオンされると、ＣＰＵ２は、選択した書籍名に対応する書籍データを外部ＲＡＭ８から読み出し、内部ＲＡＭ７の書籍データ記憶領域７ｄに格納する。
ＣＰＵ２は、読み出した書籍データのうち、最初のページ（表紙等）の表示データを表示駆動回路５に渡し、表示データを生成して表示部４に表示させる。そして、ＣＰＵ２は音声データＲＯＭ６Ａに記憶されている音声データを用いて、読み上げ音声生成部１３に対して読み上げ開始指示を出力し、書籍データに従って、記憶されている音声データに対応する音声で読み上げ再生処理を実行する。
【００５６】
次に、図７を参照して、読者が自分の電子書籍装置１に、読みたい書籍データを外部の書籍データ配信センターＨＳからダウンロードする際の、書籍データ配信センターＨＳにおいて実行される処理について、電子書籍装置１との間で送受信されるデータ交換と合わせて説明する。
まず、電子書籍装置１の読者は、インターネット４０等を介して、書籍データ配信センターＨＳのＨＰ（ホームページ）などにアクセスし、書籍の申し込みを行うために、書籍の申し込みに関するデータ及び送信者ＩＤを送信する（ステップＦ１）。ホストサーバ３０のＣＰＵ３１は、その申込みデータ及び送信者ＩＤを受信すると（ステップＦ２）、この受信した送信者ＩＤ等をＲＡＭ３１Ａに記憶する。一方、ホストサーバ３０のＣＰＵ３１は、書籍の選択を催促する書籍選択画面を電子書籍装置１に表示させるため、書籍選択画面データ（書籍データの関連データを含む）を、前記電子書籍装置１である送信元端末に返信する（ステップＦ３）。
【００５７】
電子書籍装置１は、送信された書籍選択画面データを受信すると、この受信された書籍選択画面データに対応する書籍選択画面を表示部４に表示した後、書籍選択画面による書籍データ等の選択処理を行なう（ステップＦ４；図１０（Ａ）参照）。
この書籍データ等の選択処理は、電子書籍装置１において、所望の書籍データ等を書籍データ配信センターＨＳからダウンロードするために必要な一連の処理である。
図８はダウンロードする書籍データを選択するために電子書籍装置１において実行される書籍データ選択処理を説明するフローチャート、図１０（Ａ）はダウンロードする書籍データを選択するための書籍選択画面である。
【００５８】
書籍データをダウンロードする際は、まず、図８に示す書籍データ選択処理を実行する。電子書籍装置１においてオートダイヤルスイッチ３Ｓが押下操作されると、通信Ｉ／Ｆ部９に設けられた電話自動発信部は書籍データ配信センターＨＳへ自動的に回線を接続する。
通信Ｉ／Ｆ部９は、書籍データ配信センターＨＳに対して書籍データ配信要求データとともに自己の電子書籍装置１の送信者ＩＤを送信する。書籍データ配信センターＨＳでは、書籍データ配信要求データとともに送信者ＩＤを受信すると、配信可能な書籍データについての関連データ（書籍名、著作者名、出版社名等）を送信する。
電子書籍装置１は通信Ｉ／Ｆ部９において書籍データ配信センターＨＳから配信可能な書籍データについての関連データを受信すると、ＣＰＵ２は、図１０（Ａ）に示すように、当該関連データを表示部４に一覧表示した書籍選択画面を表示部４に表示する。
【００５９】
この書籍選択画面の表示部４には、ダウンロードしたい書籍データの選択を促す「読みたい書籍を選んで下さい」というメッセージＭ２とともに、配信可能な書籍データについての関連データＧ１，Ｇ２，Ｇ３，…が一覧表示される。
例えば、書籍Ｎｏ．「１」の関連データＧ１は、「書籍名Ａ 米国憲法」が、書籍Ｎｏ．「２」の関連データＧ２は、「書籍名Ｂ 風とともに去りぬ」が、書籍Ｎｏ．「３」の関連データＧ３は、「書籍名Ｃ 漫画 発明王 エジソン（伝記）」がそれぞれ表示される。
また、同書籍選択画面にはポインタＰが表示されるので、カーソルスイッチの上下操作または回転スイッチ部１１の回転操作により、このポインタＰの表示位置を移動し、決定スイッチを操作すれば、上述の関連データの中から所望の書籍を選択することができる。
【００６０】
このようにして、書籍選択画面に一覧表示されている書籍の中から、ダウンロードしたい書籍を選択し、これが決定されると（ステップＥ２；Ｙｅｓ）、ＣＰＵ２は、この選択した書籍の書籍Ｎｏ．を内部ＲＡＭ７に格納する（ステップＥ３）。それと同時に、ＣＰＵ２は、選択された書籍の配信要求データ、選択された書籍Ｎｏ．および送信者ＩＤを、通信Ｉ／Ｆ部９から書籍データ配信センターＨＳに自動送信する。
書籍データ配信センターＨＳは、選択された書籍の配信要求データ、選択された書籍Ｎｏ．および送信者ＩＤを電子書籍装置１から受信すると、これに応答して、選択された書籍Ｎｏ．に対応した書籍データ（当該書籍データ内に登場する複数の登場キャラクタ画像を含む）と有名人等の読み上げキャラクタ画像とを書籍データＲＯＭ３２から読みだし、この読み出した書籍データと有名人等の読み上げキャラクタ画像とを、同じく受信した送信者ＩＤに対応する電子書籍装置１に向けてインターネット４０を介して送信する。
電子書籍装置１は、送信された書籍データと有名人等の読み上げキャラクタ画像とを受信すると、内部ＲＡＭ７ａに記憶する。その後、この記憶された書籍データと有名人等のキャラクタ画像とのうち、書籍データ内の登場人物の登場キャラクタ画像４０２，４０３を、図１０（Ｂ）に示すように、表示部４に表示する（ステップＥ４）。その後、予め定められた時間が経過すると、図１１（Ａ）に示すように、表示された登場人物の登場キャラクタ画像４０２，４０３に対してそれぞれ割り当てられるべき読み上げキャラクタ画像Ｎ２１〜Ｎ２５を一覧表示する（ステップＥ５）。
その後、予め定められた時間が経過すると、図１１（Ｂ）に示すように、表示された登場人物の登場キャラクタ画像４０２，４０３とこれらに対して割り当てられるべき読み上げキャラクタ画像Ｎ２１〜Ｎ２５との対応付けのための読者に対する催促表示を行う（ステップＥ６）。
【００６１】
そこで、読者による登場人物の登場キャラクタ画像と割り当てられるべき読み上げキャラクタ画像との対応付けのための選択とそれの決定とが行なわれる（ステップＥ７）。すると、登場人物の登場キャラクタ画像４０２，４０３と割り当てられる読み上げキャラクタ画像Ｎ２１〜Ｎ２５とが対応付けられると、ＲＡＭ７内の各領域７ｇ、７ｈにそれぞれ記憶されることとなる。
例えば、読者が、図１１（Ａ）に示す複数の読み上げキャラクタ画像Ｎ２１〜Ｎ２５のなかから、「オードリー・ケプバーン」という有名人の顔に対応する読み上げキャラクタ画像Ｎ２２を選択し、この選択された読み上げキャラクタ画像Ｎ２２を、図１１（Ｂ）に示すように、書籍データ内の登場人物である「Ａさん」の登場キャラクタ画像４０２に対して割り当てた場合には、これに応答して、「Ａさん」の登場キャラクタ画像４０２と「オードリー・ケプバーン」という有名人の顔に対応する読み上げキャラクタ画像Ｎ２２とは互いに対応づけて、ＲＡＭ７内の各領域７ｇ、７ｈにそれぞれ記憶されることとなる。
同様に、登場人物である「Ｂくん」の登場キャラクタ画像４０３に対して「マイケル・ジョクソン」という有名人の顔に対応する読み上げキャラクタ画像Ｎ２１を読者が割り当てた場合には、「Ｂくん」の登場キャラクタ画像４０３と、「マイケル・ジョクソン」という有名人の顔に対応する読み上げキャラクタ画像Ｎ２１とは互いに対応づけて、ＲＡＭ７内の各領域７ｇ、７ｈにそれぞれ記憶されることとなる。
このようにして、書籍データ・キャラクタ選択処理が終了する。
【００６２】
次に、図７に戻り、書籍データ等のダウンロード処理を行う。
このダウンロード処理に先だって、電子書籍装置１においてオートダイヤルスイッチ３Ｓを押下操作する。すると、通信Ｉ／Ｆ部９に設けられた電話自動発信部は、書籍データ配信センターＨＳへ自動的に回線を接続する。通信Ｉ／Ｆ部９は、書籍データ配信センターＨＳに対して書籍データ配信要求データとともに自己の電子書籍装置１の送信者ＩＤを送信する。
書籍データ配信センターＨＳでは、この書籍データ配信要求データとともに送信者ＩＤを受信すると、配信可能な書籍データについての関連データである書籍名等を送信する。
電子書籍装置１のＣＰＵ２は、通信Ｉ／Ｆ部９を介して、書籍データ配信センターＨＳから返信された受信確認のメッセージを受信すると、当該メッセージを表示部４に表示する。その後、書籍選択画面において選択された書籍Ｎｏ．を送信者ＩＤとともに書籍データ配信センターＨＳへ送信する（ステップＦ５）。
【００６３】
ホストサーバ３０は、電子書籍装置１において読者が選択した書籍Ｎｏ．及び送信者ＩＤを受信すると（ステップＦ６）、ＲＡＭ３１Ａに確保し、その後、ホストサーバ３０内のメッセージＲＯＭ（図示せず）から選択した書籍Ｎｏ．を受信した旨の確認メッセージを読み出して、送信元へ返信する（ステップＦ７）。
電子書籍装置１は、返信した確認メッセージを表示部４に表示する（ステップＦ８）。
次に、ホストサーバ３０は、電子書籍装置１に向けて、電子書籍装置１において選択された書籍Ｎｏ．に対応する書籍データ、選択された読み上げキャラクタ画像、有名人等の音声データを送信する（ステップＦ９）。
電子書籍装置１は、ホストサーバ３０から送信された書籍データ、読み上げキャラクタ画像、音声データを受信すると、この受信された書籍データ、読み上げキャラクタ画像、音声データを、自己のＲＡＭ７内の書籍データ記憶領域７ｄ、キャラクタ画像記憶領域７ｇ、音声データ記憶領域７ｈへ書籍Ｎｏ．毎にダウンロードするための処理を実行する（ステップＦ１０）。このダウンロード処理が終了すると、電子書籍装置１は、ダウンロードが終了した旨のデータをホストサーバ３０に送信する（ステップＦ１１）。
【００６４】
ホストサーバ３０は、その後、ダウンロードされた書籍データ等にかかった料金データを電子書籍装置１に送信する（ステップＦ１２）。電子書籍装置１は、この受信した料金データを表示部４に表示する（ステップＦ１３）。電子書籍装置１は、この料金データの決済処理を行なう。この決済処理の方法は、各種ある。例えば、金融機関等に対して料金データに対応した料金の支払いを依頼し、ホストサーバ３０への支払いの決済をおこなう（ステップＦ１４）。
ホストサーバ３０は、ダウンロードされた書籍データ等にかかった料金データを電子書籍装置１に送信する一方で、著作権者端末３０Ｂへの電子書籍購入の報告を、インターネット４４を通じて行う（ステップＦ２２）。著作権者端末３０Ｂは、ホストサーバ３０からの電子書籍購入の報告を受信する（ステップＦ２３）。なお、ここでいう「著作権者」は、書籍データを創作した著作者、読み上げキャラクタ画像の対象となっている有名人等の本人、読み上げキャラクタ画像の版権または肖像権を管理する管理会社を含む。
この後は、図９に示す書籍データの読み上げ再生処理を行う（ステップＦ１４）。
以下、図９を参照して書籍データ読み上げ再生処理を説明する。
【００６５】
この書籍データの読み上げ再生処理において、電子書籍装置１のＣＰＵ２は、内部ＲＡＭ７の書籍データ記憶領域７ｄに記憶されている、配信された書籍データについて書籍のタイプを判断する。すなわち、漫画タイプであるかその他のタイプであるかを判断する。
漫画タイプである場合（ステップＤ１；Ｙｅｓ）は、まず、書籍データ記憶領域７ｄから題名、著作者名、目次等のデータを読み出して表示部４に表示させる（ステップＤ２）。次いで、図１２（Ａ）に示すように、書籍データに含まれている登場人物の登場キャラクタ画像４０２、４０３や人物名データ（Ａさん、Ｂ君）のほかに、書籍データの読み上げ者となる読み上げキャラクタ画像Ｎ２１、Ｎ２２を抽出して、その登場キャラクタ画像４０２、４０３および読み上げキャラクタ画像Ｎ２１、Ｎ２２等を表示させる（ステップＤ３）。
【００６６】
図１０（Ａ）は漫画タイプの書籍データによる再生開始時における表示例を示している。この図に示すように「漫画 発明王 エジソン（伝記）」として書籍の題名４０１が表示されるとともに、登場人物Ｎｏ．１の「Ａさん」の画像４０２が表示される。同様に、登場人物Ｎｏ．２の「Ｂくん」の画像４０３が表示される。また、書籍データの読み上げ者として読者が選択し、ＲＡＭ７のキャラクタ記憶領域７ｇに記憶されている読み上げキャラクタ画像Ｎ２１、Ｎ２２が表示される。
【００６７】
次に、ＣＰＵ２はページカウンタｎを初期値「１」に設定する（ステップＤ４）とともに、コマカウンタＮを初期値「１」に設定し（ステップＤ５）、１ページ目の１コマ目の吹き出し部分についての登場人物Ｎｏ．、文字データ、及びコマ内に含まれる擬音データ等を含む書籍データを書籍データ記憶領域７ｄから読み出し、１コマ目に含まれる登場人物の画像や背景画像を表示するとともに、吹き出し部４０９，４１０やこの吹き出し部４０９，４１０に包まれる文字データを表示する（ステップＤ６；図１２（Ｂ）参照）。
図１２（Ｂ）は１ページ目の書籍データの表示例を示している。この図では２コマを１表示単位とし、１コマ目と２コマ目とが表示されている。そして、右側の１コマ目には「Ｂくん」の登場キャラクタ画像４０３および挿し絵または背景の画像４０６が表示されるとともに、文字データ４０８と文字データを包む吹き出し部４０９が表示されている。この１コマ目の吹き出し部４０９内の文字データ４０９は「Ｂくん」の登場人物Ｎｏ．「２」と対応付けられている。
なお、コマの表示単位は2コマに限定されるものではなく、例えば、１コマ単位としたり、3コマ以上の複数コマ単位としたり、コマの大きさによって一度に表示させるコマ数を適応的に変更するようにしてもよい。
【００６８】
左側の２コマ目には「Ａさん」の登場キャラクタ画像４０２および挿し絵または背景の画像４０７が表示されるとともに、文字データ４１１と文字データを包む吹き出し部４１０が表示される。この吹き出し部４１０内の文字データ４１１は「Ａさん」の登場人物Ｎｏ．「１」と対応付けられている。
読み上げ音声生成部１３は、ＲＡＭ７の音声データ記憶領域７ｈに記憶されている音声データに従った音声で、吹き出し部４０９，４１０内の書籍データである文字データを読み上げる（ステップＤ７）。
例えば、図１２（Ｂ）に示す例では、１コマ目の吹き出し部４０９内の文字データ４０８に含まれる「エジソンの生まれた家です。」という部分がイヤホン２８から音声再生されているところを示しているが、ステップＤ７の処理によって、これらの文字データである言葉は、登場人物である「Ｂくん」の登場キャラクタ画像４０３に割り当てられた読み上げキャラクタ画像Ｎ２１（「マイケル・ジョクソン」という有名人の顔画像）自身のもつ音声で読み上げられることなる。
【００６９】
また、２コマ目では１コマ目と同様、「蓄音機第一号も、実験の積み重ねで完成。」という部分がイヤホン２８から音声再生されているところを示しており、ステップＤ７の処理によって、これらの文字データである言葉は、登場人物である「Ａさん」の登場キャラクタ画像４０３に割り当てられた読み上げキャラクタ画像Ｎ２２（「オードリー・ケプバーン」という有名人の顔画像）自身のもつ音声で読み上げられることなる。また、ステップＤ８の処理によって「メリーさんの小羊」という蓄音機から出た音声データまたは擬音データも対応する音で出力され、イヤホン２８から出力されるところを示している。
読み上げられた音声は音声出力部１５から出力される。また、音声出力部１５は、ＲＡＭ７の音声データ記憶領域７ｈに記憶されている音声データに従った音声を送信部１６へ渡し、送信部１６はこの音声を携帯機器２０へ送信する。携帯機器２０は受信部２６において音声を受信し、イヤホン２８から出力する。
このため、読者は、読んで欲しい好きな人物または希望する有名人等の音声で、「漫画 発明王 エジソン（伝記）」という書籍内の単語または文章を聞くことができる。
【００７０】
また、読み上げ音声生成部１３は、擬音データ（風音、爆発音等）に対応した擬音を音声出力部１５へ出力する。音声出力部１５は擬音を送信部１６へ渡し、送信部１６は擬音を携帯機器２０へ送信する。携帯機器２０は受信部２６において擬音を受信し、読み上げ音声と合わせてイヤホン２８から出力する（ステップＤ８）。
更に、ＣＰＵ２は音声の読み上げと同時に読み上げられた音声に同期して吹き出し部４０９，４１０内の文字データの色を変更するように制御する（ステップＤ９）。
例えば、図１２（Ｂ）に示す例では、現在、２コマ目の吹き出し部４１０内の文字データ４１１に含まれる「実験」という単語部分がイヤホン２８から音声再生されているところを示しているが、ステップＤ９の処理によって音声の読み上げに同期して吹き出し部４０９，４１０内の「実験」という単語部分の文字４１４の色が変更されている。
【００７１】
吹き出し部４０９，４１０の音声再生が終了すると、ＣＰＵ２は更にＮコマ目（ここでは「１」コマ目）に他の吹き出し部４０９，４１０がないか判断する（ステップＤ１０）。他の吹き出し部がある場合（ステップＤ１０；Ｎｏ）はステップＤ７へ移行し、ステップＤ７、ステップＤ９と同様の処理を実行して他の吹き出し部分についてテキスト（文字）部分を、読み上げキャラクタ画像に対応する人物の音声で読み上げ再生し、擬音データに対応する音で再生し、読み上げられた音声に同期した部分の色を変更する。
その後、Ｎコマ目（ここでは「１」コマ目）に他の吹き出し部分がないと判断すると（ステップＤ１０；Ｙｅｓ）、コマカウンタをインクリメントして（Ｎ＋１→Ｎ；ステップＤ１１）、１ページに含まれる全ての文字データについて読み上げ終了したか否かを判断する（ステップＤ１２）。１ページ内の全ての文字データについて読み上げが終了していない場合は（ステップＤ１２；Ｎｏ）、ステップＤ６、ステップＤ１１の処理を繰り返し、読み上げる音声に同期してコマをスクロールして表示する。
すなわち、次のコマが表示画面の中央に表示されるようにスクロールして表示するとともに、表示中のコマに含まれる吹き出し部分の文字を読み上げ、擬音データを再生し、また読み上げている吹き出し部分の色を変更制御する。
【００７２】
表示中の１ページに含まれる各コマ内の全ての文字データについて読み上げを終了すると（ステップＤ１２；Ｙｅｓ）、ページカウンタｎをインクリメント（ｎ＋１→ｎ；ステップＤ１３）し、全てのページについての読み上げが終了していなければ（ステップＤ１４；Ｎｏ）、次のページにスクロール表示して、表示されている各コマの１コマ目から順次音声で読み上げる。
ＣＰＵ２は、内部ＲＡＭ７の書籍データ記憶領域７ｄに格納されている書籍データに基づいて、ｎページ目の表示データを生成し、表示部４に表示する。ステップＤ５〜Ｄ１３の処理を繰り返し、ｎページ目に含まれるＮコマの各吹き出し内の文字部分を、登場人物に対応する音声で読み上げ再生し、擬音データに対応する音で再生し、また、読み上げ再生中の吹き出し内の文字部分の色を変更制御する。これらの音声に同期してコマをスクロール表示する。
【００７３】
その後、全てのページについて読み上げ再生が終了したと判別すると（ステップＤ１４；Ｙｅｓ）、書籍データによる読み上げ再生処理を終了する。
一方、書籍データの読み上げ再生処理のステップＤ１において書籍データが漫画タイプではない場合、すなわち、例えば小説や物語のようなタイプであれば、以下の処理（ステップＤ１５〜ステップＤ２１）を実行する。
まず、ＣＰＵ２は、書籍データ記憶領域７ｄから題名、著作者名、目次等のデータを読み出してこれらを表示部４に表示させる（ステップＤ１５）。次いで、書籍データから朗読者の読み上げキャラクタ画像または朗読者名を抽出して、その画像または朗読者名を表示させる（ステップＤ１６；図１３（Ａ）参照）。
【００７４】
図１３（Ａ）は物語タイプの書籍の再生開始時における朗読者の選択画面の表示例を示している。この図に示すように「風とともに去りぬ」という書籍の題名４２０が表示される。同時に、朗読者Ｎｏ．１の「朗読者Ａ」の画像４２１と、朗読者Ｎｏ．２の「朗読者Ｂ」の画像４２２のほかに、これら各画像に対して、読者により割り当てられた読み上げキャラクタ画像Ｎ２１、２２が表示される。
入力部３内のカーソルの移動操作によって何れかの朗読者が選択される。すると、選択された朗読者の音声の種類とこれに割り当てられた読み上げキャラクタ画像とを内部ＲＡＭ７に設定したあと、ページカウンタｎを初期値「１」を設定し（ステップＤ１７）、「１」ページ目の書籍データを表示部４に表示する。
ＣＰＵ２は１ページ目の書籍データに含まれる文字データ４２５を、選択した読み上げキャラクタ画像で示される人物の音声で読み上げる（ステップＤ１８）。
【００７５】
例えば、図１３（Ａ）に示す朗読者の種類のうち、朗読者Ｎｏ．２の「朗読者Ｂ」が選択されると、ＣＰＵ２はこの「朗読者Ｂ」に割り当てられた読み上げキャラクタ画像Ｎ２２の音声データを取得し、内部ＲＡＭ７に設定する。その後、図１３（Ｂ）に示すように書籍データの１ページ目の文字データ４２５を表示部４に表示させると同時に、その文字データを読み上げ音声生成部１３に渡し、選択された読み上げキャラクタ画像Ｎ２２で示される人物の音声データに従った音声で、「朗読者Ｂ」として読み上げ出力する。
このとき、読み上げられている音声に同期して表示されている文字４２６の色を変更する。すなわち、イヤホン２８から「彼女」という音声を出力しているときには、表示部４に表示されている「彼女」という文字４２６の色が変更される。
【００７６】
なお、文字データ内に含まれない擬音データを適宜挿入して再生するようにしてもよい。例えば、図１３（Ｂ）に示すように、「朗読者Ｂ」が調子を取るために扇子を机に叩きつける音「バシッ」が読み上げ音声再生中にイヤホン２８から出力されるようにしてもよいし、書籍データに擬音データの発声タイミングを設定しておき、所定のタイミングで擬音を再生し、文章の表現を言葉だけでなく、金の音や虫の鳴き声等の擬音とともに表現するようにしてもよい。
その後、ｎページ目の全ての文字データの読み上げを終了すると（ステップＤ１９；Ｙｅｓ）、ページカウンタｎをインクリメントし（ｎ＋１→ｎ；ステップＤ２１）、全てのページの読み上げが終了したか否かを判断する。全てのページの読み上げが終了していないときは、次のページをスクロール表示してステップＤ２０へ戻り、表示中のｎページ目の文字データを読み上げる。その後、全てのページの読み上げが終了すると（ステップＤ２１；Ｙｅｓ）、書籍データの再生を停止し、書籍データの読み上げ再生処理を終了する。
なお、書籍データを再生している途中にストップスイッチがオンされると、書籍データの再生を停止し、書籍データの再生を終了する。
【００７７】
以上のように、本発明の電子書籍装置１では、読み上げられる音声に同期して表示中のコマやページがスクロール表示されるので、読者は意図的にページ捲りやコマ送りの操作を入力する必要がなく、電子書籍装置１において快適に読書を楽しむことができる。
一方、著作権者端末３０Ｂは、ネット４０を介して、ホストサーバ３０と接続されている。著作権者端末３０Ｂは、有名人等の読み上げキャラクタ画像、この画像で示される人物の名前、この人物の音声を示す音声データを含む著作物データを、自己の著作物データＲＡＭ３０ＢＲに記憶する。この記憶後に、著作権者端末３０Ｂが、ネット４０を介して、その著作物データをホストサーバ３０に送信する（ステップＦ２０）。すると、ホストサーバ３０は、この送信された著作物データを受信する。受信された著作物データは、自己のホームページ等に掲載するためにＲＡＭ３１Ａに登録する。
ホストサーバ３０は、この著作物データが著作権者端末３０Ｂから送信される都度、自己のホームページ等に掲載する（ステップＦ２１）。ホストサーバ３０のホームページ等に掲載された著作物データは、電子書籍装置１にて書籍の申し込みという形で活用される（ステップＦ１）。この活用の結果は、ホストサーバ３０から著作権者端末３０Ｂへ報告される（ステップＦ２２）。著作権者端末３０Ｂはホストサーバ３０からの報告を受信する（ステップＦ２３）。電子書籍装置１により電子書籍データがダウンロードされた結果、その対価としての料金に関する決済報告は、ホストサーバ３０から著作権者端末３０Ｂへ報告される（ステップＦ２４）。著作権者端末３０Ｂはホストサーバ３０からの報告を受信したあと、ダウンロードされた結果の対価としての著作権料の支払いを受け取ることができる（ステップＦ２５）。
著作権者端末３０Ｂは、その後、新たにテレビ、映画等で有名となった俳優、芸能人、ノーベル賞受賞者、スポーツで活躍した選手等の読み上げキャラクタ画像、この画像で示される人物の名前、この人物の音声を示す音声データを含む著作物データを、自己の著作物データＲＡＭ３０ＢＲに記憶したならば、この記憶後に、ネット４０を介して、その著作物データをホストサーバ３０に向けて、更新された著作物データとして送信する（ステップＦ２６）。すると、ホストサーバ３０は、この更新された著作物データを受信し、この更新された著作物データをＲＡＭ３１Ａに記憶する（ステップＦ１６）。
ホストサーバ３０は、このようにして、この更新された著作物データが著作権者端末３０Ｂから送信される都度、自己のホームページ等に新たに掲載する（ステップＦ２１）。このため、電子書籍装置１は、更新された著作物データである読み上げキャラクタ画像および音声データ等を内部ＲＡＭ７および外部ＲＡＭ８に受信することができ、このため、ホストサーバ３０から配信された書籍データに登場する登場キャラクタに割り当てられるべき新たな読み上げキャラクタ画像、音声データ等として、迅速かつ容易に活用することができる（ステップＦ１〜Ｆ１７）。
【００７８】
以上説明したように、書籍処理では、外部ＲＡＭ８に記憶されている書籍データの中から所望の書籍データおよび音声データを読み出して、音声データに対応する音声で書籍データに対応する書籍内容を読み上げ再生することができる。また、外部からダウンロードした書籍データおよび音声データ等を内部ＲＡＭ７等に複数記憶することができる。
なお、書籍データの読み上げ再生中に電話の着信があると、ＣＰＵ２は着信を報知するため着信報知指示信号を出力するとともに、書籍データの読み上げ停止指示を出力する。着信があった時点での書籍データの読み上げ位置を着信レジスタ７ｉに記憶し、通話が終了すると、記憶した停止位置から書籍データの読み上げを再開する。
【００７９】
更に、ＣＰＵ２は書籍データのタイプを判断し、タイプに応じて表示単位を変更したり読み上げる音声の種類の設定の仕方を変更したりする。例えば、漫画タイプであればコマ単位（例えば２コマ単位）で表示し、登場人物に対応づけて割り当てられた読み上げキャラクタ画像の音声で吹き出し部内の文字データを読み上げ再生する。その他のタイプであればページ単位で表示し、読者により指定された読み上げキャラクタ画像固有の音声で、文字データを読み上げ再生する。読み上げ再生時には、読み上げられる音声に同期して表示中のコマやページがスクロール表示する。
従って、電子書籍装置１は、所望の書籍データおよび音声データを外部からダウンロードして容易に取得することができるので、読者は表示された書籍データを黙読し視覚的に楽しむことができるだけでなく、表示された書籍データを目で確認しながら、音声データに従って読み上げられる音声を聴取することで聴覚的にも読書を楽しむことができる。
また、書籍データの読み上げ再生中に電話の着信があると、電話の着信を報知する一方で書籍データの読み上げ再生を自動的に停止するので読書中にも迅速に電話に応答できる。また、電話の着信時における書籍データの再生位置を記憶しておき、通話が終了すると自動的に前記再生位置から書籍データの再生を自動的に再開するので読書を再開するときになんら操作を必要とせず、便利である。
【００８０】
また、書籍のタイプが漫画タイプである場合は登場人物の画像、この画像が発言する文字データ、及びこの文字データを包む吹き出し部をコマ単位で表示させ、表示された吹き出し部内の文字データを登場人物に対応づけて割り当てられた読み上げキャラクタ画像の音声で読み上げ、吹き出し部内の文字データの読上げが完了すると自動的に他のコマの処理に移行（スクロール表示）するように制御するので、ページを捲る操作やコマを送る操作を必要とせず、操作を簡便なものとすることができる。
また登場人物毎に割り当てられた読み上げキャラクタ画像の音声で、書籍データにて示される書籍内容が読み上げられるので、読み上げる音声の違いから登場人物を区別でき、視覚に頼らずに読書できる。
さらに、音声で読上げられている文字データを他の文字データと区別可能に表示させるので、読み上げられている箇所を容易に確認でき、例えば表示されている画像と文字とを交互に見る場合にも、画像から文字に視線を移したときにどの部分を読み上げているかを瞬時に判断できるので、快適な読書を提供できる。
【００８１】
また、小説や物語タイプの書籍では読み上げ対象となる文字データをページ単位で表示させ、表示された文字データを読者の指定した読み上げキャラクタ画像固有の音声で読み上げ、文字データの読上げが完了したら、次のページに移行（スクロール表示）するので、ページ捲りの操作を必要とせず、読書中の操作を簡便にできる。また登場人物に割り当てられる登場キャラクタ画像の選択を通じて、読み上げキャラクタ画像固有の音声を指定できるので、その指定された音声を聞くことができ、読者は快適に読書できる。
【００８２】
なお、本発明は、上述の実施形態の内容に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更可能である。
例えば、音声認識部２Ａを設け、この音声認識部２Ａにて、音声入力部１４から入力された音声信号について、音声スペクトラム短縮化等の分析処理を行った後に、標準パターン等とのパターンマッチングを行って音声認識を行い、その音声認識結果を出力する音声認識処理を施すことも可能である。例えば、電話モードにおいて、相手方の電話端末にダイヤルする場合に、ダイヤル部３ｄにおけるダイヤルキーの手動操作に代えて、予め内部ＲＡＭ７のダイヤルデータ記憶領域に記憶されている電話番号データや電話番号データに対応付けられている相手の名前などをマイク部１Ｃから音声入力し、上述の音声認識部２Ａの音声認識処理によってダイヤル先を指示することや、再生する書籍データを音声によって指示することも可能である。
【００８３】
また、上述の実施の形態では読み上げる音声を書籍データとしたが、例えば通信Ｉ／Ｆ部９を介して外部から受信した電子メールの内容を、サーバ３０から配信された読み上げキャラクタ画像の音声で読み上げるようにしてもよい。
この場合、ＣＰＵ２は通信Ｉ／Ｆ部９において外部から送信された電子メール（文字データ）を受信して内部ＲＡＭ７のメールデータ記憶領域７ｅに記憶しておき、入力部３の操作に従ってメールデータ記憶領域７ｅに記憶された電子メールの内容を、サーバ３０から配信された読み上げキャラクタ画像の音声で読み上げる構成とすれば、電子書籍装置１において書籍データを読み上げるだけでなく、外部から受信した電子メールについての読み上げ音声を聴取することも可能となる。
また、この場合において、各読み上げキャラクタ画像Ｎ２１〜Ｎ２５毎に、電子メールの文字データ（単語、言葉、挨拶文などを含む）に対応した動作を表す読み上げキャラクタ画像を複数枚、キャラクタ画像ＲＯＭ３２Ｂに記憶しておき、このキャラクタ画像ＲＯＭ３２Ｂに記憶してある各読み上げキャラクタ画像Ｎ２１〜Ｎ２５毎の、複数枚の読み上げキャラクタ画像をサーバ３０から配信してもらい、メールデータ記憶領域７ｅに記憶された電子メールの内容を、同じく配信された読み上げキャラクタ画像固有の音声で読み上げる際に、当該電子メールの文字データに従った動作の各読み上げキャラクタ画像を順次読み出して表示部４に表示させてゆけば、電子メールの内容に従った動作を行う読み上げキャラクタ画像とすることができる。
例えば、電子メールの文字データが「こんにちは」という挨拶文であった場合には、この「こんにちは」という文字データに従った音声で、読み上げキャラクタ画像Ｎ２１等が「お辞儀」の動作を行うように表示させることができる。
【００８４】
また、電子書籍装置１の２つの表示パネル１Ａ，１Ｂの表示画面にタッチパネルを設け、一方の表示パネルの一部を押圧指定すると他方の表示パネルにその詳細な内容が表示されるようにしてもよい。例えば、一方の表示パネルに目次を表示しておき、その目次のうち所望のタイトル部分を押圧すると、他方の表示パネルに該タイトルの示す章の書籍データを表示するようにしてもよい。この場合は、電子書籍装置１におけるページ捲り操作が簡便化され、さらに快適な読書を楽しむことができる。
また、携帯機器２０をヘッドホン型書籍データ再生装置とし、それのイヤーパッド内にメモリカード（外部メモリ）を収納する部位を設けるとともに書籍データの読み上げ音声を再生するための読み上げ音声生成部１３及び音声出力部１５を設け、通信Ｉ／Ｆ部９を介して所望の書籍データを外部（書籍データ配信センターＨＳのホストサーバ３０）からダウンロードして前記メモリカードに複数記憶しておき、読者によって選択された書籍データを、選択された音声データに対応した音声で読み上げる。
このようなヘッドホン型の書籍データ再生装置においても、書籍データに基づく音声の読み上げ再生中に電話の着信があると、ＣＰＵ２は着信報知指示信号及び再生停止指示信号を発生して、着信を報知するとともに書籍データの読み上げ音声の再生を停止させ、電子書籍装置５０の表示部４における書籍データの表示を停止させる。またこのとき再生の停止位置を内部ＲＡＭ７の着信レジスタ７ｉに記憶する。そして通話が終了すると読み上げ音声の再生停止位置から書籍データの読み上げを再開する。
【００８５】
従って、ヘッドホン型書籍データ再生装置でも、所望の書籍データを外部からダウンロードして容易に取得し、メモリカードに記憶することができる。また、読者は書籍データに従って読み上げられる音声を聴取することで聴覚的に読書を楽しむことができる。また書籍データの読み上げ再生中に電話の着信があると、電話の着信を報知する一方で書籍データの読み上げ再生を自動的に停止するので読書中にも迅速に電話に応答できる。また、電話の着信時における書籍データの再生位置を記憶しておき、通話が終了すると自動的に前記再生位置から書籍データの再生を自動的に再開するので読書を再開するときになんら操作を必要とせず、便利である。
その他、計時部１２をヘッドホン型書籍データ再生装置６０側に設けたり、音声入力部１４や回転スイッチ部１１を電子書籍装置５０側に設けるといった内容の変更については、本発明の趣旨を逸脱しない範囲で適宜可能である。
【００８６】
【発明の効果】
請求項１および請求項６に記載の発明によれば、表示されている複数の書籍名のなかから一つの書籍名を選択したあと、この選択された書籍名に対応する書籍データの配信を外部の書籍配信装置へ要求し、その後、外部の書籍配信装置からこの要求された書籍データとこの書籍データに含まれている文字データを読み上げる者（例えば、有名人、声優）を示す複数の読み上げ者画像とを受信し、この受信された書籍データに関連する複数の登場人物画像が表示された後に、この表示された複数の登場人物画像に割り当てられる複数の読み上げ者画像を表示させ、この表示された複数の読み上げ者画像と複数の登場人物画像とを一覧表示している状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定を行うことができる。この結果、各登場人物の画像に対して割り当てたい読み上げ者画像を確実かつ容易に指定することができる。そればかりでなく、その後、受信された書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを、登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げることができる。
【００８７】
請求項２および請求項７に記載の発明によれば、予め定められている書籍データに関連する複数の登場人物画像が表示された後に、この表示された複数の登場人物画像に割り当てられる複数の読み上げ者画像を表示させ、この表示された複数の読み上げ者画像と複数の登場人物画像とを一覧表示している状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定を行うことができる。この結果、各登場人物の画像に対して割り当てたい読み上げ者画像を確実かつ容易に指定することができる。そればかりでなく、その後、受信された書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを、登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げることができる。
【図面の簡単な説明】
【図１】この発明における音声再生システムの使用状態例、音声再生システムと外部とのデータ通信の様子を模式的に示す図である。
【図２】音声再生システムを構成する電子書籍装置と携帯機器との間におけるデータ通信の様子を模式的に示す図である。
【図３】電子書籍装置の構成、書籍データ配信センターに設置されたホストサーバの構成、携帯機器の構成、及び著作権者端末の構成を示すブロック図である。
【図４】電子書籍装置の内部ＲＡＭのメモリ構成を示す図である。
【図５】ホストサーバ内部における書籍ＲＯＭのメモリ構成を示す図である。
【図６】著作権者端末内部におけるＲＡＭのメモリ構成を示す図である。
【図７】電子書籍装置、書籍データ配信センターのホストサーバ、及び著作権者端末の三者でそれぞれ実行される各処理の流れを示すフローチャートである。
【図８】書籍データ・キャラクタ選択処理を説明するフローチャートである。
【図９】書籍データの読み上げ再生処理を説明するフローチャートである。
【図１０】（Ａ）および（Ｂ）は 読み上げる書籍を選択するための書籍選択画面の表示例、および選択後の表示例である。
【図１１】（Ａ）および（Ｂ）は書籍の読み上げる読み上げキャラクタ画像の選択を行う際における表示部の表示例、および、登場人物と読み上げキャラクタ画像との割り当ての際における対応関係を示す表示例である。
【図１２】（Ａ）および（Ｂ）は登場人物と読み上げキャラクタ画像との割り当て後における対応関係を示す表示例、および、書籍の読み上げ再生中における表示例である。
【図１３】（Ａ）および（Ｂ）は物語タイプにおける登場人物と読み上げキャラクタ画像との割り当て後における対応関係を示す表示例、および、その書籍の読み上げ再生中における表示例である。
【符号の説明】
１００ 音声再生システム
１ 電子書籍装置
１Ｃ マイク部
１Ｅ スピーカ部
２ ＣＰＵ
４ 表示部
６ ＲＯＭ
７ 内部ＲＡＭ
８ 外部ＲＡＭ
１５、２７ 音声出力部
２０ 携帯機器
ＨＳ 書籍データ配信センター
３０ ホストサーバ
３２Ａ 書籍データＲＯＭ
３２Ｂ キャラクタＲＯＭ
３２Ｃ 音声データＲＯＭ
３３ 配信部

Claims (10)

1. 書籍データおよび画像を表示する表示部を備えた電子書籍装置において、
   複数の書籍名を前記表示部に一覧表示させる第１の表示制御手段と、
   この第１の表示制御手段の制御により表示された複数の書籍名のなかから一つの書籍名を選択する書籍名選択手段と、
   この書籍名選択手段により選択された書籍名に対応する書籍データの配信を外部の書籍配信装置へ要求し、その後、前記書籍配信装置からこの要求された書籍データとこの書籍データに含まれている文字データを読み上げる者を示す複数の読み上げ者画像とを受信する受信手段と、
   この受信手段により受信された書籍データに関連する複数の登場人物画像を前記表示部に表示させる第２の表示制御手段と、
   この第２の表示制御手段の制御により表示された複数の登場人物画像に割り当てられる複数の読み上げ者画像を前記表示部に表示させる第３の表示制御手段と、
   この第３の表示制御手段の制御により複数の読み上げ者画像と複数の登場人物画像とを一覧表示させた状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定を行う画像指定手段と、
   この画像指定手段により指定された読み上げ者画像と登場人物画像とが対応付けられた後に、前記受信手段により受信された書籍データと前記登場人物画像とを表示させる第４の表示制御手段と、
   この第４の表示制御手段の制御により書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを前記画像指定手段により登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げる読み上げ制御手段と、
   を備えていることを特徴とする電子書籍装置。
2. 予め定められている書籍データおよび画像を表示する表示部を備えた電子書籍装置において、
   前記書籍データに関連する複数の登場人物画像と複数の読み上げ者画像を前記表示部に一覧表示させる第１の表示制御手段と、
   この第１の表示制御手段の制御により複数の読み上げ者画像と複数の登場人物画像とを一覧表示させた状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定を行う画像指定手段と、
   この画像指定手段により指定された読み上げ者画像と登場人物画像とが対応付けられた後に、前記書籍データと前記登場人物画像とを表示させる第２の表示制御手段と、
   この第２の表示制御手段の制御により書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを前記画像指定手段により登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げる読み上げ制御手段と、
   を備えていることを特徴とする電子書籍装置。
3. 前記読み上げ制御手段は、前記書籍データに含まれている文字データを読み上げた際に、読み上げされている文字データ部分を他の文字データ部分と識別表示させる識別表示制御手段を更に備えていることを特徴とする請求項１または２に記載の電子書籍装置。
4. 前記読み上げ者画像は、前記文字データを読み上げる有名人、声優の画像であることを特徴とする請求項１または２に記載の電子書籍装置。
5. 前記書籍データは、複数の文字データとこの複数の文字データを囲む吹き出しとからなることを特徴とする請求項１または２に記載の電子書籍装置。
6. 書籍データおよび画像を表示する表示部を備えた電子書籍装置に用いられる電子書籍データ表示制御方法において、
   複数の書籍名を前記表示部に一覧表示させる第１の表示制御ステップと、
   この第１の表示制御ステップの制御により表示された複数の書籍名のなかから一つの書籍名が選択されると、この選択された書籍名に対応する書籍データの配信を外部の書籍配信装置へ要求し、その後、前記書籍配信装置からこの要求された書籍データとこの書籍データに含まれている文字データを読み上げる者を示す複数の読み上げ者画像とを受信する受信ステップと、
   この受信ステップにより受信された書籍データに関連する複数の登場人物画像を前記表示部に表示させる第２の表示制御ステップと、
   この第２の表示制御ステップの制御により表示された複数の登場人物画像に割り当てられる複数の読み上げ者画像を前記表示部に表示させる第３の表示制御ステップと、
   この第３の表示制御ステップの制御により複数の読み上げ者画像と複数の登場人物画像とを一覧表示させた状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定が行われると、この指定された読み上げ者画像と登場人物画像とが対応付けられた後に、前記受信ステップにより受信された書籍データと前記登場人物画像とを表示させる第４の表示制御ステップと、
   この第４の表示制御ステップの制御により書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを前記登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げる読み上げ制御ステップと、
   を備えていることを特徴とする電子書籍データ表示制御方法。
7. 予め定められている書籍データおよび画像を表示する表示部を備えた電子書籍装置に用いられる電子書籍データ表示制御方法において、
   前記書籍データに関連する複数の登場人物画像と複数の読み上げ者画像を前記表示部に一覧表示させる第１の表示制御ステップと、
   この第１の表示制御ステップの制御により複数の読み上げ者画像と複数の登場人物画像とを一覧表示させた状態のもとで、これら複数の読み上げ者画像と複数の登場人物画像とを対応付けるための指定が行われると、この指定された読み上げ者画像と登場人物画像とが対応付けられた後に、前記書籍データと前記登場人物画像とを表示させる第２の表示制御ステップと、
   この第２の表示制御ステップの制御により書籍データと登場人物画像とを表示させた状態のもとで、当該書籍データに含まれている文字データを前記登場人物画像に対応付けて指定された読み上げ者画像の音声で読み上げる読み上げ制御ステップと、
   を備えていることを特徴とする電子書籍データ表示制御方法。
8. 前記読み上げ制御ステップは、前記書籍データに含まれている文字データを読み上げた際に、読み上げされている文字データ部分を他の文字データ部分と識別表示させる識別表示制御ステップを更に備えていることを特徴とする請求項６または７に記載の電子書籍データ表示制御方法。
9. 前記読み上げ者画像は、前記文字データを読み上げる有名人、声優の画像であることを特徴とする請求項６または７に記載の電子書籍データ表示制御方法。
10. 前記書籍データは、複数の文字データとこの複数の文字を囲む吹き出しとからなることを特徴とする請求項６または７に記載の電子書籍データ表示制御方法。

Images