JP2006331257A

JP2006331257A - 電子書籍装置

Info

Publication number: JP2006331257A
Application number: JP2005156888A
Authority: JP
Inventors: Emiko Tajima; 恵美子田嶋; Toshihiro Iwase; 敏広岩瀬; Haruki Ishimochi; 春樹石持
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2005-05-30
Filing date: 2005-05-30
Publication date: 2006-12-07

Abstract

【課題】電子化された書籍本文の表示形態を下線引きなどにより順次加工し、加工された本文の到達位置（下線の到達位置）から音声／効果音、画像を自動再生可能な電子書籍装置を提供する。
【解決手段】電子書籍装置１０は、電子書籍データを本文データ，音声／効果音データ，画像データ毎にデコードする電子書籍データデコード部１３と、デコードした本文データを構成する文字又は背景の表示形態を該文字を読んでいく方向に向かって順次加工（下線引きなど）する本文加工手段２０と、その下線の到達位置から前記音声／効果音データ及び画像データの再生タイミングを設定する再生タイミング設定部２１と、その再生タイミングで前記音声／効果音データを再生出力する音声／効果音再生処理部２２と、前記再生タイミングで前記画像データを前記本文データに合成して表示出力する合成表示処理部１５と、を備える。
【選択図】図１

Description

本発明は、電子書籍装置、より詳細には、書籍の本文、音声／効果音、及び画像などを電子化した電子書籍データを自動再生可能な電子書籍装置に関する。

従来、電子書籍装置は、書籍の内容を電子化した電子書籍データを記憶するための記憶媒体、電子書籍データを表示させる液晶表示部、読みたい電子書籍データの選択やページ捲り等を操作する操作入力部、電子書籍装置の各部を制御する制御部等を備え、操作入力部により所望の電子書籍データが選択されると、制御部は記憶媒体から該当する電子書籍データを読み出して、その電子書籍データの１ページ目の本文データを液晶表示部に表示し、さらに、操作入力部においてページ捲りが指示されると液晶表示部に表示されている書籍データを次ページに切り替えて表示できるように構成されている。

このような電子書籍装置は、従来の紙の書籍と比較して、資源の消費を抑えることができ、また、一つの装置で複数の電子書籍データを記憶できるので携帯に便利である。更に、書籍の管理が容易となる。このように様々な利点を持つことから、電子書籍専用機をはじめ、携帯電話機、ＰＤＡ（ＰｅｒｓｏｎａｌＤｉｇｉｔａｌＡｓｓｉｔａｎｔ）など様々な形態の電子書籍装置が普及してきている。

しかしながら、上述の電子書籍装置は、従来の紙の書籍の文字を単に電子化した文字データを表示するだけなので表現力に乏しいという問題がある。そのため、文字、音声、画像などを組み合わせたより豊かな表現力の実現が望まれる。また、単に音声を出力するだけでは、読者が電子書籍装置の画面から一旦目を離してしまうと、再度画面に目を向けて読み出したときに、どの部分を読み上げているのかわからなくなってしまうことがある。

従来、電子書籍装置の音声出力に関して、例えば、特許文献１には、書籍内容に関連する音声を出力可能にしたものが示されている。これは、見開きタイプの電子書籍装置であって、見開いた状態の書籍本体の展開面に書籍内容を表示する主表示手段と、閉じ込んだ状態の書籍本体の外面に予め記憶した書籍に関する特定情報を出力する補助表示手段と、さらに、音声出力部とを備え、主表示手段が展開面に表示する書籍内容に関連する情報を音声出力できるように構成されている。
特開２００３−２４１８８３号公報

上述したように、従来の電子書籍装置は、書籍の内容（本文など）を単に音声出力するだけにとどまり、本文のどの部分を読み上げているのかわかるようになっていないため、読者は画面上の本文を常時目で追う必要があり、読書に負担がかかっていた。このことは、上記特許文献１に記載の発明でも同様である。また、文字を画面表示させるだけでは表現力に乏しいため、文字、音声、画像などを組み合わせて表現力豊かに再生できる電子書籍装置の実現が望まれている。

本発明は、上述のごとき実情に鑑みてなされたものであり、電子化された書籍本文の表示形態を下線引きなどにより順次加工し、加工された本文の到達位置（すなわち下線の到達位置）から音声／効果音、画像を自動再生可能な電子書籍装置を提供すること、を目的とする。

上記課題を解決するために、本発明の第１の技術手段は、書籍の本文，音声／効果音を電子化した電子書籍データを再生可能な電子書籍装置において、前記電子書籍データを本文データ，音声／効果音データ毎にデコードするデコード手段と、該デコードした本文データを構成する文字又は背景の表示形態を該文字を読んでいく方向に向かって順次加工する本文加工手段と、該加工された本文データの到達位置から前記音声／効果音データの再生タイミングを設定する再生タイミング設定手段と、該設定した再生タイミングで前記音声／効果音データを再生出力する音声／効果音再生処理手段と、を備えていることを特徴としたものである。

本発明の第２の技術手段は、第１の技術手段において、前記電子書籍データは、書籍に関する画像データをさらに含み、該画像データを前記本文データに合成して表示出力する合成表示処理手段を備え、前記再生タイミング設定手段は、前記加工された本文データの到達位置から前記画像データの再生タイミングを設定し、前記合成表示処理手段は、前記設定した再生タイミングで前記画像データを前記本文データに合成して表示出力することを特徴としたものである。

本発明の第３の技術手段は、第１又は第２の技術手段において、前記本文加工手段は、前記本文データを構成する文字に下線を引くことを特徴としたものである。

本発明の第４の技術手段は、第１又は第２の技術手段において、前記本文加工手段は、前記本文データを構成する文字を太くすることを特徴としたものである。

本発明の第５の技術手段は、第１又は第２の技術手段において、前記本文加工手段は、前記本文データを構成する文字を斜体にすることを特徴としたものである。

本発明の第６の技術手段は、第１又は第２の技術手段において、前記本文加工手段は、前記本文データを構成する文字に色を付けることを特徴としたものである。

本発明の第７の技術手段は、第１又は第２の技術手段において、前記本文加工手段は、前記本文データを構成する文字の背景に色を付けることを特徴としたものである。

本発明の第８の技術手段は、第１又は第２の技術手段において、前記本文加工手段は、前記本文データを構成する文字を所定数あるいは所定数行ずつ表示することを特徴としたものである。

本発明の第９の技術手段は、第３乃至第８のいずれか１の技術手段において、前記本文データを加工する速度を制御する本文加工速度制御手段と、前記本文データの加工速度から前記加工された本文データの到達位置を演算する本文加工位置演算手段とを備え、前記合成表示処理手段は、前記本文加工位置演算手段の演算結果に従って、前記加工された本文データを表示出力することを特徴としたものである。

本発明の第１０の技術手段は、第９の技術手段において、前記本文データを加工する速度を任意に設定するための手段を備え、前記本文加工速度制御手段は、前記設定された加工速度で前記本文データを加工するように制御することを特徴としたものである。

本発明の第１１の技術手段は、第９の技術手段において、前記電子書籍装置の読者が読む速度を学習する手段を備え、前記本文加工速度制御手段は、前記学習された読者の読む速度に合わせて前記本文データを加工するように制御することを特徴としたものである。

本発明の第１２の技術手段は、第９の技術手段において、前記本文データに含まれる文字種を認識する手段を備え、前記本文加工速度制御手段は、前記認識された文字種に応じて前記本文データの加工速度を可変可能に制御することを特徴としたものである。

本発明の第１３の技術手段は、第９の技術手段において、前記再生タイミング設定手段は、前記本文加工位置演算手段から取得される行単位の位置情報に基づき、前記加工された本文データの到達位置に略連動して、前記音声／効果音データ及び／又は前記画像データが出力されるように再生タイミングを設定することを特徴としたものである。

本発明の第１４の技術手段は、第９の技術手段において、前記再生タイミング設定手段は、前記本文加工位置演算手段から取得される行単位の位置情報に基づき、前記加工された本文データの到達位置に略連動して、前記音声／効果音データ及び／又は前記画像データを出力する際に、前記本文データに予め設定されている前記音声／効果音データ及び／又は前記画像データの文字単位あるいは単語単位の再生位置情報から、再生タイミングを自動調整して設定することを特徴としたものである。

本発明の第１５の技術手段は、第９の技術手段において、前記再生タイミング設定手段は、前記本文加工位置演算手段から取得される文字単位あるいは単語単位の位置情報に基づき、前記加工された本文データが、該本文データに予め設定されている前記音声／効果音データ及び／又は前記画像データの文字単位あるいは単語単位の再生位置情報に到達したときに、前記音声／効果音データ及び／又は前記画像データが出力されるように再生タイミングを設定することを特徴としたものである。

本発明によれば、電子化された書籍本文の表示形態を下線引きなどにより順次加工し、加工された本文の到達位置（すなわち下線の到達位置）から音声／効果音、画像を自動再生することができるため、読書を中断して音声再生操作をする必要がなく、読書時の負担を軽減することができる。また、下線等の表示にあわせた適当なタイミングで自動的に音声／効果音を聞いたり、画像を見たりすることができる。また、文字、音声／効果音、画像などを組み合わせて表現力豊かに書籍の内容を再生することができる。

本発明の電子書籍装置は、書籍の本文，音声／効果音を電子化した電子書籍データを再生可能とし、電子書籍データを本文データ，音声／効果音データ毎にデコードするデコード手段と、デコードした本文データを構成する文字又は背景の表示形態を該文字を読んでいく方向に向かって順次加工（下線引きなど）する本文加工手段と、加工された本文データの到達位置（下線の到達位置）から音声／効果音データの再生タイミングを設定する再生タイミング設定手段と、その再生タイミングで音声／効果音データを再生出力する音声／効果音再生処理手段と、を備えている。

再生タイミング設定手段は、本文データに対応する音声／効果音を再生するタイミングを設定する手段であって、加工された本文データの到達位置に略連動して、音声／効果音が出力されるように再生タイミングを設定してもよく、あるいは、本文データ中に予め埋め込まれている音声／効果音の再生位置に、加工された本文データが到達した時点で当該音声／効果音が出力されるように再生タイミングを設定してもよい。

本文加工手段は、例えば、本文データを構成する文字に下線を引く、本文データを構成する文字を太くする、本文データを構成する文字を斜体にする、本文データを構成する文字に色を付ける、本文データを構成する文字の背景に色を付ける、本文データを構成する文字を所定数あるいは所定数行ずつ順次表示する、などの方法で本文データを構成する文字や背景の表示形態を順次加工する。

また、電子書籍データは、書籍の本文データ、音声／効果音データに加えて、画像データをさらに含むようにしてもよい。この場合、電子書籍装置は、画像データを本文データに合成して表示出力する合成表示処理手段を備え、再生タイミング設定手段は、本文加工手段により加工された本文データの到達位置から画像データの再生タイミングを設定し、合成表示処理手段は、設定した再生タイミングで画像データを本文データに合成して表示出力する。

以下、電子化された書籍の本文データの表示形態を下線引きにより順次加工し、加工された本文データの到達位置（すなわち下線の到達位置）から再生タイミングを設定して音声／効果音、画像を自動再生する例を代表例として説明する。
図１は、本発明の一実施形態に係る電子書籍装置の構成例を示すブロック図で、図中、１０は電子書籍装置で、該電子書籍装置１０は、ＨＤＤ（ハードディスクドライブ）１１、ファイルシステム部１２、電子書籍データデコード部１３、本文レイアウト処理部１４、合成表示処理部１５、モニタ出力部１６、操作パネル１７、操作パネル制御検出部１８、指定ページ表示制御部１９、下線表示速度制御部２０ａ、下線表示位置情報演算部２０ｂ、下線レイアウト処理部２０ｃ、再生タイミング設定部２１、音声／効果音再生処理部２２、画像レイアウト処理部２３、音声出力部２４、を備えている。

本実施形態の本文加工手段２０は、本文加工速度制御手段に相当する下線表示速度制御部２０ａ、本文加工位置演算手段に相当する下線表示位置情報演算部２０ｂ、及び下線レイアウト処理部２０ｃで構成されているが、本文データを構成する文字に下線を引く以外にも、例えば、本文データを構成する文字を太くする、本文データを構成する文字を斜体にする、本文データを構成する文字に色を付ける、本文データを構成する文字の背景に色を付ける、本文データを構成する文字を所定数あるいは所定数行ずつ順次表示する、などの方法を適用して本文の表示形態を加工してもよい。ここで、上記のいずれの方法（すなわち、下線、太字、斜体、文字色変更、背景色変更、本文順次表示など）においても、行単位、文字単位、単語（文字列）単位で本文データの加工を行うことができる。

なお、本実施形態の電子書籍装置１０は、書籍の本文、音声／効果音、画像を再生可能な構成について示しているが、書籍の本文、音声／効果音のみを電子化した電子書籍データに対しても同様に適用できる。

本実施形態の電子書籍装置１０が備える各部について詳細に説明する。ＨＤＤ１１は、外部記録媒体あるいはネットワークを介して取得される電子書籍データを記憶する記憶手段である。ファイルシステム部１２は、ＨＤＤ１１から電子書籍データを読み出す手段である。操作パネル１７は、ユーザからの各種操作入力を受け付ける手段であり、画面表示させる電子書籍データのページ指定の入力などを受け付ける。操作パネル制御検出部１８は、操作パネル１７から指定されたページの表示要求を検出する。指定ページ表示制御部１９は、操作パネル制御検出部１８で検出されたページ表示要求に従って、指定されたページを表示するように電子書籍データデコード部１３を制御する。

電子書籍データデコード部１３は、電子書籍データを本文データ、音声／効果音データ、画像データ毎にデコードする手段である。この電子書籍データデコード部１３は、電子書籍データに含まれる音声／効果音データの再生位置情報と、画像データの再生位置情報とをそれぞれ分離する処理を行う。本文レイアウト処理部１４は、電子書籍データデコード部１３でデコードされた本文データを本文イメージ（すなわち、モニタ出力イメージ）に展開する。画像レイアウト処理部２３は、電子書籍データデコード部１３でデコードされた画像データを画像イメージ（モニタ出力イメージ）に展開する。

合成表示処理部１５は、本文レイアウト処理部１４で展開された本文データと、画像レイアウト処理部２３で展開された画像データとを合成してモニタ出力部１６から出力する。ここで、モニタ出力部１６は、液晶ディスプレイなどの表示手段である。一方、音声／効果音再生処理部２２は、電子書籍データデコード部１３でデコードされた音声／効果音データをアナログ音声に変換して音声出力部２４から出力する。音声出力部２４は、スピーカなどである。

下線表示速度制御部２０ａは、本文データに合成する下線の表示速度を制御する手段である。下線の表示速度は、読者が操作パネル１７を操作してメニュー画面を表示させ、メニュー画面上から任意の表示速度を設定してもよい。例えば、１０秒で本文１行の下線を引く（０.１行／秒）、という設定を行う。この場合、下線表示速度制御部２０ａは、設定された表示速度で自動的に下線を引くように制御する。また、下線表示速度制御部２０ａは、読者の読む速度を学習する手段を備えるようにしてもよい。具体例として、電子書籍装置１０が、読者が手動で下線を引く速さを学習する、手動で行送りを行う速さを学習する、手動でクリックする速さを学習する、などの方法で読者の読む速度を学習し、その速度で自動的に下線を引くように制御する。また、下線表示速度制御部２０ａは、本文データに含まれる、かな、漢字、数字、アルファベットなどの文字種を認識する手段を備え、文字種によって下線表示速度を可変できるように制御してもよい。

下線表示位置情報演算部２０ｂは、下線表示速度制御部２０ａからの下線の表示速度から該下線の到達する表示位置を演算する。さらに、下線表示位置情報演算部２０ｂは、演算の結果得られた下線表示位置情報を、下線レイアウト処理部２０ｃと再生タイミング設定部２１に送る。下線レイアウト処理部２０ｃは、下線表示位置情報演算部２０ｂからの下線位置情報と、電子書籍データデコード部１３からの本文データとに基づいて、下線イメージを展開する。

再生タイミング設定部２１は、下線表示位置情報演算部２０ｂから送られてくる下線位置情報と、電子書籍データデコード部１３から送られてくる画像データの再生位置情報及び音声／効果音データの再生位置情報とに基づいて、画像データ、音声／効果音データの再生タイミングを設定する。例えば、再生タイミング設定部２１は、音声／効果音データの再生位置に下線が到達した時点を、その音声／効果音データの再生タイミングとして設定する。また、画像再生の場合、画像データの再生位置に下線が到達した時点を、その画像データの再生タイミングとして設定する。また、下線の到達位置に連動して音声／効果音が出力されるように再生タイミングを設定してもよい。

合成表示処理部１５は、下線レイアウト処理部２０ｃで展開された下線イメージを、本文レイアウト処理部１４で展開された本文イメージに合成してモニタ出力部１６から表示出力する。また、合成表示処理部１５は、再生タイミング設定部２１により設定した再生タイミングで、画像レイアウト処理部２３で展開された画像イメージを、本文レイアウト処理部１４で展開された本文イメージに合成してモニタ出力部１６から表示出力する。音声／効果音再生処理部２２は、再生タイミング設定部２１により設定した再生タイミングで音声／効果音データを再生して音声出力部２４から出力する。

図２は、本発明の電子書籍装置１０におけるページ表示処理の一例を説明するためのフロー図である。まず、電子書籍装置１０の読者が、操作パネル１７から電子書籍データのページを指定すると（ステップＳ１）、操作パネル制御検出部１８が指定ページの表示要求を検出し、その検出結果を指定ページ表示制御部１９に通知する（ステップＳ２）。指定ページ表示制御部１９は、指定ページを表示するように電子書籍データデコード部１３を制御する（ステップＳ３）。電子書籍データデコード部１３は、指定ページ表示制御部１９からの制御信号に従って、ＨＤＤ１１から該当する電子書籍データを読み出して、その電子書籍データを本文データ、画像データ、音声／効果音データ、音声／効果音データの再生位置情報、及び画像データの再生位置情報に分離する（ステップＳ４）。

次に、本文レイアウト処理部１４は、電子書籍データデコード部１３でデコードされた本文データを本文イメージ（モニタ出力イメージ）に展開し（ステップＳ５）、同様に、画像レイアウト処理部２３は、電子書籍データデコード部１３でデコードされた画像データを画像イメージ（モニタ出力イメージ）に展開する（ステップＳ６）。そして、合成表示処理部１５は、上記展開した本文イメージと画像イメージを合成してモニタ出力部１６から出力する（ステップＳ７）。

一方、音声／効果音再生処理部２２は、電子書籍データデコード部１３でデコードされた音声／効果音データをアナログ音声に変換し（ステップＳ８）、変換したアナログ音声を音声出力部２４から出力する（ステップＳ９）。

図３は、本発明の電子書籍装置１０における下線表示処理及び自動再生処理の一例を説明するためのフロー図である。まず、電子書籍装置１０の読者が、操作パネル１７から下線表示速度の変更を指示すると（ステップＳ１１）、操作パネル制御検出部１８が、下線表示速度の変更要求を検出し、その検出結果を下線表示速度制御部２０ａに通知する（ステップＳ１２）。下線表示速度制御部２０ａは、操作パネル制御検出部１８から要求された速度変更要求に従い、下線表示速度を演算し、その演算結果を下線表示位置情報演算部２０ｂに通知する（ステップＳ１３）。下線表示位置情報演算部２０ｂは、下線表示速度制御部２０ａから通知された下線表示速度に従って、下線表示範囲を広げていき、その下線位置情報を求めて下線レイアウト処理部２０ｃと再生タイミング設定部２１に送る（ステップＳ１４）。

次に、下線レイアウト処理部２０ｃは、下線表示位置情報演算部２０ｂからの下線位置情報と、電子書籍データデコード部１３からの本文データとに基づいて、下線イメージを展開する（ステップＳ１５）。再生タイミング設定部２１は、下線表示位置情報演算部２０ｂからの下線位置情報と、電子書籍データデコード部１３からの音声／効果音データ及び画像データの再生位置情報とに基づいて、音声／効果音データの再生タイミング及び画像データの再生タイミングを設定し、音声／効果音データの再生タイミングを音声／効果音再生処理部２２に通知し、画像データの再生タイミングを画像レイアウト処理部２３に通知する（ステップＳ１６）。

次に、画像レイアウト処理部２３は、再生タイミング設定部２１からの再生タイミングに従って、電子書籍データデコード部１３でデコードされた画像データを画像イメージに展開する（ステップＳ１７）。合成表示処理部１５は、展開された本文イメージと画像イメージと下線イメージを合成してモニタ出力部１６から出力する（ステップＳ１８）。

一方、音声／効果音再生処理部２２は、再生タイミング設定部２１からの再生タイミングに従って、電子書籍データデコード部１３でデコードされた音声／効果音データをアナログ音声に変換し（ステップＳ１９）、変換したアナログ音声を音声出力部２４から出力する（ステップＳ２０）。

図４は、下線引きに応じて音声／効果音が再生される際の電子書籍装置１０の画面例を示す図で、図中、３０はモニタ画面を示す。モニタ画面３０には、書籍内容の本文イメージ３１と、本文イメージ３１の下側に下線イメージ３２が引かれている。このように、行単位で下線表示される場合、下線の到達位置に略連動して、音声／効果音データあるいは画像データが再生出力されるように再生タイミングを設定してもよい。すなわち、再生タイミング設定部２１は、本文イメージ３１に引かれる下線イメージ３２の到達位置と、本文イメージ３１の音声／効果音あるいは画像の出力位置が略一致するように再生タイミングを設定しているため、下線引きと同じタイミングで次々に音声／効果音あるいは画像が再生されることになる。

図５は、下線引きに応じて音声／効果音が再生される際の電子書籍装置１０の他の画面例を示す図で、図中、４０はモニタ画面を示す。モニタ画面４０には、書籍内容の本文イメージ４１と、本文イメージ４１の下側に下線イメージ４２が引かれている。このように、文字単位あるいは単語単位で下線表示される場合、本文イメージ４１中に予め埋め込まれている音声／効果音の再生位置情報４３に下線イメージ４２が到達した時点で、音声／効果音が出力されるように再生タイミングを設定してもよい。すなわち、再生タイミング設定部２１は、本文イメージ４１に引かれる下線イメージ４２が、本文イメージ４１に埋め込まれた音声／効果音の再生位置情報４３に到達する時点を、当該音声／効果音の再生タイミングに設定している。この際、下線イメージ４２の表示速度は一定でなくてもよく、例えば、文字種に応じて可変させるようにしてもよい。なお、音声／効果音の代わりに画像の再生位置情報を埋め込んでおけば、画像を自動再生することができる。

図６は、下線引きに応じて音声／効果音が再生される際の電子書籍装置１０の他の画面例を示す図で、図中、５０はモニタ画面を示す。モニタ画面５０には、書籍内容の本文イメージ５１と、本文イメージ５１の下側に下線イメージ５２が引かれている。このように、行単位で下線表示される場合、本文イメージ５１中に予め埋め込まれている音声／効果音の再生位置情報５３に下線イメージ５２が到達した時点で当該音声／効果音が出力されるように再生タイミングを設定し、さらに、下線イメージ５２の表示速度を一定（本例では、１行あたり１０秒）に制御してもよい。この場合、例えば、音声／効果音の再生位置情報５３が、行の３０％目にある場合、３秒後に音声／効果音を再生出力するように制御される。本例では、前述の図４に示した例と同様に、行単位で下線が引かれるが、例えば、各行に音声が埋め込まれている場合、図４の例では、下線引きと同じタイミングで次々に音声が再生されるのに対して、本例では、音声が１行内のどの位置（例えば、行の３０％目など）に埋め込まれているかによって再生されるタイミングが異なる。なお、音声／効果音の代わりに画像の再生位置情報を埋め込んでおけば、画像を自動再生することができる。

以上より、図４において、下線の到達位置に略連動して音声／効果音が出力されるように再生タイミングが設定された場合、行単位（一定速度）で下線が引かれ、この下線引きに略連動して、音声／効果音が出力される。また、図５において、本文中に予め埋め込まれている音声／効果音の再生位置に下線が到達した時点で音声／効果音が出力されるように再生タイミングが設定された場合、文字あるいは単語（文字列）単位（速度は可変としてもよい）で下線が引かれ、この下線引きが音声／効果音の再生位置に到達すると、音声／効果音が出力される。また、図６において、本文中に予め埋め込まれている音声／効果音の再生位置に下線が到達した時点で音声／効果音が出力されるように再生タイミングが設定された場合、行単位（速度は一定）で下線が引かれ、この下線引きが音声／効果音の再生位置に到達すると、音声／効果音が出力される。なお、前述したように、図６に示す例では、前述の図４に示した例と同様に、行単位で下線が引かれるが、例えば、各行に音声が埋め込まれている場合、図４の例では、下線引きと同じタイミングで次々に音声が再生されるのに対して、図６の例では、音声が１行内のどの位置に埋め込まれているかによって再生されるタイミングが異なることになる。

図７は、１行ずつの本文表示に応じて音声／効果音が再生される際の電子書籍装置１０の画面例を示す図で、図中、６０はモニタ画面を示す。モニタ画面６０には、書籍内容の本文イメージ６１が１行ずつ順に表示される。ここでは、１行ずつの本文表示に連動して音声／効果音データが再生出力されるように再生タイミングを設定した例について示す。すなわち、再生タイミング設定部２１は、本文イメージ６１を１行表示させる毎に、対応する音声／効果音が再生されるように当該音声／効果音の再生タイミングを設定している。なお、本文イメージ６１の複数行を順に表示させるようにしてもよいし、本文イメージ６１の文字あるいは単語（文字列）を順に表示させるようにしてもよい。

図８は、太字化に応じて音声／効果音が再生される際の電子書籍装置１０の画面例を示す図で、図中、７０はモニタ画面を示す。モニタ画面７０には、書籍内容の本文イメージ７１が太字表示されている（以下、太字イメージ７１という）。ここでは、本文を構成する文字の太字化に連動して音声／効果音データが再生出力されるように再生タイミングを設定した例について示す。すなわち、再生タイミング設定部２１は、太字イメージ７１の到達位置と、その音声／効果音の出力位置が略一致するように再生タイミングを設定している。また、本文イメージ中に予め埋め込まれている音声／効果音の再生位置情報に太字イメージ７１が到達した時点で当該音声／効果音が出力されるように再生タイミングを設定してもよい。なお、太字だけでなく、前述したように、斜体、文字色変更、背景色変更などの方法で音声／効果音を再生出力するようにしてもよい。

本発明の一実施形態に係る電子書籍装置の構成例を示すブロック図である。本発明の電子書籍装置におけるページ表示処理の一例を説明するためのフロー図である。本発明の電子書籍装置における下線表示処理及び自動再生処理の一例を説明するためのフロー図である。下線引きに応じて音声／効果音が再生される際の電子書籍装置の画面例を示す図である。下線引きに応じて音声／効果音が再生される際の電子書籍装置の他の画面例を示す図である。下線引きに応じて音声／効果音が再生される際の電子書籍装置の他の画面例を示す図である。１行ずつの本文表示に応じて音声／効果音が再生される際の電子書籍装置の画面例を示す図である。太字化に応じて音声／効果音が再生される際の電子書籍装置の画面例を示す図である。

符号の説明

１０…電子書籍装置、１１…ＨＤＤ、１２…ファイルシステム部、１３…電子書籍データデコード部、１４…本文レイアウト処理部、１５…合成表示処理部、１６…モニタ出力部、１７…操作パネル、１８…操作パネル制御検出部、１９…指定ページ表示制御部、２０…本文加工手段、２０ａ…下線表示速度制御部、２０ｂ…下線表示位置情報演算部、２０ｃ…下線レイアウト処理部、２１…再生タイミング設定部、２２…音声／効果音再生処理部、２３…画像レイアウト処理部、２４…音声出力部、３０，４０，５０，６０，７０…モニタ画面。

Claims

書籍の本文，音声／効果音を電子化した電子書籍データを再生可能な電子書籍装置において、前記電子書籍データを本文データ，音声／効果音データ毎にデコードするデコード手段と、該デコードした本文データを構成する文字又は背景の表示形態を該文字を読んでいく方向に向かって順次加工する本文加工手段と、該加工された本文データの到達位置から前記音声／効果音データの再生タイミングを設定する再生タイミング設定手段と、該設定した再生タイミングで前記音声／効果音データを再生出力する音声／効果音再生処理手段と、を備えていることを特徴とする電子書籍装置。
請求項１に記載の電子書籍装置において、前記電子書籍データは、書籍に関する画像データをさらに含み、該画像データを前記本文データに合成して表示出力する合成表示処理手段を備え、前記再生タイミング設定手段は、前記加工された本文データの到達位置から前記画像データの再生タイミングを設定し、前記合成表示処理手段は、前記設定した再生タイミングで前記画像データを前記本文データに合成して表示出力することを特徴とする電子書籍装置。
請求項１又は２に記載の電子書籍装置において、前記本文加工手段は、前記本文データを構成する文字に下線を引くことを特徴とする電子書籍装置。
請求項１又は２に記載の電子書籍装置において、前記本文加工手段は、前記本文データを構成する文字を太くすることを特徴とする電子書籍装置。
請求項１又は２に記載の電子書籍装置において、前記本文加工手段は、前記本文データを構成する文字を斜体にすることを特徴とする電子書籍装置。
請求項１又は２に記載の電子書籍装置において、前記本文加工手段は、前記本文データを構成する文字に色を付けることを特徴とする電子書籍装置。
請求項１又は２に記載の電子書籍装置において、前記本文加工手段は、前記本文データを構成する文字の背景に色を付けることを特徴とする電子書籍装置。
請求項１又は２に記載の電子書籍装置において、前記本文加工手段は、前記本文データを構成する文字を所定数あるいは所定数行ずつ表示することを特徴とする電子書籍装置。
請求項３乃至８のいずれか１に記載の電子書籍装置において、前記本文データを加工する速度を制御する本文加工速度制御手段と、前記本文データの加工速度から前記加工された本文データの到達位置を演算する本文加工位置演算手段とを備え、前記合成表示処理手段は、前記本文加工位置演算手段の演算結果に従って、前記加工された本文データを表示出力することを特徴とする電子書籍装置。
請求項９に記載の電子書籍装置において、前記本文データを加工する速度を任意に設定するための手段を備え、前記本文加工速度制御手段は、前記設定された加工速度で前記本文データを加工するように制御することを特徴とする電子書籍装置。
請求項９に記載の電子書籍装置において、該電子書籍装置の読者が読む速度を学習する手段を備え、前記本文加工速度制御手段は、前記学習された読者の読む速度に合わせて前記本文データを加工するように制御することを特徴とする電子書籍装置。
請求項９に記載の電子書籍装置において、前記本文データに含まれる文字種を認識する手段を備え、前記本文加工速度制御手段は、前記認識された文字種に応じて前記本文データの加工速度を可変可能に制御することを特徴とする電子書籍装置。
請求項９に記載の電子書籍装置において、前記再生タイミング設定手段は、前記本文加工位置演算手段から取得される行単位の位置情報に基づき、前記加工された本文データの到達位置に略連動して、前記音声／効果音データ及び／又は前記画像データが出力されるように再生タイミングを設定することを特徴とする電子書籍装置。
請求項９に記載の電子書籍装置において、前記再生タイミング設定手段は、前記本文加工位置演算手段から取得される行単位の位置情報に基づき、前記加工された本文データの到達位置に略連動して、前記音声／効果音データ及び／又は前記画像データを出力する際に、前記本文データに予め設定されている前記音声／効果音データ及び／又は前記画像データの文字単位あるいは単語単位の再生位置情報から、再生タイミングを自動調整して設定することを特徴とする電子書籍装置。
請求項９に記載の電子書籍装置において、前記再生タイミング設定手段は、前記本文加工位置演算手段から取得される文字単位あるいは単語単位の位置情報に基づき、前記加工された本文データが、該本文データに予め設定されている前記音声／効果音データ及び／又は前記画像データの文字単位あるいは単語単位の再生位置情報に到達したときに、前記音声／効果音データ及び／又は前記画像データが出力されるように再生タイミングを設定することを特徴とする電子書籍装置。