JP3544118B2

JP3544118B2 - 電子書籍表示装置及びコンピュータ読み取り可能な記録媒体

Info

Publication number: JP3544118B2
Application number: JP08540098A
Authority: JP
Inventors: 裕司沢田; 茂起空閑
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 1998-03-31
Filing date: 1998-03-31
Publication date: 2004-07-21
Anticipated expiration: 2018-03-31
Also published as: JPH11282866A

Description

【０００１】
【発明の属する技術分野】
本発明は、記録媒体に書き込まれた電子書籍データの内容を読み取って表示する電子書籍表示装置及びコンピュータ読み取り可能な記録媒体に関する。
【０００２】
【従来の技術】
電子書籍表示装置の従来例として、特開昭６３−１５７９６号公報には、文字、数字、記号等をコード信号に変換したデータを記録した外部記録媒体と、該外部記録媒体にデータを記録再生する記録再生装置と、平面表示装置と、外部より入力するキーボード部と、キャラクターメモリ領域と、マイクロコンピュータとを有する薄型携帯書籍表示装置（本発明の電子書籍表示装置と同等の装置）において、前記外部記録媒体に記録されたデータを記録再生装置にて再生し、マイクロコンピュータにより平面表示装置一画面分の文字、数字、記号等を表示し、使用者が平面表示装置の画面に表示された文字、数字、記号を読むことにより書籍の内容を把握し得ることを特徴とする薄型携帯書籍表示装置に関する技術が公開されている。また、上記公報には、記録再生装置でデータを再生する際に複数画面分のデータを再生し、そのデータを一時メモリ領域に保管し、使用者が必要に応じて外部入力キーにより指定した画面を表示することにより使用者が表示画面を読み、その内容を把握し得ることを特徴とする薄型携帯書籍表示装置に関する技術も公開されており、上記の技術を総合することによりユーザはボタンなどを押す度に次ページを表示することによって、通常の書籍を読む感覚で文書が読めるようになっていた。
【０００３】
また、特開平８−２４９３４４号公報には、書籍データを記録した記憶手段と、記憶手段から読み出された書籍データを表示する表示手段と、表示手段に表示された書籍データのページ位置を触覚的に伝える伝達手段とを備えた電子書籍装置であって、前記伝達手段が、個々のページ位置に対応した周波数で振動する振動発生手段であり、ページ数が増加するに従って漸次高くなる周波数で振動し、あるいはページ数が増加するに従って漸次低くなる周波数で振動し、あるいは特定のページ位置において特定の周波数で振動する電子書籍装置に関する技術が公開され、振動あるいは周波数を読者の触覚に結びつけることにより、読書時に、現在のページの全体における大体の位置の把握や試行錯誤的な検索を支援することが可能になっていた。
【０００４】
また、特開平５−２２４５８２号公報には、音声のない連続した映像を表示するディスプレイ装置と、映像記録、該映像に必要な個々の音声記録が入力される映像・音声記憶装置と、上記ディスプレイ装置に表示される映像に適した個々の音声を上記音声記録装置から選択する音声選択装置と、選択した音声を該映像に組み込む音声組み込み装置とを有し、上記音声のない連続した映像に音声を個々に選択して組み込み、音声付きドラマを再現できるようにしたことを特徴とするドラマ再生装置に関する技術が公開されている。同公報によれば、ドラマはユーザの年令や知能程度、使用目的によって適宜選択され、例えば、ユーザが幼児の場合には、日常生活の簡単な会話、生活音、動物の鳴き声などの音声が収録されたドラマ、年令が高くなる学童の場合には、人間ドラマや理論的に進行するディスカッションに関するドラマとして見ることのできるものである。このように音声、映像を選択したドラマを提供することによりユーザに大きな充足感を与えることができるようになっていた。
【０００５】
さらに、インターネットのＷＷＷ（ＷｏｒｌｄＷｉｄｅＷｅｂ）のホームページに見られるようにホームページをアクセスする時間、アクセス者によってメッセージあるいは背景を変えて出力する技術、あるいは特定ページをアクセスし一定時間後に他のページに自動的に切り替える技術が広く知られている。
【０００６】
【発明が解決しようとする課題】
しかしながら、上記従来例の電子書籍表示装置は、表示手段あるいは音声出力手段に出力されるデータは書籍データ、映像データとそれを説明するための音声データに限られており、振動などを含めたマルチメディア情報により雰囲気や臨場感を高め、読書効果を更に上げることができないという問題があった。
【０００７】
また、上記従来例の電子書籍表示装置は、ユーザの心理状態を把握する機能がなく、ユーザの心理状態に応じて読書効果のより高まる出力をすることができないという問題があった。
【０００８】
また、上記従来例の電子書籍表示装置は、複数の映像データから編集者の視点に合致した映像を選択し、選択された映像に音声データを付加して音声ドラマを作成するものであり、映像データの特定のシーンに対し複数の映像を対応させ、各映像にふさわしい音声データを生成する機能は有していなかった。このため、視点に沿った映像を選択する作業、選択した映像に音声を付ける作業負担が高いという問題があった。
【０００９】
また、上記従来例の電子書籍表示装置は、ユーザの読書履歴などの読書環境情報を把握する機能がなく、例えば読書の回数によって出力する書籍データの内容を変化させることができず、新鮮味のある読書を支援することが不可能であるという問題があった。
【００１０】
また、上記従来例の電子書籍表示装置は、ユーザの読書環境情報や書籍内容に応じて読書速度を制御する機能がなく、例えば、読書の早読み、遅読みなどの機能を提供できないという問題があった。
【００１１】
また、上記従来例の電子書籍表示装置は、書籍データ（ドラマ）の理解の向上を目的としたものであり、例えば、書籍データに比べて微少時間表示されるサブリミナルな映像や音声・音響情報を混在させ、読書効果の向上とともに潜在能力を引き出したり、心理的な療法、教育効果などを向上させる機能を提供できないという問題があった。
【００１２】
また、上記従来例の電子書籍表示装置は、書籍データに関連付けられた振動や音声データは書籍データを再表示しても同一データが繰り返され、ユーザの読書の興味や理解を促進することができないという問題があった。
【００１３】
また、上記従来例の電子書籍表示装置は、書籍データに関連付けられた振動や音声データの出力レベルは一つに限られ、例えばフェードイン、フェードアウトのように出力レベルを徐々に変化させ、読書効果を強調することができないという問題があった。
【００１４】
また、上記従来例の電子書籍表示装置は、書籍データに関連付けられた振動や音声データの表示手段での位置と出力時間とを関係づける機能がなく、ユーザの動作や運動量に応じて出力を変化させ読書効果を高めることができないという問題があった。
【００１５】
また、上記従来例の電子書籍表示装置は、同一表示ページあるいは同一ウインドウ内に複数の書籍データに関連付けられた振動や音声データが存在する場合の出力制御機能がなく、例えば複数の音声データを融合してより読書効果の高まるような出力をすることができないという問題があった。
【００１６】
本発明は、ユーザの心理状態、読書状態などの読書環境情報を把握・管理する手段を有し、書籍データのページ内のデータに対応付けられた、異視点の画面データを表示したり、あるいは、映像や音声や振動情報を含むマルチメディアからなる心象データを、読書効果データとして出力したりすることを可能とする読書効果マークを書籍データのページ内の各領域に対応して記録することにより、該読書効果マークに対応した領域が表示された際に、ユーザの読書環境情報に適合したマルチメディアの読書効果データを簡単に出力し、読書効果のみならず、心理、教育的効果を促進する電子書籍表示装置及びコンピュータ読み取り可能な記録媒体を実現することを目的とする。
【００１７】
【課題を解決するための手段】
本発明に係る電子書籍表示装置は、書籍データを記録した記録手段と、該記録手段に記録された書籍データを表示する表示手段と、該表示手段に表示された書籍データのページをめくるページめくり手段とを備える電子書籍表示装置であって、前記表示手段に表示された書籍データを読書するユーザのユーザ属性及び／又は当該ユーザの心拍数、指先温度及び／又は周囲温度に代表される当該ユーザの読書環境を示す情報をセンスし、センスされた前記読書環境を示す情報を読書環境情報として蓄えて管理する環境管理手段と、前記表示手段に表示されるページの書籍データを別視点で表現する画面データである異視点画面データ、及び、前記書籍データあるいは前記異視点画面データのイメージを強調するデータとして、前記書籍データあるいは前記異視点画面データの任意のページ内の任意の領域に存在するデータと対応付けられた心象データを記録する第２の記録手段と、該第２の記録手段に記録された前記心象データのうち、前記表示手段に出力することができる心象データ以外の心象データを出力する心象出力手段とを備え、前記第２の記録手段に記録された前記心象データと対応付けられたデータが存在する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示した際に、前記心象データと対応付けられた前記データが存在する該ページ内の領域がユーザに目視されると予測される目視タイミングを算出し、算出された該目視タイミングで、前記心象データのうち、前記読書環境情報を参照することにより読書効果データとして生成された心象データを、前記表示手段及び／又は前記心象出力手段により出力することを制御する読書効果制御手段を備えたことを特徴とする。
【００１８】
また、前記読書環境情報を参照することにより前記読書効果データとして生成される心象データが、画像、音声・音響、振動を含むマルチメディアから構成される前記心象データの中から、参照される前記読書環境情報に基づいて、当該ユーザの現在の読書環境に最適とされる心象データと該心象データの最適とされる出力レベルとを選択することにより生成される心象データであることを特徴とする。
また、前記読書効果制御手段は、算出する前記目視タイミングとして、前記心象データと対応付けられた前記書籍データあるいは前記異視点画面データのページの領域の全部あるいは一部が前記表示手段に表示された後とし、該目視タイミングで、前記読書環境情報を参照して前記読書効果データとして生成された前記心象データを出力することを特徴とする。
また、前記読書効果制御手段は、算出する前記目視タイミングとして、前記表示手段に表示された前記書籍データあるいは前記異視点画面データのページ画面の始点から前記心象データと対応付けられたデータが存在する領域までの距離に比例した時間が示す時点、あるいは、前記表示手段に表示された前記書籍データあるいは前記異視点画面データのページ画面の始点から前記心象データと対応付けられたデータが存在する領域までにユーザの目視が移動すると予測される時間が示す時点、あるいは、前記表示手段に表示された書籍データあるいは前記異視点画面データのページ画面の表示開始時点から予め設定されている時間経過した時点、あるいは、ユーザにより指示された時点のうち、いずれかを用いて、前記読書環境情報を参照して前記読書効果データとして生成された前記心象データを出力することを特徴とする。
【００１９】
さらに、前記記録手段に記録される前記書籍データあるいは前記第２の記録手段に記録される前記異視点画面データとして、各ページの領域毎に前記表示手段に表示する出力時間及び／又は出力方法を指示する表示モードを付属して記録し、前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、前記心象データと対応付けられた該ページの領域に記録されている前記表示モードを用いて、前記心象データの出力時間及び／又は出力方法を調整して、前記読書効果データの出力時間及び／又は出力方法として生成することを特徴とする。
また、前記環境管理手段に蓄えられたユーザの前記読書環境情報として、ユーザの氏名、読書目的、嗜好を含むユーザ属性を示すユーザ情報、及び／又は、読書時のユーザの心拍数、指先体温、指先湿度を含むユーザの心理情報、及び／又は、ユーザの読書日付・時刻、周囲温度・湿度、読書履歴情報、平均ページめくり速度を含む読書情報をユーザ毎に蓄え、更に、前記読書効果制御手段は、前記ユーザ情報、及び／又は、前記心理情報、及び／又は、前記読書情報から構成される前記読書環境情報と、生成すべき前記読書効果データとを対応付ける読書効果テーブルあるいは関係グラフを備え、前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、前記読書効果テーブルあるいは前記関係グラフを利用して、前記読書効果データを取得することを特徴とする。
また、前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、前記環境管理手段に蓄えられたユーザの前記読書環境情報のうち、ユーザの心理状態を示す複数の情報を、予め定めた関係に基づいて、当該ユーザの心理状態を総合した心理度として求め、求められた前記心理度の値に応じて、前記読書効果データとして生成する前記心象データの出力レベルを０から最大値まで変化させることを特徴とする。
また、前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、ページめくり操作に係わるユーザの運動量に応じて、前記読書効果データとして生成する前記心象データの出力レベルを０から最大値まで変化させることを特徴とする。
【００２０】
さらに、前記読書効果制御手段は、前記心象データに対応付けられた前記書籍データあるいは前記異視点画面データのデータが存在する領域が同一ページ内に複数存在する場合は、前記読書環境情報を参照して前記読書効果データを生成する際に、複数の各領域のデータに対応付けられた前記心象データにそれぞれ対応して生成されるそれぞれの前記読書効果データを重畳して出力することを特徴とする。
また、前記読書効果制御手段は、前記読書環境情報を参照して前記読書効果データを生成する際に、前記心象データのうち、任意に指定された一部あるいは全部について前記読書効果データとしての生成を停止させることができることを特徴とする。
また、前記読書効果制御手段の制御方法を、ユーザの読書目的に応じて、少なくとも、速読、遅読、通常読み、新規書籍データ読み、学習、クイズ、アニメーション、自動マンガ読み、潜在能力向上、情操教育、リラクゼーション、プレゼンテーション、を含むいずれか任意に指定された読書形態に対応可能な制御方法に変更できることを特徴とする。
【００２１】
本発明に係るコンピュータ読み取り可能な記録媒体は、書籍データを記録手段に記録した記録機能と、該記録手段に記録された書籍データを表示手段に表示する表示機能と、該表示手段に表示された書籍データのページをめくるページめくり機能と、前記表示手段に表示された書籍データを読書するユーザのユーザ属性及び／又は当該ユーザの心拍数、指先温度及び／又は周囲温度に代表される当該ユーザの読書環境を示す情報をセンスし、センスされた前記読書環境を示す情報を読書環境情報として蓄えて管理する環境管理機能と、前記表示手段に表示されるページの書籍データを別視点で表現する画面データである異視点画面データ、及び、前記書籍データあるいは前記異視点画面データのイメージを強調するデータとして、前記書籍データあるいは前記異視点画面データの任意のページ内の任意の領域に存在するデータと対応付けられた心象データを第２の記録手段に記録する第２の記録機能と、該第２の記録手段に記録された前記心象データのうち、前記表示手段に出力することができる心象データ以外の心象データを心象出力手段により出力する心象出力機能と、前記第２の記録手段に記録された前記心象データと対応付けられたデータが存在する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示した際に、前記心象データと対応付けられた前記データが存在する該ページ内の領域が目視される目視タイミングを算出し、算出された該目視タイミングで、前記心象データのうち、前記読書環境情報を参照することにより読書効果データとして生成された心象データを、前記表示手段及び／又は前記心象出力手段により読書効果データとして出力することを制御する読書効果制御機能と、を実現させるプログラムとして記録したことを特徴とする。
【００２２】
以上の構成により、本発明は、ユーザの読書環境情報に対応した読書効果データを出力することができるので、通常の書籍を読む場合には感じることのできない読書効果をユーザに提供し、読書の理解促進、心理強化、教育効果向上などに貢献することができる。
【００２３】
【発明の実施の形態】
図１は、本発明の電子書籍表示装置の一つの実施例の構造を示すブロック図である。同図において、１はＦＤ、ＭＯ、ＣＤなどの磁気・光メディア、ＬＳＩメモリ、ＩＣカード、スマートメディアなどのＬＳＩメディアなどからなる記録手段であり、書籍データ、装置の制御を行う処理プログラム、各種データなどが格納されている。２は、液晶ディスプレイ、ＣＲＴ、プラズマディスプレイなどから構成される表示手段であり、上記記録手段１に記録された書籍データやその他の情報が表示される。３は、ボタンやカーソルキーなどで構成されるページめくり手段であり、ページめくり手段３を操作することにより、表示手段２に表示された書籍データの画面ページを順方向あるいは逆方向に捲ることができるようになっている。なお、ページめくり手段３には例えば、行スクロール、カーソルキーによってページをめくる機能、異視点画面にデータに切り替える機能も含まれる。
【００２４】
４はユーザの心理状態、読書環境などの読書に係わる情報をセンスし、管理する環境管理手段であり後で詳しく述べる。５は後で詳しく述べる異視点画面データあるいは心象データを蓄積する第２の記録手段であり、上記記録手段１と同様の手段で構成される。また、第２の記録手段は、上記記憶手段１と共通にすることも可能であり、本発明では特に断りがない限り、第２の記録手段を記録手段１に統合した構造で説明する。６は第２の記録手段に蓄積された心象データを出力するための手段であり、スピーカーなどの音声出力手段、振動子などの振動出力、画像変形出力などを行う。
【００２５】
７は環境管理手段４に蓄積されたユーザ固有の読書環境情報に基づいて、第２の記録手段５に記録されている心象データ、即ち、表示手段２に表示される書籍データや異視点画面データの各領域のデータに対応する心象データのうち、ユーザ所望の心象データの種類と出力レベルとを選択して読書効果データとして生成し、表示手段２及び／又は心象出力手段６に出力するように制御する読書効果制御手段である。なお、本手段は、ＣＰＵで代用される場合もありうる。
【００２６】
図２は本発明の代表的な実施例である電子書籍表示装置の外観を示す図である。図２において、２は上記図１で説明した表示手段であり、２１（ａ）あるいは２１（ｂ）はページめくりをユーザが指示するページめくり指示手段であり、２２は一つのページに複数画面からなる異視点画面データを付与した場合に、その画面の切り替えをユーザが指示するための切り替えボタンである。２３は表示手段上に表示されたカーソルを移動させるためのカーソルキーであり、２１（ａ）、２１（ｂ）、２２及び２３は、あわせて図１におけるページめくり手段を構成する。
【００２７】
２４（ａ）あるいは２４（ｂ）は心象出力手段の一種である音声出力手段の例であり、小型のスピーカーで構成されている。図２では、スピーカーを２個配置しているが、一個でも３個以上であって本発明の実施には影響がない。ただし、スピーカーが２個であればステレオ音響が出力でき、例えば３個であれば奥行きのある音響が出力できるなど数の多いほうがより読書効果を高める上では好ましい。また、図２では電子書籍装置に取り付けられたスピーカーに音声・音響を出力する例を示しているが、音声出力手段は外部のスピーカー、イアホーン、ヘッドセットなどでもよく、本体にはそれらの装置との端子口が設けられている構成であっても本発明の実施に影響はない。
【００２８】
２５は読者の手の温度を計測する温度センサーであり、２６は読者の指先の汗の状態を調べる湿度センサーである。なお、上記温度センサーと湿度センサーは一体化されることも可能であり、図２ではこれらが一体化された温湿度センサーの場合を示している。２７は心拍数を調べる心拍計である。２８は書籍データの記録された記録手段を挿入する記録手段挿入口である。
【００２９】
なお、本体内部には振動手段２９が内蔵されている。表示手段に出力される書籍データあるいは書籍データに画像処理を加えた書籍データ、音声出力手段に出力される音声・音響、振動手段により出力される振動を単独あるいは組み合わせることにより心象データを構成する。
【００３０】
また、上記のページめくり手段、音声出力手段、心拍計、温湿度センサーの配置は図２に制限されるものではない。ただし、温度センサーあるいは湿度センサーは、電子書籍表示装置の両側面や裏面など、読者が電子書籍表示装置を持つときに手が触れる位置に設ける。さらに、２３のカーソルキーの代わりに、表示手段２を例えば、タブレット機能つきの液晶表示装置として、ペンなどにより表示画面上でのカーソルの位置を指定するようにしてもよい。
【００３１】
図３（ａ）、図３（ｂ）に記録手段１に記録される書籍データのフォーマットの概略を記す。図３（ａ）は、通常の電子書籍表示装置における書籍データの構造を有した記憶装置（左側の図：記録手段１）と、本発明の特徴となる第２の記憶装置（右側の図：第２の記録手段５）が別の構造をなしている場合の図である。３０は書籍データであり各ページに１個の書籍データが存在する。各ページには、第２の記憶装置へのポインター３１が設けられている。ポインターの先には、各ページの書籍データを異なる視点で表現した異視点画面データあるいは各ページの心象データ３２が保存されている。第２の記憶装置の異視点画面データあるいは心象データ３２は図３(a)に示すように各ページによって異なりを持たせることが可能である。
【００３２】
図３（ｂ）は記憶装置と第２の記憶装置をまとめた記憶装置のデータ構造を表した図であり、３３に示すようにポインターが省略され、各ページの書籍データ、異視点画面データ、心象データが続けて並べられている。
【００３３】
図４に書籍データの１ページ分のデータフォーマットの例を示す。書籍データと異視点画面データは置き換え可能な画面になるため、図４では同じく画面データとして扱っている。通常、画面１が図３で示した書籍データであり、画面２以降の画面データが異視点画面データになる。
【００３４】
各ページは書籍データ画面に異視点画面データの数を加えた画面数フィールド４０と、各ページをデータフォーマットあるいは意味内容で領域分けした領域数を納めたフィールド４１があり、各画面の各領域にどのような処理を行うかを設定するためのフィールドがその後に続く。以下、画面１の場合を例に取って、各領域の詳細な構造を説明する。
【００３５】
４２は領域１の画面切り替え識別子の情報を蓄えるフィールドである。識別子は図４の矢印の先に示すようにコードで分類されており、その値が０ｘ００の場合には、時間で画面を切り替え、０ｘ０１の場合はユーザのボタン操作で画面を切り替えるようになっている。
【００３６】
画面識別子が０ｘ００の場合は、さらに時間をどのように設定するかを決定する時間切り替えモード設定フィールド４３が続く。時間切り替えモードには、例えば、表示手段２に表示された書籍データあるいは異視点画面データのページ画面の始点からこの領域までの距離に比例した時間、あるいは、表示手段２に表示された書籍データあるいは異視点画面データのページ画面の始点からこの領域までユーザの目視が移動すると予測される時間、あるいはタイマーモードがあり、そのフィールドに記述された時間の経過後に、後述する表示モード４８で指定される画面に切り替わるようになっている。
【００３７】
また、切り替え時間として無限大を選択することにより、画面切り替えを行わないようにすることも、切り替え時間を０とすることにより、切り替え前の画面を表示しないようにすることもできる。
【００３８】
４４は、領域１の画面番号を納めたフィールドであり、情報のやり取りの中で利用される。４５は、領域１の座標であり、領域１の画面データに対応して、１次元、２次元、３次元の座標データが格納される。４６は、領域１のフォーマットの識別子を納めたフィールドである。フォーマット識別子は図４の当該フィールドの矢印の先に示されるようにコードで分類されており、その値が０ｘ００であれば、領域１は文字列で記述されていることが分かるようになっている。なお、フォーマットはここに記載されたフォーマットに制限されるものではない。
【００３９】
４７は、領域１の画面データが記述されているフィールドであり、４８は領域１の表示モードが記述されているフィールドである。表示モードには、プログレッシブに表示する、点滅させる、ノーマルに表示するなどの表示方法、あるいは表示時間を設定できるようになっている。また、４７は画面データがそのまま挿入されている形になっているが、ファイル名や画面データのある領域を指し示すポインターであってもよい。
【００４０】
４９は画面１の領域２に対する画面切り替え識別子を格納するフィールドであり、４９以降に４３〜４８に相当する領域２の値が納められ、以降、画面１書籍データ領域数４１で設定された領域の数だけ蓄積される。４ａは画面２以降の書籍データの領域数を格納するフィールドであり、画面１で説明した値が、画面数４０で設定した画面の数だけ蓄積されている。
【００４１】
図５に、１ページ分の心象データのデータフォーマットの例を示す。図５に示すように、そのページに付与された心象データ領域（読書効果マーク）の数を示す心象データ領域数フィールド５０のあとに、心象データ領域の数の分だけ、心象データに係わるパラメータを格納するフィールド５１，…，５ｎが繰り返される。
【００４２】
各領域の心象データ５１，…，５ｎには、ページ内の心象データ領域を特定する心象データ領域番号を格納するフィールド５１ａ，…，５ｎａと、心象データ領域の位置情報を格納する領域座標フィールド５１ｂ，…，５ｎｂと、その領域に付与する心象データの数を示す心象データ数フィールド５１ｃ，…，５ｎｃが設けられている。
【００４３】
さらに、５１ｄ，５１ｇ，…には心象データの種類を分類する識別子が上記心象データの数だけ格納され、５１ｅ，５１ｈ，…には、心象データの出力の方法を設定する心象出力識別子が心象データの数だけ格納され、５１ｆ，５１ｉ，…には、心象データそのものあるいは心象データを生成するための処理方法が、心象データの数だけ格納される。
【００４４】
心象データ識別子５１ｄ，５１ｇ，…は図５に記したように数値で記述され、例えば、その値が０ｘ００の場合は、心象データは画像処理用データであり、指定された書籍データあるいは異視点画面データの指定された領域の画像データに対して変形を伴う画像処理のタイプと、画像処理を行う上で必要なパラメータを設定するようになっている。
【００４５】
また、心象データ識別子５１ｄの値が０ｘ０１の場合は、心象データフィールド５１ｆに含まれる心象データは振動に関するデータであり、心象出力手段６内の振動を発生する振動子（振動手段２９）などを駆動するために必要な振動周波数、振動時間、振動の大きさなどの振動パラメータが格納される。同様に、心象データ識別子５１ｄの値が０ｘ０２の場合は、心象データフィールド５１ｆに含まれる効果データは音声データとなり、男性音、女性音、音声の大きさ、声音などの音声特徴に係わるパラメータが設定できるようになっている。
【００４６】
なお、心象データは上の説明では直接データを格納する方法を取っているがこれに限定されるものではなく、例えば、ここにデータを格納した領域へのポインターやファイル名などを格納してもよい。また、ポインターで示される先に心象データを対応づけるテーブルを利用することも可能である。
【００４７】
心象出力識別子５１ｅ，５１ｈ，…は、心象データに対応づけられた書籍データの領域（以後、読書効果マークあるいは心象データ領域と呼ぶことがある）が表示手段に表示されたとき心象データを自動的に出力するか、カーソルキー２３を用いてユーザが領域を指し示すなどの手動により出力するかを決定するフラグを格納している。
【００４８】
図６は、上記環境管理手段４で管理される読書環境情報のデータ構造の例を示した図である。読書環境情報は、大きく分けて、心理状態に関する情報（心理情報）、読書状態に関する情報（読書情報）、ユーザの属性に関するユーザ情報の３つから成り立っている。
【００４９】
６０は心拍数を格納するフィールドであり、６１は体温（指先の温度）を格納するフィールドであり、６２は湿度（指先の発汗量）を格納するフィールドである。心拍数、体温、湿度はそれぞれ図２で説明した温度センサー２５、湿度センサー２６、心拍計２７の現在時刻の出力値が納められるようになっている。６０〜６２はユーザの心理情報を構成する。なお、心理情報はセンサーがあれば、上で説明した３種類に限定されるものでないことは明らかである。
【００５０】
また、上記３つの心理情報は、その値が高いときには興奮状態を表す。従って、例えば心拍数、体温、指先湿度の定常状態における値をそれぞれＳ０、Ｔ０、Ｙ０とし、時刻ｔにおけるそれぞれの値をＳｔ、Ｔｔ、Ｙｔとすると、時刻ｔにおけるユーザの心理状態を表す心理度Ｋｔは
Ｋｔ＝ａ１（Ｓｔ−Ｓ０）＋ａ２（Ｔｔ−Ｔ０）＋ａ３（Ｙｔ−Ｙ０）
で近似できる値になる（ａ１，ａ２，ａ３は比例定数）。なお、関係関数は、上のような１次式に限定されるものではなく、心拍数、指先体温、指先湿度との関係を示すものであればよい。
【００５１】
６３は、読書時の日付を格納するフィールドであり、６４は読書開始の時刻を格納するフィールドであり、６５は読書開始時の室温を格納するフィールドであり、６６は読書開始時の部屋の湿度を格納するフィールドであり、６７は読書履歴情報を格納するフィールドである。湿度６６，室温６５の値は、電子書籍表示装置の電源を入れ、ユーザが指を触れる前に、温度センサー２５、湿度センサー２６の値を取り込むことによりデータを取得する。
【００５２】
ユーザの読書履歴情報６７は、ユーザが対象とする部分の書籍データを何回見たか、その回数を保存しており、書籍データあるいは異視点画面データの各ページの画面毎、ページ毎に管理することができる。６８はページめくりの平均の速度を格納しておくフィールドであり、ＣＰＵあるいは読書効果制御手段７に内蔵されたタイマーによりユーザがページめくりをする時間間隔から速度を割出しこのフィールドに格納する。読書履歴情報６７のフィールドにはこれらのデータの格納された領域へのポインターを格納してもよい。６３〜６８は、上で述べた読書情報に関する情報フィールドになっている。
【００５３】
６９は、ユーザの氏名を格納するフィールドであり、６ａはユーザの年令を格納するフィールドであり、６ｂはユーザの性別を格納するフィールドであり、６ｃはユーザの目的を格納するフィールドであり、６ｄはユーザの好みを格納するフィールドである。ユーザの氏名が入力されると、読書履歴情報６７の読書履歴は氏名毎に管理されるようになる。ユーザの読書目的６ｃは、ユーザインタフェースで設定可能であり、電子書籍表示装置の操作モードと対応づけられ、例えば、速読モード、学習モード、潜在能力向上モード、リラクゼーションモード、情操教育モードなどの読書形態が選べるようになっている。ユーザの好み６ｄは、例えば、クラシック系音楽、ポップ系音楽、淡い色調の画面、激しい色調の画面、興奮度を押さえる沈着好み、興奮度向上を好むなどユーザの日頃の嗜好情報を格納しておく。
【００５４】
図７は本発明の読書効果制御手段の処理のフローの例を示した図である。同図においてＳ１０は本処理に必要な初期化データ、書籍データ、異視点画面データ、心象データなどを読書効果制御手段に読み込む処理モジュールであり、Ｓ１１は読書効果制御手段に読み込まれたデータの中から当該ページの表示データを表示バッファに読み込み、表示する処理モジュールである。初期化データには、例えば、温度センサー２５、湿度センサー２６の値を読み込み、図６の読書環境情報の室温６５、部屋の湿度６６に格納する、あるいは、ＣＰＵもしくは読書効果制御手段に内蔵されるカレンダーやタイマー機能を使って読書環境情報の日付６３，時刻６４に取り込むなどの操作も含まれる。また、電子書籍表示装置の表示ページは特に指定がない場合はデフォルトで設定されている、例えば、先頭ページあるいは前回最後に開いたページが表示されるようにしておく。
【００５５】
Ｓ１２は、表示されたページの中に読書効果マークがあるか否かを判断する処理モジュールである。読書効果マークがない場合は、読書効果を高めるための処理はないので、次ページを表示するあるいは処理を終了するかを判断する処理モジュールへ移る。読書効果マークが１ケ所以上存在する場合は、以降の処理に移る。
【００５６】
Ｓ１３は、読書環境情報を読書効果制御手段に読み込む処理モジュールである。環境管理情報の中の心理情報は、例えば、読書を開始した日付、時刻から状態が安定する時間後、例えば、５分後から定期的な時間毎、例えば、１分毎にあるいはページめくりをする度にデータを更新するようにする。図６の読書履歴情報６７には、各ページの書籍データあるいは異視点画面データの各領域のアクセス履歴が格納されており、図６のユーザ情報は、ユーザインタフェースを用いて設定した値が入れられている。
【００５７】
Ｓ１４は、上記で読み込んだ読書環境情報を利用して読書効果データを生成する処理モジュールである。本発明で読書効果を上げるという意味は、ユーザの読書時の気分、興奮度、好み、目的あるいは読書履歴に応じてユーザに最適な画面、音声・音響、振動などを提供することであり、図６の読書環境情報として環境管理手段に格納された心理情報、読書情報、ユーザ情報から適合する心象データ、異視点画面データを後で述べる効果データテーブルあるいは関係グラフを用いて選択し、それらを合成することによって実現する。詳細については後で述べる。
【００５８】
Ｓ１５は上記で生成された読書効果データを出力する処理モジュールである。読書効果制御手段は、まず、書籍データの画面切り替え識別子４２を参照し０ｘ００であれば、時間切り替えモードフィールド４３を参照し、その領域の画面データ４７とこの領域に付加された心象データを、どの時刻に出力するか決定する。次に、決定した読書効果データを表示手段あるいは心象出力手段に出力するよう制御する。なお、心象データは異視点画面データと同期したタイミングで出力する。この部分についても後で詳しく述べる。
【００５９】
Ｓ１６は次ページ表示の要求があるか否かを判断する処理モジュールであり、次ページ表示の要求がある場合は次ページを表示するための準備を行い（Ｓ１８）、同要求がない場合は一連の処理を終了する（Ｓ１７）。
【００６０】
上記の説明で請求項１又は請求項２の実施例については自明なので、以下請求項３以降について補足説明をする。初めに、請求項３に係わる実施例について説明する。図８は表示手段２に表示された特定ページの表示例を表した図であり、領域１（８０）、領域２（８１）、領域３（８２）の３つの領域に分割されていることを表している。領域３は、挿絵の領域であり、例えば、奈良公園の写真が表示されているものとする。また、領域３の全域は読書効果マークであり、読書効果マークが付されて、心象データが対応づけられた領域であることが分かるような区別（例えば図８に示す場合には太枠囲み）が付けられている。なお、図８では領域を説明するために領域を示す枠線を表示しているが、通常この枠線は表示されないで、読書効果マークが他と区別されるようになっている（表示例の場合は、領域３の太枠線が見える）。
【００６１】
図８の画面は、図２のページめくり指示手段２１（ａ）又は２１（ｂ）を押し、前後のページから移動して来ることによって表示される。この場合は、ページ単位で画面が変化するので、領域３はほぼ同時にその全領域が表示される。また、図２のカーソルキー２３を用いると行単位のスクロールによる連続的なページめくりが可能であり、例えば、逆送りでページをめくる場合、領域３の下端が画面全体の上端の位置に来る状態から、領域３の下端が画面全体の下端の位置に来るまで、順に行スクロールをすることが可能である。従って、図７において、画面データが表示されると（Ｓ１１）、読書効果制御手段７は、読書効果マークを示す太枠線のいずれか一つが表示手段２に表示するデータの中に存在するか否かを調べることで心象データの存在を判断する（Ｓ１２）。
【００６２】
図９は請求項４に係わり、図７のＳ１５の読書効果データを出力するための目視タイミングを決定する時間切り替えモードの実施例を説明するための図である。図９について、図８と同じ画面、同じ符号を用いて説明する。９０は、画面の始点から読書効果マーク即ち心象データが対応づけられた領域８２の始点までの距離ｒである。画面全体の対角線の距離をｓとする。ユーザは通常画面の始点から表示された画面を読み始め、画面右下の終点で読み終わることになる。従って、始点から終点まで画面のデータを読み終わるのにかかる時間をＴｆとし、各領域の読書時間に差異がないとすると、Ｔｒ＝Ｔｆ×（ｒ／ｓ）で表される時間に、領域３のデータを読み始めることになる。請求項４における目視タイミングを指定する時間切り替えモードの一つは、心象データに対応づけられた書籍データの一部あるいは全部が表示されてからＴｒ時間後に、例えば、領域３の奈良公園の写真を若草山で遊ぶ鹿の写真に切り替える処理を行うことにより、ちょうど複数の異視点画面データが付加された書籍データの領域を読むときに、ある異視点画面データから別の画面データに切り替えることができる。このとき切り替えた異視点画面データに心象データが付加されている場合には、画面データの切り替えに合わせて心象データを出力する。この出力モードを距離モードと呼ぶことにする。
【００６３】
目視タイミングを指定する時間切り替えモードの別の例は、各領域の目視時間を考慮に入れるものである。例えば領域１は文字列であり通常に読むには、１文字当たりＴｃ時間を要する程度のものであり、領域２も文字列であり、例えば１文字当たりＴｃ２時間を要するとすると、
Ｔｍ＝Ｔｃ１×ｍ１＋Ｔｃ２×ｍ２（ｍ１、ｍ２は領域１、領域２の文字数）
で表される時間に、領域３を読み始めることになる。上記距離モードの場合と同様、心象データに対応づけられた書籍データの一部あるいは全部が表示されてからＴｍ時間後に、例えば、領域３の奈良公園の写真を若草山で遊ぶ鹿の写真に切り替える処理を行う。この出力モードを目視モードと呼ぶことにする。
【００６４】
目視タイミングを指定するタイマーモードの場合は、対象領域を読み始める時刻とは直接係わりない時間として予め設定された値に設定できる。例えば、切り替え時間を０としておくことにより、奈良公園の写真が目で確認できる前に、若草山で遊ぶ鹿の写真を表示することもできる。この場合ユーザには直接若草山で遊ぶ鹿の写真が表示されたように見える。
【００６５】
従ってＳ１５において、読書効果制御手段は、表示された書籍データ（画面データ）の各領域の中から時間切り替えモードのフィールドを参照し、上記の距離モードであるか、目視モードであるか、タイマーモードであるかを確認し、それぞれのモードで決められた表示待ち時間を決定し、読書効果データが生成できてから決定された表示待ち時間後に読書効果データを出力する。
【００６６】
次に、請求項５に係わる実施例について補足説明する。この部分は、請求項４で記載した目視タイミングとして時間切り替えモードによる表示を実施する際に参照する表示モードに関し、上記Ｓ１５の処理モジュールに関する。心象データ領域の一部あるいは全部が表示手段２に表示されると、読書効果制御手段７は、表示された書籍データや異視点画面データの中の表示モード（図４の表示モード４８）の値を参照する。図１０は、表示モードの中のデータ構造の例を示す図である。１００は表示方法を格納するフィールドであり、その値が０ｘ００の場合は選択された異視点画面データがじわりじわりと徐々に正確さを増すよう（プログレッシブ）に表示される。０ｘ０１の場合は、通常の表示になる。この他に点滅、反転、フラッシュなどの表示方法もコード化されている。なお、表示方法１００は、図５における心象データ識別子５１ｄの中の画像処理用データ０ｘ００と混同されやすいので注意が必要である。画像処理用データ０ｘ００では、表示された画像の変形を伴うが、表示方法１００では画像そのものに変形処理が加わらない。１０１は異視点画面データを表示する時間を格納するフィールドであり、異視点画面データはここに設定された時間の間表示される。１０２は、上記表示時間１０１で設定された表示時間を越えた場合の処理方法を定義するフィールドであり、その値が０ｘ００の場合、表示時間１０１の経過後再び元の画面に戻る。０ｘ０１の場合は、図４における画面番号４４を指定し、指定された画面データが表示され、０ｘ０２は現在表示されている画面番号より一つ大きい値の異視点画面データが表示される。
【００６７】
次に、請求項６に係わる実施例を補足説明する。この処理は、図７の処理フローのＳ１４に関係する。Ｓ１３で図６の読書環境情報を参照した読書効果制御手段７は、以下で述べる読書効果テーブルを参照する。図１１は読書環境情報と出力する読書効果データとの対応を取るための読書効果テーブルの例を表した図である。図１１において、横軸は図６の心拍数６０の値が、予め適切に定めた範囲６ａ１，…，６ａｎで区切られている。縦軸は指先の湿度即ち発汗量６２の値が、予め適切に定めた範囲６ｂ１，…，６ｂｍに区切られている。心拍数６０と発汗量６２との交差するセルに出力する読書効果データ６ｄ１１，…，６ｄｍｎが指定されるようになっている。例えば、読書効果制御手段７は、図１の第２の記録手段５に蓄積されている読書効果テーブルを読み出し、次に、図６の読書環境情報を参照し、環境管理手段４に格納された心拍数６０の値が図１１の範囲６ａ２にあり、発汗量６２の値が範囲６ｂ１であれば、図１１の読書効果テーブルから該当する心拍数、発汗量に相当する読書効果データ６ｄ１２を選択し、心象出力手段６及び／又は表示手段２に出力することを示している。
【００６８】
図１１では心拍数と発汗量に関する２次元テーブルの形式となっているが、通常はｎ次元のテーブルに拡張して記述する。環境管理手段４に格納される読書環境情報は図６であり、ここに記載された項目次元のテーブルが管理されている。なお、読書効果データ６ｄ１１，…，６ｄｍｎは実際のデータでなく、ファイル名や実際のデータのある位置を指し示すポインターであってもよい。
【００６９】
従って、まず、読書効果制御手段７は読書環境情報の各フィールドの値と上記読書効果テーブルのｎ次元の各軸の値とを比較する。次に該当したセルの交点のセルの値を参照することにより、心象データあるいは異視点画面データの種類と出力レベルを割り出し、これを読書効果データとして生成する。
【００７０】
図１２（ａ）、図１２（ｂ）、図１２（ｃ）は請求項７に係わる実施例を説明するための図である。請求項６では、読書効果データは、例えば図６の読書環境情報の値の範囲に対して対応づけられていた。請求項７は、請求項６の別の実施例に該当し、ユーザの読書環境情報のうち心理情報を予め定めた関係により総合して求めた心理度と、生成すべき心象データとの関係グラフから読書効果データとして生成される心象データの種類と出力レベルを決定し、その他の異視点画面データを読書効果テーブルで決定する。
【００７１】
図１２（ａ）、（ｂ）、（ｃ）において横軸は上記で定義した心理度Ｋｔであり、縦軸はそれぞれ音声強度、振動強度、点滅回数を表し、１２０、１２１、１２２はそれぞれ音声強度と心理度、振動強度と心理度、点滅回数と心理度の間の関係を表すグラフである。図に示すように各パラメータの値は、０から最大値の間の値を取る。
【００７２】
Ｓ１３において、読書効果制御手段は、時刻ｔにおける心理情報を温度センサー、湿度センサー、心拍計から得る。得られた値を読書環境情報の中の心理情報フィールドに格納する。続いてＳ１４に移り、読書効果制御手段は、心理情報フィールドの値を参照し、上記で定義した心理度Ｋｔを計算する。次に、読書効果制御手段は、図１２の関係グラフから現在の心理度に合致する音声強度、振動強度、点滅回数を求める。次に、読書効果制御手段は、読書環境情報の各パラメータの内、心象データの出力制御に用いたパラメータ以外のものと読書効果データとの対応関係を付けた読書効果テーブルを参照する。請求項６で述べた方法に基づいて、異視点画面データの出力方法、画面番号を決定し、先に決めた心象データと合成し、読書効果データを生成する。なお、図１２（ａ）、（ｂ）、（ｃ）は音声強度、振動強度、点滅回数のみを示しているがその他のパラメータも同様にグラフ化することができる。
【００７３】
次に、請求項８に係わる実施例について説明する。図１３はこれを説明するための処理フローである。図１３のＳ１１，Ｓ１２、Ｓ１６は図７で説明したものと同じである。Ｓ２０は図５に示す心象出力識別子のフィールド５１ｅ，５１ｈ，…のデータを参照する処理モジュールである。参照した値が自動か否かにより、処理を分岐するモジュールがＳ２１である。値が自動の場合は、ページめくり手段３の機能をロックする。この処理モジュールがＳ２２である。その後は、図７に示したＳ１３，Ｓ１４，Ｓ１５を実行する（Ｓ２３）。読書効果データの出力が終了すると、上記でロックしていたページめくり手段３の機能のロックを解除する（Ｓ２４）。その後Ｓ１６へ移る。
【００７４】
Ｓ２１で参照した値が自動でない場合は、心象出力識別子の細分化データを参照し、その値が運動比例タイプの出力か否かで処理を分岐する（Ｓ２５）。運動比例タイプでない場合は、ユーザが読書効果マークをクリックするのを待つ（Ｓ２６）。読書効果マークがクリックされると、Ｓ２３の処理を実行する。
【００７５】
Ｓ２５が運動比例タイプである場合は、ページめくりの運動（カーソル移動操作）の追跡を開始する（Ｓ２７）。運動量を以下にて計算する（Ｓ２８）。
【００７６】
図１２において、請求項７では、心理度Ｋｔは上記で定義した式を用いた。請求項８においては心理度Ｋｍを次式で定義する。
Ｋｍ＝βＵ（βは比例定数であり、Ｕは運動量）
Ｕは、例えば、図８に示す心象データが対応付けられた領域を持つページが表示された状態で、カーソルが画面の始点にあり、カーソルを心象データが対応付けられた領域の始点まで直線で動かす場合を想定すると、両始点間の距離ｒに比例した値で近似できる。従って、例えば、
Ｋｍ＝γｒ（γは比例定数）
で心理度を表し、図１２の関係図を用いると、ユーザのページめくり操作を係わるカーソルの運動量で心象出力手段６から出力される心象データの出力レベルを決定することができる。
【００７７】
上記の出力をカーソルが読書効果マークへ到着するまで継続する（Ｓ２９）。読書効果マークへ到着後は、カーソルが読書効果マークにある間、読書効果マーク到着時の出力レベルを継続し、カーソルが読書効果マークを離れるまで出力を継続する（Ｓ３０）。以上により場合、ユーザの例えば腕又は指の動きにともなって、心象出力手段６から出力される心象データの出力レベルを上げることができるので、より臨場感のある読書効果を得ることができる。
【００７８】
図１４（ａ）、（ｂ）は請求項９に係わる実施例を説明するための図であり、読書効果マークが表示画面の中に２か所ある場合の、それぞれの読書効果データの出力のタイミングチャートを表したものである。図１４（ａ）はそれぞれの読書効果データの出力が時間的な重なりを持たない例であり、図１４（ｂ）は読書効果データの出力が一部で重なった場合の例を示している。図１４（ａ）、（ｂ）のＴｓ１、Ｔｓ２は時間切り替えモードで決定された時間であり、（Ｔｅ１−Ｔｓ１）あるいは（Ｔｅ２−Ｔｓ２）は表示モードで設定される時間で決まる。図１４（ｂ）のＴｓ２〜Ｔｅ１ように読書効果データの出力が重なる場合は、それぞれの出力レベルを重畳し、平均化した値を出力する。
【００７９】
各読書効果データは、読書効果データを生成するときあるいは心理データ情報を読み込むときにその出力を０あるいは出力時間を無限大にすることができるので、請求項１０は自明である。
【００８０】
図１５は、請求項１１に関して補足説明をするためのメニュー設定画面の例を示した図である。メニュー設定画面の呼び出しは、新しいボタンを設ける、あるいは、例えばカーソルキーの二つ以上の方向キーを同時に押すなどで行う。各メニュー項目の選択は、カーソルキーを使って選択する。以下、本発明を使った応用例を、ユーザの読書目的別に述べる。また、本画面の一番上の選択項目の「目的」は、それぞれ独立した選択ボタンを電子書籍表示装置に設けてもよい。
【００８１】
〔実施形態１〕
本実施例は、本発明を速読用の装置として使った場合に関する。速読をするために、書籍データを作成する際に、表示された書籍データの内容を短時間に容易に伝える領域、もしくは表示内容の概略を端的に表すような領域を書籍データの中からいくつか取り出し、それぞれ一つの領域としておく。そして取り出した各領域の表示順を考慮して、時間切り替えモードにおける表示待ち時間を調節するとともに、表示モードにおける表示時間をユーザが何とか理解して読取れる時間に設定する。そして、速読用に取り出した領域を、それぞれ設定された表示待ち時間、表示時間に従って順次表示していくことによって、速読補助機能を実現する。表示待ち時間、表示時間、速読用に取り出す領域の組み合わせにより、各種レベルの速読装置が実現できる。表示待ち時間、表示時間、異視点画面データの組み合わせで各種レベルの速読装置が実現できる。
【００８２】
〔実施形態２〕
本実施例は、本発明を学習用、クイズ用装置として使用した場合に関する。例えば、書籍データとして設問（問題）、クイズのページを表示する。設問が回答できる時間を時間切り替えモード４３の表示待ち時間として設定する。異視点画面データとしてその回答ページを表示する。これを図に表したのが図１６である。この画面の切り替わりにより、時間制限によるスリル感や緊張感を演出することができる。
【００８３】
〔実施形態３〕
本実施例は、本発明を簡易アニメーション表示装置として適用する場合に関する。まず、異視点画面データを付加する領域を書籍データのページサイズと同じにし、読書効果マークを画面全体にする。各ページの書籍データに含まれる異視点画面データは、どれも１画面とする。表示モード４８で決定される異視点画面データの表示時間１０１は、表示された内容が読み取れる程度の値に設定する。表示モード４８で決定される異視点画面データの時間後処理フィールド１０２で０ｘ０１を選択し、その値を次ページの書籍データにする。全ページに同じ異視点画面データを設定することにより、ページが自動的にめくられ、ぱらぱら漫画の原理で、簡易アニメーションとして機能するようにすることができる。また、同じ原理で自動ページめくり装置が実現できる。
【００８４】
〔実施形態４〕
本実施例は、本発明を潜在能力向上、あるいは精神的療養の装置として適用する場合に関する。この実現方法を説明する前に若干サブリミナルについて言及する。我々が通常映画やＴＶなどで見ている画面は１秒間に３０コマ程度の連続した映像である。これより短い時間のコマがこれらの映像に混入していても目に留まらないが、繰り返し見ていると精神的に影響を与えることが公知である。この短い時間に混入される映像をサブリミナル映像という。本装置で、例えば、時間切り替えモード４３の表示待ち時間をある程度長く設定し、表示モード４８において異視点画面データを表示する表示時間１０１を３０ｍ秒以下に設定し、時間後処理フィールド１０２を０ｘ００として異視点画面データ表示後の表示を元の画面に戻るようにしておく。ここで、異視点画面データの内容を潜在能力向上に結びつく、例えば「あなたの能力は開発される」、「目標校合格」、「あなたは救われる」のようなメッセージにすることによってサブリミナルによる効果を引き出す。
【００８５】
〔実施形態５〕
本実施例は、本発明を情操教育装置、あるいはリラクジェーション装置として適用する場合に関する。これは異視点画面データ、あるいは心象データを情操教育あるいはリラクジェーションに向いた内容を選ぶことによって実現できる。表示モードにおける表示時間をある程度長い時間５分以上ぐらいにしたほうが効果が高い。
【００８６】
〔実施形態６〕
本実施例は、本発明を常に新本として適用する場合に関する。これを実現するために読書履歴情報を利用し、例えば、読書の回数が上がる度に、異視点画面データの画面番号をインクリメントする。
【００８７】
〔実施形態７〕
本実施例は、本発明を自動マンガ読み装置、あるいはプレゼンテーション装置として適用する場合に関し、実施形態３の他の実施例に該当する。また、マンガの他に、一つのページが複数の領域（コマ）に分割され、コマを読む順序が決められている書籍にも適用が可能である。図１７（ａ）、（ｂ）、（ｃ）、（ｄ）はこれを説明するための図である。
【００８８】
図１７（ａ）は特定の画面を表したものであり、画面が３つの領域、領域１（コマ１）、領域２（コマ２）、領域３（コマ３）に分割され、コマ１、コマ２、コマ３の順序で読まれることを表し、次ページは領域１に４コマ目、領域２に５コマ目、領域３に６コマ目の画面が続くことを表している。
【００８９】
図１７（ｂ）は書籍データの構造を表した図であり、ページ１の書籍データに対し領域毎に異視点画面データあるいは心象データがｎ画面分（ｎは画面数）用意され、それに続くページ２書籍データ以降は書籍データのみが続いた構造をしており、読書効果マークは各領域の全域に対して付けられているものとする。
【００９０】
図１７（ｃ）は表示手段に表示される表示画面のタイミングチャートを示したものである。例えば、時刻ｐ０にページ１の領域１、領域２、領域３の書籍データが表示され、ｐ１、ｐ２、ｐ３時刻にそれぞれ領域１、領域２、領域３の画面データが異視点画面データに切り替わり、さらにそれらの異視点画面データがｐ４、ｐ５、ｐ６に別の異視点画面データに切り替わる状態を表している。
【００９１】
図１７（ｄ）は、読書効果テーブルの内容を表した図である。横軸には領域番号が、縦軸には各領域の画面切り替えの回数が格納されている。交差したセルには画面切り替えを行う異視点画面データの画面番号（ページ数、領域番号は指定なき場合は書籍データのページ、領域と同じになっている）が格納されている。
【００９２】
次に、読書効果制御手段の処理の流れについて説明するが、簡単のために、本実施例では、心象データに係わる処理は省略し、画面がどのように変化するかに焦点を絞って説明をする。
【００９３】
最初にユーザはページめくり手段を利用してページ１の書籍データを表示する。読書効果制御手段は、ページ１領域１心象データ１、ページ１領域２心象データ１、ページ１領域３心象データ１から表示された画面に読書効果マークが３個あることを認識する。次に、読書効果制御手段は、読書環境情報を読み込み、読書環境情報の目的の値が自動マンガ読みであることを確認する。
【００９４】
次に、読書効果制御手段は、自動マンガ読み用の読書効果テーブル図１７（ｄ）を参照する。その結果、画面切り替えは１回目であり、領域１に付けられた読書効果マークであるので、異視点画面データ１を選択する。図４で述べた書籍データフォーマットを参照し、時間切り替えモードの値から（ｐ１−ｐ０）時間後に画面を、読書効果テーブルで指定された（ページ１領域１）異視点画面データ１に切り替える準備をする。
【００９５】
また、同時に、図４で述べた書籍データフォーマットから表示モード４８の情報を参照し、時刻ｐ１から（ｐ４−ｐ１）時間の間その表示を継続し、（ｐ４−ｐ１）時間経過後もそのままの状態で表示を継続し、次の（ページ１領域１）異視点画面データ２に切り替える準備をする。次に、読書効果制御手段７は、ページ１領域１心象データ１から得られる心象データとページ１領域１異視点画面データ１との合成を行うが、心象データの処理は省略するので、ページ１書籍データの領域１部分の画面を領域１異視点画面データ１に上記表示切り替え時間で指定されるタイミングで切り替え、上記表示時間で指定される時間表示を継続する（指定時間後もそのまま表示を継続しようとする）。続いて、画面切り替え回数を管理するバッファの値をインクリメントする（初期設定は１であり、インクリメントして２にする）。同様の処理を領域２、領域３に対しても実行する。
【００９６】
続いて、領域１の部分に表示される４コマ目の画面の処理の説明に移る。そこで、ページ１領域１心象データ２から得られる読書効果マークがページ１領域１心象データ１と同じ領域（すなわち図１７（ａ）のコマ１の全領域）であり、ページ１領域１異視点画面データ１から得られる時間切り替えモード、表示モードの値が書籍データと同じ値に設定されているとすると、領域１の画面がページ１領域１異視点画面データ２にｐ１から（ｐ４−ｐ１）時間後に切り替わり、（ｐ７−ｐ４）の時間の間表示が継続される。その他の領域も同様の処理を繰り返すことにより、図１７（ｃ）のような出力の自動マンガ読み装置が実現できる。
【００９７】
なお、図１７（ｂ）で、ページ１領域３心象データｎの後ろにページ２書籍データ以降の書籍データが続いているのは、マンガの連続読みをせずに通常の電子書籍マンガ本として読むためであり、書籍データの画面データそのものは異視点画面データのそれと共通する構造になっている。
【００９８】
〔実施形態８〕
本実施例は、本発明を通常の電子書籍装置として使う場合に関するものであり、読書効果に対する入出力をすべて省略することにより実現することが可能である。
【００９９】
【発明の効果】
以上から明らかなように、本発明によれば、読書効果データには異視点画面データ、音声・音響データ、振動データを含めたマルチメディア情報が出力できるので、雰囲気や臨場感を高め読書効果を上げることができるようになった。
【０１００】
また、本発明の電子書籍表示装置は、ユーザの心理状態を把握する読書管理手段を有しているので、ユーザの心理状態に応じて読書効果のより高まる出力をすることができるようになった。
【０１０１】
また、本発明の電子書籍表示装置は、読書環境情報により読者の目的、パーソナリティ、心理状態、読書履歴に対応して最適な異視点画面データ、心象データを自動的に選択することができるようになるので、読書効果データを作成する負担を大幅に減少させることが可能になった。
【０１０２】
また、本発明の電子書籍表示装置は、ユーザの読書履歴などの読書環境情報を把握する機能を有しているので、この情報を用い読書の回数によって出力する書籍データの内容を変化させることができ、新鮮味のある読書を支援することが可能になった。
【０１０３】
また、本発明の電子書籍表示装置は、ユーザの読書環境情報や書籍内容に応じて読書速度を制御する機能を有しているので、例えば、読書の早読み、遅読みなどの機能を提供できるようになった。
【０１０４】
また、本発明の電子書籍表示装置は、表示切り替え時間、読書表示モード情報、異視点画面データを選択することにより、書籍データに比べて微少時間表示されるサブリミナルな映像や音声・音響情報を混在させ、読書効果の向上とともに潜在能力を引き出したり、心理的な療法、教育効果などを向上させる機能を提供できるようになった。
【０１０５】
また、本発明の電子書籍表示装置は、読書環境情報により、同一ページの書籍データも日付や時間に依存して変化させることができるので、ユーザの読書の理解を促進することができるようになった。
【０１０６】
また、本発明の電子書籍表示装置は、書籍データに関連付けられた振動や音声データの出力レベルは表示モード情報によって各種変化させることができ、例えばフェードイン、フェードアウトのように出力レベルを徐々に変化させ、読書効果を強調することができるようになった。
【０１０７】
また、本発明の電子書籍表示装置は、ページめくり操作の運動量に依存して心象データの出力を変化させることができ、さらに臨場感、読書効果を高めることができるようになった。
【０１０８】
また、本発明の電子書籍表示装置は、同一表示ページあるいは同一ウインドウ内に複数の書籍データに関連付けられた振動や音声データが存在する場合の出力制御機能を有し、例えば複数の音声データを融合してより読書効果の高まるような出力をすることができるようになった。
【０１０９】
以上を総合して、本発明により、ユーザの心理状態、読書状態などの読書環境情報を把握・管理する手段を有し、読書効果データに対応づけられた書籍データが表示手段に表示された場合、ユーザの読書環境情報に適合したマルチメディア読書効果データを簡単に出力し、読書効果のみならず心理、教育的効果を促進する電子書籍表示装置を実現できるようになった。
【図面の簡単な説明】
【図１】本発明の電子書籍表示装置の一つの実施例の構造を示すブロック図である。
【図２】本発明の代表的な実施例である電子書籍表示装置の外観を示す図である。
【図３】同図（ａ）、（ｂ）は記録手段に記録される書籍データのフォーマットの概略を示した図である。
【図４】書籍データの１ページ分のデータフォーマットの例を示した図である。
【図５】記録媒体に記録される書籍データのうち、書籍データの内容に応じて出力する心象データのフォーマット構造の一例を示した図である。
【図６】環境管理手段で管理される読書環境情報のデータ構造の例を示した図である。
【図７】本発明の読書効果制御手段の処理のフローの例を示した図である。
【図８】表示手段に表示された特定ページの表示例を表した図である。
【図９】請求項４に係わり、上記Ｓ１５の読書効果データの出力のタイミングを決定する時間切り替えモードの実施例を説明するための図である。
【図１０】表示モードの中のデータ構造の例を示す図である。
【図１１】読書環境情報と出力する読書効果データとの対応を取るための読書効果テーブルの例を表した図である。
【図１２】同図（ａ）、（ｂ）、（ｃ）は請求項７に係わる実施例を説明するための図である。
【図１３】請求項８に係わる実施例を説明するための処理フローである。
【図１４】同図（ａ）、（ｂ）は請求項９に係わる実施例を説明するための図であり、読書効果マークが表示画面の中に２か所ある場合の、それぞれの読書効果データの出力のタイミングチャートを表したものである。
【図１５】請求項１１に関して補足説明をするためのメニュー設定画面の例を示した図である。
【図１６】本発明を学習用、クイズ用装置として使用した場合の実施例の図である。
【図１７】同図（ａ）、（ｂ）、（ｃ）、（ｄ）は本発明を自動マンガ読み装置、プレゼンテーション用装置として使用した場合の実施例を説明するための図である。
【符号の説明】
１記録手段
２表示手段
３ページめくり手段
４環境管理手段
５第２の記録手段
６心象出力手段
７読書効果制御手段

Claims

書籍データを記録した記録手段と、該記録手段に記録された書籍データを表示する表示手段と、該表示手段に表示された書籍データのページをめくるページめくり手段とを備える電子書籍表示装置であって、前記表示手段に表示された書籍データを読書するユーザのユーザ属性及び／又は当該ユーザの心拍数、指先温度及び／又は周囲温度に代表される当該ユーザの読書環境を示す情報をセンスし、センスされた前記読書環境を示す情報を読書環境情報として蓄えて管理する環境管理手段と、前記表示手段に表示されるページの書籍データを別視点で表現する画面データである異視点画面データ、及び、前記書籍データあるいは前記異視点画面データのイメージを強調するデータとして、前記書籍データあるいは前記異視点画面データの任意のページ内の任意の領域に存在するデータと対応付けられた心象データを記録する第２の記録手段と、該第２の記録手段に記録された前記心象データのうち、前記表示手段に出力することができる心象データ以外の他の心象データを出力する心象出力手段とを備え、前記第２の記録手段に記録された前記心象データと対応付けられたデータが存在する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示した際に、前記心象データと対応付けられた前記データが存在する該ページ内の領域がユーザに目視されると予測される目視タイミングを算出し、算出された該目視タイミングで、前記心象データのうち、前記読書環境情報を参照することにより読書効果データとして生成された心象データを、前記表示手段及び／又は前記心象出力手段により出力することを制御する読書効果制御手段を備えたことを特徴とする電子書籍表示装置。
前記読書環境情報を参照することにより前記読書効果データとして生成される心象データが、画像、音声・音響、振動を含むマルチメディアから構成される前記心象データの中から、参照される前記読書環境情報に基づいて、当該ユーザの現在の読書環境に最適とされる心象データと該心象データの最適とされる出力レベルとを選択することにより生成される心象データであることを特徴とする請求項１に記載の電子書籍表示装置。
前記読書効果制御手段は、算出する前記目視タイミングとして、前記心象データと対応付けられた前記書籍データあるいは前記異視点画面データのページの領域の全部あるいは一部が前記表示手段に表示された後とし、該目視タイミングで、前記読書環境情報を参照して前記読書効果データとして生成された前記心象データを出力することを特徴とする請求項１又は請求項２記載の電子書籍表示装置。
前記読書効果制御手段は、算出する前記目視タイミングとして、前記表示手段に表示された前記書籍データあるいは前記異視点画面データのページ画面の始点から前記心象データと対応付けられたデータが存在する領域までの距離に比例した時間が示す時点、あるいは、前記表示手段に表示された前記書籍データあるいは前記異視点画面データのページ画面の始点から前記心象データと対応付けられたデータが存在する領域までにユーザの目視が移動すると予測される時間が示す時点、あるいは、前記表示手段に表示された書籍データあるいは前記異視点画面データのページ画面の表示開始時点から予め設定されている時間経過した時点、あるいは、ユーザにより指示された時点のうち、いずれかを用いて、前記読書環境情報を参照して前記読書効果データとして生成された前記心象データを出力することを特徴とする請求項１乃至請求項３のいずれかに記載の電子書籍表示装置。
前記記録手段に記録される前記書籍データあるいは前記第２の記録手段に記録される前記異視点画面データとして、各ページの領域毎に前記表示手段に表示する出力時間及び／又は出力方法を指示する表示モードを付属して記録し、前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、前記心象データと対応付けられた該ページの領域に記録されている前記表示モードを用いて、前記心象データの出力時間及び／又は出力方法を調整して、前記読書効果データの出力時間及び／又は出力方法として生成することを特徴とする請求項１乃至請求項４のいずれかに記載の電子書籍表示装置。
前記環境管理手段に蓄えられたユーザの前記読書環境情報として、ユーザの氏名、読書目的、嗜好を含むユーザ属性を示すユーザ情報、及び／又は、読書時のユーザの心拍数、指先体温、指先湿度を含むユーザの心理情報、及び／又は、ユーザの読書日付・時刻、周囲温度・湿度、読書履歴情報、平均ページめくり速度を含む読書情報をユーザ毎に蓄え、更に、前記読書効果制御手段は、前記ユーザ情報、及び／又は、前記心理情報、及び／又は、前記読書情報から構成される前記読書環境情報と、生成すべき前記読書効果データとを対応付ける読書効果テーブルあるいは関係グラフを備え、前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、前記読書効果テーブルあるいは前記関係グラフを利用して、前記読書効果データを取得することを特徴とする請求項１乃至請求項５のいずれかに記載の電子書籍表示装置。
前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、前記環境管理手段に蓄えられたユーザの前記読書環境情報のうち、ユーザの心理状態を示す複数の情報を、予め定めた関係に基づいて、当該ユーザの心理状態を総合した心理度として求め、求められた前記心理度の値に応じて、前記読書効果データとして生成する前記心象データの出力レベルを０から最大値まで変化させることを特徴とする請求項１乃至請求項６のいずれかに記載の電子書籍表示装置。
前記読書効果制御手段は、前記心象データと対応付けられたデータ領域を有する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示する場合において、前記読書環境情報を参照して前記読書効果データを生成する際に、ページめくり操作に係わるユーザの運動量に応じて、前記読書効果データとして生成する前記心象データの出力レベルを０から最大値まで変化させることを特徴とする請求項１乃至請求項７のいずれかに記載の電子書籍表示装置。
前記読書効果制御手段は、前記心象データに対応付けられた前記書籍データあるいは前記異視点画面データのデータが存在する領域が同一ページ内に複数存在する場合は、前記読書環境情報を参照して前記読書効果データを生成する際に、複数の各領域のデータに対応付けられた前記心象データにそれぞれ対応して生成されるそれぞれの前記読書効果データを重畳して出力することを特徴とする請求項１乃至請求項８のいずれかに記載の電子書籍表示装置。
前記読書効果制御手段は、前記読書環境情報を参照して前記読書効果データを生成する際に、前記心象データのうち、任意に指定された一部あるいは全部について前記読書効果データとしての生成を停止させることができることを特徴とする請求項１乃至請求項９のいずれかに記載の電子書籍表示装置。
前記読書効果制御手段の制御方法を、ユーザの読書目的に応じて、少なくとも、速読、遅読、通常読み、新規書籍データ読み、学習、クイズ、アニメーション、自動マンガ読み、潜在能力向上、情操教育、リラクゼーション、プレゼンテーション、を含むいずれか任意に指定された読書形態に対応可能な制御方法に変更できることを特徴とする請求項１乃至請求項１０のいずれかに記載の電子書籍表示装置。
コンピュータに、書籍データを記録手段に記録した記録機能と、該記録手段に記録された書籍データを表示手段に表示する表示機能と、該表示手段に表示された書籍データのページをめくるページめくり機能と、前記表示手段に表示された書籍データを読書するユーザのユーザ属性及び／又は当該ユーザの心拍数、指先温度及び／又は周囲温度に代表される当該ユーザの読書環境を示す情報をセンスし、センスされた前記読書環境を示す情報を読書環境情報として蓄えて管理する環境管理機能と、前記表示手段に表示されるページの書籍データを別視点で表現する画面データである異視点画面データ、及び、前記書籍データあるいは前記異視点画面データのイメージを強調するデータとして、前記書籍データあるいは前記異視点画面データの任意のページ内の任意の領域に存在するデータと対応付けられた心象データを第２の記録手段に記録する第２の記録機能と、該第２の記録手段に記録された前記心象データのうち、前記表示手段に出力することができる心象データ以外の心象データを心象出力手段により出力する心象出力機能と、前記第２の記録手段に記録された前記心象データと対応付けられたデータが存在する前記書籍データあるいは前記異視点画面データのページを前記表示手段に表示した際に、前記心象データと対応付けられた前記データが存在する該ページ内の領域が目視される目視タイミングを算出し、算出された該目視タイミングで、前記心象データのうち、前記読書環境情報を参照することにより読書効果データとして生成された心象データを、前記表示手段及び／又は前記心象出力手段により読書効果データとして出力することを制御する読書効果制御機能と、を実現させるプログラムとして記録したことを特徴とするコンピュータ読み取り可能な記録媒体。