JP5720133B2 - 情報処理装置、情報処理方法およびコンピュータプログラム - Google Patents

Description

本発明は、情報処理装置、情報処理方法およびコンピュータプログラムに関する。

従来の印刷物の書籍に代わり、コンテンツとして提供される電子書籍を電子書籍閲覧デバイスにより閲覧することが可能となった（例えば、特許文献１）。電子書籍の利用によって、書籍の印刷、製本、流通に要するコストの削減や省スペース化を図ることができる。

電子書籍閲覧デバイスは、書籍の内容を閲覧するためのデバイスである。従来の電子書籍閲覧デバイスには、例えば図１４に示すように、文字列や画像、レイアウト等の情報を含む書籍データと、ページ番号、画面サイズ、文字の大きさ等の設定情報とが記憶されている。電子書籍閲覧デバイスのレンダラー部１２は、設定情報に基づき、書籍データの内容を表示部１４に表示するための画像を生成する。生成された画像が表示部１４に表示されることで、ユーザは電子書籍を閲覧することができる。

特開２００３−１５０６１８号公報

しかし、従来の電子書籍閲覧デバイスは、電子書籍の内容を閲覧可能にするのみであった。ユーザは、電子書籍閲覧デバイスを操作して、書籍の閲覧だけでなく、ブックマーク等の付箋を付けたり、絵を描いたりする等、電子書籍の内容に対して追加要素を加えることができる。しかしながら、これらはユーザの能動的な操作によって行われることであり、電子書籍閲覧デバイスが自動的に電子書籍の表示内容等を変更することはできなかった。

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、デバイスを保持するユーザに特化したユーザエクスペリエンスを自動的に実現することが可能な、新規かつ改良された情報処理装置、情報処理方法およびコンピュータプログラムを提供することにある。

上記課題を解決するために、本発明のある観点によれば、単語と当該単語の意味とを関連付けて記憶する辞書記憶部と、辞書記憶部の参照履歴を記憶する履歴情報記憶部と、１または複数の文字列を含むコンテンツから、コンテンツの内容を表す基本画像を作成する基本画像作成部と、コンテンツに含まれる１または複数の文字列と、履歴情報記憶部に記憶された単語とをマッチングして、合致する単語を注目単語として抽出するマッチング部と、辞書記憶部から注目単語に関連付けられた単語の意味を取得して、取得した単語の意味を基本画像に含まれる注目単語に付加するオーバーレイ画像を作成するオーバーレイ画像作成部と、基本画像およびオーバーレイ画像を重ね合わせて表示部に表示する画像重畳部と、を備える、情報処理装置が提供される。

ここで、マッチング部は、マッチングにより抽出した単語のうち所定数以上参照された単語のみを注目単語として抽出するようにしてもよい。

また、情報処理装置は、辞書記憶部の参照履歴に基づいて、ユーザレベルを解析するユーザレベル解析部をさらに備えてもよい。このとき、マッチング部は、辞書記憶部に記憶されている単語のうちユーザレベル解析部による解析結果より決定されたユーザレベル以上の単語と、コンテンツに含まれる１または複数の文字列とをマッチングして、合致する単語を注目単語として抽出するようにしてもよい。

さらに、情報処理装置は、辞書記憶部の参照履歴に基づいて、参照された単語のジャンルの傾向を解析するジャンル解析部をさらに備えてもよい。このとき、マッチング部は、辞書記憶部に記憶されている単語のうちジャンル解析部による解析結果から特定される参照傾向が所定値以上であるジャンルに属する単語と、コンテンツに含まれる１または複数の文字列とをマッチングして、合致する単語を注目単語として抽出するようにしてもよい。

表示部に表示された注目単語の意味を消去する消去操作が操作入力部から入力されたとき、履歴情報記憶部に記憶されている当該注目単語に、単語の意味を非表示にする非表示フラグを関連付けて記憶し、マッチング部は、マッチングにより抽出した単語のうち、非表示フラグが関連付けられた単語を注目単語から除外するようにしてもよい。

また、オーバーレイ画像作成部は、注目単語の近辺に当該注目単語の意味が表示されるように、オーバーレイ画像を作成するようにしてもよい。

あるいは、オーバーレイ画像作成部は、抽出された注目単語が、注目単語であることを視覚的に表す初期オーバーレイ画像を作成し、基本画像および初期オーバーレイ画像が画像重畳部により表示部に表示された状態で、操作入力部より表示部に表示された注目単語を選択する選択操作が入力されたとき、選択された注目単語の近辺に当該注目単語の意味が表示されるように、オーバーレイ画像を作成するようにしてもよい。

画像重畳部は、コンテンツを表示するコンテンツ表示領域と、注目単語の意味を表示する領域とを、表示部の同一画面内に表示するようにしてもよい。

また、上記課題を解決するために、本発明の別の観点によれば、１または複数の文字列を含むコンテンツから、コンテンツの内容を表す基本画像を作成するステップと、コンテンツに含まれる１または複数の文字列と、単語と当該単語の意味とを関連付けて記憶する辞書記憶部の参照履歴を記憶する履歴情報記憶部に記憶された単語とをマッチングして、合致する単語を注目単語として抽出するステップと、辞書記憶部から注目単語に関連付けられた単語の意味を取得して、取得した単語の意味を基本画像に含まれる注目単語に付加するオーバーレイ画像を作成するステップと、基本画像およびオーバーレイ画像を重ね合わせて表示部に表示するステップと、を含む、情報処理方法が提供される。

さらに、上記課題を解決するために、本発明の別の観点によれば、コンピュータを、１または複数の文字列を含むコンテンツから、コンテンツの内容を表す基本画像を作成する基本画像作成手段と、コンテンツに含まれる１または複数の文字列と、単語と当該単語の意味とを関連付けて記憶する辞書記憶部の参照履歴を記憶する履歴情報記憶部に記憶された単語とをマッチングして、合致する単語を注目単語として抽出するマッチング手段と、辞書記憶部から注目単語に関連付けられた単語の意味を取得して、取得した単語の意味を基本画像に含まれる注目単語に付加するオーバーレイ画像を作成するオーバーレイ画像作成手段と、基本画像およびオーバーレイ画像を重ね合わせて表示部に表示する画像重畳手段と、を備える、情報処理装置として機能させるためのコンピュータプログラムが提供される。

プログラムは、コンピュータが備える記憶装置に格納され、コンピュータが備えるＣＰＵに読み込まれて実行されることにより、そのコンピュータを上記情報処理装置として機能させることができる。また、プログラムが記録された、コンピュータによって読み取り可能な記録媒体も提供される。記録媒体は、例えば磁気ディスク、光ディスク、およびＭＯ（Ｍａｇｎｅｔｏ Ｏｐｔｉｃａｌ）ディスクなどである。磁気ディスクとしては、ハードディスクおよび円盤型磁性体ディスクなどがあげられる。また、光ディスクとしては、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）、ＤＶＤ−Ｒ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ Ｒｅｃｏｒｄａｂｌｅ）およびＢＤ（Ｂｌｕ−Ｒａｙ Ｄｉｓｃ（登録商標））などがあげられる。

以上説明したように本発明によれば、デバイスを保持するユーザに特化したユーザエクスペリエンスを自動的に実現することが可能な情報処理装置、情報処理方法およびコンピュータプログラムを提供することができる。

本発明の実施形態に係る電子書籍閲覧デバイスの機能構成を示すブロック図である。 履歴情報ＤＢの一構成例を示す説明図である。 辞書ＤＢの一構成例を示す説明図である 同実施形態に係る電子書籍閲覧デバイスにおける画像生成処理を示す説明図である。 同実施形態に係る電子書籍閲覧デバイスにおけるユーザレベルに応じた画像生成処理を示すフローチャートである。 同実施形態に係る電子書籍閲覧デバイスにおける単語のジャンルに応じた画像生成処理を示すフローチャートである。 重畳画像の一表示例を示す説明図である。 重畳画像の他の表示例を示す説明図である。 重畳画像の他の表示例を示す説明図である。 オーバーレイ画像から一部の単語の関連情報を削除する操作を行ったときの表示変更状態を示す説明図である。 オーバーレイ画像から一部の単語の関連情報を削除する一処理例を示すフローチャートである。 注目する単語と、当該単語に関連付けられた関連情報との一例を示す表である。 同実施形態に係る電子書籍閲覧デバイスの一ハードウェア構成例を示すブロック図である。 従来の電子書籍閲覧デバイスにおける画像生成処理を示す説明図である。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．電子書籍閲覧デバイスの概要
２．電子書籍閲覧デバイスの構成
３．電子書籍閲覧デバイスによる表示処理
４．ハードウェア構成例

＜１．電子書籍閲覧デバイスの概要＞
まず、本実施形態に係る電子書籍閲覧デバイスの概要について説明する。電子書籍閲覧デバイスは、デバイス内に存在する、電子書籍閲覧機能以外の機能より取得可能なユーザユニークな情報を用いて、このデバイスを保持するユーザに特化したユーザエクスペリエンスを自動的に実現可能な装置である。ユーザユニークな情報としては、辞書機能やウェブブラウザ機能の検索結果や、アドレス帳機能の登録内容、デバイスに保存されている書籍データのジャンル等がある。

本実施形態に係る電子書籍閲覧デバイスは、コンテンツの１つである電子書籍の内容を表示部に表示させる際に、ユーザユニークな情報を用いて、この電子書籍を閲覧するユーザにとって有益な情報やユーザと関連のある情報を付加した画像を生成する。これにより、ユーザにとって電子書籍を読み易い状態で提供することができ、また、電子書籍の内容に関連した画像や音楽等を表示させることもできるようになる。以下では、ユーザユニークな情報として辞書機能の検索履歴を用い、電子書籍の内容を表示させる際にユーザにあった付加情報を付加する処理を一例として取り上げ、本実施形態の電子書籍閲覧デバイスの構成とこれによる処理について詳細に説明していく。

＜２．電子書籍閲覧デバイスの構成＞
次に、図１〜図３に基づいて、本実施形態に係る電子書籍閲覧デバイス１００の機能構成について説明する。なお、図１は、本実施形態に係る電子書籍閲覧デバイス１００の機能構成を示すブロック図である。図２は、履歴情報ＤＢ１５０の一構成例を示す説明図である。図３は、辞書ＤＢ１６０の一構成例を示す説明図である。

本実施形態に係る電子書籍閲覧デバイス１００は、図１に示すように、操作部１１０と、表示処理部１２０と、表示部１３０と、書籍ＤＢ１４０と、履歴情報ＤＢ１５０と、辞書ＤＢ１６０と、関連情報ＤＢ１７０とを備える。

操作部１１０は、ユーザが電子書籍閲覧デバイス１００を操作する操作情報を入力する入力部である。操作部１１０は、例えば、ボタンやレバー、表示部１３０と積層して設けられたタッチセンサ等を用いることができる。ユーザは、操作部１１０を用いて、閲覧する電子書籍や実行する機能の選択、書籍のページめくり、文字等の入力等を行うことができる。操作部１１０から入力された操作情報のうち、電子書籍の表示に関する情報、例えば、表示部１３０に表示させる電子書籍の選択情報等は、表示処理部１２０へ出力される。

表示処理部１２０は、電子書籍の内容を表す画像を生成する。表示処理部１２０は、レンダラー部１２２と、マッチング部１２４と、オーバーレイ画像作成部１２６と、画像重畳部１２８とからなる。

レンダラー部１２２は、電子書籍の内容を表す書籍データと、書籍データを表示する際のページ番号、画面サイズ、文字の大きさ等の設定情報とに基づいて、表示部１３０に表示させる基本画像を作成する。書籍データは、例えば電子書籍１冊分の内容を含む情報である。ページ番号は、電子書籍閲覧中のユーザが実際に閲覧するページの番号を意味する。また、画面サイズは、電子書籍の内容をユーザが閲覧する映像を出力する画面の大きさを意味し、文字の大きさは、電子書籍の文字列を表示する際の文字の大きさをいう。設定情報は、予め設定されていてもよく、ユーザが任意に設定することもできる。なお、書籍データや設定情報のデータフォーマットは特に限定されない。レンダラー部１２２は、書籍データと設定情報とから作成した基本画像を、マッチング部１２４および画像重畳部１２８へ出力する。

マッチング部１２４は、表示部１３０に表示する電子書籍のページ内に含まれる文字列と、辞書機能の履歴情報とのマッチング処理を行う。マッチング部１２４は、履歴情報ＤＢ１５０を参照して、表示する電子書籍のページ内に、ユーザが辞書機能において検索した単語が含まれているか否かをマッチング処理によりチェックし、マッチングする単語を抽出する。辞書機能で検索された単語は、ユーザが注目している注目単語であり、ユーザユニークな情報である。マッチング部１２４は、ユーザ注目している単語を抽出すると、当該単語の情報および基本画像をオーバーレイ画像作成部１２６へ出力する。

オーバーレイ画像作成部１２６は、電子書籍の内容とともにユーザに提示する情報を表示部１３０に表示するためのオーバーレイ画像を作成する。オーバーレイ画像作成部１２６は、マッチング部１２４により抽出された単語に関連付けられた関連情報を取得し、基本画像と重ね合わせて表示するオーバーレイ画像を作成する。作成されたオーバーレイ画像は、画像重畳部１２８に出力される。

画像重畳部１２８は、レンダラー部１２２により作成された基本画像と、オーバーレイ画像作成部１２６により作成されたオーバーレイ画像とを重ね合わせて、表示部１３０に表示する重畳画像を生成する。画像重畳部１２８により生成された重畳画像は、表示部１３０へ出力され、ユーザに提示される。

表示部１３０は、画像を表示する出力部である。表示部１３０は、例えば、液晶ディスプレイや有機ＥＬディスプレイ等を用いて構成することができる。なお、本実施形態に係る電子書籍閲覧デバイス１００は、出力部としてスピーカ等の音声出力部を備えることもできる。

書籍ＤＢ１４０は、電子書籍の内容を表す書籍データを記憶する。書籍ＤＢ１４０には、メディアやネットワークを介して取得された１または複数の書籍データが蓄積されている。書籍ＤＢ１４０に記憶されている書籍データは、レンダラー部１２２により、表示部１３０に表示可能な形式に変換される。

履歴情報ＤＢ１５０は、辞書機能を用いてユーザが検索した単語を履歴情報として記憶する記憶部である。履歴情報ＤＢ１５０は、例えば図２に示すように、辞書機能において検索された単語１５１、ユーザがその単語を検索した回数（すなわち、当該単語について辞書ＤＢ１６０を参照した参照回数）を示す検索回数１５２等を記憶する。また、履歴情報ＤＢ１５０には、ユーザがその単語を注目することを停止したことを示すチェック済情報１５３等を記憶することもできる。チェック済情報１５３を用いた表示処理については後述する。履歴情報ＤＢ１５０は、ユーザが注目している情報を記憶する記憶部の一例である。

辞書ＤＢ１６０は、辞書機能を実行するために用いられる辞書情報を記憶する記憶部である。辞書ＤＢ１６０は、例えば図３に示すように、単語１６１、当該単語の意味１６２、単語のレベル１６３、単語のジャンル１６４等を記憶する。本実施形態では、辞書ＤＢ１６０は、注目している情報に関連付けられた関連情報を記憶する記憶部の一例である。

関連情報ＤＢ１７０は、単語に関連付けられた関連情報を記憶する記憶部である。本実施形態の電子書籍閲覧デバイス１００は、関連情報を記憶する記憶部として上述の辞書ＤＢ１６０を有しているが、関連情報は複数あってもよい。例えば、単語に関連付けられた色や画像、音楽等を関連情報として関連情報ＤＢ１７０に記憶することができる。辞書ＤＢ１６０、関連情報ＤＢ１７０に記憶されている関連情報は、オーバーレイ画像に付加情報として含まれる。

以上、本実施形態に係る電子書籍閲覧デバイス１００の機能構成について説明した。

＜３．電子書籍閲覧デバイスによる表示処理＞
次に、図４〜図１１に基づいて、本実施形態に係る電子書籍閲覧デバイス１００による電子書籍の内容の表示処理について説明する。なお、図４は、本実施形態に係る電子書籍閲覧デバイス１００における画像生成処理を示す説明図である。図５は、本実施形態に係る電子書籍閲覧デバイス１００におけるユーザレベルに応じた画像生成処理を示すフローチャートである。図６は、本実施形態に係る電子書籍閲覧デバイス１００における単語のジャンルに応じた画像生成処理を示すフローチャートである。図７は、重畳画像の一表示例を示す説明図である。図８および図９は、重畳画像の他の表示例を示す説明図である。図１０は、オーバーレイ画像から一部の単語の関連情報を削除する操作を行ったときの表示変更状態を示す説明図である。図１１は、オーバーレイ画像から一部の単語の関連情報を削除する一処理例を示すフローチャートである。

［表示処理フロー］
まず、図４に基づいて、本実施形態に係る電子書籍閲覧デバイス１００の表示処理フローを説明する。以下では、閲覧する電子書籍の内容に、ユーザユニークな情報に基づき決定された所定の単語の意味を添えて表示する例を用いて表示処理フローを説明する。例えば、日本語以外の言語により記載された電子書籍を閲覧する際に、所定の単語について単語の日本語訳を関連情報として表示するような状況を想定する。このような表示処理は、例えば、電子書籍閲覧デバイス１００の設定言語と閲覧する電子書籍の記載言語とが相違する場合に機能する。なお、電子書籍閲覧デバイス１００の設定言語と閲覧する電子書籍の記載言語とが同一であっても、国語辞典や漢和辞典のように同一言語で記載された辞書の情報を関連情報として電子書籍の内容とともに表示することもできる。

本実施形態に係る電子書籍閲覧デバイス１００では、例えば、ユーザが操作部１１０から閲覧する電子書籍を選択すると、操作部１１０からの入力情報はレンダラー部１２２へ出力される。レンダラー部１２２は、ユーザが選択した電子書籍を表示部１３０に表示させるため、図４に示すように、書籍ＤＢ１４０から当該電子書籍の書籍データおよび電子書籍の表示に関する設定情報を取得する。そして、レンダラー部１２２は、書籍データに含まれる文字列や画像を、指定されたレイアウトに沿って、設定情報により規定されたページ番号、画面サイズ、文字の大きさで表示する基本画像を作成する。基本画像には、電子書籍の内容そのものが表示されている。レンダラー部１２２は、作成した基本画像をマッチング部１２４および画像重畳部１２８へ出力する。

マッチング部１２４は、レンダラー部１２２より基本画像が入力されると、基本画像に含まれる文字列に、ユーザが注目している単語があるか否かを確認する。基本画像に含まれる文字列は、既存の手法を用いて、例えば図４に示すように、単語毎に区切ることで取得することができる。一方、ユーザが注目している単語は、本実施形態では辞書機能における検索履歴から取得することができる。ユーザによって検索された単語は、ユーザが注目している単語といえ、電子書籍閲覧デバイス１００を保持するユーザにユニークな情報といえる。マッチング部１２４は、辞書機能の検索履歴を記憶する履歴情報ＤＢ１５０を参照して過去に検索された単語を取得し、基本画像に検索された単語が含まれているか否かを確認する。そして、マッチング部１２４は、マッチングした単語はユーザが注目している単語として抽出し、基本画像における当該単語の表示位置とともに、オーバーレイ画像作成部１２６へ出力する。

例えば、基本画像に“The quick brown fox
jumps over lazy dog.”という文が表示されるとする。かかる文は８つの単語から構成される。一方、履歴情報ＤＢ１５０に、辞書によって検索された単語として、“red”、“green”、“blue”、“brown”、“lazy”、“fool”の６つの単語が記憶されているとする。このとき、マッチング部１２４は、基本画像に“brown”、“lazy”の２つの単語が含まれていることを確認することができる。そして、マッチング部１２４は、抽出された単語と、基本画像における当該単語の表示位置とを、オーバーレイ画像作成部１２６へ出力する。例えば、基本画像中、２行目の“brown”と４行目の“lazy”とがユーザにより注目されている単語であるという情報が、オーバーレイ画像作成部１２６へ出力される。

次いで、オーバーレイ画像作成部１２６は、マッチング部１２４から入力された、ユーザが注目している単語に関連付けられた関連情報を取得し、基本画像とともに表示部１３０に表示するオーバーレイ画像を作成する。ユーザが注目している単語に関連付けられた関連情報は、例えば、単語と当該単語の意味とを関連付けた辞書であれば単語の意味や、さらに単語の意味に関連付けられた色や画像、音楽等の情報等である。図４に示す例では、オーバーレイ画像作成部１２６は、マッチング部１２４から入力された“brown”、“lazy”の意味を辞書ＤＢ１６０から取得し、基本画像に表示されるこれらの単語の近辺に、取得した単語の意味を表示するオーバーレイ画像を作成する。

オーバーレイ画像は、例えば、図４に示すように、基本画像と重ね合わせた際に、ユーザが注目している単語の表示位置がハイライトされ、単語の近辺に単語の意味を表示する吹き出しが表示されるように作成される。オーバーレイ画像作成部１２６は、作成したオーバーレイ画像を画像重畳部１２８に出力する。

画像重畳部１２８は、レンダラー部１２２により作成された基本画像と、オーバーレイ画像作成部１２６により作成されたオーバーレイ画像とを重ね合わせ、表示部１３０に表示する１枚の重畳画像を作成する。重畳画像は、電子書籍の内容に加えて、ユーザが注目している単語の意味が表示された状態となる。ここで、意味が表示される単語は、電子書籍閲覧デバイス１００を保持するユーザの辞書機能における検索結果に基づき決定されたものであり、このユーザにユニークな情報である。このように、本実施形態に係る電子書籍閲覧デバイス１００は、当該デバイスに備わる他の機能から取得可能なユーザユニークな情報を用いて、そのユーザに特化したユーザエクスペリエンスを自動的に実現することができる。画像重畳部１２８により作成された重畳画像は、表示部１３０に表示され、ユーザに提示される。

［関連情報を表示する単語の決定］
図４に示した表示処理フローに基づき、電子書籍閲覧デバイス１００は、ユーザの注目する単語に関連情報を付して、電子書籍の内容をユーザに提示することができる。ここで、上記説明では、ユーザが辞書機能において検索した単語すべてについて、その単語の意味を表示するようにしたが、本発明は係る例に限定されず、意味を表示する単語の決定方法は様々であり、適宜変更することも可能である。

（１）直近に検索された単語
例えば、辞書機能で検索されたすべての単語の意味を表示すると、莫大な関連情報が表示される可能性もあり、却って電子書籍を読みにくくなることも考えられる。そこで、ユーザが注目をしている単語である可能性が高いと考えられる、直近に検索した単語の意味のみ表示するようにしてもよい。直近に検索された単語とは、例えば現在から遡って１００件程度も単語とすることができ、その数は、予め設定してもよくユーザが設定してもよい。また、直近に検索された単語を、時間によって設定することもできる。例えば、現在から１カ月以内に検索された単語を直近に検索された単語としてもよい。

このとき、履歴情報ＤＢ１５０は、直近に検索された単語のみを記憶するようにしてもよく、現在から遡って何番目に検索された単語であるか、あるいは検索された日時を表す情報を記憶するようにしてもよい。

（２）複数回検索された単語
また、複数回検索された単語はユーザの注目度が高い単語であると考えることもできる。これより、例えば、ｎ回（例えば３回）以上検索された単語について、関連情報を表示するようにしてもよい。検索回数は、図２に示す履歴情報ＤＢ１５０の検索回数１５２より取得することができる。これにより、よりユーザが注目している単語を絞り込むことができ、適切に関連情報を提示することができる。

（３）ユーザのレベルに応じた単語
あるいは、ユーザが辞書機能で検索した単語からユーザのレベルを推定し、推定されたレベルまたはそれ以上のレベルの単語について関連情報を表示するようにしてもよい。この場合、ユーザが検索していない単語についても関連情報が表示される可能性がある。ユーザのレベルに基づき、検索されていない単語についても意味等の関連情報を表示することで、ユーザの単語の意味を検索する手間を省くこができ、読みやすい電子書籍を提供することができる。

具体的には、図５に示すように、ユーザが辞書で単語を引くと（Ｓ１００）、履歴情報ＤＢ１５０に検索された単語が登録され、履歴情報ＤＢ１５０が更新される（Ｓ１１０）。電子書籍閲覧デバイス１００のユーザレベル解析部（図示せず。）は、例えば、履歴情報ＤＢ１５０が更新されたタイミングで、あるいは予め設定された所定のタイミングで、ユーザレベルを解析する（Ｓ１２０）。

ユーザレベルは、例えば予め辞書ＤＢ１６０に記憶されているものとする。図３に示す例では、例えば辞書ＤＢ１６０に登録されている単語が難易度に応じてレベル付けされており、難易度が高いほどレベルの値が大きくなる。ユーザレベル解析部は、検索された単語のレベルを例えば統計的手法により解析し、解析されたユーザの知識のレベルをユーザレベルとして決定する（Ｓ１３０）。決定したユーザレベルは、記憶部（図示せず。）に記憶される。

その後、マッチング部１２４は、辞書ＤＢ１６０を参照して、基本画面に表示される文字列からユーザレベル以上の単語と合致するものを抽出し、これをユーザが注目している単語とする（Ｓ１４０）。そして、オーバーレイ画像作成部１２６により、マッチング部１２４により抽出された単語の関連情報（例えば、単語の意味）を表示するためのオーバーレイ画像が作成された後、画像重畳部１２８により重畳画像が作成される。こうして、表示部１３０に、抽出された単語の意味が表示された画像が表示される（Ｓ１５０）。

このように、辞書機能において検索された単語というユーザユニークな情報からユーザレベルを推定し、関連情報を表示する単語を決定することで、ユーザの知識のレベルに適した関連情報を自動的に提供することができる。

（４）ジャンルに応じた単語
さらに、ユーザが辞書機能で検索した単語から単語のジャンルの傾向を推定し、ユーザが検索する頻度の高いジャンルの単語について関連情報を表示するようにしてもよい。この場合にも、ユーザが検索していない単語についても関連情報が表示される可能性がある。ユーザが検索した単語のジャンルの傾向に基づき、検索されていない単語についても意味等の関連情報を表示することで、ユーザの単語の意味を検索する手間を省くこができ、読みやすい電子書籍を提供することができる。

具体的には、図６に示すように、ユーザが辞書で単語を引くと（Ｓ２００）、履歴情報ＤＢ１５０に検索された単語が登録され、履歴情報ＤＢ１５０が更新される（Ｓ２１０）。電子書籍閲覧デバイス１００のジャンル解析部（図示せず。）は、例えば、履歴情報ＤＢ１５０が更新されたタイミングで、あるいは予め設定された所定のタイミングで、検索された単語のジャンルの傾向を解析する（Ｓ２２０）。

単語のジャンルも、例えば予め辞書ＤＢ１６０に記憶されているものとする。例えば図３に示すように、辞書ＤＢ１６０には、登録されている単語が属するジャンル１６４が関連付けられて記憶されている。単語の属するジャンルは、１つであってもよく複数であってもよい。ジャンル解析部は、検索された単語のジャンルの傾向を例えば統計的手法により解析し、解析されたジャンルの傾向からユーザが注目している単語のジャンルを決定する（Ｓ２３０）。ここで、決定されるジャンルは、１つであってもよく複数であってもよい。決定したジャンルは、記憶部（図示せず。）に記憶される。

その後、マッチング部１２４は、辞書ＤＢ１６０を参照して、基本画面に表示される文字列から決定されたジャンルに属する単語と合致するものを抽出し、これをユーザが注目している単語とする（Ｓ２４０）。そして、オーバーレイ画像作成部１２６により、マッチング部１２４により抽出された単語の関連情報（例えば、単語の意味）を表示するためのオーバーレイ画像が作成された後、画像重畳部１２８により重畳画像が作成される。こうして、表示部１３０に、抽出された単語の意味が表示された画像が表示される（Ｓ２５０）。

このように、辞書機能において検索された単語というユーザユニークな情報からユーザが検索した単語のジャンルの傾向を推定し、関連情報を表示する単語を決定することで、ユーザに適した関連情報を自動的に提供することができる。

以上、関連情報を表示する単語の決定方法のバリエーションについて説明した。なお、上述した方法は、電子書籍閲覧デバイス１００にそれぞれ適用してもよく、組み合わせて適用してもよい。

［関連情報の表示例］
電子書籍閲覧デバイス１００は、画像重畳部１２８により作成された重畳画像を表示部１３０に表示して、電子書籍の内容および関連情報をユーザに提示するが、関連情報の表示の仕方はデバイス毎に、あるいはユーザの好みに応じて設定することができる。例えば、図４に示したように、ユーザが注目している単語をハイライトし、関連情報である単語の意味を吹き出しによって当該単語の近辺に表示してもよい。また、他の形態で関連情報を表示することもでき、その例を図７〜図１１に示す。

（１）ユーザ操作に応じた関連情報表示
例えば、図７に示すように、電子書籍閲覧デバイス１００の表示部１３０に電子書籍の内容が表示された初期状態では、ユーザが注目している単語として抽出された単語をハイライトして表示し、単語の意味は表示しないようにする。そして、ハイライトされている単語のうち意味を表示させたい単語にユーザが指を接触させると、接触した位置に表示されている単語の意味を吹き出しによってその近辺に表示する。

図７の例では、ハイライトされている単語“brown”にユーザが指を接触させたとする。そうすると、単語“brown”の近辺に（例えば、ハイライト部分の任意の縁部から延び、当該単語が表示されている行と隣接する行との間に意味表示部分が表示されるように）吹き出しが表示され、その内部に単語の意味「茶色」が表示される。このようにユーザが意図的に関連情報である単語の意味を表示させるようにすることで、電子書籍の内容を見易くすることができる。なお、図７の例では、関連情報を表示可能な単語をハイライトして表したが、本発明はかかる例に限定されず、ハイライトの代わりに、例えば下線を付したり、当該単語の近辺に小さなボタンを表示したり、文字の色を変更したりすることで表してもよい。

（２）下線部とともに関連情報表示
また、図８に示すように、ユーザが注目している単語として抽出された単語には下線を付し、その下に常時関連情報である単語の意味を表示させてもよい。

（３）脚注による関連情報表示
あるいは、表示部１３０の表示領域に、電子書籍の内容を表示する書籍表示領域１３２を縮小して表示し、書籍表示領域１３２以外の表示領域部分に、ユーザが注目している単語として抽出された単語の関連情報をまとめて表示してもよい。例えば図９に示すように、書籍表示領域１３２の下側に関連情報を表示する関連情報表示領域１３４を配置し、脚注のように関連情報である単語の意味を表示させてもよい。関連情報表示領域１３４にすべての関連情報を表示することができない場合には、スクロールバー１３６を設ける等して、書籍表示領域１３２に表示されている電子書籍の内容と同一画面で関連情報も確認できるようにしてもよい。

関連情報表示領域１３４は、表示部１３０に常時表示させてもよく、通常は非表示にし、所定の操作が行われたとき（例えば関連情報表示ボタンを設け、当該ボタンが押下されたとき）のみ表示するようにしてもよい。また、図９に示す例では、書籍表示領域１３２の下側に関連情報表示領域１３４を配置したが、本発明はかかる例に限定されず、関連情報表示領域１３４を、例えば書籍表示領域１３２の上側に配置してもよく、書籍表示領域１３２の左右方向に配置してもよい。

（４）ユーザのチェックによる関連情報の非表示化
本実施形態に係る電子書籍閲覧デバイス１００では、上述したような表示方法により、電子書籍の内容とともに関連情報を自動的に表示部１３０に表示させることができるが、その後、ユーザの操作によって所定の単語の関連情報を非表示にすることもできる。例えば、ユーザが覚えた単語の意味を常に表示させるのは、ユーザにとっては余計な情報となり、却って電子書籍の内容を見難いものとしてしまう。そこで、自動的に表示させた関連情報を、ユーザによって非表示とすることができるようにする。

例えば、図１０に示すように、表示部１３０に電子書籍の内容を表示させたときの初期状態では、マッチング部１２４により抽出された単語に対して、下線部とともに単語の意味が表示されているとする。このとき、ユーザは、表示されている単語の意味のうち非表示にしたいものがあるときには、その単語を選択する操作を行う（図１１のＳ３００）。操作部１１０としてタッチセンサを用いている場合、単語の選択操作は、例えば図１０に示すように、単語の意味の上を指でなぞる操作を適用することができる。このように、指で単語の意味を消去するような操作を適用することで、ユーザは単語の意味を非表示にする操作を直感的に行うことができる。

非表示にする単語が選択されると、タッチセンサによる検出結果に基づき、レンダラー部１２２は、履歴情報ＤＢ１５０のチェック済情報１５３を更新する（Ｓ３１０）。チェック済情報１５３は、ユーザが意図的に関連情報を非表示とするか否かを示す非表示フラグであり、例えば「１」が格納されているときには関連情報を非表示とし、「１」以外の場合には関連情報を表示する、と規定することができる。マッチング部１２４は、マッチング処理にて抽出した単語のうちチェック済情報１５３が「１」の単語については、関連情報を表示する単語から除外し、オーバーレイ画像作成部１２６へはそれ以外の単語を出力する。

オーバーレイ画像作成部１２６は、マッチング部１２４から入力された単語に基づき、オーバーレイ画像を再作成し、画像重畳部１２８へ出力する（Ｓ３２０）。そして、画像重畳部１２８により基本画像とオーバーレイ画像とが重ね合わされ作成された新たな重畳画像を表示部１３０に表示させると、図１０に示すように、ユーザによって関連情報が非表示化された単語の意味が表示されないようになる。ユーザによって関連情報の非表示化がなされた単語については、その後も表示されない。このように、ユーザが表示不要と考える関連情報については表示させないようにすることで、電子書籍の内容を見易くすることができる。

［関連情報として利用可能な情報例］
本実施形態では、関連情報として、辞書機能により検索された単語に関連付けられた意味を用いる例を示したが、例えば、図１２に示すような情報も関連情報として利用することができる。

例えば、電子書籍の内容に、アドレス帳機能のアドレス帳に登録された友人の住所の地名が含まれていたときには、当該地名の近辺に関連情報として友人の名前を表示してもよい。また、電子書籍閲覧デバイス１００は、ブログへ書き込みを行ったときの文章を解析して、当該文章の内容を特徴付ける単語等の重要単語を抽出できるように構成してもよい。このとき、電子書籍の内容に、重要単語が含まれていたときには、書き込んだブログのＵＲＬへジャンプできるボタンを関連情報として表示部１３０に配置することもできる。

さらに、電子書籍閲覧デバイス１００は、当該デバイスに保存されている電子書籍の著者名を抽出し、その著者名が電子書籍の内容に含まれていた場合には、デバイス内に保存されているその著者の電子書籍名を関連情報として表示してもよい。また、電子書籍閲覧デバイス１００は、当該デバイスに保存されている写真より、当該写真の撮影場所の名称を取得し、その撮影場所の名称が電子書籍の内容に含まれていた場合には、デバイス内に保存されている写真を関連情報として表示してもよい。同様に、電子書籍閲覧デバイス１００は、当該デバイスに保存されている音楽より、当該音楽の曲名や作曲者名を取得し、その曲名や作曲者名が電子書籍の内容に含まれていた場合には、デバイス内に保存されている音楽を関連情報として再生してもよい。あるいは、音楽再生の代わりに、デバイス内に保存されている音楽を再生するための再生ボタンを関連情報として表示部１３０に配置することもできる。

また、電子書籍閲覧デバイス１００では、表示されている電子書籍の内容にマーカーを入れることもできるようにすることもできる。このとき、電子書籍閲覧デバイス１００は、ユーザによりマーカーされた単語を注目する単語として、当該単語と同一単語が含まれている他のページへ移動できる移動ボタンを関連情報として表示部１３０に配置することもできる。

以上、関連情報として利用可能な情報を例示したが、本発明はかかる例に限定されない。電子書籍閲覧デバイス１００の電子書籍の閲覧機能以外の機能から取得可能な、ユーザユニークな情報を注目する単語とすることができ、当該単語に関連付けられた様々な情報を関連情報として表示させることができる。このような単語と、当該単語に関連付けられた関連情報とを、例えば関連情報ＤＢ１７０に記憶しておくことで、様々な情報を自動的に付加してユーザに提供することが可能となる。

ユーザは、電子書籍閲覧デバイス１００を操作して、書籍の閲覧だけでなく、ブックマーク等の付箋を付けたり、絵を描いたりする等、電子書籍の内容に対して追加要素を加えることができる。電子書籍閲覧デバイス１００は、通常、各ユーザそれぞれの所有物として利用され、その保存内容もユーザユニークとなる。例えば、電子書籍閲覧デバイス１００内に保存されている書籍のジャンルにユーザの好みが反映されていると考えることができる。また、辞書機能やウェブブラウズ機能付きの電子書籍閲覧デバイス１００では、各機能の検索履歴がユーザユニークな情報と考えられる。

本実施形態に係る電子書籍閲覧デバイス１００は、このようなユーザユニークな情報を電子書籍閲覧時に利用して、単なる書籍の内容の閲覧だけでなく、ユーザに特化したユーザエクスペリエンスを実現することができる。

＜４．ハードウェア構成例＞
本実施形態に係る電子書籍閲覧デバイス１００による処理は、ハードウェアにより実行させることもでき、ソフトウェアによって実行させることもできる。この場合、電子書籍閲覧デバイス１００は、図１３に示すように構成することもできる。以下、図１３に基づいて、本実施形態に係る電子書籍閲覧デバイス１００の一ハードウェア構成例について説明する。

本実施形態に係る電子書籍閲覧デバイス１００は、上述したように、コンピュータ等の処理装置により実現することができる。電子書籍閲覧デバイス１００は、図１３に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３と、ホストバス１０４ａとを備える。また、電子書籍閲覧デバイス１００は、ブリッジ１０４と、外部バス１０４ｂと、インタフェース１０５と、入力装置１０６と、出力装置１０７と、ストレージ装置（ＨＤＤ）１０８と、ドライブ１０９と、接続ポート１１１と、通信装置１１３とを備える。

ＣＰＵ１０１は、演算処理装置および制御装置として機能し、各種プログラムに従って電子書籍閲覧デバイス１００内の動作全般を制御する。また、ＣＰＵ１０１は、マイクロプロセッサであってもよい。ＲＯＭ１０２は、ＣＰＵ１０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ１０３は、ＣＰＵ１０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバス１０４ａにより相互に接続されている。

ホストバス１０４ａは、ブリッジ１０４を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス１０４ｂに接続されている。なお、必ずしもホストバス１０４ａ、ブリッジ１０４および外部バス１０４ｂを分離構成する必要はなく、一のバスにこれらの機能を実装してもよい。

入力装置１０６は、マウス、キーボード、タッチパネル、ボタン、マイク、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ１０１に出力する入力制御回路などから構成されている。出力装置１０７は、例えば、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置およびランプなどの表示装置や、スピーカなどの音声出力装置を含む。

ストレージ装置１０８は、電子書籍閲覧デバイス１００の記憶部の一例であり、データ格納用の装置である。ストレージ装置１０８は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。ストレージ装置１０８は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）で構成される。このストレージ装置１０８は、ハードディスクを駆動し、ＣＰＵ１０１が実行するプログラムや各種データを格納する。

ドライブ１０９は、記憶媒体用リーダライタであり、電子書籍閲覧デバイス１００に内蔵、あるいは外付けされる。ドライブ１０９は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体に記録されている情報を読み出して、ＲＡＭ１０３に出力する。

接続ポート１１１は、外部機器と接続されるインタフェースであって、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）などによりデータ伝送可能な外部機器との接続口である。また、通信装置１１３は、例えば、通信網１０に接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置１１３は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、ワイヤレスＵＳＢ対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

例えば、上記実施形態では、電子書籍閲覧デバイス１００の電子書籍の閲覧機能において、電子書籍の内容に含まれる単語のうちユーザが注目している単語に関連情報を付加して表示したが、本発明はかかる例に限定されない。例えば、電子書籍閲覧デバイス１００の閲覧機能以外の機能において、ユーザユニークな情報に基づき、表示内容に対して自動的に関連情報を付加するようにしてもよい。ウェブブラウズ機能であれば、電子書籍閲覧デバイス１００は、表示部１３０に表示される内容からユーザが注目している単語や画像等を抽出し、当該単語等に関連付けられた関連情報を表示部１３０に表示するためのオーバーレイ画像を作成するようにしてもよい。

１００ 電子書籍閲覧デバイス
１１０ 操作部
１２０ 表示処理部
１２２ レンダラー部
１２４ マッチング部
１２６ オーバーレイ画像作成部
１２８ 画像重畳部
１３０ 表示部
１３２ 書籍表示領域
１３４ 関連情報表示領域
１４０ 書籍ＤＢ
１５０ 履歴情報ＤＢ
１６０ 辞書ＤＢ
１７０ 関連情報ＤＢ

Claims (9)

1. 単語と当該単語の意味とを関連付けて記憶する辞書記憶部と、
   前記辞書記憶部の参照履歴を記憶する履歴情報記憶部と、
   １または複数の文字列を含むコンテンツから、コンテンツの内容を表す基本画像を作成する基本画像作成部と、
   コンテンツに含まれる１または複数の文字列と、前記履歴情報記憶部に記憶された単語とをマッチングして、マッチングにより抽出した単語のうち直近に検索された単語のみを注目単語として抽出するマッチング部と、
   前記辞書記憶部から前記注目単語に関連付けられた単語の意味を取得して、前記取得した単語の意味を前記基本画像に含まれる注目単語に付加するオーバーレイ画像を作成するオーバーレイ画像作成部と、
   前記基本画像および前記オーバーレイ画像を重ね合わせて表示部に表示する画像重畳部と、
   を備え、
   前記オーバーレイ画像作成部は、前記注目単語の近辺の行間に当該注目単語の意味が表示されるように、前記オーバーレイ画像を作成する、情報処理装置。
2. 前記マッチング部は、マッチングにより抽出した単語のうち所定数以上参照された単語のみを注目単語として抽出する、請求項１に記載の情報処理装置。
3. 前記辞書記憶部の参照履歴に基づいて、ユーザレベルを解析するユーザレベル解析部をさらに備え、
   前記マッチング部は、前記辞書記憶部に記憶されている単語のうち前記ユーザレベル解析部による解析結果より決定されたユーザレベル以上の単語と、前記コンテンツに含まれる１または複数の文字列とをマッチングして、合致する単語を注目単語として抽出する、請求項１に記載の情報処理装置。
4. 前記辞書記憶部の参照履歴に基づいて、参照された単語のジャンルの傾向を解析するジャンル解析部をさらに備え、
   前記マッチング部は、前記辞書記憶部に記憶されている単語のうち前記ジャンル解析部による解析結果から特定されるジャンルに属する単語と、前記コンテンツに含まれる１または複数の文字列とをマッチングして、合致する単語を注目単語として抽出する、請求項１に記載の情報処理装置。
5. 前記表示部に表示された注目単語の意味を消去する消去操作が操作入力部から入力されたとき、
   前記履歴情報記憶部に記憶されている当該注目単語に、単語の意味を非表示にする非表示フラグを関連付けて記憶し、
   前記マッチング部は、マッチングにより抽出した単語のうち、前記非表示フラグが関連付けられた単語を前記注目単語から除外する、請求項１に記載の情報処理装置。
6. 前記オーバーレイ画像作成部は、
   前記抽出された注目単語が、注目単語であることを視覚的に表す初期オーバーレイ画像を作成し、
   前記基本画像および前記初期オーバーレイ画像が前記画像重畳部により前記表示部に表示された状態で、操作入力部より前記表示部に表示された注目単語を選択する選択操作が入力されたとき、選択された前記注目単語の近辺に当該注目単語の意味が表示されるように、前記オーバーレイ画像を作成する、請求項１に記載の情報処理装置。
7. 前記画像重畳部は、前記コンテンツを表示するコンテンツ表示領域と、前記注目単語の意味を表示する領域とを、前記表示部の同一画面内に表示する、請求項１に記載の情報処理装置。
8. 基本画像作成部により、１または複数の文字列を含むコンテンツから、コンテンツの内容を表す基本画像を作成するステップと、
   マッチング部により、コンテンツに含まれる１または複数の文字列と、単語と当該単語の意味とを関連付けて記憶する辞書記憶部の参照履歴を記憶する履歴情報記憶部に記憶された単語とをマッチングして、マッチングにより抽出した単語のうち直近に検索された単語のみを注目単語として抽出するステップと、
   オーバーレイ画像作成部により、前記辞書記憶部から前記注目単語に関連付けられた単語の意味を取得して、前記取得した単語の意味を前記基本画像に含まれる注目単語に付加するオーバーレイ画像を作成するステップと、
   画像重畳部により、前記基本画像および前記オーバーレイ画像を重ね合わせて表示部に表示するステップと、
   を含み、
   前記オーバーレイ画像は、前記注目単語の近辺の行間に当該注目単語の意味が表示されるように作成される、情報処理方法。
9. コンピュータを、
   １または複数の文字列を含むコンテンツから、コンテンツの内容を表す基本画像を作成する基本画像作成手段と、
   コンテンツに含まれる１または複数の文字列と、単語と当該単語の意味とを関連付けて記憶する辞書記憶部の参照履歴を記憶する履歴情報記憶部に記憶された単語とをマッチングして、マッチングにより抽出した単語のうち直近に検索された単語のみを注目単語として抽出するマッチング手段と、
   前記辞書記憶部から前記注目単語に関連付けられた単語の意味を取得して、前記取得した単語の意味を前記基本画像に含まれる注目単語に付加するオーバーレイ画像を作成するオーバーレイ画像作成手段と、
   前記基本画像および前記オーバーレイ画像を重ね合わせて表示部に表示する画像重畳手段と、
   を備え、
   前記オーバーレイ画像作成手段は、前記注目単語の近辺の行間に当該注目単語の意味が表示されるように、前記オーバーレイ画像を作成する、情報処理装置として機能させるためのコンピュータプログラム。

Images