JP5240867B2 - 要約提供システム、要約提供方法およびプログラム - Google Patents

Description

本発明は、書籍の要約を提供する要約提供システムに関する。

書籍やビデオゲームは、それまでのストーリーを踏まえて、読み進む、または進行させるものである。電子書籍やビデオゲームでは、読書や進行を一時中断し、再開するときに、それまでのストーリーを思い出すための装置として以下が提案されている。

特許文献１（特開２０００−１２６２４５号公報）には、ビデオゲーム再開時にこれまでプレイヤが実行してきた物語の内容の把握を容易にすることを目的とし、物語の進行状況の結果を示すあらすじデータを記憶する手段と、ストーリーの進行状況に対応する表示用あらすじ情報が記録される記録媒体と、あらすじデータに対応する表示用あらすじ情報による表示を行う制御系を備える装置が開示されている。

特許文献２（特開２００１−１２５９２１号公報）には、電子書籍を再読する場合、予め入力した再読箇所を示すしおりデータを選択することにより、再読箇所のしおりマーク及びこれに対応する書籍データを即時表示することを目的とし、電子書籍の書籍データを記憶する書籍データ記憶部と、書籍データを表示する表示部と、書籍データの再読箇所を示すしおりマークを少なくとも一つ以上入力するとともにその各しおりマークに付加する属性データを入力する入力部と、その入力されたしおりマーク及びその属性データを対にしてしおりデータとして記憶するしおりデータ記憶部と、入力部によって書籍データの再読箇所に対応するしおりデータが選択された際、その選択されたしおりデータに対応するしおりマーク及びこれに対応する書籍データを表示部に即時表示する表示制御部とから構成される装置が開示されている。

特開２０００−１２６２４５号公報 特開２００１−１２５９２１号公報

上述したように、電子書籍やビデオゲームなどでは、ストーリーの進行状況や書籍データの再読箇所を示すしおりマークを記録することで、これらに対応する表示用あらすじ情報や書籍データを読み出して利用者に表示することが可能となっている。

一般的な書籍の場合には、同じ内容の電子書籍の書籍データがあったとしても、書籍に挟むなどしたしおりと、書籍データとをリンクさせる術が無く、同じ内容の電子書籍の書籍データを活用することができなかった。

本発明は、一般的な書籍の読者に対しても、読み進んだ箇所に対応する電子的な要約を提供する要約提供システムを実現するものである。

本発明の要約提供システムは、書籍の書籍識別情報に関連付けられて、書籍の寸法、総頁数、頁数に対応した要約が格納されたテーブルを複数備えた書籍データベースと、
カメラと、表示部と、を備えた小型携帯機器と、
前記カメラにより撮影された、しおりが挟まれた状態の前記書籍の映像から書籍の寸法を抽出する画像寸法抽出部と、前記書籍の書籍識別情報を取得する書籍識別情報取得手段と、該書籍識別情報取得手段により得られた書籍識別情報に対応する前記書籍データベースのテーブルより前記書籍の寸法および総頁数を取得し、前記画像寸法抽出部により得られた前記書籍の寸法から前記しおりが挟まれた頁数を求め、求めたページ数に対応する要約を前記テーブルから読み出して前記小型携帯機器の表示部へ出力させる画像寸法解析部と、を備えた要約出力部と、を有する。

本発明の要約提供方法は、書籍の書籍識別情報に関連付けられて、書籍の寸法、総頁数、頁数に対応した要約が格納されたテーブルを複数備えた書籍データベースと、カメラおよび表示部とを備えた小型携帯機器と、ともに要約提供システムを構成する要約出力装置で行われる要約提供方法であって、
画像寸法抽出部が、前記カメラにより撮影された、しおりが挟まれた状態の前記書籍の映像から書籍の寸法を抽出するステップと、
書籍識別情報取得手段が、前記書籍の書籍識別情報を取得するステップと、
画像寸法解析部が、前記書籍識別情報取得手段により得られた書籍識別情報に対応する前記書籍データベースのテーブルより前記書籍の寸法および総頁数を取得し、前記画像寸法抽出部により得られた前記書籍の寸法から前記しおりが挟まれた頁数を求め、求めたページ数に対応する要約を前記テーブルから読み出して前記小型携帯機器の表示部へ出力させるステップと、を備えている。

本発明のプログラムは、上記の要約出力装置をコンピュータシステム上に構築する。

上記のように構成される本発明においては、一般的な書籍の読者に対しても、読み進んだ箇所に対応する電子的な要約を提供することができる。

本発明による要約提供システムの一実施形態の構成を示すブロック図である。 携帯機器２００の要部構成を示すブロック図である。 サーバ３００の要部構成を示すブロック図である。 、図４は、書籍データベース４００の要部構成を示すブロック図である。 書籍１０１としおり１０２の関係を詳細に示す平面図である。 本発明の第２の実施形態で用いられる書籍１０１の撮影画像を示す図である。 本発明の第３の実施形態で用いられるしおり７０１の構成を示す斜視図である。

次に、本発明の実施形態について図面を参照して説明する。

図１は、本発明による要約提供システムの一実施形態の構成を示すブロック図である。

本実施形態は、書籍１０１に挟まれたしおり１０２の位置から該当する要約を利用者に提示するものであり、スマートフォン、ＰＤＡ（Personal Digital Assistant）などの携帯機器２００、サーバ３００、書籍データベース４００から構成されている。

本実施形態は、予め定められた寸法の書籍１０１およびしおり１０２を使用することを前提とするシステムである。図５（ａ）は、書籍１０１を表紙側から見た平面図、図５（ｂ）は書籍１０１を裏表紙側から見た平面図であり、図示されるように、表紙側にはタイトル名１０３が記載され、裏表紙にはバーコード１０４が刻印されている。

図２は携帯機器２００の要部構成を示すブロック図、図３はサーバ３００の要部構成を示すブロック図、図４は、書籍データベース４００の要部構成を示すブロック図、図５は書籍１０１としおり１０２の関係を詳細に示す平面図である。

図２ないし図４に示されるように、携帯機器２００は、カメラ２０１、制御部２０２、表示部２０３を備え、サーバ３００は通信制御部３０１を備え、書籍データベース４００はテーブル４０１を備えている。なお、図４においては、テーブル４０１は１つのみ示されているが、各書籍の書籍識別情報に対応して複数設けられている。書籍識別情報とは、タイトル名またはＩＳＢＮ（International Standard Book Number：国際標準図書番号）、書籍JANコードなどの書籍識別子などである。

制御部２０２は、カメラ２０１の撮影画像から、タイトル名を抽出する。タイトル名は図５（ａ）におけるタイトル名１０３に示され、書籍識別情報は、図５（ｂ）におけるバーコード１０４に示されるＩＳＢＮ、書籍JANコードなどの書籍識別子を含むものである。書籍データベース４００には、書籍識別情報に関連付けられて、書籍１０１の幅や厚さを含む寸法、頁数に対応した要約を示すデータが格納されたテーブル４０１を備えている。なお、テーブル４０１は、タイトル名または書籍識別子のどちらかでも、タイトル名と書籍識別子の両方が記憶されていてもよい。

制御部２０２は、文字認識機能およびバーコード変換機能を備えるもので、カメラ２０１で撮影された画像が図５（ａ）に示される書籍１０１の表紙側から撮影されたものである場合には文字認識を行ってタイトル名１０３を認識して携帯機器２００へ送り、カメラ２０１で撮影された画像が図５（ｂ）に示される書籍１０１の裏表紙側から撮影されたものである場合にはバーコード変換を行うことによりＩＳＢＮ、書籍JANコードなどの書籍識別子を得てサーバ３００へ送る。

制御部２０２は、撮影画像内の書籍１０１の幅ｂとしおり１０２の幅ａの大きさの抽出機能を備えており、上記の書籍識別情報とともに撮影画像内の書籍１０１の幅ｂとしおり１０２の幅ａの大きさをサーバ３００へ送る。

サーバ３００内の通信制御部３０１は、書籍識別情報とともに撮影画像内の書籍１０１の幅ｂとしおり１０２の幅ａの大きさを受け付けると、書籍識別情報に示される書籍の大きさを、書籍データベース４００内の書籍識別情報に該当するテーブル４０１より取得し、取得した内容に基づいてしおり１０２が書籍１０１のいずれの頁数に挟まれているかを求める。以下に、しおり１０２が挟まれている頁数の求め方について詳細に説明する。

しおり１０２の実際の長さはＡであり、書籍の実際の幅はＢである。カメラで撮影されたしおりの幅をａとする。幅ａは、しおり１０２が挟まれた位置に応じて変動する。例えば、表紙側から撮影された場合には、挟まれるページ数が大きくなるにしたがって幅ａは小さくなり、裏表紙側から撮影された場合には、挟まれるページ数が大きくなるにしたがって幅ａは大きくなる。

通信制御部３０１は、同時に送られてきた情報がタイトル名と書籍識別子のいずれであるかにより撮影が表紙側と裏表紙側のいずれで撮影されたものであるかを認識し、幅Ｂに対する幅Ａの大きさと幅ｂに対する幅ａの大きさからしおり１０２が挟まれている頁数を算出する。

通信制御部３０１は、書籍識別情報に該当するテーブル４０１から算出した頁数に対応する要約を示すデータを取得する。この取得においては、算出した頁数よりも少ない直近の頁、例えば算出した頁数が２７頁であった場合には、２０頁に対応して格納されている要約を示すデータを取得して、携帯機器２００へ送信する。

携帯機器２００の制御部２０２は、送られてきた要約データにより要約を表示部２０３に表示させる。

上記のような構成を持つ本実施形態の利用者（読者）の利用について説明する。

書籍１０１の読者が読書を中断して書籍１０１にしおり１０２を挟む。その後、読書を再開する際に、読者は、携帯機器２００に要約を取得する旨の入力を入力手段（不図示）に行い、設けられたカメラ２０１により、しおり１０２を挟んだ状態の書籍１０１を撮影する。この後、表示部２０３に表示された要約を読んで、それまでのあらすじを確認し、読書を再開する。

次に、本発明の第２の実施形態について説明する。

本実施形態は、しおり１０２が挟まれた頁数の算出方法が第１の実施形態と異なるものであり、携帯機器２００内の制御部２０２およびサーバ３００内の通信制御部３０１の動作が異なるだけで、その他の構成は第１の実施形態と同じとなっている。図６は本実施形態で用いられる書籍１０１の撮影画像を示す図である。

本実施形態においては、しおり１０２を挟んだ書籍１０２を天側もしくは地側から表紙を上方として撮影する。また、利用者により、書籍識別情報が入力手段へ入力される。

制御部２０２は、撮影画像から、図６に示される、書籍１０１の全体の厚さＤと表紙からしおり１０２までの長さｄを抽出して書籍識別情報とともにサーバ３００へ送る。

サーバ３００内の通信制御部３０１は、書籍識別情報とともに書籍１０１の全体の厚さＤと表紙からしおり１０２までの長さｄを受け付けると、書籍識別情報に示される書籍の総頁数を、書籍データベース４００内のタイトル名に該当するテーブル４０１より取得し、書籍１０１の全体の厚さＤに対する表紙からしおり１０２までの長さｄの割合と、書籍１０１の総頁数により、しおり１０２が書籍１０１のいずれの頁に挟まれているかを求める。

その後、第１の実施形態と同様に要約の取得が行われ、表示部２０３への要約の表示が行われる。

図７は本発明の第３の実施形態で用いられるしおり７０１の構成を示す斜視図である。

本実施形態は、第２の実施形態で行われる、天側もしくは地側から表紙を上方として撮影することを前提とする実施形態である。

しおり７０１は、端部が折り曲げられたＬ字型の断面形状とされている。端部には、挟まれた際に表紙側を向く方向を示すマーク７０４、書籍識別情報を示すバーコード７０３が設けられている。また、折り曲げられた稜線部には、しおりの位置を強調するためのライン７０３が設けられている。

本実施形態においては、しおり１０２を挟んだ書籍１０２を天側もしくは地側から表紙を上方として撮影する。

制御部２０２は、撮影画像から書籍１０１の全体の厚さＤと表紙からしおり７０１までの長さｄを抽出し、また、バーコード７０３から書籍識別情報を抽出して書籍識別情報をサーバ３００へ送る。

サーバ３００内の通信制御部３０１は、書籍識別情報とともに書籍１０１の全体の厚さＤと表紙からしおり７０１までの長さｄを受け付けると、書籍識別情報に示される書籍の総頁数を、書籍データベース４００内の書籍識別情報に該当するテーブル４０１より取得し、書籍１０１の全体の厚さＤに対する表紙からしおり７０１までの長さｄの割合と、書籍１０１の総頁数により、しおり７０１が書籍１０１のいずれの頁に挟まれているかを求める。

その後、第１の実施形態と同様に要約の取得が行われ、表示部２０３への要約の表示が行われる。

なお、以上説明した第１の実施形態においては、制御部２０２が、文字認識機能、バーコード変換機能、および、撮影画像内の書籍１０１の幅ｂとしおり１０２の幅ａの大きさを抽出する機能（画像寸法抽出）を備え、通信制御部３０１が、書籍識別情報に示される書籍の大きさを、書籍データベース４００内の書籍識別情報に該当するテーブル４０１より取得し、幅Ｂに対する幅Ａの大きさと幅ｂに対する幅ａの大きさからしおり１０２が挟まれている頁数を算出する（画像寸法解析）ものとして説明した。

また、第２の実施形態においては、制御部２０２が、書籍１０１の全体の厚さＤと表紙からしおり１０２までの長さｄを抽出し（画像寸法抽出）、通信制御部３０１が、書籍１０１の全体の厚さＤに対する表紙からしおり１０２までの長さｄの割合と、書籍１０１の総頁数により、しおり１０２が書籍１０１のいずれの頁に挟まれているかを求める（画像寸法解析）ものとして説明した。

また、第３の実施形態においては、制御部２０２が、バーコード変換機能、および、書籍１０１の全体の厚さＤと表紙からしおり１０２までの長さｄを抽出する機能（画像寸法抽出）を備え、通信制御部３０１が、書籍１０１の全体の厚さＤに対する表紙からしおり１０２までの長さｄの割合と、書籍１０１の総頁数により、しおり１０２が書籍１０１のいずれの頁に挟まれているかを求める（画像寸法解析）ものとして説明した。

画像寸法解析を含む通信制御部３０１で行われる作業は、制御部２０２で行われることとしてもよい。このような構成とした場合には、サーバ３００が不要となり、携帯機器２００と書籍データベース４００により構成されるシステムとなる。

また、画像寸法抽出を含む制御部２０２で行われる作業は通信制御部３０１で行われることとしてもよい。

制御部２０２および通信制御部３０１で実現される上記の画像寸法抽出や画像寸法解析は、一般的なコンピュータシステム上にプログラムにより実現されるものであり、タイトル名の取得を画像解析または入力手段への入力解析を含めたこれらの機能を携帯機器、サーバのいずれで行うかは本発明において本質的な問題ではない。上述した各機能を備えた要約出力部または要約出力装置とした場合、その構成要素は、制御部２０２および通信制御部３０１のいずれかに設けられればよく、本発明にはこれらの様々な形態を含むものである。また、本発明は、要約出力部または要約出力装置の構成要素を一般的なコンピュータシステム上に構築するためのプログラムをも含む。

１０１ 書籍
１０２ しおり
１０３ タイトル名
１０４ バーコード
２００ 携帯機器
２０１ カメラ
２０２ 制御部
２０３ 表示部
３００ サーバ
３０１ 通信制御部
４００ 書籍データベース
４０１ テーブル
７０１ しおり
７０２ ライン
７０３ バーコード
７０４ マーク

Claims (11)

1. 書籍の書籍識別情報に関連付けられて、書籍の寸法、総頁数、頁数に対応した要約が格納されたテーブルを複数備えた書籍データベースと、
   カメラと、表示部と、を備えた小型携帯機器と、
   前記カメラにより撮影された、しおりが挟まれた状態の前記書籍の映像から書籍の寸法を抽出する画像寸法抽出部と、前記書籍の書籍識別情報を取得する書籍識別情報取得手段と、該書籍識別情報取得手段により得られた書籍識別情報に対応する前記書籍データベースのテーブルより前記書籍の寸法および総頁数を取得し、前記画像寸法抽出部により得られた前記書籍の寸法から前記しおりが挟まれた頁数を求め、求めたページ数に対応する要約を前記テーブルから読み出して前記小型携帯機器の表示部へ出力させる画像寸法解析部と、を備えた要約出力部と、を有する要約提供システム。
2. 請求項１記載の要約提供システムにおいて、
   前記しおりはその幅が既知のものが使用され、前記書籍は、表紙部にはタイトル名が記載され、裏表紙には書籍識別子を示すバーコードが刻印されており、
   前記画像寸法抽出部は、表紙側もしくは裏表紙側から撮影された前記書籍および前記しおりの幅をそれぞれ抽出し、
   前記書籍識別情報取得手段は、前記書籍が表紙側から撮影されている場合には画像認識により前記タイトル名を取得し、前記書籍が裏表紙側から撮影されている場合にはバーコード変換により前記バーコードに示される書籍識別子を取得し、
   前記画像寸法解析部は、前記書籍識別情報取得手段が取得した書籍識別情報がタイトル名または書籍識別子のいずれであるかにより、前記書籍の撮影が表紙側もしくは裏表紙側から撮影されたもののいずれであるかを認識し、前記テーブルから読み出したしおりおよび書籍の実際の寸法と前記画像寸法抽出部により抽出されたしおりおよび書籍の撮影された寸法から前記しおりが挟まれた頁数を求めることを特徴とする要約提供システム。
3. 請求項１記載の要約提供システムにおいて、
   前記画像寸法抽出部は、表紙側を上とした天側もしくは地側から撮影された前記書籍の厚さと、前記表紙から前記しおりまで距離をそれぞれ抽出し、
   前記書籍識別情報取得手段は、入力部を備え、利用者による前記入力部への入力により前記書籍識別情報を取得し、
   前記画像寸法解析部は、前記テーブルから読み出した書籍の総頁数と前記画像寸法抽出部により抽出されたしおりおよび書籍の撮影された寸法と、から前記しおりが挟まれた頁数を求めることを特徴とする要約提供システム。
4. 請求項１記載の要約提供システムにおいて、
   前記しおりは前記書籍の書籍識別情報を示すバーコードが刻印されており、
   前記画像寸法抽出部は、表紙側を上とした天側もしくは地側から撮影された前記書籍の厚さと、前記表紙から前記しおりまで距離をそれぞれ抽出し、
   前記書籍識別情報取得手段は、バーコード変換により前記バーコードに示される書籍識別情報を取得し、
   前記画像寸法解析部は、前記テーブルから読み出した書籍の総頁数と前記画像寸法抽出部により抽出されたしおりおよび書籍の撮影された寸法と、から前記しおりが挟まれた頁数を求めることを特徴とする要約提供システム。
5. 請求項１ないし請求項４のいずれかに記載の要約提供システムにおいて、
   前記画像寸法抽出部および書籍識別情報取得手段は、前記小型携帯機器に設けられ、前記画像寸法解析部は、サーバ内に設けられることを特徴とする要約提供システム。
6. 請求項１ないし請求項４のいずれかに記載の要約提供システムにおいて、
   前記要約表示部は、前記小型携帯機器に設けられることを特徴とする要約提供システム。
7. 書籍の書籍識別情報に関連付けられて、書籍の寸法、総頁数、頁数に対応した要約が格納されたテーブルを複数備えた書籍データベースと、カメラおよび表示部とを備えた小型携帯機器と、ともに要約提供システムを構成する要約出力装置で行われる要約提供方法であって、
   画像寸法抽出部が、前記カメラにより撮影された、しおりが挟まれた状態の前記書籍の映像から書籍の寸法を抽出するステップと、
   書籍識別情報取得手段が、前記書籍の書籍識別情報を取得するステップと、
   画像寸法解析部が、前記書籍識別情報取得手段により得られた書籍識別情報に対応する前記書籍データベースのテーブルより前記書籍の寸法および総頁数を取得し、前記画像寸法抽出部により得られた前記書籍の寸法から前記しおりが挟まれた頁数を求め、求めたページ数に対応する要約を前記テーブルから読み出して前記小型携帯機器の表示部へ出力させるステップと、を備えた要約提供方法。
8. 請求項７記載の要約提供方法において、
   前記しおりはその幅が既知のものが使用され、前記書籍は、表紙部にはタイトル名が記載され、裏表紙には書籍識別子を示すバーコードが刻印されており、
   前記画像寸法抽出部は、表紙側もしくは裏表紙側から撮影された前記書籍および前記しおりの幅をそれぞれ抽出し、
   前記書籍識別情報取得手段は、前記書籍が表紙側から撮影されている場合には画像認識により前記タイトル名を取得し、前記書籍が裏表紙側から撮影されている場合にはバーコード変換により前記バーコードに示される書籍識別子を取得し、
   前記画像寸法解析部は、前記書籍識別情報取得手段が取得した書籍識別情報がタイトル名または書籍識別子のいずれであるかにより、前記書籍の撮影が表紙側もしくは裏表紙側から撮影されたもののいずれであるかを認識し、前記テーブルから読み出したしおりおよび書籍の実際の寸法と前記画像寸法抽出部により抽出されたしおりおよび書籍の撮影された寸法から前記しおりが挟まれた頁数を求めることを特徴とする要約提供方法。
9. 請求項７記載の要約提供方法において、
   前記画像寸法抽出部は、表紙側を上とした天側もしくは地側から撮影された前記書籍の厚さと、前記表紙から前記しおりまで距離をそれぞれ抽出し、
   前記書籍識別情報取得手段は、入力部を備え、利用者による前記入力部への入力により前記書籍識別情報を取得し、
   前記画像寸法解析部は、前記テーブルから読み出した書籍の総頁数と前記画像寸法抽出部により抽出されたしおりおよび書籍の撮影された寸法と、から前記しおりが挟まれた頁数を求めることを特徴とする要約提供方法。
10. 請求項７記載の要約提供方法において、
    前記しおりは前記書籍の書籍識別情報を示すバーコードが刻印されており、
    前記画像寸法抽出部は、表紙側を上とした天側もしくは地側から撮影された前記書籍の厚さと、前記表紙から前記しおりまで距離をそれぞれ抽出し、
    前記書籍識別情報取得手段は、バーコード変換により前記バーコードに示される書籍識別情報を取得し、
    前記画像寸法解析部は、前記テーブルから読み出した書籍の総頁数と前記画像寸法抽出部により抽出されたしおりおよび書籍の撮影された寸法と、から前記しおりが挟まれた頁数を求めることを特徴とする要約提供方法。
11. 請求項７ないし請求項１０のいずれかに記載の要約提供方法を行う要約出力装置をコンピュータシステム上に構築するプログラム。

Images