JP2014186691A

JP2014186691A - 情報表示装置

Info

Publication number: JP2014186691A
Application number: JP2013063048A
Authority: JP
Inventors: Yuto Yamaji; 雄土山地; Takeshi Tazaki; 豪田崎; Kaoru Suzuki; 薫鈴木; Kazunori Imoto; 和範井本; Yasuaki Yamauchi; 康晋山内
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2013-03-25
Filing date: 2013-03-25
Publication date: 2014-10-02
Also published as: US20140289619A1; CN104077072A

Abstract

【課題】関連付けられた情報の内容の一覧性を高めることができる情報表示装置を提供する。
【解決手段】実施形態の情報表示装置は、受付部と、解析部と、生成部と、関連付け部と、表示制御部と、を備える。受付部は、表示部に表示されている第１文書及び第２文書の少なくともいずれかに対するストロークの入力を受け付ける。解析部は、前記ストロークを解析する。生成部は、前記ストロークが前記第２文書の領域を指定する領域指定ストロークである場合、当該領域の領域情報を生成する。関連付け部は、前記ストロークが前記第１文書と前記領域情報を関連付ける関連付けストロークである場合、前記第１文書と前記領域情報とを関連付ける関連付け部。表示制御部は、所定操作に基づいて、前記第１文書に関連付けられている１以上の前記領域情報を前記表示部に一覧表示する。
【選択図】図１

Description

本発明の実施形態は、情報表示装置に関する。

複数のウィンドウ情報を関連付け、一方のウィンドウ情報が閉じられると、当該ウィンドウ情報のアイコンを他方のウィンドウ情報に関連付けて表示する技術がある。

特許第３４６１８７２号公報

しかしながら、上述したような従来技術では、関連付けられた情報がアイコン表示されるので、関連付けられた情報の内容の一覧性に劣る。本発明が解決しようとする課題は、関連付けられた情報の内容の一覧性を高めることができる情報表示装置を提供することである。

実施形態の情報表示装置は、受付部と、解析部と、生成部と、関連付け部と、表示制御部と、を備える。受付部は、表示部に表示されている第１文書及び第２文書の少なくともいずれかに対するストロークの入力を受け付ける。解析部は、前記ストロークを解析する。生成部は、前記ストロークが前記第２文書の領域を指定する領域指定ストロークである場合、当該領域の領域情報を生成する。関連付け部は、前記ストロークが前記第１文書と前記領域情報を関連付ける関連付けストロークである場合、前記第１文書と前記領域情報とを関連付ける関連付け部。表示制御部は、所定操作に基づいて、前記第１文書に関連付けられている１以上の前記領域情報を前記表示部に一覧表示する。

第１実施形態の情報表示装置の例を示す構成図。第１実施形態の領域指定ストローク及び付帯ストロークの例を示す図。第１実施形態の関連付けストロークの例を示す図。第１実施形態の関連付け結果の例を示す図。第１実施形態の一覧表示の表示例を示す図。第１実施形態の手順例を示すフローチャート図。第１実施形態の関連付け処理例を示すフローチャート図。第１実施形態の一覧表示処理例を示すフローチャート図。第２実施形態の情報表示装置の例を示す構成図。第２実施形態の通常の一覧表示の表示例を示す図。第２実施形態のグループ分けの一覧表示の表示例を示す図。第３実施形態の情報表示装置の例を示す構成図。第３実施形態の関連付けストロークの例を示す図。第３実施形態の重要度に基づく一覧表示の表示例を示す図。第４実施形態の情報表示装置の例を示す構成図。第４実施形態の通常の一覧表示の表示例を示す図。第４実施形態の複製例を示す図。各実施形態の整形装置のハードウェア構成例を示す図。第１実施形態の領域指定ストロークを説明するための図。第１実施形態の領域指定ストロークの内包を説明するための図。

以下、添付図面を参照しながら、実施形態を詳細に説明する。

（第１実施形態）
図１は、第１実施形態の情報表示装置１０の一例を示す構成図である。図１に示すように、情報表示装置１０は、記憶部１１と、受付部１２と、解析部１３と、生成部１５と、関連付け部１７と、表示制御部１９と、表示部２１とを、備える。

記憶部１１は、情報表示装置１０で実行される各種プログラムや情報表示装置１０で行われる各種処理に使用されるデータなどを記憶する。記憶部１１は、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、メモリカード、光ディスク、ＲＯＭ（Read Only Memory）、及びＲＡＭ（Random Access Memory）などの磁気的、光学的、又は電気的に記憶可能な記憶装置により実現できる。

受付部１２、解析部１３、生成部１５、関連付け部１７、及び表示制御部１９は、例えば、ＣＰＵ（Central Processing Unit）などの処理装置にプログラムを実行させること、即ち、ソフトウェアにより実現してもよいし、ＩＣ（Integrated Circuit）などのハードウェアにより実現してもよいし、ソフトウェア及びハードウェアを併用して実現してもよい。

表示部２１は、例えば、タッチパネルディスプレイや液晶ディスプレイなどの表示装置により実現できる。

受付部１２は、表示部２１に表示されている第１文書及び第２文書の少なくともいずれかに対するストロークの入力を受け付ける。具体的には、受付部１２は、図示せぬ入力部１１から、表示部２１に表示されている第１文書及び第２文書の少なくともいずれかに対するストロークの入力を受け付ける。

ここで、入力部は、タッチパネル、タッチパッド、マウス、及び電子ペンなどの手書き入力可能な入力装置により実現できる。第１実施形態では、入力部はタッチパネルであり、ユーザがスタイラスペンや指を用いてタッチパネル上で文字や図形などを手書きすることにより、ストロークを入力することを想定しているが、これに限定されるものではない。例えば、入力部をタッチパッド、マウス、及び電子ペンなどで実現してもよい。

ストロークは、ユーザが手書した文字や図形などの１画、即ち、スタイラスペンや指がタッチパネルの入力面に接してから離れるまで（ペンダウンからペンアップまで）の軌跡を示すデータである。ストロークは、例えば、｛（ｘ_１，ｙ_１）、（ｘ_２，ｙ_２）、…、（ｘ_ｎ，ｙ_ｎ）｝のような、スタイラスペンや指と入力面との接点の時系列の座標値として表される。但し、ストロークの表現形式は、これに限定されるものではない。

また受付部１２は、各種操作の入力を受け付ける。

解析部１３は、受付部１２により受け付けられたストロークを解析する。具体的には、解析部１３は、受付部１２により受け付けられたストロークが、第２文書の領域を指定する領域指定ストロークであるか、当該領域に情報を付帯する付帯ストロークであるか、第１文書と領域情報を関連付ける関連付けストロークであるかを解析する。

例えば、解析部１３は、受付部１２により受け付けられたストロークが、第２文書において、閉ループを形成し、かつ一定以上の大きさのストロークならば、領域指定ストロークと解析する。また例えば、解析部１３は、第２文書が文書構造を有する文書であるならば、受付部１２により受け付けられたストロークが、文書構造の一部に対する囲いや下線に該当するか否かを判定し、文書構造の一部に対する囲いや下線に該当するならば、領域指定ストロークと解析する。

文書構造は、文字、行や図の領域を示す外接矩形と文書構造の意味を示す文字コードで表現される。領域指定ストロークは文書構造の外接矩形と、受け付けられたストロークの外接矩形とのｘ軸、ｙ軸上の重なりを求めて決める。重なる領域あれば、当該受け付けられたストロークに当該文書構造が該当すると判定する。

領域指定ストロークについて、具体的に説明する。例えば、ストロークが、丸囲いや下線などを利用する場合、まず、丸形状判定を行い、他を仮に下線とする。

丸形状判定は、次のように行う。図１９のように、受け付けられたストロークの外接矩形の対角線長をｌ_ｒ、始点と終点の距離をｄｉｓ_ｐｐ、ストローク長をｌ_ｓとした場合、例えば、下記のよう閾値を設定し、受け付けられたストロークを丸形状であると判定する。

ｄｉｓ_ｐｐ＜０．３ｌ_ｒかつｌ_ｓ＋ｄｉｓ_ｐｐ＞１．５ｌ_ｒかつｌ_ｓ＋ｄｉｓ_ｐｐ < ３．０ｌ_ｒ

このように領域指定された領域は、文書構造と比較して詳細に特定する。詳細な文書構造とは、文字や図などの最小単位などである。例えば、文書として意味のある単位を利用するとよりよい。

丸形状判定で丸形状のストロークであると判定された場合は、文書構造の外接矩形の面積を合算する。また領域指定されたストロークの外接矩形の積を求める。文書構造の外接矩形の面積（合算値）と領域指定されたストロークの面積との比で、例えば７５％以上など、所定の閾値を決めて、文書構造等が内包されているとする。内包される文書構造は注釈として選択してもよい(図２０参照)。

領域指定ストロークが下線と判定された場合、受け付けられたストロークの外接矩形とのｘ軸またはｙ軸上の重なりを求めて決めてもよいし、第２文書が文書構造を有する文書であるならば、文書構造の領域に十分重なる矩形を設定するようにしてもよい。

また例えば、解析部１３は、受付部１２により受け付けられたストロークの端点の一方が第１文書を指定し、他方が第２文書の領域情報を指定していれば、関連付けストロークと解析する。

また例えば、解析部１３は、受付部１２により受け付けられたストロークが領域指定ストロークでも関連付けストロークでもなければ、付帯ストロークであると解析する。

生成部１５は、受付部１２により受け付けられたストロークが領域指定ストロークである場合、当該領域の領域情報を生成し、記憶部１１に記憶する。例えば、生成部１５は、領域指定ストロークで指定された第２文書上の領域のＩＤ、始点、幅、及び領域指定ストロークなどを領域情報として生成し、記憶部１１に記憶されている第２文書のページ情報に対応付けて記憶する。

また生成部１５は、受付部１２により受け付けられたストロークが、付帯ストロークである場合、領域情報に対応付けて付帯情報を生成し、記憶部１１に記憶する。例えば、生成部１５は、付帯ストローク、付帯ストロークのＩＤ、付帯ストロークを対応付ける領域情報のＩＤなどを領域情報として生成し、記憶部１１に記憶されている第２文書のページ情報に対応付けて記憶する。

図２は、第１実施形態の領域指定ストローク及び付帯ストロークの一例を示す図である。図２に示す例では、閉ループを形成するストローク３１が領域指定ストロークであり、文字を形成するストローク３２が付帯ストロークである。生成部１５は、ストローク３１が指定する領域の領域情報を生成し、第２文書のページ情報に対応付けて記憶部１１に記憶する。また生成部１５は、ストローク３２の付帯情報を生成し、第２文書のページ情報に対応付けて記憶部１１に記憶する。

関連付け部１７は、受付部１２により受け付けられたストロークが関連付けストロークである場合、第１文書と領域情報とを関連付ける。具体的には、関連付け部１７は、受付部１２により受け付けられたストロークが関連付けストロークである場合、第１文書の領域と領域情報とを関連付ける関連付け情報を生成し、記憶部１１に記憶する。

例えば、関連付け部１７は、リンク元の情報である第１文書のページ情報及び第１文書の領域のＩＤ、リンク先の情報である第２文書のページ情報及び領域情報の位置（始点）、及び関連付けストロークなどを関連付け情報として生成し、記憶部１１に記憶されている領域情報に対応付けて記憶する。

図３は、第１実施形態の関連付けストロークの一例を示す図であり、図４は、第１実施形態の関連付け結果の一例を示す図である。図３に示す例では、第１文書の領域３３とストローク３１とを結ぶストローク３４が関連付けストロークである。関連付け部１７は、ストローク３４の関連付け情報を生成し、記憶部１１に記憶されている領域情報に対応付けて記憶する。そして関連付け部１７は、図４に示すように、ストローク３４を、領域３３とストローク３１とのリンク３５に変換する。なお、領域３３に関連付けられているリンクの数を示すアイコン等を領域３３の周辺に表示してもよい。

表示制御部１９は、受付部１２により所定操作が受け付けられると、第１文書に関連付けられている１以上の領域情報を表示部２１に一覧表示する。具体的には、表示制御部１９は、１以上の領域情報それぞれに当該領域情報に対応付けられた付帯情報を付加して表示部２１に一覧表示する。

図５は、第１実施形態の一覧表示の表示例を示す図である。図５に示す例では、表示制御部１９は、受付部１２により領域３３を指定する一覧表示操作が受け付けられると、ストローク３１で指定された領域情報及び当該領域情報に対応付けられたストローク３２の付帯情報を記憶部１１から取得し、リンク３５で結んで一覧表示する。

なお、領域情報の表示態様としては、当該領域情報の領域のクリッピング画像をサムネイル表示するなどが挙げられる。また、付帯情報の表示態様としては、付帯情報のストロークをそのまま表示する、付帯情報のストロークの位置を変え、クリッピング画像付近に表示する、付帯情報のストロークをリンクに沿わせて表示するなどが挙げられる。

図６は、第１実施形態の情報表示装置１０で行われる処理の手順の流れの一例を示すフローチャート図である。

まず、解析部１３は、受付部１２によりストロークが受け付けられると、受け付けられたストロークを解析する（ステップＳ１０１）。

解析の結果、受け付けられたストロークが関連付けストロークである場合（ステップＳ１０３でＹｅｓ）、関連付け部１７は、第１文書と領域情報とを関連付ける関連付け処理を行う（ステップＳ１０５）。そして表示制御部１９は、関連付け処理後の画面を表示部２１に表示する（ステップＳ１１３）。

また、解析の結果、受け付けられたストロークが領域指定ストロークである場合（ステップＳ１０３でＮｏ、ステップＳ１０７でＹｅｓ）、生成部１５は、領域指定ストロークが指定する領域の領域情報を生成する（ステップＳ１０５）。そして表示制御部１９は、領域情報の生成後の画面を表示部２１に表示する（ステップＳ１１３）。

また、解析の結果、受け付けられたストロークが関連付けストロークでも領域指定ストロークでもない場合（ステップＳ１０３でＮｏ、ステップＳ１０７でＮｏ）、当該ストロークは付帯ストロークであるため、生成部１５は、領域情報に対応付けて付帯情報を生成する。そして表示制御部１９は、付帯情報の生成後の画面を表示部２１に表示する（ステップＳ１１３）。

図７は、第１実施形態の情報表示装置１０で行われる関連付け処理の手順の流れの一例を示すフローチャート図である。

まず、解析部１３は、受付部１２により受け付けられたストロークの始点、終点が文書領域に内包されているか否かを確認する（ステップＳ２０１）。ストロークの始点、終点が文書領域に内包されていない場合（ステップＳ２０１でＮｏ）、解析部１３は、関連付けストロークでないと解析し、処理は終了となる。

ストロークの始点、終点が文書領域に内包されている場合（ステップＳ２０１でＹｅｓ）、始点、終点を内包している文書が異なるか否かを確認する（ステップＳ２０３）。始点、終点を内包している文書が同一である場合（ステップＳ２０３でＮｏ）、解析部１３は、関連付けストロークでないと解析し、処理は終了となる。

始点、終点を内包している文書が同一でない場合（ステップＳ２０３でＹｅｓ）、関連付け部１７は、始点、終点それぞれの近傍に領域があれば（ステップＳ２０５でＹｅｓ）、両領域をリンクする（ステップＳ２０７）。

一方、関連付け部１７は、始点の近傍に領域があれば（ステップＳ２０５でＮｏ、ステップＳ２０９でＹｅｓ）、終点と領域をリンクする（ステップＳ２１１）。

また、関連付け部１７は、終点の近傍に領域があれば（ステップＳ２０５でＮｏ、ステップＳ２０９でＮｏ、ステップＳ２１３でＹｅｓ）、始点と領域をリンクする（ステップＳ２１５）。

図８は、第１実施形態の情報表示装置１０で行われる一覧表示処理の手順の流れの一例を示すフローチャート図である。

まず、受付部１２は、一覧表示操作の入力を受け付ける（ステップＳ３０１）。

続いて、表示制御部１９は、受付部１２により一覧表示操作が受け付けられると、第１文書に関連付けられている１以上の領域情報に当該１以上の領域情報それぞれに対応付けられた付帯情報を付加して表示部２１に一覧表示する（ステップＳ３０３）。

以上のように第１実施形態によれば、第１文書に関連付けられた第２文書の領域が一覧表示されるため、関連付けられた情報の内容の一覧性を高めることができる。

（第２実施形態）
第２実施形態では、領域情報をグループ分けして表示する例について説明する。以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、第１実施形態と同様の名称・符号を付し、その説明を省略する。

図９は、第２実施形態の情報表示装置１１０の一例を示す構成図である。図９に示すように、第２実施形態の情報表示装置１１０は、類似度算出部１１８及び表示制御部１１９が、第１実施形態と相違する。

類似度算出部１１８は、１以上の付帯情報間の類似度を算出する。例えば、類似度算出部１１８は、付帯情報それぞれの付帯ストロークを文字認識し、文字認識結果間の類似度を算出する。

また例えば、類似度算出部１１８は、付帯ストロークそのもの同士の類似度を算出する。例えば、類似度算出部１１８は、付帯ストロークから、ストローク番号が連続するＫ本のストロークからなるストローク列を全て抽出する。当該付帯ストロークのストローク数がＮ、Ｋ＝３であれば、類似度算出部１１８は、当該１の組合せから、ストローク列として、（１，２，３）、（２，３，４）、…（Ｎ−２，Ｎ−１，Ｎ）を抽出する。また類似度算出部１１８は、比較対象の付帯ストロークについても、同様に、ストローク番号が連続するＫ本のストロークからなるストローク列を全て抽出する。そして類似度算出部１１８は、両付帯ストロークのストローク列の位置及び大きさを正規化し、類似度を算出する。

表示制御部１１９は、１以上の領域情報それぞれに対応付けられた付帯情報に基づいて、１以上の領域情報をグループ分け（クラスタリング）して表示部２１へ一覧表示する。具体的には、表示制御部１１９は、類似度が閾値以上となる組合せの付帯情報それぞれに対応付けられた領域情報をグループ化して表示部２１へ一覧表示する。なお、グループ化の態様としては、リスト構造や一部重畳などが挙げられる。

図１０は、第２実施形態の通常の一覧表示の表示例を示す図である。図１０に示す例では、表示制御部１１９は、受付部１２により領域３３を指定する一覧表示操作が受け付けられると、ストローク１３１で指定された領域情報及び当該領域情報に対応付けられたストローク１３２の付帯情報をリンク１３９で結んで表示し、ストローク１３３で指定された領域情報及び当該領域情報に対応付けられたストローク１３４の付帯情報をリンク１４０で結んで表示し、ストローク１３５で指定された領域情報及び当該領域情報に対応付けられたストローク１３６の付帯情報をリンク１４１で結んで表示し、ストローク１３７で指定された領域情報及び当該領域情報に対応付けられたストローク１３８の付帯情報をリンク１４２で結んで表示している。

図１１は、第２実施形態のグループ分けの一覧表示の表示例を示す図である。類似度算出部１１８が、ストローク１３２、ストローク１３４、ストローク１３６、ストローク１３８のうちの２つの組合せの類似度を算出した場合、ストローク１３２とストローク１３６、及びストローク１３４とストローク１３８は、同一ストロークであるため、両組合せの類似度は、閾値以上となる。

このため、表示制御部１１９は、図１１に示すように、ストローク１３２の付帯情報に対応付けられたストローク１３１の領域情報及びストローク１３６の付帯情報に対応付けられたストローク１３５の領域情報をグループ化してリンク１４３で結んで表示するとともに、ストローク１３４の付帯情報に対応付けられたストローク１３３の領域情報及びストローク１３８の付帯情報に対応付けられたストローク１３７の領域情報をグループ化してリンク１４４で結んで表示部２１へ表示する。

なお、表示制御部１１９は、ストローク１３１の領域情報及びストローク１３５の領域情報のグループの近辺には、グループ分けに用いられたストローク１３２（又はストローク１３６）の付帯情報を表示し、ストローク１３３の領域情報及びストローク１３７の領域情報のグループの近辺には、グループ分けに用いられたストローク１３４（又はストローク１３８）の付帯情報を表示する。

なお、付帯情報が複数存在する場合、グループ分けに用いなかった付帯情報は、通常通り、対応する領域情報に表示すればよい。また、領域情報が複数のグループに属する場合、当該領域情報を全てのグループで表示してもよいし、当該領域情報を類似度が最も高いグループで表示してもよい。

以上のように第２実施形態によれば、第１文書に関連付けられた第２文書の領域がグループ分けされて一覧表示されるため、関連付けられた情報の内容の一覧性をより高めることができる。

（第３実施形態）
第３実施形態では、重要度の高い領域情報を優先して表示する例について説明する。以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、第１実施形態と同様の名称・符号を付し、その説明を省略する。

図１２は、第３実施形態の情報表示装置２１０の一例を示す構成図である。図１２に示すように、第３実施形態の情報表示装置２１０は、重要度算出部２１８及び表示制御部２１９が、第１実施形態と相違する。

重要度算出部２１８は、領域情報毎に、当該領域情報の関連付けストローク、領域指定ストローク、及び付帯ストロークの少なくともいずれかに基づいて、重要度を算出する。関連付けストロークに基づいて重要度を算出する場合、関連付けストロークの数（関連付け回数）、太さ、筆圧、色、形状、及び時刻などを用いることができる。領域指定ストローク又は付帯ストロークに基づいて重要度を算出する場合、領域指定ストローク又は付帯ストロークの太さ、筆圧、色、形状、及び付帯情報の内容などを用いることができる。

関連付けストロークの数を用いる場合、数が多いほど重要度を高くすればよい。ストロークの太さを用いる場合、太いほど重要度を高くすればよい。ストロークの筆圧を用いる場合、強いほど重要度を高くすればよい。ストロークの色を用いる場合、特定色（例えば、赤）ほど重要度を高くすればよい。ストロークの形状を用いる場合、ストロークの形状が複雑なほど、即ち、ストロークが長いほど重要度を高くすればよい。関連付けストロークの時刻を用いる場合、現時刻に近いほど重要度を高くすればよい。付帯情報の内容を用いる場合、頻出する内容ほど重要度を高くすればよい。

図１３は、第３実施形態の関連付けストロークの一例を示す図である。図１３に示す例では、第１文書の領域３３とストローク２３１とを結ぶ関連付けストローク２３４が２本であり、ストローク２３１の領域情報の重要度は通常よりも高い。

表示制御部２１９は、重要度に基づいて、第１文書に関連付けられている１以上の領域情報を表示部２１に一覧表示する。具体的には、表示制御部２１９は、第１文書に関連付けられている１以上の領域情報を、重要度の高い順に表示部２１に一覧表示する。

図１４は、第３実施形態の重要度に基づく一覧表示の表示例を示す図である。図１４に示す例では、ストローク２３１の領域情報の重要度がスコア５．０で最も高いため、最優先に表示し、また、リンク２３６を強調表示している。

以上のように第３実施形態によれば、第１文書に関連付けられた第２文書の領域が重要度に従って一覧表示されるため、関連付けられた情報の内容の一覧性をより高めることができる。

（第４実施形態）
第４実施形態では、関連付けられた領域情報及び付帯情報を他の文書にスクラップする例について説明する。以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、第１実施形態と同様の名称・符号を付し、その説明を省略する。

図１５は、第４実施形態の情報表示装置３１０の一例を示す構成図である。図１５に示すように、第４実施形態の情報表示装置３１０は、生成部３１５及び表示制御部３１９が、第１実施形態と相違する。

生成部３１５は、１以上の領域情報及び１以上の領域情報それぞれに対応付けられた付帯情報を第３文書に複製する。

図１６は、第４実施形態の通常の一覧表示の表示例を示す図である。図１６に示す例では、表示制御部３１９は、受付部１２により領域３３を指定する一覧表示操作が受け付けられると、ストローク３３１で指定された領域情報及び当該領域情報に対応付けられたストローク３３２の付帯情報をリンク３３９で結んで表示し、ストローク３３３で指定された領域情報及び当該領域情報に対応付けられたストローク３３４の付帯情報をリンク３４０で結んで表示し、ストローク３３５で指定された領域情報及び当該領域情報に対応付けられたストローク３３６の付帯情報をリンク３４１で結んで表示し、ストローク３３７で指定された領域情報及び当該領域情報に対応付けられたストローク３３８の付帯情報をリンク３４２で結んで表示している。

図１７は、第４実施形態の複製例を示す図である。図１７に示す例では、一覧表示の際に表示されたストローク３３１で指定された領域情報及び当該領域情報に対応付けられたストローク３３２の付帯情報、ストローク３３３で指定された領域情報及び当該領域情報に対応付けられたストローク３３４の付帯情報、ストローク３３５で指定された領域情報及び当該領域情報に対応付けられたストローク３３６の付帯情報、並びにストローク３３７で指定された領域情報及び当該領域情報に対応付けられたストローク３３８の付帯情報が第３文書に複製されている。

なお、第３文書には、第１文書のサムネイルを複製してもよい、第２実施形態のようにグループ分けを行ってもよい。

（ハードウェア構成）
図１８は、上記各実施形態の情報表示装置のハードウェア構成の一例を示す図である。上記各実施形態の情報表示装置は、ＣＰＵなどの制御装置９０１と、ＲＯＭやＲＡＭなどの記憶装置９０２と、ＨＤＤなどの外部記憶装置９０３と、タッチパネルなどの表示装置９０４と、タッチパネルなどの入力装置９０５と、通信インタフェースなどの通信装置９０６と、を備えており、通常のコンピュータを利用したハードウェア構成となっている。

上記各実施形態の情報表示装置で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、ＣＤ−Ｒ、メモリカード、ＤＶＤ（Digital Versatile Disk）、フレキシブルディスク（ＦＤ）等のコンピュータで読み取り可能な記憶媒体に記憶されて提供される。

また、上記各実施形態の情報表示装置で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するようにしてもよい。また、上記各実施形態の情報表示装置を、インターネット等のネットワーク経由で提供または配布するようにしてもよい。また、上記各実施形態の情報表示装置で実行されるプログラムを、ＲＯＭ等に予め組み込んで提供するようにしてもよい。

上記各実施形態の情報表示装置で実行されるプログラムは、上述した各部をコンピュータ上で実現させるためのモジュール構成となっている。実際のハードウェアとしては、ＣＰＵがＨＤＤからプログラムをＲＡＭ上に読み出して実行することにより、上記各部がコンピュータ上で実現されるようになっている。

なお、本発明は、上記各実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせても良い。

例えば、上記各実施形態のフローチャートにおける各ステップを、その性質に反しない限り、実行順序を変更し、複数同時に実施し、あるいは実施毎に異なった順序で実施してもよい。

以上のように、上記各実施形態によれば、関連付けられた情報の内容の一覧性を高めることができる。

１０、１１０，２１０、３１０情報表示装置
１１記憶部
１２受付部
１３解析部
１５、３１５生成部
１７関連付け部
１９、１１９、２１９、３１９表示制御部
２１表示部
１１８類似度算出部
２１８重要度算出部

Claims

表示部に表示されている第１文書及び第２文書の少なくともいずれかに対するストロークの入力を受け付ける受付部と、
前記ストロークを解析する解析部と、
前記ストロークが前記第２文書の領域を指定する領域指定ストロークである場合、当該領域の領域情報を生成する生成部と、
前記ストロークが前記第１文書と前記領域情報を関連付ける関連付けストロークである場合、前記第１文書と前記領域情報とを関連付ける関連付け部と、
所定操作に基づいて、前記第１文書に関連付けられている１以上の前記領域情報を前記表示部に一覧表示する表示制御部と、
を備える情報表示装置。
前記生成部は、前記ストロークが前記領域に情報を付帯する付帯ストロークである場合、前記領域情報に対応付けて付帯情報を生成し、
前記表示制御部は、前記１以上の領域情報それぞれに当該領域情報に対応付けられた付帯情報を付加して前記表示部へ一覧表示する請求項１に記載の情報表示装置。
前記表示制御部は、前記１以上の領域情報それぞれに対応付けられた付帯情報に基づいて、前記１以上の領域情報をグループ分けして前記表示部へ一覧表示する請求項２に記載の情報表示装置。
前記１以上の付帯情報間の類似度を算出する類似度算出部を更に備え、
前記表示制御部は、前記類似度が閾値以上となる組合せの付帯情報それぞれに対応付けられた領域情報をグループ化して前記表示部へ一覧表示する請求項３に記載の情報表示装置。
前記領域情報毎に、当該領域情報の関連付けストローク、領域指定ストローク、及び付帯ストロークの少なくともいずれかに基づいて、重要度を算出する重要度算出部を更に備え、
前記表示制御部は、前記重要度に基づいて、前記第１文書に関連付けられている前記１以上の領域情報を前記表示部に一覧表示する請求項２〜４のいずれか１つに記載の情報表示装置。
前記表示制御部は、前記第１文書に関連付けられている前記１以上の領域情報を、前記重要度の高い順に前記表示部に一覧表示する請求項５に記載の情報表示装置。
前記生成部は、前記１以上の領域情報及び前記１以上の領域情報それぞれに対応付けられた付帯情報を第３文書に複製する請求項２〜６のいずれか１つに記載の情報表示装置。
所定操作の入力を受け付ける受付部と、
前記所定操作が受け付けられると、第１文書とともに、第２文書の領域に関する領域情報であって前記第１文書に関連付けられている１以上の領域情報を、前記表示部に一覧表示する表示制御部と、
を備える情報表示装置。