JP2004199484A - Information retrieval display processing method, information retrieval display processing system, client terminal, management server and program - Google Patents

Information retrieval display processing method, information retrieval display processing system, client terminal, management server and program Download PDF

Info

Publication number
JP2004199484A
JP2004199484A JP2002368530A JP2002368530A JP2004199484A JP 2004199484 A JP2004199484 A JP 2004199484A JP 2002368530 A JP2002368530 A JP 2002368530A JP 2002368530 A JP2002368530 A JP 2002368530A JP 2004199484 A JP2004199484 A JP 2004199484A
Authority
JP
Japan
Prior art keywords
document
information
search
additional information
annotation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002368530A
Other languages
Japanese (ja)
Other versions
JP4172266B2 (en
Inventor
Takeshi Nagamine
猛志 永峯
Katsunori Yoshiji
克典 芳地
Kei Tanaka
圭 田中
Akio Yamashita
明男 山下
Noriyuki Kurabayashi
則之 倉林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2002368530A priority Critical patent/JP4172266B2/en
Publication of JP2004199484A publication Critical patent/JP2004199484A/en
Application granted granted Critical
Publication of JP4172266B2 publication Critical patent/JP4172266B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To efficiently perform information retrieval in an information retrieval display processing system utilizing an annotation. <P>SOLUTION: A document ID and the annotation position are registered in an annotation DB 216 (S100-S102). The annotation for retrieval instruction is imparted to a document under browsing at an annotation retrieval time, to thereby require annotation retrieval by another person having the same viewpoint as a viewpoint to which the annotation is imparted (S110). An annotation processing device 218 retrieves at first all the annotations imparted to the document under browsing (S112). The annotation processing device 218 compares successively a retrieval request received from the document viewer 102 side with rectangular information of the annotation acquired by retrieval of the annotation DB 216, to thereby specify the annotation to be returned to the document viewer 102 as the retrieval result (S114). <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、文書を表示デバイス上に表示する機能を備えたシステムにおいて利用される情報検索表示処理方法および情報検索表示処理システム、並びにコンピュータを利用して情報検索表示処理方法や情報検索表示処理システムを実現するためのプログラムに関する。また、本発明は情報検索表示処理システムを構成するクライアント端末や管理サーバに関する。より詳細には、複数のユーザより電子文書に付与された付箋を利用して情報検索を行なう技術に関する。
【０００２】
【従来の技術】
人が文書を読む場合、ペンやマーカなどの筆記具を利用してメモや注釈などを付与しながら読解を行なうことは自然なことである。メモや注釈が付与された位置は読み手にとって、何らかの興味がある位置であると思われる。
【０００３】
同様のことは、電子文書を取り扱う場合にも起こる。たとえば、メモ、メッセージ、あるいはアノテーションなどの、電子文書の本文に付加される可視化情報（電子付箋）を、電子文書の本文に影響を与えることのないよう、その電子文書の本体の付加データとして添付する技術が広く用いられている。
【０００４】
たとえば、複数の端末装置を通信ネットワークで接続することにより、複数のユーザが端末画面を介して会議に参加できるようにした電子会議システムにおいて、参加者間で文書を共有可能にする技術が種々提案されている（たとえば特許文献１参照）。
【０００５】
【特許文献１】
特開平７−８４９０５号公報
【０００６】
ここで、注釈などの電子付箋を端末画面に表示された文書に付加することは、電子会議システムでもなされる。たとえば、端末画面に表示された文書（電子化された資料）に、ペン型の指示デバイスを用いての入力や指先で直接タッチパネルに触れて記入する手書き入力などによって、メモやアノテーションなどの電子付箋を表示画面上で書き込むことがある。
【０００７】
この電子付箋の機能によれば、会議の参加者は、それぞれの端末から独自に加筆修正することができ、思考を妨げず簡単に付加情報を入力することができる。また、この手書き情報を他の参加者の端末画面上にも表示することができる。これにより、各端末装置から意見やアイデアを入力したりそのハードコピーを取ったりすることができる。つまり、文書の電子化やネットワークの利用により、電子的に表示された文書に対して付与されたアノテーション（アンダーラインやマーキングや文字の書込みなど）などを共有することができる。
【０００８】
また、ある文書の一部に付与されたアノテーションなどの電子付箋の状態をクエリ（検索条件）として、既に同じ位置に付与されている文書の電子付箋を検索結果として再現することもできる。電子付箋が付与された位置は読み手にとって、何らかの興味がある位置であると思われる。他人や自分が以前に付与した電子付箋を再現することにより、他人や自分が付与した興味のある位置を知ることができる。
【０００９】
どの人物がどのような特性を持っているのかを知っている場合、特定の人物のアノテーションは意味があるが、不特定多数の人物が文書やアノテーションを共有する場合、素性の知らぬ人物のアノテーションはあまり意味が無い。
【００１０】
特許文献２には、電子文書に付与されたアノテーションを、アノテーションを付与した人物ごとに管理し、ある特定の人物を指定することにより、その人物が付与したアノテーションを再現する手法が提案されている。特定の人物の興味を知りたい場合は、この特許文献２に記載の方法により対応を採ることができる。
【００１１】
【特許文献２】
特開平９−６２６７６号公報
【００１２】
【発明が解決しようとする課題】
一方、特定の人物のアノテーションを再現するよりも、特定の視点で付与されたアノテーションを再現することも有効となる場合がある。たとえば、自分がある視点である文書を読む場合に、既に同一の視点で他者がその文書を読んでおり、アノテーションを付与している場合、自分と同一の視点の他者が注目している点を素早く知りたい場合がある。
【００１３】
しかしながら、上記特許文献２に記載の方法では、特定の人物を検索条件に指定する手法であるから、このような要求に応えることはできないので、効率的に情報検索を進めることができない。単に他人を指定できるに過ぎず、自分と同一の視点の他者を特定することができないからである。
【００１４】
本発明は、上記事情に鑑みてなされたものであり、アノテーションなどの文書に付加された付加情報を利用して効率的に情報検索を行なうことのできる情報検索表示処理方法およびこの情報検索表示処理方法を応用した情報検索表示処理システムを提供することを目的とする。また、本発明は、情報検索表示処理システムを構成するクライアント端末や管理サーバを提供することを目的とする。また、本発明は、コンピュータを利用して前記方法やシステムを実現するためのプログラムを提供することを目的とする。
【００１５】
【課題を解決するための手段】
すなわち、本発明に係る情報検索表示処理方法は、所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する機能を備え、付加情報を介して文書に関わる関連情報を検索する情報検索表示処理方法であって、付加情報が付与された付加情報付与部分の情報を文書と対応付けて管理し、所定の方法により指定された文書中の検索対象部分に関連する関連情報の検索処理を指示されたときには、検索対象部分と予め管理している付加情報付与部分の情報とを比較することで他ユーザと関わりのある関連情報についての検索処理を実行することとした。
【００１６】
本発明に係る情報検索表示処理システムは、上記本発明に係る情報検索表示処理方法を実施するシステムであって、所定の表示デバイス上に表示された文書に付加情報を付与する付加情報付与部と、文書中における付加情報付与部により付加情報が付与された付加情報付与部分の情報を取得する付加情報付与部分検知部と、付加情報付与部分検知部により取得された付加情報付与部分の情報を文書に対応付けて登録する登録部と、所定の方法により文書閲覧中のユーザから閲覧中の文書における検索対象部分の指定を受け付ける検索範囲設定部と、検索範囲設定部が受け付けた検索対象部分と登録部に登録している付加情報付与部分の情報とを比較することで、文書を閲覧中のユーザとは異なる他のユーザと関わりのある関連情報についての検索処理を実行して検索結果を所定の提示媒体に提示させる検索処理部とを備えるものとした。
【００１７】
本発明に係るクライアント端末や管理サーバは、本発明に係る情報検索表示処理システムを構成するものである。また、従属項に記載された発明は、本発明に係る情報検索表示処理システムあるいはクライアント端末や管理サーバのさらなる有利な具体例を規定する。
【００１８】
たとえば、検索処理部は、検索対象部分により示されている部分の付加情報であって、他のユーザが付与した付加情報そのものを関連情報として検索するものであってもよい。この場合、検索処理部は、検索結果として取得した他のユーザが付与した付加情報について、文書を閲覧中のユーザが付与した付加情報と他ユーザが付与した付加情報との類似度を求め、この求めた類似度が所定レベルよりも大きな他ユーザが付与した付加情報を関連情報として検索するものであるのがよい。
【００１９】
さらに、本発明に係るプログラムは、本発明に係る情報検索表示処理方法や情報検索表示処理システムを、電子計算機（コンピュータ）を用いてソフトウェアで実現するために好適なものである。なお、プログラムは、コンピュータ読取り可能な記憶媒体に格納されて提供されてもよいし、有線あるいは無線による通信手段を介して配信されてもよい。
【００２０】
【作用】
上記構成においては、先ず、文書に付加情報が付与されたとき、その付加情報が付与された文書中の位置と、付加情報やこの不可情報が付与された文書を関連情報として、両者を対応付けて所定の登録部（データベース）に格納する。
【００２１】
そして、付加情報を利用した検索処理の要求を受け付ける場合は、先ず所定の方法により閲覧中の文書内で検索範囲の指定を受け付ける。そして、指定された検索範囲内に付与されている付加情報の位置を利用して、自分の視点と同じような視点を持つ他人が付与した付加情報に関わるに関連情報を検索する。これにより、間接的に、自分の視点と同じような視点を持つ他人を特定することとなる。そして、自分と同一の視点の他者が付与した付加情報に関わる関連情報、たとえばその他人が付与した付加情報そのものや、その付加情報にて示される閲覧中文書内の語句から導かれるクエリに該当する別の文書を検索する。
【００２２】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について詳細に説明する。
【００２３】
図１は、本発明に係る情報検索表示処理方法および情報検索表示処理システムを適用した電子会議システムの構成例を示す図である。なお、この例での電子会議の場面設定としては、たとえば、開発開始提案や国際技術標準化会議など、電子的なドキュメントベースの会議の場面を想定する。
【００２４】
電子的なドキュメントとしては、たとえば、開発開始提案の場面では、前任機（現行機種など開発対象機種に対するそれ以前の機種）に関する仕様書、市場トラブルレポート、サポート部門の技術標準書類、など類似文書が多数ある。また、技術標準化会議の場面では、似たような技術標準書や同じ技術に関するメーリングリストなど関連する文書が周囲に存在している。
【００２５】
電子会議システムへの参加者としては、たとえば、決定に影響を与えたり決定事項から影響を受けたりする組織の代表である参加者、議長、記録係などが想定される。
【００２６】
電子会議システムでは、たとえば、代表者の誰かが提案書を纏め事前に資料を配布している。そして、会議の前に参加者ならびに議長が資料を読み、手書きのアノテーションなどの電子付箋を表示画面上に加えることができる。また、会議の進行中に組織の代表者は、バックオフィスにいる関係者とアノテーションを用いてコンテキストを共有し、また互いに連絡をとりながらリアルタイムに部門意見の調整を行なうこともできる。
【００２７】
ここで、電子会議システムにおける会議の流れの中で、手書きアノテーションなどの電子付箋の共有が関わる場面としては、たとえば、次のようなものが考えられる。
＊配布された資料を会議前に読み、アノテーションを書き込む。
＊説明内容を聞きながらアノテーションを入れる。
＊質疑応答セッションで、アノテーションをもとに質問箇所を素早く探して質問する、あるいは応答する。
＊過去の関連文書を検索する。
＊会議中で同僚に質問する。
＊議論のセッション。
＊採択や意見集約のセッション。
＊合意事項の確認のセッション。
＊議事録作成。
＊会議の模様をグループのメンバーに報告する。
＊会議を通して専門家を発見したり、多様な視点に気付かされたりする。
【００２８】
＜＜システム構成の概要＞＞
次に、図１に示した電子会議システムの構成を説明する。電子会議システム１は、電子会議の参加者が使用するクライアントシステム１００と、電子会議システム１にて使用される電子データ（文書データに限らず、会議に必要な他の電子的な情報の全てを含む）を処理するサーバシステム２００とを備えている。クライアントシステム１００およびサーバシステム２００を構成する各機能要素は、有線や無線などのネットワーク（通信網）９によって接続されている。
【００２９】
クライアントシステム１００は、会議への参加者ごとに設けられている。図示した例では、２セット分を例示しているが、その数は２つに限らない。なお、１つのセットは１人のユーザが使用するものとする。予め端末の利用者が決まっている状況を前提にすることで、端末と利用者を１対１に対応付けるためである。個人のプロファイルの保存と検索を行なうプロファイルサーバやプロファイルＤＢを設け、端末を使用するユーザを識別する仕組みを設けることで、１つのセット（端末）を複数人が共用する仕組みとしても構わない。
【００３０】
クライアントシステム１００は、電子文書を表示するための文書ビューア１０２（図では１０２ａ，１０２ｂ）、文書ビューア１０２に表示されている電子文書に付加情報の一例であるアノテーションを付与するためのアノテーションデバイス１７０（図では１７０ａ，１７０ｂ）、および画面操作の履歴を保存したり文書ビューア１０２を制御したりするマネジャ部１８０（図では１８０ａ，１８０ｂ）を有する。文書ビューア１０２とアノテーションデバイス１７０とで、付加情報付与部１０６（図では１０６ａ，１０６ｂ）およびアノテーション検出部（付加情報付与部分情報取得部）１０７（図では１０７ａ，１０７ｂ）とが構成される。また、付加情報付与部１０６とアノテーション検出部１０７とで、検索範囲設定部が構成される。
【００３１】
文書ビューア１０２は、図示しない本体（クレードル／ドッキングステーション）に装着自在となっている。文書ビューア１０２としては、たとえば、パソコンなどに使用されるＣＲＴや液晶（ＬＣＤ）などのディスプレイや、紙を模倣したようなデバイス（たとえばタブレットＰＣ）などを使用するとよい。なお、文書ビューア１０２は、ホワイトボード程度の大きさにした大型タブレットとして構成してもよい。
【００３２】
アノテーションデバイス１７０としては、手書き入力ができる機能を備えたものであるのがよく、たとえばペンの形状を持つデバイスなどの入力デバイスを使用するとよい。ペン形状のデバイスの場合、表示面上をデバイスで直接指示できるように、たとえば電磁誘導方式の検知機構とする場合には文書ビューア１０２およびアノテーションデバイス１７０ともに指示入力を検知する仕組みを持つものとする。また、タッチパネル方式を採用してもかまわない。また、アノテーションデバイス１７０は、ペン型のものに限らず、マウスやキーボードなどの入力・指示デバイスを用いるものであってもよい。
【００３３】
マネジャ部１８０は、文書の閲覧履歴やアノテーションの履歴（ログファイル）を保存するログファイル格納部１８２（図では１８２ａ，１８２ｂ）を有する。また、このマネジャ部１８０は、読み手により指定された表示手法（本例では強調表示機能）を実現する機能部が設けられる（後述する図３参照）。
【００３４】
サーバシステム２００は、付加情報管理部の一例であってログファイルやアノテーションを管理するアノテーション管理部２１０と電子文書を管理する文書管理部２２０とを有する。
【００３５】
アノテーション管理部２１０は、文書に付与されたアノテーションの保存と検索を行なうサーバであるアノテーションサーバ２１２と、付加情報登録部の一例であってアノテーションおよびそれに付随する属性情報を保存するためのデータベース（Data Base ）であるアノテーションＤＢ２１６とを有する。アノテーションＤＢ２１６は、文書にアノテーションなどの付加情報を付与した人物を特定するユーザ情報を付加情報と対応付けて登録する。
【００３６】
文書管理部２２０は、文書の保存と検索を行なうサーバである文書サーバ２２２と、文書およびそれに付随した属性情報を保存するためのデータベースである文書ＤＢ２２４とを有する。
【００３７】
文書本体を管理する文書管理部２２０と、電子文書に付与されるアノテーションなどの付加情報を管理するアノテーション管理部２１０とを設けることで、配布資料に対する加筆修正がそれぞれ独自に行なわれるケースでも、会議終了時に原本と合わせたときにその内容に矛盾が生じることを回避することができる。
【００３８】
たとえば、だれかが原本のある部分に補足説明を加え、一方、だれかが同じ部分を削除するような修正を加えたときでも、それらの編集部分を文書ＤＢ２２４に登録されている文書本体とは別に、文書本体と対応付けてアノテーションＤＢ２１６に登録しておくことで、会議資料本体やこれに対する加筆修正などの内容に矛盾が生じることなく情報の管理を行なうことができる。また、アノテーションＤＢ２１６を参照することで、その場で出された意見や討論の内容を後で書き出すことも容易である。
【００３９】
なお、図示したサーバシステム２００の各管理部２１０，２２０は、それぞれ別体のものであってもよいし、任意の組合せにて同一筐体内に収容されたものであってもよい。たとえば、各サーバは共通のコンピュータで構成されていてもよいし、各データベースとして共通のハードディスク装置を利用するものであってもよい。なお、アノテーション管理部２１０および文書管理部２２０を纏めて、文書情報管理部ともいう。これら管理部２１０，２２０としては、たとえばワークステーションが使用されるとよい。
【００４０】
＜文書ビューアの外観＞
図２は、情報表示処理装置の一実施形態である文書ビューア１０２の表示面側に着目した外観図である。図示するように、この文書ビューア１０２は、表示デバイスの一例である液晶表示パネル１０３と種々のハードウェアキーで構成された操作ボタン１１０とが筐体１０９に収容されて構成されており、ある程度の厚みを持った１枚の板状に形成されている。
【００４１】
液晶表示パネル１０３は、バックライト付きパネルとして構成されており、文書を表示するための文書表示エリア１０４として使用される。文書表示エリア１０４上は、アノテーションデバイス１７０にて手書き入力（デジタルインク）が可能である。マネジャ部１８０には、このデジタルインクに対応したメモ書きユーティリティ（ハードウェアおよびアプリケーションソフト）が組み込まれる。
【００４２】
デジタルインクに対応したコントローラとしては、手書きで入力したデータを“デジタルインク(手書き文字)”として認識し処理するためのものであればよく、必ずしも、手書きで入力したものをテキスト変換する機能（手書き文字認識機能）を備えたものである必要はない。この場合でも、テキストの最上位フォーマットとして取り扱うことができ、手書き文字のまま検索したり、文字を加工(カラー変更など)したりすることができる。なお、デジタルインクデータフォーマットを画像データ（たとえばビットマップデータ）として取り扱ってもよい。
【００４３】
このように、文書ビューア１０２は、紙の文書を読む際に文書に好きな形で下線や丸を付けたりメモを書き込んだりするのと同様に、アノテーションデバイス１７０を用いて書込み入力が可能となっている。また、厚みを持った１枚の板状に形成されているので、たとえば、書込み時に、膝の上に置いたり傾けたりして読みやすい位置や角度に据えることも容易である。
【００４４】
書込み入力された情報（文書本体の付加情報）は、文書ビューア１０２内の図示しない記憶部に保持され、所定のときにサーバシステム２００のアノテーション管理部２１０に送られ、アノテーションＤＢ２１６に文書本体と対応付けられて格納される。後にその文書を読み出すときには、文書本体とともに、過去に記入したアノテーションも読み出され、文書表示エリア１０４に表示される。
【００４５】
これにより、紙のように自由に好きな形で下線や丸あるいはメモなどの書込みを入れることで、情報の記載場所に関する読み手の記憶を視覚的に助ける効果を発揮させることが可能となる。
【００４６】
たとえば、電子会議システム１を利用した会議であれば、配布された資料を会議前に読みアノテーションを書き込んだり、あるいは会議の途中に説明内容を聞きながらアノテーションを入れたりするなどに利用することができる。
【００４７】
操作ボタン１１０としては、複数のハードウェアキーが用意されている。たとえば図示するように、文書ＤＢ２２４に格納された文書を読み込むための文書読込みボタン１１４と、文書表示エリア１０４に描画されたアノテーションを保存するための保存ボタン１１６とを備えている。また、操作ボタン１１０としては、アノテーションＤＢ２１６に保存されるアノテーションを検索し文書表示エリア１０４に表示させるための検索ボタン１１８とページを前後に捲るための前ページ送りボタン１２２ａおよび次ページ送りボタン１２２ｂからなるページ捲りボタン１２２を備えている。なお、操作ボタン１１０のハードウェアキーに代えて、文書表示エリア１０４にキーボタンを表示するソフトウェアキーとしてもよい。
【００４８】
この文書ビューア１０２は、内部に備えられている記憶媒体から読み出したデータ、あるいは図示しないネットワーク接続機能部を介してサーバシステム２００（Ｗｅｂサーバでもよい）などから取得したデータに基づいて画像を液晶表示パネル１０３に表示するように構成されている。
【００４９】
また、文書ビューア１０２は、本を読むようにパラパラと捲りながらページ単位で表示を切り替えていく機能（捲り表示機能）が搭載されており、この捲り表示機能を利用することで、たとえば、取り込んだ多数の情報の中から所望の情報を素早く検索できるように構成されている。
【００５０】
すなわち、この文書ビューア１０２における情報検索時には、前ページ送りボタン１２２ａや次ページ送りボタン１２２ｂといった２つのページ送りボタン（ページ捲りボタン１２２）を操作することで、ページ捲り操作を行ないながら所望のページ情報を液晶表示パネル１０３に表示させることができる。また、前ページ送りボタン１２２ａや次ページ送りボタン１２２ｂの何れか一方を連続的に押し続けると高速でページ送りを行なうことができ、これにより、次々と表示される情報を確認しながら所望とする情報を探すという操作が可能となっている。
【００５１】
また、捲り表示の際は、ページ送り操作に合わせて、液晶表示パネル１０３の液晶素子を駆動する画素振幅である画像コントラストや画像全体の明るさである表示明度（ブライトネス／背景輝度）を通常表示時と異なるものとし、表示デバイス上の表示画像の明暗状態を所定時間に亘って通常状態の明暗の調子と異なるものにすることで、全体の画像の特徴抽出が容易となるように構成されている。
【００５２】
＜文書ビューア／マネジャ部＞
図３は、文書ビューア１０２とマネジャ部１８０の機能ブロック図である。文書ビューア１０２は、ページ単位で画像を表示する表示デバイスの一例である液晶表示パネル１０３と、文書ビューア１０２におけるの表示処理全体を制御するコントローラ１３０と、所定条件の元に新しいページ画像を生成するページ画像生成部１４０とを備える。コントローラ１３０は、液晶表示パネル１０３上のページ画像の切替指示を操作ボタン１１０を介して受け付けるページ送り指示受付部１３２を有する。ページ画像生成部１４０は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けたことを条件として新しいページ画像を生成する。
【００５３】
また、文書ビューア１０２は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けたことを条件として、液晶表示パネル１０３上の画像を切り替えるとともに表示画像の明暗状態を所定順序に従って切り替える表示輝度制御部１５０を備える。
【００５４】
ページ画像生成部１４０は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けると、指示された方向（前方／後方の何れか）の新しいページ画像を生成し、生成し終えると、その旨を示す生成完了信号Ｓ１を表示輝度制御部１５０に通知する。
【００５５】
表示輝度制御部１５０は、液晶表示パネル１０３上におけるページ画像の表示コントラストを制御する機能部であるコントラスト制御部１５０ａと、液晶表示パネル１０３のバックライト輝度を制御することでブライトネスを制御する機能部であるブライトネス制御部１５０ｂとを有する。
【００５６】
表示輝度制御部１５０は、液晶表示パネル１０３上のページ画像のコントラストをコントラスト制御部１５０ａにより調整したり、あるいはページ画像のブライトネスをブライトネス制御部１５０ｂにより調整したりして、液晶表示パネル１０３上における表示輝度を制御する。なお、コントラストおよびブライトネスの両方に限らず、この両者の少なくとも一方を調整するものであればよい。
【００５７】
この表示輝度制御部１５０は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けると、液晶表示パネル１０３の画像をページ画像生成部１４０が生成した新しいページ画像に切り替えるとともに、表示輝度を所定時間だけ通常表示（その時点にユーザが設定しているコントラストやブライトネスの状態）と少し変える機能を備えている。これにより、本を読むようにパラパラと捲りながら表示を行なっていく場合でも、判別能を高めることができる。
【００５８】
一方、マネジャ部１８０は、ログファイル格納部１８２の他に、読み手が読もうとする対象文書を文書ＤＢ２２４から取り込み強調表示すべき文字やセンテンスを特定する強調語／センテンス特定部１８４と、強調表示すべき文字やセンテンスの選択手法を強調語／センテンス特定部１８４に指示する強調語／センテンス選択手法指示部１８６と、強調表示機能の有効／無効（オン／オフ）を制御する強調指示制御部１８８とを備える。
【００５９】
マネジャ部１８０は、先ず、強調語／センテンス選択手法指示部１８６にて読み手（本例では会議参加者）により指定された手法を実現する強調語／センテンス特定手法を選択し強調語／センテンス特定部１８４に指示する。読み手が読もうとする対象文書は、強調語／センテンス特定部１８４に入力される。強調表示機能がオンとなっている場合は、強調語／センテンス特定部１８４にて強調表示すべき語句（単語、センテンス、あるいは文章）をどのように表示するかが決定された後に文書ビューア１０２のコントローラ１３０を通じページ画像生成部１４０へ画像情報が送られる。
【００６０】
なお、強調表示手法としては、濃度（コントラスト／ブライト）を変化させて表示させる、フォント（種類やサイズ）を変化させて表示させる、文字色を変化させて表示させる、文字の背景色を変化させて表示させる、下線やべた塗りを付す、などという方法がある。
【００６１】
また、強調表示機能を利用することで、「流し読み機能」を持たせる場合にも効果を高めることができる。たとえば、紙の文書を流し読みするとき、読み手は、興味を引く語句や文書を特徴づけている語句を拾い読みしながら、大事な内容が掲載されていそうなページや文書の大凡の印象を得るといったことを行なっている。この文書ビューア１０２でも、「流し読みモード」を設けることで、文意をよく表現していると思われる重要語句を濃く表示することができる。濃く表示されているキーワードを追っていくことによって、短時間で文書の内容を理解することができる。また、読み手は、濃く表示されている語句の周辺が重要な箇所であると推測することもできる。より深く内容を理解したければ、そこを読み進めればよい。
【００６２】
また、アノテーション機能を利用した文献リストの自動生成とリンクさせた文書を表示することもできる。たとえば、ある文書に読み手が書き込んだ下線や丸などの印がついた語句をキーワードにして、サーバシステム２００に保持している文書に検索をかける。そしてキーワードが頻出する文書を参考文献としてリストアップする。読み手は、文書のタイトル、キーワードが頻出している個所の文章（クリップ）とページ番号を参照することができる。
【００６３】
指定された参照文献を表示する際には、クリップ（検索条件に該当した語句を示す状態）中のキーワードに、たとえば、フォント種やサイズあるいは色を変える、下線（アンダーライン）を引く、下線の太さを変える、マーカーペンのように色塗りする、あるいは濃い文字で表示するなどの強調表示をする。こうすることで、参照文献の内容を素早く理解することが可能となる。これらの手法をどのように実現するかは、公知技術であるので、説明を割愛する。
【００６４】
なお、強調語／センテンス特定部１８４、強調語／センテンス選択手法指示部１８６、および強調指示制御部１８８の各処理は、本願出願人に係る特願２００２−３１４８７６号を参照するとよい。
【００６５】
＜文書サーバ／文書データベース＞
図４は、文書サーバ２２２および文書ＤＢ２２４の構成例を示す図である。文書サーバ２２２は、「登録」と「文書読込み」を外部からの指示により受け付ける。たとえば、文書ビューア１０２の文書読込みボタン１１４が操作されたことをクライアントシステム１００にて検知すると、クライアントシステム１００は、その旨をサーバシステム２００を構成する文書管理部２２０の文書サーバ２２２に通知する。これにより、文書サーバ２２２は、文書ＤＢ２２４から指示された文書を読み込む。
【００６６】
なお、「登録」は、たとえば“http://datacenter.company.co.jp/access.cgi？DocumentID=8gjk3cl3”などのように、文書ＤＢ２２４への文書の格納先を示すアドレスを示した登録したい文書へのＵＲＬ（Uniform Resource Locators ）などのパスやディレクトリへのパスで与えることとする。
【００６７】
文書サーバ２２２は、与えられたパスが示す文書（群）に対し、順次、文書ＩＤを付与し、文書名と文書本文を文書ＤＢ２２４に登録する。このとき、文書ＤＢ２２４内のデータ構造は、たとえば図４（Ｂ）のようになる。文書名または文書本文はＵＲＬなどの文書へのパスでもかまわない。
【００６８】
文書サーバ２２２は、文書ビューア１０２から「文書読込み」の指示を受け付ける。文書サーバ２２２は、「文書読込み」の指示を受け付けると、文書ＤＢ２２４内の文書名の一覧を作成し、文書ビューア１０２へ返す。また、文書サーバ２２２は、文書ビューア１０２より文書名を受け取り、対応する文書本文を文書ビューア１０２へ送り返す。
【００６９】
＜アノテーションサーバ／アノテーションデータベース＞
図５は、アノテーションサーバ２１２およびアノテーションＤＢ２１６の基本的な構成例を示す図である。
【００７０】
アノテーションサーバ２１２は、「保存」と「検索」を外部からの指示により受け付ける。たとえば、文書ビューア１０２の保存ボタン１１６が操作されたことをクライアントシステム１００にて検知すると、クライアントシステム１００は、その旨をサーバシステム２００を構成するアノテーション管理部２１０のアノテーションサーバ２１２に通知する。これにより、アノテーションサーバ２１２は、保存を指示されたアノテーション情報（付加情報の特徴を表した情報の一例）をそのアノテーションが付与されていた文書に対応付けて、記憶部の一例であるアノテーションＤＢ２１６に登録（格納）する。
【００７１】
たとえば、アノテーションサーバ２１２は、文書ビューア１０２から「保存」の指示を受け付ける。このとき、保存したいアノテーション内容と、アノテーションの矩形情報と、アノテーションが付与された文書ＩＤと、「保存」指示を発した文書ビューア１０２の端末ＩＤとが与えられる。
【００７２】
アノテーションサーバ２１２は、与えられた端末ＩＤ、文書ＩＤ、矩形情報（詳細は後述する）、アノテーション内容を、テーブルデータとしてアノテーションＤＢ２１６に保存する。このときアノテーションＤＢ２１６内のデータ構造は、たとえば図５（Ｂ）のようになる。アノテーションＩＤは、文書ＩＤと端末ＩＤとの組合せが新規の場合、新たに付与される。新規でない場合は、そのアノテーションＩＤで示される行を上書きするものとする。
【００７３】
アノテーション内容は、描画されたアノテーションを再現するためのデータであり、ビットマップやベクトルデータなどのデータとなる。端末ＩＤは、文書ビューア１０２を操作しているユーザが使用している端末を示す情報である。
【００７４】
また、クライアントシステム１００は、文書ビューア１０２の検索ボタン１１８が操作されたことを検知すると、その旨をサーバシステム２００を構成するアノテーション管理部２１０のアノテーションサーバ２１２に通知する。これにより、アノテーションサーバ２１２は、検索を指示されたアノテーション情報をアノテーションＤＢ２１６から読み出す。
【００７５】
たとえば、アノテーションサーバ２１２は、文書ビューア１０２から「検索」の指示を受け付ける。このとき、アノテーションサーバ２１２は、文書ＩＤと矩形情報とアノテーション付与範囲に関する情報をクライアントシステム１００（文書ビューア１０２）から受け取る。アノテーションサーバ２１２は、これらの情報（検索条件）に基づきアノテーションＤＢ２１６内を検索し、適切なアノテーション内容を文書ビューア１０２へ返す。この検索処理については後述する。
【００７６】
＜＜アノテーション付与に関する処理＞＞
次に、アノテーション付与に関する処理について、具体例を用いて説明する。先ず、文書の登録、読込み、アノテーション付与、保存までを説明する。
【００７７】
＜文書の登録処理＞
図６は、以下に述べる具体例における文書ＤＢ２２４の構成例を示す図である。先にも述べたように、文書の登録は、登録したい文書へのＵＲＬやディレクトリへのパスで与えることとする。文書サーバ２２２は、受け取ったパスで示される文書の文書ＩＤ、文書名、文書本文を、文書ＤＢ２２４への文書の登録内容として、図６のように登録する。この例でのそれぞれの文書は、コピー機の操作に関するマニュアルである。
【００７８】
＜文書の読込み処理＞
文書の読み込みを希望する参加者（本例ではユーザＡ）は、文書ビューア１０２の文書読込みボタン１１４を押下する。この指示を受け付けた文書ビューア１０２は、文書読込み要求を文書サーバ２２２へ発信する。
【００７９】
この通知を受けた文書サーバ２２２は、文書ＤＢ２２４内の文書名の一覧を作成し、文書ビューア１０２へ返す。ここでは“manual1.txt ，manual2.txt ，manual3.txt ，manual4.txt ”となる。文書ビューア１０２は、文書名の一覧をリストボックスなどで表示しユーザＡへ選択を促す。
【００８０】
ユーザＡは、“manual2.txt ”を選択したものとする。文書ビューア１０２は、“manual2.txt ”が選択されたことを文書サーバ２２２へ通知する。文書サーバ２２２は、“manual2.txt ”に付与される文書ＩＤと文書本文を文書ＤＢ２２４より検索し、文書ビューア１０２へ返す。文書ビューア１０２は、受け取った文書本文を文書表示エリア１０４へ表示する。なお、文書サーバ２２２に全文検索機能などを設けると、読込みの対象として検索結果を提示することも可能である。
【００８１】
＜アノテーション付与処理＞
図７は、文書ビューア１０２の文書表示エリア１０４に表示された文書にアノテーションを付与した状態の表示例を示す図である。読み手（ユーザＡ）は、文書表示エリア１０４に表示された文書に対して、興味や関心に応じて下線や丸などの印（アノテーションなどの電子付箋）を付与しながら文書を読む。ここではアノテーションデバイス１７０としてペン型のデバイスを利用する。この場合、紙に書き込むようにアノテーションを付与することができる。
【００８２】
このとき、文書表示エリア１０４は、図７（Ａ）に示されるように、アノテーションが付与された部分を特定するために、実際には目に見えないが文字を含む矩形に区切られているものとする。文字の無い空白名部分や図表などの部分も適当な大きさの矩形に区切る。たとえば、前後の文字のフォントサイズを参考に適当な大きさの矩形に区切るとよい。それぞれの矩形には、各矩形を特定するための情報が付与される。たとえば、連続した矩形番号が左上から横方向に順に付与される。複数ページに亘る文書の場合には、次ページ以降も前ページに連続した番号が付与されるものとする。矩形番号によって、どのページに付与されたアノテーションであるのかを特定することができる。なお、ページごとに独立した矩形番号を付与し、ページ番号と各ページの矩形番号とにより、どのページに付与されたアノテーションであるのかを特定するようにしてもよい。
【００８３】
たとえば、コピー機のマニュアルの校正を行なう会議で、ユーザＡはマニュアルのあるページの説明文の「原稿の中心を…」に着目して、図７（Ａ）に示されるアノテーションａ１を付与したとする。また、綴じ代を行なう操作にも注目してアノテーションｂ１を付与したとする。この後、２ページ目、３ページ目と読み進み、実際に操作を行ないながら注意すべき点などを、図７（Ｂ）のように３ページに亘ってアノテーションを付与したとする。
【００８４】
＜保存処理＞
図８は、本事例において文書ビューア１０２が保存指令を受けたときにアノテーションサーバ２１２へ送る情報の一例を示した図である。また、図９は、本事例におけるアノテーションＤＢ２１６の構成例を示す図である。図９に示すデータの構成例は図５に示したものと同様である。
【００８５】
文書ビューア１０２は、この保存指示を受け付けると、アノテーションが付与された文書の文書ＩＤ、端末ＩＤ、アノテーションが付与された矩形の矩形番号、およびアノテーション内容（画像情報）をアノテーションサーバ２１２へ送る。アノテーションサーバ２１２へ送る情報は、図８のようになる。ここで文書ビューア１０２の端末ＩＤは“１”であるとする。
【００８６】
アノテーションサーバ２１２は、図８に示した情報を受け取り、アノテーションＤＢ２１６へ格納する。このとき、既に同一の文書ＩＤと端末ＩＤの組合せがある場合は、受け取った情報をそこに上書きをする。この例では、図９に示すように、アノテーションＤＢ２１６には既に、文書ＩＤ２，３，４に対して所定の端末（端末ＩＤ；１，２，３）で付与されたアノテーションが４個保存されている（アノテーションＩＤ；１，２，３，４）。ここで、アノテーションＤＢ２１６には、文書ビューア１０２から送られた図８に示す情報と同一の文書ＩＤと端末ＩＤの組合せの登録がないので、アノテーションサーバ２１２は、新規にアノテーションＩＤに“５”を割り当て、図９の下段のように登録する。
【００８７】
以上で、文書に対するアノテーション付与に関する操作状況のデータベースへの保存が終了する。
【００８８】
＜＜電子付箋を利用した情報検索表示処理＞＞
次に、文書ビューア１０２の文書表示エリア１０４に表示された文書にアノテーションなどの電子付箋を付し、このアノテーションなどで示された情報を利用することで、効率的な情報検索を実現する手法について、具体的に説明する。以下、このような情報検索機能をなす電子会議システム１の情報表示処理に関わるシステムを、特に情報検索表示処理システムという。
【００８９】
図１０は、情報検索表示処理システム７について、アノテーションを利用した情報検索機能に着目した第１実施形態のブロック図である。ここで、図１０（Ａ）は、全体構成の概要を示し、図１０（Ｂ）は、情報検索表示処理機能に特化した機能要素の詳細を示す。
【００９０】
本実施形態の情報検索表示処理システム７は、付加情報検索表示処理部の一例であって、効率的な検索処理やアノテーション情報の提供処理を実行する仕組みを司る専用の装置であるアノテーション処理装置２１８を備えている。
【００９１】
ビューア使用者（ユーザ；本例では会議への参加者）は、会議進行中に、文書ビューア１０２の文書表示エリア１０４に表示された文書をページ捲りをしながら読みつつ、アノテーションデバイス１７０を用いて、興味を引く語句や文書を特徴づけている語句に下線や丸などの印（アノテーション）を書き込む。あるいは、メモ書きを付してもよい。メモ書きは、フリーハンドによるものに限らず、規定枠にテキスト入力をするテキストアノテーションであっても構わない。
【００９２】
これらの文書に付与されたアノテーションなどの文書本体に対する付加情報に関する情報は、保存ボタンが押されることで、ネットワーク９を介してサーバシステム２００に送信される（図８参照）。文書本体は、文書管理部２２０にて管理されている（図４や図６参照）。
【００９３】
文書本体に対応するアノテーションなどの付加情報は、アノテーション管理部２１０のアノテーションＤＢ２１６に、その文書本体に対応付けられて管理（保存）される（図９参照）。
【００９４】
そして、必要に応じて読み手から検索が指示されると、読み手が指定した検索条件に従って適合する付加情報（たとえばアノテーション）をアノテーション管理部２１０を利用してサーチ（検索）し、検索条件に合致する情報をユーザに提示する。
【００９５】
たとえば、図１に示した電子会議システム１の構成では、ユーザは、電子会議の最中に、電子文書を文書ビューア１０２の表示面に表示し、その表示面上でアノテーションを付与することができる。ここで、様々な文書や、膨大な量の文書を使う会議において、または長期間継続して文書を使った活動において、アノテーションを付与できる文書表示装置を使って、知的活動を行った場合を考える。
【００９６】
最初はある１つの文書から使い始め、その文書のある箇所について詳細を知る必要に迫られ、別の文書を表示することがある。その別の文書でもさらに別の文書の情報を必要としている箇所があり、また別の文書を開くケースも生じ得る。このように、次々に肝要となる箇所にアノテーションを付けていくシーンを考える。
【００９７】
このシステムでは、電子的に表示された文書に対して付与されたアノテーション（アンダーラインやマーキングや文字の書込みなど）を共有できるようになっている。また、ある文書の一部に付与されたアノテーションの状態をクエリとして、既に同じ位置に付与されている文書のアノテーションを検索結果として再現することもできる。アノテーションが付与された位置は読み手にとって、何らかの興味がある位置であると思われる。また、他人や自分が以前に付与したアノテーションを再現することにより他人や自分が付与した興味のある位置を知ることができる。また、アノテーションを付与した人物ごとに管理し、ある特定の人物を指定することにより、ある特定の人物の興味を知りたい場合は、その人物が付与したアノテーションのみを再現することができる。
【００９８】
また、特定の人物のアノテーションを再現するよりも、特定の視点で付与されたアノテーションを再現することも有効となる場合がある。たとえば、自分がある視点である文書を読む場合に、既に同一の視点で他者がその文書を読んでおり、アノテーションを付与している場合、自分と同一の視点の他者が注目している点を素早く知りたい場合がある。この要求に応えるべく、本実施形態の電子会議システム１（情報検索表示処理システム７）は、電子付箋を利用して、会議の途中や会議が終わった後などに、自分と同一の視点を有する他者が付した電子付箋を再現することで効率的な情報処理を行なうことを可能とする機能（以下情報検索表示処理機能という）を備えている。具体的には、この情報検索表示処理機能を実現する中央処理部として、アノテーション処理装置２１８が機能する。以下、本実施形態の特徴部分である電子付箋を利用した情報検索表示処理機能について詳しく説明する。
【００９９】
図１０（Ａ）に示すように、この機能をなす情報検索表示処理システム７は、読み手から検索処理や情報表示指示を受け付けるための検索要求部の一例である要求受付部５６０と、検索要求された該当文書やその他の関連した情報がアノテーション管理部２１０のアノテーションＤＢ２１６や文書管理部２２０の文書ＤＢ２２４に登録済みか否かを検索し、該当品がある場合にはその検索結果やアノテーションと関わりのある情報をクライアントシステム１００側へ送るアノテーション処理装置２１８と、アノテーション処理装置２１８から送られた検索結果やその他の情報を表示する表示処理部１０１とからなる。
【０１００】
なお、アノテーション処理装置２１８の機能を、アノテーションサーバ２１２や文書サーバ２２２にて担当してもよい。この場合、図中点線で示すように、アノテーションサーバ２１２と文書サーバ２２２とが直接に（あるいはネットワーク９を介して）アノテーションの検索処理に関わるアノテーション情報のやり取りをするようにする。
【０１０１】
表示処理部１０１は、文書ビューア１０２とマネジャ部１８０とにおける表示処理に関わる部分で構成される。クライアントシステム１００側へ送られるアノテーションと関わりのある情報としては、たとえばアノテーション処理装置２１８で生成される検索結果を纏めたリスト情報などがある。
【０１０２】
アノテーション処理装置２１８の一構成例は図１０（Ｂ）に示される。このブロック図により、アノテーションを利用することで情報検索表示処理機能を果たすための、検索処理や情報表示処理を効率的に行なうことを可能にする機構が具体的に示されることとなる。
【０１０３】
図示するように、アノテーション処理装置２１８は、検索条件を決定する検索条件決定部５４４と検索条件決定部５４４により決定された検索条件に合致するアノテーション情報を検索する検索部５４６と、検索部５４６により検索された検索条件に合致するアノテーション情報を関連情報としてユーザに提示する関連情報提示制御部の一例であるアノテーション提示制御部５５０とを備える。検索部５４６とアノテーション提示制御部５５０とにより検索処理部５４５が構成される。検索条件決定部５４４による検索条件の決定は、文書ビューア１０２上に条件設定のための画面を提示し、ユーザからの指示入力を受け付けることで実現する。
【０１０４】
クライアントシステム１００側に設けられている要求受付部５６０は、文書に付与された全ての電子付箋のうち、ある特定の条件に合致する電子付箋のみを選択的に表示させる要求を受け付けることができるようになっている。ある特定の条件としては、少なくとも“自分と同一の視点を有する他者が付した電子付箋（本例では手書きのアノテーション）”を含むものとする。要求受付部５６０がこのような表示要求をユーザから受け付ける仕組みは、アノテーション検索をトリガとして行なうものとする。
【０１０５】
たとえば、要求受付部５６０は、検索ボタン１１８が押下されたことを検知すると、“自分と同一の視点を有する他者が付した電子付箋（本例では手書きのアノテーション）”の検索を、アノテーション処理装置２１８に指示する。ここで、この第１実施形態では、“自分と同一の視点を有する他者が付したアノテーション”を特定する手法として、自分が閲覧中の文書に自身で付与したアノテーションを利用する。具体的には、自身が付した位置とほぼ同じような位置に他者により付与されたアノテーションを、自分と同一視点で他者により付与されたと思われるアノテーションとする。
【０１０６】
文書ビューア１０２は、検索ボタン１１８が押下されたことを検知すると、端末ＩＤ、閲覧中の文書を特定する文書ＩＤ、および表示中の文書ページのアノテーションが付与された矩形の矩形番号を検索要求としてアノテーションサーバ２１２へ送る。
【０１０７】
アノテーション処理装置２１８の検索条件決定部５４４は文書ＩＤとアノテーション位置を示す矩形番号を検索条件に設定し検索部５４６に検索を指示する。検索部５４６は、アノテーション情報を登録しているアノテーションＤＢ２１６を検索し、検索を指示された文書（閲覧中の文書）に関わる検索を指示した者と同一視点の他者により付与された全てのアノテーションを検索し、検索結果をアノテーション提示制御部５５０に渡す。アノテーション提示制御部５５０は、所定のルールに従ってスコアリングをし、最終的に文書ビューア１０２に表示すべきアノテーションを特定する。この後、アノテーション提示制御部５５０は、所定のスコアを獲得したアノテーションＩＤのアノテーション内容（画像情報）を文書ビューア１０２に送る。
【０１０８】
図１１は、図１０に示した情報検索表示処理システム７における情報検索処理（特にアノテーションが付与された視点を利用した情報検索処理）の手順を示す概略図である。図１２は、検索指示を発する文書閲覧中のユーザが文書に付したアノテーションの一例を示す図である。図１３は、検索要求が発せられたときにクライアントシステム１００（文書ビューア１０２）からアノテーション管理部２１０（アノテーションサーバ２１２）へ通知される情報の一例を示す図である。
【０１０９】
ステップＳ１００〜Ｓ１０２（アノテーション付与／登録）；
会議に参加している各ユーザは、文書ビューア１０２の文書表示エリア１０４に表示された文書ＩＤ２の文書“manual2.txt ”を読みながら、アノテーションデバイス１７０を用いて、興味を引く語句や文書を特徴づけている語句にアノテーションを付与する。アノテーション検出部１０７は、文書に付与されたアノテーションの位置や属性を検出し、この検出したアノテーションの位置や画像情報を文書ＩＤとともにアノテーション処理装置２１８に渡す（Ｓ１００）。
【０１１０】
アノテーション処理装置２１８は、アノテーションの位置や画像情報を、アノテーションサーバ２１２を介して図９に示したようにアノテーションＤＢ２１６に登録する（Ｓ１０２）。
【０１１１】
ステップＳ１１０〜Ｓ１１６（同一視点アノテーションの検索）；
ユーザＢは、文書ビューア１０２にログインする。ユーザＢは、自分の端末の文書ビューア１０２へ文書を読み込む。読み込む手順は上述した通りである。ここでもやはりコピー時の画像移動を行なうための文書として、文書ＩＤ２の文書“manual2.txt ”を読み込んだとする。原稿画像を用紙の中心へ移動して、綴じ代を付ける操作に注目したとする。このとき、１ページ目について注目すべき単語や文について、図１２のようにアノテーションａ２，ｂ２を付与する。この時点では、「保存」の指示がないので、アノテーションａ２，ｂ２の情報（位置や画像情報）は、クライアントシステム１００側だけが知り得ている。
【０１１２】
この後、ユーザＢは、これらのアノテーションａ２，ｂ２を元に、自分と同一視点の他人により付与されたと思われるアノテーションの検索・再現を指示する。たとえば、ユーザＢは、所定のときに検索ボタン１１８を押下する。つまり、アノテーション検索時には、閲覧中の文書に検索指示用のアノテーションを付与することで、検索範囲を指定する。すると、この検索指示を受け付けた要求受付部５６０は、アノテーション処理装置２１８に、このユーザＢと同一視点の他のユーザが付与したアノテーション検索を指示する（Ｓ１１０）。
【０１１３】
たとえば、要求受付部５６０は、検索ボタン１１８が押下されたことを検知すると、図１３に示すように、文書ＩＤ、端末ＩＤ、および表示されているページのアノテーションが付与された矩形の矩形番号を検索要求としてアノテーション処理装置２１８へ送る。ここでユーザＢが使用している文書ビューア１０２の端末ＩＤは“４”とする。
【０１１４】
アノテーション処理装置２１８の検索条件決定部５４４は、図１３に示される情報を受け取ると、ユーザＢが閲覧中の文書の文書ＩＤを検索条件に設定し検索部５４６に検索を指示する。検索部５４６は、アノテーションサーバ２１２を介して、文書ＩＤ２に対するアノテーションが存在するかアノテーションＤＢ２１６を検索する（Ｓ１１２）。つまり、アノテーション処理装置２１８は、ユーザＢが閲覧中の文書に付与されている全てのアノテーションを先ず検索する。
【０１１５】
もし無い場合は文書ＩＤ２に対するアノテーションが存在しない旨をアノテーション提示制御部５５０を介して文書ビューア１０２に返す。ここでは図９に示すデータ構造のアノテーションＤＢ２１６を検索したとする。文書ＩＤ２に関するアノテーションは３件（アノテーションＩＤ２，４，５）が検索される。検索結果はアノテーション提示制御部５５０に渡される。
【０１１６】
アノテーション処理装置２１８のアノテーション提示制御部５５０は、文書ビューア１０２側から受け取った図１３の検索要求と検索部５４６から得られたアノテーションＩＤ２，４，５の矩形情報（矩形番号）とを、それぞれ順に比較することで、文書ビューア１０２に検索結果として返すべきアノテーションを特定する（Ｓ１１４）。比較の方法は以下の通りである。
【０１１７】
１）検索要求の矩形情報で最も小さな矩形番号（MinRectNum）を抽出する。図１３の例では、MinRectNum＝“７８”となる。
【０１１８】
２）検索要求の矩形情報で最も大きな矩形番号（MaxRectNum）を抽出する。図１３の例では、MaxRectNum＝“１４２”となる。
【０１１９】
３）それぞれの比較対象のアノテーションＩＤの矩形情報（矩形番号）に対して、以下の処理を繰り返す。
【０１２０】
３−１）MinRectNum≦TargetNum ≦MaxRectNumとなるような矩形番号TargetNum が存在するか否かを計算する。つまり、ユーザＢが付与したアノテーションの先頭の矩形位置と最後の矩形位置との間に存在する付与済みの（自身によるものを含んでいてもよい）アノテーションを検索する。要するに、検索要求のアノテーションの付与範囲については、アノテーションが付与された最も小さい矩形番号と最も大きい矩形番号を範囲とするということである。
【０１２１】
存在する場合、その範囲の矩形情報が検索対象となる。存在しない場合、次のアノテーションＩＤについて調べる。たとえば、アノテーションＩＤ２の矩形情報を調べると、１５９−１８３，２３１−２５６となっており、MinRectNum≦TargetNum ≦MaxRectNumとなるようなTargetNum は存在しない。アノテーションＩＤ４の矩形情報は１３４−１４７のうち１３４−１４２が含まれるので検索対象となる。アノテーションＩＤ５の矩形情報は７５−１００，１３３−１４７のうち７８−９３，１３３−１４２が含まれるので検索対象となる。
【０１２２】
３−２）
ａ；MinRectNum，MaxRectNumの範囲で何割の検索要求の矩形が検索対象の矩形情報に含まれるかを示すアノテーション再現率を計算する。
ｂ；MinRectNum、MaxRectNumの範囲で何割の検索対象の矩形情報が検索要求の矩形情報に含まれるかを示すアノテーション適合率を計算する。
ｃ；アノテーション再現率と適合率の平均値を取る。
【０１２３】
つまり、ａ〜ｃにより、アノテーション付与位置を利用した視点類似度計算処理を実行する。アノテーションＩＤ４の場合、検索要求の矩形情報が検索対象の矩形情報に含まれる割合は、９／２６＝０．３５（７８−９３，１３３−１４２は１３４−１４２中に９個含まれる）。またアノテーションＩＤ４の検索対象の矩形情報が検索要求の矩形情報に含まれる割合は、９／９＝１（１３４−１４２中に７８−９３，１３３−１４２は９個含まれる）。平均値は（０．３５＋１）／２＝０．６７５となる。
【０１２４】
アノテーションＩＤ５の場合、検索要求の矩形情報が検索対象の矩形情報に含まれる割合は、２６／２６＝１（７８−９３，１３３−１４２は７８−１００、１３３−１４２中に２６個含まれる）。またアノテーションＩＤ５の検索対象の矩形情報が検索要求の矩形情報に含まれる割合は、２６／３３＝０．７９（７８−１００、１３３−１４２中に７８−９３，１３３−１４２は２６個含まれる）。平均値は（１＋０．７９）／２＝０．９０となる。
【０１２５】
以上のようにして、すべての検索対象アノテーションに対しての比較が終了すると、アノテーション提示制御部５５０は、所定のスコアよりも高いスコアを獲得したアノテーションＩＤの全てのアノテーション内容（画像情報）を文書ビューア１０２へ返す（Ｓ１１６）。つまり、視点の類似度が所定レベルよりも大きなアノテーションＩＤの全アノテーションを検索結果とする。たとえば、最も高いスコアを獲得したアノテーションＩＤの全てのアノテーション内容を検索結果として文書ビューア１０２へ返す。
【０１２６】
本例では、アノテーションＩＤ５のスコアが０．９０と最も高いので、アノテーション提示制御部５５０は、アノテーションＩＤ５の画像情報１，２，３つまりユーザＡによってある時点に付与された全てのアノテーションを文書ビューア１０２へ返す。文書ビューア１０２は、受け取ったアノテーションの画像情報を文書表示エリア１０４上に再現する。
【０１２７】
このように、第１実施形態の情報検索の手法によれば、文書閲覧者と同一の視点を持つと思われるアノテーションを検索し再現する仕組みを構築することができる。具体的には、電子的に表示された文書に対して付与されたアノテーション（アンダーラインやマーキングや文字の書込みなど）を共有できる装置において、ある文書の一部に付与されたアノテーションの状態（アノテーション付与位置）をクエリとして、閲覧中の文書において、既に同じような位置に付与されているすべてのアノテーションを検索結果として再現する仕組みを提案することができる。
【０１２８】
自分がある視点である文書を読む場合に、既に同一の視点で他者がその文書を読んでおり、アノテーションを付与している場合、その他者のアノテーションを再現することにより、同一の視点で付与されたアノテーションを得ることができる。したがって、興味のある個所にアノテーションがすでに付与されているので、そこに目を通すことにより興味ある情報を素早く得ることができ、特定の人物のアノテーションを再現するよりも、より効率的な情報検索（本例ではアノテーション検索）ができる。
【０１２９】
たとえば、前例では、ユーザＢは１ページ目に付けたアノテーションを元に、ユーザＡが付与した２ページ目と３ページ目のアノテーションを文書ビューア１０２上で確認することができる。ユーザＢが１ページ目に付けたアノテーションはユーザＡが１ページ目に付けたアノテーションと位置が類似しているので、近い視点でアノテーションを付与したとみなすことができる。したがって、ユーザＢは、おそらく、ユーザＡが２，３ページ目に付与したアノテーション位置に、同様のアノテーションを付与する可能がある。それを予め提示することにより、ユーザＢの文書理解を促進できるであろう。
【０１３０】
この例では、ユーザＢはコピー操作のマニュアルにおいて、原稿を用紙の中心へ移動して、かつ綴じ代を付けてコピーしたいので、１ページ目にその操作に相当する位置にアノテーションを付与した。同じ位置に、既にユーザＡがアノテーションを付与しており、かつ２，３ページ目においても、注意点や補足などにアノテーションを付与していれば、ユーザＢはそのアノテーションを参照することにより、注目すべき点を素早く確認することができるといった効果がある。
【０１３１】
なお、この例では、不特定他者のアノテーションを保存・検索できる例であるが、マニュアルの場合、マニュアル執筆者が予め、この部分に興味あるユーザはここにも興味があるはずだとか、ここを注意してみて欲しいといった部分に予めアノテーションを付与し、マニュアルと一緒に提供することによりマニュアルの理解の促進を促すことができる。
【０１３２】
なお、第１実施形態の構成では、管理装置の一例であるサーバシステム２００側にて文書閲覧者（前例ではユーザＢ）の視点と同一視点で付与されたアノテーションを特定する処理を行なっていたが、必ずしもこのようなシステム構成に限定されるものではない。たとえば、サーバシステム２００にて収集したアノテーション情報をそのままクライアント端末の一例であるクライアントシステム１００に渡し、クライアントシステム１００側にて、文書閲覧者の視点と同一視点で付与されたアノテーションを特定する処理を行なうシステム構成としてもよい。以下、このような形態のシステム構成について説明する。
【０１３３】
図１４は、クライアントシステム１００側にて文書閲覧者の視点と同一視点で付与されたアノテーションを特定する処理を行なう第２実施形態の情報検索システムのブロック図である。ここで、図１４（Ａ）は、全体構成の概要を示し、図１４（Ｂ）は、アノテーションの人物属性を利用した情報検索表示処理機能の詳細を示す。
【０１３４】
図１４（Ａ）に示すように、この形態の情報検索表示処理システム７は、図１０（Ａ）に示したアノテーション処理装置２１８を備えていない。その代わりに、図１０（Ｂ）に示した検索条件決定部５４４の機能を要求受付部５６０と一体的に構成している。要求受付部５６０にて指示された検索条件はサーバシステム２００側に渡される。これを受けて、たとえば、アノテーション管理部２１０や文書管理部２２０が検索条件に合致する文書やアノテーションを抽出し、検索結果としてクライアントシステム１００のマネジャ部１８０に返す。
【０１３５】
たとえば、要求受付部５６０は、同一視点で既に付与されているアノテーション検索の指示を受け付けつけると、ユーザが閲覧中の文書に付与されている全てのアノテーションの検索をアノテーション管理部２１０に指示する。また、このときには、マネジャ部１８０に対して、アノテーション付与位置を利用した視点類似度計算処理を指示する。
【０１３６】
図１４（Ｂ）に示すように、クライアントシステム１００のマネジャ部１８０には、アノテーション提示制御部５５０が設けられている。このアノテーション提示制御部５５０の機能は、図１０に示したアノテーション提示制御部５５０と同様のものである。
【０１３７】
たとえば、アノテーション提示制御部５５０は、アノテーション付与位置を利用した視点類似度計算処理を要求受付部５６０から指示されると、アノテーションサーバ２１２から、文書ビューア１０２上に表示中の文書に付与されている全てのアノテーションを受け取る。そして、第１実施形態と同様の手順にて、文書閲覧者により付与されたアノテーション付与位置を利用した視点類似度計算処理を実行し、文書ビューア１０２上に提示すべきアノテーションを特定する。
【０１３８】
この第２実施形態の構成によっても、第１実施形態と同様に、文書閲覧者により付与されたアノテーション付与位置を利用することで、文書閲覧者と同一の視点を持つと思われるアノテーションを検索し再現する仕組みを構築することができる。
【０１３９】
以上のように、アノテーション位置を利用することで、文書閲覧者と同一視点にて付与されたアノテーションを検索し提示することで効率的に情報（たとえばアノテーション）を検索する手法を説明したが、以下のような変形の手法を採ることもできる。
【０１４０】
Ａ．上記の例では、アノテーションの検索に、矩形情報を付与し、同じ矩形を共有する割合でアノテーションの類似性を判断したが、類似性の判定方法はこの方法によらない。
【０１４１】
Ｂ．上記の例では、アノテーションの検索結果のランキングにおいて、単純に同じ矩形を含む数をもとにしているが、より長い範囲に付与されたアノテーションの場合、さらに重み付けを行なってもよい。
【０１４２】
Ｃ．アノテーションに色属性を持たせて、検索時に色の合致も考慮してもよい。
【０１４３】
Ｄ．再現率優先あるいは適合率優先の重み付けを行なってもよい。この場合、再現率重視か適合率重視かを、ユーザが指定できるようにするとよい。
【０１４４】
Ｅ．電子ビューア１０２へのログイン機能を待たせることにより、端末ＩＤの代わりにユーザＩＤも利用可能である。たとえば、文書ビューア１０２を使用するにあたり、ユーザは、予めその文書ビューア１０２に対してログイン作業を行なう。この場合、ユーザＩＤの合致、すなわち、ユーザＩＤによるフィルタリングを考慮することもできる。
【０１４５】
Ｆ．上記の例では、ユーザが付与したアノテーションの先頭の矩形位置と最後の矩形位置との間をクエリ（検索範囲）となるアノテーション付与範囲として指定していたが、この検索範囲の指定は、必ずしもこれに限らず、次のような変形例の方法を採ることができる。基本的には、上記実施形態のものも含めて、何れのものも、検索を指示する文書閲覧者が実質的に文書中の所定範囲を読んだ部分を示すものである。“実質的に”とは、きちんと読んではいないが“読んだ”に等しい部分や“これから読もうとするという意志のある部分”も含める意味である。
【０１４６】
１）検索ボタン１１８が押下された時点で表示されているページ全体を検索範囲とする。
【０１４７】
２）ユーザが明示的にアノテーションを用いて検索範囲を指定する。たとえば、ペンなどを利用して範囲を指定する。このとき、範囲を指定するために利用するアノテーションは通常のアノテーションとは異なる仕組み（アノテーション属性）を持つ。たとえば、検索範囲指定用のアノテーション属性として、範囲指定属性を持ち、ＧＵＩ（Graphical User Interface）上は、他のペンとはインクの色を変える。そのペンで記された、最も小さい矩形番号と最も大きい矩形番号を範囲とする。このようにして、検索範囲の設定に使用される専用のアノテーションは、アノテーションＤＢ２１６への保存指示があっても保存動作を禁止するようにする。あくまでも、検索範囲の設定（実質的に読んだ部分の特定）のためにのみ使用されるようにすることで、誤使用を避けるためである。
【０１４８】
３）最新のアノテーション１個の範囲、または、上記実施形態と変形例１の組合せなどを利用して検索範囲を指定する。
【０１４９】
４）アノテーションが付与された語句を含む文の全体を検索範囲とする。複数の文にアノテーションが付与されている場合は複数の文が付与範囲（実質的に読んだ範囲）となる。ユーザが文書中のある部分にアノテーションを付したとき、その文の全体に文書閲覧者の視点（読み手の意志）があるとする考え方である。アノテーションを付与した語句だけに着目する上記実施形態よりも、より好ましい検索結果が得られると考えられる。
【０１５０】
５）アノテーションが付与された段落を検索範囲とする。複数の段落にアノテーションが付与されている場合は、複数の段落が付与範囲（実質的に読んだ範囲）となる。ユーザが文書中のある部分にアノテーションを付したとき、ある纏まった単位に文書閲覧者の視点（読み手の意志）があるとする考え方である。アノテーションを付与した語句だけに着目する上記実施形態よりも、より好ましい検索結果が得られると考えられる。一方、このＦ５の手法と上記Ｆ４の手法の何れが好ましいかは、一概に言えない。
【０１５１】
なお、段落は、文頭が１段下がった文法上の段落に限らず、予め定めた“段落”の定義によるものであってもよい。つまり、ある基準にて“纏まった単位”を段落として捉え、“単文”は纏まった単位に含めない。たとえば、特許明細書であれば、文頭の１段下がりに関わらず、同一の段落番号部分を“纏まった単位＝段落”として捉える。
【０１５２】
Ｇ．上記の例では、文書閲覧者が付与したアノテーション位置をクエリの基準としていたが、アノテーション以外の指定をクエリの基準としてもよい。たとえば、ユーザが検索を指示する際に、検索範囲（たとえば矩形枠などで）のみが指定されてクエリとなるアノテーションが付与されない場合である。つまり、検索を希望する文字列にアノテーションを付与して検索指示を発することに代えて、興味のある部分（読みたい部分；実質的に読んだ部分）を矩形枠などで特定して検索指示を発する。
【０１５３】
検索対象部分を特定する設定枠を指定するための手法は、アノテーションデバイス１７０やマウスあるいはその他のポインティングデバイスを用いた通常の範囲指定の手法を用いるとよい。また、キーボードで文書中の座標位置（矩形番号でもよい）を指定する手法を用い、矩形の対向する頂点座標（たとえば左上と右下）の位置を指定してもよい。
【０１５４】
この場合、要求受付部５６０は、検索範囲設定部として機能し、クエリとなる指定された検索範囲の情報をアノテーション処理装置２１８やアノテーション管理部２１０に通知する。アノテーションサーバ２１２は、指定された範囲内のアノテーションを含むアノテーションＩＤを検索し、そのアノテーション内容をクライアントシステム１００に返す。または、アノテーション内容の代わりに端末ＩＤのリストを返す。端末ＩＤはＥで示したように、ユーザＩＤで置き換えることもできるので、この場合はユーザＩＤまたはユーザ名のリストを返す。
【０１５５】
文書ビューア１０２はアノテーション内容が返された場合は、それらの全てのアノテーションを表示する。このとき、文書ビューア１０２は、予め指定しておいた範囲のみのアノテーションを表示することもできる。
【０１５６】
ユーザＩＤまたはユーザ名が返された場合は、それらのリストを文書ビューア１０２上に表示する。リストに表示されたユーザＩＤやユーザ名を選択することにより、そのユーザが付与したアノテーションを、さらにアノテーションサーバ２１２から検索し、文書ビューア１０２上に表示することができる。
【０１５７】
＜＜電子付箋を利用した知識の共有＞＞
なお、上記変形例Ｇの手法（アノテーション以外の指定をクエリの基準とする手法）は、本願出願人に係る特願２００２−３１５１２１号における情報検索の、検索条件の設定に利用することもできる。特願２００２−３１５１２１号における情報検索の手法は、文書ビューア１０２の文書表示エリア１０４に表示された文書にアノテーションなどの電子付箋を付し、このアノテーションなどで示された情報を利用することで、システムを利用するユーザ個々人が持つ個人情報の共有、つまり個人ベースでの情報共有（知識の共有）を実現する手法である。
【０１５８】
ここで、特願２００２−３１５１２１号では、情報共有（知識の共有）のための情報検索のトリガとなるのが、文書閲覧者が付与したアノテーションであったが、アノテーションに代えて、上記変形例Ｇのように範囲指定する手法を利用することができる。以下、この点について、第３実施形態として説明する。
【０１５９】
図１５は、アノテーションを用いた検索処理や情報提供処理を利用して、複数ユーザ間で情報の共有を可能とする機能に着目した情報検索表示処理システムの第３実施形態のブロック図である。ここで、図１５（Ａ）は、全体構成の概要を示し、図１５（Ｂ）は、情報提供処理に特化した機能要素の詳細を示す。基本的なシステム構成の枠組みは、図１や図１０に示した構成図と相違ない。
【０１６０】
前述同様、文書閲覧者（本例では会議への参加者）は、文書ビューア１０２の文書表示エリア１０４に表示された文書を読みながら、アノテーションデバイス１７０を用いて、興味を引く語句や文書を特徴づけている語句に下線や丸などの印（アノテーション）を書き込む。あるいは、メモ書きを付してもよい。
【０１６１】
そして、必要に応じて読み手から検索が指示されると、読み手が指定した付加情報の属性に適合する付加情報（たとえばアノテーション）をアノテーション管理部２１０を利用してサーチ（検索）する。
【０１６２】
また、アノテーションで示された語句、たとえばアノテーション付近に書かれている文字情報である対象文字列を抽出することができる。また、この対象文字列をクエリとして、文書サーバ２２２は、そのクエリに合致する文書を文書ＤＢ２２４から検索し、そのリストを文書ビューア１０２に返すことができる。このとき、文書サーバ２２２は、検索リストとしてリストアップされた文書本体の格納先（ＵＲＬ）の情報をリンクとして付加しておく。
【０１６３】
ユーザは、文書ビューア１０２に表示されたリスト（検索結果）を参照して、必要であれば、そのリストにリンクされている文書をクリックする。これを受けて、文書サーバ２２２は、指示された文書本体を文書ＤＢ２２４から読み出し、文書ビューア１０２に提示する。
【０１６４】
このような検索の仕組みにより、たとえば議事進行中に、過去の関連文書を検索したり、あるいは、会議を通して専門家を発見したりすることができる。これにより、必要とする情報であって、自分がそれまで知らなかった情報を取得することができる。
【０１６５】
ここで、この第３実施形態では、検索結果を得る際、ユーザが指定した検索条件そのものに関わる情報に限らず、そのユーザが指定した検索条件と類する他のユーザが指定した検索条件にて取得され得る情報についても、自動的にユーザに提示されるような仕組みが設けられている。
【０１６６】
換言すれば、ほぼ同じ視点の検索条件ではあるが、個々人の個性による視点差（ちょっと違う点）に着目して、同様の興味を持つ他人が取得し得る情報に関しても、検索を指示したユーザに提示するようになっている。以下この点について詳しく説明する。
【０１６７】
先ず、アノテーション情報は、それを付与した人（ユーザ）および付与された文書内の位置（アノテーション位置）を含んでいる。１つ以上のアノテーション位置を指定することで、その付近にアノテーションを付与したすべてのユーザおよびそれらのユーザが付与した別のアノテーションを検索することができる。
【０１６８】
ここで、アノテーションの検索対象は同一文書内であっても、別の文書であってもよい。すなわち、「文書の部分→その部分にアノテーションを付与したユーザ→そのユーザが付与したアノテーション位置（の集合）→対象文字列（の集合）」の順に検索が行なわれる。
【０１６９】
情報検索表示処理システム（本例では特に情報共有処理システム）７は、あるユーザが付与したアノテーションの対象文字列を管理し、あるアノテーションの対象文字列、そのアノテーションが付与された文書内のすべてのアノテーションの対象文字列の集合、そのユーザが付与したアノテーションの対象文字列の集合を検索する。このような処理を実現する中央処理部として、アノテーション処理装置２１８が機能する。
【０１７０】
図１５（Ａ）に示すように、この機能をなす第３実施形態の情報検索表示処理システム７は、読み手から検索指示を受け付けるための検索要求指定部５００を備える。この検索要求指定部５００は、要求受付部５６０とほぼ同様の機能をなすものである。この第３実施形態では、検索要求指定部５００は、クエリとなる指定された検索範囲の情報をアノテーション処理装置２１８やアノテーション管理部２１０に通知する。
【０１７１】
アノテーション処理装置２１８は、検索を要求された文書やその他の関連した情報がアノテーション管理部２１０のアノテーションＤＢ２１６や文書管理部２２０の文書ＤＢ２２４、あるいはアノテーション処理装置２１８に登録済みか否かを検索し、該当品がある場合にはその検索結果を表示側へ送る。
【０１７２】
アノテーション処理装置２１８の一構成例は図１５（Ｂ）に示される。このブロック図により、アノテーションを用いた検索処理や情報提供処理を利用して、複数のユーザ間で情報の共有を可能にする機能が具体的に示されることとなる。
【０１７３】
図１５（Ｂ）に示すように、アノテーション処理装置２１８は、文書ごとに、アノテーション検出部１０７（図１参照）により取得されたアノテーション付与情報を複数のユーザについて登録する登録部５４２と、検索要求指定部５００から通知された検索範囲の情報と登録部５４２に予め登録されている複数のユーザについてのアノテーション付与部分情報とを比較することで、検索範囲として指定された部分の情報に関連し且つ他ユーザと関わりのある関連情報の検索条件を決定する検索条件決定部５４４と、検索条件決定部５４４により決定された検索条件に合致する情報を検索する検索部５４６と、検索部５４６により検索された検索結果を関連情報として提示する関連情報提示制御部５４８とを備える。
【０１７４】
検索部５４６は、指示ユーザにより指定された検索範囲部分のテキスト（対象文字列）の位置とほぼ同一位置にアノテーションを付した他ユーザによる、そのアノテーションが付与された部分の情報と直接的に関連する（指示ユーザとは直接的には関係しない）情報を検索する。
【０１７５】
たとえば、指示ユーザが検索範囲として指定した位置とほぼ同一位置にアノテーションを付した他ユーザによる、そのアノテーションが付与された部分の情報と直接的に関連する（指示ユーザとは直接的には関係しない）文書情報を検索する。また、指示ユーザと同一もしくは類似する視点または興味を有するユーザに関する情報を検索する。このときには、登録部５４２に登録されている情報を参照する。
【０１７６】
また、指示ユーザが検索範囲として指定した位置とほぼ同一位置にアノテーションを付した他ユーザの視点または興味に関する情報を検索する。この場合にも、登録部５４２に登録されている情報を参照する。このとき、関連情報の検索を指示したユーザが指定した検索範囲により示される対象文字列と、ほぼ同一位置の他ユーザによるアノテーションにより示される対象文字列との差を他ユーザの視点または興味に関する情報とする。このとき、検索部５４６は、他ユーザのアノテーションに関しての検索をアノテーション管理部２１０に指示する。
【０１７７】
なお、文書中のアノテーションが付与された部分の情報（たとえばテキストや画像に埋め込まれている参照情報など）と直接的に関連する文書情報やアノテーションに関しての検索を文書管理部２２０に指示してもよい。
【０１７８】
図１６は、第３実施形態の情報検索表示処理システム７におけるアノテーション処理（特に他ユーザに関連する情報の提供処理）の手順を示す概略図である。以下では、検索範囲を指定する行為を自らの興味あるいは視点を表出するものと捉え、この検索範囲の指定（行為とそれ自体および対象文字列）を通じて興味の近さや視点の違いを知るための操作および機能について説明する。
【０１７９】
ステップＳ２００；
ユーザは、文書ビューア１０２の文書表示エリア１０４に表示された文書を読みながら、アノテーションデバイス１７０を用いて、興味を引く語句や文書を特徴づけている語句にアノテーションを付与する。文書ビューア１０２は、文書に付与されたアノテーションの位置や属性を検出し、この検出したアノテーションの位置や属性の情報をアノテーション管理部２１０に送る。
【０１８０】
アノテーション管理部２１０は、このアノテーションの位置や属性の情報を、アノテーションサーバ２１２を介して図５や図９に示したようにアノテーションＤＢ２１６に登録する。このとき、文書ビューア１０２は、文書ＩＤについて、文書ビューア１０２に表示されている文書ＩＤを属性として送付する。アノテーションサーバ２１２は、文書ビューア１０２から受け取った文書ＩＤとアノテーション位置の情報をアノテーション処理装置２１８に渡す。
【０１８１】
ステップＳ２０２；
これを受けて、アノテーション処理装置２１８は、アノテーションＤＢ２１６の登録情報に基づき、指定された検索範囲と同じような位置にアノテーションを付与した他のユーザすべてに対して、同一文書内のアノテーション位置を検索してそれらの対象文字列の集合を得る。つまり、アノテーション処理装置２１８は、このような処理を複数のユーザから受け付け、データベースを構築する。たとえば、アノテーション処理装置２１８は、以下のような要素からなるリスト（以下関連ユーザリストともいう）を作成する。
【０１８２】
ａ）同一文書で同一位置に１つでもアノテーションを付与したユーザのリスト、ｂ）アノテーション位置（アノテーションが付与された部分を特定する矩形の位置）のリスト（上記全ユーザ分）、
ｃ）対象文字列のリスト（上記全ユーザ分の）。
【０１８３】
ステップＳ２０４；
また、ユーザは、自分と興味や視点の近い他のユーザが付与したアノテーションに関わる情報を知りたいときには、たとえば矩形枠で指示するなど、アノテーション以外手法にて、今着目したい場所を検索範囲として指定する。アノテーション処理装置２１８は、検索範囲とともに検索指示をあるユーザから受け付けると、検索範囲内の対象文字列の情報を文書管理部２２０に送付する。
【０１８４】
文書管理部２２０の文書サーバ２２２は、この対象文字列をクエリとして、そのクエリに合致する文書を文書ＤＢ２２４から検索し、アノテーション処理装置２１８を介し、その検索リストをアノテーション処理装置２１８を介して文書ビューア１０２に返す。このとき、文書サーバ２２２は、検索リストとしてリストアップされた文書本体の格納先（ＵＲＬ）の情報をリンクとして付加しておく。
【０１８５】
また、アノテーション処理装置２１８は、検索指示を受け付けると、検索範囲内の対象文字列を参照して前述の関連ユーザリスト作成を実行するとともに、検索範囲内の対象文字列と登録済みのアノテーション情報とを比較する。この対象文字列の比較により興味の近いユーザを推定することができる。また、対象文字列の差分を求めることで、他のユーザの視点（自分の視点との差異）を得ることができる。
【０１８６】
ここで、対象文字列の比較は、たとえば、対象文字列からキーワード（たとえば、固有名詞）を抽出し、キーワードベクトルの比較による類似度計算によって類似度を計算し、ある閾値を境に類似しているかどうかを判定する。類似度計算の手法としては、たとえば、ＴＦ（Term Frequency）法やＩＤＦ（Inverted Document Frequency ）法、あるいはＴＦ法とＩＤＦ法とを組み合わせたＴＦ／ＩＤＦ法などを利用すればよい。
【０１８７】
次に、アノテーション処理装置２１８は、対象文字列の差分の情報を文書サーバ２２２に渡す（Ｓ２１０）。これを受けて、文書サーバ２２２は、文書ＤＢ２２４内の対象文字列の差分に関連する文書を検索する（関連文書検索という）。この関連文書検索の手法は何れの手法であってもよいが、たとえば“Ｎａｍａｚｕ”などの公知の全文検索エンジンを使用することができる。
【０１８８】
文書サーバ２２２は、検索結果の情報をアノテーション処理装置２１８に渡す（Ｓ２２０）。アノテーション処理装置２１８は、この関連情報の検索結果と関連ユーザリストとを元に、文書ビューア１０２に以下のような情報のうちの少なくとも１つを返す（Ｓ２３０）。
【０１８９】
ａ）興味の近いユーザのリスト、
ｂ）他のユーザの視点（対象文字列の差分）、
ｃ）関連文書の情報（関連文書の検索リスト）。
【０１９０】
このとき、アノテーション処理装置２１８（文書サーバ２２２でもよい）は、関連文書の検索リストとしてリストアップされた文書本体の格納先（ＵＲＬ）の情報をリンクとして付加しておく。
【０１９１】
このように、第３実施形態の検索手法によれば、検索を希望する文字列にアノテーションを付与して検索指示を発することに代えて、興味のある部分（読みたい部分）を矩形枠などで指定して検索指示を発する。こうすることで、指定された検索範囲内の対象文字列のみをクエリにして検索するのではなく、その対象文字列と同じような位置にアノテーションを付与した他ユーザの視点をも加味した検索結果や同様な検索視点の他ユーザに関する情報がそのユーザに提示されることになる。
【０１９２】
この結果、以下のような効果が得られる。
（１）各ユーザについて得られた対象文字列の集合同士を比較することで、その文書に対する興味の近さを推定し、興味の近いユーザのリストを提示することができる。
【０１９３】
（２）他のユーザのアノテーションから得られた対象文字列と指定した検索範囲内の対象文字列との差分を求め、他のユーザの視点を得ることができる。これら興味の近さおよび対象文字列の差分は、興味の近いユーザ名あるいはそのユーザの視点による文書の別な解釈としてユーザに提示することができる。
【０１９４】
（３）対象文字列の差分は、それに近い内容を持つ別の文書の検索に利用することができる。
【０１９５】
（４）さらに、検索の結果得られた文書に付与されているアノテーションから、そのアノテーションを付与した他ユーザを検索することも可能である。この結果、対話的かつ網羅的に複数の文書を扱うことが容易となる。
【０１９６】
つまり、あるユーザの視点に立ったテーマ、話題、あるいは興味に基づく検索対象文字列をトリガとして、この対象文字列に直接に関係する文書情報だけでなく、そのユーザの視点と類する視点を持つ他ユーザによる対象文字列に直接に関係する（元のユーザにとっては直接的でない）文書情報をも取得できるようになる。
【０１９７】
換言すれば、自己の視点や興味の範囲だけでなく、あるユーザの視点と同様もしくは類似する視点を持つ他ユーザが得るであろう情報まで検索範囲を広げることができる。個性の違いがあっても、似通った視点や興味などを持つ他人の情報を加味して、自分の視点や興味などと「ちょっと違う」範囲にまで情報検索範囲を拡張することができる。そして、このことが、複数のユーザ相互になされることで、結果として、それぞれが持つ（あるいは持つであろう）情報を相互に共有することができるようになり、複数のユーザの間で情報の共有を実現することができるようになる。
【０１９８】
これにより、自己の視点だけでは得られない情報であって、自己の視点と類似する他ユーザの視点から得られる情報についても、自己の知識として得ることができる。つまり自己の持っていない知識を他人が持っている知識で補い合うことができ、知識（知的な情報）の共有を実現することができる。
【０１９９】
また、検索結果だけでなく、あるユーザの視点と同様もしくは類似する視点を持つ他ユーザに関する情報についても通知することで、自己と他人との興味の近さや視点の違いを知ることもできる。
【０２００】
たとえば、自分はある文書を見始めたばかりで、読んでいる最中にある場所に検索範囲を指定したとする。またこのとき、自分が指定した範囲（指定位置）と同じような所に他人が既にアノテーションを付していたとする。そしてこの場合、その他人は既に文書を読み進めており、指定位置以降にも多数のアノテーションを付していたとする。
【０２０１】
このような場合、第３実施形態の構成では、自分が指定した指定位置の文字列をトリガとして、指定位置と同じような位置にアノテーションを付した他ユーザに関する情報がその自分に通知される。このとき、他人がその文書に付したアノテーションの情報を知ることができる。たとえば、他人が付したアノテーションを表示させることで、他人が先読みし印を付した箇所だけを読み進めることで、速読ができ、また、文書の内容を素早く理解することもできる。
【０２０２】
このように、第３実施形態の構成では、検索を希望する部位をアノテーション以外の手法にて範囲指定するだけで他ユーザに関する情報が自動的に通知される仕組みとしているので、これらの情報に簡易にアクセスすることができる。
【０２０３】
組織やグループで情報を共有する手段として、従来よりデータベースを用いたクライアントサーバ型のシステムが用いられている。データベースを用いたクライアントサーバ型のシステムでは、予め設定したデータベーススキーマに従って、データベースサーバに情報を保存しておき、クライアントアプリケーションからＳＱＬ（Structured Query Language ）などのデータベースアクセス言語を用いてデータベースへの問い合わせや情報の格納を行なうことで、情報の共有を図っている。
【０２０４】
しかしながら、データベースを用いたクライアントサーバ型のシステムでは、設定したスキーマに適合する情報以外の情報が扱えないという欠点があった。また、システムを構成するデータベースの数や所在は固定的であり、新たなデータベースを追加することは困難であった。このため、扱う情報の種類が増えたり変化したりする状況に対応する事が極めて困難であった。
【０２０５】
このような問題点に対処する手法として、ときの状況や扱う情報の種類によって、同一の情報管理装置が情報の提供者にも情報の消費者にもなり得るようにすることで、情報の共有を実現する仕組みが考えられている。
【０２０６】
たとえば、情報管理装置が管理する情報内容を考慮して、類似の情報を持った情報管理装置で構成されるクラスタを構成するシステムが提案されている。特開平１０−３０１９０５号公報には、同じようなテーマ、話題、興味を持った者同士での、情報共有を実現する仕組みが提案されている。
【０２０７】
この特開平１０−３０１９０５号公報に記載の手法では、情報管理装置間の局所的な関係を用いて、大域的な関係を合成することによって情報の共有を実現するようにしている。すなわち、２つの情報管理装置間の繋がりを表す意味、さらには、繋がりの重みを持ったパイプ情報の集合を管理するパイプ管理手段と、ユーザからの要求や他の情報管理装置からの要求に対して、パイプ管理手段が管理するパイプ情報から適するパイプ情報を検索するパイプ検索手段と、検索された複数のパイプ情報を合成して新たなパイプ情報を生成するパイプ合成手段とを備えた構成としている。
【０２０８】
これにより、ユーザからの要求（他の情報管理装置からの要求）があった場合に、パイプ管理手段から要求に合致するパイプ情報をパイプ検索手段により検索して適切なパイプ情報を選択し、必要な情報管理装置とのコミュニケーションを可能にしている。さらに、必要に応じてパイプ合成手段が複数のパイプ情報を合成することにより、要求に適するパイプ情報を生成し、必要な情報管理装置とのコミュニケーションを可能にしている。
【０２０９】
パイプの生成と更新は、電子メールシステムなどの情報交換をモニタリングし、コミュニケーションを検出することによって、同じ興味のある人同士を特定することで行なう。たとえば、メールの送受信からキーワードを検出して共通の関心を持った人同士の繋がりを「パイプ」として管理し、さらに複数のパイプを合成することで直接繋がりがなかったが、共通の関心を持った人とのパイプを構築する。そして、これに基づいてデータベースの相互利用を可能とすることで、同じようなテーマ、話題、興味を持った者同士での、情報共有を実現している。
【０２１０】
一方、情報を共有するという点では、知識（知的な情報）の共有、つまり自己の持っていない知識を他人が持っている知識で補い合うということもポイントとなる。
【０２１１】
しかしながら、特開平１０−３０１９０５号公報の発明をはじめとする従来の「情報の共通」の考え方は、専ら、情報源であるデータベースの共有に主眼をおいたもので、個人ベースでの情報共有（知識の共有）という点では難がある。すなわち、特許文献１などの情報共有の手法は、「複数の情報管理装置間」で相互に情報を提供し合うことによって情報の共有を実現するもので、これは、情報提供源の“マス（桝）”を拡張することで、提供可能な情報の量や数を増やす点に主眼をおいている。
【０２１２】
したがって、特開平１０−３０１９０５号公報などの情報共有の手法では、個人ベースでの情報共有、換言すれば、複数の個人が持つ知識を共有し合うということの解決にはならない。
【０２１３】
たとえば、自分と同じような興味を持っている他人が知っている情報であって、その自分が有していない情報を知りたい場合があるが、特許文献１などの従来の手法では、それができない。このような、自分は有していないが他人が有する（あるいは有するであろう）情報にアクセスしようとすれば、自分は有していないが他人が有する情報が何であるかを自らがサーチし、その情報にアクセスする必要があるが、実際にはそのようなことは難しい。
【０２１４】
これに対して、上記第３実施形態の構成によれば、同じようなテーマ、話題、あるいは興味などを持った者同士で、自分は有していないが他人が有する（あるいは有するであろう）情報に簡易にアクセスすることが可能になる。
【０２１５】
＜＜コンピュータ利用の構成＞＞
なお、上述したアノテーションを利用することで効率的な情報検索処理を進める一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ（組込みマイコンなど）、または、各種のプログラムをインストールすることで各種の機能を実行することが可能な汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【０２１６】
この記録媒体は、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（ＣＤ−ＲＯＭ（Compact Disc-Read Only Memory ）、ＤＶＤ（Digital Versatile Disc）を含む）、光磁気ディスク（ＭＤ（Mini Disc ）を含む）、もしくは半導体メモリなどよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供されてもよいし、プログラムが記録されているＲＯＭやハードディスクなどで構成されてもよい。あるいは、ソフトウェアを構成するプログラムが、通信網を介して提供されてもよい。
【０２１７】
図１７は、上述した情報検索表示処理システム７を、コンピュータにより構成する場合のシステム構成の概略を示した図である。このようなコンピュータシステムの基本構成は、ハードウェア層９１０、ＯＳ（Operating Systems ）層９２０、文書情報管理層９３０、ユーザインタフェース層９４０という４つの層から成り立っている。各層は独立性が保たれており、層ごとに機能を拡張したり別のものに交換することが容易になっている。
【０２１８】
ハードウェア層９１０は、図１で示したシステム構成に相当するもので、たとえば、文書ビューア１０２に対応するタブレット９１１、アノテーションデバイス１７０に対応するペン入力装置９１２、操作ボタン１１０に対応するボタン９１３、およびネットワーク９に対応する通信ネットワーク９１４からなる。なお、たとえば音声入出力インタフェース９１５など、その他の仕組みを設けてもよい。
【０２１９】
文書情報管理層９３０は、文書管理部２２０に対応し文書本体の管理を担当する文書層９３２、アノテーション管理部２１０に対応しアノテーションなどの文書本体に付加される付加情報の管理を担当するワークスペース９３４、およびアノテーションなどを利用して情報検索を行なう情報検索層９３６からなる。
【０２２０】
ユーザインタフェース層９４０は、文書ビューア１０２やアノテーションデバイス１７０に対応しユーザからの入力を管理するユーザ入力管理層９４２、文書表示エリア１０４における情報表示に関わる画面層９４４、およびマネジャ部１８０に対応し文書表示エリア１０４の表示動作を管理する画面マネジャ９４６からなる。
【０２２１】
このようなシステム構成においては、たとえば前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムに供給し、そのシステムのコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによって、上記実施形態で述べた効果が達成される。
【０２２２】
この場合、記憶媒体から読出されたプログラムコード自体が前述した実施形態の機能を実現することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステムＯＳなどが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される場合であってもよい。
【０２２３】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によって前述の実施形態の機能が実現される場合であってもよい。
【０２２４】
なお、上記実施形態で述べた処理を実現するプログラムコードを記述したファイルとしプログラムが提供されるが、この場合、一括のプログラムファイルとして提供されることに限らず、システムのハードウェア構成に応じて、個別のプログラムモジュールとして提供されてもよい。
【０２２５】
たとえば、図１に示したシステム構成では、クライアントシステム１００とサーバシステム２００とがネットワーク９で接続された形態であるので、表示に関する処理プログラム（たとえばページ捲り時や検索結果を反映した強調表示機能用の処理プログラム）は、クライアントシステム１００側の装置に向けて、クライアントシステム用モジュールとして提供されるのがよい。一方、アノテーションの管理や検索に関する処理プログラムは、サーバシステム２００側の装置に向けて、サーバシステム用モジュールとして提供されるのがよい。また、サーバシステム用モジュールは、さらに、サーバシステム２００を構成する各管理部の構成に応じて、一括ファイルもしくはサブモジュールファイルとして提供されてもよい。
【０２２６】
また、図１に示したシステム構成では、クライアントシステム１００とサーバシステム２００とがネットワーク９にて接続されているが、これらは近接した場所に配置されてもよい。この場合、クライアントシステム１００のマネジャ部１８０をサーバシステム２００（その全体あるいはその一部）と一体化させてもよい。
【０２２７】
また、上述の説明では、文書ビューア１０２がマネジャ部１８０を収容した本体（クレードル／ドッキングステーション）と別体であるものとして説明したが、上記実施形態で説明したマネジャ部１８０内の機能部分を文書ビューア１０２と一体化させてもかまわない。
【０２２８】
以上、本発明を実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記実施形態に多様な変更または改良を加えることができ、そのような変更または改良を加えた形態も本発明の技術的範囲に含まれる。
【０２２９】
また、上記の実施形態は、クレーム（請求項）にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組合せの全てが発明の解決手段に必須であるとは限らない。前述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜の組合せにより種々の発明を抽出できる。実施形態に示される全構成要件から幾つかの構成要件が削除されても、効果が得られる限りにおいて、この幾つかの構成要件が削除された構成が発明として抽出され得る。
【０２３０】
たとえば、上記実施形態では、検索部により検索されたアノテーションなどの付加情報を、表示デバイスである文書ビューア１０２の文書表示エリア１０４に表示されている閲覧中の文書に重ねて表示させるようにしていたが、検索結果の情報の提示手法は、必ずしもこのようなものに限らない。たとえば、文書ビューア１０２上に、文書本文を表示する文書表示エリア１０４とは別にパレット表示エリアを設け、このパレット表示エリアに検索結果を一覧表示（リスト表示）するようにしてもよい。
【０２３１】
この場合、アノテーションが付加されたテキスト部分を一覧表示するとともに、この一覧表示から文書本文中のアノテーションが付与された場所を参照可能とするリンク機能をもたせるようにしてもよい。また、この一覧表示は、文書本文にアノテーションが付与された状態でその部分（その周辺を含んでいてよい）を切り出した画像として提示してもよい。この場合、一覧表示だけで、アノテーションが付与された部分だけを素早く読み進めることができる。
【０２３２】
なお、文書本文を表示している文書ビューア１０２とは別に検索結果を提示する専用の提示デバイスを用意してもよい。たとえば、専用の表示デバイスに、アノテーションが付与された部分だけを一覧表示する、あるいは、プリンタにて、アノテーションが付与された部分だけを、一覧形式で印刷出力するなどである。
【０２３３】
また、システムを構築する上で、各機能要素をどの部分で分けてクライアントシステム１００とサーバシステム２００とに振り分けるかは、上述した実施形態のものに限定されない。システムを構成する上で、都合のよい部分にて分ければよいのはいうまでもない。また、逆に、クライアントシステム１００とサーバシステム２００とを一体化させたシステム構成としてもよい。たとえば、電子会議システムに利用する場合、会議進行を管理する者（たとえば議長）が使用する端末として、この一体化させたものを使用し、他の会議参加者が使用する端末として、上述通りの構成のクライアントシステム１００を使用するシステム構成とすればよい。
【０２３４】
【発明の効果】
以上のように本発明によれば、アノテーションなどの電子付箋（付加情報）を介して検索処理を行なう際に、閲覧中の文書内に所定の方法により検索対象範囲を指定し、この指定された検索範囲内に予め他ユーザにより付与されている電子付箋をクエリとして検索処理を進めるようにしたので、ある特定の人物を直接に指定する場合よりも、効率的な検索処理を行なうことができる。。
【０２３５】
たとえば、特定の人物のアノテーションを再現するのではなく、特定の視点で付与されたアノテーションを再現することができる。より具体的には、自分がある視点である文書を読む場合に、既に同一の視点で他者がその文書を読んでおり、アノテーションを付与している場合、その他者のアノテーションを再現することにより、同一の視点で付与されたアノテーションを得ることができ、検索を指示したユーザは、そこに目を通すことにより、興味ある情報を素早く得ることができる。
【図面の簡単な説明】
【図１】本発明に係る情報検索表示処理方法および情報検索表示処理システムを適用した電子会議システムの構成例を示す図である。
【図２】情報表示処理装置の一実施形態である文書ビューアの表示面側に着目した外観図である。
【図３】文書ビューアとマネジャ部の機能ブロック図である。
【図４】文書サーバおよび文書データベースの構成例を示す図である。
【図５】アノテーションサーバおよびアノテーションデータベースの構成例を示す図である。
【図６】文書データベースの具体的な構成例を示す図である。
【図７】文書にアノテーションを付与した状態の表示例を示す図である。
【図８】アノテーションサーバへ送る情報の一例を示した図である。
【図９】アノテーションデータベースの登録例を示した図である。
【図１０】アノテーションを利用した情報検索機能に着目した第１実施形態の情報検索表示処理システムのブロック図である。
【図１１】図１０に示した情報提供処理システムにおける情報検索処理の手順を示す概略図である。
【図１２】検索指示を発するユーザが文書に付したアノテーションの一例を示す図である。
【図１３】検索要求が発せられたときにクライアントシステム（文書ビューア）からアノテーション管理部（アノテーションサーバ）へ通知される情報の一例を示す図である。
【図１４】第２実施形態の情報検索システムのブロック図である。
【図１５】複数ユーザ間で情報の共有を可能とする機能に着目した第３実施形態の情報検索システムのブロック図である。
【図１６】図１５に示した情報検索表示処理システムにおける他ユーザに関連する情報の提供処理の手順を示す概略図である。
【図１７】情報検索表示処理システムを、コンピュータにより構成する場合のシステム構成の概略を示した図である。
【符号の説明】
１…電子会議システム、７…情報検索表示処理システム、９…ネットワーク、１００…クライアントシステム、１０１…表示処理部、１０２…文書ビューア、１０３…液晶表示パネル、１０４…文書表示エリア、１０６…付加情報付与部、１０７…アノテーション検出部（付加情報付与部分情報取得部）、１０９…筐体、１１０…操作ボタン、１１４…文書読込みボタン、１１６…保存ボタン、１１８…検索ボタン、１２０…更新ボタン、１２２…ページ捲りボタン、１２２ａ…前ページ送りボタン、１２２ｂ…次ページ送りボタン、１２４…強調表示ボタン、１２６…ユーザ表示ボタン、１３０…コントローラ、１３２…ページ送り指示受付部、１４０…ページ画像生成部、１５０…表示輝度制御部、１５０ａ…コントラスト制御部、１５０ｂ…ブライトネス制御部、１７０…アノテーションデバイス、１８０…マネジャ部、１８２…ログファイル格納部、１８４…強調語／センテンス特定部、１８６…強調語／センテンス選択手法指示部、１８８…強調指示制御部、２００…サーバシステム、２１０…アノテーション管理部、２１２…アノテーションサーバ、２１６…アノテーションＤＢ、２２０…文書管理部、２２２…文書サーバ、２２４…文書ＤＢ、５４４…検索条件決定部、５４５…検索処理部、５４６…検索部、５５０…アノテーション提示制御部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an information search and display processing method and an information search and display processing system used in a system having a function of displaying a document on a display device, and an information search and display processing method and an information search and display processing system using a computer. Related to a program for realizing. In addition, the present invention relates to a client terminal and a management server that constitute the information search and display processing system. More specifically, the present invention relates to a technique for performing information search using tags attached to an electronic document by a plurality of users.
[0002]
[Prior art]
When a person reads a document, it is natural to use a writing instrument such as a pen or a marker while giving a memo or an annotation while reading the document. The location where the notes and annotations are given is likely to be of some interest to the reader.
[0003]
The same happens when dealing with electronic documents. For example, visualization information (electronic sticky notes), such as memos, messages, or annotations, added to the body of the electronic document is attached as additional data to the body of the electronic document so as not to affect the body of the electronic document. Technology is widely used.
[0004]
For example, in an electronic conferencing system in which a plurality of users can participate in a conference via a terminal screen by connecting a plurality of terminal devices via a communication network, various technologies have been proposed which allow a participant to share a document. (For example, see Patent Document 1).
[0005]
[Patent Document 1]
JP-A-7-84905
[0006]
Here, the addition of an electronic tag such as an annotation to a document displayed on the terminal screen is also performed by the electronic conference system. For example, electronic sticky notes such as memos and annotations can be input to a document (digitized material) displayed on a terminal screen by using a pen-type pointing device or by handwriting input by directly touching the touch panel with a fingertip. May be written on the display screen.
[0007]
According to the function of the electronic sticky note, the participant of the conference can independently add and correct from each terminal, and can easily input additional information without hindering his / her thinking. This handwritten information can also be displayed on the terminal screen of another participant. As a result, it is possible to input an opinion or idea from each terminal device or take a hard copy thereof. That is, by digitizing a document or using a network, it is possible to share annotations (underline, marking, writing of characters, and the like) given to a document displayed electronically.
[0008]
In addition, using the state of an electronic tag such as an annotation attached to a part of a certain document as a query (search condition), an electronic tag of a document already attached at the same position can be reproduced as a search result. It is considered that the position where the electronic sticky note is attached is a position of some interest to the reader. By reproducing an electronic sticky note previously given by another person or oneself, a position of interest given by another person or oneself can be known.
[0009]
If you know which person has what characteristics, annotation of a specific person is meaningful, but if an unspecified number of people share documents and annotations, annotation of unknown people Does not make much sense.
[0010]
Patent Literature 2 proposes a method in which annotations given to an electronic document are managed for each person to which the annotations are given, and an annotation given by the person is reproduced by designating a specific person. . If it is desired to know the interest of a specific person, a response can be taken by the method described in Patent Document 2.
[0011]
[Patent Document 2]
JP-A-9-62676
[0012]
[Problems to be solved by the invention]
On the other hand, it may be more effective to reproduce an annotation given from a specific viewpoint than to reproduce an annotation of a specific person. For example, if you read a document from a certain viewpoint, another person has already read the document from the same viewpoint, and if you have annotated, the other person in the same viewpoint as you is paying attention Sometimes you want to know a point quickly.
[0013]
However, the method described in Patent Literature 2 is a method of designating a specific person as a search condition, and thus cannot meet such a request. Therefore, information search cannot be efficiently performed. This is because it is only possible to specify another person, and cannot specify another person having the same viewpoint as the user.
[0014]
The present invention has been made in view of the above circumstances, and an information search display processing method and an information search display processing method capable of efficiently performing information search using additional information added to a document such as an annotation. It is an object of the present invention to provide an information retrieval and display processing system applying the method. Another object of the present invention is to provide a client terminal and a management server that constitute the information search and display processing system. Another object of the present invention is to provide a program for realizing the above method and system using a computer.
[0015]
[Means for Solving the Problems]
That is, the information search and display processing method according to the present invention has a function of adding additional information that can be managed separately from the document displayed on a predetermined display device, and relates to the document via the additional information. An information retrieval display processing method for retrieving information, wherein information of an additional information added portion to which additional information is added is managed in association with a document, and is associated with a search target portion in the document specified by a predetermined method. When instructed to perform a search process for related information, a search process is performed for related information that is related to another user by comparing the search target portion with the information of the additional information provision portion that is managed in advance. .
[0016]
An information search and display processing system according to the present invention is a system for performing the information search and display processing method according to the present invention, and further includes an additional information adding unit that adds additional information to a document displayed on a predetermined display device. An additional information adding section detecting section that obtains information of an additional information adding section in the document to which the additional information is added by the additional information adding section; and a document that stores the additional information adding section obtained by the additional information adding section detecting section. A registration unit for registering a document in association with a search area, a search range setting unit for receiving a specification of a search target portion in a document being viewed by a user who is browsing the document by a predetermined method, and a search target portion received by the search range setting unit and registration. By comparing with the information of the additional information added part registered in the section, the related information related to other users different from the user who is viewing the document It was assumed and a retrieval processing unit for running the search process to present the search results to a predetermined presentation medium.
[0017]
The client terminal and the management server according to the present invention constitute the information search and display processing system according to the present invention. Further, the invention described in the dependent claims defines further advantageous specific examples of the information search / display processing system or the client terminal or the management server according to the present invention.
[0018]
For example, the search processing unit may search the additional information of the part indicated by the search target part as the related information itself, which is the additional information given by another user. In this case, the search processing unit obtains a similarity between the additional information provided by the user who is browsing the document and the additional information provided by the other user with respect to the additional information provided by another user obtained as a search result. Preferably, additional information provided by another user whose similarity is higher than a predetermined level is searched for as related information.
[0019]
Further, the program according to the present invention is suitable for implementing the information search and display processing method and the information search and display processing system according to the present invention by software using an electronic computer (computer). The program may be provided by being stored in a computer-readable storage medium, or may be distributed via a wired or wireless communication unit.
[0020]
[Action]
In the above configuration, first, when additional information is added to a document, the position in the document to which the additional information is added is associated with the additional information or the document to which the unacceptable information is added as related information. Stored in a predetermined registration unit (database).
[0021]
Then, when a request for a search process using the additional information is received, first, a designation of a search range in the document being viewed is received by a predetermined method. Then, by using the position of the additional information provided within the designated search range, related information related to additional information provided by another person having a viewpoint similar to that of the user is searched. As a result, another person having a viewpoint similar to his / her own viewpoint is specified indirectly. Then, it is relevant information related to additional information given by another person from the same viewpoint as yourself, such as additional information given by another person or a query derived from a phrase in the document being viewed indicated by the additional information. Find another document to do.
[0022]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[0023]
FIG. 1 is a diagram showing a configuration example of an electronic conference system to which an information search and display processing method and an information search and display processing system according to the present invention are applied. As the scene setting of the electronic conference in this example, an electronic document-based meeting such as a development start proposal and an international technical standardization meeting is assumed.
[0024]
As electronic documents, for example, in the case of a proposal to start development, similar documents such as specifications related to the predecessor (previous models for the target model such as the current model), market trouble reports, technical standard documents of the support department, etc. There are many. In a technical standardization meeting, related documents such as a similar technical standard book and a mailing list for the same technology exist around the document.
[0025]
Participants in the electronic conferencing system may be, for example, participants, chairpersons, recorders, etc., which are representatives of organizations that influence decisions or are affected by decisions.
[0026]
In the electronic conference system, for example, one of the representatives puts together a proposal and distributes materials in advance. Then, before the meeting, the participants and the chair can read the material and add electronic sticky notes such as handwritten annotations on the display screen. Also, while the meeting is in progress, the organization's representatives can share the context with the stakeholders in the back office using annotations, and can coordinate departmental views in real time while communicating with each other.
[0027]
Here, in the flow of the conference in the electronic conference system, for example, the following can be considered as a scene involving sharing of electronic sticky notes such as handwritten annotations.
* Read distributed materials before the meeting and write annotations.
* Annotate while listening to the explanation.
* In a Q & A session, quickly search for questions and respond to questions based on annotations.
* Search past related documents.
* Ask your colleagues during the meeting.
* Discussion sessions.
* Adoption and opinion gathering sessions.
* Confirmation session.
* Minutes preparation.
* Report the meeting to members of the group.
* Discover professionals through meetings and discover diverse perspectives.
[0028]
<< Outline of system configuration >>
Next, the configuration of the electronic conference system shown in FIG. 1 will be described. The electronic conference system 1 includes a client system 100 used by the participants of the electronic conference and electronic data (not only document data but also all other electronic information necessary for the conference) used in the electronic conference system 1. And a server system 200 for processing the same. Each functional element constituting the client system 100 and the server system 200 is connected by a wired (wireless) or wireless network (communication network) 9.
[0029]
The client system 100 is provided for each participant in the conference. In the illustrated example, two sets are illustrated, but the number is not limited to two. Note that one set is used by one user. This is for associating the terminal with the user on a one-to-one basis on the assumption that the user of the terminal is determined in advance. By providing a profile server or profile DB for storing and retrieving personal profiles and providing a mechanism for identifying a user who uses the terminal, a single set (terminal) may be shared by a plurality of persons.
[0030]
The client system 100 includes a document viewer 102 (102a and 102b in the figure) for displaying an electronic document, and an annotation device 170 (for annotating an example of additional information) to the electronic document displayed on the document viewer 102. In the figure, 170a and 170b), and a manager section 180 (180a and 180b in the figure) for storing a history of screen operations and controlling the document viewer 102. The document viewer 102 and the annotation device 170 constitute an additional information adding unit 106 (106a and 106b in the figure) and an annotation detecting unit (additional information adding partial information acquiring unit) 107 (107a and 107b in the figure). Further, the additional information adding unit 106 and the annotation detecting unit 107 constitute a search range setting unit.
[0031]
The document viewer 102 is freely attachable to a main body (cradle / docking station) not shown. As the document viewer 102, for example, a display such as a CRT or a liquid crystal (LCD) used for a personal computer or the like, or a device imitating paper (for example, a tablet PC) may be used. Note that the document viewer 102 may be configured as a large tablet about the size of a whiteboard.
[0032]
The annotation device 170 preferably has a function of enabling handwriting input. For example, an input device such as a pen-shaped device may be used. In the case of a pen-shaped device, it is assumed that both the document viewer 102 and the annotation device 170 have a mechanism for detecting an instruction input so that, for example, in the case of a detection mechanism of an electromagnetic induction method, both the document viewer 102 and the annotation device 170 can direct an instruction on the display surface. . Further, a touch panel method may be adopted. Further, the annotation device 170 is not limited to a pen-type device, and may use an input / instruction device such as a mouse or a keyboard.
[0033]
The manager unit 180 has a log file storage unit 182 (182a, 182b in the figure) for storing a document browsing history and an annotation history (log file). The manager unit 180 is provided with a functional unit that implements a display method (highlighting function in this example) specified by the reader (see FIG. 3 described later).
[0034]
The server system 200 is an example of an additional information management unit and includes an annotation management unit 210 that manages log files and annotations, and a document management unit 220 that manages electronic documents.
[0035]
An annotation management unit 210 includes an annotation server 212 which is a server for storing and retrieving annotations attached to a document, and a database (Data Base). The annotation DB 216 registers user information specifying a person who has added additional information such as an annotation to a document in association with the additional information.
[0036]
The document management unit 220 has a document server 222 which is a server for storing and retrieving documents, and a document DB 224 which is a database for storing documents and attribute information associated therewith.
[0037]
By providing the document management unit 220 that manages the document body and the annotation management unit 210 that manages additional information such as annotations given to the electronic document, even when each of the distributed materials is independently edited and modified, the It is possible to avoid inconsistencies in the contents when the contents are combined with the original at the end.
[0038]
For example, even if someone adds a supplementary explanation to a certain part of the original, and if someone makes a correction to delete the same part, those edited parts are not included in the document body registered in the document DB 224. Separately, by registering in the annotation DB 216 in association with the document body, information can be managed without inconsistency in the contents of the meeting material body and contents such as corrections to the meeting material body. Further, by referring to the annotation DB 216, it is easy to write out the contents of opinions and discussions given on the spot later.
[0039]
Each of the management units 210 and 220 of the illustrated server system 200 may be a separate unit, or may be housed in the same housing in an arbitrary combination. For example, each server may be configured by a common computer, or may use a common hard disk device as each database. Note that the annotation management unit 210 and the document management unit 220 are collectively referred to as a document information management unit. As the management units 210 and 220, for example, a workstation may be used.
[0040]
<Appearance of Document Viewer>
FIG. 2 is an external view focusing on the display surface side of the document viewer 102 which is an embodiment of the information display processing device. As shown in the figure, the document viewer 102 includes a liquid crystal display panel 103, which is an example of a display device, and operation buttons 110 including various hardware keys housed in a housing 109. It is formed in a single plate having a thickness.
[0041]
The liquid crystal display panel 103 is configured as a panel with a backlight, and is used as a document display area 104 for displaying a document. On the document display area 104, handwriting input (digital ink) is possible with the annotation device 170. The manager unit 180 incorporates a memo writing utility (hardware and application software) corresponding to the digital ink.
[0042]
A controller compatible with digital ink only needs to recognize and process handwritten data as "digital ink (handwritten characters)". It is not necessary to have a character recognition function. Even in this case, it can be handled as the top format of the text, and it is possible to search for the handwritten character as it is and to process the character (color change, etc.). The digital ink data format may be handled as image data (for example, bitmap data).
[0043]
As described above, the document viewer 102 can write and input using the annotation device 170 in the same manner as when underlining or enclosing a document or writing a memo in a desired form when reading a paper document. ing. In addition, since it is formed in a single thick plate, it is easy to place it on the knee or tilt it, for example, at the time of writing, so that it can be set at a position or angle that is easy to read.
[0044]
The information input and written (additional information of the document body) is stored in a storage unit (not shown) in the document viewer 102, sent to the annotation management unit 210 of the server system 200 at a predetermined time, and stored in the annotation DB 216 in correspondence with the document body. It is stored with it. When the document is read out later, the annotations entered in the past are read out together with the document body and displayed in the document display area 104.
[0045]
This makes it possible to exert an effect of visually assisting the memory of the reader regarding the place where the information is written by freely writing the underline, circle, memo, or the like in a favorite shape like paper.
[0046]
For example, in the case of a conference using the electronic conference system 1, it can be used to read distributed materials before the conference and write annotations, or to insert annotations while listening to the explanation contents during the conference. .
[0047]
As the operation button 110, a plurality of hardware keys are prepared. For example, as shown in the figure, a document read button 114 for reading a document stored in the document DB 224 and a save button 116 for saving the annotation drawn in the document display area 104 are provided. The operation buttons 110 include a search button 118 for searching for an annotation stored in the annotation DB 216 and displaying the annotation in the document display area 104, and a previous page forward button 122a and a next page forward button 122b for turning pages back and forth. Page turning button 122. Note that, instead of the hardware key of the operation button 110, a software key for displaying a key button in the document display area 104 may be used.
[0048]
The document viewer 102 displays an image on a liquid crystal display based on data read from a storage medium provided therein or data obtained from a server system 200 (or a Web server) via a network connection function unit (not shown). It is configured to display on the panel 103.
[0049]
In addition, the document viewer 102 has a function of switching the display in units of pages while flipping the book like a book (turning display function). It is configured so that desired information can be quickly retrieved from a large number of information.
[0050]
That is, at the time of information search in the document viewer 102, by operating two page turning buttons (a page turning button 122) such as a previous page turning button 122a and a next page turning button 122b, desired page information is performed while performing a page turning operation. Can be displayed on the liquid crystal display panel 103. Further, when one of the previous page forward button 122a and the next page forward button 122b is continuously pressed, the page can be turned at a high speed. The operation of searching for information is possible.
[0051]
In the flip display, the image contrast, which is the pixel amplitude for driving the liquid crystal element of the liquid crystal display panel 103, and the display brightness (brightness / background luminance), which is the brightness of the entire image, are normally displayed in accordance with the page turning operation. It is configured such that the brightness of the display image on the display device is different from the brightness of the normal state for a predetermined time, thereby facilitating the feature extraction of the entire image. I have.
[0052]
<Document Viewer / Manager>
FIG. 3 is a functional block diagram of the document viewer 102 and the manager unit 180. The document viewer 102 is a liquid crystal display panel 103 which is an example of a display device that displays images in page units, a controller 130 that controls the entire display processing in the document viewer 102, and generates a new page image under predetermined conditions. A page image generation unit 140. The controller 130 includes a page feed instruction receiving unit 132 that receives a page image switching instruction on the liquid crystal display panel 103 via the operation button 110. The page image generation unit 140 generates a new page image on condition that the page feed instruction reception unit 132 receives a page image switching instruction.
[0053]
In addition, the document viewer 102 switches the image on the liquid crystal display panel 103 and switches the brightness of the display image according to a predetermined order on condition that the page feed instruction receiving unit 132 receives the page image switching instruction. A unit 150 is provided.
[0054]
When the page feed instruction receiving unit 132 receives the page image switching instruction, the page image generating unit 140 generates a new page image in the specified direction (either forward or rearward). To the display brightness control unit 150.
[0055]
The display brightness control unit 150 includes a contrast control unit 150a that controls the display contrast of a page image on the liquid crystal display panel 103, and a function unit that controls brightness by controlling the backlight brightness of the liquid crystal display panel 103. And a brightness control unit 150b.
[0056]
The display brightness control unit 150 adjusts the contrast of the page image on the liquid crystal display panel 103 by the contrast control unit 150a or adjusts the brightness of the page image by the brightness control unit 150b. Controls display brightness. The present invention is not limited to both the contrast and the brightness, but may be any as long as at least one of the two is adjusted.
[0057]
When the page feed instruction receiving unit 132 receives a page image switching instruction, the display luminance control unit 150 switches the image on the liquid crystal display panel 103 to a new page image generated by the page image generating unit 140 and sets the display luminance to a predetermined value. A function is provided to slightly change the display from normal display (contrast or brightness status set by the user at that time) for a certain time. This makes it possible to enhance the discrimination ability even when the display is performed while flipping like a book.
[0058]
On the other hand, in addition to the log file storage unit 182, the manager unit 180 captures a target document to be read by the reader from the document DB 224, and specifies an emphasized word / sentence specifying unit 184 that specifies a character or a sentence to be highlighted. An emphasized word / sentence selection method instructing unit 186 for instructing the emphasized word / sentence specifying unit 184 on a character / sentence selection method to be selected, and an emphasis instruction control unit 188 for controlling validity / invalidity (on / off) of a highlighting function. And
[0059]
First, the manager unit 180 selects an emphasized word / sentence specifying method for realizing the method specified by the reader (in this example, the conference participant) in the emphasized word / sentence selection method instructing unit 186, and selects the emphasized word / sentence specifying unit. Instruct 184. The target document to be read by the reader is input to the emphasized word / sentence specifying unit 184. When the highlighting function is turned on, after the word / sentence specifying unit 184 determines how to display a word (word, sentence, or sentence) to be highlighted, the document viewer 102 Image information is sent to the page image generation unit 140 through the controller 130.
[0060]
As the highlighting method, the display is performed by changing the density (contrast / bright), the display is performed by changing the font (type or size), the display is performed by changing the character color, or the background color of the character is changed. Display, or underline or add a solid color.
[0061]
In addition, by using the highlighting function, the effect can be enhanced even in the case where a “flowing reading function” is provided. For example, when skimming through a paper document, the reader may get a general impression of the page or document where important content is likely to appear while browsing for words of interest or words that characterize the document. Doing things. Also in the document viewer 102, by providing the “flowing mode”, it is possible to display important words and phrases that seem to express the meaning well. By following the darkly displayed keywords, the contents of the document can be understood in a short time. The reader can also infer that the area around the darkly displayed phrase is an important part. If you want a deeper understanding, you can read on.
[0062]
Further, it is also possible to display a document linked with automatic generation of a document list using the annotation function. For example, a search is performed on a document stored in the server system 200 by using a word with a mark such as an underline or a circle written by a reader as a keyword. Then, documents in which keywords frequently appear are listed as references. The reader can refer to the document title, the sentence (clip) where the keyword frequently appears, and the page number.
[0063]
When displaying the specified reference, the keyword in the clip (indicating the phrase corresponding to the search condition) is, for example, changed in font type, size or color, underlined (underlined), or underlined. Highlighting such as changing the thickness, coloring like a marker pen, or displaying in dark characters. This makes it possible to quickly understand the contents of the reference document. How to implement these methods is a known technique, and thus the description is omitted.
[0064]
The processing of the emphasized word / sentence specifying unit 184, the emphasized word / sentence selection method instruction unit 186, and the emphasis instruction control unit 188 may be referred to Japanese Patent Application No. 2002-314876 of the present applicant.
[0065]
<Document server / Document database>
FIG. 4 is a diagram illustrating a configuration example of the document server 222 and the document DB 224. The document server 222 receives “registration” and “document reading” according to an external instruction. For example, when the client system 100 detects that the document reading button 114 of the document viewer 102 has been operated, the client system 100 notifies the document server 222 of the document management unit 220 included in the server system 200 of the fact. Thereby, the document server 222 reads the specified document from the document DB 224.
[0066]
Note that “registration” is to be registered indicating an address indicating a storage location of a document in the document DB 224, such as “http://datacenter.company.co.jp/access.cgi?DocumentID=8gjk3cl3”. It is given by a path such as a URL (Uniform Resource Locators) to a document or a path to a directory.
[0067]
The document server 222 sequentially assigns a document ID to the document (group) indicated by the given path, and registers the document name and the document text in the document DB 224. At this time, the data structure in the document DB 224 is, for example, as shown in FIG. The document name or the document body may be a path to the document such as a URL.
[0068]
The document server 222 receives an instruction of “read document” from the document viewer 102. When the document server 222 receives the “read document” instruction, it creates a list of document names in the document DB 224 and returns it to the document viewer 102. Further, the document server 222 receives the document name from the document viewer 102 and sends the corresponding document body back to the document viewer 102.
[0069]
<Annotation server / Annotation database>
FIG. 5 is a diagram illustrating a basic configuration example of the annotation server 212 and the annotation DB 216.
[0070]
The annotation server 212 receives “save” and “search” according to an external instruction. For example, when the client system 100 detects that the save button 116 of the document viewer 102 has been operated, the client system 100 notifies the annotation server 212 of the annotation management unit 210 configuring the server system 200 of the fact. Thereby, the annotation server 212 associates the annotation information instructed to be stored (an example of information representing the characteristics of the additional information) with the document to which the annotation has been added, and stores the annotation information in the annotation DB 216 which is an example of a storage unit. Register (store).
[0071]
For example, the annotation server 212 receives a “save” instruction from the document viewer 102. At this time, the content of the annotation to be saved, the rectangle information of the annotation, the document ID to which the annotation is added, and the terminal ID of the document viewer 102 that has issued the “save” instruction are given.
[0072]
The annotation server 212 saves the given terminal ID, document ID, rectangle information (to be described later in detail), and the content of the annotation in the annotation DB 216 as table data. At this time, the data structure in the annotation DB 216 is, for example, as shown in FIG. The annotation ID is newly added when the combination of the document ID and the terminal ID is new. If not new, the line indicated by the annotation ID is overwritten.
[0073]
The annotation content is data for reproducing the drawn annotation, and is data such as a bitmap and vector data. The terminal ID is information indicating a terminal used by a user operating the document viewer 102.
[0074]
When detecting that the search button 118 of the document viewer 102 has been operated, the client system 100 notifies the annotation server 212 of the annotation management unit 210 configuring the server system 200 of the fact. As a result, the annotation server 212 reads the annotation information instructed to be searched from the annotation DB 216.
[0075]
For example, the annotation server 212 receives a “search” instruction from the document viewer 102. At this time, the annotation server 212 receives, from the client system 100 (the document viewer 102), information on the document ID, the rectangle information, and the range to which the annotation is provided. The annotation server 212 searches the annotation DB 216 based on these pieces of information (search conditions), and returns appropriate annotation contents to the document viewer 102. This search processing will be described later.
[0076]
<< Processing related to annotation addition >>
Next, a process regarding the annotation assignment will be described using a specific example. First, registration, reading, annotation addition, and storage of a document will be described.
[0077]
<Document registration processing>
FIG. 6 is a diagram illustrating a configuration example of the document DB 224 in a specific example described below. As described above, a document is registered by giving a URL to a document to be registered or a path to a directory. The document server 222 registers the document ID, the document name, and the document body of the document indicated by the received path as the registration contents of the document in the document DB 224 as shown in FIG. Each document in this example is a manual relating to the operation of the copier.
[0078]
<Document reading process>
A participant (user A in this example) who wants to read a document presses a document reading button 114 of the document viewer 102. Upon receiving this instruction, the document viewer 102 sends a document reading request to the document server 222.
[0079]
The document server 222 that has received the notification creates a list of document names in the document DB 224 and returns the list to the document viewer 102. In this case, it is “manual1.txt, manual2.txt, manual3.txt, manual4.txt”. The document viewer 102 displays a list of document names in a list box or the like and prompts the user A to make a selection.
[0080]
It is assumed that the user A has selected “manual2.txt”. The document viewer 102 notifies the document server 222 that “manual2.txt” has been selected. The document server 222 searches the document DB 224 for the document ID and the document text assigned to “manual2.txt” and returns them to the document viewer 102. The document viewer 102 displays the received document text in the document display area 104. If the document server 222 is provided with a full-text search function or the like, it is possible to present search results as objects to be read.
[0081]
<Annotation addition processing>
FIG. 7 is a diagram illustrating a display example of a state where annotation is added to a document displayed in the document display area 104 of the document viewer 102. The reader (user A) reads the document displayed in the document display area 104 while giving a mark (an electronic tag such as an annotation) such as an underline or a circle according to interest or interest. Here, a pen-type device is used as the annotation device 170. In this case, an annotation can be added so as to write on paper.
[0082]
At this time, as shown in FIG. 7A, the document display area 104 is divided into rectangles that are not actually visible but include characters in order to specify the annotated portion. And Spaces with no characters, such as blank names and charts, are also divided into rectangles of an appropriate size. For example, it is good to divide into a rectangle of an appropriate size with reference to the font size of the characters before and after. Information for specifying each rectangle is added to each rectangle. For example, consecutive rectangle numbers are sequentially assigned in the horizontal direction from the upper left. In the case of a document covering a plurality of pages, a consecutive number is assigned to the previous page even after the next page. It is possible to specify to which page the annotation is given by the rectangle number. An independent rectangle number may be assigned to each page, and the page number and the rectangle number of each page may be used to specify which page the annotation is assigned to.
[0083]
For example, it is assumed that in a meeting for proofreading a manual of a copier, the user A gives an annotation a1 shown in FIG. I do. Further, it is assumed that the annotation b1 is given by paying attention to the operation for performing the binding margin. After that, it is assumed that the user proceeds to read the second page and the third page, and annotates the points to be noted while actually performing the operation over three pages as shown in FIG. 7B.
[0084]
<Save processing>
FIG. 8 is a diagram showing an example of information sent to the annotation server 212 when the document viewer 102 receives a save command in this case. FIG. 9 is a diagram illustrating a configuration example of the annotation DB 216 in this case. The configuration example of the data shown in FIG. 9 is the same as that shown in FIG.
[0085]
Upon receiving the storage instruction, the document viewer 102 sends the document ID of the annotated document, the terminal ID, the rectangular number of the annotated rectangle, and the annotation content (image information) to the annotation server 212. Information to be sent to the annotation server 212 is as shown in FIG. Here, it is assumed that the terminal ID of the document viewer 102 is “1”.
[0086]
The annotation server 212 receives the information illustrated in FIG. 8 and stores the information in the annotation DB 216. At this time, if there is already a combination of the same document ID and terminal ID, the received information is overwritten there. In this example, as shown in FIG. 9, the annotation DB 216 already stores four annotations assigned to the document IDs 2, 3, and 4 at predetermined terminals (terminal IDs: 1, 2, and 3). (Annotation ID; 1, 2, 3, 4). Here, since the combination of the document ID and the terminal ID identical to the information shown in FIG. 8 transmitted from the document viewer 102 is not registered in the annotation DB 216, the annotation server 212 newly assigns “5” to the annotation ID. Assigned and registered as shown in the lower part of FIG.
[0087]
Thus, the saving of the operation status regarding the annotation addition to the document in the database is completed.
[0088]
<< Information search and display processing using electronic sticky notes >>
Next, a method of attaching an electronic tag such as an annotation to a document displayed in the document display area 104 of the document viewer 102 and using the information indicated by the annotation to realize an efficient information search will be described. This will be specifically described. Hereinafter, a system related to the information display processing of the electronic conference system 1 having such an information search function is particularly referred to as an information search and display processing system.
[0089]
FIG. 10 is a block diagram of the first embodiment of the information search and display processing system 7 focusing on an information search function using annotations. Here, FIG. 10A shows an outline of the overall configuration, and FIG. 10B shows details of functional elements specialized for the information search and display processing function.
[0090]
The information search and display processing system 7 of the present embodiment is an example of an additional information search and display processing unit, and is an annotation processing device 218 that is a dedicated device that manages a mechanism for executing efficient search processing and annotation information provision processing. It has.
[0091]
The viewer user (user; a participant in the conference in this example) uses the annotation device 170 while reading the document displayed in the document display area 104 of the document viewer 102 while turning the page while the conference is in progress. Write an annotation such as an underline or a circle on an interesting phrase or a phrase characterizing a document. Alternatively, a memo may be added. The memo writing is not limited to the freehand writing, and may be a text annotation for inputting text in a prescribed frame.
[0092]
Information relating to additional information on the document body such as annotations given to these documents is transmitted to the server system 200 via the network 9 when the save button is pressed (see FIG. 8). The document body is managed by the document management unit 220 (see FIGS. 4 and 6).
[0093]
Additional information such as an annotation corresponding to the document body is managed (stored) in the annotation DB 216 of the annotation management unit 210 in association with the document body (see FIG. 9).
[0094]
Then, when a search is instructed by the reader as necessary, additional information (for example, annotation) matching the search condition specified by the reader is searched (searched) using the annotation management unit 210, and the search condition is matched. Present information to the user.
[0095]
For example, in the configuration of the electronic conference system 1 shown in FIG. 1, a user can display an electronic document on a display surface of the document viewer 102 and give an annotation on the display surface during the electronic conference. . Here, a case where an intellectual activity is performed using a document display device that can add an annotation in a meeting using various documents or a huge amount of documents, or in an activity using the document for a long time continuously Think.
[0096]
You may start with one document and then need to know the details of one part of the document, and display another document. There is a place in the other document that needs information of another document, and another document may be opened. In this way, consider a scene in which an important part is annotated one after another.
[0097]
In this system, annotations (such as underlines, markings, and writing of characters) given to electronically displayed documents can be shared. Further, it is also possible to reproduce, as a search result, an annotation of a document already provided at the same position as a query, using a state of the annotation provided to a part of a certain document as a query. The position where the annotation is given seems to be a position of some interest to the reader. Also, by reproducing the annotation given by another person or oneself before, the position of interest given by another person or oneself can be known. In addition, by managing each person to which an annotation has been given and designating a certain person, if one wants to know the interest of a certain person, only the annotation given by that person can be reproduced.
[0098]
Also, it may be more effective to reproduce the annotation given from a specific viewpoint than to reproduce the annotation of a specific person. For example, if you read a document from a certain viewpoint, another person has already read the document from the same viewpoint, and if you have annotated, the other person in the same viewpoint as you is paying attention Sometimes you want to know a point quickly. In order to respond to this request, the electronic conference system 1 (the information retrieval and display processing system 7) of the present embodiment uses the electronic sticky note and has the same viewpoint as that of itself, such as during or after the meeting. A function (hereinafter, referred to as an information search and display processing function) that enables efficient information processing by reproducing an electronic tag attached by another person is provided. Specifically, the annotation processing device 218 functions as a central processing unit that realizes the information search and display processing function. Hereinafter, an information retrieval and display processing function using an electronic tag, which is a characteristic part of the present embodiment, will be described in detail.
[0099]
As shown in FIG. 10A, the information search and display processing system 7 having this function includes a request receiving unit 560, which is an example of a search request unit for receiving a search process and an information display instruction from a reader, A search is performed to determine whether the relevant document or other related information has been registered in the annotation DB 216 of the annotation management unit 210 or the document DB 224 of the document management unit 220. If there is a corresponding product, the search result and the annotation An annotation processing device 218 that sends certain information to the client system 100 side, and a display processing unit 101 that displays search results and other information sent from the annotation processing device 218.
[0100]
The function of the annotation processing device 218 may be handled by the annotation server 212 or the document server 222. In this case, as indicated by a dotted line in the figure, the annotation server 212 and the document server 222 directly (or via the network 9) exchange annotation information related to annotation search processing.
[0101]
The display processing unit 101 includes a part related to display processing in the document viewer 102 and the manager unit 180. The information related to the annotation sent to the client system 100 side includes, for example, list information summarizing search results generated by the annotation processing device 218.
[0102]
One configuration example of the annotation processing device 218 is shown in FIG. This block diagram specifically shows a mechanism for performing the information search and display processing function by using the annotation and enabling the search processing and the information display processing to be performed efficiently.
[0103]
As illustrated, the annotation processing device 218 includes a search condition determination unit 544 that determines search conditions, a search unit 546 that searches for annotation information that matches the search conditions determined by the search condition determination unit 544, and a search unit 546. An annotation presentation control unit 550, which is an example of a related information presentation control unit that presents annotation information that matches the retrieved search conditions to the user as related information, is provided. A search processing unit 545 is configured by the search unit 546 and the annotation presentation control unit 550. The determination of the search conditions by the search condition determining unit 544 is realized by presenting a screen for setting conditions on the document viewer 102 and receiving an instruction input from the user.
[0104]
The request receiving unit 560 provided in the client system 100 can receive a request to selectively display only electronic sticky notes that meet a specific condition among all electronic sticky notes attached to a document. It has become. The certain condition includes at least “an electronic sticky note (an annotation handwritten in this example) attached by another person having the same viewpoint as the user”. The mechanism in which the request receiving unit 560 receives such a display request from the user is performed by using an annotation search as a trigger.
[0105]
For example, when the request receiving unit 560 detects that the search button 118 has been pressed, the request receiving unit 560 performs a search for “an electronic sticky note (in this example, a handwritten annotation) attached by another person having the same viewpoint as the user” on the annotation processing. Instruct device 218. Here, in the first embodiment, as a method of specifying “annotation made by another person having the same viewpoint as that of the user”, an annotation given to the document being viewed by the user is used. Specifically, an annotation given by another person at a position substantially similar to the position given by the user is an annotation considered to be given by another person from the same viewpoint as the user.
[0106]
When the document viewer 102 detects that the search button 118 has been pressed, the terminal ID, the document ID for specifying the document being viewed, and the rectangle number of the rectangle to which the annotation of the document page being displayed is added as a search request Send to the annotation server 212.
[0107]
The search condition determination unit 544 of the annotation processing device 218 sets a document ID and a rectangular number indicating the annotation position as search conditions, and instructs the search unit 546 to search. The search unit 546 searches the annotation DB 216 in which the annotation information is registered, and retrieves all the annotations given by another person having the same viewpoint as the person who instructed the search for the document (the document being browsed) instructed to be searched. And passes the search result to the annotation presentation control unit 550. The annotation presentation control unit 550 performs scoring according to a predetermined rule, and finally specifies an annotation to be displayed on the document viewer 102. Thereafter, the annotation presentation control unit 550 sends the annotation content (image information) of the annotation ID that has obtained the predetermined score to the document viewer 102.
[0108]
FIG. 11 is a schematic diagram showing a procedure of an information search process (particularly, an information search process using an annotated viewpoint) in the information search and display processing system 7 shown in FIG. FIG. 12 is a diagram illustrating an example of an annotation added to a document by a user who is browsing a document that issues a search instruction. FIG. 13 is a diagram illustrating an example of information notified from the client system 100 (the document viewer 102) to the annotation management unit 210 (the annotation server 212) when a search request is issued.
[0109]
Steps S100 to S102 (annotation / registration);
Each user participating in the conference uses the annotation device 170 while reading the document “manual2.txt” of the document ID 2 displayed in the document display area 104 of the document viewer 102, and characterizes words and documents of interest. Annotate the attached words. The annotation detection unit 107 detects the position and attribute of the annotation added to the document, and passes the detected position and image information of the annotation together with the document ID to the annotation processing device 218 (S100).
[0110]
The annotation processing device 218 registers the annotation position and the image information in the annotation DB 216 via the annotation server 212 as shown in FIG. 9 (S102).
[0111]
Steps S110 to S116 (search for the same viewpoint annotation);
User B logs in to document viewer 102. User B reads a document into document viewer 102 of his terminal. The reading procedure is as described above. Here, it is also assumed that the document “manual2.txt” with the document ID 2 is read as a document for moving the image at the time of copying. It is assumed that attention is paid to an operation of moving a document image to the center of a sheet and adding a binding margin. At this time, annotations a2 and b2 are given to a word or a sentence to be focused on the first page as shown in FIG. At this point, since there is no instruction of "save", only the client system 100 can know the information (position and image information) of the annotations a2 and b2.
[0112]
Thereafter, based on these annotations a2 and b2, the user B instructs search / reproduction of the annotation considered to have been given by another person having the same viewpoint as the user B. For example, the user B presses the search button 118 at a predetermined time. That is, at the time of the annotation search, the search range is specified by adding the search instruction annotation to the document being viewed. Then, the request receiving unit 560 that has received the search instruction instructs the annotation processing device 218 to perform an annotation search given by another user having the same viewpoint as the user B (S110).
[0113]
For example, when the request receiving unit 560 detects that the search button 118 has been pressed, as illustrated in FIG. 13, the request receiving unit 560 changes the document ID, the terminal ID, and the rectangle number of the rectangle to which the annotation of the displayed page is added. It is sent to the annotation processing device 218 as a search request. Here, the terminal ID of the document viewer 102 used by the user B is “4”.
[0114]
Upon receiving the information shown in FIG. 13, the search condition determination unit 544 of the annotation processing device 218 sets the document ID of the document being viewed by the user B as a search condition, and instructs the search unit 546 to perform a search. The search unit 546 searches the annotation DB 216 via the annotation server 212 for the presence of the annotation for the document ID 2 (S112). That is, the annotation processing device 218 first searches for all the annotations attached to the document being viewed by the user B.
[0115]
If not, the document viewer 102 returns to the document viewer 102 via the annotation presentation control unit 550 that no annotation for the document ID 2 exists. Here, it is assumed that the annotation DB 216 having the data structure shown in FIG. 9 has been searched. Three annotations (annotation IDs 2, 4, and 5) are searched for the document ID2. The search result is passed to the annotation presentation control unit 550.
[0116]
The annotation presentation control unit 550 of the annotation processing device 218 sequentially receives the search request in FIG. 13 received from the document viewer 102 and the rectangle information (rectangle numbers) of the annotation IDs 2, 4, and 5 obtained from the search unit 546, respectively. By comparison, the annotation to be returned as a search result to the document viewer 102 is specified (S114). The comparison method is as follows.
[0117]
1) The smallest rectangle number (MinRectNum) is extracted from the rectangle information of the search request. In the example of FIG. 13, MinRectNum = “78”.
[0118]
2) Extract the largest rectangle number (MaxRectNum) from the rectangle information of the search request. In the example of FIG. 13, MaxRectNum = “142”.
[0119]
3) The following processing is repeated for the rectangle information (rectangle number) of each annotation ID to be compared.
[0120]
3-1) It is calculated whether or not there is a rectangular number TargetNum that satisfies MinRectNum ≦ TargetNum ≦ MaxRectNum. That is, it searches for an annotation that has already been given (may include its own) existing between the first rectangular position and the last rectangular position of the annotation given by the user B. In short, the range in which the annotation of the search request is given is the range of the smallest rectangle number and the largest rectangle number to which the annotation is given.
[0121]
If it exists, the rectangular information in that range is searched. If it does not exist, the next annotation ID is checked. For example, when the rectangle information of the annotation ID 2 is examined, it is 159-183, 231-256, and there is no TargetNum that satisfies MinRectNum ≦ TargetNum ≦ MaxRectNum. Since the rectangle information of the annotation ID 4 includes 134-142 of 134-147, it is a search target. Since the rectangle information of the annotation ID 5 includes 78-93 and 133-142 among 75-100 and 133-147, the rectangle information is a search target.
[0122]
3-2)
a: Calculate the annotation reproducibility indicating how many rectangles of the search request are included in the rectangle information to be searched within the range of MinRectNum and MaxRectNum.
b: Calculate the annotation matching rate indicating how many percent of the rectangular information to be searched is included in the rectangular information of the search request within the range of MinRectNum and MaxRectNum.
c: Take the average value of the annotation recall rate and the precision rate.
[0123]
That is, the viewpoint similarity calculation process using the annotation addition position is executed by a to c. In the case of the annotation ID 4, the ratio at which the rectangular information of the search request is included in the rectangular information to be searched is 9/26 = 0.35 (78-93, 133-142 are included in nine of 134-142). In addition, the ratio of the rectangular information of the search target of the annotation ID 4 included in the rectangular information of the search request is 9/9 = 1 (78-93 and 133-142 are included in 134-142). The average value is (0.35 + 1) /2=0.675.
[0124]
In the case of the annotation ID 5, the ratio at which the rectangular information of the search request is included in the rectangular information to be searched is 26/26 = 1 (78-93, 133-142 are 78-100, and 26 are included in 133-142). . Also, the ratio of the rectangular information of the search target of the annotation ID5 included in the rectangular information of the search request is 26/33 = 0.79 (26 of 78-100, 133-142 include 78-93, 133-142. ). The average value is (1 + 0.79) /2=0.90.
[0125]
As described above, when the comparison with respect to all the search target annotations is completed, the annotation presentation control unit 550 stores all the annotation contents (image information) of the annotation ID having the score higher than the predetermined score in the document. It returns to the viewer 102 (S116). That is, all annotations with annotation IDs having similarities of viewpoints greater than the predetermined level are set as search results. For example, all the annotation contents of the annotation ID with the highest score are returned to the document viewer 102 as a search result.
[0126]
In this example, since the score of the annotation ID5 is the highest, 0.90, the annotation presentation control unit 550 displays the image information 1, 2, 3 of the annotation ID5, that is, all the annotations given by the user A at a certain time in the document viewer. Return to 102. The document viewer 102 reproduces the received image information of the annotation on the document display area 104.
[0127]
As described above, according to the information retrieval method of the first embodiment, it is possible to construct a mechanism for retrieving and reproducing annotations that are considered to have the same viewpoint as the document viewer. Specifically, in a device that can share annotations (such as underlining, marking, and writing of characters) given to a document displayed electronically, the state of the annotation (annotation added to a part of a certain document) It is possible to propose a mechanism in which all annotations already assigned to similar positions are reproduced as search results in a document being viewed using the (assignment position) as a query.
[0128]
If you read a document from a certain viewpoint and another person has already read the document from the same viewpoint and annotated, the annotation is given from the same viewpoint by reproducing the annotation of the other person Annotations can be obtained. Therefore, since the annotation is already given to the place of interest, it is possible to quickly obtain interesting information by looking through it, and to search for information more efficiently than reproducing the annotation of a specific person (Annotation search in this example) is possible.
[0129]
For example, in the previous example, the user B can check the annotations on the second and third pages given by the user A on the document viewer 102 based on the annotation given on the first page. Since the annotation given to the first page by the user B is similar in position to the annotation given to the first page by the user A, it can be regarded that the annotation is given from a close viewpoint. Therefore, the user B may possibly add a similar annotation to the annotation position given by the user A on the second and third pages. By presenting it in advance, user B will be able to promote document understanding.
[0130]
In this example, since the user B wants to move the document to the center of the sheet and copy it with a binding margin in the manual of the copy operation, the user B annotates the first page with a position corresponding to the operation. If the user A has already annotated the same position and also annotates the notes and supplements on the second and third pages, the user B refers to the annotation, There is an effect that a point to be performed can be quickly checked.
[0131]
In this example, the annotation of an unspecified other person can be saved and searched.However, in the case of a manual, the user who is interested in this part should be interested in this part in advance. It is possible to promote the understanding of the manual by giving an annotation in advance to a part where the user wants to pay attention to the information and providing the annotation together with the manual.
[0132]
In the configuration of the first embodiment, the server system 200, which is an example of the management device, performs the process of specifying the annotation given from the same viewpoint as the viewpoint of the document viewer (user B in the previous example). However, the present invention is not necessarily limited to such a system configuration. For example, the annotation information collected by the server system 200 is passed as it is to the client system 100 which is an example of a client terminal, and the client system 100 performs processing for specifying the annotation given from the same viewpoint as the document viewer's viewpoint. A system configuration may be adopted. Hereinafter, a system configuration of such a mode will be described.
[0133]
FIG. 14 is a block diagram of an information search system according to the second embodiment in which the client system 100 performs processing for specifying an annotation given from the same viewpoint as that of a document viewer. Here, FIG. 14A shows an outline of the entire configuration, and FIG. 14B shows details of an information search and display processing function using a personal attribute of an annotation.
[0134]
As shown in FIG. 14A, the information search and display processing system 7 of this embodiment does not include the annotation processing device 218 shown in FIG. Instead, the function of the search condition determining unit 544 shown in FIG. 10B is integrated with the request receiving unit 560. The search condition specified by the request receiving unit 560 is passed to the server system 200 side. In response to this, for example, the annotation management unit 210 or the document management unit 220 extracts a document or an annotation that matches the search condition, and returns it to the manager unit 180 of the client system 100 as a search result.
[0135]
For example, when the request receiving unit 560 receives an instruction for annotation search already given from the same viewpoint, the request receiving unit 560 instructs the annotation management unit 210 to search for all the annotations given to the document being viewed by the user. At this time, the control unit 180 instructs the manager unit 180 to perform a viewpoint similarity calculation process using the annotation providing position.
[0136]
As shown in FIG. 14B, an annotation presentation control unit 550 is provided in the manager unit 180 of the client system 100. The function of the annotation presentation control unit 550 is the same as that of the annotation presentation control unit 550 shown in FIG.
[0137]
For example, when the request accepting unit 560 instructs the viewpoint similarity calculation process using the annotation providing position to the annotation presentation control unit 550, the annotation presentation control unit 550 provides the annotation similar to the document being displayed on the document viewer 102 from the annotation server 212. Receive all annotations. Then, in the same procedure as in the first embodiment, a viewpoint similarity calculation process is performed using the annotation addition position given by the document viewer, and an annotation to be presented on the document viewer 102 is specified.
[0138]
According to the configuration of the second embodiment, similarly to the first embodiment, an annotation which is considered to have the same viewpoint as that of the document viewer is searched for by using the annotation providing position given by the document viewer. A mechanism to reproduce can be constructed.
[0139]
As described above, the method of efficiently searching for information (for example, annotation) by using the annotation position to search and present the annotation given from the same viewpoint as the document viewer has been described. It is also possible to adopt a modification method such as
[0140]
A. In the above example, rectangle information is added to the annotation search, and the similarity of the annotations is determined at the rate of sharing the same rectangle. However, the similarity determination method does not use this method.
[0141]
B. In the above example, in the ranking of the retrieval result of the annotation, the number is simply based on the number including the same rectangle. However, in the case of the annotation given to a longer range, the weighting may be further performed.
[0142]
C. A color attribute may be given to the annotation so that color matching may be considered at the time of search.
[0143]
D. Weighting of recall rate priority or precision rate priority may be performed. In this case, it is preferable that the user can specify whether to emphasize the recall rate or the matching rate.
[0144]
E. FIG. By making the login function to the electronic viewer 102 wait, the user ID can be used instead of the terminal ID. For example, when using the document viewer 102, the user logs in to the document viewer 102 in advance. In this case, matching of the user ID, that is, filtering by the user ID can be considered.
[0145]
F. In the above example, the range between the first rectangular position and the last rectangular position of the annotation given by the user is specified as the annotation providing range that is a query (search range). However, this search range is not necessarily specified. Not limited to this, the following modified example method can be adopted. Basically, any one of the above and other embodiments indicates a portion where a document viewer who instructs a search has substantially read a predetermined range in the document. The term “substantially” means to include a part that has not been properly read but is equivalent to “read” and a part that is “willing to read”.
[0146]
1) The entire page displayed when the search button 118 is pressed is set as a search range.
[0147]
2) The user explicitly specifies the search range using the annotation. For example, the range is specified using a pen or the like. At this time, the annotation used to specify the range has a different mechanism (annotation attribute) from the normal annotation. For example, it has a range designating attribute as an annotation attribute for designating a search range, and changes the color of ink from other pens on a GUI (Graphical User Interface). The smallest rectangle number and the largest rectangle number written with the pen are set as a range. In this manner, the dedicated annotation used for setting the search range is prohibited from being saved even if a save instruction is given to the annotation DB 216. This is to avoid erroneous use only by setting the search range (substantially specifying the read portion).
[0148]
3) A search range is specified using the latest one annotation range or a combination of the above embodiment and the first modification.
[0149]
4) The entire sentence including the annotated phrase is set as the search range. When an annotation is given to a plurality of sentences, the plurality of sentences becomes an attachment range (substantially read range). When a user annotates a certain part in a document, the whole sentence has a viewpoint (a reader's intention) of a document viewer. It is considered that more preferable search results can be obtained than in the above embodiment in which attention is paid only to the words and phrases to which the annotation is added.
[0150]
5) The paragraph to which the annotation is added is set as a search range. When an annotation is given to a plurality of paragraphs, the plurality of paragraphs becomes the attached range (substantially read range). This is a concept that when a user annotates a certain part in a document, a certain unit has a viewpoint (a reader's intention) of a document viewer. It is considered that more preferable search results can be obtained than in the above embodiment in which attention is paid only to the words and phrases to which the annotation is added. On the other hand, it is unclear which of F5 and F4 is preferable.
[0151]
Note that the paragraph is not limited to a grammatical paragraph in which the head of the sentence is lowered by one column, and may be a definition based on a predetermined “paragraph”. In other words, “units” are regarded as paragraphs according to a certain standard, and “single sentences” are not included in the unit. For example, in the case of a patent specification, the same paragraph number portion is regarded as “combined unit = paragraph” regardless of one step down from the beginning of the sentence.
[0152]
G. FIG. In the above example, the annotation position given by the document viewer is used as the reference for the query, but a specification other than the annotation may be used as the reference for the query. For example, when a user instructs a search, only a search range (for example, a rectangular frame or the like) is specified, and no annotation serving as a query is given. In other words, instead of giving a search instruction by adding an annotation to a character string desired to be searched, a part of interest (a part to be read; a part which is substantially read) is specified by a rectangular frame or the like, and the search instruction is given. Emit.
[0153]
As a method for designating a setting frame for specifying a search target portion, it is preferable to use a normal range designating method using an annotation device 170, a mouse, or another pointing device. Alternatively, a method of specifying a coordinate position (or a rectangle number) in a document using a keyboard may be used to specify the position of the vertex coordinates (for example, upper left and lower right) of the rectangle.
[0154]
In this case, the request receiving unit 560 functions as a search range setting unit, and notifies the annotation processing device 218 and the annotation management unit 210 of information on the specified search range that is a query. The annotation server 212 searches for an annotation ID including the annotation within the specified range, and returns the content of the annotation to the client system 100. Alternatively, a list of terminal IDs is returned instead of the annotation contents. As shown by E, the terminal ID can be replaced with the user ID. In this case, a list of user IDs or user names is returned.
[0155]
When the content of the annotation is returned, the document viewer 102 displays all the annotations. At this time, the document viewer 102 can also display the annotation of only the range specified in advance.
[0156]
When the user ID or the user name is returned, the list is displayed on the document viewer 102. By selecting a user ID or a user name displayed in the list, the annotation given by the user can be further searched from the annotation server 212 and displayed on the document viewer 102.
[0157]
<< Knowledge sharing using electronic sticky notes >>
Note that the method of Modification G (a method using designation other than annotation as a query criterion) can also be used for setting search conditions for information search in Japanese Patent Application No. 2002-315121 of the present applicant. The information retrieval method in Japanese Patent Application No. 2002-315121 attaches an electronic tag such as an annotation to a document displayed in the document display area 104 of the document viewer 102, and uses information indicated by the annotation or the like. This is a method for realizing the sharing of personal information possessed by each user of the system, that is, the information sharing (knowledge sharing) on an individual basis.
[0158]
Here, in Japanese Patent Application No. 2002-315121, an annotation provided by a document viewer triggers an information search for information sharing (knowledge sharing). A method of specifying a range like G can be used. Hereinafter, this point will be described as a third embodiment.
[0159]
FIG. 15 is a block diagram of a third embodiment of an information search and display processing system that focuses on a function that enables information sharing among a plurality of users by using search processing and information provision processing using annotations. Here, FIG. 15A shows an outline of the entire configuration, and FIG. 15B shows details of functional elements specialized for the information providing process. The basic framework of the system configuration is not different from the configuration diagrams shown in FIGS.
[0160]
As described above, while reading the document displayed in the document display area 104 of the document viewer 102, the document viewer (participant in the conference in this example) uses the annotation device 170 to characterize an interesting phrase or document. Write a mark (annotation) such as an underline or circle on the attached phrase. Alternatively, a memo may be added.
[0161]
Then, when a search is instructed by the reader as needed, additional information (for example, annotation) matching the attribute of the additional information specified by the reader is searched (searched) using the annotation management unit 210.
[0162]
Further, it is possible to extract a word or phrase indicated by the annotation, for example, a target character string that is character information written near the annotation. Further, using the target character string as a query, the document server 222 can search the document DB 224 for documents that match the query, and return the list to the document viewer 102. At this time, the document server 222 adds information of the storage destination (URL) of the document body listed as the search list as a link.
[0163]
The user refers to the list (search result) displayed on the document viewer 102 and, if necessary, clicks a document linked to the list. In response to this, the document server 222 reads the instructed document body from the document DB 224 and presents it to the document viewer 102.
[0164]
With such a search mechanism, for example, during the proceedings, it is possible to search for past related documents or to find an expert through a meeting. As a result, it is possible to acquire information that is necessary and that the user did not know before.
[0165]
Here, in the third embodiment, when a search result is obtained, the search result is not limited to the information related to the search condition itself specified by the user, but is obtained not only by the search condition specified by the user but also by the search condition specified by another user. A mechanism is provided for automatically presenting information that can be provided to the user.
[0166]
In other words, although the search conditions are almost the same viewpoint, focusing on the viewpoint difference (slightly different point) due to the individuality of the individual, the information that can be obtained by others having similar interests is also given to the user who instructed the search. To be presented. Hereinafter, this point will be described in detail.
[0167]
First, the annotation information includes the person (user) who has given the annotation information and the position (annotation position) in the given document. By specifying one or more annotation positions, it is possible to search for all the users who have given annotations in the vicinity and other annotations given by those users.
[0168]
Here, the search target of the annotation may be within the same document or another document. That is, the search is performed in the order of “document part → user who has given an annotation to the part → annotation position (set of) given by the user → target character string (set)”.
[0169]
The information retrieval / display processing system (in this example, particularly, the information sharing processing system) 7 manages a target character string of an annotation given by a certain user, and sets a target character string of a certain annotation, and all the characters in a document to which the annotation is given. A set of target character strings of the annotation and a set of target character strings of the annotation given by the user are searched. The annotation processing device 218 functions as a central processing unit that realizes such processing.
[0170]
As shown in FIG. 15A, the information search and display processing system 7 of the third embodiment having this function includes a search request specifying unit 500 for receiving a search instruction from a reader. The search request specifying section 500 has almost the same function as the request receiving section 560. In the third embodiment, the search request specifying unit 500 notifies the annotation processing device 218 and the annotation management unit 210 of information on a specified search range that is a query.
[0171]
The annotation processing device 218 searches whether the document requested to be searched and other related information have been registered in the annotation DB 216 of the annotation management unit 210, the document DB 224 of the document management unit 220, or the annotation processing device 218, If there is a corresponding item, the search result is sent to the display side.
[0172]
One configuration example of the annotation processing device 218 is shown in FIG. This block diagram specifically shows a function that enables information sharing among a plurality of users by using a search process and an information providing process using annotations.
[0173]
As shown in FIG. 15B, the annotation processing device 218 includes, for each document, a registration unit 542 that registers the annotation addition information acquired by the annotation detection unit 107 (see FIG. 1) for a plurality of users; By comparing the information on the search range notified from the specifying unit 500 with the annotation-added partial information on a plurality of users registered in the registration unit 542 in advance, the information related to the information on the part specified as the search range and A search condition determination unit 544 that determines search conditions for related information related to other users, a search unit 546 that searches for information that matches the search conditions determined by the search condition determination unit 544, and a search unit 546 And a related information presentation control unit 548 for presenting the searched result as related information.
[0174]
The search unit 546 is directly related to the information of the annotated part by another user who has annotated the position of the text (target character string) in the search range part specified by the designated user. (Not directly related to the instructing user).
[0175]
For example, it is directly related to the information of a part to which the annotation is added by another user who has annotated the position substantially the same as the position designated as the search range by the designated user (not directly related to the designated user) ) Search for document information. In addition, information about a user who has the same or similar viewpoint or interest as the designated user is searched. At this time, information registered in the registration unit 542 is referred to.
[0176]
Further, information about the viewpoint or interest of another user, which is annotated at a position substantially the same as the position specified as the search range by the designated user, is searched. Also in this case, the information registered in the registration unit 542 is referred to. At this time, the difference between the target character string indicated by the search range specified by the user who instructed the search for the related information and the target character string indicated by the annotation by another user at substantially the same position is determined by the information related to the viewpoint or interest of the other user. And At this time, the search unit 546 instructs the annotation management unit 210 to search for the annotation of another user.
[0177]
Note that even if the document management unit 220 is instructed to search for document information or annotations that are directly related to the information (for example, reference information embedded in text or images) of the portion of the document to which the annotation has been added. Good.
[0178]
FIG. 16 is a schematic diagram illustrating a procedure of an annotation process (particularly, a process of providing information related to another user) in the information search and display processing system 7 of the third embodiment. In the following, we consider the act of specifying the search range as expressing one's own interest or viewpoint, and through this specification of the search range (act and itself and the target character string), we can understand the difference in interest and viewpoint. Operations and functions will be described.
[0179]
Step S200;
While reading the document displayed in the document display area 104 of the document viewer 102, the user uses the annotation device 170 to annotate a word of interest or a word characterizing the document. The document viewer 102 detects the position and attribute of the annotation added to the document, and sends information of the detected position and attribute of the annotation to the annotation management unit 210.
[0180]
The annotation management unit 210 registers the information on the position and attribute of the annotation in the annotation DB 216 via the annotation server 212 as shown in FIGS. At this time, the document viewer 102 sends the document ID displayed on the document viewer 102 as an attribute. The annotation server 212 passes the document ID and the information of the annotation position received from the document viewer 102 to the annotation processing device 218.
[0181]
Step S202;
In response to this, the annotation processing device 218 searches, based on the registration information of the annotation DB 216, for the annotation position in the same document for all other users who have annotated the same position as the specified search range. To obtain a set of those target character strings. That is, the annotation processing device 218 receives such processing from a plurality of users and constructs a database. For example, the annotation processing device 218 creates a list including the following elements (hereinafter also referred to as a related user list).
[0182]
a) a list of users to which at least one annotation has been added to the same position in the same document; b) a list of annotation positions (rectangular positions for specifying annotated parts) (for all the above users);
c) List of target character strings (for all the above users).
[0183]
Step S204;
Also, when the user wants to know the information related to the annotation given by another user whose interest or viewpoint is close to himself / herself, the user can specify a place to be focused on as a search range by a method other than the annotation, for example, by giving an instruction in a rectangular frame. I do. Upon receiving a search instruction together with the search range from a certain user, the annotation processing device 218 sends information on the target character string within the search range to the document management unit 220.
[0184]
The document server 222 of the document management unit 220 uses the target character string as a query, searches the document DB 224 for a document that matches the query, and sends the search list via the annotation processing device 218 to the document via the annotation processing device 218. Return to the viewer 102. At this time, the document server 222 adds information of the storage destination (URL) of the document body listed as the search list as a link.
[0185]
Further, when receiving the search instruction, the annotation processing device 218 executes the above-described related user list creation with reference to the target character string within the search range, and executes the target character string within the search range and the registered annotation information. Compare. By comparing the target character strings, it is possible to estimate a user having a close interest. Further, by obtaining the difference between the target character strings, it is possible to obtain a viewpoint of another user (a difference from the own viewpoint).
[0186]
Here, the comparison of the target character strings is performed by, for example, extracting a keyword (for example, a proper noun) from the target character string, calculating the similarity by calculating the similarity by comparing the keyword vectors, and resembling a certain threshold value. Is determined. As a similarity calculation method, for example, a TF (Term Frequency) method, an IDF (Inverted Document Frequency) method, or a TF / IDF method combining the TF method and the IDF method may be used.
[0187]
Next, the annotation processing device 218 passes information on the difference between the target character strings to the document server 222 (S210). In response, the document server 222 searches for a document related to the difference between the target character strings in the document DB 224 (referred to as a related document search). The related document search may be performed by any method. For example, a known full-text search engine such as “Namazu” may be used.
[0188]
The document server 222 passes the information of the search result to the annotation processing device 218 (S220). The annotation processing device 218 returns at least one of the following information to the document viewer 102 based on the search result of the related information and the related user list (S230).
[0189]
a) list of interested users,
b) another user's viewpoint (difference of the target character string),
c) Information on related documents (search list of related documents).
[0190]
At this time, the annotation processing device 218 (or the document server 222) adds information of the storage destination (URL) of the document body listed as a related document search list as a link.
[0191]
As described above, according to the search method of the third embodiment, an interesting part (a part to be read) is represented by a rectangular frame instead of giving a search instruction by giving an annotation to a character string desired to be searched. Specify and issue a search instruction. By doing this, instead of using only the target character string within the specified search range as a query to search, search results that take into account the viewpoints of other users who have annotated the same position as the target character string And information on other users with similar search viewpoints is presented to the user.
[0192]
As a result, the following effects can be obtained.
(1) By comparing sets of target character strings obtained for each user, closeness of interest in the document can be estimated, and a list of users with close interest can be presented.
[0193]
(2) The difference between the target character string obtained from the annotation of another user and the target character string within the specified search range is obtained, and the viewpoint of the other user can be obtained. The closeness of interest and the difference between the target character strings can be presented to the user as a user name having close interest or another interpretation of the document from the viewpoint of the user.
[0194]
(3) The difference between the target character strings can be used for searching for another document having similar contents.
[0195]
(4) Further, it is also possible to search for other users who have given the annotation from the annotation given to the document obtained as a result of the search. As a result, it becomes easy to handle a plurality of documents interactively and comprehensively.
[0196]
In other words, a search target character string based on a theme, topic, or interest from a certain user's viewpoint is used as a trigger to provide not only document information directly related to this target character string but also a viewpoint similar to the user's viewpoint. Document information directly related to the target character string by the user (not directly to the original user) can also be acquired.
[0197]
In other words, the search range can be expanded not only from the viewpoint and the range of interest of the user, but also to information that another user having a viewpoint similar or similar to the viewpoint of a certain user may obtain. Even if there is a difference in personality, the information search range can be extended to a range that is "slightly different" from one's own viewpoint or interest, by taking into account information of others having similar viewpoints or interests. Then, this is performed among a plurality of users, and as a result, the information possessed (or expected to have) can be shared with each other, and the information can be shared among the plurality of users. Sharing can be realized.
[0198]
As a result, information that cannot be obtained from only the user's own viewpoint, but can be obtained from another user's viewpoint similar to the user's own viewpoint can be obtained as own knowledge. In other words, knowledge not possessed by oneself can be complemented by knowledge possessed by others, and knowledge (intelligent information) can be shared.
[0199]
Also, by notifying not only the search result but also information about another user having a viewpoint similar or similar to a certain user's viewpoint, it is possible to know the similarity of interest between the self and another person and the difference in viewpoint.
[0200]
For example, suppose you have just begun viewing a document and have specified a search range at a location you are reading. At this time, it is assumed that another person has already annotated a place similar to the range (designated position) designated by the user. In this case, it is assumed that the other person has already read the document and has added many annotations after the designated position.
[0201]
In such a case, in the configuration of the third embodiment, information about another user who has annotated a position similar to the specified position is notified to the user, with the character string at the specified position specified as a trigger. At this time, the information of the annotation attached to the document by another person can be known. For example, by displaying an annotation given by another person, by reading only the part that is read ahead and marked by another person, quick reading can be performed, and the contents of the document can be quickly understood.
[0202]
As described above, in the configuration of the third embodiment, information on other users is automatically notified only by specifying the range of the part desired to be searched by a method other than the annotation. Can be accessed.
[0203]
As a means for sharing information between organizations and groups, a client-server type system using a database has conventionally been used. In a client-server type system using a database, information is stored in a database server in accordance with a preset database schema, and the client application can use a database access language such as SQL (Structured Query Language) to make inquiries to the database. By storing information, information is shared.
[0204]
However, a client-server type system using a database has a drawback that information other than information conforming to a set schema cannot be handled. Further, the number and location of the databases constituting the system are fixed, and it has been difficult to add a new database. For this reason, it has been extremely difficult to cope with situations where the types of information to be handled increase or change.
[0205]
As a method for addressing such problems, information sharing can be achieved by allowing the same information management device to be both an information provider and an information consumer, depending on the situation at the time and the type of information to be handled. A mechanism to realize this is being considered.
[0206]
For example, there has been proposed a system that configures a cluster composed of information management devices having similar information in consideration of information content managed by the information management device. Japanese Patent Application Laid-Open No. 10-301905 proposes a mechanism for realizing information sharing between persons having similar themes, topics, and interests.
[0207]
In the method described in Japanese Patent Application Laid-Open No. 10-301905, information sharing is realized by combining global relationships using local relationships between information management devices. In other words, the meaning indicating the connection between the two information management devices, and furthermore, a pipe management means for managing a set of pipe information having a weight of connection, and a request from a user or a request from another information management device. A pipe search unit for searching for suitable pipe information from pipe information managed by the pipe management unit; and a pipe synthesis unit for generating new pipe information by synthesizing a plurality of pieces of searched pipe information. .
[0208]
Thus, when there is a request from the user (a request from another information management device), the pipe management means searches the pipe search means for pipe information matching the request and selects appropriate pipe information. Communication with various information management devices. Further, the pipe synthesizing means synthesizes a plurality of pieces of pipe information as needed, thereby generating pipe information suitable for the request, and enabling communication with a necessary information management device.
[0209]
The pipes are created and updated by monitoring information exchange in an e-mail system or the like and detecting communication to identify persons having the same interest. For example, detecting keywords from sending and receiving emails and managing the connections between people with common interests as "pipes", and combining multiple pipes did not directly connect, but shared interests Build a pipe with the people. Then, based on this, the databases can be used mutually, thereby realizing information sharing between persons having similar themes, topics, and interests.
[0210]
On the other hand, in terms of information sharing, it is important to share knowledge (intellectual information), that is, to supplement knowledge not possessed by oneself with knowledge possessed by others.
[0211]
However, the conventional concept of "common information" including the invention disclosed in Japanese Patent Application Laid-Open No. H10-301905 mainly focuses on sharing a database as an information source, and information sharing on an individual basis ( (Sharing knowledge). That is, the information sharing method disclosed in Patent Document 1 realizes information sharing by mutually providing information between “a plurality of information management apparatuses”. The main focus is on increasing the amount and number of information that can be provided by expanding “Masu)”.
[0212]
Therefore, the information sharing method disclosed in Japanese Patent Application Laid-Open No. H10-301905 does not solve the problem of information sharing on an individual basis, in other words, sharing knowledge possessed by a plurality of individuals.
[0213]
For example, there is a case where the user wants to know information that another person having the same interest as oneself knows but does not have. Can not. If you try to access information that you don't have but that someone else has (or will have), you search for what information you don't have but that others have, You need access to that information, but in practice it is difficult.
[0214]
On the other hand, according to the configuration of the third embodiment, persons having similar themes, topics, or interests do not have one, but have (or will have) others. Information can be easily accessed.
[0215]
<< Computer use configuration >>
Note that a series of processes for performing an efficient information search process using the above-described annotation can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, the programs that make up the software are executed by a computer (such as an embedded microcomputer) built into dedicated hardware, or by installing various programs to perform various functions. It is installed from a recording medium into a general-purpose personal computer that can be executed.
[0216]
This recording medium is distributed separately from a computer to provide the program to a user, and is recorded on a magnetic disk (including a flexible disk) on which the program is recorded, or an optical disk (CD-ROM (Compact Disc-Read Only Memory)). , DVD (including Digital Versatile Disc), magneto-optical disc (including MD (Mini Disc)), or package media including semiconductor memory, etc. It may be provided, or may be constituted by a ROM or a hard disk in which the program is recorded. Alternatively, a program constituting software may be provided via a communication network.
[0219]
FIG. 17 is a diagram schematically showing a system configuration in a case where the above-described information search and display processing system 7 is configured by a computer. The basic configuration of such a computer system is composed of four layers: a hardware layer 910, an OS (Operating Systems) layer 920, a document information management layer 930, and a user interface layer 940. Each layer is kept independent, making it easy to expand the function of each layer or exchange it for another layer.
[0218]
The hardware layer 910 corresponds to the system configuration shown in FIG. 1, and includes, for example, a tablet 911 corresponding to the document viewer 102, a pen input device 912 corresponding to the annotation device 170, a button 913 corresponding to the operation button 110, And a communication network 914 corresponding to the network 9. Note that another mechanism such as a voice input / output interface 915 may be provided.
[0219]
A document information management layer 930 is a document layer 932 corresponding to the document management unit 220 and responsible for managing the document body, and a workspace corresponding to the annotation management unit 210 and responsible for managing additional information such as annotations added to the document body. 934 and an information search layer 936 for performing information search using annotations and the like.
[0220]
The user interface layer 940 corresponds to the document viewer 102 and the annotation device 170 and manages input from a user. The user interface management layer 942, a screen layer 944 related to information display in the document display area 104, and a document corresponding to the manager unit 180. It comprises a screen manager 946 for managing the display operation of the display area 104.
[0221]
In such a system configuration, for example, a storage medium storing a program code of software for realizing the functions of the above-described embodiments is supplied to the system, and a computer (or CPU or MPU) of the system is stored in the storage medium. The effect described in the above embodiment is achieved by reading and executing the program code.
[0222]
In this case, the program code itself read from the storage medium implements the functions of the above-described embodiment. When the computer executes the readout program code, not only the functions of the above-described embodiments are realized, but also the operating system OS or the like running on the computer based on the instructions of the program code. Some or all of the processing may be performed, and the functions of the above-described embodiments may be realized by the processing.
[0223]
Further, after the program code read from the storage medium is written in a memory provided in a function expansion card inserted into the computer or a function expansion unit connected to the computer, the function expansion card is written based on the instruction of the program code. Or a CPU provided in the function expansion unit may perform part or all of the actual processing, and the processing may realize the functions of the above-described embodiments.
[0224]
Note that the program is provided as a file in which the program code for realizing the processing described in the above embodiment is described. In this case, the program is not necessarily provided as a collective program file, but may be provided according to the hardware configuration of the system. , May be provided as individual program modules.
[0225]
For example, in the system configuration shown in FIG. 1, since the client system 100 and the server system 200 are connected via the network 9, a display-related processing program (for example, a highlighting function for turning a page or reflecting a search result). Is preferably provided as a client system module to the client system 100 side device. On the other hand, a processing program related to annotation management and search is preferably provided as a server system module to the server system 200 side device. Further, the server system module may be provided as a batch file or a sub-module file according to the configuration of each management unit included in the server system 200.
[0226]
Further, in the system configuration shown in FIG. 1, the client system 100 and the server system 200 are connected via the network 9, but they may be arranged in a close place. In this case, the manager section 180 of the client system 100 may be integrated with the server system 200 (whole or part thereof).
[0227]
Further, in the above description, the document viewer 102 has been described as being separate from the main body (cradle / docking station) accommodating the manager unit 180. However, the function part in the manager unit 180 described in the above embodiment is described as a document. It may be integrated with the viewer 102.
[0228]
As described above, the present invention has been described using the embodiment. However, the technical scope of the present invention is not limited to the scope described in the embodiment. Various changes or improvements can be made to the above-described embodiment without departing from the spirit of the invention, and embodiments with such changes or improvements are also included in the technical scope of the present invention.
[0229]
Further, the above embodiments do not limit the invention according to the claims (claims), and all combinations of the features described in the embodiments are not necessarily essential to the means for solving the invention. Absent. The embodiments described above include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent features. Even if some components are deleted from all the components shown in the embodiment, as long as the effect is obtained, a configuration from which some components are deleted can be extracted as an invention.
[0230]
For example, in the above-described embodiment, the additional information such as the annotation retrieved by the retrieval unit is displayed so as to be superimposed on the currently viewed document displayed in the document display area 104 of the document viewer 102 which is a display device. However, the method of presenting the information of the search result is not necessarily limited to this. For example, a palette display area may be provided on the document viewer 102 in addition to the document display area 104 for displaying the text of the document, and search results may be displayed in a list (list display) in the palette display area.
[0231]
In this case, the text part to which the annotation is added may be displayed in a list, and the list function may be provided with a link function that allows the user to refer to the place in the document text where the annotation is added. In addition, this list display may be presented as an image obtained by cutting out the portion (which may include the periphery thereof) in a state where the annotation is added to the document body. In this case, it is possible to quickly read only the part to which the annotation has been given only by displaying the list.
[0232]
Note that a dedicated presentation device that presents search results may be prepared separately from the document viewer 102 displaying the document text. For example, a list may be displayed on a dedicated display device for only the annotated portion, or only the annotated portion may be printed out in a list format by a printer.
[0233]
In constructing the system, how to divide each functional element into the client system 100 and the server system 200 is not limited to the above-described embodiment. It goes without saying that the system may be divided into convenient parts. Conversely, a system configuration in which the client system 100 and the server system 200 are integrated may be adopted. For example, when used in an electronic conference system, the integrated terminal is used as a terminal used by a person who manages the conference (for example, a chair), and the terminal used by other conference participants is as described above. What is necessary is just to set it as the system configuration which uses the client system 100 of a structure.
[0234]
【The invention's effect】
As described above, according to the present invention, when performing a search process via an electronic tag (additional information) such as an annotation, a search target range is specified in a document being viewed by a predetermined method, and the specified search range is specified. Since the search process is performed by using the electronic sticky tag given in advance by another user as a query within the search range, the search process can be performed more efficiently than when a specific person is directly specified. .
[0235]
For example, instead of reproducing an annotation of a specific person, an annotation given from a specific viewpoint can be reproduced. More specifically, if you read a document from a certain viewpoint, if another person has already read the document from the same viewpoint and annotated, you can reproduce the annotations of the other person. , The annotation given from the same viewpoint can be obtained, and the user who instructed the search can quickly obtain interesting information by looking through the annotation.
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration example of an electronic conference system to which an information search and display processing method and an information search and display processing system according to the present invention are applied.
FIG. 2 is an external view focusing on a display surface side of a document viewer which is an embodiment of the information display processing device.
FIG. 3 is a functional block diagram of a document viewer and a manager unit.
FIG. 4 is a diagram illustrating a configuration example of a document server and a document database.
FIG. 5 is a diagram illustrating a configuration example of an annotation server and an annotation database.
FIG. 6 is a diagram illustrating a specific configuration example of a document database.
FIG. 7 is a diagram illustrating a display example of a state where an annotation is added to a document.
FIG. 8 is a diagram illustrating an example of information transmitted to an annotation server.
FIG. 9 is a diagram showing a registration example of an annotation database.
FIG. 10 is a block diagram of an information search and display processing system according to the first embodiment focusing on an information search function using an annotation.
11 is a schematic diagram showing a procedure of an information search process in the information provision processing system shown in FIG.
FIG. 12 is a diagram illustrating an example of an annotation added to a document by a user who issues a search instruction.
FIG. 13 is a diagram illustrating an example of information notified from a client system (document viewer) to an annotation management unit (annotation server) when a search request is issued.
FIG. 14 is a block diagram of an information search system according to a second embodiment.
FIG. 15 is a block diagram of an information search system according to a third embodiment focusing on a function that enables information sharing among a plurality of users.
16 is a schematic diagram showing a procedure of a process of providing information related to another user in the information search and display processing system shown in FIG.
FIG. 17 is a diagram schematically illustrating a system configuration in a case where the information search and display processing system is configured by a computer.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Electronic conference system, 7 ... Information search display processing system, 9 ... Network, 100 ... Client system, 101 ... Display processing unit, 102 ... Document viewer, 103 ... Liquid crystal display panel, 104 ... Document display area, 106 ... Additional information Assignment unit, 107: annotation detection unit (additional information addition partial information acquisition unit), 109: housing, 110: operation button, 114: document reading button, 116: save button, 118: search button, 120: update button, 122 ... page turning button, 122a ... previous page forward button, 122b ... next page forward button, 124 ... highlight button, 126 ... user display button, 130 ... controller, 132 ... page forward instruction receiving unit, 140 ... page image generating unit, 150: display brightness control unit, 150a: contrast control unit, 15 b: brightness control unit, 170: annotation device, 180: manager unit, 182: log file storage unit, 184: emphasized word / sentence specification unit, 186 ... emphasized word / sentence selection method instruction unit, 188 ... emphasis instruction control unit, 200: server system, 210: annotation management unit, 212: annotation server, 216: annotation DB, 220: document management unit, 222: document server, 224: document DB, 544: search condition determination unit, 545: search processing unit 546: search unit, 550: annotation presentation control unit

Claims (23)

所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する機能を備え、前記付加情報を介して前記文書に関わる関連情報を検索する情報検索表示処理方法であって、
前記付加情報が付与された付加情報付与部分の情報を前記文書と対応付けて管理し、
所定の方法により指定された前記文書中の検索対象部分に関連する関連情報の検索処理を指示されたときには、前記検索対象部分と予め管理している前記付加情報付与部分の情報とを比較することで他ユーザと関わりのある前記関連情報についての検索処理を実行する
ことを特徴とする情報検索表示処理方法。An information search and display processing method comprising a function of adding additional information that can be managed separately from a document displayed on a predetermined display device, and searching for related information related to the document via the additional information. hand,
Managing the information of the additional information added portion to which the additional information is added in association with the document,
When instructed to perform a process of searching for related information related to a search target portion in the document specified by a predetermined method, comparing the search target portion with information of the additional information provision portion managed in advance. And performing a search process for the related information related to another user. 所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する機能を備え、前記付加情報を介して前記文書に関わる関連情報を検索する情報検索表示処理システムであって、
前記所定の表示デバイス上に表示された文書に前記付加情報を付与する付加情報付与部と、
前記文書中における前記付加情報付与部により前記付加情報が付与された付加情報付与部分の情報を取得する付加情報付与部分検知部と、
前記付加情報付与部分検知部により取得された前記付加情報付与部分の情報を前記文書に対応付けて登録する登録部と、
所定の方法により前記文書を閲覧中のユーザから前記文書中の検索対象部分の指定を受け付ける検索範囲設定部と、
前記検索範囲設定部が受け付けた前記検索対象部分と前記登録部に登録している前記付加情報付与部分の情報とを比較することで、前記文書を閲覧中のユーザとは異なる他のユーザと関わりのある前記関連情報についての検索処理を実行して検索結果を所定の提示媒体に提示させる検索処理部と
を備えたことを特徴とする情報検索表示処理システム。An information search and display processing system that has a function of adding additional information that can be managed separately from a document displayed on a predetermined display device and that searches for related information related to the document via the additional information. hand,
An additional information providing unit that provides the additional information to a document displayed on the predetermined display device;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added by the additional information addition unit in the document,
A registration unit that registers the information of the additional information addition part acquired by the additional information addition part detection unit in association with the document,
A search range setting unit that receives designation of a search target portion in the document from a user who is browsing the document by a predetermined method;
By comparing the search target portion received by the search range setting unit with the information of the additional information adding portion registered in the registration unit, the search range setting unit relates to another user different from the user who is browsing the document. A search processing unit for executing a search process for the related information having a search result and presenting a search result on a predetermined presentation medium. 前記検索処理部は、前記検索対象部分により示されている部分の付加情報であって、前記他のユーザが付与した前記付加情報を前記関連情報として検索する
ことを特徴とする請求項２に記載の情報検索表示処理システム。3. The search processing unit according to claim 2, wherein the additional information of the portion indicated by the search target portion, the additional information given by the other user is searched as the related information. 4. Information retrieval and display processing system. 前記検索処理部は、前記検索処理により取得した前記他のユーザが付与した前記付加情報について、前記文書を閲覧中のユーザが付与した前記付加情報と前記他のユーザが付与した前記付加情報との類似度を求め、類似度が所定レベルよりも大きな前記他のユーザが付与した前記付加情報を前記関連情報として検索する
ことを特徴とする請求項３に記載の情報検索表示処理システム。The search processing unit, for the additional information obtained by the other user obtained by the search processing, the additional information provided by the user who is browsing the document and the additional information provided by the other user The information search and display processing system according to claim 3, wherein a similarity is obtained, and the additional information provided by the other user whose similarity is greater than a predetermined level is searched as the related information. 所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する機能を備え、前記付加情報を介して前記文書に関わる関連情報を検索する情報検索表示処理システムに使用されるクライアント端末であって、
所定の表示デバイス上に表示された文書に前記付加情報を付与する付加情報付与部と、
前記文書中における前記付加情報付与部により前記付加情報が付与された付加情報付与部分の情報を取得する付加情報付与部分検知部と、
所定の方法により前記文書を閲覧中のユーザから前記文書中の検索対象部分の指定を受け付ける検索範囲設定部と、
前記検索対象部分について、前記文書を閲覧中のユーザとは異なる他のユーザと関わりのある前記関連情報についての検索結果を取得し、この検索結果を所定の提示媒体に提示させる関連情報提示制御部と
を備えたことを特徴とするクライアント端末。It has a function of adding additional information that can be managed separately from the document displayed on a predetermined display device, and is used for an information search and display processing system that searches for related information related to the document via the additional information. Client terminal to be
An additional information providing unit that provides the additional information to a document displayed on a predetermined display device;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added by the additional information addition unit in the document,
A search range setting unit that receives designation of a search target portion in the document from a user who is browsing the document by a predetermined method;
A related information presentation control unit that obtains a search result of the related information related to another user different from the user who is browsing the document for the search target portion, and presents the search result on a predetermined presentation medium. A client terminal comprising: 前記関連情報提示制御部は、前記検索結果として取得した前記他のユーザが付与した前記付加情報について、前記文書を閲覧中のユーザが付与した前記付加情報と前記他のユーザが付与した前記付加情報との類似度を求め、類似度が所定レベルよりも大きな前記他のユーザが付与した前記付加情報を前記関連情報として提示する
ことを特徴とする請求項５に記載のクライアント端末。The related information presentation control unit, for the additional information obtained by the other user obtained as the search result, the additional information provided by the user who is browsing the document and the additional information provided by the other user 6. The client terminal according to claim 5, wherein a similarity with the other user is obtained, and the additional information provided by the other user whose similarity is greater than a predetermined level is presented as the related information. 7. 前記検索範囲設定部は、検索を指示する前記文書を閲覧中のユーザが前記文書中の実質的に読んだ部分を示す情報を取得することで、前記検索対象部分の指定を受け付ける
ことを特徴とする請求項５または６に記載のクライアント端末。The search range setting unit receives a designation of the search target portion by acquiring information indicating a portion that is substantially read in the document by a user who is browsing the document instructing a search. The client terminal according to claim 5, wherein 前記検索範囲設定部は、前記文書中のページであって、前記文書を閲覧中のユーザが前記検索処理の指示を発した時点に前記表示デバイスに表示されているページの全体を、前記実質的に読んだ部分として特定する
ことを特徴とする請求項７に記載のクライアント端末。The search range setting unit may be configured to convert the entire page of the document, which is displayed on the display device at the time when the user who is browsing the document issues an instruction for the search process, into the substantially 8. The client terminal according to claim 7, wherein the client terminal is specified as a part read in. 前記検索範囲設定部は、前記付加情報付与部分検知部が取得した前記付加情報が付与された付加情報付与部分によって、前記実質的に読んだ部分を特定する
ことを特徴とする請求項７または８に記載のクライアント端末。The said search range setting part specifies the said substantially read part by the additional information addition part with which the said additional information acquired by the said additional information addition part detection part was used. The client terminal according to 1. 前記検索範囲設定部は、前記付加情報付与部分検知部が取得した前記付加情報であって、最新の付加情報が付与された付加情報付与部分によって、前記実質的に読んだ部分を特定する
ことを特徴とする請求項９に記載のクライアント端末。The search range setting unit is configured to specify the substantially read portion by using the additional information added portion to which the latest additional information is added, which is the additional information acquired by the additional information added portion detection unit. The client terminal according to claim 9, wherein: 前記検索範囲設定部は、前記付加情報付与部分検知部が取得した前記付加情報により示される語句を含む文の全体を、前記実質的に読んだ部分として特定する
ことを特徴とする請求項９または１０に記載のクライアント端末。The said search range setting part specifies the whole sentence containing the phrase shown by the said additional information which the said additional information provision part detection part acquired as the said substantially read part, The Claim 9 or Claim 9 characterized by the above-mentioned. 11. The client terminal according to 10. 前記検索範囲設定部は、前記付加情報付与部分検知部が取得した前記付加情報により示される語句を含む段落の全体を、前記実質的に読んだ部分として特定する
ことを特徴とする請求項９または１０に記載のクライアント端末。The method according to claim 9, wherein the search range setting unit specifies, as the substantially read portion, an entire paragraph including a phrase indicated by the additional information acquired by the additional information added portion detection unit. 11. The client terminal according to 10. 前記検索範囲設定部は、前記実質的に読んだ部分を特定するために使用された前記付加情報付与部分の情報の前記登録部への登録を禁止する
ことを特徴とする請求項９から１２のうちの何れか１項に記載のクライアント端末。13. The method according to claim 9, wherein the search range setting unit prohibits the registration unit from registering information of the additional information added portion used for specifying the substantially read portion. The client terminal according to any one of the preceding claims. 前記検索範囲設定部は、前記付加情報以外の指定を受け付けることで、前記実質的に読んだ部分を特定する
ことを特徴とする請求項７に記載のクライアント端末。The client terminal according to claim 7, wherein the search range setting unit specifies the substantially read portion by receiving designation other than the additional information. 前記検索範囲設定部は、前記検索対象部分を特定する設定枠の入力を所定のポインティングデバイスにより受け付けることで、前記実質的に読んだ部分を特定する
ことを特徴とする請求項１４に記載のクライアント端末。The client according to claim 14, wherein the search range setting unit specifies the substantially read portion by receiving an input of a setting frame for specifying the search target portion by a predetermined pointing device. Terminal. 所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する機能を備え、前記付加情報を介して前記文書に関わる関連情報を検索する情報検索表示処理システムに使用される管理サーバであって、
前記付加情報付与部分検知部により取得された前記付加情報付与部分の情報を前記文書に対応付けて登録する登録部と、
前記文書を閲覧中のユーザにより指定される前記文書中の検索対象部分と前記登録部に登録している前記付加情報付与部分の情報とを比較することで、前記文書を閲覧中のユーザとは異なる他のユーザと関わりのある前記関連情報についての検索処理を実行すると
を備えたことを特徴とする管理サーバ。It has a function of adding additional information that can be managed separately from the document displayed on a predetermined display device, and is used for an information search and display processing system that searches for related information related to the document via the additional information. Management server,
A registration unit that registers the information of the additional information addition part acquired by the additional information addition part detection unit in association with the document,
By comparing the search target part in the document specified by the user who is browsing the document with the information of the additional information adding part registered in the registration unit, the user who is browsing the document is A management server for performing a search process for the related information related to another different user. 前記検索処理部は、前記検索対象部分により示されている部分の付加情報であって、前記他のユーザが付与した前記付加情報を前記関連情報として検索する
ことを特徴とする請求項１６に記載の管理サーバ。17. The search processing unit according to claim 16, wherein the search processing unit searches for the additional information of the portion indicated by the search target portion, the additional information given by the other user, as the related information. 18. Management server. 前記検索処理部は、前記検索範囲設定部が受け付けた前記検索対象部分により示される部分の付加情報であって、前記文書を閲覧中のユーザが付与した前記付加情報と前記他のユーザが付与した前記付加情報との類似度を求め、類似度が所定レベルよりも大きな前記他のユーザが付与した前記付加情報を前記関連情報として検索する
ことを特徴とする請求項１７に記載の管理サーバ。The search processing unit is additional information of a portion indicated by the search target portion accepted by the search range setting unit, and is provided by the additional information provided by a user who is browsing the document and by the other user. 18. The management server according to claim 17, wherein a similarity with the additional information is obtained, and the additional information given by the other user whose similarity is higher than a predetermined level is searched as the related information. 前記検索処理部は、前記付加情報以外の指定により特定された前記検索対象部分であって、前記登録部に予め登録されている複数のユーザについての前記付加情報付与部分の情報を参照して、前記関連情報の検索を指示した前記文書を閲覧中のユーザと同一もしくは類似する視点または興味を有するユーザに関する情報を検索することを特徴とする請求項１８に記載の管理サーバ。The search processing unit is the search target portion specified by designation other than the additional information, with reference to the information of the additional information providing portion for a plurality of users registered in advance in the registration unit, 19. The management server according to claim 18, wherein information related to a user who has the same or similar viewpoint or interest as the user who is browsing the document instructed to search for the related information is searched. 前記検索処理部は、前記登録部に予め登録されている複数のユーザについての前記付加情報付与部分の情報を参照して、前記関連情報の検索を指示したユーザが付与した付加情報の位置とほぼ同一位置に前記付加情報を付した他ユーザの視点または興味に関する情報を検索することを特徴とする請求項１８に記載の管理サーバ。The search processing unit refers to the information of the additional information provision part for a plurality of users registered in advance in the registration unit, and substantially matches the position of the additional information provided by the user who instructed the search for the related information. 20. The management server according to claim 18, wherein information relating to a viewpoint or an interest of another user attached with the additional information at the same position is searched. 前記検索処理部は、前記他ユーザの興味に関する情報を、前記関連情報の検索を指示したユーザが付与した前記付加情報により示される対象文字列と、前記ほぼ同一位置の前記他ユーザによる前記付加情報により示される対象文字列との比較により得ることを特徴とする請求２０に記載の管理サーバ。The search processing unit includes information on the interest of the other user, a target character string indicated by the additional information given by the user who instructed the search for the related information, and the additional information by the other user at the substantially same position. 21. The management server according to claim 20, which is obtained by comparison with a target character string indicated by: 前記検索処理部は、前記他ユーザの視点に関する情報を、前記関連情報の検索を指示したユーザが付与した前記付加情報により示される対象文字列と、前記ほぼ同一位置の前記他ユーザによる前記付加情報により示される対象文字列との差により得ることを特徴とする請求２０に記載の管理サーバ。The search processing unit includes information on the viewpoint of the other user, a target character string indicated by the additional information given by the user who instructed the search for the related information, and the additional information by the other user at the substantially same position. 21. The management server according to claim 20, wherein the management server obtains the difference by using a difference from a target character string indicated by the following. 所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する機能を備えた前記付加情報を介して前記文書に関わる関連情報を検索する情報検索表示処理システムにおいて、コンピュータを利用して、前記文書に関わる関連情報を検索するためのプログラムであって、
前記付加情報が付与された付加情報付与部分の情報を前記文書と対応付けて管理する手順と、
所定の方法により指定された前記文書中の検索対象部分に関連する関連情報の検索処理を指示を受け付ける手順と、
前記検索対象部分と予め管理している前記付加情報付与部分の情報とを比較することで他ユーザと関わりのある前記関連情報についての検索処理を実行する手順と
を前記コンピュータに実行させることを特徴とするプログラム。An information search and display processing system that searches for related information related to the document via the additional information having a function of adding additional information that can be managed separately from the document to a document displayed on a predetermined display device, A program for searching for related information relating to the document using a computer,
Managing the information of the additional information added portion to which the additional information has been added in association with the document;
A step of receiving an instruction to search for related information related to a search target portion in the document specified by a predetermined method;
Executing a search process for the related information related to another user by comparing the search target portion with information of the additional information provision portion managed in advance. And the program.
JP2002368530A 2002-12-19 2002-12-19 Client terminal Expired - Fee Related JP4172266B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002368530A JP4172266B2 (en) 2002-12-19 2002-12-19 Client terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002368530A JP4172266B2 (en) 2002-12-19 2002-12-19 Client terminal

Publications (2)

Publication Number Publication Date
JP2004199484A true JP2004199484A (en) 2004-07-15
JP4172266B2 JP4172266B2 (en) 2008-10-29

Family

ID=32765070

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002368530A Expired - Fee Related JP4172266B2 (en) 2002-12-19 2002-12-19 Client terminal

Country Status (1)

Country Link
JP (1) JP4172266B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009110396A (en) * 2007-10-31 2009-05-21 Hitachi Software Eng Co Ltd Electronic content display system
JP2009187401A (en) * 2008-02-07 2009-08-20 Canon Inc Document management system, document management apparatus, and document managing method and program
JP2009539161A (en) * 2006-06-01 2009-11-12 ノキア コーポレイション Viewing browsing history on mobile communication devices
JP2013045210A (en) * 2011-08-23 2013-03-04 Konica Minolta Business Technologies Inc Display data generation device, display control system, and display control program
JP2018028941A (en) * 2017-11-08 2018-02-22 カシオ計算機株式会社 Server device, system, and program
US11868705B2 (en) 2019-09-20 2024-01-09 Fujifilm Business Innovation Corp. Associating document part with another document

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009539161A (en) * 2006-06-01 2009-11-12 ノキア コーポレイション Viewing browsing history on mobile communication devices
JP2009110396A (en) * 2007-10-31 2009-05-21 Hitachi Software Eng Co Ltd Electronic content display system
JP2009187401A (en) * 2008-02-07 2009-08-20 Canon Inc Document management system, document management apparatus, and document managing method and program
JP2013045210A (en) * 2011-08-23 2013-03-04 Konica Minolta Business Technologies Inc Display data generation device, display control system, and display control program
JP2018028941A (en) * 2017-11-08 2018-02-22 カシオ計算機株式会社 Server device, system, and program
US11868705B2 (en) 2019-09-20 2024-01-09 Fujifilm Business Innovation Corp. Associating document part with another document

Also Published As

Publication number Publication date
JP4172266B2 (en) 2008-10-29

Similar Documents

Publication Publication Date Title
JP4352684B2 (en) Information provision processing system, program
JP4702705B2 (en) Information display processing system, client terminal, management server, program
US10031927B2 (en) Facial recognition with social network aiding
US9092173B1 (en) Reviewing and editing word processing documents
KR101443404B1 (en) Capture and display of annotations in paper and electronic documents
US8935265B2 (en) Document journaling
US9176933B2 (en) Application of multiple content items and functionality to an electronic content item
US9569541B2 (en) Evaluating preferences of content on a webpage
US9251130B1 (en) Tagging annotations of electronic books
US20120036429A1 (en) Electronic book system and content server
US8589786B2 (en) Trademark report with store layout diagram
JP4123928B2 (en) Information display processing system, client terminal
JP2004199408A (en) Method for processing document, method for display processing of information, system for display processing of information, management server, client terminal, and program
Baldonado et al. Notable: At the intersection of annotations and handheld technology
JP2012190303A (en) Comment sharing system, method, and program
US7085770B2 (en) Method and system for generating a file containing graphical displays from content stored on a computing network location
RU2698405C2 (en) Method of search in database
US8418051B1 (en) Reviewing and editing word processing documents
JPH07311764A (en) Support system for examination read of document
JP2004151898A (en) Display control method, information display processing system, and program
JP2004199407A (en) Method for display processing of information, system for display processing of information, management server, client terminal, and program
JP4172266B2 (en) Client terminal
US20130227682A1 (en) Apparatus for E-Learning and method therefor
JP2004151882A (en) Method of controlling information output, information output processing system, and program
US8296647B1 (en) Reviewing and editing word processing documents

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080404

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080513

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080707

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080722

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080804

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110822

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120822

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120822

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130822

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees