JP2004199407A

JP2004199407A - Method for display processing of information, system for display processing of information, management server, client terminal, and program

Info

Publication number: JP2004199407A
Application number: JP2002367318A
Authority: JP
Inventors: Katsunori Yoshiji; 克典芳地; Takeshi Nagamine; 猛志永峯; Kei Tanaka; 圭田中; Noriyuki Kurabayashi; 則之倉林; Akio Yamashita; 明男山下
Original assignee: Fuji Xerox Co Ltd
Current assignee: Fujifilm Business Innovation Corp
Priority date: 2002-12-18
Filing date: 2002-12-18
Publication date: 2004-07-15

Abstract

<P>PROBLEM TO BE SOLVED: To efficiently retrace an electronic conference in applying an information display processing system utilizing annotations to the electronic conference. <P>SOLUTION: Document ID and annotation positions are registered in an annotation DB 216. Annotation imparting time is registered in the annotation DB 216. When receiving a retrieving instruction from a user by using annotations as retrieving keys, an annotation processor 218 displays documents including annotations matched with the retrieving condition on a document viewer 102 time sequentially by referring to the imparting time registered in an action log DB 214. More specifically, the annotation processor 218 segments annotation parts of the document, rearranges only the annotation-imparted parts in time order and displays the rearranged annotation-imparted parts on the document viewer 102. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、文書を表示デバイス上に表示する機能を備えた情報表示処理システムおよび情報表示処理方法、並びにコンピュータを利用して情報表示処理システムや情報表示処理方法を実現するためのプログラムに関する。また、本発明は情報表示処理システムを構成する管理サーバやクライアント端末に関する。
【０００２】
より詳細には、複数の端末装置を通信網で接続し、遠隔の利用者が画面上に表示された共通の資料を参照しながら会議や打合せなどの共同作業を行なうようにした電子会議システム、あるいは電子文書に追記された付加情報に対応する文書内の語句と関わりのある関連情報を検索するシステムへの応用に適した表示制御に関する。
【０００３】
【従来の技術】
人が文書を読む場合、ペンなどのポインティングデバイスを利用してアノテーション（注釈）を付与しながら読解を行なうことは自然なことである。アノテーションが付与された位置は読み手にとって、何らかの興味がある位置であると思われる。
【０００４】
同様のことは、電子文書を取り扱う場合にも起こる。たとえば、メモ、メッセージ、アノテーションなど、電子文書の本文に付加される可視化情報を、電子文書の本文に影響を与えることのないよう、その電子文書の本体の付加データとして添付する技術が広く用いられている。
【０００５】
たとえば、複数の端末装置を通信ネットワークで接続することにより、複数のユーザが端末画面を介して会議に参加できるようにした電子会議システムにおいて、参加者間で文書を共有可能にする技術が種々提案されている（たとえば特許文献１参照）。
【０００６】
【特許文献１】
特開平７−８４９０５号公報
【０００７】
ここで、注釈などを端末画面に表示された文書に付加することは、電子会議システムでもなされる。たとえば、端末画面に表示された文書（電子化された資料）に、ペン型の指示デバイスを用いての入力や指先で直接タッチパネルに触れて記入する手書き入力などによって、メモやアノテーションなどの付加情報を表示画面上で書き込むことがある。
【０００８】
この機能によれば、会議の参加者は、それぞれの端末から独自に加筆修正することができ、思考を妨げず簡単に付加情報を入力することができる。また、この手書き情報を他の参加者の端末画面上にも表示することができる。これにより、各端末装置から意見やアイデアを入力したりそのハードコピーを取ったりすることができる。また、アノテーションを付した部分を検索条件に設定して検索し、検索結果を表示させることもできる。
【０００９】
【発明が解決しようとする課題】
しかしながら、従来の電子会議システムでは、文書に付加された情報（たとえばアノテーション）を検索する機能や検索結果を表示する機能を備えているものの、単なる検索結果の提示に過ぎず、検索結果を効率的に利用することは難しかった。たとえば、会議中や会議終了後に、文書に付与しておいたアノテーションを利用して検索をかけて会議を振り返ろうとしても、アノテーション部分が単に提示されるだけであり、効率的に会議を振り返るということはできなかった。
【００１０】
本発明は、上記事情に鑑みてなされたものであり、アノテーションなどの文書に付加された付加情報を利用して効率的に検索結果を提示することが可能な情報表示処理方法およびこの情報表示処理方法を応用した情報表示処理システムを提供することを目的とする。また、本発明は、情報表示処理システムを構成する管理サーバやクライアント端末を提供することを目的とする。また、本発明は、コンピュータを利用して前記方法やシステムを実現するためのプログラムを提供することを目的とする。
【００１１】
【課題を解決するための手段】
すなわち、本発明に係る第１の情報表示処理方法は、所定の表示デバイス上に表示された文書に、当該文書とは別に管理可能な付加情報を付与する機能を備えた情報表示処理システムにおける情報表示処理方法であって、文書に付加情報が付与された時刻を管理するとともに、文書に付与しておいた付加情報を検索キーとして利用して検索処理を指示されると、付加情報が付与された時刻を参照して、検索条件に合致する付加情報を含む文書を時系列で表示デバイス上に表示させることとした。
【００１２】
また、本発明に係る第２の情報表示処理方法は、所定の表示デバイス上に表示された文書に、当該文書とは別に管理可能な付加情報を付与する機能を備えた情報表示処理システムにおける情報表示処理方法であって、文書に付与しておいた付加情報を検索キーとして利用して検索処理を指示されると、検索条件に合致する文書中の付加情報付与部分を切り出すとともに、切り出した付加情報付与部分を文書中の当該付加情報付与部分の配置順とは異なる順に並び替えて表示デバイス上に表示させることとした。
【００１３】
また、本発明に係る第３の情報表示処理方法は、所定の表示デバイス上に表示された文書に、当該文書とは別に管理可能な付加情報を付与する機能を備えた情報表示処理システムにおける情報表示処理方法であって、文書に付与しておいた付加情報を検索キーとして利用して検索処理を指示されると、検索条件に合致する文書が複数存在する場合には検索条件に合致する複数の文書中の付加情報付与部分をそれぞれ切り出すとともに、切り出した付加情報付与部分を所定の順に並べて表示デバイス上に表示させることとした。
【００１４】
本発明に係る第１の情報表示処理システムは、上記本発明に係る第１の情報表示処理方法を実施するシステムであって、所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する付加情報付与部と、文書中における付加情報が付与された付加情報付与部分の情報を取得する付加情報付与部分検知部と、文書ごとに付加情報が付与された時刻と付加情報付与部分とを対応付けて登録する登録部と、所定の検索条件に合致する付加情報が付与された文書の検索処理を受け付けるとともに登録部に登録されている付加情報が付与された時刻を参照して検索条件に合致する文書を時系列で表示デバイス上に表示させる付加情報検索表示処理部とを備えるものとした。
【００１５】
本発明に係る第２の情報表示処理システムは、上記本発明に係る第２の情報表示処理方法を実施するシステムであって、所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する付加情報付与部と、文書中における付加情報が付与された付加情報付与部分の情報を取得する付加情報付与部分検知部と、所定の検索条件に合致する付加情報が付与された文書の検索処理を受け付けるとともに検索条件に合致する文書中の付加情報付与部分を切り出して当該切り出した付加情報付与部分を文書中の付加情報付与部分の配置順とは異なる順に並び替えて表示デバイス上に表示させる付加情報検索表示処理部とを備えるものとした。
【００１６】
本発明に係る第３の情報表示処理システムは、上記本発明に係る第３の情報表示処理方法を実施するシステムであって、所定の表示デバイス上に表示された文書に当該文書とは別に管理可能な付加情報を付与する付加情報付与部と、文書中における付加情報が付与された付加情報付与部分の情報を取得する付加情報付与部分検知部と、所定の検索条件に合致する付加情報が付与された文書の検索処理を受け付けるとともに検索条件に合致する文書が複数存在する場合には検索条件に合致する複数の文書中の付加情報付与部分をそれぞれ切り出し当該切り出した付加情報付与部分を所定の順に並べて表示デバイス上に表示させる付加情報検索表示処理部とを備えるものとした。
【００１７】
また従属項に記載された発明は、本発明に係る情報表示処理方法や情報表示処理システムのさらなる有利な具体例を規定する。また、本発明に係る管理サーバやクライアント端末は、本発明に係る情報表示処理システムを構成するものである。さらに、本発明に係るプログラムは、本発明に係る情報表示処理方法や情報表示処理システムを、電子計算機（コンピュータ）を用いてソフトウェアで実現するために好適なものである。なお、プログラムは、コンピュータ読取り可能な記憶媒体に格納されて提供されてもよいし、有線あるいは無線による通信手段を介して配信されてもよい。
【００１８】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について詳細に説明する。
【００１９】
図１は、本発明に係る表示制御方法および情報表示処理システムを適用した電子会議システムの構成例を示す図である。なお、この例での電子会議の場面設定としては、たとえば、開発開始提案や国際技術標準化会議など、電子的なドキュメントベースの会議の場面を想定する。
【００２０】
電子的なドキュメントとしては、たとえば、開発開始提案の場面では、前任機（現行機種など開発対象機種に対するそれ以前の機種）に関する仕様書、市場トラブルレポート、サポート部門の技術標準書類、など類似文書が多数ある。また、技術標準化会議の場面では、似たような技術標準書や同じ技術に関するメーリングリストなど関連する文書が周囲に存在している。
【００２１】
電子会議システムへの参加者としては、たとえば、決定に影響を与えたり決定事項から影響を受けたりする組織の代表である参加者、議長、記録係などが想定される。電子会議システムでは、たとえば、代表者の誰かが提案書を纏め事前に資料を配布している。そして、会議の前に参加者ならびに議長が資料を読み、手書きのアノテーションを表示画面上に加えることができる。また、会議の進行中に組織の代表者は、バックオフィスにいる関係者とアノテーションを用いてコンテキストを共有し、また互いに連絡をとりながらリアルタイムに部門意見の調整を行なうこともできる。
【００２２】
ここで、電子会議システムにおける会議の流れの中で、手書きアノテーションの共有が関わる場面としては、たとえば、次のようなものが考えられる。
＊配布された資料を会議前に読み、アノテーションを書き込む。
＊説明内容を聞きながらアノテーションを入れる。
＊質疑応答セッションで、アノテーションをもとに質問箇所を素早く探して質問する、あるいは応答する。
＊過去の関連文書を検索する。
＊会議中で同僚に質問する。
＊議論のセッション。
＊合意事項の確認のセッション。
＊議事録作成。
＊会議の模様をグループのメンバーに報告する。
＊会議を通して専門家を発見したり、多様な視点に気付かされたりする。
【００２３】
＜システム構成＞
次に、図１に示した電子会議システムの構成を説明する。電子会議システム１は、電子会議の参加者が使用するクライアントシステム１００と、電子会議システム１にて使用される電子データ（文書データに限らず、会議に必要な他の電子的な情報の全てを含む）を処理するサーバシステム２００とを備えている。クライアントシステム１００およびサーバシステム２００を構成する各機能要素は、有線や無線などのネットワーク（通信網）９によって接続されている。
【００２４】
クライアントシステム１００は、会議への参加者ごとに設けられている。図示した例では、２セット分を例示しているが、その数は２つに限らない。なお、１つのセットを複数人が共用してもかまわない。
【００２５】
クライアントシステム１００は、電子文書を表示するための文書ビューア１０２（図では１０２ａ，１０２ｂ）、文書ビューア１０２に表示されている電子文書に付加情報の一例であるアノテーションを付与するためのアノテーションデバイス１７０（図では１７０ａ，１７０ｂ）、および画面操作の履歴を保存したり文書ビューア１０２を制御したりするマネジャ部１８０（図では１８０ａ，１８０ｂ）を有する。文書ビューア１０２とアノテーションデバイス１７０とで、付加情報付与部分検知部１０６（図では１０６ａ，１０６ｂ）およびアノテーション検出部（付加情報付与部分検知部検知部）１０７（図では１０７ａ，１０７ｂ）とが構成される。
【００２６】
文書ビューア１０２は、図示しない本体（クレードル／ドッキングステーション）に装着自在となっている。文書ビューア１０２としては、たとえば、パソコンなどに使用されるＣＲＴや液晶（ＬＣＤ）などのディスプレイや、紙を模倣したようなデバイス（たとえばタブレットＰＣ）などを使用するとよい。なお、文書ビューア１０２は、ホワイトボード程度の大きさにした大型タブレットとして構成してもよい。
【００２７】
アノテーションデバイス１７０としては、手書き入力ができる機能を備えたものであるのがよく、たとえばペンの形状を持つデバイスなどの入力デバイスを使用するとよい。ペン形状のデバイスの場合、表示面上をデバイスで直接指示できるように、たとえば電磁誘導方式の検知機構とする場合には文書ビューア１０２およびアノテーションデバイス１７０ともに指示入力を検知する仕組みを持つものとする。また、タッチパネル方式を採用してもかまわない。また、アノテーションデバイス１７０は、ペン型のものに限らず、マウスやキーボードなどの入力・指示デバイスを用いるものであってもよい。
【００２８】
マネジャ部１８０は、文書の閲覧履歴やアノテーションの履歴（ログファイル）を保存するログファイル格納部１８２（図では１８２ａ，１８２ｂ）を有する。また、このマネジャ部１８０は、読み手により指定された表示手法（本例では強調表示機能）を実現する機能部が設けられる（後述する図３参照）。
【００２９】
サーバシステム２００は、付加情報管理部の一例であってログファイルやアノテーションを管理するアノテーション管理部２１０、電子文書を管理する文書管理部２２０、個人のプロファイルを管理するプロファイル管理部２３０、文章の解析や重要語の抽出を行なうなどして会議を支援する情報検索部２４０、および会議参加者を管理する会議参加資格管理部２５０を有する。
【００３０】
アノテーション管理部２１０は、文書に付与されたアノテーションの保存と検索を行なうサーバであるアノテーションサーバ２１２と、各クライアント端末のログファイルの内容を保存するデータベース（Data Base ）であるアクションログＤＢ２１４と、付加情報格納部の一例であってアノテーションおよびそれに付随する属性情報を保存するためのデータベースであるアノテーションＤＢ２１６とを有する。
【００３１】
文書管理部２２０は、文書の保存と検索を行なうサーバである文書サーバ２２２と、文書およびそれに付随した属性情報を保存するためのデータベースである文書ＤＢ２２４とを有する。
【００３２】
文書本体を管理する文書管理部２２０と、電子文書に付与されるアノテーションなどの付加情報を管理するアノテーション管理部２１０とを設けることで、配布資料に対する加筆修正がそれぞれ独自に行なわれるケースでも、会議終了時に原本と合わせたときにその内容に矛盾が生じることを回避することができる。
【００３３】
たとえば、だれかが原本のある部分に補足説明を加え、一方、だれかが同じ部分を削除するような修正を加えたときでも、それらの編集部分を文書ＤＢ２２４に登録されている文書本体とは別に、文書本体と対応付けてアノテーションＤＢ２１６に登録しておくことで、会議資料本体やこれに対する加筆修正などの内容に矛盾が生じることなく情報の管理を行なうことができる。また、アノテーションＤＢ２１６を参照することで、その場で出された意見や討論の内容を後で書き出すことも容易である。
【００３４】
プロファイル管理部２３０は、個人のプロファイルの保存と検索を行なうサーバであるプロファイルサーバ２３２と、個人のプロファイルを保存するデータベースであるプロファイルＤＢ２３４とを有する。
【００３５】
情報検索部２４０は、文章の解析や重要語の抽出を行なうサーバである自然言語処理サーバ２４２と、自然言語処理サーバ２４２が参照する解析辞書や類義語辞書などを保存したデータベースである自然言語処理ＤＢ２４４とを有する。
【００３６】
自然言語処理ＤＢ２４４には、情報検索手法に適したデータ構造で所定のデータが格納される。たとえば、語義ベースで単語の意味ベクトルを格納する単語ベクトル辞書（辞書はデータベースの一例）、係り受け単語間の共起関係を格納する共起データベース、あるいは類義語展開や関連展開を行なうために使用される拡張辞書（類義語辞書を含む）などを格納する。
【００３７】
情報検索部２４０は、自然言語処理ＤＢ２４４に、これら種々のデータベース（辞書を含む）を有することで、さまざまな検索エンジンを選択して使うことができるようになる。
【００３８】
会議参加資格管理部２５０は、ある会議にあるユーザが参加できるかどうかを判断する会議参加資格管理サーバ２５２と、会議ＩＤとこの会議に参加可能なユーザＩＤの組み合わせを保存したデータベースである会議参加資格管理ＤＢ２５４とを有する。
【００３９】
なお、図示したサーバシステム２００の各管理部２１０，２２０，２３０，２４０，２５０は、それぞれ別体のものであってもよいし、任意の組合せにて同一筐体内に収容されたものであってもよい。たとえば、各サーバは共通のコンピュータで構成されていてもよいし、各データベースとして共通のハードディスク装置を利用するものであってもよい。なお、アノテーション管理部２１０、文書管理部２２０、および情報検索部２４０を纏めて、文書情報管理部ともいう。これら管理部２１０，２２０，２３０，２４０としては、たとえばワークステーションが使用されるとよい。
【００４０】
＜文書ビューアの外観＞
図２は、情報表示処理装置の一実施形態である文書ビューア１０２の表示面側に着目した外観図である。図示するように、この文書ビューア１０２は、表示デバイスの一例である液晶表示パネル１０３と種々のハードウェアキーで構成された操作ボタン１１０とが筐体１０９に収容されて構成されており、ある程度の厚みを持った１枚の板状に形成されている。
【００４１】
液晶表示パネル１０３は、バックライト付きパネルとして構成されており、文書を表示するための文書表示エリア１０４として使用される。文書表示エリア１０４上は、アノテーションデバイス１７０にて手書き入力（デジタルインク）が可能である。マネジャ部１８０には、このデジタルインクに対応したメモ書きユーティリティ（ハードウェアおよびアプリケーションソフト）が組み込まれる。
【００４２】
デジタルインクに対応したコントローラとしては、手書きで入力したデータを“デジタルインク(手書き文字)”として認識し処理するためのものであればよく、必ずしも、手書きで入力したものをテキスト変換する機能（手書き文字認識機能）を備えたものである必要はない。この場合でも、テキストの最上位フォーマットとして取り扱うことができ、手書き文字のまま検索したり、文字を加工(カラー変更など)したりすることができる。なお、デジタルインクデータフォーマットを画像データ（たとえばビットマップデータ）として取り扱ってもよい。
【００４３】
このように、文書ビューア１０２は、紙の文書を読む際に文書に好きな形で下線や丸を付けたりメモを書き込んだりするのと同様に、アノテーションデバイス１７０を用いて書込み入力が可能となっている。また、厚みを持った１枚の板状に形成されているので、たとえば、書込み時に、膝の上に置いたり傾けたりして読みやすい位置や角度に据えることも容易である。
【００４４】
書込み入力された情報（文書本体の付加情報）は、文書ビューア１０２内の図示しない記憶部に保持され、所定のときにサーバシステム２００のアノテーション管理部２１０に送られ、アノテーションＤＢ２１６に文書本体と対応付けられて格納される。後にその文書を読み出すときには、文書本体とともに、過去に記入したアノテーションも読み出され、文書表示エリア１０４に表示される。
【００４５】
これにより、紙のように自由に好きな形で下線や丸あるいはメモなどの書込みを入れることで、情報の記載場所に関する読み手の記憶を視覚的に助ける効果を発揮させることが可能となる。
【００４６】
たとえば、電子会議システム１を利用した会議であれば、配布された資料を会議前に読みアノテーションを書き込んだり、あるいは会議の途中に説明内容を聞きながらアノテーションを入れたりするなどに利用することができる。
【００４７】
操作ボタン１１０としては、複数のハードウェアキーが用意されている。たとえば図示するように、文書ＤＢ２２４に格納された文書を読み込むための文書読込みボタン１１４と、文書表示エリア１０４に描画されたアノテーションを保存するための保存ボタン１１６と、アノテーションＤＢ２１６に保存されるアノテーションを検索し文書表示エリア１０４に表示させるための検索ボタン１１８と、表示を更新させるための更新ボタン１２０とを備えている。
【００４８】
また、操作ボタン１１０としては、ページを前後に捲るための前ページ送りボタン１２２ａおよび次ページ送りボタン１２２ｂからなるページ捲りボタン１２２と、重要語を表示するための強調表示ボタン１２４と、文書ビューア１０２が開いている文書にアノテーションを付けているユーザの一覧を表示するユーザ表示ボタン１２６とを備えている。
【００４９】
なお、操作ボタン１１０のハードウェアキーに代えて、文書表示エリア１０４にキーボタンを表示するソフトウェアキーとしてもよい。
【００５０】
また、文書表示エリア１０４の下部には、検索モード時に、検索結果ナビゲーションボタン１２７が表示されるようになっている。
【００５１】
文書ビューア１０２は、内部に備えられている記憶媒体から読み出したデータ、あるいは図示しないネットワーク接続機能部を介してサーバシステム２００（Ｗｅｂサーバでもよい）などから取得したデータに基づいて画像を液晶表示パネル１０３に表示するように構成されている。また、文書ビューア１０２は、本を読むようにパラパラと捲りながらページ単位で表示を切り替えていく機能（捲り表示機能）が搭載されており、この捲り表示機能を利用することで、たとえば、取り込んだ多数の情報の中から所望の情報を素早く検索できるように構成されている。
【００５２】
すなわち、この文書ビューア１０２における情報検索時には、前ページ送りボタン１２２ａや次ページ送りボタン１２２ｂといった２つのページ送りボタン（ページ捲りボタン１２２）を操作することで、ページ捲り操作を行ないながら所望のページ情報を液晶表示パネル１０３に表示させることができる。また、前ページ送りボタン１２２ａや次ページ送りボタン１２２ｂの何れか一方を連続的に押し続けると高速でページ送りを行なうことができ、これにより、次々と表示される情報を確認しながら所望とする情報を探すという操作が可能となっている。
【００５３】
また、捲り表示の際は、ページ送り操作に合わせて、液晶表示パネル１０３の液晶素子を駆動する画素振幅である画像コントラストや画像全体の明るさである表示明度（ブライトネス／背景輝度）を通常表示時と異なるものとし、表示デバイス上の表示画像の明暗状態を所定時間に亘って通常状態の明暗の調子と異なるものにすることで、全体の画像の特徴抽出が容易となるように構成されている。
【００５４】
＜文書ビューア／マネジャ部＞
図３は、文書ビューア１０２とマネジャ部１８０の機能ブロック図である。文書ビューア１０２は、ページ単位で画像を表示する表示デバイスの一例である液晶表示パネル１０３と、文書ビューア１０２におけるの表示処理全体を制御するコントローラ１３０と、所定条件の元に新しいページ画像を生成するページ画像生成部１４０とを備える。コントローラ１３０は、液晶表示パネル１０３上のページ画像の切替指示を操作ボタン１１０を介して受け付けるページ送り指示受付部１３２を有する。ページ画像生成部１４０は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けたことを条件として新しいページ画像を生成する。
【００５５】
また、文書ビューア１０２は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けたことを条件として、液晶表示パネル１０３上の画像を切り替えるとともに表示画像の明暗状態を所定順序に従って切り替える表示輝度制御部１５０を備える。
【００５６】
ページ画像生成部１４０は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けると、指示された方向（前方／後方の何れか）の新しいページ画像を生成し、生成し終えると、その旨を示す生成完了信号Ｓ１を表示輝度制御部１５０に通知する。
【００５７】
表示輝度制御部１５０は、液晶表示パネル１０３上におけるページ画像の表示コントラストを制御する機能部であるコントラスト制御部１５０ａと、液晶表示パネル１０３のバックライト輝度を制御することでブライトネスを制御する機能部であるブライトネス制御部１５０ｂとを有する。また、表示輝度制御部１５０は、液晶表示パネル１０３上のページ画像のコントラストをコントラスト制御部１５０ａにより調整したり、あるいはページ画像のブライトネスをブライトネス制御部１５０ｂにより調整することで、液晶表示パネル１０３上における表示輝度を制御する。なお、コントラストおよびブライトネスの両方に限らず、この両者の少なくとも一方を調整するものであればよい。
【００５８】
この表示輝度制御部１５０は、ページ送り指示受付部１３２がページ画像の切替指示を受け付けると、液晶表示パネル１０３の画像をページ画像生成部１４０が生成した新しいページ画像に切り替えるとともに、表示輝度を所定時間だけ通常表示（その時点にユーザが設定しているコントラストやブライトネスの状態）と少し変える機能を備えている。これにより、本を読むようにパラパラと捲りながら表示を行なっていく場合でも、判別能を高めることができる。
【００５９】
一方、マネジャ部１８０は、ログファイル格納部１８２の他に、読み手が読もうとする対象文書を文書ＤＢ２２４から取り込み強調表示すべき文字やセンテンスを特定する強調語／センテンス特定部１８４と、強調表示すべき文字やセンテンスの選択手法を強調語／センテンス特定部１８４に指示する強調語／センテンス選択手法指示部１８６と、強調表示機能の有効／無効（オン／オフ）を制御する強調指示制御部１８８とを備える。
【００６０】
マネジャ部１８０は、先ず、強調語／センテンス選択手法指示部１８６にて読み手（本例では会議参加者）により指定された手法を実現する強調語／センテンス特定手法を選択し強調語／センテンス特定部１８４に指示する。読み手が読もうとする対象文書は、強調語／センテンス特定部１８４に入力される。強調表示機能がオンとなっている場合は、強調語／センテンス特定部１８４にて強調表示すべき語句（単語、センテンス、あるいは文章）をどのように表示するかが決定された後に文書ビューア１０２のコントローラ１３０を通じページ画像生成部１４０へ画像情報が送られる。
【００６１】
なお、強調表示手法としては、濃度（コントラスト／ブライト）を変化させて表示させる、フォント（種類やサイズ）を変化させて表示させる、文字色を変化させて表示させる、文字の背景色を変化させて表示させる、下線やべた塗りを付す、などという方法がある。
【００６２】
また、強調表示機能を利用することで、「流し読み機能」を持たせる場合にも効果を高めることができる。たとえば、紙の文書を流し読みするとき、読み手は、興味を引く語句や文書を特徴づけている語句を拾い読みしながら、大事な内容が掲載されていそうなページや文書の大凡の印象を得るといったことを行なっている。この文書ビューア１０２でも、「流し読みモード」を設けることで、文意をよく表現していると思われる重要語句を濃く表示することができる。濃く表示されているキーワードを追っていくことによって、短時間で文書の内容を理解することができる。また、読み手は、濃く表示されている語句の周辺が重要な箇所であると推測することもできる。より深く内容を理解したければ、そこを読み進めればよい。
【００６３】
また、アノテーション機能を利用した文献リストの自動生成とリンクさせた文書を表示することもできる。たとえば、ある文書に読み手が書き込んだ下線や丸などの印がついた語句をキーワードにして、サーバシステム２００に保持している文書に検索をかける。そしてキーワードが頻出する文書を参考文献としてリストアップする。読み手は、文書のタイトル、キーワードが頻出している個所の文章（クリップ）とページ番号を参照することができる。指定された参照文献を表示する際には、クリップ（検索条件に該当した語句を示す状態）中のキーワードに、たとえば、フォント種やサイズを変える、下線を引く、色塗りする、あるいは濃い文字で表示するなどの強調表示をする。こうすることで、参照文献の内容を素早く理解することが可能となる。
【００６４】
なお、強調語／センテンス特定部１８４、強調語／センテンス選択手法指示部１８６、および強調指示制御部１８８の各処理は、本願出願人に係る特願２００２−３１４８７６号を参照するとよい。
【００６５】
＜文書サーバ／文書データベース＞
図４は、文書サーバ２２２および文書ＤＢ２２４の構成例を示す図である。文書サーバ２２２は、「登録」と「文書読込み」を外部からの指示により受け付ける。たとえば、文書ビューア１０２の文書読込みボタン１１４が操作されたことをクライアントシステム１００にて検知すると、クライアントシステム１００は、その旨をサーバシステム２００を構成する文書管理部２２０の文書サーバ２２２に通知する。これにより、文書サーバ２２２は、文書ＤＢ２２４から指示された文書を読み込む。
【００６６】
なお、「登録」は、たとえば“http://datacenter.company.co.jp/access.cgi？DocumentID=8gjk3cl3”などのように、文書ＤＢ２２４への文書の格納先を示すアドレスを示した登録したい文書へのＵＲＬ（Uniform Resource Locators ）などのパスやディレクトリへのパスで与えることとする。
【００６７】
文書サーバ２２２は、与えられたパスが示す文書（群）に対し、順次、文書ＩＤを付与し、文書名と文書本文を文書ＤＢ２２４に登録する。このとき、文書ＤＢ２２４内のデータ構造は、たとえば図４（Ｂ）のようになる。文書名または文書本文はＵＲＬなどの文書へのパスでもかまわない。
【００６８】
文書サーバ２２２は、文書ビューア１０２から「文書読込み」の指示を受け付ける。文書サーバ２２２は、「文書読込み」の指示を受け付けると、文書ＤＢ２２４内の文書名の一覧を作成し、文書ビューア１０２へ返す。また、文書サーバ２２２は、文書ビューア１０２より文書名を受け取り、対応する文書本文を文書ビューア１０２へ送り返す。
【００６９】
＜アノテーションサーバ／アノテーションデータベース＞
図５は、アノテーションサーバ２１２およびアノテーションＤＢ２１６の基本的な構成例を示す図である。
【００７０】
アノテーションサーバ２１２は、「保存」と「検索」を外部からの指示により受け付ける。たとえば、文書ビューア１０２の保存ボタン１１６が操作されたことをクライアントシステム１００にて検知すると、クライアントシステム１００は、その旨をサーバシステム２００を構成するアノテーション管理部２１０のアノテーションサーバ２１２に通知する。これにより、アノテーションサーバ２１２は、保存を指示されたアノテーション情報（付加情報の特徴を表した情報の一例）をそのアノテーションが付与されていた文書に対応付けて、記憶部の一例であるアノテーションＤＢ２１６に登録（格納）する。
【００７１】
クライアントシステム１００からアノテーションサーバ２１２にアノテーション情報を送る方式は、アノテーションデバイス１７０の１ストロークごとにアノテーションサーバ２１２にアノテーション情報を送ってもよい。
【００７２】
たとえば、アノテーションサーバ２１２は、文書ビューア１０２から「保存」の指示を受け付ける。このとき、アノテーションＩＤ、保存したいアノテーション内容とアノテーションの矩形情報と色や形状、またアノテーションが付与された文書ＩＤおよび「保存」指示を発した文書ビューア１０２の端末ＩＤが与えられる。またこのとき、同様に、「保存」を指示した会議参加者（クライアント）のユーザ名や、その会議を示す会議ＩＤ、保存を指示したアノテーションに関する公開属性、そのアノテーションの状況（新規、既存、消去）を示すステータス、およびアノテーションが付与された時刻も与えられる。
【００７３】
アノテーションサーバ２１２は、与えられたアノテーションＩＤ、端末ＩＤ、文書ＩＤ、矩形情報（詳細は後述する）、アノテーション内容、色、形状、ユーザＩＤ（あるいはユーザ名）、会議ＩＤ、公開属性、ステータス、時刻を、テーブルデータとしてアノテーションＤＢ２１６に保存する。このときアノテーションＤＢ２１６内のデータ構造は、たとえば図５（Ｂ）のようになる。アノテーションＩＤは、クライアントシステム１００側で発行する方式や、アノテーションサーバ２１２側で発行する方式がある。少なくともアノテーションＩＤ、ユーザＩＤ、文書ＩＤの３つ組みで唯一でなければならない。与えられたアノテーションＩＤもしくは前記の３つ組みが新規でない場合は、そのアノテーションＩＤもしくは前記の３つ組みで示される行を上書きするものとする。
【００７４】
アノテーション内容は、描画されたアノテーションを再現するためのデータであり、ビットマップやベクトルデータなどのデータとなる。色や形状は、アノテーションの色や形状である。ユーザＩＤ（あるいはユーザ名）は、文書ビューア１０２を操作しているユーザを示す情報であり、会議ＩＤは、そのユーザが参加している会議のＩＤである。
【００７５】
公開属性は、たとえば、公開可能（制限なし）とする（＝Ｐｕｂ）、あるグループ内だけに公開する（＝Ｆｒｄ）、アノテーションを非公開（個人用）とする（＝Ｐｒｖ）のうちの何れかをとるものとする。あるグループ内だけに公開する（Ｆｒｄ）場合には、公開対象のグループの情報（たとえば会議ＩＤ）もアノテーションＤＢ２１６に登録する。
【００７６】
ステータスは、アノテーションが新規に作られたのか(New)、すでに存在していたものか(＝ Exist)、削除されたか（＝Deleted）の状態が入る。ユーザがアノテーションを消しゴムなどで消した場合、ここは「Deleted」となる。表示の際には「Deleted」のアノテーション含め全てのアノテーションをサーバより送付して、クライアント側でステータスをチェックし、表示/非表示を切り替えたり、サーバ側で「Exist」のものだけを送付したりする。
【００７７】
時刻（クライアント時間）は、文書ビューア１０２においてアノテーションが付与された時刻であり、日付と時間からなる。
【００７８】
また、クライアントシステム１００は、文書ビューア１０２の検索ボタン１１８が操作されたことを検知すると、その旨をサーバシステム２００を構成するアノテーション管理部２１０のアノテーションサーバ２１２に通知する。これにより、アノテーションサーバ２１２は、検索を指示されたアノテーション情報をアノテーションＤＢ２１６から読み出す。
【００７９】
たとえば、アノテーションサーバ２１２は、文書ビューア１０２から「検索」の指示を受け付ける。このとき、アノテーションサーバ２１２は、文書ＩＤと矩形情報とアノテーション付与範囲に関する情報をクライアントシステム１００（文書ビューア１０２）から受け取る。アノテーションサーバ２１２は、これらの情報（検索条件）に基づきアノテーションＤＢ２１６内を検索し、適切なアノテーション内容を文書ビューア１０２へ返す。この検索処理については後述する。
【００８０】
＜＜アノテーション付与に関する処理＞＞
次に、アノテーション付与に関する処理について、具体例を用いて説明する。先ず、文書の登録、読込み、アノテーション付与、保存までを説明する。
【００８１】
＜文書の登録処理＞
図６は、以下に述べる具体例における文書ＤＢ２２４の構成例を示す図である。本例におけるそれぞれの文書は、コピー機の操作に関するマニュアルである。
【００８２】
先にも述べたように、文書の登録は、登録したい文書へのＵＲＬやディレクトリへのパスで与えることとする。文書サーバ２２２は、受け取ったパスで示される文書の文書ＩＤ、文書名、文書本文を、文書ＤＢ２２４への文書の登録内容として、図６のように登録する。
【００８３】
＜文書の読込み処理＞
文書の読み込みを希望する参加者は、文書ビューア１０２の文書読込みボタン１１４を押下する。この指示を受け付けた文書ビューア１０２は、文書読込み要求を文書サーバ２２２へ発信する。
【００８４】
この通知を受けた文書サーバ２２２は、文書ＤＢ２２４内の文書名の一覧を作成し、文書ビューア１０２へ返す。ここでは“manual1.txt, manual2.txt, manual3.txt, manual4.txt”となる。文書ビューア１０２は、文書名の一覧をリストボックスなどで表示しユーザＡ（ユーザＩＤはuser１）へ選択を促す。
【００８５】
ユーザＡは、“manual2.txt”を選択したものとする。文書ビューア１０２は、“manual2.txt”が選択されたことを文書サーバ２２２へ通知する。文書サーバ２２２は、“manual2.txt”に付与される文書ＩＤと文書本文を文書ＤＢ２２４より検索し、文書ビューア１０２へ返す。文書ビューア１０２は、受け取った文書本文を文書表示エリア１０４へ表示する。なお、文書サーバ２２２に全文検索機能などを設けると、読込みの対象として検索結果を提示することも可能である。
【００８６】
＜アノテーション付与処理＞
図７は、文書ビューア１０２の文書表示エリア１０４に表示された文書にアノテーションを付与した状態の表示例を示す図である。読み手（ユーザＡ）は、文書表示エリア１０４に表示された文書に対して、興味や関心に応じて下線や丸などの印（アノテーション）を付与しながら文書を読む。ここではアノテーションデバイス１７０としてペン型のデバイスを利用する。この場合、紙に書き込むようにアノテーションを付与することができる。
【００８７】
このとき、文書表示エリア１０４は、図７（Ａ）に示されるように、実際には目に見えないが文字を含む矩形に区切られているものとする。文字の無い空白名部分や図表などの部分も適当な大きさの矩形に区切る。たとえば、前後の文字のフォントサイズを参考に適当な大きさの矩形に区切るとよい。それぞれの矩形には、各矩形を特定するための情報が付与される。たとえば、先頭ページから連続した矩形番号が左上から横方向に順に付与される。
【００８８】
たとえば、コピー機のマニュアルの校正を行う会議で、ユーザＡはマニュアルのあるページの説明文の「原稿の中心を…」に着目して、図７（Ａ）に示されるアノテーションａ１を付与したとする。また、綴じ代を行なう操作にも注目してアノテーションｂ１を付与したとする。この後、２ページ目、３ページ目と読み進み、実際に操作を行ないながら注意すべき点などを、図７（Ｂ）のように３ページに亘ってアノテーションを付与したとする。
【００８９】
＜保存処理＞
図８は、本事例において文書ビューア１０２がアノテーションサーバ２１２へ送る情報の一例を示した図である。また、図９は、本事例におけるアノテーションＤＢ２１６の構成例を示す図である。また、図１０は、本事例におけるアクションログＤＢ２１４の構成例を示す図である。図９に示すデータの構成例は図５に示したものと同様である。
【００９０】
ユーザＡ（ユーザＩＤはuser１）は、本システムの利用の際、事前に付与されているユーザＩＤと会議ＩＤを入力して会議参加資格管理サーバ２５２に問い合わせることで個人認証をする。照合に合致すれば、本システムが利用可能となる。この後、ユーザＡは、文書ビューア１０２の保存ボタン１１６を押下することによってアノテーションの保存を指示することができる。
【００９１】
文書ビューア１０２は、この保存指示を受け付けると、アノテーションが付与された文書に対応するアノテーションＩＤ、端末ＩＤ、文書ＩＤ、アノテーションが付与された矩形の矩形情報、アノテーション内容、色形状、線種、ユーザＩＤ、会議ＩＤ、公開属性、ステータス、および時刻をアノテーションサーバ２１２へ送る。アノテーションサーバ２１２へ送る情報は、図８のようになる。ここで文書ビューア１０２の端末ＩＤは“１”であるとする。
【００９２】
図８のステータスの項目に着目すると、アノテーションＩＤ２，３は既に付与されていたものを読み込んで文書ビューア１０２上に表示したものであることが分かる。またアノテーションＩＤ２については、このユーザによりそれを消しゴムで消した状態であることが分かる。また、アノテーションＩＤ２８，２９は、このユーザにより新規に付与されたアノテーションであることが分かる。
【００９３】
アノテーションサーバ２１２は、図８に示した情報を受け取り、アノテーションＤＢ２１６へ格納する。ただし、最低でも、アノテーションＩＤ、ユーザＩＤ、文書ＩＤの３つの組みで捉えたときに、唯一である必要がある。基本的には、既に同一のアノテーションＩＤもしくはアノテーションＩＤと文書ＩＤとユーザＩＤの３つ組みがある場合は、受け取った情報をそこに上書きをする。単に閲覧だけされたアノテーションについては、事実上なんの変化も生じない。
【００９４】
アノテーションサーバ２１２は、ステータスが“ｄｅｌｅｔｅｄ”のものについて、アノテーションＤＢ２１６に登録されているアノテーションＩＤとユーザＩＤと文書ＩＤとの３組みで一致するレコードのステータスを“ｄｅｌｅｔｅｄ”に変える（データを更新する）。また、アノテーションサーバ２１２は、ステータスが“Ｎｅｗ”のものについは、クライアントシステム１００から受け取ったアノテーションデータのうちのステータスを“Ｅｘｉｓｔ”とし、残りの項目は受け取ったままで、アノテーションＤＢ２１６にデータを追加する。
【００９５】
図５（Ｂ）に示した状態のデータに対して、図８示した情報に基づいてアノテーションＤＢ２１６の情報を更新した状態を図９に示す。アノテーションＤＢ２１６には既に、文書ＩＤ２，３，４，５に対して所定の端末で付与されたアノテーションが所定数保存されている。図８に示した情報から、追加・変更の対象となるアノテーションＩＤは、ステータスが“ｄｅｌｅｔｅｄ”であって消去されたことを示すＩＤ２，ステータスが“Ｎｅｗ”であって追加されたことを示すＩＤ２８，２９である。よって、この例では、アノテーションＩＤ２８，２９のアノテーション情報はアノテーションＩＤと文書ＩＤとユーザＩＤの組合せで既存の登録がないので、図９に示すように新たな行として付け加えられる。また、アノテーションＩＤ２は既存のステータス情報が変更されているので、その部分が変更される。
【００９６】
また、文書ビューア１０２は、ユーザＡ（ユーザＩＤはuser１）による保存指示を受け付けると、ログファイル格納部１８２に格納しているログファイルの内容もアノテーションサーバ２１２に送る。アノテーションサーバ２１２は、文書ビューア１０２から受け取ったログファイルを、図１０に示すように、アクションログＤＢ２１４に保存する。なお、アクションログＤＢ２１４には、閲覧している文書のページが変更された時間（PAGE_OPEN ）と文書を開いた時間（DOC_OPEN）も記録する。また、アノテーションが保存された時間（ANT＿SAVE ）も記録する。
【００９７】
以上で、アノテーションや文書およびページに関する操作履歴の所定のデータベースへの保存が終了する。
【００９８】
図１１は、上記事例におけるアノテーションＤＢ２１６の他の基本的な構成例を示す図である。この構成例の場合、アノテーションは予めある纏まりによって１つのアノテーションに纏められる。たとえば、ある時間以内において書き込まれたアノテーションは１つのベクトルデータに纏められるとする。ここで「ベクトルデータ」とは、ある色や太さを持つ複数の座標点が書き込まれた時間順に纏められているデータである。
【００９９】
次に、文書ビューア１０２の文書表示エリア１０４に表示された文書にアノテーションを付し、このアノテーションを利用することで、効率的なアノテーションの検索処理やアノテーション情報の提供処理を実現する手法について、具体的に説明する。以下、このような機能をなす電子会議システム１の情報提供処理機能に関わるシステムを、特に情報表示処理システムという。
【０１００】
図１２は、アノテーション処理に着目した情報表示処理システム７の構成例を示す図である。基本的な枠組みは、図１に示した電子会議システム１の全体構成図と同様である。なお、前述のように、同一文書に対して、複数のユーザがアノテーションを付与できるように構成されている。
【０１０１】
本実施形態の情報表示処理システム７は、付加情報検索表示処理部の一例であって、効率的な検索処理やアノテーション情報の提供処理を実行する仕組みを司る専用の装置であるアノテーション処理装置２１８を備えている。なお、アノテーション処理装置２１８の機能を、アノテーションサーバ２１２や文書サーバ２２２にて担当してもよい。この場合、図中点線で示すように、アノテーションサーバ２１２と文書サーバ２２２とが直接に（あるいはネットワーク９を介して）アノテーション処理に関わるアノテーション情報のやり取りをするようにする。
【０１０２】
ビューア使用者（ユーザ；本例では会議への参加者）は、会議進行中に、文書ビューア１０２の文書表示エリア１０４に表示された文書をページ捲りをしながら読みつつ、アノテーションデバイス１７０を用いて、興味を引く語句や文書を特徴づけている語句に下線や丸などの印（アノテーション）を書き込む。あるいは、メモ書きを付してもよい。メモ書きは、フリーハンドによるものに限らず、規定枠にテキスト入力をするテキストアノテーションであっても構わない。
【０１０３】
これらの文書に付与されたアノテーションなどの文書本体に対する付加情報に関する情報は、保存ボタンが押されることで、ネットワーク９を介してサーバシステム２００に送信される（図８参照）。文書本体は、文書管理部２２０にて管理されている（図６参照）。
【０１０４】
文書本体に対応するアノテーションなどの付加情報は、アノテーション管理部２１０のアノテーションＤＢ２１６に、その文書本体に対応付けられて管理（保存）される（図９や図１１参照）。また、アノテーション管理部２１０のアクションログＤＢ２１４に、文書ビューア１０２から受け取ったログファイルを保存する（図１０参照）。そして、必要に応じて読み手から検索が指示されると、読み手が指定した検索条件に従って適合する付加情報（たとえばアノテーション）をアノテーション管理部２１０を利用してサーチ（検索）し、検索条件に合致する情報をユーザに提示する。
【０１０５】
たとえば、図１に示した電子会議システム１の構成では、ユーザは、電子会議の最中に、電子文書を文書ビューア１０２の表示面に表示し、その表示面上でアノテーションを付与することができる。ここで、様々な文書や、膨大な量の文書を使う会議において、または長期間継続して文書を使った活動において、アノテーションを付与できる文書表示装置を使って、知的活動を行った場合を考える。
【０１０６】
最初はある１つの文書から使い始め、その文書のある箇所について詳細を知る必要に迫られ、別の文書を表示することがある。その別の文書でもさらに別の文書の情報を必要としている箇所があり、また別の文書を開くケースも生じ得る。このように、次々に肝要となる箇所にアノテーションを付けていくシーンを考える。
【０１０７】
ここで、会議の途中や会議が終わった後など、今までの議論を振り返りたいということがしばしば生じる。この場合、文書ビューア１０２に表示された文書上の重要箇所に付けていったアノテーションを時系列に纏めて見ることができると、少なくとも、その会議に参加した人間ならば、話の流れを思い出すことができると考えられる。逆に、アノテーションを時系列に纏めてユーザに提示することができれば、ユーザは、会議を効率的に振り返ることができることになる。
【０１０８】
以下に述べる本実施形態の電子会議システム１は、アノテーションの属性を利用して、会議の途中や会議が終わった後などに、ユーザが会議を効率的に振り返ることを支援する機能（以下振返支援機能という）を備えている。具体的には、この振返支援機能を実現する中央処理部として、アノテーション処理装置２１８が機能する。以下、振返支援機能について詳しく説明する。
【０１０９】
図１３は、情報表示処理システム７について、アノテーションを用いた振返支援機能に着目したブロック図である。ここで、図１３（Ａ）は、全体構成の概要を示し、図１３（Ｂ）は、振返支援機能に特化した機能要素の詳細を示す。
【０１１０】
図１３（Ａ）に示すように、この機能をなす情報共有処理システム７は、読み手から検索指示を受け付けるための検索要求指定部５００と、検索を要求された文書やその他の関連した情報がアノテーション管理部２１０のアノテーションＤＢ２１６や文書管理部２２０の文書ＤＢ２２４、あるいはアノテーション処理装置２１８に登録済みか否かを検索し、該当品がある場合にはその検索結果を表示側へ送るアノテーション処理装置２１８と、アノテーション処理装置２１８から送られた検索結果を表示する表示処理部１０１とからなる。表示処理部１０１は、文書ビューア１０２とマネジャ部１８０とにおける表示処理に関わる部分で構成される。
【０１１１】
アノテーション処理装置２１８の一構成例は図１３（Ｂ）に示される。このブロック図により、アノテーションを利用することで振返支援機能を果たすための、検索処理や情報提供処理を効率的に行なうことを可能にする機構が具体的に示されることとなる。
【０１１２】
図示するように、アノテーション処理装置２１８は、検索条件を決定する検索条件決定部５４４と検索条件決定部５４４により決定された検索条件に合致するアノテーション情報を検索する検索部５４６とを備える。検索条件決定部５４４による検索条件の決定は、文書ビューア１０２上に条件設定のための入力画面を提示し、ユーザからの指示入力を受け付けることで実現する。この構成では、サーバシステム２００側のデータベースのデータ構造に合わせた検索画面を提示できるという利点がある。
【０１１３】
なお、この検索条件決定部５４４は、クライアントシステム１００側に設けられてもよい。この場合、検索要求指定部５００と一体的に構成されてもよい。この構成では、基本的にはクライアントシステム１００側単独で検索画面を提示することになるので、データベースが管理するデータ構造の変更の影響を受けないような画面作りが望まれる。勿論、サーバシステム２００側のデータ構造とリンクさせた画面作りをしてもよい。
【０１１４】
また、アノテーション処理装置２１８は、検索部５４６により検索された検索条件に合致するアノテーション情報をユーザに提示するアノテーション提示制御部５５０を備える。アノテーション提示制御部５５０は、検索結果の一例であるアノテーションに関する情報として、アノテーションの実体の他に、アクションログＤＢ２１４あるいはアノテーションＤＢ２１６からのアノテーションが付与された時刻に関する情報も受け取る。アノテーション提示制御部５５０は、この時刻に関する情報を利用し、検索条件に合致する該当アノテーションが付与された時刻系列に文書ページを並び替えて提示する機能を備えている。またアノテーション提示制御部５５０は、検索条件に合致する該当アノテーションを、そのアノテーションに設定されている色以外の色を使って表示する機能を備えている。
【０１１５】
図１４は、振返支援機能に関わるアノテーション検索を説明する図である。この図は、文書ビューア１０２の検索ボタン１１８が押下されたときに文書表示エリア１０４に表示される検索要求の入力画面（以下検索条件設定ウィンドウという）の一例を示す図である。
【０１１６】
たとえば、クライアントシステム１００は、文書ビューア１０２の検索ボタン１１８が読み手により押下されると検索条件指定モードに移行し、検索条件設定ウィンドウ３８０を文書表示エリア１０４に表示する。検索条件設定ウィンドウ３８０の左下に表示されている検索ボタン３８７がクリックされると、この検索条件設定ウィンドウ３８０が閉じられるとともに、この検索条件設定ウィンドウ３８０にて設定された検索条件の元で検索が開始され、検索結果が文書表示エリア１０４に表示される。また、検索条件設定ウィンドウ３８０の右下に表示されているクリアボタン３８８がクリックされると、この検索条件設定ウィンドウ３８０にて設定中の検索条件がクリアされるとともに、検索条件設定ウィンドウ３８０が閉じられる。
【０１１７】
検索ボタン３８７およびクリアボタン３８８の上部には、検索条件を設定するための入力欄として、ユーザＩＤの入力欄３８２、会議ＩＤの入力欄３８３、文書ＩＤの入力欄３８４、アノテーション形状の入力欄３８５、およびアノテーション色の入力欄３８６が設けられている。各入力欄３８２〜３８６は、直接に文字を入力することができるようになっている。
【０１１８】
ユーザＩＤの入力欄３８２は、プルダウンメニューとなっており、下向きの三角ボタンをクリックすることで予め登録されているユーザのリスト３８２ａが表示され、その中から複数のユーザを指定することができる。また、アノテーション形状の入力欄３８５は、プルダウンメニューとなっており、下向きの三角ボタンをクリックすることで予め登録されている形状のリスト３８５ａが表示され、その中から何れか１つを選択することもできるようになっている。表示切替ボタン３８９は検索結果の表示方法の切り替えを行う。通常の文書表示を行うドキュメントビューまたはアノテーション部分だけを抜き出した表示を行うアノテーションビューを選択できる。
【０１１９】
ビューア使用者（ユーザ）は、この検索条件設定ウィンドウ３８０にて、検索対象のアノテーションを指定し、検索ボタン３８７をクリックすることで、検索開始を指示する。なお、この検索条件設定ウィンドウ３８０にて指定しなかった項目は、全ての可能性あるものが検索の対象となる。
【０１２０】
図１５は、図１３に示した情報表示処理システム７における振返支援機能に関わる時間系列表示機能を説明する図である。具体的には、図１４の検索条件設定ウィンドウ３８０で指定された検索条件に従い検索された結果の表示態様を示している。
【０１２１】
検索部５４６は、図１４の検索条件設定ウィンドウ３８０で指定された検索条件に従い、図９に示したアノテーションＤＢのデータ構造を利用して、該当するアノテーションを検索し、該当したアノテーションをアノテーション提示制御部５５０に渡す。
【０１２２】
アノテーション提示制御部５５０は、ビューア使用者が文書に付与したアノテーションに何らかのアクションを起こしたことを検知すると、検索条件に合致する該当アノテーションが付与されている文書ページを、アノテーションが付与された時刻系列に従って、文書ビューア１０２の文書表示エリア１０４に提示する。たとえば、ビューア使用者である会議参加者は、検索結果ナビゲーションボタン１２７の左右の矢印ボタン（文書ビューアの外観を示した図２を参照。検索モード以外は不活性となっている）を押す。そうすると、検索条件に合致するアノテーションを付けたページのみが検索部５４６により抽出され、文書ビューア１０２上にアノテーションを付けた時間順で前後に文書ページが表示される。矢印ボタンを押すごとにスライダーバーの位置も対応する位置に移動する。
検索結果ナビゲーションボタン１２７のスライドバーを移動することにより、検索結果中の任意の時刻のアノテーションをつけたページが表示できる。
【０１２３】
たとえば、図１４の検索条件設定ウィンドウ３８０では、ユーザＩＤ＝Ｕｓｅｒ１、会議ＩＤ＝１４３、文書ＩＤ＝３、アノテーション形状＝線状、アノテーション色＝赤が指定されているので、図１５では、この条件に合致するアノテーションが付されているページのみが、アノテーションが付与された時刻順に抽出されて表示される。
【０１２４】
なお、該当のアノテーション付与ページの表示の仕方は、他のアノテーションと該当のアノテーションをユーザに区別して提示するため、該当のアノテーションを文書ビューア１０２表示範囲の略中心（たとえば中心から上下１／３程度の範囲内）にシフトさせる方法や、該当アノテーションを特別な色で区別して表示する方法や、該当アノテーションを点滅させる方法や、該当アノテーションの対象矩形領域の背景を着色するなどの方法がある。たとえば該当アノテーション部分を表示中央にシフトさせる方法は図１５に示すようになる。
【０１２５】
以上のように、時間系列表示機能を備えた情報表示処理システムの構成によれば、アノテーションが付与された文書を、アノテーションが付与された時刻系列的に順に表示するようにしたので、「振返支援機能」を実現することができる。すなわち、ビューア使用者である会議参加者は、会議中に文書ページの重要箇所にアノテーションを付しておくことで、このアノテーションが付与されているページ（以下アノテーションページともいう）を、アノテーションを付与した時間系列的で、前後に振り返りつつ、確認することができる。会議の途中や会議が終わった後などに、今までの議論を振り返りたい場合に、この機能を利用すれば、重要箇所に付けていったアノテーションページを時系列に纏めて見ることができる。これにより、その会議に参加したビューア使用者は、話の流れを思い出しつつ、会議を振り返ることができる。
【０１２６】
図１６は、図１３に示した情報表示処理システム７における振返支援機能に関わる抽出表示機能を説明する図である。この抽出表示機能は、アノテーション提示制御部５５０が備える機能であて、検索条件に合致したアノテーションが付与されている文書における、該当アノテーションで指示された部分（以下該当アノテーション箇所という）を抽出し（切り出し）、所定のルールに従って文書ビューア１０２上に提示する機能である。所定のルールとしては、アノテーションが付与され時間順に並べ替える、あるいはユーザごとに分けて表示する、などが考えられる。勿論、後述するように、これら以外のルールによる表示態様としてもよい。なお、１文書に限らず、複数文書までを、処理対象の文書の範囲とする。
【０１２７】
文書に付与されたアノテーションの部分を切り取り位置順に並べて表示する機能や、特定のアノテーション色のみ（位置順に）を表示する機能が、既に存在している。なお、これら従来の機能は、１文書についてのみの機能である。しかしながら、このような表示形態では、「振返支援機能」という観点では不十分である。本実施形態の抽出表示機能は、「振返支援機能」を十分にサポート可能なものである。以下具体的に説明する。
【０１２８】
先ず、抽出条件について説明する。アノテーション提示制御部５５０は、検索部５４６により検索された文書ページを対象として、基本的には、文書中の該当アノテーション箇所を切り取り、文書ビューア１０２に表示する。複数のユーザを対象として検索条件が指定されている場合（たとえばグループ指定がされたとき）、アノテーション提示制御部５５０は、個人の範囲のみに限らず、活動の参加者全員の全てのアノテーション（勿論、検索条件に合致する範囲で）を対象として、該当部分を切り出して表示する。
【０１２９】
これにより、ビューア使用者である会議参加者は、会議中に文書ページの重要箇所にアノテーションを付しておくことで、このアノテーションを付与した部分だけを纏めて見ることができる。また、他の参加者が付与したアノテーションも纏めて確認することができる。よって、その会議に参加したビューア使用者は、個人の範囲のみで会議を振り返ることができる。あるいは、活動の参加者全員の全て込みで会議を振り返ることができる。
【０１３０】
また、アノテーション提示制御部５５０は、以下のルールに従って、アノテーションにて示される重要部分を切り出して表示するようにしてもよい。たとえば、アノテーションにより重要部分を規定する考え方として、複数のユーザにより同一箇所にアノテーションが付与された部分（ユーザ間でアノテーションが重複している部分）が重要部分であるというルールを用いる。このルールは、その重複アノテーションを付けた範囲の語句が、その文書を用いた活動において重要であることを示している、という考え方に基づくものである。たとえば、アノテーション範囲が文や節を指している場合、係り受け解析し、その主となる単語に範囲を限定した上で重複を計算することで、重要部分を抽出するとよい。
【０１３１】
これにより、複数の会議参加者が、会議中に、文書ページにアノテーションを付しておくことで、ビューア使用者である会議参加者は、全員のものをマージして求まる重複部分を纏めて見ることができ、重要部分を中心に会議を振り返ることができる。
【０１３２】
たとえば、会議など文書を使った活動を行なっていく上で、各ユーザがそれぞれの端末（文書ビューア１０２）を使い、文書に図１６（Ａ）のようにアノテーションを付けていったものとする。ここで、ユーザがアノテーションビューを指示すると、アノテーション提示制御部５５０は、以下の方法で、該当アノテーション箇所を切り取り、文書ビューア１０２上に表示する。アノテーションビューの指示は、図１４に示した検索条件設定ウィンドウ３８０を利用して、検索指示を介して行なうものとする。
【０１３３】
たとえば、アノテーション提示制御部５５０は、抽出表示機能を実現するために、
１）矩形情報により、切り取った該当アノテーション箇所の先頭の矩形番号が小さい（大きいでもよい）順、あるいは、文書ＩＤの小さい（大きいでもよい）順番に並べて表示する（図１６（Ｂ）参照）、
２）アノテーションＤＢ２１６に登録されているアノテーションが付与された時刻情報を参照して、切り取った該当アノテーション箇所を、時間情報が早い（あるいは遅い）順に並べて表示する（図１６（Ｃ）参照）、
３）アノテーションＤＢ２１６に登録されているアノテーションを付与したユーザＩＤを参照して、切り取った該当アノテーション箇所を、ユーザごとに分けて表示する（図１６（Ｄ）参照）、
などの表示態様を採用する。アノテーションが付与されている部分はそのアノテーションを付与したユーザの視点を反映した部分であるので、これらの表示態様を採用すれば、視点に応じた文書の理解が促進される。
【０１３４】
図１７は、抽出表示機能を実現する表示態様の他の事例を示す図である。アノテーション提示制御部５５０は、抽出表示機能を実現するために、以下の方法に従って、アノテーションを選別し、文書ビューア１０２に表示するようにしてもよい。
１）特定の端末ＩＤのものだけを表示する（図１７（Ａ）参照）、
２）特定の文書ＩＤ（複数可）だけを表示する（図１７（Ｂ）参照）、
３）特定の時間区間のものだけを表示する（図１７（Ｃ）参照）、
４）特定のアノテーション色だけを表示する（図１７（Ｄ）参照）、
５）特定のアノテーション形状だけを表示する（図１７（Ｅ）参照）。
【０１３５】
たとえば、図１７（Ａ）の態様は、端末を使用していたユーザが切り替わっるケースでは、以前にその端末を使用していたユーザが付与したアノテーションを纏めて確認したい場合に利用することができる。また、図１７（Ｂ）の態様は、たとえば、元のマニュアル文書とその改訂版など、複数文書に付与されたアノテーションを比較する場合に見比べが簡易になり、便利である。また、図１７（Ｃ）の態様は、たとえば活発にアノテーションが付与されていた状況の確認をするのに都合がよい。また、図１７（Ｄ），（Ｅ）の態様は、たとえば事前にアノテーション色や形状に意味をルール付けておけば、付けられたアノテーションの色や形状にて他者の視点・意図を把握・集約することができ、都合がよい。
【０１３６】
アノテーションが付与されている部分はそのアノテーションを付与したユーザの視点を反映した部分であるので、これらの表示態様を採用すれば、視点に応じた文書の理解が促進される。
【０１３７】
以上のように、抽出表示機能を備えた情報表示処理システムの構成によれば、該当アノテーションが付与された文書ページの略全体を表示するのではなく、その該当アノテーション部分のみを抽出して表示するようにしたので、「振返支援機能」を効率的に実現することができる。すなわち、ビューア使用者である会議参加者は、会議中に文書ページの重要箇所にアノテーションを付しておくことで、このアノテーションが付与されているページのアノテーション部分のみを纏めて確認することができる。この機能を利用すれば、重要箇所に付されたアノテーション部分だけを纏めて速読することができ、また、文書の内容を素早く理解することもできるので、会議を効率的に振り返ることができる。
【０１３８】
なお、上述したアノテーションを利用した情報表示処理を実現する一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ（組込みマイコンなど）、または、各種のプログラムをインストールすることで各種の機能を実行することが可能な汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【０１３９】
この記録媒体は、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（ＣＤ−ＲＯＭ（Compact Disc-Read Only Memory ）、ＤＶＤ（Digital Versatile Disc）を含む）、光磁気ディスク（ＭＤ（Mini Disc ）を含む）、もしくは半導体メモリなどよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供されてもよいし、プログラムが記録されているＲＯＭやハードディスクなどで構成されてもよい。あるいは、ソフトウェアを構成するプログラムが、通信網を介して提供されてもよい。
【０１４０】
図１８は、上述した情報表示処理システム７を、コンピュータにより構成する場合のシステム構成の概略を示した図である。このようなコンピュータシステムの基本構成は、ハードウェア層９１０、ＯＳ（Operating Systems ）層９２０、文書情報管理層９３０、ユーザインタフェース層９４０という４つの層から成り立っている。各層は独立性が保たれており、層ごとに機能を拡張したり別のものに交換したりすることが容易になっている。
【０１４１】
ハードウェア層９１０は、図１で示したシステム構成に相当するもので、たとえば、文書ビューア１０２に対応するタブレット９１１、アノテーションデバイス１７０に対応するペン入力装置９１２、操作ボタン１１０に対応するボタン９１３、およびネットワーク９に対応する通信ネットワーク９１４からなる。なお、たとえば音声入出力インタフェース９１５など、その他の仕組みを設けてもよい。
【０１４２】
文書情報管理層９３０は、文書管理部２２０に対応し文書本体の管理を担当する文書層９３２、アノテーション管理部２１０に対応しアノテーションなどの文書本体に付加される付加情報の管理を担当するワークスペース９３４、および情報検索部２４０に対応しアノテーションなどを利用して情報検索を行なう情報検索層９３６からなる。
【０１４３】
ユーザインタフェース層９４０は、文書ビューア１０２やアノテーションデバイス１７０に対応しユーザからの入力を管理するユーザ入力管理層９４２、文書表示エリア１０４における情報表示に関わる画面層９４４、およびマネジャ部１８０に対応し文書表示エリア１０４の表示動作を管理する画面マネジャ９４６からなる。
【０１４４】
このようなシステム構成においては、たとえば前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムに供給し、そのシステムのコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによって、上記実施形態で述べた効果が達成される。この場合、記憶媒体から読出されたプログラムコード自体が前述した実施形態の機能を実現することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステムＯＳなどが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される場合であってもよい。
【０１４５】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によって前述の実施形態の機能が実現される場合であってもよい。
【０１４６】
なお、上記実施形態で述べた処理を実現するプログラムコードを記述したファイルとしプログラムが提供されるが、この場合、一括のプログラムファイルとして提供されることに限らず、システムのハードウェア構成に応じて、個別のプログラムモジュールとして提供されてもよい。
【０１４７】
たとえば、図１に示したシステム構成では、クライアントシステム１００とサーバシステム２００とがネットワーク９で接続された形態であるので、表示に関する処理プログラム（たとえばページ捲り時や検索結果を反映した強調表示機能用の処理プログラム）は、クライアントシステム１００側の装置に向けて、クライアントシステム用モジュールとして提供されるのがよい。一方、アノテーションの管理や検索に関する処理プログラムは、サーバシステム２００側の装置に向けて、サーバシステム用モジュールとして提供されるのがよい。また、サーバシステム用モジュールは、さらに、サーバシステム２００を構成する各管理部の構成に応じて、一括ファイルもしくはサブモジュールファイルとして提供されてもよい。
【０１４８】
また、図１に示したシステム構成では、クライアントシステム１００とサーバシステム２００とがネットワーク９にて接続されているが、これらは近接した場所に配置されてもよい。この場合、クライアントシステム１００のマネジャ部１８０をサーバシステム２００（その全体あるいはその一部）と一体化させてもよい。
【０１４９】
また、上述の説明では、文書ビューア１０２がマネジャ部１８０を収容した本体（クレードル／ドッキングステーション）と別体であるものとして説明したが、上記実施形態で説明したマネジャ部１８０内の機能部分を文書ビューア１０２と一体化させてもかまわない。
【０１５０】
また、上述の実施形態では、管理装置の一例であるサーバシステム２００側にて検索結果に基づく提示画像の生成処理（たとえば時間順の提示）を行なっていたが、検索結果をそのままクライアント端末の一例であるクライアントシステム１００に渡し、クライアントシステム１００側にて、検索結果に基づく提示画像の生成処理（たとえば時間順の提示）を行なうシステム構成としてもよい。以下、このような形態のシステム構成について説明する。
【０１５１】
図１９は、クライアントシステム１００側にて検索結果に基づく提示画像の生成処理を行なうシステム構成とする場合の、アノテーションを用いた振返支援機能に着目したブロック図である。ここで、図１９（Ａ）は、全体構成の概要を示し、図１９（Ｂ）は、振返支援機能に特化した機能要素の詳細を示す。
【０１５２】
図１９（Ａ）に示すように、この形態の情報表示処理システム７は、図１３（Ａ）に示したアノテーション処理装置２１８を備えていない。その代わりに、図１３（Ａ）に示した検索条件決定部５４４の機能を検索要求指定部５００と一体的に構成している。検索要求指定部５００にて指示された検索条件はサーバシステム２００側に渡される。これを受けて、たとえば、アノテーション管理部２１０や文書管理部２２０が検索条件に合致する文書やアノテーションを抽出し、検索結果としてクライアントシステム１００のマネージャ部１８０に返す。
【０１５３】
図１９（Ｂ）に示すように、クライアントシステム１００のマネージャ部１８０には、アノテーション提示制御部５５０が設けられている。クライアントシステム１００側に設けられたアノテーション提示制御部５５０は、検索条件に合致する全ての文書と、文書に付与されているアノテーションに関する情報とを検索結果として受け取る。なお、アノテーションに関する情報としては、アノテーションの実体の他に、アノテーションＤＢ２１６からのアノテーションが付与された時刻に関する情報も含む。
【０１５４】
アノテーション提示制御部５５０は、この時刻に関する情報を利用し、検索条件に合致する該当アノテーションが付与された時刻系列に文書ページを並び替えて提示する機能を備える。またアノテーション提示制御部５５０は、検索条件に合致する該当アノテーションを、そのアノテーションに設定されている色以外の色を使って表示させる機能を備えている。また、アノテーションが付与された部分を切り出して、所定の順序で並べて表示させる機能を備えている。これらの機能は、図１３（Ａ）に示したアノテーション提示制御部５５０と同様のものであるので、詳細な説明を割愛する。
【０１５５】
以上、本発明を実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記実施形態に多様な変更または改良を加えることができ、そのような変更または改良を加えた形態も本発明の技術的範囲に含まれる。
【０１５６】
また、上記の実施形態は、クレーム（請求項）にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組合せの全てが発明の解決手段に必須であるとは限らない。前述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜の組合せにより種々の発明を抽出できる。実施形態に示される全構成要件から幾つかの構成要件が削除されても、効果が得られる限りにおいて、この幾つかの構成要件が削除された構成が発明として抽出され得る。
【０１５７】
たとえば、システムを構築する上で、各機能要素をどの部分で分けてクライアントシステム１００とサーバシステム２００とに振り分けるかは、上述した実施形態のものに限定されない。システムを構成する上で、都合のよい部分にて分ければよいのはいうまでもない。
【０１５８】
【発明の効果】
以上のように本発明によれば、文書に付与されたアノテーションを利用して、会議を振り返るのに都合のよい表示形態でアノテーションにより指示された部分（アノテーション部分）を表示するようにしたので、ユーザは、会議の途中や終了後に、効率的にその会議を振り返ることができる。
【０１５９】
たとえば、アノテーションが付与された時刻系列的に順に表示するようにすれば、アノテーションページを時系列に纏めて見ることができる。これにより、その会議に参加した者は、話の流れを思い出しつつ会議を振り返ることができる。
【０１６０】
また、アノテーションページの全体を表示するのではなく、そのアノテーション部分のみを抽出して表示するようにすれば、アノテーション部分のみを纏めて確認することができる。これにより、アノテーション部分だけを纏めて速読することができ、また文書の内容を素早く理解することもできるので、会議を効率的に振り返ることができる。
【図面の簡単な説明】
【図１】本発明に係る表示制御方法および情報表示処理システムを適用した電子会議システムの構成例を示す図である。
【図２】情報表示処理装置の一実施形態である文書ビューアの表示面側に着目した外観図である。
【図３】文書ビューアとマネジャ部の機能ブロック図である。
【図４】文書サーバおよび文書データベースの構成例を示す図である。
【図５】アノテーションサーバおよびアノテーションデータベースの構成例を示す図である。
【図６】文書データベースの具体的な構成例を示す図である。
【図７】文書にアノテーションを付与した状態の表示例を示す図である。
【図８】文書ビューアがアノテーションサーバへ送る情報の一例を示した図である。
【図９】アノテーションデータベースの構成例を示す図である。
【図１０】アクションログデータベースの構成例を示す図である。
【図１１】アノテーションデータベースの他の構成例（ベクトル表現）を示す図である。
【図１２】アノテーション処理に着目した情報表示処理システムの構成例を示す図である。
【図１３】情報表示処理システムについて、アノテーションを用いた振返支援機能に着目したブロック図である。
【図１４】振返支援機能に関わるアノテーション検索を説明する図である。
【図１５】情報表示処理システムにおける振返支援機能に関わる時間系列表示機能を説明する図である。
【図１６】情報表示処理システムにおける振返支援機能に関わる抽出表示機能を説明する図である。
【図１７】抽出表示機能を実現する表示態様の他の事例を示す図である。
【図１８】情報表示処理システムを、コンピュータにより構成する場合のシステム構成の概略を示した図である。
【図１９】アノテーションを用いた振返支援機能に着目した他の形態のブロック図である。
【符号の説明】
１…電子会議システム、７…情報表示処理システム、９…ネットワーク、１００…クライアントシステム、１０１…表示処理部、１０２…文書ビューア、１０３…液晶表示パネル、１０４…文書表示エリア、１０９…筐体、１１０…操作ボタン、１１４…文書読込みボタン、１１６…保存ボタン、１１８…検索ボタン、１２０…更新ボタン、１２２…ページ捲りボタン、１２２ａ…前ページ送りボタン、１２２ｂ…次ページ送りボタン、１２４…強調表示ボタン、１２６…ユーザ表示ボタン、１２７…検索結果ナビゲーションボタン１３０…コントローラ、１３２…ページ送り指示受付部、１４０…ページ画像生成部、１５０…表示輝度制御部、１５０ａ…コントラスト制御部、１５０ｂ…ブライトネス制御部、１７０…アノテーションデバイス、１８０…マネジャ部、１８２…ログファイル格納部、１８４…強調語／センテンス特定部、１８６…強調語／センテンス選択手法指示部、１８８…強調指示制御部、２００…サーバシステム、２１０…アノテーション管理部、２１２…アノテーションサーバ、２１４…アクションログＤＢ、２１６…アノテーションＤＢ、２２０…文書管理部、２２２…文書サーバ、２２４…文書ＤＢ、２３０…プロファイル管理部、２３２…プロファイルサーバ、２３４…プロファイルＤＢ、２４０…情報検索部、２４２…自然言語処理サーバ、２４４…自然言語処理ＤＢ、２５０…会議参加資格管理部、２５２…会議参加資格管理サーバ、２５４…会議参加資格管理ＤＢ、５００…検索要求指定部、５４４…検索条件決定部、５４６…検索部、５５０…アノテーション提示制御部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an information display processing system and an information display processing method having a function of displaying a document on a display device, and a program for realizing the information display processing system and the information display processing method using a computer. Further, the present invention relates to a management server and a client terminal that constitute the information display processing system.
[0002]
More specifically, an electronic conference system in which a plurality of terminal devices are connected via a communication network, and a remote user performs a collaborative work such as a meeting or a meeting while referring to a common material displayed on a screen, Alternatively, the present invention relates to display control suitable for application to a system for searching for related information related to a word in a document corresponding to additional information added to an electronic document.
[0003]
[Prior art]
When a person reads a document, it is natural to perform reading comprehension while giving an annotation using a pointing device such as a pen. The position where the annotation is given seems to be a position of some interest to the reader.
[0004]
The same happens when dealing with electronic documents. For example, a technique is widely used in which visualization information added to the body of an electronic document, such as memos, messages, and annotations, is attached as additional data to the body of the electronic document so as not to affect the body of the electronic document. ing.
[0005]
For example, in an electronic conferencing system in which a plurality of users can participate in a conference via a terminal screen by connecting a plurality of terminal devices via a communication network, various technologies have been proposed which allow a participant to share a document. (For example, see Patent Document 1).
[0006]
[Patent Document 1]
JP-A-7-84905
[0007]
Here, adding an annotation or the like to a document displayed on the terminal screen is also performed by the electronic conference system. For example, additional information such as memos and annotations can be input to a document (digitized material) displayed on the terminal screen by using a pen-type pointing device or by handwriting input by directly touching the touch panel with a fingertip. May be written on the display screen.
[0008]
According to this function, a participant of the conference can independently add and correct from each terminal, and can easily input additional information without hindering thinking. This handwritten information can also be displayed on the terminal screen of another participant. As a result, it is possible to input an opinion or idea from each terminal device or take a hard copy thereof. In addition, it is also possible to perform a search by setting an annotated portion as a search condition and display a search result.
[0009]
[Problems to be solved by the invention]
However, although the conventional electronic conference system has a function of searching for information (for example, annotations) added to a document and a function of displaying a search result, it is merely a presentation of the search result, and the search result is efficiently displayed. It was difficult to use. For example, during or after a meeting, if you try to look back at the meeting by searching using the annotations attached to the document, the annotation part is simply presented and the meeting is efficiently looked back. I couldn't do that.
[0010]
The present invention has been made in view of the above circumstances, and provides an information display processing method and an information display processing method capable of efficiently presenting a search result by using additional information added to a document such as an annotation. An object is to provide an information display processing system to which the method is applied. Another object of the present invention is to provide a management server and a client terminal that constitute the information display processing system. Another object of the present invention is to provide a program for realizing the above method and system using a computer.
[0011]
[Means for Solving the Problems]
That is, a first information display processing method according to the present invention provides an information display processing system having a function of adding, to a document displayed on a predetermined display device, additional information that can be managed separately from the document. A display processing method that manages the time at which additional information is added to a document and, when a search process is instructed using the additional information added to the document as a search key, the additional information is added. The document including the additional information that matches the search condition is displayed in chronological order on the display device with reference to the retrieved time.
[0012]
Further, a second information display processing method according to the present invention provides an information display processing system having a function of adding, to a document displayed on a predetermined display device, additional information that can be managed separately from the document. In a display processing method, when a search process is instructed using the additional information attached to a document as a search key, a portion of the document that satisfies the search condition is added with additional information, and the added additional information is cut out. The information-added portions are rearranged in a different order from the arrangement order of the additional information-added portions in the document, and are displayed on the display device.
[0013]
Further, a third information display processing method according to the present invention provides an information display processing system having a function of adding, to a document displayed on a predetermined display device, additional information that can be managed separately from the document. In a display processing method, when a search process is instructed by using additional information given to a document as a search key, if there are a plurality of documents that match the search condition, a plurality of documents that match the search condition The additional information added portions in the document are cut out, and the cut out additional information added portions are arranged in a predetermined order and displayed on the display device.
[0014]
A first information display processing system according to the present invention is a system that implements the first information display processing method according to the present invention, and manages a document displayed on a predetermined display device separately from the document. An additional information adding unit that adds possible additional information, an additional information adding unit detecting unit that obtains information of an additional information adding part in the document to which the additional information is added, and a time when the additional information is added for each document. A registration unit that registers the additional information in association with the additional information addition unit, and accepts a search process of a document to which the additional information matching the predetermined search condition has been added and sets a time at which the additional information registered in the registration unit is added. An additional information search and display processing unit for displaying a document that matches the search condition by referring to the display device in chronological order is provided.
[0015]
A second information display processing system according to the present invention is a system for implementing the second information display processing method according to the present invention, and manages a document displayed on a predetermined display device separately from the document. An additional information adding unit that adds possible additional information, an additional information adding unit detecting unit that obtains information of an additional information adding part in the document to which the additional information is added, and an additional information that matches a predetermined search condition is added. Accepts the search processing of the extracted document, cuts out the additional information added part in the document that matches the search condition, and sorts and displays the cut out additional information added part in a different order from the arrangement order of the additional information added part in the document And an additional information search and display processing unit to be displayed on the device.
[0016]
A third information display processing system according to the present invention is a system for implementing the third information display processing method according to the present invention, and manages a document displayed on a predetermined display device separately from the document. An additional information adding unit that adds possible additional information, an additional information adding unit detecting unit that obtains information of an additional information adding part in the document to which the additional information is added, and an additional information that matches a predetermined search condition is added. When the search processing of the searched document is received and there are a plurality of documents that match the search condition, the additional information added portions in the plurality of documents that match the search condition are cut out, and the cut out additional information added portions are arranged in a predetermined order. And an additional information search and display processing unit for displaying the information on the display device side by side.
[0017]
The invention described in the dependent claims defines further advantageous specific examples of the information display processing method and the information display processing system according to the present invention. The management server and the client terminal according to the present invention constitute the information display processing system according to the present invention. Furthermore, the program according to the present invention is suitable for realizing the information display processing method and the information display processing system according to the present invention by software using an electronic computer (computer). The program may be provided by being stored in a computer-readable storage medium, or may be distributed via a wired or wireless communication unit.
[0018]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[0019]
FIG. 1 is a diagram showing a configuration example of an electronic conference system to which a display control method and an information display processing system according to the present invention are applied. As the scene setting of the electronic conference in this example, an electronic document-based meeting such as a development start proposal and an international technical standardization meeting is assumed.
[0020]
As electronic documents, for example, in the case of a proposal to start development, similar documents such as specifications related to the predecessor (previous models for the target model such as the current model), market trouble reports, technical standard documents of the support department, etc. There are many. In a technical standardization meeting, related documents such as a similar technical standard book and a mailing list for the same technology exist around the document.
[0021]
Participants in the electronic conferencing system may be, for example, participants, chairpersons, recorders, etc., which are representatives of organizations that influence decisions or are affected by decisions. In the electronic conference system, for example, one of the representatives puts together a proposal and distributes materials in advance. Then, before the meeting, the participants and the chair can read the material and add handwritten annotations on the display screen. Also, while the meeting is in progress, the organization's representatives can share the context with the stakeholders in the back office using annotations, and can coordinate departmental views in real time while communicating with each other.
[0022]
Here, in the flow of the conference in the electronic conference system, for example, the following can be considered as a scene involving sharing of handwritten annotation.
* Read distributed materials before the meeting and write annotations.
* Annotate while listening to the explanation.
* In a Q & A session, quickly search for questions and respond to questions based on annotations.
* Search past related documents.
* Ask your colleagues during the meeting.
* Discussion sessions.
* Confirmation session.
* Minutes preparation.
* Report the meeting to members of the group.
* Discover professionals through meetings and discover diverse perspectives.
[0023]
<System configuration>
Next, the configuration of the electronic conference system shown in FIG. 1 will be described. The electronic conference system 1 includes a client system 100 used by the participants of the electronic conference and electronic data (not only document data but also all other electronic information necessary for the conference) used in the electronic conference system 1. And a server system 200 for processing the same. Each functional element constituting the client system 100 and the server system 200 is connected by a wired (wireless) or wireless network (communication network) 9.
[0024]
The client system 100 is provided for each participant in the conference. In the illustrated example, two sets are illustrated, but the number is not limited to two. In addition, one set may be shared by a plurality of persons.
[0025]
The client system 100 includes a document viewer 102 (102a and 102b in the figure) for displaying an electronic document, and an annotation device 170 (for annotating an example of additional information) to the electronic document displayed on the document viewer 102. In the figure, 170a and 170b), and a manager section 180 (180a and 180b in the figure) for storing a history of screen operations and controlling the document viewer 102. The document viewer 102 and the annotation device 170 constitute an additional information adding part detecting unit 106 (106a and 106b in the figure) and an annotation detecting unit (additional information adding part detecting unit detecting unit) 107 (107a and 107b in the figure). You.
[0026]
The document viewer 102 is freely attachable to a main body (cradle / docking station) not shown. As the document viewer 102, for example, a display such as a CRT or a liquid crystal (LCD) used for a personal computer or the like, or a device imitating paper (for example, a tablet PC) may be used. Note that the document viewer 102 may be configured as a large tablet about the size of a whiteboard.
[0027]
The annotation device 170 preferably has a function of enabling handwriting input. For example, an input device such as a pen-shaped device may be used. In the case of a pen-shaped device, it is assumed that both the document viewer 102 and the annotation device 170 have a mechanism for detecting an instruction input so that, for example, in the case of a detection mechanism of an electromagnetic induction method, both the document viewer 102 and the annotation device 170 can direct an instruction on the display surface. . Further, a touch panel method may be adopted. Further, the annotation device 170 is not limited to a pen-type device, and may use an input / instruction device such as a mouse or a keyboard.
[0028]
The manager unit 180 has a log file storage unit 182 (182a, 182b in the figure) for storing a document browsing history and an annotation history (log file). The manager unit 180 is provided with a functional unit that implements a display method (highlighting function in this example) specified by the reader (see FIG. 3 described later).
[0029]
The server system 200 is an example of an additional information management unit, which is an annotation management unit 210 that manages log files and annotations, a document management unit 220 that manages electronic documents, a profile management unit 230 that manages personal profiles, and a sentence analysis. It has an information retrieval unit 240 that supports the conference by extracting the key words and important words, and a conference participation qualification management unit 250 that manages the conference participants.
[0030]
An annotation management unit 210 includes an annotation server 212 which is a server for storing and retrieving the annotations given to the document, an action log DB 214 which is a database (Data Base) for storing the contents of log files of each client terminal, An example of the information storage unit includes an annotation DB 216 which is a database for storing annotations and attribute information associated therewith.
[0031]
The document management unit 220 has a document server 222 which is a server for storing and retrieving documents, and a document DB 224 which is a database for storing documents and attribute information associated therewith.
[0032]
By providing the document management unit 220 that manages the document body and the annotation management unit 210 that manages additional information such as annotations given to the electronic document, even when each of the distributed materials is independently edited and modified, the It is possible to avoid inconsistencies in the contents when the contents are combined with the original at the end.
[0033]
For example, even if someone adds a supplementary explanation to a certain part of the original, and if someone makes a correction to delete the same part, those edited parts are not included in the document body registered in the document DB 224. Separately, by registering in the annotation DB 216 in association with the document body, information can be managed without inconsistency in the contents of the meeting material body and contents such as corrections to the meeting material body. Further, by referring to the annotation DB 216, it is easy to write out the contents of opinions and discussions given on the spot later.
[0034]
The profile management unit 230 has a profile server 232 that is a server that stores and searches for personal profiles, and a profile DB 234 that is a database that stores personal profiles.
[0035]
The information search unit 240 is a natural language processing server 242 that is a server that analyzes sentences and extracts important words, and a natural language processing DB 244 that is a database that stores analysis dictionaries, synonym dictionaries, and the like that the natural language processing server 242 refers to. And
[0036]
The natural language processing DB 244 stores predetermined data in a data structure suitable for an information search method. For example, a word vector dictionary (a dictionary is an example of a database) that stores semantic vectors of words on a semantic basis, a co-occurrence database that stores co-occurrence relationships between dependent words, and synonym expansion and related expansion are used. Extended dictionaries (including synonym dictionaries).
[0037]
The information search unit 240 can select and use various search engines by having these various databases (including dictionaries) in the natural language processing DB 244.
[0038]
The conference participation qualification management unit 250 includes a conference participation qualification management server 252 that determines whether a user in a certain conference can participate, and a conference participation qualification database that stores a combination of a conference ID and a user ID that can participate in this conference. A qualification management DB 254;
[0039]
Each of the management units 210, 220, 230, 240, and 250 of the illustrated server system 200 may be separate units, or may be housed in an arbitrary combination in the same housing. Is also good. For example, each server may be configured by a common computer, or may use a common hard disk device as each database. The annotation management unit 210, the document management unit 220, and the information search unit 240 are collectively referred to as a document information management unit. As the management units 210, 220, 230, 240, for example, a workstation may be used.
[0040]
<Appearance of Document Viewer>
FIG. 2 is an external view focusing on the display surface side of the document viewer 102 which is an embodiment of the information display processing device. As shown in the figure, the document viewer 102 includes a liquid crystal display panel 103, which is an example of a display device, and operation buttons 110 including various hardware keys housed in a housing 109. It is formed in a single plate having a thickness.
[0041]
The liquid crystal display panel 103 is configured as a panel with a backlight, and is used as a document display area 104 for displaying a document. On the document display area 104, handwriting input (digital ink) is possible with the annotation device 170. The manager unit 180 incorporates a memo writing utility (hardware and application software) corresponding to the digital ink.
[0042]
A controller compatible with digital ink only needs to recognize and process handwritten data as "digital ink (handwritten characters)". It is not necessary to have a character recognition function. Even in this case, it can be handled as the top format of the text, and it is possible to search for the handwritten character as it is and to process the character (color change, etc.). The digital ink data format may be handled as image data (for example, bitmap data).
[0043]
As described above, the document viewer 102 can write and input using the annotation device 170 in the same manner as when underlining or enclosing a document or writing a memo in a desired form when reading a paper document. ing. In addition, since it is formed in a single thick plate, it is easy to place it on the knee or tilt it, for example, at the time of writing, so that it can be set at a position or angle that is easy to read.
[0044]
The information input and written (additional information of the document body) is stored in a storage unit (not shown) in the document viewer 102, sent to the annotation management unit 210 of the server system 200 at a predetermined time, and stored in the annotation DB 216 in correspondence with the document body. It is stored with it. When the document is read out later, the annotations entered in the past are read out together with the document body and displayed in the document display area 104.
[0045]
This makes it possible to exert an effect of visually assisting the memory of the reader regarding the place where the information is written by freely writing the underline, circle, memo, or the like in a favorite shape like paper.
[0046]
For example, in the case of a conference using the electronic conference system 1, it can be used to read distributed materials before the conference and write annotations, or to insert annotations while listening to the explanation contents during the conference. .
[0047]
As the operation button 110, a plurality of hardware keys are prepared. For example, as illustrated, a document read button 114 for reading a document stored in the document DB 224, a save button 116 for saving the annotation drawn in the document display area 104, and an annotation stored in the annotation DB 216. A search button 118 for searching and displaying in the document display area 104 and an update button 120 for updating the display are provided.
[0048]
The operation buttons 110 include a page turning button 122 including a previous page turning button 122a and a next page turning button 122b for turning pages forward and backward, a highlight button 124 for displaying important words, and a document viewer 102. And a user display button 126 for displaying a list of users who have annotated the open document.
[0049]
Note that, instead of the hardware key of the operation button 110, a software key for displaying a key button in the document display area 104 may be used.
[0050]
A search result navigation button 127 is displayed below the document display area 104 in the search mode.
[0051]
The document viewer 102 displays an image on a liquid crystal display panel based on data read from a storage medium provided therein or data obtained from a server system 200 (or a Web server) via a network connection function unit (not shown). 103 is displayed. In addition, the document viewer 102 has a function of switching the display in units of pages while flipping the book like a book (turning display function). It is configured so that desired information can be quickly retrieved from a large number of information.
[0052]
That is, at the time of information search in the document viewer 102, by operating two page turning buttons (a page turning button 122) such as a previous page turning button 122a and a next page turning button 122b, desired page information is performed while performing a page turning operation. Can be displayed on the liquid crystal display panel 103. Further, when one of the previous page forward button 122a and the next page forward button 122b is continuously pressed, the page can be turned at a high speed. The operation of searching for information is possible.
[0053]
In the flip display, the image contrast, which is the pixel amplitude for driving the liquid crystal element of the liquid crystal display panel 103, and the display brightness (brightness / background luminance), which is the brightness of the entire image, are normally displayed in accordance with the page turning operation. It is configured such that the brightness of the display image on the display device is different from the brightness of the normal state for a predetermined time, thereby facilitating the feature extraction of the entire image. I have.
[0054]
<Document Viewer / Manager>
FIG. 3 is a functional block diagram of the document viewer 102 and the manager unit 180. The document viewer 102 is a liquid crystal display panel 103 which is an example of a display device that displays images in page units, a controller 130 that controls the entire display processing in the document viewer 102, and generates a new page image under predetermined conditions. A page image generation unit 140. The controller 130 includes a page feed instruction receiving unit 132 that receives a page image switching instruction on the liquid crystal display panel 103 via the operation button 110. The page image generation unit 140 generates a new page image on condition that the page feed instruction reception unit 132 receives a page image switching instruction.
[0055]
In addition, the document viewer 102 switches the image on the liquid crystal display panel 103 and switches the brightness of the display image according to a predetermined order on condition that the page feed instruction receiving unit 132 receives the page image switching instruction. A unit 150 is provided.
[0056]
When the page feed instruction receiving unit 132 receives the page image switching instruction, the page image generating unit 140 generates a new page image in the specified direction (either forward or rearward). To the display brightness control unit 150.
[0057]
The display brightness control unit 150 includes a contrast control unit 150a that controls the display contrast of a page image on the liquid crystal display panel 103, and a function unit that controls brightness by controlling the backlight brightness of the liquid crystal display panel 103. And a brightness control unit 150b. The display brightness control unit 150 adjusts the contrast of the page image on the liquid crystal display panel 103 by the contrast control unit 150a, or adjusts the brightness of the page image by the brightness control unit 150b. To control the display brightness at. The present invention is not limited to both the contrast and the brightness, but may be any as long as at least one of the two is adjusted.
[0058]
When the page feed instruction receiving unit 132 receives a page image switching instruction, the display luminance control unit 150 switches the image on the liquid crystal display panel 103 to a new page image generated by the page image generating unit 140 and sets the display luminance to a predetermined value. A function is provided to slightly change the display from normal display (contrast or brightness status set by the user at that time) for a certain time. This makes it possible to enhance the discrimination ability even when the display is performed while flipping like a book.
[0059]
On the other hand, in addition to the log file storage unit 182, the manager unit 180 captures a target document to be read by the reader from the document DB 224, and specifies an emphasized word / sentence specifying unit 184 that specifies a character or a sentence to be highlighted. An emphasized word / sentence selection method instructing unit 186 for instructing the emphasized word / sentence specifying unit 184 on a character / sentence selection method to be selected, and an emphasis instruction control unit 188 for controlling validity / invalidity (on / off) of a highlighting function. And
[0060]
First, the manager unit 180 selects an emphasized word / sentence specifying method for realizing the method specified by the reader (in this example, the conference participant) in the emphasized word / sentence selection method instructing unit 186, and selects the emphasized word / sentence specifying unit. Instruct 184. The target document to be read by the reader is input to the emphasized word / sentence specifying unit 184. When the highlighting function is turned on, after the word / sentence specifying unit 184 determines how to display a word (word, sentence, or sentence) to be highlighted, the document viewer 102 Image information is sent to the page image generation unit 140 through the controller 130.
[0061]
As the highlighting method, the display is performed by changing the density (contrast / bright), the display is performed by changing the font (type or size), the display is performed by changing the character color, or the background color of the character is changed. Display, or underline or add a solid color.
[0062]
In addition, by using the highlighting function, the effect can be enhanced even in the case where a “flowing reading function” is provided. For example, when skimming through a paper document, the reader may get a general impression of the page or document where important content is likely to appear while browsing for words of interest or words that characterize the document. Doing things. Also in the document viewer 102, by providing the “flowing mode”, it is possible to display important words and phrases that seem to express the meaning well. By following the darkly displayed keywords, the contents of the document can be understood in a short time. The reader can also infer that the area around the darkly displayed phrase is an important part. If you want a deeper understanding, you can read on.
[0063]
Further, it is also possible to display a document linked with automatic generation of a document list using the annotation function. For example, a search is performed on a document stored in the server system 200 by using a word with a mark such as an underline or a circle written by a reader as a keyword. Then, documents in which keywords frequently appear are listed as references. The reader can refer to the document title, the sentence (clip) where the keyword frequently appears, and the page number. When displaying the specified reference, the keyword in the clip (indicating the phrase corresponding to the search condition) may be changed, for example, by changing the font type or size, underlining, coloring, or using dark characters. Highlight such as displaying. This makes it possible to quickly understand the contents of the reference document.
[0064]
The processing of the emphasized word / sentence specifying unit 184, the emphasized word / sentence selection method instruction unit 186, and the emphasis instruction control unit 188 may be referred to Japanese Patent Application No. 2002-314876 of the present applicant.
[0065]
<Document server / Document database>
FIG. 4 is a diagram illustrating a configuration example of the document server 222 and the document DB 224. The document server 222 receives “registration” and “document reading” according to an external instruction. For example, when the client system 100 detects that the document reading button 114 of the document viewer 102 has been operated, the client system 100 notifies the document server 222 of the document management unit 220 included in the server system 200 of the fact. Thereby, the document server 222 reads the specified document from the document DB 224.
[0066]
Note that “registration” is to be registered indicating an address indicating a storage location of a document in the document DB 224, such as “http://datacenter.company.co.jp/access.cgi?DocumentID=8gjk3cl3”. It is given by a path such as a URL (Uniform Resource Locators) to a document or a path to a directory.
[0067]
The document server 222 sequentially assigns a document ID to the document (group) indicated by the given path, and registers the document name and the document text in the document DB 224. At this time, the data structure in the document DB 224 is, for example, as shown in FIG. The document name or the document body may be a path to the document such as a URL.
[0068]
The document server 222 receives an instruction of “read document” from the document viewer 102. When the document server 222 receives the “read document” instruction, it creates a list of document names in the document DB 224 and returns it to the document viewer 102. Further, the document server 222 receives the document name from the document viewer 102 and sends the corresponding document body back to the document viewer 102.
[0069]
<Annotation server / Annotation database>
FIG. 5 is a diagram illustrating a basic configuration example of the annotation server 212 and the annotation DB 216.
[0070]
The annotation server 212 receives “save” and “search” according to an external instruction. For example, when the client system 100 detects that the save button 116 of the document viewer 102 has been operated, the client system 100 notifies the annotation server 212 of the annotation management unit 210 configuring the server system 200 of the fact. Thereby, the annotation server 212 associates the annotation information instructed to be stored (an example of information representing the characteristics of the additional information) with the document to which the annotation has been added, and stores the annotation information in the annotation DB 216 which is an example of a storage unit. Register (store).
[0071]
As a method of transmitting the annotation information from the client system 100 to the annotation server 212, the annotation information may be transmitted to the annotation server 212 for each stroke of the annotation device 170.
[0072]
For example, the annotation server 212 receives a “save” instruction from the document viewer 102. At this time, the annotation ID, the content of the annotation to be stored, the rectangular information of the annotation, the color and shape, the document ID to which the annotation is added, and the terminal ID of the document viewer 102 that has issued the “save” instruction are given. At this time, similarly, the user name of the conference participant (client) instructing "save", the conference ID indicating the conference, the public attribute of the annotation instructed to save, and the status of the annotation (new, existing, erased) ), And the time when the annotation was given.
[0073]
The annotation server 212 receives the given annotation ID, terminal ID, document ID, rectangular information (details will be described later), annotation content, color, shape, user ID (or user name), conference ID, public attribute, status, and time. Is stored in the annotation DB 216 as table data. At this time, the data structure in the annotation DB 216 is, for example, as shown in FIG. The annotation ID includes a method issued on the client system 100 side and a method issued on the annotation server 212 side. It must be unique among at least three sets of annotation ID, user ID, and document ID. If the given annotation ID or the triple is not new, the line indicated by the annotation ID or the triple is overwritten.
[0074]
The annotation content is data for reproducing the drawn annotation, and is data such as a bitmap and vector data. The color or shape is the color or shape of the annotation. The user ID (or user name) is information indicating a user operating the document viewer 102, and the conference ID is an ID of a conference in which the user participates.
[0075]
The public attribute is, for example, any of publicly available (no restriction) (= Pub), publicly available only in a certain group (= Frd), and private (private) annotation (= Prv). Shall be taken. When the information is disclosed only within a certain group (Frd), information on the group to be disclosed (for example, a conference ID) is also registered in the annotation DB 216.
[0076]
The status indicates whether the annotation has been newly created (New), has already existed (= Exist), or has been deleted (= Deleted). If the user erases the annotation with an eraser or the like, this will be "Deleted". When displaying, send all annotations including “Deleted” from the server, check the status on the client side, switch display / non-display, or send only “Exist” on the server side I do.
[0077]
The time (client time) is the time when the annotation is added in the document viewer 102, and is composed of a date and a time.
[0078]
When detecting that the search button 118 of the document viewer 102 has been operated, the client system 100 notifies the annotation server 212 of the annotation management unit 210 configuring the server system 200 of the fact. As a result, the annotation server 212 reads the annotation information instructed to be searched from the annotation DB 216.
[0079]
For example, the annotation server 212 receives a “search” instruction from the document viewer 102. At this time, the annotation server 212 receives, from the client system 100 (the document viewer 102), information on the document ID, the rectangle information, and the range to which the annotation is provided. The annotation server 212 searches the annotation DB 216 based on these pieces of information (search conditions), and returns appropriate annotation contents to the document viewer 102. This search processing will be described later.
[0080]
<< Processing related to annotation addition >>
Next, a process regarding the annotation assignment will be described using a specific example. First, registration, reading, annotation addition, and storage of a document will be described.
[0081]
<Document registration processing>
FIG. 6 is a diagram illustrating a configuration example of the document DB 224 in a specific example described below. Each document in this example is a manual relating to the operation of the copier.
[0082]
As described above, a document is registered by giving a URL to a document to be registered or a path to a directory. The document server 222 registers the document ID, the document name, and the document body of the document indicated by the received path as the registration contents of the document in the document DB 224 as shown in FIG.
[0083]
<Document reading process>
The participant who wants to read the document presses the document reading button 114 of the document viewer 102. Upon receiving this instruction, the document viewer 102 sends a document reading request to the document server 222.
[0084]
The document server 222 that has received the notification creates a list of document names in the document DB 224 and returns the list to the document viewer 102. Here, it is “manual1.txt, manual2.txt, manual3.txt, manual4.txt”. The document viewer 102 displays a list of document names in a list box or the like and prompts the user A (user ID is user1) to make a selection.
[0085]
It is assumed that the user A has selected “manual2.txt”. The document viewer 102 notifies the document server 222 that “manual2.txt” has been selected. The document server 222 searches the document DB 224 for the document ID and the document text assigned to “manual2.txt” and returns them to the document viewer 102. The document viewer 102 displays the received document text in the document display area 104. If the document server 222 is provided with a full-text search function or the like, it is possible to present search results as objects to be read.
[0086]
<Annotation addition processing>
FIG. 7 is a diagram illustrating a display example of a state where annotation is added to a document displayed in the document display area 104 of the document viewer 102. The reader (user A) reads the document displayed in the document display area 104 while giving a mark (annotation) such as an underline or a circle according to interest or interest. Here, a pen-type device is used as the annotation device 170. In this case, an annotation can be added so as to write on paper.
[0087]
At this time, as shown in FIG. 7A, it is assumed that the document display area 104 is partitioned into rectangles that are not actually visible but include characters. Spaces with no characters, such as blank names and charts, are also divided into rectangles of an appropriate size. For example, it is good to divide into a rectangle of an appropriate size with reference to the font size of the characters before and after. Information for specifying each rectangle is added to each rectangle. For example, rectangular numbers consecutive from the first page are sequentially provided in the horizontal direction from the upper left.
[0088]
For example, at a meeting for proofreading a manual of a copying machine, user A pays attention to “the center of the document ...” in the description of a page containing the manual, and adds an annotation a1 shown in FIG. I do. Further, it is assumed that the annotation b1 is given by paying attention to the operation for performing the binding margin. After that, it is assumed that the user proceeds to read the second page and the third page, and annotates the points to be noted while actually performing the operation over three pages as shown in FIG. 7B.
[0089]
<Save processing>
FIG. 8 is a diagram illustrating an example of information that the document viewer 102 sends to the annotation server 212 in this case. FIG. 9 is a diagram illustrating a configuration example of the annotation DB 216 in this case. FIG. 10 is a diagram showing a configuration example of the action log DB 214 in this case. The configuration example of the data shown in FIG. 9 is the same as that shown in FIG.
[0090]
User A (user ID is user1) performs personal authentication by inputting a user ID and a conference ID given in advance and inquiring of the conference participation qualification management server 252 when using the present system. If a match is found, the system becomes available. Thereafter, the user A can instruct saving of the annotation by pressing the save button 116 of the document viewer 102.
[0091]
Upon receiving the save instruction, the document viewer 102 receives the annotation ID, the terminal ID, the document ID, the rectangle information of the annotated rectangle, the annotation content, the color shape, the line type, and the user corresponding to the annotated document. The ID, the conference ID, the public attribute, the status, and the time are sent to the annotation server 212. Information to be sent to the annotation server 212 is as shown in FIG. Here, it is assumed that the terminal ID of the document viewer 102 is “1”.
[0092]
Paying attention to the status item in FIG. 8, it can be seen that the annotation IDs 2 and 3 are the ones that have already been added and read and displayed on the document viewer 102. In addition, it can be seen that the user has erased the annotation ID2 with the eraser. Further, it can be seen that the annotation IDs 28 and 29 are the annotations newly added by this user.
[0093]
The annotation server 212 receives the information illustrated in FIG. 8 and stores the information in the annotation DB 216. However, at least it is necessary to be unique when it is captured by three sets of annotation ID, user ID, and document ID. Basically, if there is already the same annotation ID or a triple of an annotation ID, a document ID, and a user ID, the received information is overwritten there. For annotations that are only viewed, virtually no changes occur.
[0094]
When the status is “deleted”, the annotation server 212 changes the status of the record that matches the three pairs of the annotation ID, the user ID, and the document ID registered in the annotation DB 216 to “deleted” (updates the data). ). In addition, the annotation server 212 sets the status of the annotation data received from the client system 100 to “Exist” for the status “New”, and adds the data to the annotation DB 216 while receiving the remaining items. .
[0095]
FIG. 9 shows a state in which the information in the annotation DB 216 has been updated based on the information shown in FIG. 8 with respect to the data in the state shown in FIG. The annotation DB 216 has already stored a predetermined number of annotations given to the document IDs 2, 3, 4, and 5 by predetermined terminals. From the information shown in FIG. 8, the annotation ID to be added / changed is ID2 indicating that the status is “deleted” and deleted, and ID28 indicating that the status is “New” and added. , 29. Therefore, in this example, the annotation information of the annotation IDs 28 and 29 is not registered as a combination of the annotation ID, the document ID, and the user ID, and is added as a new line as shown in FIG. Also, the existing status information of the annotation ID 2 has been changed, so that part thereof is changed.
[0096]
Further, upon receiving a save instruction from the user A (user ID is user1), the document viewer 102 also sends the contents of the log file stored in the log file storage unit 182 to the annotation server 212. The annotation server 212 stores the log file received from the document viewer 102 in the action log DB 214 as shown in FIG. The action log DB 214 also records the time when the page of the document being viewed is changed (PAGE_OPEN) and the time when the document is opened (DOC_OPEN). Also, the time when the annotation was saved (ANT_SAVE) is recorded.
[0097]
Thus, the saving of the operation history of the annotation, the document, and the page in the predetermined database is completed.
[0098]
FIG. 11 is a diagram illustrating another basic configuration example of the annotation DB 216 in the above case. In the case of this configuration example, the annotations are grouped into one annotation by a certain group in advance. For example, it is assumed that annotations written within a certain time are combined into one vector data. Here, the “vector data” is data in which a plurality of coordinate points having a certain color and a certain thickness are collected in the order of writing time.
[0099]
Next, a method for annotating the document displayed in the document display area 104 of the document viewer 102 and using the annotation to realize efficient annotation search processing and annotation information providing processing will be described. Will be explained. Hereinafter, a system related to the information provision processing function of the electronic conference system 1 having such a function is particularly called an information display processing system.
[0100]
FIG. 12 is a diagram showing a configuration example of the information display processing system 7 focusing on the annotation processing. The basic framework is the same as the overall configuration diagram of the electronic conference system 1 shown in FIG. As described above, the configuration is such that a plurality of users can annotate the same document.
[0101]
The information display processing system 7 of the present embodiment is an example of an additional information search and display processing unit, and includes an annotation processing device 218 that is a dedicated device that manages a mechanism for executing an efficient search process and a process of providing annotation information. Have. The function of the annotation processing device 218 may be handled by the annotation server 212 or the document server 222. In this case, as indicated by a dotted line in the figure, the annotation server 212 and the document server 222 exchange annotation information relating to the annotation processing directly (or via the network 9).
[0102]
The viewer user (user; a participant in the conference in this example) uses the annotation device 170 while reading the document displayed in the document display area 104 of the document viewer 102 while turning the page while the conference is in progress. Write an annotation such as an underline or a circle on an interesting phrase or a phrase characterizing a document. Alternatively, a memo may be added. The memo writing is not limited to the freehand writing, and may be a text annotation for inputting text in a prescribed frame.
[0103]
Information relating to additional information on the document body such as annotations given to these documents is transmitted to the server system 200 via the network 9 when the save button is pressed (see FIG. 8). The document body is managed by the document management unit 220 (see FIG. 6).
[0104]
Additional information such as an annotation corresponding to the document body is managed (stored) in the annotation DB 216 of the annotation management unit 210 in association with the document body (see FIGS. 9 and 11). Further, the log file received from the document viewer 102 is stored in the action log DB 214 of the annotation management unit 210 (see FIG. 10). Then, when a search is instructed by the reader as necessary, additional information (for example, annotation) matching the search condition specified by the reader is searched (searched) using the annotation management unit 210, and the search condition is matched. Present information to the user.
[0105]
For example, in the configuration of the electronic conference system 1 shown in FIG. 1, a user can display an electronic document on a display surface of the document viewer 102 and give an annotation on the display surface during the electronic conference. . Here, a case where an intellectual activity is performed using a document display device that can add an annotation in a meeting using various documents or a huge amount of documents, or in an activity using the document for a long time continuously Think.
[0106]
You may start with one document and then need to know the details of one part of the document, and display another document. There is a place in the other document that needs information of another document, and another document may be opened. In this way, consider a scene in which an important part is annotated one after another.
[0107]
Here, it is often necessary to look back on the discussions so far, such as during or after the meeting. In this case, if the annotations attached to important points on the document displayed on the document viewer 102 can be viewed in chronological order, at least the person who participated in the meeting will remember the flow of the story. It is thought that it is possible. Conversely, if the annotations can be summarized in a time series and presented to the user, the user can efficiently look back on the conference.
[0108]
The electronic conference system 1 according to the present embodiment described below uses an annotation attribute to support a user to efficiently look back at a meeting during or after the meeting (hereinafter referred to as a review). Support function). Specifically, the annotation processing device 218 functions as a central processing unit that realizes the reflection support function. Hereinafter, the reflection support function will be described in detail.
[0109]
FIG. 13 is a block diagram of the information display processing system 7 focusing on a reflection support function using annotations. Here, FIG. 13A shows an outline of the overall configuration, and FIG. 13B shows details of functional elements specialized for the reflection support function.
[0110]
As shown in FIG. 13A, an information sharing processing system 7 having this function includes a search request specifying unit 500 for receiving a search instruction from a reader, and a document requested to be searched and other related information are annotated. The annotation processing unit 218 searches the annotation DB 216 of the management unit 210, the document DB 224 of the document management unit 220, or the annotation processing unit 218 to determine whether or not the registration has been performed. And a display processing unit 101 for displaying the search result sent from the annotation processing device 218. The display processing unit 101 includes a part related to display processing in the document viewer 102 and the manager unit 180.
[0111]
One configuration example of the annotation processing device 218 is shown in FIG. This block diagram specifically shows a mechanism that enables efficient search processing and information provision processing for performing a reflection support function by using annotations.
[0112]
As illustrated, the annotation processing device 218 includes a search condition determination unit 544 that determines a search condition and a search unit 546 that searches for annotation information that matches the search condition determined by the search condition determination unit 544. The determination of search conditions by the search condition determination unit 544 is realized by presenting an input screen for setting conditions on the document viewer 102 and receiving an instruction input from the user. This configuration has the advantage that a search screen that matches the data structure of the database on the server system 200 side can be presented.
[0113]
The search condition determining unit 544 may be provided on the client system 100 side. In this case, it may be configured integrally with the search request specifying unit 500. In this configuration, the search screen is basically presented by the client system 100 alone, and it is desired to create a screen that is not affected by changes in the data structure managed by the database. Of course, a screen may be created linked to the data structure on the server system 200 side.
[0114]
In addition, the annotation processing device 218 includes an annotation presentation control unit 550 that presents annotation information matching the search condition searched by the search unit 546 to the user. The annotation presentation control unit 550 also receives, as information on the annotation that is an example of the search result, information on the time at which the annotation was added from the action log DB 214 or the annotation DB 216, in addition to the entity of the annotation. The annotation presentation control unit 550 has a function of using the information on the time to rearrange and present the document pages in a time series to which the corresponding annotation matching the search condition is added. Further, the annotation presentation control unit 550 has a function of displaying the corresponding annotation that matches the search condition using a color other than the color set for the annotation.
[0115]
FIG. 14 is a diagram illustrating an annotation search related to the reflection support function. This figure is a diagram showing an example of a search request input screen (hereinafter referred to as a search condition setting window) displayed in the document display area 104 when the search button 118 of the document viewer 102 is pressed.
[0116]
For example, when the search button 118 of the document viewer 102 is pressed by the reader, the client system 100 shifts to the search condition specification mode, and displays the search condition setting window 380 in the document display area 104. When a search button 387 displayed at the lower left of the search condition setting window 380 is clicked, the search condition setting window 380 is closed, and a search is performed based on the search conditions set in the search condition setting window 380. Once started, the search results are displayed in the document display area 104. When the clear button 388 displayed at the lower right of the search condition setting window 380 is clicked, the search condition set in the search condition setting window 380 is cleared, and the search condition setting window 380 is closed. Can be
[0117]
Above the search button 387 and the clear button 388, input fields for setting search conditions are a user ID input field 382, a conference ID input field 383, a document ID input field 384, and an annotation shape input field 385. , And an annotation color input box 386 are provided. In each of the input fields 382 to 386, characters can be directly input.
[0118]
The user ID input column 382 is a pull-down menu. By clicking a downward triangle button, a list 382a of users registered in advance is displayed, and a plurality of users can be designated from the list. The annotation shape input field 385 is a pull-down menu. By clicking a downward triangle button, a list 385a of shapes registered in advance is displayed, and any one of them can be selected. You can also do it. A display switching button 389 switches a display method of a search result. It is possible to select a document view for displaying a normal document or an annotation view for displaying only an annotation portion.
[0119]
The viewer user (user) designates an annotation to be searched in this search condition setting window 380 and clicks a search button 387 to instruct the start of search. Note that, for items not specified in the search condition setting window 380, all possible items are to be searched.
[0120]
FIG. 15 is a diagram illustrating a time-series display function related to the reflection support function in the information display processing system 7 illustrated in FIG. Specifically, FIG. 14 shows a display mode of a result searched according to the search condition specified in the search condition setting window 380 in FIG.
[0121]
The search unit 546 searches for the corresponding annotation using the data structure of the annotation DB shown in FIG. 9 in accordance with the search condition specified in the search condition setting window 380 in FIG. Hand over to section 550.
[0122]
When the annotation presentation control unit 550 detects that the viewer user has performed any action on the annotation given to the document, the annotation presentation control unit 550 displays the document page to which the corresponding annotation that matches the search condition is given, in the time series to which the annotation was given. In the document display area 104 of the document viewer 102. For example, a conference participant who is a viewer user presses the left and right arrow buttons of the search result navigation button 127 (see FIG. 2 showing the appearance of the document viewer; inactive except in the search mode). Then, only the page with the annotation that matches the search condition is extracted by the search unit 546, and the document pages are displayed on the document viewer 102 in the order of the time when the annotation is added. Each time the arrow button is pressed, the position of the slider bar moves to the corresponding position.
By moving the slide bar of the search result navigation button 127, a page annotated at an arbitrary time in the search result can be displayed.
[0123]
For example, in the search condition setting window 380 in FIG. 14, user ID = User1, conference ID = 143, document ID = 3, annotation shape = linear, and annotation color = red are specified. Only the pages to which the annotations corresponding to are added are extracted and displayed in the order of the time when the annotations are added.
[0124]
Note that the corresponding annotation-added page is displayed in such a manner that the relevant annotation is displayed approximately at the center of the display range of the document viewer 102 (for example, about 1/3 above and below from the center) in order to separately present the other annotation and the relevant annotation to the user. ), A method of displaying the relevant annotation in a special color, a method of blinking the relevant annotation, and a method of coloring the background of the target rectangular area of the relevant annotation. For example, the method of shifting the relevant annotation part to the center of the display is as shown in FIG.
[0125]
As described above, according to the configuration of the information display processing system having the time series display function, the annotated documents are sequentially displayed in the time series to which the annotations have been added. Support function "can be realized. That is, a conference participant who is a viewer user annotates an important portion of a document page during a conference, and annotates a page to which the annotation is attached (hereinafter also referred to as an annotation page). It is a time series that can be confirmed while looking back and forth. If you want to look back on previous discussions during a meeting or after a meeting, you can use this function to view the annotation pages attached to important points in chronological order. Thus, the viewer user who has participated in the conference can look back on the conference while remembering the flow of the story.
[0126]
FIG. 16 is a diagram illustrating an extraction display function related to the reflection support function in the information display processing system 7 illustrated in FIG. This extraction display function is a function included in the annotation presentation control unit 550, and extracts (cuts out) a portion designated by the relevant annotation (hereinafter referred to as a relevant annotation portion) in a document to which an annotation matching the search condition is added. ), A function of presenting the document on the document viewer 102 according to a predetermined rule. As the predetermined rule, it is conceivable that the annotation is added and the annotation is rearranged in chronological order, or displayed separately for each user. Of course, as described later, a display mode according to a rule other than these may be adopted. The range of a document to be processed is not limited to one document but includes a plurality of documents.
[0127]
There is already a function of displaying the annotation portions added to the document in the order of the cutout position and a function of displaying only a specific annotation color (in the order of position). Note that these conventional functions are functions for only one document. However, such a display form is insufficient from the viewpoint of the “reflection support function”. The extraction display function of the present embodiment can sufficiently support the “reflection support function”. This will be specifically described below.
[0128]
First, the extraction conditions will be described. The annotation presentation control unit 550 basically cuts out the relevant annotation portion in the document with respect to the document page searched by the search unit 546 and displays it on the document viewer 102. When the search condition is specified for a plurality of users (for example, when a group is specified), the annotation presentation control unit 550 performs not only the individual range but also all the annotations of all the participants of the activity (of course, , Within the range that matches the search condition), and cut out and display the relevant portion.
[0129]
Thus, the meeting participant who is a viewer user can annotate important portions of the document page during the meeting so that only the annotated portion can be viewed collectively. In addition, annotations given by other participants can be collectively confirmed. Therefore, the viewer user who has participated in the conference can look back on the conference only within the range of the individual. Alternatively, you can look back at the conference, including all participants in the activity.
[0130]
Further, the annotation presentation control unit 550 may cut out and display an important part indicated by the annotation according to the following rule. For example, as a concept of defining an important part by an annotation, a rule is used in which a part where an annotation is given to the same place by a plurality of users (a part where an annotation is duplicated among users) is an important part. This rule is based on the idea that the words in the range with the duplicate annotation indicate that they are important in activities using the document. For example, when the annotation range points to a sentence or a clause, it is preferable to extract the important part by performing dependency analysis, limiting the range to the main word, and calculating duplication.
[0131]
This allows a plurality of conference participants to annotate the document page during the conference, so that the conference participants who are the viewer users can view the overlapped portions obtained by merging all the participants. You can look back on the meeting focusing on the important parts.
[0132]
For example, it is assumed that each user uses his or her terminal (document viewer 102) to annotate a document as shown in FIG. Here, when the user instructs the annotation view, the annotation presentation control unit 550 cuts out the relevant annotation portion and displays it on the document viewer 102 by the following method. It is assumed that the instruction of the annotation view is given through the search instruction using the search condition setting window 380 shown in FIG.
[0133]
For example, the annotation presentation control unit 550 performs the extraction display function by:
1) According to the rectangle information, the cut-out corresponding annotation portions are displayed in the order of the smallest (or large) rectangle number at the head of the corresponding annotation portion or in the order of the small (or large) document ID (see FIG. 16B).
2) With reference to the time information to which the annotation is added, which is registered in the annotation DB 216, the corresponding cut out annotation portions are arranged and displayed in the order of the earlier (or later) time information (see FIG. 16C).
3) Referring to the user ID to which the annotation is added, which is registered in the annotation DB 216, and displays the cut-out corresponding annotation portion for each user (see FIG. 16D).
And the like. Since the annotated portion reflects the viewpoint of the user who has provided the annotation, adopting these display modes facilitates understanding of the document according to the viewpoint.
[0134]
FIG. 17 is a diagram showing another example of a display mode for realizing the extraction display function. The annotation presentation control unit 550 may select an annotation and display it on the document viewer 102 in accordance with the following method in order to realize the extraction display function.
1) Display only a specific terminal ID (see FIG. 17A)
2) Display only a specific document ID (a plurality of document IDs) (see FIG. 17B)
3) Only those for a specific time section are displayed (see FIG. 17C),
4) Display only a specific annotation color (see FIG. 17D),
5) Only a specific annotation shape is displayed (see FIG. 17E).
[0135]
For example, the mode of FIG. 17A can be used in a case where the user who has used the terminal is switched, when it is desired to collectively check the annotations given by the user who has previously used the terminal. . In addition, the mode of FIG. 17B is convenient, for example, when comparing annotations given to a plurality of documents, such as an original manual document and its revised version, in a simple manner. Also, the mode of FIG. 17C is convenient for confirming, for example, a situation where annotations are actively added. In addition, in the modes of FIGS. 17D and 17E, if the meanings of annotation colors and shapes are set in advance, the viewpoint and intention of another person can be grasped by the colors and shapes of the attached annotations. It can be consolidated and convenient.
[0136]
Since the annotated portion reflects the viewpoint of the user who has provided the annotation, adopting these display modes facilitates understanding of the document according to the viewpoint.
[0137]
As described above, according to the configuration of the information display processing system having the extraction display function, substantially the entire document page to which the relevant annotation is added is not displayed, and only the relevant annotation portion is extracted and displayed. As a result, the "reflection support function" can be efficiently realized. That is, a conference participant who is a viewer user can annotate important portions of a document page during a conference, so that only an annotation portion of a page to which this annotation is added can be collectively confirmed. . If this function is used, it is possible to quickly read only the annotation parts attached to important parts and to quickly understand the contents of the document, so that the meeting can be efficiently looked back.
[0138]
Note that a series of processes for realizing the information display process using the above-described annotation can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, the programs that make up the software are executed by a computer (such as an embedded microcomputer) built into dedicated hardware, or by installing various programs to perform various functions. It is installed from a recording medium into a general-purpose personal computer that can be executed.
[0139]
This recording medium is distributed separately from a computer to provide the program to a user, and is recorded on a magnetic disk (including a flexible disk) on which the program is recorded, or an optical disk (CD-ROM (Compact Disc-Read Only Memory)). , DVD (including Digital Versatile Disc), magneto-optical disc (including MD (Mini Disc)), or package media including semiconductor memory, etc. It may be provided, or may be constituted by a ROM or a hard disk in which the program is recorded. Alternatively, a program constituting software may be provided via a communication network.
[0140]
FIG. 18 is a diagram schematically showing a system configuration when the above-described information display processing system 7 is configured by a computer. The basic configuration of such a computer system is composed of four layers: a hardware layer 910, an OS (Operating Systems) layer 920, a document information management layer 930, and a user interface layer 940. Each layer is kept independent, and it is easy to extend the function of each layer or exchange it for another layer.
[0141]
The hardware layer 910 corresponds to the system configuration shown in FIG. 1, and includes, for example, a tablet 911 corresponding to the document viewer 102, a pen input device 912 corresponding to the annotation device 170, a button 913 corresponding to the operation button 110, And a communication network 914 corresponding to the network 9. Note that another mechanism such as a voice input / output interface 915 may be provided.
[0142]
A document information management layer 930 is a document layer 932 corresponding to the document management unit 220 and responsible for managing the document body, and a workspace corresponding to the annotation management unit 210 and responsible for managing additional information such as annotations added to the document body. 934 and an information search layer 936 corresponding to the information search unit 240 and performing information search using annotations and the like.
[0143]
The user interface layer 940 corresponds to the document viewer 102 and the annotation device 170 and manages input from a user. The user interface management layer 942, a screen layer 944 related to information display in the document display area 104, and a document corresponding to the manager unit 180. It comprises a screen manager 946 for managing the display operation of the display area 104.
[0144]
In such a system configuration, for example, a storage medium storing a program code of software for realizing the functions of the above-described embodiments is supplied to the system, and a computer (or CPU or MPU) of the system is stored in the storage medium. The effect described in the above embodiment is achieved by reading and executing the program code. In this case, the program code itself read from the storage medium implements the functions of the above-described embodiment. When the computer executes the readout program code, not only the functions of the above-described embodiments are realized, but also the operating system OS or the like running on the computer based on the instructions of the program code. Some or all of the processing may be performed, and the functions of the above-described embodiments may be realized by the processing.
[0145]
Further, after the program code read from the storage medium is written in a memory provided in a function expansion card inserted into the computer or a function expansion unit connected to the computer, the function expansion card is written based on the instruction of the program code. Or a CPU provided in the function expansion unit may perform part or all of the actual processing, and the processing may realize the functions of the above-described embodiments.
[0146]
Note that the program is provided as a file in which the program code for realizing the processing described in the above embodiment is described. In this case, the program is not necessarily provided as a collective program file, but may be provided according to the hardware configuration of the system. , May be provided as individual program modules.
[0147]
For example, in the system configuration shown in FIG. 1, since the client system 100 and the server system 200 are connected via the network 9, a display-related processing program (for example, a highlighting function for turning a page or reflecting a search result). Is preferably provided as a client system module to the client system 100 side device. On the other hand, a processing program related to annotation management and search is preferably provided as a server system module to the server system 200 side device. Further, the server system module may be provided as a batch file or a sub-module file according to the configuration of each management unit included in the server system 200.
[0148]
Further, in the system configuration shown in FIG. 1, the client system 100 and the server system 200 are connected via the network 9, but they may be arranged in a close place. In this case, the manager section 180 of the client system 100 may be integrated with the server system 200 (whole or part thereof).
[0149]
Further, in the above description, the document viewer 102 has been described as being separate from the main body (cradle / docking station) accommodating the manager unit 180. However, the function part in the manager unit 180 described in the above embodiment is described as a document. It may be integrated with the viewer 102.
[0150]
In the above-described embodiment, the server system 200, which is an example of the management apparatus, performs the process of generating the presentation image based on the search result (for example, presenting the image in chronological order). To the client system 100, and the client system 100 may perform a generation process of the presented image based on the search result (for example, a presentation in a time order). Hereinafter, a system configuration of such a mode will be described.
[0151]
FIG. 19 is a block diagram focusing on a reflection support function using annotations when the client system 100 has a system configuration in which a presentation image is generated based on a search result. Here, FIG. 19A shows an outline of the overall configuration, and FIG. 19B shows details of functional elements specialized for the reflection support function.
[0152]
As shown in FIG. 19A, the information display processing system 7 of this embodiment does not include the annotation processing device 218 shown in FIG. Instead, the function of the search condition determining unit 544 shown in FIG. 13A is integrated with the search request specifying unit 500. The search condition specified by the search request specifying unit 500 is passed to the server system 200 side. In response to this, for example, the annotation management unit 210 or the document management unit 220 extracts a document or an annotation that matches the search condition, and returns it to the manager unit 180 of the client system 100 as a search result.
[0153]
As shown in FIG. 19B, an annotation presentation control unit 550 is provided in the manager unit 180 of the client system 100. The annotation presentation control unit 550 provided in the client system 100 receives, as a search result, all documents that match the search conditions and information on the annotations attached to the documents. Note that the information on the annotation includes information on the time at which the annotation was given from the annotation DB 216, in addition to the entity of the annotation.
[0154]
The annotation presentation control unit 550 has a function of using the information on the time to rearrange and present the document pages in a time series to which the corresponding annotation matching the search condition is added. Further, the annotation presentation control unit 550 has a function of displaying the corresponding annotation that matches the search condition using a color other than the color set for the annotation. In addition, it has a function of cutting out an annotated portion and displaying it in a predetermined order. These functions are the same as those of the annotation presentation control unit 550 shown in FIG. 13A, and thus a detailed description is omitted.
[0155]
As described above, the present invention has been described using the embodiment. However, the technical scope of the present invention is not limited to the scope described in the embodiment. Various changes or improvements can be made to the above-described embodiment without departing from the spirit of the invention, and embodiments with such changes or improvements are also included in the technical scope of the present invention.
[0156]
Further, the above embodiments do not limit the invention according to the claims (claims), and all combinations of the features described in the embodiments are not necessarily essential to the means for solving the invention. Absent. The embodiments described above include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent features. Even if some components are deleted from all the components shown in the embodiment, as long as the effect is obtained, a configuration from which some components are deleted can be extracted as an invention.
[0157]
For example, in constructing the system, how to divide each functional element into the client system 100 and the server system 200 is not limited to the above-described embodiment. It goes without saying that the system may be divided into convenient parts.
[0158]
【The invention's effect】
As described above, according to the present invention, a portion (annotation portion) designated by the annotation is displayed in a display form convenient for reviewing the meeting by using the annotation given to the document. The user can efficiently look back on the meeting during or after the meeting.
[0159]
For example, if the annotation pages are displayed in the order of the time series to which the annotations are added, the annotation pages can be viewed in a time series. As a result, those who participated in the conference can look back at the conference while recalling the flow of the story.
[0160]
If only the annotation part is extracted and displayed instead of displaying the entire annotation page, only the annotation part can be checked collectively. As a result, only the annotation part can be read quickly at a time, and the content of the document can be quickly understood, so that the meeting can be efficiently looked back.
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration example of an electronic conference system to which a display control method and an information display processing system according to the present invention are applied.
FIG. 2 is an external view focusing on a display surface side of a document viewer which is an embodiment of the information display processing device.
FIG. 3 is a functional block diagram of a document viewer and a manager unit.
FIG. 4 is a diagram illustrating a configuration example of a document server and a document database.
FIG. 5 is a diagram illustrating a configuration example of an annotation server and an annotation database.
FIG. 6 is a diagram illustrating a specific configuration example of a document database.
FIG. 7 is a diagram illustrating a display example of a state where an annotation is added to a document.
FIG. 8 is a diagram showing an example of information sent from a document viewer to an annotation server.
FIG. 9 is a diagram illustrating a configuration example of an annotation database.
FIG. 10 is a diagram illustrating a configuration example of an action log database.
FIG. 11 is a diagram illustrating another configuration example (vector representation) of the annotation database.
FIG. 12 is a diagram illustrating a configuration example of an information display processing system focusing on annotation processing.
FIG. 13 is a block diagram of the information display processing system focusing on a reflection support function using annotations.
FIG. 14 is a diagram illustrating an annotation search related to the reflection support function.
FIG. 15 is a diagram illustrating a time-series display function related to the reflection support function in the information display processing system.
FIG. 16 is a diagram illustrating an extraction display function related to the reflection support function in the information display processing system.
FIG. 17 is a diagram showing another example of a display mode for realizing the extraction display function.
FIG. 18 is a diagram schematically illustrating a system configuration when the information display processing system is configured by a computer.
FIG. 19 is a block diagram of another embodiment focusing on a reflection support function using an annotation.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Electronic conference system, 7 ... Information display processing system, 9 ... Network, 100 ... Client system, 101 ... Display processing unit, 102 ... Document viewer, 103 ... Liquid crystal display panel, 104 ... Document display area, 109 ... Housing, 110 operation button, 114 document reading button, 116 save button, 118 search button, 120 update button, 122 page turn button, 122a previous page forward button, 122b next page forward button, 124 highlighting Button, 126: user display button, 127: search result navigation button 130: controller, 132: page forward instruction receiving unit, 140: page image generation unit, 150: display brightness control unit, 150a: contrast control unit, 150b: brightness control Part, 170 ... Annotation device 180, a manager section, 182, a log file storage section, 184, an emphasis word / sentence specifying section, 186, an emphasis word / sentence selection method instruction section, 188, an emphasis instruction control section, 200, a server system, 210, an annotation management Unit 212 annotation server 214 action log DB 216 annotation DB 220 document management unit 222 document server 224 document DB 230 profile management unit 232 profile server 234 profile DB 240 information retrieval unit 242 natural language processing server 244 natural language processing DB 250 conference participation qualification management server 252 conference participation qualification management server 254 conference participation qualification management DB 500 search request designation unit 544: Search condition determination unit, 546: Search unit, 55 ... annotation presentation control unit

Claims

An information display processing method in an information display processing system having a function of adding, to a document displayed on a predetermined display device, additional information that can be managed separately from the document,
While managing the time when the additional information is added to the document,
When a search process for the document to which the additional information matching the predetermined search condition is added is instructed, the document matching the search condition is displayed in chronological order by referring to the time when the additional information is added. An information display processing method characterized by displaying the information on a device.

An information display processing method in an information display processing system having a function of adding, to a document displayed on a predetermined display device, additional information that can be managed separately from the document,
When instructed to perform a search process of the document to which the additional information that matches the predetermined search condition is added, cut out the additional information added portion to which the additional information is added in the document that matches the search condition, and An information display processing method, wherein the extracted additional information-added portion is rearranged in an order different from the arrangement order of the additional information-added portion in the document and displayed on the display device.

An information display processing method in an information display processing system having a function of adding, to a document displayed on a predetermined display device, additional information that can be managed separately from the document,
When a search process of the document to which the additional information matching the predetermined search condition is added is instructed and there are a plurality of documents matching the search condition, the plurality of documents matching the search condition An information display processing method, wherein the additional information added portions to which the additional information is added are cut out, and the cut out additional information added portions are arranged in a predetermined order and displayed on the display device.

While managing the time when the additional information is added to the document,
4. The information display processing method according to claim 2, wherein the additional information provision portion is displayed on the display device in a time series with reference to a time at which the additional information is provided. 5.

An information display processing system for displaying information on a document displayed on a predetermined display device using a function of adding additional information that can be managed separately from the document,
An additional information providing unit that adds, to a document displayed on a predetermined display device, additional information that can be managed separately from the document;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added in the document,
A registration unit that registers, for each document, the time at which the additional information is added and the additional information addition part in association with each other;
A search process is performed for the document to which the additional information that matches the predetermined search condition is added, and the document that matches the search condition is referred to by referring to the time at which the additional information registered in the registration unit is added. And an additional information search and display processing unit for displaying the information in time series on the display device.

An information display processing system for displaying information on a document displayed on a predetermined display device using a function of adding additional information that can be managed separately from the document,
An additional information providing unit that adds, to a document displayed on a predetermined display device, additional information that can be managed separately from the document;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added in the document,
A search process is performed for the document to which the additional information that matches the predetermined search condition is added, and the additional information addition portion in the document that matches the search condition is cut out, and the cut out additional information addition portion is inserted into the document. An information display processing system, comprising: an additional information search display processing unit that rearranges the additional information providing part in a document in an order different from the arrangement order and displays the additional information on the display device.

An information display processing system for displaying information on a document displayed on a predetermined display device using a function of adding additional information that can be managed separately from the document,
An additional information providing unit that adds, to a document displayed on a predetermined display device, additional information that can be managed separately from the document;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added in the document,
A search process is performed for the document to which the additional information matching the predetermined search condition is added, and when there are a plurality of documents matching the search condition, the additional processing is performed in the plurality of documents matching the search condition. An information display processing system comprising: an additional information search display processing unit that cuts out the information addition portions and arranges the cut out additional information addition portions in a predetermined order and displays them on the display device.

For each document, a registration unit for registering the time when the additional information is added and the additional information adding part in association with each other,
The additional information search and display processing unit refers to a time at which the additional information registered in the registration unit is added, and displays the additional information addition part on the display device in chronological order. The information display processing system according to claim 6 or 7, wherein

For each of the documents, a registration unit for registering the adder who has provided the additional information and the additional information providing portion in association with each other,
The additional information search and display processing unit refers to a grantor who has added the additional information registered in the registration unit, and is an additional information adding part that matches the search condition, and is a duplicated part for a plurality of grantors. The information display processing system according to any one of claims 5 to 8, wherein a portion to be cut is cut out and displayed on the display device.

A management server used in an information display processing system that performs information display using a function of adding additional information that can be managed separately from the document displayed on a predetermined display device,
A registration unit that registers, for each document, a time at which the additional information is added and information of an additional information addition part to which the additional information is added, in association with each other;
A search process is performed for the document to which the additional information that matches the predetermined search condition is added, and the document that matches the search condition is referred to by referring to the time at which the additional information registered in the registration unit is added. And a supplementary information search and display processing unit for displaying the information on the display device in chronological order.

A management server used in an information display processing system that performs information display using a function of adding additional information that can be managed separately from the document displayed on a predetermined display device,
A search process is performed for the document to which the additional information that matches the predetermined search condition is added, and the additional information addition portion in the document that matches the search condition is cut out, and the cut out additional information addition portion is inserted into the document. A management server, comprising: an additional information search / display processing unit that rearranges the additional information adding portion in the document in an order different from the arrangement order and displays the additional information on the display device.

A management server used in an information display processing system that performs information display using a function of adding additional information that can be managed separately from the document displayed on a predetermined display device,
A search process is performed for the document to which the additional information that matches the predetermined search condition is added, and when there are a plurality of documents that match the search condition, the additional processing is performed in the plurality of documents that match the search condition. A management server, comprising: an additional information search display processing unit that cuts out the information addition portions and arranges the cut out additional information addition portions in a predetermined order and displays them on the display device.

For each document, a registration unit for registering the time when the additional information is added and the additional information adding part in association with each other,
The additional information search and display processing unit refers to a time at which the additional information registered in the registration unit is added, and displays the additional information addition part on the display device in chronological order. The management server according to claim 11, wherein the management server performs the operation.

A client terminal used in an information display processing system that performs information display using a function of adding additional information that can be managed separately from a document displayed on a predetermined display device,
An additional information providing unit that adds, to a document displayed on a predetermined display device, additional information that can be managed separately from the document;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added in the document,
Requesting a search process of the document to which the additional information matching the search condition related to the additional information is added, and receiving a search result of the document to which the additional information matching the search condition is added; The document that matches the search condition is displayed in chronological order with reference to a registered database in which the time at which the additional information is added and the information of the additional information added portion in the document are added. A client terminal, comprising: an additional information search / display processing unit to be displayed on a device.

A client terminal used in an information display processing system that performs information display using a function of adding additional information that can be managed separately from a document displayed on a predetermined display device,
An additional information providing unit that adds, to a document displayed on a predetermined display device, additional information that can be managed separately from the document;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added in the document,
A request is made for a search process of the document to which the additional information matching the search condition related to the additional information is added, and a search result of the document to which the additional information matching the search condition is added is received. Adding the additional information-added portion in the matching document that is cut out, and the cut-out additional information-added portion is rearranged in a different order from the arrangement order of the additional information-added portion in the document and displayed on the display device A client terminal comprising an information retrieval display processing unit.

A client terminal used in an information display processing system that performs information display using a function of adding additional information that can be managed separately from a document displayed on a predetermined display device,
An additional information providing unit that adds, to a document displayed on a predetermined display device, additional information that can be managed separately from the document;
An additional information addition part detection unit that acquires information of an additional information addition part to which the additional information is added in the document,
While requesting a search process of the document to which the additional information matching the search condition related to the additional information is added, receiving a plurality of documents to which the additional information matching the search condition is added as a search result, A client terminal comprising: an additional information search display processing unit that cuts out each of the additional information added portions in the document and arranges the cut out additional information added portions in a predetermined order and displays them on the display device.

The additional information search and display processing unit refers to a database in which the time at which the additional information is added and the information of the additional information addition part are registered and refers to a document that matches the search condition in chronological order. 17. The client terminal according to claim 15, wherein the client terminal is displayed on the display device.

A program for presenting predetermined information to a user in an information display processing system having a function of adding additional information that can be managed separately from the document to a document displayed on a predetermined display device,
Receiving a search process of the document to which the additional information that matches a predetermined search condition is added;
The time when the additional information is added and the information of the additional information added portion in the document in which the additional information is added are referred to in a registered database, and the additional information addition that matches a search condition is performed. Steps to extract the parts,
A step of displaying, on the display device, a document that matches a search condition in a time-series manner by referring to a time at which the additional information is added to the database and registered in the database.

A program for presenting predetermined information to a user in an information display processing system having a function of adding additional information that can be managed separately from the document to a document displayed on a predetermined display device,
Receiving a search process of the document to which the additional information that matches a predetermined search condition is added;
A step of cutting out an additional information added portion to which the additional information is added in the document that matches a search condition;
And rearranging the extracted additional information-added portion in a different order from the arrangement order of the additional information-added portion in the document and displaying the rearranged additional information-added portion on the display device.

A program for presenting predetermined information to a user in an information display processing system having a function of adding additional information that can be managed separately from the document to a document displayed on a predetermined display device,
Receiving a search process of the document to which the additional information that matches a predetermined search condition is added;
When there are a plurality of documents that match the search condition, a step of cutting out the additional information added portion to which the additional information is added in the plurality of documents that match the search condition,
Arranging the extracted additional information providing portions in a predetermined order and displaying them on the display device.