JPWO2006095443A1 - Information management system - Google Patents

Information management system Download PDF

Info

Publication number
JPWO2006095443A1
JPWO2006095443A1 JP2007506974A JP2007506974A JPWO2006095443A1 JP WO2006095443 A1 JPWO2006095443 A1 JP WO2006095443A1 JP 2007506974 A JP2007506974 A JP 2007506974A JP 2007506974 A JP2007506974 A JP 2007506974A JP WO2006095443 A1 JPWO2006095443 A1 JP WO2006095443A1
Authority
JP
Japan
Prior art keywords
information
stroke
stroke information
event
created
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007506974A
Other languages
Japanese (ja)
Other versions
JP4560543B2 (en
Inventor
真 岩山
真 岩山
池田 尚司
尚司 池田
古川 直広
直広 古川
佐藤 祐介
祐介 佐藤
修 今一
修 今一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of JPWO2006095443A1 publication Critical patent/JPWO2006095443A1/en
Application granted granted Critical
Publication of JP4560543B2 publication Critical patent/JP4560543B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

データを記憶するコンテンツサーバと、前記データを入出力する端末とによって構成される情報管理システムであって、前記コンテンツサーバは、書類データ及びストローク情報を記憶する記憶部を有し、前記書類データは、ユーザがイベントにおいて使用した紙に印刷された情報を含み、前記ストローク情報は、前記書類データに係る紙面上で特定された位置及び該位置が特定された時刻を含み、前記端末は、前記イベントを特定可能な情報に基づいて、当該イベントに関連して作成されたストローク情報を、前記コンテンツサーバから取得し、前記取得したストローク情報を作成したユーザ毎に、前記ストローク情報を分類し、前記分類されたストローク情報を、前記イベントの進行に従って表示するAn information management system comprising a content server for storing data and a terminal for inputting and outputting the data, wherein the content server has a storage unit for storing document data and stroke information, and the document data is , Including information printed on paper used by the user in the event, and the stroke information includes a position specified on the paper surface related to the document data and a time when the position is specified, and the terminal The stroke information created in relation to the event is acquired from the content server based on the information that can identify the event, the stroke information is classified for each user who created the acquired stroke information, and the classification Displayed stroke information as the event progresses

Description

本発明は、書類等を管理する情報管理システムに関し、特に、管理される書類に記載されたメモ書き(アノテーション)の検索技術に関する。  The present invention relates to an information management system for managing documents and the like, and more particularly, to a technique for retrieving memos (annotations) described in documents to be managed.

近年、電子技術の発達により、紙に記入された手書きの情報を容易に電子化できるようになってきた。
現在、計算機上では紙書類を電子化した電子書類のみを管理している。このようにすると、紙書類に記入された手書きの情報は電子的に管理されず、手書きの情報を有効に利用することができない。
この問題を解決するための技術として、特開2004−199484号公報に記載されている情報検索方法が知られている。この情報検索方法は、文書IDとアノテーション位置とをアノテーションDBに登録する。アノテーション検索時には、閲覧中の文書に検索指示用のアノテーションを付与することで、このアノテーションを付与した視点と同一視点の他人によるアノテーションの検索を要求する。アノテーション処理装置は、閲覧中の文書に付与されている全てのアノテーションを先ず検索する。アノテーション処理装置は、文書ビューア側から受け取った検索要求とアノテーションDBの検索により得られたアノテーションの矩形情報とを順に比較することで、文書ビューアに検索結果として返すべきアノテーションを特定する。これによって、アノテーションを利用して情報を効率的に検索するとができる。
また、特開平7−182365号公報に記載されている会議システムは、カメラなどの動画入力装置、マイクなどの音声入力装置、ペン入力装置、マウスなどのポインティング装置、キーボードなどのキー入力装置から入力されるマルチメディア情報からキーワードを抽出することにより検索用ファイル3を作成する。そして会議録作成時には、この検索用ファイルを参照し、重要な項目の会った場面を検索編集することにより会議録を短時間で簡便に編集できる。
また、ペン先の軌跡を電子的に取得するペン型入力デバイス(デジタルペン)が実用化されている。デジタルペンは、取得したペン先の軌跡を電子計算機に入力する。例えば、デジタルペンは、スウェーデンのAnoto社が開発した「アノトペン」等がある。このデジタルペンの詳細は、国際公開第01/71473号公報に記載されている。デジタルペンは、キーボードやマウスの利用に慣れていない利用者であっても手軽に使えるという利点があり、電子政府での申請業務やその他の分野への応用が期待されている。
In recent years, with the development of electronic technology, handwritten information written on paper can be easily digitized.
Currently, only electronic documents obtained by digitizing paper documents are managed on the computer. If it does in this way, handwritten information entered in a paper document will not be managed electronically, and handwritten information cannot be used effectively.
As a technique for solving this problem, an information search method described in Japanese Patent Application Laid-Open No. 2004-199484 is known. In this information search method, the document ID and the annotation position are registered in the annotation DB. At the time of an annotation search, an annotation for a search instruction is given to a document being browsed, thereby requesting an annotation search by another person from the same viewpoint as the viewpoint to which the annotation is given. The annotation processing device first searches for all annotations attached to the document being browsed. The annotation processing device identifies an annotation to be returned as a search result to the document viewer by sequentially comparing the search request received from the document viewer side with the rectangle information of the annotation obtained by the annotation DB search. As a result, information can be efficiently searched using annotations.
In addition, the conference system described in JP-A-7-182365 is input from a moving image input device such as a camera, a voice input device such as a microphone, a pen input device, a pointing device such as a mouse, and a key input device such as a keyboard. The search file 3 is created by extracting keywords from the multimedia information. When the minutes are created, the minutes can be easily edited in a short time by referring to the search file and searching and editing scenes where important items meet.
In addition, a pen-type input device (digital pen) that electronically acquires the locus of the pen tip has been put into practical use. The digital pen inputs the acquired pen point trajectory to the electronic computer. For example, digital pens include “Anotopen” developed by Anoto, Sweden. Details of this digital pen are described in International Publication No. 01/71473. The digital pen has the advantage that it can be used easily even by users who are not familiar with the use of keyboards and mice, and is expected to be applied to e-government applications and other fields.

前述した従来技術のうち、特開2004−199484号公報に記載されている情報検索方法は、自分のアノテーションと同一(又は、類似)のアノテーションを付与した他人を、アノテーションを付与した場所の情報に基づいて検索するものである。しかし、この従来技術では、アノテーションを付与した時間を考慮して検索されていない。また、検索結果を一覧形式で表示することは考慮されていない。
また、特開平7−182365号公報に記載されている会議システムは、アノテーションの頻度を集計して時系列に表示するが、アノテーションの付与者をキーにして整理することは考慮されていない。
また、いずれの従来技術も、アノテーションに公開制限情報を付し、アノテーションの公開を制限することは考慮されていない。
本発明の一実施形態の情報管理システムは、データを記憶するコンテンツサーバと、前記データを入出力する端末とによって構成され、前記コンテンツサーバは、書類データ及びストローク情報を記憶する記憶部を有し、前記書類データは、ユーザがイベント(会議等)において使用した紙に印刷された情報を含み、前記ストローク情報は、前記書類データに係る紙面上で特定された位置及び該位置が特定された時刻を含み、前記端末は、前記イベントを特定可能な情報に基づいて、当該イベントに関連して作成されたストローク情報を、前記コンテンツサーバから取得し、前記取得したストローク情報を作成したユーザ毎に、前記ストローク情報を分類し、前記分類されたストローク情報を、前記イベントの進行に従って表示する。
本発明の一実施形態によると、ユーザがアノテーションを指定すると、そのアノテーションに関連するアノテーションを検索し、集計して表示するので、特定の者のアノテーションと他人のアノテーションとの関係を容易に把握することができる。
Among the above-described prior arts, the information retrieval method described in Japanese Patent Application Laid-Open No. 2004-199484 uses another person who has given the same (or similar) annotation as his / her annotation as information on the place where the annotation has been given. Search based on. However, in this prior art, the search is not performed in consideration of the time when the annotation is given. Also, displaying search results in a list format is not considered.
Further, the conference system described in Japanese Patent Laid-Open No. 7-182365 sums up the frequency of annotations and displays them in time series, but it is not considered to organize them using the annotation grantor as a key.
In addition, none of the conventional techniques considers adding the restriction information to the annotation and restricting the publication of the annotation.
An information management system according to an embodiment of the present invention includes a content server that stores data and a terminal that inputs and outputs the data, and the content server includes a storage unit that stores document data and stroke information. The document data includes information printed on paper used by the user at an event (meeting or the like), and the stroke information includes a position specified on the paper surface of the document data and a time when the position is specified. The terminal acquires stroke information created in association with the event based on information that can identify the event from the content server, and for each user who created the acquired stroke information, The stroke information is classified, and the classified stroke information is displayed according to the progress of the event.
According to an embodiment of the present invention, when a user designates an annotation, annotations related to the annotation are searched, aggregated and displayed, so that the relationship between the annotation of a specific person and the annotation of another person can be easily grasped. be able to.

第1図は、本発明の実施の形態の書類管理システムの処理の概念図である。
第2図は、本発明の実施の形態の情報端末に表示される画面の説明図である。
第3図は、本発明の実施の形態の書類管理システムの構成のブロック図である。
第4図は、本発明の実施の形態のコンテンツサーバのブロック図である。
第5図は、本発明の実施の形態の情報端末のブロック図である。
第6図は、本発明の実施の形態のコンテンツサーバに格納されるイベント情報の構成図である。
第7図は、本発明の実施の形態のコンテンツサーバに格納される配付資料情報の構成図である。
第8図は、本発明の実施の形態のデジタルペンが紙面上の座標取得の説明図である。
第9図は、本発明の実施の形態デジタルペンによって情報が書き込まれた書類の説明図である。
第10図Aは、本発明の実施の形態のストロークセットの一例を示す。
第10図Bは、本発明の実施の形態のコンテンツサーバに格納されるストロークセット情報の構成図である。
第10図Cは、本発明の実施の形態のコンテンツサーバに格納されるストローク座標情報の構成図である。
第11図は、本発明の実施の形態のコンテンツサーバに格納されるユーザ情報の構成図である。
第12図は、本発明の実施の形態の検索処理の全体を示すフローチャートである。
第13図は、本発明の実施の形態のストロークセットフィルタリング処理のフローチャートである。
第14図は、本発明の実施の形態のストロークセット集計処理のフローチャートである。
第15図は、本発明の実施の形態の二次元マップ表示処理のフローチャートである。
第16図は、本発明の実施の形態の二次元マップ表示処理のフローチャートである。
第17図は、本発明の実施の形態の統計グラフ表示処理のフローチャートである。
第18図は、本発明の実施の形態の共起統計グラフ表示処理のフローチャートである。
第19図は、本発明の実施の形態のセキュリティチェック処理のフローチャートである。
FIG. 1 is a conceptual diagram of processing of the document management system according to the embodiment of this invention.
FIG. 2 is an explanatory diagram of a screen displayed on the information terminal according to the embodiment of this invention.
FIG. 3 is a block diagram of the configuration of the document management system according to the embodiment of the present invention.
FIG. 4 is a block diagram of the content server according to the embodiment of this invention.
FIG. 5 is a block diagram of the information terminal according to the embodiment of this invention.
FIG. 6 is a configuration diagram of event information stored in the content server according to the embodiment of this invention.
FIG. 7 is a configuration diagram of distribution material information stored in the content server according to the embodiment of this invention.
FIG. 8 is an explanatory diagram of coordinate acquisition on the paper surface by the digital pen according to the embodiment of the present invention.
FIG. 9 is an explanatory diagram of a document on which information is written by the digital pen according to the embodiment of the present invention.
FIG. 10A shows an example of a stroke set according to the embodiment of the present invention.
FIG. 10B is a configuration diagram of stroke set information stored in the content server according to the embodiment of this invention.
FIG. 10C is a configuration diagram of stroke coordinate information stored in the content server according to the embodiment of this invention.
FIG. 11 is a configuration diagram of user information stored in the content server according to the embodiment of this invention.
FIG. 12 is a flowchart showing the entire search process according to the embodiment of the present invention.
FIG. 13 is a flowchart of stroke set filtering processing according to the embodiment of this invention.
FIG. 14 is a flowchart of stroke set totaling processing according to the embodiment of this invention.
FIG. 15 is a flowchart of the two-dimensional map display process according to the embodiment of the present invention.
FIG. 16 is a flowchart of the two-dimensional map display process according to the embodiment of the present invention.
FIG. 17 is a flowchart of statistical graph display processing according to the embodiment of the present invention.
FIG. 18 is a flowchart of co-occurrence statistical graph display processing according to the embodiment of this invention.
FIG. 19 is a flowchart of security check processing according to the embodiment of this invention.

本発明の実施の形態について図面を参照して説明する。
第1図は、本発明の実施の形態の書類管理システムの処理の概念図である。
始めに、情報蓄積フェイズの処理を説明する。情報蓄積フェイズは、主に会議中に実行され、コンテンツサーバが会議の情報を蓄積する。
まず、イベント(会議等)が開催されると、会議室に設置されたカメラがイベントの映像を記録する。コンテンツサーバは、カメラが撮影したイベントの映像をネットワークを介して収集し、このイベントの映像を保存する(1)。会議の出席者(デジタルペンのユーザ)は、会議中に配付資料(又は、持参のノート)に会議の内容に関連するメモ等をデジタルペンを用いて記入する(1’)。
デジタルペンは、ユーザが使用する情報端末と接続し、会議中に筆記されたストローク情報を情報端末に転送する(2)。なお、デジタルペンから情報端末へのストローク情報の転送は、会議中ではなく、会議の終了後でもよい。
情報端末は、デジタルペンからストローク情報を受信すると、このストローク情報をコンテンツサーバに送信する。コンテンツサーバは、手書き文字のストローク情報を蓄積する(3)。
次は、情報アクセスフェイズの処理を説明する。情報アクセスフェイズは、会議終了後に実行され、コンテンツサーバが、ユーザが必要とする情報を提供する。
ユーザは、会議終了後デジタルペンを用いて、配付資料上(又は、自己のノート上)のアノテーションを選択して、当該アノテーションに関連する電子情報を要求する(4)。デジタルペンは、ユーザが使用する情報端末と接続し、選択されたアノテーションの位置(ユーザがデジタルペンで指定した位置)を情報端末に転送する。
情報端末は、ユーザがデジタルペンで選択した位置をコンテンツサーバに送信し、指定された位置のアノテーションの検索を要求する(5)。
コンテンツサーバは、アノテーションの検索要求を受けると、当該アノテーションの記入者及び記入時刻を用いて、当該アノテーションに関連する電子情報(例えば、イベント中に録画された映像)を検索する(6)。このとき、電子情報を要求したユーザが検索された電子情報を視聴する権原を有しているかを判定してもよい。
そして、コンテンツサーバは、検索された映像、音声、配布資料の電子データ、アノテーション情報等を要求元である情報端末に送信する(7)。
そして、情報端末は、コンテンツサーバから送信された電子情報を表示する。
本発明によると、ユーザはアノテーションを選択することによって、当該アノテーションに関連する電子情報を得ることができる。
第2図は、本発明の実施の形態の情報端末12に表示される画面の説明図である。
表示画面には、メディア表示部300、書類表示部320、二次元マップ表示部340及びグラフ表示部360が含まれる。
この表示画面は、情報端末12にて動作しているソフトウェアによって実現されるコンテンツビューアによって構成される。このコンテンツビューアは、ユーザがコンテンツサーバ11から送られてきたコンテンツを視聴するときに動作する。
メディア表示部300は、表示領域302を有する。表示領域302には、コンテンツサーバ11から送られてきたコンテンツ(主に、映像ファイル)が表示される。
表示領域302の上部には、ファイル名表示部301が設けられている。ファイル名表示部301には、再生中の映像のファイル名が表示される。
表示領域302の下部には、プログレスバー303が設けられている。プログレスバー303には、プログレスマーカ304が設けられている。プログレスマーカ304はプログレスバー303中を移動し、再生される映像の進行状態を表す。また、ユーザがプログレスマーカ304を移動することによって、視聴箇所を変更することができる。
プログレスバー303の下には、OPENボタン305、ボリュームバー310、早送りボタン309、巻戻しボタン308、停止ボタン307及び再生ボタン306が設けられている。OPENボタン305は、再生するファイルの選択画面を開くためのものである。
書類表示部320は、表示領域322を有する。表示領域322には、コンテンツサーバ11から送られてきた書類が表示される。表示領域322に表示される書類中には、当該書類に付されたアノテーション(ストロークセット)が表示される。
表示領域322内には、マーカ323が表示される。マーカ323は現在指定されているストロークセットを示す。書類表示部320ではアノテーションを直接選択できる。アノテーション(注目ストロークセット)が選択されると、注目部346、366が移動する。
表示領域322の上部には、書類名表示部321が設けられている。書類名表示部321には、表示中の書類のファイル名が表示される。
表示領域302の右部には、プログレスバー324が設けられている。プログレスバー324には、プログレスマーカ325が設けられている。プログレスマーカ325はプログレスバー324中を移動し、表示される書類のファイル内における位置を表す。プログレスマーカ325は、メディア表示部300のプログレスマーカ304と連動している。また、ユーザがプログレスマーカ325を移動することによって、表示箇所を変更することができる。
表示領域302の右部(プログレスバー324の右)には、書類を前頁に戻す前頁ボタン327、及び書類を次頁に送る次頁ボタン328が設けられている。前頁ボタン327及び次頁ボタン328は、該当頁の内容が縮小表示されている。
また、次頁ボタン328の下部には、表示する書類ファイルの選択画面を開くOPENボタン326が設けられている。
表示領域341の上部には、横軸選択欄342が設けられている。ユーザは、横軸選択欄342によって、二次元マップの横軸の単位を選択することができる。例えば、図示の状態では横軸は時間であるが、二次元マップの横軸を書類中の文字数(又は、行数)に変更して、二次元マップを表示することができる。このとき、ストロークセット情報の該当矩形座標244を用いて、文書中の適切な箇所を計算する。例えば、矩形の重心と一番近い座標の文字をストロークセットの位置としてもよい。
なお、図示の状態では横軸に時間が選択されているので、表示領域341の上部には、二次元マップの横軸のスケールが表示されている。
表示領域341の最上段には、キーストロークセット表示領域343が設けられている。キーストロークセット表示領域343には、ストロークセットの保有者(書類表示部320にて指定されているアノテーションの記入者)によって記入されたアノテーション(ストロークセット)の情報が表示される。
二次元マップ表示部340で、他人のアノテーションを指定すると、指定された人がキーストロークセット表示領域343に移動する。ストロークセットの保有者の表示順も、新たにキーとなった人に近い順に変化する。
キーストロークセット表示領域343の下部には、他のストロークセットが、ストロークセットの所有者(ストロークセットの記入者)毎に分類されて表示される。
表示領域341の左部には、ストロークセットの所有者、及び当該所有者のストロークセットとキーストロークセットとの類似度が表示される。
ストロークセットの所有者は、上から(表示領域341に近い段から)類似度順に表示される。また、ストロークセットの所有者は、匿名で表示される場合がある。すなわち、後述するストロークセット情報の公開制限情報249A、249Bの4桁目によって匿名公開(1)が設定されている場合には、ストロークセットの所有者名を匿名化して表示される。
ストロークセットの類似度は、キーストロークセットと当該所有者のストロークセットとキーストロークセットの重複を判定して求める(二次元マップ表示処理の重複判定処理(第16図のS145)参照)。
二次元マップ表示部340は、表示領域341を有する。表示領域341には、当該イベントに関連した書類に付されたアノテーション(ストロークセット)が記入された時間が表示される。
表示領域341内には、ストロークセットの記入時間に対応したストロークセット表示344が表示される。
また、表示領域341内には、プログレスマーカ345が設けられている。プログレスマーカ345は表示領域341中を移動し、再生される映像の進行状態を表す。プログレスマーカ345は、メディア表示部300のプログレスマーカ304及び書類表示部320のプログレスマーカ324と連動している。
さらに、表示領域341内には、注目部346が設けられている。注目部346は、指定されたアノテーションを示す。この注目部346によって、指定されたアノテーションと、他のアノテーションとの関係が容易に把握できる。なお、複数のストロークセットが指定されている場合は、複数の注目部346が表示される。注目部346は、二次元マップ表示部340でも、直接指定することができる。
グラフ表示部360は、表示領域361を有する。表示領域361には、統計グラフ又は共起統計グラフが表示される。統計グラフは、全ての者が保有するストロークセットの記入時間を集計したヒストグラムであり、その時刻に何人がアノテーションを記入していたかを示す。共起統計グラフは、注目部346、366と略同一の時刻(同じ時刻及び近い時刻)にアノテーションを記入していた者が保有するストロークセットの記入時間を集計したヒストグラムである。図示の状態では、共起統計グラフは、A、匿名1及びDの3者のアノテーションのみ集計したものであり、その時刻に3者のうち何人がアノテーションを記入していたかを示す。
なお、後述するように、統計グラフは、所有ユーザ情報が隠されているユーザが保有するストロークセットも集計の対象としている。一方、共起統計グラフは、所有ユーザが隠されているユーザが保有するストロークセットは集計の対象としていない。
グラフ表示部360の上部には、統計グラフと共起統計グラフとの選択領域が設けられている。”全体”362が選択されると、表示領域361に統計グラフが表示され、”共起”363が選択されると、表示領域361に共起統計グラフが表示される。
表示領域361の下部には、統計グラフの横軸のスケールが表示されている。
表示領域361内には、頻度分布364が表示される。頻度分布364は、その時刻に何人がアノテーションを記入していたかを示す。
また、表示領域361内には、プログレスマーカ365が設けられている。プログレスマーカ365は表示領域361中を移動し、再生される映像の進行状態を表す。プログレスマーカ365は、メディア表示部300のプログレスマーカ304及び書類表示部320のプログレスマーカ324と連動している。
また、表示領域361内には、注目部366が設けられている。注目部366は、指定されたアノテーションの記入時刻を示す。この注目部366によって、指定されたアノテーションと、他のアノテーションとの関係が容易に把握できる。なお、複数のストロークセットが指定されている場合は、複数の注目部366が表示される。
注目部366は、二次元マップ表示部340でも、直接指定することができる。注目部が変化すると、注目部346、366と略同一の時刻にアノテーションを記入していた者が変化するので、共起統計グラフが変化する。
さらに、表示領域361内には、公開者数及び非公開者数367が表示される。前述したように、統計グラフは、所有ユーザ情報が隠されているユーザが保有するストロークセットも集計の対象としている。
以上説明したメディア表示部300のプログレスマーカ304、書類表示部320のプログレスマーカ325、二次元マップ表示部340のプログレスマーカ345、グラフ表示部360のプログレスマーカ365は全て連動している。
第3図は、本発明の実施の形態の書類管理システムのブロック図である。
書類管理システムは、コンテンツサーバ11、情報端末12、デジタルペン14、イベント情報入力装置15、ネットワーク17及び位置情報サーバ19を備える。
コンテンツサーバ11、情報端末12、イベント情報入力装置15及び位置情報サーバ19は、ネットワーク17を介して互いに接続されている。各情報端末12は、一つ以上のデジタルペン14と接続される。情報端末12とデジタルペン14は、USB(Universal Serial Bus)等のプロトコルを用い有線によって接続されてもよい。また、ブルートゥース、無線LAN、携帯電話システム又は赤外線等の無線によって接続されてもよい。
コンテンツサーバ11は、コンテンツをイベント毎に管理し、要求されたコンテンツを情報端末12に送信する。なお、コンテンツは、イベントに関連する書類、音声及び映像等である。また、書類は、印刷され紙面上に表されたすべての情報である。
情報端末12は、各人が使用するコンピュータ装置で、デジタルペン14から受信した情報をコンテンツサーバ11に転送する。また、情報端末12は、コンテンツサーバ11から受信したコンテンツを表示する。
デジタルペン14は、通常のペンと同様に、紙媒体に文字、図形等を記入することができる。また、デジタルペン14は、先端に小型カメラを備え、紙に接した位置のドットパターンを取得する。また、デジタルペン14は、予め設定されたペンIDを保持する。デジタルペン14は、有線又は無線によって情報端末12と接続する通信インターフェースを備える。
例えば、第8図に示すように、デジタルペン14は、書類に印刷されたドットパターンを取得する。そして、デジタルペン14が取得したドットパターンから紙面上の座標を特定することができる。
また、デジタルペン14は、情報端末12を介さず、携帯電話システム又は無線LANシステムを介して、特定した絶対座標、ドットパターンを取得した時刻及びペンIDをコンテンツサーバ11に送信してもよい。
イベント情報入力装置15は、会議室に設置されたコンピュータ装置で、イベントに関連する情報(例えば、映像、画像、音声及び/又はスライド等)を作成する。また、イベント情報入力装置15は、書類及び作成した映像等のコンテンツを、イベントに関連付けてコンテンツサーバ11に登録する。
また、イベント情報入力装置15は、会議開催中に、デジタルペン14と接続して、デジタルペン14が特定した絶対座標等の情報を取得し、これら取得した情報をコンテンツサーバ11に送信してもよい。
位置情報サーバは19は、CPU、メモリ、記憶装置等を備えたコンピュータ装置であり、紙面上のドットパターンの基準点からのズレ量と紙面上の座標とを対応づけたデータベースを保持している。そして、位置情報サーバは19は、紙面上のドットパターンに基づいて、紙面上の座標を提供する。
なお、本実施の形態の書類管理システムにプリンタを設けてもよい。プリンタは、情報端末12からの指示に応じて、書類等のコンテンツを印刷する。
第4図は、本発明の実施の形態のコンテンツサーバ11のブロック図である。
コンテンツサーバ11は、CPU111、メモリ112、記憶部113及びデータ通信部118を備える。
CPU111は、記憶部113に記憶された各種プログラムを呼び出して実行することによって、各種処理を行う。
メモリ112は、CPU111が各種処理に使用するデータを一時的に記憶するワークエリアを有する。
記憶部113は、不揮発の記憶媒体(例えば、磁気ディスクドライブ)で構成されている。記憶部113には、イベント管理プログラム114、書類管理プログラム115、ペンデータ管理プログラム116及びユーザ管理プログラム117が記憶されている。これらのプログラムは、メモリ112にロードされた後、CPU111によって実行され、各種処理が行われる。
また、記憶部113には、イベント情報21、配付資料情報22、ストロークセット情報24及びユーザ情報27が記憶されている。
イベント管理プログラム114は、イベント情報21(第6図)を管理する。書類管理プログラム115は、配付資料情報22(第7図)を管理する。ペンデータ管理プログラム116は、ストローク情報24(第10図B)を管理する。ユーザ管理プログラム117は、ユーザ情報27(第11図)を管理する。
データ通信部118は、ネットワークインターフェースである。例えば、TCP/IPプロトコルを用いて通信可能なLANカードである。これにより、コンテンツサーバ11は情報端末12等のネットワーク17に接続された機器と通信することができる。
第5図は、本発明の実施の形態の情報端末12のブロック図である。
情報端末12は、CPU121、メモリ122、ペンデータ入力部123、操作入力部124、データ表示部125、データ通信部126及びデータ集計部127を備える。
CPU121は、記憶装置(図示省略)に記憶された各種プログラムを呼び出して実行することによって、各種処理を行う。
メモリ122は、CPU111が各種処理に使用するデータを一時的に記憶するワークエリアを有する。また、コンテンツサーバ11及びデジタルペン14等から送られてきたデータを一時的に記憶する。
ペン入力部123は、有線又は無線でデジタルペン14と通信し、デジタルペン14が取得した座標等の情報を収集する。
操作入力部124は、例えば、キーボードであり、ユーザによって情報が入力される。
データ表示部125は、例えば、液晶ディスプレイで構成されており、コンテンツサーバ11から取得した書類等のコンテンツを表示する。
データ通信部126は、ネットワークインターフェースである。例えば、TCP/IPプロトコルを用いて通信可能なLANカードである。これにより、情報端末12はネットワーク17を介してコンテンツサーバ11と通信することができる。
なお、ペンデータ入力部123及びデータ通信部126は、一つのインターフェースであってもよい。
データ集計部127は、ストロークセット情報24を集計し、二次元マップや統計グラフを生成する。
次に本発明の実施の形態のイベント情報入力装置15について説明する。
イベント情報入力装置15は、CPU、メモリ、操作記録部、映像入力部、音声入力部、データ表示部、ペンデータ入力部及びデータ通信部を備える。
CPUは、記憶装置(図示省略)に記憶された各種プログラムを呼び出して実行することによって、各種処理を行う。
メモリは、CPUが各種処理に使用するデータを一時的に記憶するワークエリアを有する。また、コンテンツサーバ11及びデジタルペン14等から送られてきたデータを一時的に記憶する。
操作記録部は、会議中における、この書類管理システムに対する操作を記録する。例えば、発表者によるキーボードへの操作(会議中に用いられた映像の巻き戻し、早送り等の操作)を記録する。
映像入力部は、会議室に設置されたカメラによって会議中に撮影された映像データを収集する。
音声入力部は、会議室に設置されたマイクロホンによって会議中に録音された音声データを収集する。
データ表示部は、会議室に設置されたプロジェクタ等の大画面の表示装置で構成されており、会議中に使用されるデータを表示する。例えば、発表者が用いるプレゼンテーション資料や、コンテンツサーバ11から取得した書類等を表示する。
ペンデータ入力部は、有線又は無線でデジタルペン14と通信し、デジタルペン14が取得した座標等の情報を収集する。
データ通信部は、ネットワークインターフェースである。例えば、TCP/IPプロトコルを用いて通信可能なLANカードである。これにより、イベント情報入力装置15は、ネットワーク17を介してコンテンツサーバ11と通信することができる。
第6図は、本発明の実施の形態のコンテンツサーバ11に格納されるイベント情報21の構成図である。
イベント情報21は、イベントID210、イベント名211、日時212、場所213、出席者数214A、出席者214B、付加情報数217A及び付加情報217Bを含む。イベント情報21は、会議等のイベントが行われる毎に一つのレコードが生成される。イベント情報21は、任意の項目をキーとして検索ができる。
イベントID210は、イベントを一意に識別する識別子である。例えば、イベント管理プログラム114は、任意の法則に従って自動的にイベントID210を定めて、イベント情報21に記録する。
イベント名211は、当該イベントの名称である。
日時212は、当該イベントの開始時刻及び終了時刻である。
場所213は、当該イベントが行われた場所である。
出席者数214Aは、当該イベントへの出席者の数である。なお、出席者数214Aと同数の出席者214Bが記録される。
出席者214Bは、当該イベントの出席者を一意に識別するユーザIDである。
付加情報数217Aは、当該イベントに関連する付加情報の数である。なお、付加情報数217Aと同数の付加情報217Bが記録される。
付加情報217Bは、当該イベントに関連する映像、画像、音声又はスライド等の情報である。具体的には、付加情報217Bには、当該イベントを撮影した映像データ、当該イベントを録音した音声データ、及び当該イベントで使用されたスライド等の情報が記録される。付加情報217Bには、付加情報の種類、付加情報のファイル名及び付加情報に設定されたコンテンツセキュリティが記録される
また、付加情報217Bには、各付加情報のセキュリティレベルが含まれる。付加情報のセキュリティレベルは、当該付加情報の秘密の度合いである。後述するように、付加情報のセキュリティレベル226及びユーザのセキュリティレベル276(第11図参照)によって、そのユーザが当該書付加情報にアクセスできるかが定まる。
第7図は、本発明の実施の形態のコンテンツサーバ11に格納される配付資料情報22の構成図である。
配付資料情報22は、書類ID220、ドットパターンID221、所有ユーザID222、イベントID223、電子ファイル224、書類サイズ225、セキュリティレベル226、ストロークセット数227及びストロークセットID228を含む。配付資料情報22は、任意の項目をキーとして検索ができる。
書類ID220は、当該書類を一意に識別する識別子である。なお、同一の情報を有する書類であっても、所有者が異なれば別の書類となるので、異なる書類ID220となり、配付資料情報22の異なるレコードが生成される。通常、異なるユーザに配付される書類は、異なるドットパターンと共に印刷された後に配付される。
ドットパターンID221は、当該書類に印刷されるドットパターンの識別子である。
所有ユーザID222は、当該書類を所有するユーザを一意に識別する識別子である。
イベントID223は、当該書類が関連付けられたイベントを一意に識別する識別子である。通常は、当該書類が配付された会議のイベントIDが記録され、イベント情報21のイベントID210に対応する。
電子ファイル224は、当該書類の電子データのファイル名である。
書類サイズ225は、当該書類の印刷に適する紙の大きさを示し、その領域の左上端の座標及び右下端の座標が格納される。図示の場合では、書類サイズ225は、左上端を原点とし、ミリメートルを単位として表される。
セキュリティレベル226は、当該書類の秘密の度合いである。後述するように、セキュリティレベル226及びユーザのセキュリティレベル276(第11図参照)によって、そのユーザが当該書類を見ることができるかが定まる。
ストロークセット数227は、当該書類にデジタルペン14で記載されたストロークセットの数である。なお、ストロークセット数227と同数のストロークセットID228が記録される。
ストロークセットは、一纏まりとする線(ストローク)のグループであり、例えば、文字認識におけるレイアウト解析を用いて求められる。レイアウト解析では、線が記入された時間及び/又は線同士の位置関係に基づいて、一纏まりの線を特定し、ストロークセットを求める。すなわち、近い時間に近い位置に記入されたストロークは一つのストロークセットを構成する。
ストロークセットID228は、当該書類に記載されたストロークセットを一意に識別する識別子であり、ストロークセット情報24(第10図B)へのリンクである。
第8図は、本発明の実施の形態のデジタルペン14による紙面上の座標取得の説明図である。
デジタルペン14は、CPU、メモリ、プロセッサ、通信インターフェース、カメラ141、電池及び筆圧センサを備える。また、デジタルペン14は、インク又は黒鉛により紙面上に文字、記号等を筆記可能なペン先を備える。
デジタルペン14は、位置検出用のドット203が印刷された用紙20と共に用いる。ここで、用紙20の一部201を拡大して、ドット203を説明する。用紙20には、複数の小さなドット203が印刷されている。このドット203は、仮想的な格子線の交点(基準点)202から上下左右にずれた位置に印刷されている。
紙に文字、図形がデジタルペン14で記入されると、その情報は紙に視認可能に残る。デジタルペン14は、ペン先が紙に接したことを筆圧センサが検出すると、カメラ141によって、紙上に印刷されたドット203を撮影する。デジタルペン14は、例えば、6×6個のドット203を含む領域を撮影する。
デジタルペン14は、撮影したドットパターンから、当該ドットパターンが存在する絶対座標を求める。この絶対座標は、広大な平面領域における当該ドットパターンが存在する座標である。この広大な平面領域は、ドットパターンを重複しないように配置できる全領域である。
デジタルペン14は、求めた絶対座標を情報端末12に送信する。情報端末12は、デジタルペン14から送信された絶対座標をコンテンツサーバ11に送信する。
コンテンツサーバ11は、デジタルペン14が求めた絶対座標を位置情報サーバ19に送信する。位置情報サーバ19は、コンテンツサーバ11から送信された絶対座標に基づいて、前記広大な平面領域中の該紙面の位置(ドットパーターンID)と、ある一枚の紙面における座標(相対座標)とを特定し、特定したドットパーターンID及び相対座標をコンテンツサーバ11に送信する。
このようにして、コンテンツサーバ11は、デジタルペン14が撮影したドットパターンから、ドットパーターンID及び相対座標を取得する。
このペン先が接した位置の情報を所定のタイミング(例えば、周期的)で取得することによって、ペン先の動きが分かる。
すなわち、デジタルペン14は、撮影したドットパターンに対応する絶対座標、当該ドットパターンの撮影時刻及びペンIDを情報端末12に送信する。
コンテンツサーバ11は、デジタルペン14が求めた絶対座標に基づいて、位置情報サーバ19から相対座標を取得する。コンテンツサーバ11は、取得した相対座標及びドットパターンが撮影された時刻から、ペン先の軌跡(配付資料情報)を求める。
なお、位置情報サーバ19を別に設けることなく、コンテンツサーバ11に含めてもよい。
また、デジタルペン14は、ドットパターンID及び相対座標を特定するために、位置情報サーバ19を用いなくてもよい。例えば、用紙20に埋め込まれたICタグ又は二次元バーコードから用紙を特定する。さらに、タブレットを用いて用紙上の位置(相対座標)を特定することができる。なお、ミューチップ等を用いる用紙の特定又はタブレットを用いる用紙上の位置の特定のいずれかと、位置情報サーバ19による絶対座標の特定を組み合わせてもよい。このようにすると、書類管理システムがドットパターンID及び相対座標を特定する処理を軽減できる。
第9図は、本発明の実施の形態のコンテンツサーバ11に登録される書類31の説明図であり、デジタルペン14によって情報が記入された状態を示す。
会議において、本図に示すような書類(配付資料)31が配付される。これらの書類31は、それが配付されたイベントと関連付けてコンテンツサーバ11に登録される。
書類31には、書類同士で異なるドットパターンが付されている。すなわち、各書類のコンテンツの印刷時に、書類毎に異なるドットパターンが印刷される。そして、異なるドットパターンを有する書類は、異なる書類ID220を有し、異なるユーザに配付される。
なお、配付資料31は、文書作成ソフト等で電子的に作成された書類であってもよいし、手書きの書類を電子化したものであってもよい。
ユーザは、イベント中に(又は、イベント終了後に)、デジタルペン14で書類31に情報(文字、記号等)311を記入する。すると、デジタルペン14は、文字等が記入された位置(ペン先が接した位置)の絶対座標及びその絶対座標を測定した時刻を定期的に取得する。次に、デジタルペン14は、取得した絶対座標及び取得時刻をコンテンツサーバ11に送信する。
コンテンツサーバ11は、位置情報サーバ18に問い合わせることによって、受信したストローク情報に含まれる絶対座標に対応するドットパターンID及び相対座標を特定し、ドットパターンIDから書類IDを特定する。
そして、コンテンツサーバ11は、特定した相対座標及び測定時刻に基づいて当該記入された情報のストロークを決定し、ストローク座標情報25(第10図C参照)を作成する。そして、特定した書類IDを用いて、新たなストロークセット情報24(第10図B参照)を作成する。
第10図Aは、本発明の実施の形態のストロークセット26の一例を示す。
ストロークセット26は、デジタルペン14によって記入された、第9図に示す「東京」311を示す。本実施の形態では、図に示すように、左上を原点とし、横方向をX軸とし、縦方向をY軸として、ストロークの位置が定められる。
前述したように、ストロークセットは、一纏まりとする線(ストローク)のグループであり、線が記入された時間及び/又は線同士の位置関係に基づいて特定される。
第10図Bは、本発明の実施の形態のコンテンツサーバ11に格納されるストロークセット情報24の構成図である。
なお、この構成図は、第10図Aに示すストロークセット26のストロークセット情報である。
ストロークセット情報24は、ストロークセットID241、ペンID242、イベントID247、書類ID248、記入開始日時243、該当矩形座標244、公開制限情報249A、249B、ストローク数245及びストローク情報246を含む。ストロークセット情報24は、任意の項目をキーとして検索ができる。
ストロークセットID241は、当該ストロークセットを一意に識別する識別子である。
ペンID242は、当該ストロークセットを記入したデジタルペン14の識別子である。
イベントID247は、当該ストロークセットに関連付けられたイベントを一意に識別する識別子である。通常は、当該ストロークセットが記入された書類が配付された会議のイベントIDが記録され、イベント情報21のイベントID210に対応する。
書類ID248は、当該ストロークセットが記入された書類を一意に識別する識別子である。書類ID248は、配付資料情報22の書類ID220に対応する。
記入開始日時243は、当該ストロークセットを記入し始めた日時である。
該当矩形領域244は、当該ストロークセットを含む矩形の領域である。該当矩形領域244は、当該ストロークセットが記入された書類における座標(相対座標)であり、矩形領域の左上端の座標及び右下端の座標で表される。
公開制限情報は、出席者に対する公開制限情報249Aと、非出席者に対する公開制限情報249Bとを含む。出席者と非出席者との公開制限情報を別に定めることによって、ストロークセットに多様なセキュリティを設定することができる。
各公開制限情報249A、249Bは、セキュリティレベル毎に予め複数のパターンが用意されている。本発明では、ユーザのセキュリティレベル276(第11図参照)から公開制限情報を定めるので、同じユーザが記入したストロークセットは全て同じ公開制限情報が設定される。なお、公開制限情報をストロークセット毎に定めてもよい。
公開制限情報249A、249Bは、例えば、第10図Bに示すような4桁のコードで定義することができる。このコードの下位から4桁目(最上位桁)は、ストロークセットの所有ユーザの情報を公開するか否かを示す。具体的には、所有ユーザ情報を公開するか(2)、匿名化して公開するか(1)、公開しないか(0)を示す。
また、下位から3桁目は、記入開始日時を公開するか(1)、公開しないか(0)を示す。また、下位から2桁目は、該当矩形座標を公開するか(1)、公開しないか(0)を示す。また、下位から1桁目(最下位桁)は、ストローク情報を公開するか(1)、公開しないか(0)を示す。
ストローク数245は、当該ストロークセットに含まれる線(ストローク)の数である。なお、ストローク数245と同数のストローク情報246が記録される。
ストローク情報246は、標本点数246A及びシリアル番号246Bを含む。
標本点数246Aは、デジタルペン14によって取得された、当該ストロークを構成する相対座標の数である。
シリアル番号246Bは、デジタルペン14によって取得された、当該ストロークを構成する相対座標を一意に識別する識別子であり、ストローク座標情報25(第10図C)へのリンクである。
第10図Cは、本発明の実施の形態のコンテンツサーバ11に格納されるストローク座標情報25の構成図である。
ストローク座標情報25は、シリアル番号251、X座標252、Y座標253及び取得時刻254を含む。
シリアル番号251は、デジタルペン14によって取得された相対座標を一意に識別する識別子である。
X座標252は、第10図Aに示すX軸方向の相対座標であり、例えば、ミリメートルを単位として表す。
Y座標253は、第10図Aに示すY軸方向の相対座標であり、例えばミリメートルを単位として表す。
取得時刻254は、デジタルペン14によって当該相対座標が取得された時刻を表す。なお、本説明図では、取得時刻254には、記入開始時刻242からの経過時間が記録されている。
第11図は、本発明の実施の形態のコンテンツサーバ11に格納されるユーザ情報27の構成図である。
ユーザ情報27は、ユーザID271、氏名272、所属273、役職274、保有ペンID275及びセキュリティレベル276を含む。ユーザ情報27は、任意の項目をキーとして検索ができる。
ユーザID271は、当該ユーザを一意に識別する識別子である。
氏名272は、当該ユーザの氏名である。
所属273は、当該ユーザの所属する部署である。
役職274は、当該ユーザの役職である。
保有ペンID275は、当該ユーザが保有するデジタルペン14の一意な識別子である。
セキュリティレベル276は、当該ユーザの秘密書類にアクセスする権限である。後述するように、ユーザのセキュリティレベル276及び書類のセキュリティレベル226(第7図参照)によって、そのユーザが当該書類を見ることができるかが定まる。
セキュリティレベル276は、予め複数のパターンが用意されている。セキュリティレベル276は、そのパターンを指定する。例えば、レベル3は、会議参加者には全情報を公開するが、非参加者には匿名化して公開する。さらに、メディア情報に関しては、参加者・非参加者を問わず公開することを意味する。
次に、本発明の実施の形態の書類管理システムの処理を説明する。
第12図は、本発明の実施の形態の検索処理の全体を示すフローチャートである。
本実施の形態では、検索者がアノテーションを指定すると、そのアノテーションに関連するアノテーションを検索し、検索されたアノテーションを集計して表示する。
ユーザは、ストロークセット指定する(1001)。すなわち、ユーザは、デジタルペン14を用いて、検索のキーとなるストロークセットが記入された書類上の位置を指定する。デジタルペン14は、指定された位置の絶対座標を求める。デジタルペン14は、求めた絶対座標及びペンIDを情報端末12のペンデータ入力部123に送信する。
なお、ユーザが、マウス等によって、情報端末12のデータ表示部125に表示された文書上で、当該文書に付されたアノテーションを指定してもよい。
このとき指定されたアノテーションが注目ストロークセットとなる。なお本実施の形態では、アノテーションとストロークセットは同じものを意味する。
また、ユーザは、検索対象の書類を指定する(1002)。すなわち、ユーザは、操作入力部124を操作し、検索対象の書類ID及び検索者IDを入力する。
また、ユーザは、検索対象のメディア(付加情報)を指定する(1003)。すなわち、ユーザは、操作入力部124を操作し、検索対象の付加情報及び検索者IDを入力する。
コンテンツサーバ11は、情報端末12から検索要求を受けると、検索要求に係る書類、イベント及びストロークセットを検索する(1011〜1016)。
まず、コンテンツサーバ11は、デジタルペン14が求めた絶対座標を位置情報サーバ19に送信する。位置情報サーバ19は、コンテンツサーバ11から送信された絶対座標に基づいて、前記広大な平面領域中の該紙面の位置(ドットパーターンID)と、ある一枚の紙面における座標(相対座標)とを特定し、特定したドットパーターンID及び相対座標をコンテンツサーバ11に送信する。
次に、コンテンツサーバ(書類管理プログラム115)は、情報端末12から送信された情報に基づいて、書類(配付資料等のイベントに関連付けられた書類)を検索する(1011)。例えば、デジタルペンによって指定された位置からドットパターンIDを特定し、特定されたドットパターンID221に対応する書類ID220を特定する。また、特定された書類に関連するイベント(イベントID223)を特定する。
そして、特定された書類のセキュリティレベルをチェックする(1012)。このセキュリティチェック処理は、第19図にて後述する。
そして、特定された書類の電子ファイルと、当該書類に付されているストロークセットID228を特定する。ここで特定されたストロークセットIDの集合がキーストロークセット集合となる(例えば、第14図の”K”)。
次に、キーストロークセット集合に含まれる各ストロークセットIDによってストロークセット情報24を特定し、ストロークセットフィルタリング(第13図にて後述)を行う。これによって、キーストロークセット集合に含まれるストロークセットの詳細情報を得ることができる。
また、キーストロークセット集合に含まれる各ストロークセットの中から、注目ストロークセットを特定する。すなわち、ユーザが指定した位置(注目ストロークセットの位置)によって、キーストロークセット集合に含まれるストロークセット情報を検索して、注目ストロークセットを特定する。
コンテンツサーバ11は、以上の処理で得られた情報を情報端末12に送信する。情報端末12は、受信した情報をデータ表示部125に表示する(1004)。具体的には、書類表示部320が表示され、二次元マップ表示部340のキーストロークセット表示領域343が表示される。
次に、イベント管理プログラム114は、先に特定されたイベントID223によって、イベントの詳細情報を取得する。本実施の形態では、日時212、出席者214B、付加情報217Bを取得する。
そして、取得した付加情報のセキュリティレベルをチェックする(1014)。このセキュリティチェック処理1014は、1012の処理と同じで、第19図にて後述する。
コンテンツサーバ11は、以上の処理で得られた付加情報のファイルを情報端末12に送信する。情報端末12は、受信した付加情報のファイルをデータ表示部125に表示する(1005)。具体的には、メディア表示部300に、受信したコンテンツが表示される。このとき、注目ストロークセットの記入開始日時243を用いてコンテンツの頭出しをして、コンテンツがこの時刻から再生できるようにする。
次に、ペンデータ管理プログラム116は、先に特定されたイベントID223によってストロークセット情報を検索する(1015)。そして、当該イベントに関連する全てのストロークセットの識別子(ストロークセットID241)を特定する。そして、特定されたストロークセットID241のストロークセット情報24を取得する。ここで特定されたストロークセットIDの集合が集計対象ストロークセット集合となる(例えば、第14図の”A”)。
そして、特定されたストロークセットの公開レベルを判定するストロークセットフィルタリング処理を行う(1016)。ストロークセットフィルタリング処理によって、そのストロークセットの所有者が公開したくない情報が必要に応じて隠される。すなわち、対応する項目がマスキング(黒ぬり)される。このストロークセットフィルタリング処理1016は、第13図にて後述する。
また、情報端末12は、データ集計部127によって、検索されたストロークセットを集計し、データ表示部125によって、集計されたストロークセットを表示する(1006)。ストロークセット集計処理及びストロークセット表示処理1006は、第14図にて後述する。
また、操作入力部124に再集計指示が入力されると(1008)、処理1006に戻り、ストロークセットを再度集計する(1006)。
具体的には、ユーザは表示された画面上で、他のストロークセットをマウス等で指示することによって、注目ストロークセットを設定することができる。注目ストロークセットが変更されると、データ集計部127は、必要に応じて再計算を行う。そして、データ表示部125は、画面を再表示する。
なお、注目ストロークセットは、現在のキーストロークセット集合から選択することもできるが、それ以外(他の人が所有するストロークセット)から選択することもできる。他人のストロークセットを指定することによって、キーストロークセット集合も再設定される。そして、二次元マップの縦軸の表示順序が変わる。すなわち、指定した人のストロークセットパターンと近い順に並べ変わる。
第13図は、本発明の実施の形態のストロークセットフィルタリング処理のフローチャートであり、コンテンツサーバ11で実行される。
まず、ストロークセットフィルタリング処理には、ストロークセットを選択するためのパラメータが入力される(S101)。具体的には、対象ストロークセット、検索者ID及び出席者が、ストロークセットフィルタリング処理に与えられる。
ストロークセットフィルタリング処理に与えられる対象のストロークセットは、検索の結果、関連があるものとして特定され、集計され、情報端末に表示すべきストロークセットである。また、検索者IDは検索者が書類管理システムにログインするために情報端末12に入力したユーザID271である。
また、出席者は、対象ストロークセットの識別子(ストロークセットID)241が含まれる配付資料情報22を特定し、特定された配付資料情報のイベントID223を特定し、特定したイベント情報に含まれる出席者214Bである。
次に、検索者のユーザID271が出席者214Bに含まれるか否かを判定する(S102)。
判定の結果、検索者のユーザID271が出席者214Bに含まれていれば、検索者は出席者であると判定し、出席者用の公開制限情報249Aを適用する(S103)。一方、検索者のユーザID271が出席者214Bに含まれていなければ、検索者は出席者ではないと判定し、非出席者用の公開制限情報249Bを適用する(S104)。
次に、公開制限情報249A、249Bの下位から4桁目(最上位桁)によって当該ストロークセットの所有ユーザの情報を公開するか否かを判定する(S105)。
判定の結果、公開制限情報の4桁目が”1”であれば、所有ユーザのユーザIDを匿名化して公開する(S106)。また、公開制限情報の4桁目が”0”であれば、所有ユーザを公開しないので、ユーザIDを隠す(S107)。つまり、ユーザIDを黒ぬりする。また、公開制限情報の4桁目が”2”であれば、所有ユーザ情報を公開してよいので、何も処理をしない。
次に、公開制限情報249A、249Bの下位から3桁目によって当該ストロークセットの記入日時を公開するか否かを判定する(S108)。
判定の結果、公開制限情報の3桁目が”0”であれば、記入開始日時を公開しないので、記入開始日時を隠す(S109)。また、公開制限情報の3桁目が”1”であれば、記入開始日時を公開してよいので、何も処理をしない。
次に、公開制限情報249A、249Bの下位から2桁目によって当該ストロークセットの記入位置を公開するか否かを判定する(S110)。
判定の結果、公開制限情報の2桁目が”0”であれば、記入位置を公開しないので、該当矩形座標を隠す(S111)。また、公開制限情報の2桁目が”1”であれば、記入位置を公開してよいので、何も処理をしない。
次に、公開制限情報249A、249Bの下位から1桁目(最下位桁)によって当該ストロークセットの記入位置を公開するか否かを判定する(S112)。
判定の結果、公開制限情報の1桁目が”0”であれば、ストローク情報を公開しないので、このストロークセット情報を集計対象から除外する(S113)。また、公開制限情報の1桁目が”1”であれば、ストロークセットを公開してよいので、何も処理をしない。
このようにして、ストロークセットフィルタリング処理(第13図)では、公開制限情報を用いて、集計対象のストロークセットの情報をどの範囲まで公開するかを判定する。
第14図は、本発明の実施の形態のストロークセット集計処理及びストロークセット表示処理のフローチャートであり、情報端末12で実行される。
まず、ストロークセット集計処理には、ストロークセットを集計するためのストロークセットの集合が設定される(S121)。具体的には、集合Kにキーストロークセット集合が、集合Fに注目ストロークセット集合が、集合Aに集計対象ストロークセット集合が設定される。
キーストロークセット集合(集合K)は、指定した文書に含まれる全ストロークセットのうち、セキュリティ条件を満たすもの(ストロークセットフィルタリング処理を通過したもの)である。また、注目ストロークセット集合(集合F)は、検索キーとして指定されたストロークセットであり、キーストロークセットに含まれる。また、集計対象ストロークセット集合(集合A)は、指定した文書が配布された会議に出席した全ユーザが記入した全ストロークセットのうち、セキュリティ条件を満たすもの(ストロークセットフィルタリング処理を通過したもの)である。
次に、第1ループを開始する(S122)。この第1ループでは、集合A又は集合Kに含まれる各ストロークセット(すなわち、集計対象ストロークセット集合又はキーストロークセット集合に属する各ストロークセット)について、順に集計する。そのため、このループで集計するストロークセットをaに設定する。
そして、第1ループ内では、当該ストロークセットの公開制限情報249A、249Bの下位から4桁目(最上位桁)によって、所有ユーザのユーザIDが隠されているか否かを判定する(S123)。所有ユーザが隠されていなければ、二次元マップ表示用ストロークセット集合に集計対象のストロークセットaを加える(S124)。
一方、所有ユーザが隠されていれば、二次元マップ表示用ストロークセット集合には集計対象のストロークセットaを加えない。
その後、いずれの場合も、統計グラフ表示用ストロークセット集合に集計対象のストロークセットaを加える(S125)。
このように、所有ユーザIDが隠されている場合には、当該ストロークセットは統計グラフにのみ集計される。また、所有ユーザIDが隠されていない場合には、当該ストロークセットは統計グラフ及び二次元マップに集計される。
そして、集合A又は集合Kに含まれる全てのストロークセットの集計が終了すると、第1ループを終了する(S126)。
その後、二次元マップ表示用ストロークセット集合を用いて二次元マップを表示する(S127)。この二次元マップ表示処理は、第16図にて後述する。また、統計グラフ表示用ストロークセット集合を用いて統計グラフを表示する(S128)。この統計グラフ表示処理は、第17図にて後述する。
その後、注目ストロークセット集合(F)が空か否かを判定する(S129)。その結果、注目ストロークセット集合(F)が空でなければ、共起統計グラフを表示する(S130)。この共起統計グラフ表示処理は、第18図にて後述する。
第16図は、本発明の実施の形態の二次元マップ表示処理のフローチャートであり、情報端末12で実行される。
まず、二次元マップ表示処理には、表示処理を実行するためのストロークセットの集合が設定される(S151)。具体的には、集合Kにキーストロークセット集合が、集合Aに二次元マップ表示用ストロークセット集合が、集合Fに注目ストロークセット集合が設定される。
キーストロークセット集合(集合K)は、指定した文書に含まれる全ストロークセットのうち、セキュリティ条件を満たすもの(ストロークセットフィルタリング処理を通過したもの)である。また、二次元マップ表示用ストロークセット集合(集合A)は、ストロークセット集計処理(第14図)のステップS124で生成された集合である。また、注目ストロークセット集合(集合F)は、検索キーとして指定されたストロークセットであり、キーストロークセットに含まれる。
次に、集合A(二次元マップ表示用ストロークセット集合)に含まれるストロークセット情報24をユーザID242毎にまとめる(S152)。
次に、二次元マップの横軸を設定する(S153)。何を横軸にして二次元マップを表示するかは、ユーザが指定してもよいが、自動的に設定してもよい。例えば、二次元マップの横軸は時間にすることができる。また、二次元マップの横軸は当該文書の先頭からの文字数(又は、行数)にすることができる。
また、横軸は会議の開始時刻から終了時刻の全てを表示してもよく、会議時間の一部を抽出して表示してもよい。例えば、1枚の二次元マップに含まれるストロークセットの数が所定範囲の数になるように、自動的に横軸のスケールを設定してもよい。
さらに、横軸は会議の開始時刻から終了時刻の全てを表示し、ストロークセット表示344を強調して表示してもよい。例えば、会議時間が長い場合は、各ストロークセット表示344が細くなり、見にくくなる。このような場合はストロークセット表示344をデフォルメして表示する。より具体的には、所定の乗数Xを定め、ストロークセット表示344を常に幅をX倍して表示してもよい。また、ストロークセット表示344の幅が10ドット以下になる場合のみ10ドットに拡張して表示してもよい。
次に、集合K(キーストロークセット集合)に含まれるストロークセットを、二次元マップの最上段に表示する(S154)。
次に、二次元マップの縦軸を設定する(S155)。具体的には、集合Kに含まれるストロークセットと横軸方向が重複する度合いが大きい順(例えば、重複している時間が長い順)に、集合A内の所有ユーザIDを並べる。この重複判定は、一方が他方に含まれるような関係を重複と判定してもよい。二つのストロークセットの重複を判定する際は、各ストロークセットに所定の時間(例えば、前後30秒)の幅を加えた後に、重複を判定してもよい。
次に、第3ループを開始する(S156)。この第3ループでは、集合Aに含まれるストロークセットについて、ユーザID毎に処理をする。ここで、ユーザIDは、縦軸の設定(S155)においてキーストロークと近い順に整列化されている。まず、各ユーザID毎にストロークセットの集合を生成する。
そして、第3ループ内では、同じユーザIDのストロークセット集合に含まれる各ストロークセットを同じ段の対応するイベント進行位置に表示する(S157)。その後、次の段の表示に進み、次のユーザIDのストロークセットを処理する(S158)
そして、集合Aに含まれる全てのストロークセットについて、ユーザID毎に処理が終了すると、第3ループを終了する(S159)。
その後、注目ストロークセットに対応する位置を、二次元グラフ上で強調して表示する(S160)。
第17図は、本発明の実施の形態の統計グラフ表示処理のフローチャートであり、情報端末12で実行される。
まず、統計グラフ表示処理には、表示処理を実行するためのストロークセットの集合が設定される(S171)。具体的には、集合Kにキーストロークセット集合が、集合Aに統計グラフ表示用ストロークセット集合が、集合Fに注目ストロークセット集合が設定される。
キーストロークセット集合(集合K)は、指定した文書に含まれる全ストロークセットのうち、セキュリティ条件を満たすもの(ストロークセットフィルタリング処理を通過したもの)である。また、統計グラフ表示用ストロークセット集合(集合A)は、ストロークセット集計処理(第14図)のステップS125で生成された集合である。また、注目ストロークセット集合(集合F)は、検索キーとして指定されたストロークセットであり、キーストロークセットに含まれる。
次に、統計グラフの横軸を設定する(S172)。何を横軸にして統計グラフを表示するかは、ユーザが指定してもよいが、1枚の統計グラフに含まれるストロークセットの数に基づいて(1枚の統計グラフに含まれるストロークセットの数が所定数に近くなるように)、自動的に横軸を設定してもよい。また、横軸は二次元マップと等しくしてもよい。
例えば、統計グラフの横軸は時間にすることができる。また、統計グラフの横軸は当該文書の先頭からの文字数(又は、行数)にすることができる。
次に、集合Aに含まれる各ストロークセットを、設定した横軸で集計し、ヒストグラムを作成する(S173)。このとき、ヒストグラムのビン幅は適宜決定すればよい。例えば、ヒストグラムがなめらかに変化するようにビン幅を決定する。
次に、作成したヒストグラムを表示する(S174)。
その後、注目ストロークセットに対応する位置を、二次元グラフ上で強調して表示する(S175)。
第18図は、本発明の実施の形態の共起統計グラフ表示処理のフローチャートであり、情報端末12で実行される。
まず、共起統計グラフ表示処理には、表示処理を実行するためのストロークセットの集合が設定される(S181)。具体的には、集合Kにキーストロークセット集合が、集合Aに二次元マップ表示用ストロークセット集合が、集合Fに注目ストロークセット集合が設定される。
キーストロークセット集合(集合K)は、指定した文書に含まれる全ストロークセットのうち、セキュリティ条件を満たすもの(ストロークセットフィルタリング処理を通過したもの)である。また、二次元マップ表示用ストロークセット集合(集合A)は、ストロークセット集計処理(第14図)のステップS124で生成された集合である。また、注目ストロークセット集合(集合F)は、検索キーとして指定されたストロークセットであり、キーストロークセットに含まれる。
なお、共起統計グラフ表示処理では、所有ユーザが隠されていない情報のみを用いるので、公開制限情報の4桁目が”2”又は”1”であるストロークセットが含まれる二次元マップ表示用ストロークセット集合を用いる。
次に、共起統計グラフの横軸を設定する(S182)。何を横軸にして共起統計グラフを表示するかは、ユーザが指定してもよいが、1枚の共起統計グラフに含まれるストロークセットの数に基づいて(1枚の共起統計グラフに含まれるストロークセットの数が所定数に近くなるように)、自動的に横軸を設定してもよい。また、横軸は二次元マップと等しくしてもよい。
例えば、共起統計グラフの横軸は時間にすることができる。また、共起統計グラフの横軸は当該文書の先頭からの文字数(又は、行数)にすることができる。
次に、集合Aに含まれる各ストロークセットのうち、集合Fに含まれるストロークセットと重複するものだけを集める。この重複判定は、予め定めた所定の幅の範囲内で重複する関係も重複と判定してもよい。その後、集めたストロークセットを、設定した横軸で集計し、ヒストグラムを作成する(S183)。このとき、ヒストグラムのビン幅は適宜決定すればよい。例えば、ヒストグラムがなめらかに変化するようにビン幅を決定する。
次に、作成したヒストグラムを表示する(S184)。
その後、注目ストロークセットに対応する位置を、共起統計グラフ上で強調して表示する(S185)。
第19図は、本発明の実施の形態のセキュリティチェック処理のフローチャートであり、コンテンツサーバ11で実行される(第12図の1012、1014)。
まず、セキュリティチェック処理には、セキュリティチェックのためのパラメータが入力される(S191)。具体的には、書類または付加情報のセキュリティレベル、検索者ID及び出席者が、セキュリティチェック処理に与えられる。
セキュリティチェック処理に与えられるセキュリティレベルは、検索の結果、関連があるものとして特定された書類又は付加情報に設定されたセキュリティレベルである。また、検索者IDは検索者が書類管理システムにログインするために情報端末12に入力したユーザID271である。
また、出席者は、書類及び対象付加情報によってイベントID223を特定し、特定したイベント情報に含まれる出席者214Bである。
次に、検索者のユーザID271が出席者214Bに含まれるか否かを判定する(S192)。
判定の結果、検索者のユーザID271が出席者214Bに含まれていれば、検索者は出席者であると判定する。そして、セキュリティレベルSが出席者に公開可能なレベルであるか否かを判定する(S193)。
その結果、セキュリティレベルSが出席者に公開可能であれば、当該書類及び/又は付加情報は公開可能であると判定する(S194)。一方、セキュリティレベルSが出席者に公開不可能なレベルであれば、当該書類及び/又は付加情報は非公開であると判定する(S195)。
一方、検索者のユーザID271が出席者214Bに含まれていなければ、検索者は非出席者であると判定する。そして、セキュリティレベルSが非出席者に公開可能なレベルであるか否かを判定する(S196)。
判定の結果、セキュリティレベルSが非出席者に公開可能であれば、当該書類及び/又は付加情報は公開可能であると判定する(S197)。一方、セキュリティレベルSが非出席者に公開不可能なレベルであれば、当該書類及び/又は付加情報は非公開であると判定する(S198)。
このように、本実施の形態のセキュリティチェック処理(第19図)では、出席者と非出席者とで異なるセキュリティレベルを設定して、書類及び/又は付加情報の公開/非公開を制御することができる。
情報端末12で実行される以上の一連の処理は、図15のフローチャートに簡単にまとめることができる。以下、図15に沿って情報端末12での処理をあらためて説明する。
まず、二次元マップ表示処理には、イベントを特定する情報が入力される(S141)。具体的には、ユーザがデジタルペン14で、アノテーション(ストロークセット)の位置を選択する。すると、デジタルペン14は、指定された位置の絶対座標を求める。デジタルペン14は、ペンID及び求めた絶対座標及びペンIDを情報端末12に送信する。情報端末12は、デジタルペン14から絶対座標を取得すると、位置情報サーバ19に問い合わせて、前記広大な平面領域中の該紙面の位置(ドットパーターンID)と、当該紙面における座標(相対座標)とを取得する。
次に、情報端末12は、イベントIDを特定する(S142)。
具体的には、情報端末12は、位置情報サーバ19から取得したドットパーターンIDを、コンテンツサーバ11に送信する。コンテンツサーバ(書類管理プログラム115)は、情報端末12から送信されたドットパターンIDによって配付資料情報22を検索し、ドットパターンID221が一致する書類を特定する。そして、コンテンツサーバ11は、特定した書類に関連付けられたイベントID223を、情報端末12に送信する。
次に、イベント内の全ストロークセットを収集する(S143)。
具体的には、情報端末12は、特定したイベントIDを、コンテンツサーバ11に送信する。コンテンツサーバ(ペンデータ管理プログラム116)は、情報端末12から送信されたイベントIDによってストロークセット情報24を検索し、イベントID247が一致するストロークセットを特定する。そして、コンテンツサーバ11は、特定されたストロークセット情報を、情報端末12に送信する。
ここで、必要であれば、各ストロークセットの作成者が付与しているセキュリティレベルと検索者IDとを照らし合わせて、当該ストロークセットの作成者が公開を制限している情報については、情報が隠蔽、もしくは匿名化されて送信されることもある。常に不特定多数の検索者にストロークセット情報を公開しても構わないのであれば、上記のような処理は不要である。
なお、コンテンツサーバ11が、イベントIDの特定(S142)と、ストロークセットの収集(S143)をまとめて処理してもよい。すなわち、情報端末12は、位置情報サーバ19から取得したドットパーターンIDを送信すると、コンテンツサーバ11からストロークセットを得る。
さらに、コンテンツサーバ11が位置情報サーバ19へ問い合わせるようにしてもよい。すなわち、情報端末12は、デジタルペン14から取得した絶対座標を送信すると、コンテンツサーバ11からストロークセットを得る。
次に、情報端末12は、収集したストロークセット情報をユーザID242によって分類する(S144)。
次に、第2ループを開始する(S145)。この第2ループでは、分類されたストロークセットについて、ユーザID毎に処理をする。
そして、第2ループ内では、同じユーザIDのストロークセット集合に含まれる各ストロークセットを同じ段の対応するイベント進行位置に表示する(S146)。その後、次の段の表示に進み、次のユーザIDのストロークセットを処理する(S147)
そして、集合Aに含まれる全てのストロークセットについて、ユーザID毎に処理が終了すると、第2ループを終了する(S148)。
以上、図15では、デジタルペン14を用いてストロークセットを指定して、イベントを特定する方法について説明したが、他の方法によってイベントを特定することもできる。
第1の変形例として、ユーザが情報端末12の操作入力部124にストロークセットの選択操作を入力する方法がある。
例えば、ユーザは、情報端末12の表示画面の書類表示部(第2図の320)に書類を表示する。なお、この段階では、当該書類に関連するイベントは特定されていない。そして、情報端末の操作入力部(例えば、マウス)を操作して、書類表示部320に表示された書類上のアノテーション(ストロークセット)を選択する。
そして、情報端末12は、当該書類上の指定された位置(相対座標)及び書類IDを、コンテンツサーバ11に送信する。コンテンツサーバ(書類管理プログラム115)は、情報端末12から送信された書類IDによって配付資料情報22を検索し、書類ID220が一致する書類を特定する。そして、コンテンツサーバ11は、特定した書類に関連付けられたイベントID223を、情報端末12に送信する。
また、第2の変形例として、映像ファイル等を直接指定する方法もある。
例えば、ユーザは、情報端末12の表示画面のメディア表示部(第2図の300)にコンテンツを表示する。なお、この段階では、当該コンテンツに関連するイベントは特定されていない。そして、情報端末の操作入力部(例えば、キーボード)を操作して、メディア表示部300に表示されたコンテンツのファイル名を取得する。
そして、情報端末12は、取得したコンテンツのファイル名を、コンテンツサーバ11に送信する。コンテンツサーバ(イベント管理プログラム114)は、情報端末12から送信されたファイル名によってイベント情報21を検索し、ファイル名と付加情報217Bが一致するイベントを特定する。そして、コンテンツサーバ11は、特定したイベントの識別子(イベントID223)を、情報端末12に送信する。
なお、この段階では、キーストロークセットが選択されていないので、キーストロークセット及び書類は表示されない。
以上説明したように、本発明の実施の形態では、コンテンツサーバ11に、イベントに関連する付加情報(アノテーションを付与した時点の映像や音声等のコンテンツ)とへのリンクが設定されている書類に付与されたアノテーションを格納する。そして、特定の者が作成したアノテーションを指定して、関連する付加情報、アノテーションを検索して表示する。
これによって、会議などのイベントにおいて異なる者が作成したアノテーションを、アノテーションの作成時間及びアノテーションの作成者の2つの点から集計する。そして、集計結果を表示することによって、同じ観点を持った人を見つけることができる。
また、他の人が注目した箇所を見つけることができる。さらに、自分が注目している箇所と関連する別の箇所を見つけることができる。
また、各アノテーションには公開制限情報が設定されている。アノテーションには公開したくないものも多いため、公開制限を考慮してアノテーションを管理することができる。
すなわち、検索者は自分の権限で得られる情報しか検索できない。例えば、会議に参加しなかった人が、自分のペンで、会議に参加した人のノート上のアノテーションを指定しても、他の参加者に関する情報は検索できないように制限することができる。
また、アノテーションを所有者毎に分類し、イベントの進行順に表示するので、特定の者(例えば、自分)の手書きメモと、他人の手書きメモとの関係を、容易に把握することができる。特に、多くの人がアノテーションを付与していた箇所を知ることができる。さらに、指定したアノテーションと関連するアノテーションがわかる
特に、所有者毎に分類されたアノテーションをイベント中の時間順に表示するので、指定したアノテーションと同じ時刻にアノテーションを付与していた人を知ることができる。
また、所有者毎に分類されたアノテーションの配付資料中の位置に関連させて表示するので、自分と同じ位置にアノテーションを付与した人を知ることができる。
また、指定されたアノテーションと関連する(共起する)アノテーションを抽出して表示するので、指定されたアノテーションが生成された場面でアノテーションを作成した人は、別のどの場面でアノテーションを作成しているかを知ることができる。
Embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a conceptual diagram of processing of the document management system according to the embodiment of this invention.
First, the information accumulation phase process will be described. The information storage phase is mainly executed during a conference, and the content server stores conference information.
First, when an event (conference or the like) is held, a camera installed in the conference room records the video of the event. The content server collects the video of the event captured by the camera via the network and stores the video of the event (1). A meeting attendee (digital pen user) fills in handouts (or notebooks to bring) with notes related to the contents of the meeting using the digital pen during the meeting (1 ').
The digital pen connects to the information terminal used by the user, and transfers stroke information written during the conference to the information terminal (2). Note that the transfer of stroke information from the digital pen to the information terminal may be performed after the conference, not during the conference.
When the information terminal receives the stroke information from the digital pen, the information terminal transmits the stroke information to the content server. The content server accumulates stroke information of handwritten characters (3).
Next, information access phase processing will be described. The information access phase is executed after the conference ends, and the content server provides information required by the user.
The user selects an annotation on the handout material (or on his / her notebook) using the digital pen after the conference ends, and requests electronic information related to the annotation (4). The digital pen is connected to the information terminal used by the user, and transfers the position of the selected annotation (position designated by the user with the digital pen) to the information terminal.
The information terminal transmits the position selected by the user with the digital pen to the content server, and requests the search for the annotation at the designated position (5).
Upon receiving the annotation search request, the content server searches for electronic information related to the annotation (for example, a video recorded during the event) using the writer and entry time of the annotation (6). At this time, it may be determined whether the user who requested the electronic information has the right to view the searched electronic information.
Then, the content server transmits the searched video, audio, electronic data of distribution material, annotation information, etc. to the requesting information terminal (7).
Then, the information terminal displays the electronic information transmitted from the content server.
According to the present invention, the user can obtain electronic information related to the annotation by selecting the annotation.
FIG. 2 is an explanatory diagram of a screen displayed on the information terminal 12 according to the embodiment of this invention.
The display screen includes a media display unit 300, a document display unit 320, a two-dimensional map display unit 340, and a graph display unit 360.
This display screen is configured by a content viewer realized by software running on the information terminal 12. This content viewer operates when the user views the content sent from the content server 11.
The media display unit 300 has a display area 302. The display area 302 displays content (mainly video files) sent from the content server 11.
A file name display unit 301 is provided at the top of the display area 302. The file name display section 301 displays the file name of the video being played.
A progress bar 303 is provided below the display area 302. A progress marker 304 is provided on the progress bar 303. A progress marker 304 moves in the progress bar 303 and represents the progress state of the reproduced video. Also, the viewing location can be changed by the user moving the progress marker 304.
Under the progress bar 303, an OPEN button 305, a volume bar 310, a fast forward button 309, a rewind button 308, a stop button 307, and a play button 306 are provided. The OPEN button 305 is used to open a selection screen for a file to be reproduced.
The document display unit 320 has a display area 322. A document sent from the content server 11 is displayed in the display area 322. In the document displayed in the display area 322, an annotation (stroke set) attached to the document is displayed.
A marker 323 is displayed in the display area 322. A marker 323 indicates the currently specified stroke set. Annotations can be directly selected in the document display unit 320. When an annotation (attention stroke set) is selected, the attention portions 346 and 366 move.
A document name display unit 321 is provided at the top of the display area 322. The document name display unit 321 displays the file name of the document being displayed.
A progress bar 324 is provided on the right side of the display area 302. A progress marker 325 is provided on the progress bar 324. A progress marker 325 moves in the progress bar 324 and represents the position of the displayed document in the file. The progress marker 325 is linked with the progress marker 304 of the media display unit 300. Further, the display location can be changed by the user moving the progress marker 325.
On the right side of the display area 302 (right of the progress bar 324), a previous page button 327 for returning the document to the previous page and a next page button 328 for sending the document to the next page are provided. With the previous page button 327 and the next page button 328, the content of the corresponding page is reduced and displayed.
In addition, an OPEN button 326 for opening a selection screen for a document file to be displayed is provided below the next page button 328.
A horizontal axis selection field 342 is provided at the top of the display area 341. The user can select the unit of the horizontal axis of the two-dimensional map by using the horizontal axis selection field 342. For example, in the illustrated state, the horizontal axis represents time, but the two-dimensional map can be displayed by changing the horizontal axis of the two-dimensional map to the number of characters (or the number of lines) in the document. At this time, an appropriate location in the document is calculated using the corresponding rectangular coordinates 244 of the stroke set information. For example, a character having coordinates closest to the center of gravity of the rectangle may be used as the position of the stroke set.
In the state shown in the figure, since the time is selected on the horizontal axis, the scale of the horizontal axis of the two-dimensional map is displayed above the display area 341.
A keystroke set display area 343 is provided at the top of the display area 341. The key stroke set display area 343 displays information on annotations (stroke sets) entered by the stroke set owner (the person who entered the annotation specified in the document display unit 320).
When another person's annotation is designated on the two-dimensional map display unit 340, the designated person moves to the keystroke set display area 343. The display order of stroke set holders also changes in the order closer to the person who becomes the new key.
In the lower part of the key stroke set display area 343, other stroke sets are classified and displayed for each stroke set owner (entrant of the stroke set).
In the left part of the display area 341, the owner of the stroke set and the similarity between the stroke set of the owner and the key stroke set are displayed.
The owner of the stroke set is displayed in order of similarity from the top (from the stage close to the display area 341). The owner of the stroke set may be displayed anonymously. That is, when anonymous disclosure (1) is set by the fourth digit of stroke restriction information 249A, 249B, which will be described later, the stroke set owner name is anonymized and displayed.
The similarity of the stroke sets is obtained by determining the overlap between the key stroke set, the owner's stroke set, and the key stroke set (see two-dimensional map display processing overlap determination processing (S145 in FIG. 16)).
The two-dimensional map display unit 340 has a display area 341. The display area 341 displays the time when the annotation (stroke set) attached to the document related to the event is entered.
A stroke set display 344 corresponding to the stroke set entry time is displayed in the display area 341.
Further, a progress marker 345 is provided in the display area 341. The progress marker 345 moves in the display area 341 and represents the progress state of the reproduced video. The progress marker 345 is linked with the progress marker 304 of the media display unit 300 and the progress marker 324 of the document display unit 320.
Further, an attention portion 346 is provided in the display area 341. The attention portion 346 indicates the designated annotation. By this attention part 346, the relationship between the designated annotation and other annotations can be easily grasped. If a plurality of stroke sets are designated, a plurality of attention parts 346 are displayed. The attention part 346 can also be directly specified by the two-dimensional map display part 340.
The graph display unit 360 has a display area 361. In the display area 361, a statistical graph or a co-occurrence statistical graph is displayed. The statistical graph is a histogram in which the entry times of stroke sets held by all persons are tabulated, and indicates how many people have entered annotations at that time. The co-occurrence statistical graph is a histogram in which the entry times of stroke sets held by persons who have entered annotations at substantially the same time (same time and close time) as the attention portions 346 and 366 are totaled. In the state shown in the figure, the co-occurrence statistical graph is a total of only the annotations of the three parties A, Anonymous 1 and D, and indicates how many of the three parties entered the annotation at that time.
As will be described later, in the statistical graph, a stroke set owned by a user whose owned user information is hidden is also subject to aggregation. On the other hand, in the co-occurrence statistical graph, stroke sets held by users whose owner users are hidden are not counted.
In the upper part of the graph display unit 360, a selection area for a statistical graph and a co-occurrence statistical graph is provided. When “all” 362 is selected, a statistical graph is displayed in the display area 361, and when “co-occurrence” 363 is selected, a co-occurrence statistical graph is displayed in the display area 361.
At the bottom of the display area 361, the horizontal axis scale of the statistical graph is displayed.
A frequency distribution 364 is displayed in the display area 361. The frequency distribution 364 indicates how many people have made annotations at that time.
A progress marker 365 is provided in the display area 361. The progress marker 365 moves in the display area 361 and represents the progress state of the reproduced video. The progress marker 365 is interlocked with the progress marker 304 of the media display unit 300 and the progress marker 324 of the document display unit 320.
In the display area 361, an attention part 366 is provided. The attention part 366 indicates the entry time of the designated annotation. By this attention part 366, the relationship between the designated annotation and other annotations can be easily grasped. When a plurality of stroke sets are designated, a plurality of attention parts 366 are displayed.
The attention part 366 can also be directly specified by the two-dimensional map display part 340. When the attention part changes, the person who entered the annotation at substantially the same time as the attention parts 346 and 366 changes, so the co-occurrence statistical graph changes.
Further, the number of publishers and the number of non-publishers 367 are displayed in the display area 361. As described above, in the statistical graph, the stroke set held by the user whose owner user information is hidden is also subject to aggregation.
The progress marker 304 of the media display unit 300, the progress marker 325 of the document display unit 320, the progress marker 345 of the two-dimensional map display unit 340, and the progress marker 365 of the graph display unit 360 described above are all linked.
FIG. 3 is a block diagram of the document management system according to the embodiment of the present invention.
The document management system includes a content server 11, an information terminal 12, a digital pen 14, an event information input device 15, a network 17, and a position information server 19.
The content server 11, the information terminal 12, the event information input device 15, and the position information server 19 are connected to each other via a network 17. Each information terminal 12 is connected to one or more digital pens 14. The information terminal 12 and the digital pen 14 may be connected by wire using a protocol such as USB (Universal Serial Bus). Moreover, you may connect by radio | wireless, such as Bluetooth, wireless LAN, a mobile telephone system, or infrared rays.
The content server 11 manages the content for each event, and transmits the requested content to the information terminal 12. Note that the content is a document, audio, video, or the like related to the event. A document is all information printed and displayed on paper.
The information terminal 12 is a computer device used by each person and transfers information received from the digital pen 14 to the content server 11. Further, the information terminal 12 displays the content received from the content server 11.
The digital pen 14 can write characters, figures, etc. on a paper medium in the same way as a normal pen. The digital pen 14 has a small camera at the tip, and acquires a dot pattern at a position in contact with the paper. The digital pen 14 holds a preset pen ID. The digital pen 14 includes a communication interface for connecting to the information terminal 12 by wire or wireless.
For example, as shown in FIG. 8, the digital pen 14 acquires a dot pattern printed on a document. The coordinates on the paper surface can be specified from the dot pattern acquired by the digital pen 14.
Further, the digital pen 14 may transmit the specified absolute coordinates, the time when the dot pattern was acquired, and the pen ID to the content server 11 via the mobile phone system or the wireless LAN system, not via the information terminal 12.
The event information input device 15 is a computer device installed in the conference room, and creates information related to the event (for example, video, image, sound, and / or slide). Further, the event information input device 15 registers contents such as documents and created videos in the content server 11 in association with the event.
Further, the event information input device 15 is connected to the digital pen 14 during the conference, acquires information such as absolute coordinates specified by the digital pen 14, and transmits the acquired information to the content server 11. Good.
The position information server 19 is a computer device including a CPU, a memory, a storage device, and the like, and holds a database in which the amount of deviation from the reference point of the dot pattern on the paper surface is associated with the coordinates on the paper surface. . Then, the position information server 19 provides coordinates on the paper surface based on the dot pattern on the paper surface.
A printer may be provided in the document management system of this embodiment. The printer prints content such as documents in response to an instruction from the information terminal 12.
FIG. 4 is a block diagram of the content server 11 according to the embodiment of this invention.
The content server 11 includes a CPU 111, a memory 112, a storage unit 113, and a data communication unit 118.
The CPU 111 performs various processes by calling and executing various programs stored in the storage unit 113.
The memory 112 has a work area for temporarily storing data used by the CPU 111 for various processes.
The storage unit 113 is configured by a nonvolatile storage medium (for example, a magnetic disk drive). The storage unit 113 stores an event management program 114, a document management program 115, a pen data management program 116, and a user management program 117. These programs are loaded into the memory 112 and then executed by the CPU 111 to perform various processes.
The storage unit 113 stores event information 21, distribution material information 22, stroke set information 24, and user information 27.
The event management program 114 manages the event information 21 (FIG. 6). The document management program 115 manages the distribution material information 22 (FIG. 7). The pen data management program 116 manages the stroke information 24 (FIG. 10B). The user management program 117 manages user information 27 (FIG. 11).
The data communication unit 118 is a network interface. For example, it is a LAN card that can communicate using the TCP / IP protocol. Thereby, the content server 11 can communicate with a device connected to the network 17 such as the information terminal 12.
FIG. 5 is a block diagram of the information terminal 12 according to the embodiment of this invention.
The information terminal 12 includes a CPU 121, a memory 122, a pen data input unit 123, an operation input unit 124, a data display unit 125, a data communication unit 126, and a data totaling unit 127.
The CPU 121 performs various processes by calling and executing various programs stored in a storage device (not shown).
The memory 122 has a work area for temporarily storing data used by the CPU 111 for various processes. In addition, data sent from the content server 11 and the digital pen 14 is temporarily stored.
The pen input unit 123 communicates with the digital pen 14 by wire or wireless and collects information such as coordinates acquired by the digital pen 14.
The operation input unit 124 is, for example, a keyboard, and information is input by the user.
The data display unit 125 is composed of, for example, a liquid crystal display, and displays content such as documents acquired from the content server 11.
The data communication unit 126 is a network interface. For example, it is a LAN card that can communicate using the TCP / IP protocol. Thereby, the information terminal 12 can communicate with the content server 11 via the network 17.
The pen data input unit 123 and the data communication unit 126 may be a single interface.
The data totaling unit 127 totals the stroke set information 24 and generates a two-dimensional map and a statistical graph.
Next, the event information input device 15 according to the embodiment of this invention will be described.
The event information input device 15 includes a CPU, a memory, an operation recording unit, a video input unit, a voice input unit, a data display unit, a pen data input unit, and a data communication unit.
The CPU performs various processes by calling and executing various programs stored in a storage device (not shown).
The memory has a work area for temporarily storing data used by the CPU for various processes. In addition, data sent from the content server 11 and the digital pen 14 is temporarily stored.
The operation recording unit records operations on the document management system during the meeting. For example, a keyboard operation by the presenter (an operation such as rewinding or fast-forwarding the video used during the conference) is recorded.
The video input unit collects video data captured during the conference by a camera installed in the conference room.
The voice input unit collects voice data recorded during the conference by a microphone installed in the conference room.
The data display unit is composed of a large-screen display device such as a projector installed in the conference room, and displays data used during the conference. For example, presentation materials used by the presenter, documents acquired from the content server 11, and the like are displayed.
The pen data input unit communicates with the digital pen 14 by wire or wireless, and collects information such as coordinates acquired by the digital pen 14.
The data communication unit is a network interface. For example, it is a LAN card that can communicate using the TCP / IP protocol. Thereby, the event information input device 15 can communicate with the content server 11 via the network 17.
FIG. 6 is a configuration diagram of the event information 21 stored in the content server 11 according to the embodiment of this invention.
The event information 21 includes an event ID 210, an event name 211, a date and time 212, a place 213, an attendance number 214A, an attendant 214B, an additional information number 217A, and an additional information 217B. As the event information 21, one record is generated every time an event such as a meeting is performed. The event information 21 can be searched using any item as a key.
The event ID 210 is an identifier that uniquely identifies the event. For example, the event management program 114 automatically determines the event ID 210 according to an arbitrary rule and records it in the event information 21.
The event name 211 is the name of the event.
Date 212 is the start time and end time of the event.
The place 213 is a place where the event is performed.
The number of attendees 214A is the number of attendees at the event. The same number of attendees 214B as the number of attendees 214A are recorded.
The attendee 214B is a user ID that uniquely identifies the attendee of the event.
The number of additional information 217A is the number of additional information related to the event. The same number of additional information 217B as the additional information number 217A is recorded.
The additional information 217B is information such as video, image, audio, or slide related to the event. Specifically, in the additional information 217B, information such as video data capturing the event, audio data recording the event, and slides used in the event are recorded. In the additional information 217B, the type of additional information, the file name of the additional information, and the content security set in the additional information are recorded.
Further, the additional information 217B includes the security level of each additional information. The security level of the additional information is a degree of secrecy of the additional information. As will be described later, the additional information security level 226 and the user security level 276 (see FIG. 11) determine whether the user can access the additional text information.
FIG. 7 is a configuration diagram of the distribution material information 22 stored in the content server 11 according to the embodiment of this invention.
The distribution material information 22 includes a document ID 220, a dot pattern ID 221, an owned user ID 222, an event ID 223, an electronic file 224, a document size 225, a security level 226, a stroke set number 227, and a stroke set ID 228. The distribution material information 22 can be searched using an arbitrary item as a key.
The document ID 220 is an identifier that uniquely identifies the document. Even if the documents have the same information, if the owners are different, they become different documents. Therefore, different document IDs 220 and different records of the distribution material information 22 are generated. Usually, documents distributed to different users are distributed after being printed together with different dot patterns.
The dot pattern ID 221 is an identifier of a dot pattern printed on the document.
The owning user ID 222 is an identifier that uniquely identifies the user who owns the document.
The event ID 223 is an identifier that uniquely identifies the event associated with the document. Usually, the event ID of the meeting to which the document has been distributed is recorded and corresponds to the event ID 210 of the event information 21.
The electronic file 224 is a file name of electronic data of the document.
The document size 225 indicates a paper size suitable for printing the document, and stores the upper left coordinates and the lower right coordinates of the area. In the illustrated case, the document size 225 is expressed in millimeters with the upper left corner as the origin.
The security level 226 is the degree of secrecy of the document. As will be described later, the security level 226 and the user's security level 276 (see FIG. 11) determine whether the user can view the document.
The stroke set number 227 is the number of stroke sets described with the digital pen 14 in the document. Note that the same number of stroke set IDs 228 as the number of stroke sets 227 are recorded.
A stroke set is a group of lines (strokes) that are grouped together, and is obtained using layout analysis in character recognition, for example. In the layout analysis, a set of lines is specified based on the time when the lines are written and / or the positional relationship between the lines, and a stroke set is obtained. In other words, strokes written at positions close to near time constitute one stroke set.
The stroke set ID 228 is an identifier for uniquely identifying the stroke set described in the document, and is a link to the stroke set information 24 (FIG. 10B).
FIG. 8 is an explanatory diagram of coordinate acquisition on the paper surface by the digital pen 14 according to the embodiment of this invention.
The digital pen 14 includes a CPU, a memory, a processor, a communication interface, a camera 141, a battery, and a pen pressure sensor. Further, the digital pen 14 includes a pen tip capable of writing characters, symbols, and the like on paper with ink or graphite.
The digital pen 14 is used together with the paper 20 on which the position detection dots 203 are printed. Here, the dot 203 will be described by enlarging a part 201 of the paper 20. A plurality of small dots 203 are printed on the paper 20. The dots 203 are printed at positions shifted vertically and horizontally from the intersection (reference point) 202 of virtual grid lines.
When characters and figures are entered on the paper with the digital pen 14, the information remains visible on the paper. When the pen pressure sensor detects that the pen tip is in contact with the paper, the digital pen 14 photographs the dots 203 printed on the paper with the camera 141. For example, the digital pen 14 captures an area including 6 × 6 dots 203.
The digital pen 14 obtains absolute coordinates where the dot pattern exists from the photographed dot pattern. This absolute coordinate is a coordinate where the dot pattern exists in a vast plane area. This vast plane area is the entire area where the dot patterns can be arranged so as not to overlap.
The digital pen 14 transmits the obtained absolute coordinates to the information terminal 12. The information terminal 12 transmits the absolute coordinates transmitted from the digital pen 14 to the content server 11.
The content server 11 transmits the absolute coordinates obtained by the digital pen 14 to the position information server 19. Based on the absolute coordinates transmitted from the content server 11, the position information server 19 determines the position (dot pattern ID) of the paper surface in the vast plane area and the coordinates (relative coordinates) on a certain paper surface. The identified dot pattern ID and relative coordinates are transmitted to the content server 11.
In this way, the content server 11 acquires the dot pattern ID and the relative coordinates from the dot pattern captured by the digital pen 14.
By acquiring information on the position where the pen tip is in contact at a predetermined timing (for example, periodically), the movement of the pen tip can be known.
That is, the digital pen 14 transmits the absolute coordinates corresponding to the captured dot pattern, the imaging time of the dot pattern, and the pen ID to the information terminal 12.
The content server 11 acquires relative coordinates from the position information server 19 based on the absolute coordinates obtained by the digital pen 14. The content server 11 obtains the pen tip locus (distribution material information) from the acquired relative coordinates and the time when the dot pattern was captured.
Note that the location server 19 may be included in the content server 11 without being provided separately.
Further, the digital pen 14 need not use the position information server 19 in order to specify the dot pattern ID and the relative coordinates. For example, the paper is specified from an IC tag or a two-dimensional barcode embedded in the paper 20. Furthermore, the position (relative coordinates) on the paper can be specified using a tablet. Note that either the specification of the paper using a muchip or the like or the specification of the position on the paper using a tablet may be combined with the specification of absolute coordinates by the position information server 19. In this way, the document management system can reduce the process of specifying the dot pattern ID and relative coordinates.
FIG. 9 is an explanatory diagram of the document 31 registered in the content server 11 according to the embodiment of this invention, and shows a state in which information is entered by the digital pen 14.
At the meeting, a document (distributed material) 31 as shown in the figure is distributed. These documents 31 are registered in the content server 11 in association with the event to which they are distributed.
The document 31 has a dot pattern that differs between documents. That is, when printing the contents of each document, a different dot pattern is printed for each document. Documents having different dot patterns have different document IDs 220 and are distributed to different users.
The distribution material 31 may be a document electronically created by document creation software or the like, or may be a digitized handwritten document.
The user enters information (characters, symbols, etc.) 311 in the document 31 with the digital pen 14 during the event (or after the event is over). Then, the digital pen 14 periodically acquires the absolute coordinate of the position where the character or the like is written (the position where the pen tip is in contact) and the time when the absolute coordinate is measured. Next, the digital pen 14 transmits the acquired absolute coordinates and acquisition time to the content server 11.
The content server 11 specifies the dot pattern ID and the relative coordinate corresponding to the absolute coordinate included in the received stroke information by making an inquiry to the position information server 18, and specifies the document ID from the dot pattern ID.
Then, the content server 11 determines the stroke of the entered information based on the specified relative coordinate and measurement time, and creates the stroke coordinate information 25 (see FIG. 10C). Then, new stroke set information 24 (see FIG. 10B) is created using the specified document ID.
FIG. 10A shows an example of the stroke set 26 according to the embodiment of the present invention.
The stroke set 26 indicates “Tokyo” 311 shown in FIG. In the present embodiment, as shown in the figure, the position of the stroke is determined with the upper left as the origin, the horizontal direction as the X axis, and the vertical direction as the Y axis.
As described above, a stroke set is a group of lines (strokes) grouped together, and is specified based on the time when lines are written and / or the positional relationship between lines.
FIG. 10B is a configuration diagram of the stroke set information 24 stored in the content server 11 according to the embodiment of this invention.
This configuration diagram is stroke set information of the stroke set 26 shown in FIG. 10A.
The stroke set information 24 includes a stroke set ID 241, a pen ID 242, an event ID 247, a document ID 248, an entry start date and time 243, a corresponding rectangular coordinate 244, disclosure restriction information 249 A and 249 B, a stroke number 245, and stroke information 246. The stroke set information 24 can be searched using any item as a key.
The stroke set ID 241 is an identifier that uniquely identifies the stroke set.
The pen ID 242 is an identifier of the digital pen 14 in which the stroke set is written.
The event ID 247 is an identifier that uniquely identifies an event associated with the stroke set. Usually, the event ID of the meeting to which the document in which the stroke set is written is distributed, and corresponds to the event ID 210 of the event information 21.
The document ID 248 is an identifier that uniquely identifies a document in which the stroke set is entered. The document ID 248 corresponds to the document ID 220 of the distribution material information 22.
The entry start date and time 243 is the date and time when entry of the stroke set is started.
The corresponding rectangular area 244 is a rectangular area including the stroke set. The corresponding rectangular area 244 is the coordinates (relative coordinates) in the document in which the stroke set is written, and is represented by the upper left coordinates and the lower right coordinates of the rectangular areas.
The public restriction information includes public restriction information 249A for attendees and public restriction information 249B for non-attendants. Various security can be set for the stroke set by separately defining the public restriction information for the attendee and the non-attendant.
Each public restriction information 249A, 249B has a plurality of patterns prepared in advance for each security level. In the present invention, since the public restriction information is determined from the user security level 276 (see FIG. 11), the same public restriction information is set for all stroke sets written by the same user. The public restriction information may be determined for each stroke set.
The public restriction information 249A and 249B can be defined by a 4-digit code as shown in FIG. 10B, for example. The fourth digit (most significant digit) from the bottom of this code indicates whether or not to disclose the information of the user who owns the stroke set. Specifically, it indicates whether the owned user information is disclosed (2), anonymized and disclosed (1), or not disclosed (0).
The third digit from the lower order indicates whether the entry start date is disclosed (1) or not (0). The second digit from the lower order indicates whether the corresponding rectangular coordinates are disclosed (1) or not (0). The first digit (lowest digit) from the bottom indicates whether stroke information is disclosed (1) or not (0).
The number of strokes 245 is the number of lines (strokes) included in the stroke set. Note that the same number of stroke information 246 as the number of strokes 245 is recorded.
The stroke information 246 includes a sample point number 246A and a serial number 246B.
The number of sample points 246A is the number of relative coordinates acquired by the digital pen 14 and constituting the stroke.
The serial number 246B is an identifier that is uniquely identified by the digital pen 14 and identifies the relative coordinates constituting the stroke, and is a link to the stroke coordinate information 25 (FIG. 10C).
FIG. 10C is a configuration diagram of the stroke coordinate information 25 stored in the content server 11 according to the embodiment of this invention.
The stroke coordinate information 25 includes a serial number 251, an X coordinate 252, a Y coordinate 253, and an acquisition time 254.
The serial number 251 is an identifier that uniquely identifies the relative coordinates acquired by the digital pen 14.
The X coordinate 252 is a relative coordinate in the X-axis direction shown in FIG. 10A, and is expressed in millimeters, for example.
The Y coordinate 253 is a relative coordinate in the Y-axis direction shown in FIG. 10A, and is expressed in units of millimeters, for example.
The acquisition time 254 represents the time when the relative coordinates are acquired by the digital pen 14. In this explanatory diagram, an elapsed time from the entry start time 242 is recorded at the acquisition time 254.
FIG. 11 is a configuration diagram of the user information 27 stored in the content server 11 according to the embodiment of this invention.
The user information 27 includes a user ID 271, a name 272, an affiliation 273, a title 274, a possessed pen ID 275, and a security level 276. The user information 27 can be searched using an arbitrary item as a key.
The user ID 271 is an identifier that uniquely identifies the user.
The name 272 is the name of the user.
Affiliation 273 is a department to which the user belongs.
The title 274 is the title of the user.
The possessed pen ID 275 is a unique identifier of the digital pen 14 possessed by the user.
The security level 276 is an authority to access the secret document of the user. As will be described later, the user's security level 276 and the document security level 226 (see FIG. 7) determine whether the user can view the document.
A plurality of patterns are prepared for the security level 276 in advance. The security level 276 specifies the pattern. For example, in Level 3, all information is disclosed to the conference participants, but is anonymously disclosed to the non-participants. Furthermore, it means that media information is disclosed regardless of whether it is a participant or non-participant.
Next, processing of the document management system according to the embodiment of this invention will be described.
FIG. 12 is a flowchart showing the entire search process according to the embodiment of the present invention.
In the present embodiment, when the searcher specifies an annotation, the annotation related to the annotation is searched, and the searched annotations are aggregated and displayed.
The user designates a stroke set (1001). In other words, the user uses the digital pen 14 to specify a position on the document in which a stroke set serving as a search key is entered. The digital pen 14 obtains absolute coordinates of the designated position. The digital pen 14 transmits the obtained absolute coordinates and pen ID to the pen data input unit 123 of the information terminal 12.
Note that the user may specify the annotation attached to the document on the document displayed on the data display unit 125 of the information terminal 12 with a mouse or the like.
The annotation specified at this time becomes the target stroke set. In the present embodiment, the annotation and the stroke set mean the same thing.
Further, the user designates a document to be searched (1002). In other words, the user operates the operation input unit 124 to input the document ID to be searched and the searcher ID.
Further, the user designates a search target medium (additional information) (1003). That is, the user operates the operation input unit 124 and inputs additional information to be searched and a searcher ID.
Upon receiving a search request from the information terminal 12, the content server 11 searches for documents, events, and stroke sets related to the search request (1011 to 1016).
First, the content server 11 transmits the absolute coordinates obtained by the digital pen 14 to the position information server 19. Based on the absolute coordinates transmitted from the content server 11, the position information server 19 determines the position (dot pattern ID) of the paper surface in the vast plane area and the coordinates (relative coordinates) on a certain paper surface. The identified dot pattern ID and relative coordinates are transmitted to the content server 11.
Next, the content server (document management program 115) searches for a document (document associated with an event such as a distributed material) based on the information transmitted from the information terminal 12 (1011). For example, the dot pattern ID is specified from the position specified by the digital pen, and the document ID 220 corresponding to the specified dot pattern ID 221 is specified. Further, an event (event ID 223) related to the specified document is specified.
Then, the security level of the specified document is checked (1012). This security check process will be described later with reference to FIG.
Then, the electronic file of the specified document and the stroke set ID 228 attached to the document are specified. A set of stroke set IDs specified here becomes a key stroke set set (for example, “K” in FIG. 14).
Next, the stroke set information 24 is specified by each stroke set ID included in the key stroke set set, and stroke set filtering (described later in FIG. 13) is performed. Thereby, detailed information of the stroke set included in the key stroke set set can be obtained.
Further, the target stroke set is specified from the stroke sets included in the key stroke set set. In other words, the stroke set information included in the key stroke set set is searched based on the position designated by the user (the position of the stroke set of interest) to identify the stroke set of interest.
The content server 11 transmits information obtained by the above processing to the information terminal 12. The information terminal 12 displays the received information on the data display unit 125 (1004). Specifically, the document display unit 320 is displayed, and the keystroke set display area 343 of the two-dimensional map display unit 340 is displayed.
Next, the event management program 114 acquires the detailed information of the event with the event ID 223 specified earlier. In this embodiment, date 212, attendee 214B, and additional information 217B are acquired.
Then, the security level of the acquired additional information is checked (1014). This security check process 1014 is the same as the process 1012 and will be described later with reference to FIG.
The content server 11 transmits the additional information file obtained by the above processing to the information terminal 12. The information terminal 12 displays the received additional information file on the data display unit 125 (1005). Specifically, the received content is displayed on the media display unit 300. At this time, the content is cued using the entry start date and time 243 of the target stroke set so that the content can be reproduced from this time.
Next, the pen data management program 116 searches the stroke set information by the event ID 223 specified previously (1015). And the identifier (stroke set ID241) of all the stroke sets relevant to the said event is specified. Then, the stroke set information 24 of the specified stroke set ID 241 is acquired. A set of stroke set IDs specified here is a total set stroke set (for example, “A” in FIG. 14).
Then, a stroke set filtering process for determining the disclosure level of the identified stroke set is performed (1016). By the stroke set filtering process, information that the owner of the stroke set does not want to disclose is hidden as necessary. That is, the corresponding item is masked (blackened). This stroke set filtering processing 1016 will be described later with reference to FIG.
Further, the information terminal 12 totals the searched stroke sets by the data totaling unit 127, and displays the totalized stroke sets by the data display unit 125 (1006). The stroke set totaling process and the stroke set display process 1006 will be described later with reference to FIG.
When a re-aggregation instruction is input to the operation input unit 124 (1008), the process returns to process 1006, and the stroke set is re-aggregated (1006).
Specifically, the user can set a target stroke set by pointing another stroke set with a mouse or the like on the displayed screen. When the target stroke set is changed, the data totaling unit 127 performs recalculation as necessary. Then, the data display unit 125 redisplays the screen.
Note that the target stroke set can be selected from the current set of key stroke sets, but can also be selected from other (stroke sets owned by other people). By specifying another person's stroke set, the key stroke set set is also reset. Then, the display order of the vertical axis of the two-dimensional map changes. That is, they are rearranged in the order closest to the designated person's stroke set pattern.
FIG. 13 is a flowchart of stroke set filtering processing according to the embodiment of this invention, which is executed by the content server 11.
First, parameters for selecting a stroke set are input to the stroke set filtering process (S101). Specifically, the target stroke set, the searcher ID, and the attendee are given to the stroke set filtering process.
The target stroke set to be given to the stroke set filtering process is a stroke set to be identified, aggregated, and displayed on the information terminal as a result of the search. The searcher ID is a user ID 271 input to the information terminal 12 for the searcher to log in to the document management system.
In addition, the attendee specifies the distribution material information 22 including the identifier (stroke set ID) 241 of the target stroke set, specifies the event ID 223 of the specified distribution material information, and the attendee included in the specified event information 214B.
Next, it is determined whether or not the user ID 271 of the searcher is included in the attendee 214B (S102).
As a result of the determination, if the user ID 271 of the searcher is included in the attendee 214B, it is determined that the searcher is an attendant, and the public restriction information 249A for attendees is applied (S103). On the other hand, if the user ID 271 of the searcher is not included in the attendee 214B, it is determined that the searcher is not an attendee, and the public restriction information 249B for non-attendants is applied (S104).
Next, it is determined whether or not to disclose the information of the user who owns the stroke set by the fourth digit (most significant digit) from the lower order of the disclosure restriction information 249A and 249B (S105).
If the fourth digit of the disclosure restriction information is “1” as a result of the determination, the user ID of the owning user is anonymized and published (S106). If the fourth digit of the disclosure restriction information is “0”, the user ID is hidden because the owning user is not disclosed (S107). That is, the user ID is blackened. If the fourth digit of the disclosure restriction information is “2”, the owned user information may be disclosed, and no processing is performed.
Next, it is determined whether or not to release the entry date and time of the stroke set by the third digit from the lower order of the disclosure restriction information 249A and 249B (S108).
If the third digit of the disclosure restriction information is “0” as a result of the determination, the entry start date / time is not disclosed, so the entry start date / time is hidden (S109). If the third digit of the disclosure restriction information is “1”, the entry start date / time may be disclosed, and no processing is performed.
Next, it is determined whether or not the entry position of the stroke set is disclosed by the second digit from the lower order of the disclosure restriction information 249A and 249B (S110).
If the second digit of the disclosure restriction information is “0” as a result of the determination, the entry position is not disclosed and the corresponding rectangular coordinates are hidden (S111). If the second digit of the disclosure restriction information is “1”, the entry position may be disclosed, and no processing is performed.
Next, it is determined whether or not the entry position of the stroke set is disclosed by the first digit (lowest digit) from the lower order of the disclosure restriction information 249A and 249B (S112).
As a result of the determination, if the first digit of the disclosure restriction information is “0”, the stroke information is not disclosed, so this stroke set information is excluded from the aggregation target (S113). If the first digit of the disclosure restriction information is “1”, no processing is performed because the stroke set may be disclosed.
In this way, in the stroke set filtering process (FIG. 13), it is determined to which extent the information of the stroke set to be aggregated is disclosed using the disclosure restriction information.
FIG. 14 is a flowchart of the stroke set totaling process and the stroke set display process according to the embodiment of the present invention, and is executed by the information terminal 12.
First, in the stroke set totaling process, a set of stroke sets for totaling stroke sets is set (S121). Specifically, the key stroke set set is set in the set K, the target stroke set set is set in the set F, and the aggregation target stroke set set is set in the set A.
The keystroke set set (set K) is a set that satisfies the security conditions (passed through the stroke set filtering process) among all the stroke sets included in the designated document. The attention stroke set set (set F) is a stroke set designated as a search key, and is included in the key stroke set. In addition, the aggregation set stroke set (set A) is a set that satisfies security conditions among all stroke sets entered by all users who attended the meeting to which the specified document was distributed (those that passed the stroke set filtering process). It is.
Next, the first loop is started (S122). In this first loop, each stroke set included in the set A or the set K (that is, each stroke set belonging to the totaling target stroke set set or the key stroke set set) is totaled in order. Therefore, a stroke set to be totaled in this loop is set to a.
Then, in the first loop, it is determined whether the user ID of the owning user is hidden by the fourth digit (most significant digit) from the lower order of the disclosure restriction information 249A, 249B of the stroke set (S123). If the owning user is not hidden, the target stroke set a is added to the two-dimensional map display stroke set set (S124).
On the other hand, if the owning user is hidden, the total stroke set a is not added to the two-dimensional map display stroke set set.
Thereafter, in any case, the stroke set a to be counted is added to the set of statistical graph display stroke sets (S125).
As described above, when the owned user ID is hidden, the stroke set is counted only in the statistical graph. Further, when the owning user ID is not hidden, the stroke set is aggregated in a statistical graph and a two-dimensional map.
When the summation of all stroke sets included in the set A or the set K is finished, the first loop is finished (S126).
Thereafter, a two-dimensional map is displayed using the two-dimensional map display stroke set set (S127). This two-dimensional map display process will be described later with reference to FIG. Further, a statistical graph is displayed using the statistical graph display stroke set set (S128). This statistical graph display process will be described later with reference to FIG.
Thereafter, it is determined whether or not the target stroke set set (F) is empty (S129). As a result, if the target stroke set set (F) is not empty, a co-occurrence statistical graph is displayed (S130). This co-occurrence statistical graph display process will be described later with reference to FIG.
FIG. 16 is a flowchart of the two-dimensional map display process according to the embodiment of the present invention, which is executed by the information terminal 12.
First, in the two-dimensional map display process, a set of stroke sets for executing the display process is set (S151). Specifically, a key stroke set set is set in the set K, a two-dimensional map display stroke set set is set in the set A, and a target stroke set set is set in the set F.
The keystroke set set (set K) is a set that satisfies the security conditions (passed through the stroke set filtering process) among all the stroke sets included in the designated document. The two-dimensional map display stroke set set (set A) is a set generated in step S124 of the stroke set totaling process (FIG. 14). The attention stroke set set (set F) is a stroke set designated as a search key, and is included in the key stroke set.
Next, the stroke set information 24 included in the set A (two-dimensional map display stroke set set) is collected for each user ID 242 (S152).
Next, the horizontal axis of the two-dimensional map is set (S153). The user may specify what is displayed on the horizontal axis to display the two-dimensional map, but may automatically set it. For example, the horizontal axis of the two-dimensional map can be time. The horizontal axis of the two-dimensional map can be the number of characters (or the number of lines) from the beginning of the document.
Also, the horizontal axis may display all of the conference start time to end time, or a part of the conference time may be extracted and displayed. For example, the scale of the horizontal axis may be automatically set so that the number of stroke sets included in one two-dimensional map is within a predetermined range.
Further, the horizontal axis may display all of the conference start time to end time, and the stroke set display 344 may be highlighted. For example, when the meeting time is long, each stroke set display 344 becomes thin and difficult to see. In such a case, the stroke set display 344 is deformed and displayed. More specifically, a predetermined multiplier X may be determined, and the stroke set display 344 may always be displayed with the width multiplied by X. Further, only when the width of the stroke set display 344 is 10 dots or less, the display may be expanded to 10 dots.
Next, the stroke set included in the set K (key stroke set set) is displayed at the top of the two-dimensional map (S154).
Next, the vertical axis of the two-dimensional map is set (S155). Specifically, the owned user IDs in the set A are arranged in the descending order of the degree of overlap between the stroke set included in the set K and the horizontal axis direction (for example, the order in which the overlapping times are long). In this overlap determination, a relationship in which one is included in the other may be determined as overlap. When determining the overlap of two stroke sets, the overlap may be determined after adding a width of a predetermined time (for example, before and after 30 seconds) to each stroke set.
Next, the third loop is started (S156). In the third loop, the stroke set included in the set A is processed for each user ID. Here, the user IDs are arranged in the order close to the keystroke in the setting of the vertical axis (S155). First, a set of stroke sets is generated for each user ID.
Then, in the third loop, each stroke set included in the stroke set set of the same user ID is displayed at the corresponding event progress position on the same stage (S157). Thereafter, the process proceeds to the next display, and the stroke set of the next user ID is processed (S158).
When the processing is completed for each user ID for all stroke sets included in the set A, the third loop is terminated (S159).
Thereafter, the position corresponding to the target stroke set is highlighted on the two-dimensional graph (S160).
FIG. 17 is a flowchart of the statistical graph display processing according to the embodiment of this invention, and is executed by the information terminal 12.
First, in the statistical graph display process, a set of stroke sets for executing the display process is set (S171). Specifically, a key stroke set set is set in the set K, a statistical graph display stroke set set is set in the set A, and a target stroke set set is set in the set F.
The keystroke set set (set K) is a set that satisfies the security conditions (passed through the stroke set filtering process) among all the stroke sets included in the designated document. The statistical graph display stroke set set (set A) is a set generated in step S125 of the stroke set totaling process (FIG. 14). The attention stroke set set (set F) is a stroke set designated as a search key, and is included in the key stroke set.
Next, the horizontal axis of the statistical graph is set (S172). The user may specify what is displayed on the horizontal axis, but based on the number of stroke sets included in one statistical graph (the number of stroke sets included in one statistical graph). The horizontal axis may be set automatically so that the number is close to a predetermined number). The horizontal axis may be equal to the two-dimensional map.
For example, the horizontal axis of the statistical graph can be time. The horizontal axis of the statistical graph can be the number of characters (or the number of lines) from the top of the document.
Next, the stroke sets included in the set A are totaled on the set horizontal axis, and a histogram is created (S173). At this time, the bin width of the histogram may be determined as appropriate. For example, the bin width is determined so that the histogram changes smoothly.
Next, the created histogram is displayed (S174).
Thereafter, the position corresponding to the target stroke set is highlighted on the two-dimensional graph (S175).
FIG. 18 is a flowchart of the co-occurrence statistical graph display process according to the embodiment of this invention, which is executed by the information terminal 12.
First, in the co-occurrence statistical graph display process, a set of stroke sets for executing the display process is set (S181). Specifically, a key stroke set set is set in the set K, a two-dimensional map display stroke set set is set in the set A, and a target stroke set set is set in the set F.
The keystroke set set (set K) is a set that satisfies the security conditions (passed through the stroke set filtering process) among all the stroke sets included in the designated document. The two-dimensional map display stroke set set (set A) is a set generated in step S124 of the stroke set totaling process (FIG. 14). The attention stroke set set (set F) is a stroke set designated as a search key, and is included in the key stroke set.
In the co-occurrence statistical graph display processing, only information that does not hide the owning user is used, so that the second digit map display includes a stroke set whose fourth digit of the public restriction information is “2” or “1”. Use a stroke set set.
Next, the horizontal axis of the co-occurrence statistical graph is set (S182). The user may specify what the horizontal axis represents the co-occurrence statistical graph, but based on the number of stroke sets included in one co-occurrence statistical graph (one co-occurrence statistical graph The horizontal axis may be automatically set so that the number of stroke sets included in is close to a predetermined number). The horizontal axis may be equal to the two-dimensional map.
For example, the horizontal axis of the co-occurrence statistics graph can be time. The horizontal axis of the co-occurrence statistical graph can be the number of characters (or the number of lines) from the top of the document.
Next, among the stroke sets included in the set A, only those that overlap with the stroke set included in the set F are collected. In this overlap determination, a relationship that overlaps within a predetermined range of a predetermined width may also be determined as overlap. Thereafter, the collected stroke sets are totaled on the set horizontal axis, and a histogram is created (S183). At this time, the bin width of the histogram may be determined as appropriate. For example, the bin width is determined so that the histogram changes smoothly.
Next, the created histogram is displayed (S184).
Thereafter, the position corresponding to the target stroke set is highlighted on the co-occurrence statistical graph (S185).
FIG. 19 is a flowchart of the security check process according to the embodiment of this invention, which is executed by the content server 11 (1012, 1014 in FIG. 12).
First, parameters for security check are input to the security check process (S191). Specifically, the security level of the document or additional information, the searcher ID, and the attendee are given to the security check process.
The security level given to the security check process is a security level set in the document or additional information identified as relevant as a result of the search. The searcher ID is a user ID 271 input to the information terminal 12 for the searcher to log in to the document management system.
Further, the attendee is the attendee 214B identified by the event ID 223 based on the document and the target additional information and included in the identified event information.
Next, it is determined whether or not the user ID 271 of the searcher is included in the attendee 214B (S192).
As a result of the determination, if the user ID 271 of the searcher is included in the attendee 214B, it is determined that the searcher is an attendee. Then, it is determined whether or not the security level S is a level that can be disclosed to attendees (S193).
As a result, if the security level S can be disclosed to attendees, it is determined that the document and / or additional information can be disclosed (S194). On the other hand, if the security level S is a level that cannot be disclosed to attendees, it is determined that the document and / or additional information is not disclosed (S195).
On the other hand, if the user ID 271 of the searcher is not included in the attendee 214B, it is determined that the searcher is a non-attendant. Then, it is determined whether or not the security level S is a level that can be disclosed to non-attendants (S196).
If the security level S can be disclosed to non-attendants as a result of the determination, it is determined that the document and / or additional information can be disclosed (S197). On the other hand, if the security level S is a level that cannot be disclosed to non-attendants, it is determined that the document and / or additional information is not disclosed (S198).
In this way, in the security check process (FIG. 19) of the present embodiment, different security levels are set for attendees and non-attendants to control the disclosure / non-disclosure of documents and / or additional information. Can do.
The series of processes executed in the information terminal 12 can be easily summarized in the flowchart of FIG. Hereinafter, the processing in the information terminal 12 will be described again with reference to FIG.
First, information specifying an event is input to the two-dimensional map display process (S141). Specifically, the user selects the position of the annotation (stroke set) with the digital pen 14. Then, the digital pen 14 obtains absolute coordinates of the designated position. The digital pen 14 transmits the pen ID, the obtained absolute coordinates, and the pen ID to the information terminal 12. When the information terminal 12 acquires the absolute coordinates from the digital pen 14, the information terminal 12 inquires the position information server 19 to determine the position of the paper surface (dot pattern ID) in the vast plane area and the coordinates (relative coordinates) on the paper surface. To get.
Next, the information terminal 12 specifies an event ID (S142).
Specifically, the information terminal 12 transmits the dot pattern ID acquired from the position information server 19 to the content server 11. The content server (document management program 115) searches the distribution material information 22 using the dot pattern ID transmitted from the information terminal 12, and specifies the document with the matching dot pattern ID 221. Then, the content server 11 transmits the event ID 223 associated with the specified document to the information terminal 12.
Next, all stroke sets in the event are collected (S143).
Specifically, the information terminal 12 transmits the identified event ID to the content server 11. The content server (pen data management program 116) searches the stroke set information 24 by the event ID transmitted from the information terminal 12, and identifies the stroke set that matches the event ID 247. Then, the content server 11 transmits the specified stroke set information to the information terminal 12.
Here, if necessary, the information that the creator of the stroke set restricts the disclosure by comparing the security level provided by the creator of each stroke set with the searcher ID is It may be sent concealed or anonymized. If the stroke set information can always be disclosed to an unspecified number of searchers, the above processing is not necessary.
Note that the content server 11 may collectively process the identification of the event ID (S142) and the collection of the stroke set (S143). That is, the information terminal 12 obtains a stroke set from the content server 11 when transmitting the dot pattern ID acquired from the position information server 19.
Further, the content server 11 may make an inquiry to the position information server 19. That is, the information terminal 12 obtains a stroke set from the content server 11 when transmitting the absolute coordinates obtained from the digital pen 14.
Next, the information terminal 12 classifies the collected stroke set information by the user ID 242 (S144).
Next, the second loop is started (S145). In this second loop, the classified stroke set is processed for each user ID.
Then, in the second loop, each stroke set included in the stroke set set of the same user ID is displayed at the corresponding event progress position on the same stage (S146). Thereafter, the process proceeds to the next stage display, and the stroke set of the next user ID is processed (S147).
When the processing is completed for each user ID for all stroke sets included in the set A, the second loop is terminated (S148).
As described above, in FIG. 15, the method of specifying an event by specifying a stroke set using the digital pen 14 has been described, but the event can also be specified by other methods.
As a first modification, there is a method in which the user inputs a stroke set selection operation to the operation input unit 124 of the information terminal 12.
For example, the user displays the document on the document display section (320 in FIG. 2) of the display screen of the information terminal 12. At this stage, an event related to the document is not specified. Then, an operation input unit (for example, a mouse) of the information terminal is operated to select an annotation (stroke set) on the document displayed on the document display unit 320.
Then, the information terminal 12 transmits the designated position (relative coordinates) on the document and the document ID to the content server 11. The content server (document management program 115) searches the distribution material information 22 by the document ID transmitted from the information terminal 12, and specifies the document with the document ID 220 matching. Then, the content server 11 transmits the event ID 223 associated with the specified document to the information terminal 12.
As a second modification, there is a method of directly specifying a video file or the like.
For example, the user displays the content on the media display unit (300 in FIG. 2) of the display screen of the information terminal 12. At this stage, no event related to the content is specified. Then, the file name of the content displayed on the media display unit 300 is acquired by operating an operation input unit (for example, a keyboard) of the information terminal.
Then, the information terminal 12 transmits the acquired file name of the content to the content server 11. The content server (event management program 114) searches the event information 21 by the file name transmitted from the information terminal 12, and identifies an event in which the file name matches the additional information 217B. Then, the content server 11 transmits the identified event identifier (event ID 223) to the information terminal 12.
At this stage, the keystroke set and the document are not displayed because the keystroke set is not selected.
As described above, in the embodiment of the present invention, a document in which a link to additional information related to an event (content such as video and audio at the time when an annotation is added) is set in the content server 11 is set. Stores the assigned annotation. Then, an annotation created by a specific person is specified, and related additional information and annotations are searched and displayed.
In this way, annotations created by different persons in an event such as a meeting are aggregated from two points: annotation creation time and annotation creator. And the person with the same viewpoint can be found by displaying a total result.
Also, it is possible to find a spot that other people have noticed. In addition, you can find another location that is related to the location you are interested in.
In addition, disclosure restriction information is set for each annotation. Since there are many annotations that you do not want to publish, you can manage the annotations in consideration of disclosure restrictions.
That is, the searcher can search only information obtained with his / her authority. For example, even if a person who has not participated in the conference designates an annotation on the notebook of the person who has participated in the conference with his / her pen, information regarding other participants can be restricted so that it cannot be searched.
Moreover, since the annotations are classified for each owner and displayed in the order of event progress, the relationship between a handwritten memo of a specific person (for example, oneself) and a handwritten memo of another person can be easily grasped. In particular, it is possible to know where many people have been annotating. In addition, you can see the annotation associated with the specified annotation
In particular, since the annotations classified for each owner are displayed in the order of time in the event, it is possible to know the person who gave the annotation at the same time as the designated annotation.
Further, since the annotations classified for each owner are displayed in relation to the positions in the distribution material, it is possible to know the person who added the annotations at the same position as himself.
Also, since the annotation related to (co-occurring with) the specified annotation is extracted and displayed, the person who created the annotation in the scene where the specified annotation was generated can create the annotation in any other scene I can know.

本発明は、紙面上に記録された情報を電子データとを管理するシステムに有用であり、特に、文書管理システムに適している。  The present invention is useful for a system for managing information recorded on paper and electronic data, and is particularly suitable for a document management system.

Claims (17)

データを記憶するコンテンツサーバに接続され、前記データを入出力する端末であって、
前記コンテンツサーバは、書類データ及びストローク情報を記憶する記憶部を有し、
前記書類データは、ユーザがイベントにおいて使用した紙に印刷された情報を含み、
前記ストローク情報は、前記書類データに係る紙面上で特定された位置及び該位置が特定された時刻を含み、
前記端末は、
前記イベントを特定可能な情報に基づいて、当該イベントに関連して作成されたストローク情報を、前記コンテンツサーバから取得し、
前記取得したストローク情報を作成したユーザ毎に、前記ストローク情報を分類し、
前記分類されたストローク情報を、前記イベントの進行に従って表示することを特徴とする。
A terminal connected to a content server for storing data and inputting / outputting the data,
The content server has a storage unit for storing document data and stroke information,
The document data includes information printed on paper used by the user at the event,
The stroke information includes a position specified on the paper surface related to the document data and a time when the position is specified,
The terminal
Based on the information that can identify the event, the stroke information created in relation to the event is acquired from the content server,
For each user who created the acquired stroke information, classify the stroke information,
The classified stroke information is displayed according to the progress of the event.
請求項1に記載の端末であって、前記ストローク情報が作成された時刻に従って、前記分類されたストローク情報を表示することを特徴とする。  The terminal according to claim 1, wherein the classified stroke information is displayed according to a time when the stroke information is created. 請求項1に記載の端末であって、前記書類データにおける前記ストローク情報の位置に従って、前記分類されたストローク情報を表示することを特徴とする。  The terminal according to claim 1, wherein the classified stroke information is displayed according to a position of the stroke information in the document data. 請求項1に記載の端末であって、
前記イベントを特定可能な情報は、前記ストローク情報であって、
前記端末は、
選択された前記ストローク情報に基づいて、当該選択されたストローク情報に関係するイベントを特定し、
当該選択されたストローク情報の作成時間と、他のストローク情報の作成時間との重複度を、前記ユーザ毎に判定し、
前記判定された重複度の高いユーザの順に、前記分類されたストローク情報を表示することを特徴とする。
The terminal according to claim 1,
The information that can identify the event is the stroke information,
The terminal
Based on the selected stroke information, identify an event related to the selected stroke information,
The degree of overlap between the creation time of the selected stroke information and the creation time of other stroke information is determined for each user,
The classified stroke information is displayed in the order of the determined users with the highest degree of duplication.
請求項1に記載の端末であって、
前記イベントを特定可能な情報は、前記ストローク情報であって、
前記端末は、
選択された前記ストローク情報に基づいて、当該選択されたストローク情報に関係するイベントを特定し、
当該選択されたストローク情報と重複する時刻に作成された他のストローク情報を集計し、
前記集計されたストローク情報の数を、前記イベントの進行に従って表示することを特徴とする。
The terminal according to claim 1,
The information that can identify the event is the stroke information,
The terminal
Based on the selected stroke information, identify an event related to the selected stroke information,
Aggregate other stroke information created at the same time as the selected stroke information,
The total number of stroke information is displayed according to the progress of the event.
請求項1に記載の端末であって、前記ストローク情報は、当該ストローク情報の公開制限情報を含むことを特徴とする。  The terminal according to claim 1, wherein the stroke information includes disclosure restriction information of the stroke information. 請求項6に記載の端末であって、前記公開制限情報は、当該ストローク情報の公開の際に、当該ストローク情報を作成した者を公開する、当該ストローク情報を作成した者を匿名で公開する、又は、当該ストローク情報を作成した者を公開しない、の3種類のうち、少なくとも一つを含むことを特徴とする。  The terminal according to claim 6, wherein the disclosure restriction information publishes the person who created the stroke information when the stroke information is disclosed, and anonymously discloses the person who created the stroke information. Alternatively, it includes at least one of the three types that do not disclose the person who created the stroke information. データを入出力する端末と接続され、前記データを記憶するコンテンツサーバであって、
前記コンテンツサーバは、書類データ及びストローク情報を記憶する記憶部を有し、
前記書類データは、ユーザがイベントにおいて使用した紙に印刷された情報を含み、
前記ストローク情報は、前記書類データに係る紙面上で特定された位置、該位置が特定された時刻、当該ストローク情報に関連するイベントの情報、及び、当該ストローク情報の公開制限情報を含むことを特徴とする。
A content server connected to a terminal that inputs and outputs data and stores the data,
The content server has a storage unit for storing document data and stroke information,
The document data includes information printed on paper used by the user at the event,
The stroke information includes a position specified on the paper surface related to the document data, a time when the position is specified, event information related to the stroke information, and disclosure restriction information of the stroke information. And
請求項8に記載のコンテンツサーバであって、
前記公開制限情報は、当該ストローク情報を作成した者を公開する、当該ストローク情報を作成した者を匿名で公開する、又は、当該ストローク情報を作成した者を公開しない、の3種類のうち、少なくとも一つを含み、
前記コンテンツサーバは、
前記公開制限情報が、当該ストローク情報を作成した者を公開しない、であれば、当該ストローク情報を作成した者の情報を隠蔽して前記端末に送信し、
前記公開制限情報が、当該ストローク情報を作成した者を匿名で公開する、であれば、当該ストローク情報を作成した者の情報を匿名化して前記端末に送信し、
前記公開制限情報が、当該ストローク情報を作成した者を公開する、であれば、当該ストローク情報を作成した者の情報を、そのまま前記端末に送信することを特徴とする。
The content server according to claim 8, wherein
The disclosure restriction information includes at least one of the following three types: disclosure of the person who created the stroke information, disclosure of the person who created the stroke information anonymously, or disclosure of the person who created the stroke information. Including one,
The content server
If the disclosure restriction information does not disclose the person who created the stroke information, the information of the person who created the stroke information is concealed and transmitted to the terminal,
If the disclosure restriction information is to anonymously disclose the person who created the stroke information, the information of the person who created the stroke information is anonymized and transmitted to the terminal,
If the disclosure restriction information discloses the person who created the stroke information, the information of the person who created the stroke information is transmitted to the terminal as it is.
請求項8に記載のコンテンツサーバであって、
前記イベントに関するストローク情報の集計を要求した者が、当該イベントの出席者であるか否かを判定し、
前記要求者が、当該イベントの出席者であれば、当該ストローク情報の出席者に対する公開制限情報によって、当該ストローク情報の公開の可否を判定し、
前記要求者が、当該イベントの出席者でなければ、当該ストローク情報の非出席者に対する公開制限情報によって、当該ストローク情報の公開の可否を判定することを特徴とする。
The content server according to claim 8, wherein
It is determined whether the person who requested the aggregation of stroke information related to the event is an attendee of the event,
If the requester is an attendee of the event, it is determined whether or not the stroke information can be disclosed based on the disclosure restriction information for the attendee of the stroke information.
If the requester is not an attendee of the event, whether or not the stroke information can be disclosed is determined based on disclosure restriction information for the non-attendant of the stroke information.
データを記憶するコンテンツサーバと、前記データを入出力する端末とで構成される情報管理システムに使用される情報表示方法であって、
前記コンテンツサーバは、書類データ及びストローク情報を記憶する記憶部を有し、
前記書類データは、ユーザがイベントにおいて使用した紙に印刷された情報を含み、
前記ストローク情報は、前記書類データに係る紙面上で特定された位置及び該位置が特定された時刻を含み、
前記端末は、
前記イベントを特定可能な情報に基づいて、当該イベントに関連して作成されたストローク情報を、前記コンテンツサーバから取得し、
前記取得したストローク情報を作成したユーザ毎に、前記ストローク情報を分類し、
前記分類されたストローク情報を、前記イベントの進行に従って表示することを特徴とする情報表示方法。
An information display method used in an information management system including a content server that stores data and a terminal that inputs and outputs the data,
The content server has a storage unit for storing document data and stroke information,
The document data includes information printed on paper used by the user at the event,
The stroke information includes a position specified on the paper surface related to the document data and a time when the position is specified,
The terminal
Based on the information that can identify the event, the stroke information created in relation to the event is acquired from the content server,
For each user who created the acquired stroke information, classify the stroke information,
An information display method, wherein the classified stroke information is displayed according to the progress of the event.
請求項11に記載の情報表示方法であって、
前記端末は、
選択された前記ストローク情報に基づいて、当該選択されたストローク情報に関係するイベントを特定し、
当該選択されたストローク情報の作成時間と、他のストローク情報の作成時間との重複度を、前記ユーザ毎に判定し、
前記判定された重複度の高いユーザの順に、前記分類されたストローク情報を表示することを特徴とする。
The information display method according to claim 11,
The terminal
Based on the selected stroke information, identify an event related to the selected stroke information,
The degree of overlap between the creation time of the selected stroke information and the creation time of other stroke information is determined for each user,
The classified stroke information is displayed in the order of the determined users with the highest degree of duplication.
請求項11に記載の情報表示方法であって、
前記端末は、
選択された前記ストローク情報に基づいて、当該選択されたストローク情報に関係するイベントを特定し、
当該選択されたストローク情報と重複する時間に作成された他のストローク情報を集計し、
前記集計されたストローク情報の数を、前記イベントの進行に従って表示することを特徴とする。
The information display method according to claim 11,
The terminal
Based on the selected stroke information, identify an event related to the selected stroke information,
Aggregate other stroke information created at the same time as the selected stroke information,
The total number of stroke information is displayed according to the progress of the event.
請求項11に記載の情報表示方法であって、前記ストローク情報は、当該ストローク情報に関連するイベントの情報、及び、当該ストローク情報の公開制限情報を含むことを特徴とする。  12. The information display method according to claim 11, wherein the stroke information includes event information related to the stroke information and disclosure restriction information of the stroke information. 請求項14に記載の情報表示方法であって、前記公開制限情報は、当該ストローク情報を作成した者を公開する、当該ストローク情報を作成した者を匿名で公開する、又は、当該ストローク情報を作成した者を公開しない、の3種類のうち、少なくとも一つを含むことを特徴とする。  The information display method according to claim 14, wherein the disclosure restriction information is disclosed to a person who created the stroke information, a person who created the stroke information is disclosed anonymously, or the stroke information is created. It is characterized by including at least one of the three types of not disclosing the person who made it. 請求項15に記載の情報表示方法であって、
前記コンテンツサーバは、
前記公開制限情報が、当該ストローク情報を作成した者を公開しない、であれば、当該ストローク情報を作成した者の情報を隠蔽して前記端末に送信し、
前記公開制限情報が、当該ストローク情報を作成した者を匿名で公開する、であれば、当該ストローク情報を作成した者の情報を匿名化して前記端末に送信し、
前記公開制限情報が、当該ストローク情報を作成した者を公開する、であれば、当該ストローク情報を作成した者の情報を、そのまま前記端末に送信することを特徴とする。
The information display method according to claim 15, comprising:
The content server
If the disclosure restriction information does not disclose the person who created the stroke information, the information of the person who created the stroke information is concealed and transmitted to the terminal,
If the disclosure restriction information is to anonymously disclose the person who created the stroke information, the information of the person who created the stroke information is anonymized and transmitted to the terminal,
If the disclosure restriction information discloses the person who created the stroke information, the information of the person who created the stroke information is transmitted to the terminal as it is.
請求項11に記載の情報表示方法であって、
前記イベントに関するストローク情報の集計を要求した者が、当該イベントの出席者であるか否かを判定し、
前記要求者が、当該イベントの出席者であれば、当該ストローク情報の出席者に対する公開制限情報によって、当該ストローク情報の公開の可否を判定し、
前記要求者が、当該イベントの出席者でなければ、当該ストローク情報の非出席者に対する公開制限情報によって、当該ストローク情報の公開の可否を判定することを特徴とする。
The information display method according to claim 11,
It is determined whether the person who requested the aggregation of stroke information related to the event is an attendee of the event,
If the requester is an attendee of the event, it is determined whether or not the stroke information can be disclosed based on the disclosure restriction information for the attendee of the stroke information.
If the requester is not an attendee of the event, whether or not the stroke information can be disclosed is determined based on disclosure restriction information for the non-attendant of the stroke information.
JP2007506974A 2005-03-10 2005-03-10 Information management system Expired - Fee Related JP4560543B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2005/004712 WO2006095443A1 (en) 2005-03-10 2005-03-10 Information management system

Publications (2)

Publication Number Publication Date
JPWO2006095443A1 true JPWO2006095443A1 (en) 2008-08-14
JP4560543B2 JP4560543B2 (en) 2010-10-13

Family

ID=36953054

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007506974A Expired - Fee Related JP4560543B2 (en) 2005-03-10 2005-03-10 Information management system

Country Status (2)

Country Link
JP (1) JP4560543B2 (en)
WO (1) WO2006095443A1 (en)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008117192A (en) * 2006-11-06 2008-05-22 Dainippon Printing Co Ltd Processor and program
JP4548426B2 (en) * 2007-01-24 2010-09-22 富士ゼロックス株式会社 WRITING INFORMATION MANAGEMENT DEVICE, WRITING INFORMATION MANAGEMENT SYSTEM, AND PROGRAM
JP5181481B2 (en) * 2007-01-24 2013-04-10 セイコーエプソン株式会社 Information display device and program
JP2008181335A (en) * 2007-01-24 2008-08-07 Seiko Epson Corp Information management device, information distribution system, and program
JP2009059043A (en) * 2007-08-30 2009-03-19 Chiritumo Inc Digital information display system and digital information display method, and server device and terminal device
JP5267950B2 (en) * 2009-08-25 2013-08-21 大日本印刷株式会社 Information processing system and program thereof
JP5870036B2 (en) * 2010-12-24 2016-02-24 ファンラーニング株式会社 Page transition management system, transition management server device, and transition management program
JP5270018B1 (en) * 2012-05-11 2013-08-21 株式会社東芝 System and handwritten document management method
JP6003501B2 (en) * 2012-10-03 2016-10-05 富士ゼロックス株式会社 Information processing system and program
JP5366035B2 (en) * 2012-11-08 2013-12-11 大日本印刷株式会社 Computer apparatus and program
JP2018028941A (en) * 2017-11-08 2018-02-22 カシオ計算機株式会社 Server device, system, and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06343146A (en) * 1993-03-15 1994-12-13 Toshiba Corp Reproducing device and reproducing method
JP2003085269A (en) * 2001-09-12 2003-03-20 Hitachi Ltd Method and system for inviting/opening solution to problem
JP2004080769A (en) * 2002-07-30 2004-03-11 Fuji Xerox Co Ltd Method for filtering and seeing common index of annotations of multimedia or video streams, system, user interface, and program for practice

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06343146A (en) * 1993-03-15 1994-12-13 Toshiba Corp Reproducing device and reproducing method
JP2003085269A (en) * 2001-09-12 2003-03-20 Hitachi Ltd Method and system for inviting/opening solution to problem
JP2004080769A (en) * 2002-07-30 2004-03-11 Fuji Xerox Co Ltd Method for filtering and seeing common index of annotations of multimedia or video streams, system, user interface, and program for practice

Also Published As

Publication number Publication date
WO2006095443A1 (en) 2006-09-14
JP4560543B2 (en) 2010-10-13

Similar Documents

Publication Publication Date Title
JP4560543B2 (en) Information management system
JP4545792B2 (en) Document management system
US10282072B2 (en) Method and apparatus for identifying user-selectable elements having a commonality thereof
JP4725038B2 (en) Content sharing system and content importance determination method
US8644646B2 (en) Automatic identification of digital content related to a block of text, such as a blog entry
US8010508B2 (en) Information elements locating system and method
JP4802672B2 (en) Electronic document management apparatus, electronic document management program, electronic document management system
US20080236904A1 (en) Method and system for collaborative capture and replay of digital media files using multimodal documents
WO2008014408A1 (en) Method and system for displaying multimedia content
AU2006238811A1 (en) Aggregation and synchronization of nearby media
JP2013047960A (en) Method for presenting set of digital multimedia object
CN101292258A (en) System and methods for creation and use of a mixed media environment
JP2003216650A (en) Graphical user interface for information intermediation system
CN104040469A (en) Content selection in a pen-based computing system
JP2004362043A (en) Project managing system
Suh et al. Semi-automatic photo annotation strategies using event based clustering and clothing based person recognition
CN106095738A (en) Recommendation tables single slice
JP2009506395A (en) System, apparatus and method for use in a mixed media environment
Adams et al. Extraction of social context and application to personal multimedia exploration
US20080147687A1 (en) Information Management System and Document Information Management Method
JP4729879B2 (en) Information management method and information management apparatus
US20090119608A1 (en) Face and subject tagging with relationship indexing in files to enhance organization and usability
CA2602831A1 (en) Method and system for distinguising elements of information in time portions of an axis
KR101628054B1 (en) Virtual space providing apparatus and method
JP4543761B2 (en) Content sharing system and content container creation method

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100420

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100617

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100706

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100726

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130730

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees