JP5487854B2 - 文書情報収集システム、文書情報収集方法、文書情報収集プログラム - Google Patents
文書情報収集システム、文書情報収集方法、文書情報収集プログラム Download PDFInfo
- Publication number
- JP5487854B2 JP5487854B2 JP2009222520A JP2009222520A JP5487854B2 JP 5487854 B2 JP5487854 B2 JP 5487854B2 JP 2009222520 A JP2009222520 A JP 2009222520A JP 2009222520 A JP2009222520 A JP 2009222520A JP 5487854 B2 JP5487854 B2 JP 5487854B2
- Authority
- JP
- Japan
- Prior art keywords
- document
- document information
- information
- state
- collection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
また、文書情報収集のための収集ポリシーを設定して、この収集ポリシーに基づき文書情報収集を行うことによっても、文書情報収集に係るリソース利用の効率性を高めることができる。
このため、文書情報の収集効率を高めることが困難であると共に、文書情報収集に係るリソース利用の効率性を高めることができないといった不都合が生じ得る。
本発明は、上記関連技術の有する不都合を改善し、文書情報の収集にかかるリソースの負荷を有効に軽減し得る文書情報収集システム、文書情報収集方法、文書情報収集プログラムを提供することを、その目的とする。
次に、本発明の実施形態について、その基本的構成内容を説明する。
更に、文書情報収集サーバ200は、データベースサーバ100に格納されている管理テーブルの内容に基づいて、文書格納サーバ内に記憶された文書情報の文書状態を推定(設定)すると共に、推定(設定)された内容に基づきデータベースサーバ100に格納された管理テーブルの内容を更新する。
このため、文書格納サーバ300に格納された各文書情報(企業内文書)は、当該文書情報の生成時点、または編集時点を基準として、1)作成、2)承認、3)公開、4)保管、5)廃棄の何れかの状態にあるものとする。
例えば、文書状態が、(1)作成、または(2)承認状態にある文書情報は、一般に、頻繁に変更される確率が高く、また、(3)公開、または(4)保管の状態(文書状態)にある文書情報は、頻繁に変更される確率が低い。
データベースサーバ100は、図1に示すように、文書情報収集サーバ200により収集された文書情報を記憶保持する文書情報管理テーブル110と、文書情報収集部230により収集された文書情報のメタ情報を記憶保持する文書状態管理テーブル120と、文書情報の収集が行われる対象サーバである文書格納サーバ300に係る情報を記憶保持するサーバ情報管理テーブル130とを備え、更に、上記文書情報管理テーブル110、文書状態管理テーブル120、およびサーバ情報管理テーブル130それぞれのデータフィルールドの更新を行うデータベース更新制御部を備えた構成を有する。
尚、データベースサーバ100は、HDDなどの記憶装置と、CPU、メモリなどを備えた一般のサーバコンピュータであって、上記CPUが予め設定されたプログラムに基づく実行処理を行うことにより、データベース更新制御部を実現するものとする。
ここで、状態判定スコアとは、例えば図3(b)に示すように、各文書情報の文書状態の段階を示す数値であり、例えば、対象文書情報の優先度を示す数値として優先度の高さに応じて0〜1の数値が設定される設定としてもよい。
また、状態判定スコアは文書状態に対応して、例えば、0〜0.2は作成状態、0.21〜0.4は承認状態、0.41〜0.6は公開状態、0.61〜0.8は保管状態、0.81〜1は廃棄状態を示す設定であってもよい。
一方、iの値がnの値より大きい場合、文書状態推定部210は、状態判定スコアをnで除算し、その結果を状態判定スコアとしてデータベースサーバ100に返信する。
また、文書状態推定部210は、データベースサーバ100に対して、対象文書情報の履歴情報および状態判定スコアの更新を要求する判定スコア更新要求機能(S107)を備えている。
また、文書情報収集要求部220は、取得した文書IDに対応した文書情報の格納先のサーバIDおよび格納パスを、データベースサーバ100に対して要求する格納パス要求機能と、取得したサーバIDのサーバIPアドレスを、データベースサーバ100に対して要求するサーバIPアドレス取得要求を有する。
ここで、文書情報収集要求部220は、文書情報管理テーブル110に格納された文書情報を文書情報収集要求キューに格納する際に、どちらの文書情報収集要求キュー(241、242)に振り分けるかを、文書状態管理テーブル120に格納された状態判定スコアに基づき決定する。
尚、本実施形態では、文書状態が(作成、承認)または(公開、保管、廃棄)のどちらの状態にあるかを判定できればよく、文書情報収集要求部220は、図6に示すように、状態判定スコアが予め設定された閾値以上である場合を(作成、承認)の状態、状態判定スコアがこの閾値未満である場合は(公開、保管、廃棄)の状態にあると判定するものとする。
また、文書情報収集要求部220は、状態判定スコアに基づき優先度が高い(状態判定スコアが閾値以上)と判定された文書情報にかかる文書関連情報(例えば、URI情報)を、文書情報収集要求キュー(高優先度)241に格納する。また、状態判定スコアに基づき優先度が低い(状態判定スコアが閾値未満)と判定された文書情報にかかるURI情報(文書関連情報)を、文書情報収集要求キュー(低優先度)242に格納する。
これにより、(作成、承認)の状態の文書情報は、文書情報収集部(高優先度)231により高頻度に収集され、一方、(公開、保管、廃棄)の状態にある文書は、文書情報収集部232により低頻度に収集される。このため、優先度が高い文書情報は短い間隔で、優先度が低い文書情報は長い間隔でそれぞれ収集される。
また、文書情報収集要求部220は、上述のように、文書情報収集管理部230が収集対象とする文書情報に係る文書関連情報を、文書情報収集要求キュー(高優先度)241および文書情報収集要求キュー(低優先度)242に対して格納する。文書情報収集管理部(230)は、文書情報収集要求部(220)が文書情報収集要求キュー(241、242)に格納した情報に基づいて文書情報を収集を行う。
ここで、文書情報収集部230は、文書情報収集要求キュー240により指定されたURLを含むメッセージを文書格納サーバ300に対して送信することにより、URLにより特定される文書情報の取得要求を行う。
ここでは、例えば、文書情報収集部(高優先度)231が、100文書/分のペースで文書情報を収集し、また、文書情報収集部(低優先度)232が、1文書/分のペースで文書情報を収集するものとする。
更に、文書情報収集部230は、文書状態推定部210に対して予め格納された対象文書情報の状態判定スコアの更新を要求する状態判定スコア更新要求機能を有する。
また、文書情報収集要求キュー格納部(低優先度)242は、低優先度と判定された文書情報に係るURI情報をキューの末尾に追加する処理を行う追加格納処理機能を備えている。
また、上記文書状態管理テーブル120には、例えば図3(b)に示すように、収集された各文書情報の文書ID、作成された日時(作成日時)、更新の行われた日時(更新日時(1)〜(n))、状態判定スコアがテーブル情報(文書レコード)として格納されている。
更に、上記サーバ情報管理テーブル130には、例えば図3(c)に示すように、収集が行われる文書情報の格納先である各文書格納サーバのサーバID、サーバIPアドレス、サーバ種別がテーブル情報として格納されている。
ここで、作成された文書レコードには、対象文書情報の文書ID、文書内容、作成日時、および更新日時が含まれているものとする。
また、データベース更新制御部は、文書状態管理テーブル120の文書IDに対応するレコードの履歴情報フィールドおよび状態判定スコア(フィールド)の更新を行う状態判定スコア更新機能を備えている。
尚、上記Webサーバ310、Sambaサーバ320、NFSサーバ330は、ネットワークに接続されたそれぞれ異なるサーバコンピュータ上で動作する構成であってもよい。
これにより、文書情報の収集にかかるシステムリソースの処理負荷をより有効に軽減することができる。
これにより、本実施形態では、企業内文書それぞれのライフサイクルに基づいて、効率的な文書情報の収集を行うことができ、このため、文書情報の収集にかかるリソース利用の効率性を有効に高めることができる。
次に、本実施形態の動作について、その概略を説明する。
まず、文書状態推定部210が、文書格納サーバ300に記憶された文書情報の作成および更新された日時にかかる情報を示す文書履歴情報を取得し(履歴情報取得工程)、前記文書情報が予め設定された基準頻度より高頻度に内容変更される状態にあるか前記基準頻度より低頻度に内容変更される状態にあるかを示す更新頻度状態を文書履歴情報に基づき設定し(更新頻度状態推定工程)、設定された頻度状態に基づき文書情報の収集を行う周期を前記収集頻度として決定し(収集頻度決定工程)、文書情報収集管理部230が、文書情報記憶装置から前記各文書情報を前記決定された収集頻度で収集する(文書情報収集工程)。
データベースサーバ100(データベースサーバ更新制御部)は、文書状態管理テーブル120から、取得要求に含まれる文書IDに対応する文書レコードの履歴情報フィールド(作成日時、更新日時(1)〜(n)、状態判定スコア)を取得し、文書状態推定部210に送信する(ステップS102)。
次いで、文書状態推定部210は、作成した履歴情報から文書の状態判定スコアを計算し(ステップS106)、データベースサーバ100に文書の履歴情報および状態判定スコアに対応する文書レコード(エントリ)の作成を要求する(ステップS108)。
データベースサーバ100は、文書状態推定部210からの要求に応じて、文書状態管理テーブルに取得した文書情報(対象文書情報)に対応する文書レコードを作成する(ステップS109)。
文書情報収集要求キュー240は、この要求に応じて文書情報収集要求キュー241、242からURI情報を取り出し、文書情報収集部230に返信する(ステップS302)。
文書格納サーバ300は、取得要求に含まれるURI情報に対応した文書情報、および当該文書情報のメタ情報を、文書情報収集部230に送信する(ステップS304)。
次に、文書情報収集部230は、文書状態推定部210に対して、対象文書情報の状態判定スコアの更新を要求する(ステップS309)。
文書状態推定部210は、この要求に応じて、上述のように、対象文書情報の状態判定スコアの更新を行う(図4)。
データベースサーバ100(データベース更新制御部)は、文書状態管理テーブル120から文書IDフィールド、および状態判定スコアフィールドを取得し、文書情報収集要求部220に返信する(ステップS202)。
データベースサーバ100は、文書情報管理テーブル110から文書IDに対応する文書レコード(エントリ)のサーバIDフィールドおよび格納パスフィールドを取得して文書情報収集要求部220に返信する(ステップS204)。
データベースサーバ100は、サーバ情報管理テーブル130からサーバIDに対応するエントリのサーバIPアドレスフィールドを取得し文書情報収集要求部220に返信する(ステップS206)。
ここで、取得した状態判定スコアがこの閾値以上の値である場合、文書情報収集要求部220は、対象文書情報のURI情報(文書ID、サーバIPアドレス、および格納パス)の文書情報収集要求キュー(高優先度)241に対する追加登録を、文書情報収集要求キュー管理部240に要求する(ステップS207)。
文書情報収集要求キュー管理部240は、このURI情報を、文書情報収集要求キュー(高優先度)241の末尾に追加する(ステップS210)。
文書情報収集要求キュー管理部240は、要求に応じてこのURI情報を、文書情報収集要求キュー(低優先度)242の末尾に追加する(ステップS209)。
また、文書情報収集部(低優先度)232は、文書情報収集要求キュー242から優先度の低い文書情報のURI情報を取得することとなる。このため、文書情報収集部(低優先度)232は、文書情報収集部(高優先度)231における収集動作よりも低頻度で、内容の更新頻度が低い(公開、保管)の状態にある文書情報の収集を行う。
100 データベースサーバ(文書データベース)
110 文書情報管理テーブル
120 文書状態管理テーブル
130 サーバ情報管理テーブル
200 文書情報収集サーバ
210 文書状態推定部(履歴情報取得部、更新頻度状態推定部、収集頻度決定部)
220 文書情報収集要求部
230 文書情報収集管理部(文書情報収集装置)
231 文書情報収集部(高優先度)
232 文書情報収集部(低優先度)
240 文書情報収集要求キュー管理部
241 文書情報収集要求キュー(高優先度)
242 文書情報収集要求キュー(低優先度)
300 文書格納サーバ(文書情報記憶装置)
310 Webサーバ
320 Sambaサーバ
330 NFSサーバ
Claims (6)
- 文書情報を記憶保持する文書情報記憶装置と、前記各文書情報を当該各文書情報に対応して予め設定された収集頻度で収集を行うと共に前記収集した文書情報を予め設定された文書データベースに格納する文書情報収集装置とを備えた文書情報収集システムであって、
前記文書情報収集装置が、
前記各文書情報の作成および更新された日時にかかる情報を示す文書履歴情報を取得する履歴情報取得部と、
前記文書履歴情報に基づいて前記各文書が文書のライフサイクルにおけるどの状態にあるかを示す状態判定スコアを算出し、この状態判定スコアが予め設定された閾値以上であるか否かに応じて前記各文書情報が内容変更される頻度が高頻度であるか低頻度であるかを示す更新頻度状態を推定し設定する更新頻度状態推定部と、
前記設定された更新頻度状態に基づき前記文書情報収集装置が一定期間内に前記各文書情報の収集を行う度合いを前記収集頻度として決定する収集頻度決定部とを備えたことを特徴とする文書情報収集システム。 - 請求項1に記載の文書情報収集システムにおいて、
前記収集頻度決定部は、前記文書情報の更新頻度状態に基づき前記文書情報収集装置により収集が行われる前記文書情報の優先度を設定する収集優先度設定手段を備えたことを特徴とする文書情報収集システム。 - 請求項1または2に記載の文書情報収集システムにおいて、
前記文書データベースは、前記収集された文書情報それぞれの文書履歴情報を前記各文書情報に対応させて記憶する文書履歴情報記憶手段を備えたことを特徴とする文書情報収集システム。 - 請求項1に記載の文書情報収集システムにおいて、
前記文書データベースが、前記算出された状態判定スコアを前記文書情報それぞれに対応させて記憶する状態判定スコア記憶手段を備えると共に、
前記文書情報収集装置が、予め収集された前記文書情報が新たに収集された場合に当該文書情報の更新頻度状態に基づき前記文書データベースに予め記憶された状態判定スコアを更新するよう要求する状態判定スコア更新要求機能を備えたことを特徴とする文書情報収集システム。 - 作成および更新された文書情報を記憶保持する文書情報記憶装置と、前記各文書情報を当該各文書情報に対応して予め設定された収集頻度で収集し予め設定された文書情報収集装置とを備えた文書情報収集システムにあって、予め設定された文書データベースに格納するための文書情報収集方法であって、
前記各文書情報の作成および更新された日時にかかる情報を示す文書履歴情報を取得し、
前記文書履歴情報に基づいて前記各文書が文書のライフサイクルにおけるどの状態にあるかを示す状態判定スコアを算出し、
前記文書情報が予め設定された基準頻度より高頻度に内容変更される状態にあるか前記基準頻度より低頻度に内容変更される状態にあるかを示す更新頻度状態を前記状態判定スコアが予め設定された閾値以上であるか否かに応じて設定し、
前記設定された更新頻度状態に基づき前記文書情報収集装置が一定期間内に前記各文書情報の収集を行う度合いを前記収集頻度として決定し、
前記文書情報記憶装置から前記各文書情報を前記決定された収集頻度で収集することを特徴とする文書情報収集方法。 - 作成および更新された文書情報を記憶保持する文書情報記憶装置と、前記各文書情報を当該各文書情報に対応して予め設定された収集頻度で収集し予め設定された文書情報収集装置とを備えた文書情報収集システムにあって、予め設定された文書データベースに格納する文書情報収集プログラムであって、
前記各文書情報の作成および更新された日時にかかる情報を示す文書履歴情報を取得する処理を行う履歴情報取得機能と、
前記文書履歴情報に基づいて前記各文書が文書のライフサイクルにおけるどの状態にあるかを示す状態判定スコアを算出し、この状態判定スコアが予め設定された閾値以上であるか否かに応じて前記各文書情報が内容変更される頻度が高頻度であるか低頻度であるかを示す更新頻度状態を推定し設定する更新頻度状態推定機能と、
前記設定された更新頻度状態に基づき前記文書情報収集装置が一定期間内に前記各文書情報の収集を行う度合いを前記収集頻度として決定する収集頻度決定機能と、
前記文書情報記憶装置から前記各文書情報を前記決定された収集頻度で収集する処理を行う文書情報収集機能とを予め設定されたコンピュータに実現させることを特徴とする文書情報収集プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009222520A JP5487854B2 (ja) | 2009-09-28 | 2009-09-28 | 文書情報収集システム、文書情報収集方法、文書情報収集プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009222520A JP5487854B2 (ja) | 2009-09-28 | 2009-09-28 | 文書情報収集システム、文書情報収集方法、文書情報収集プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011070523A JP2011070523A (ja) | 2011-04-07 |
JP5487854B2 true JP5487854B2 (ja) | 2014-05-14 |
Family
ID=44015732
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009222520A Active JP5487854B2 (ja) | 2009-09-28 | 2009-09-28 | 文書情報収集システム、文書情報収集方法、文書情報収集プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5487854B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6103228B2 (ja) * | 2013-07-24 | 2017-03-29 | Kddi株式会社 | データ収集装置、データ収集方法、およびプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002099557A (ja) * | 2000-09-22 | 2002-04-05 | Matsushita Electric Ind Co Ltd | 情報提供装置及び情報提供方法 |
JP2004118415A (ja) * | 2002-09-25 | 2004-04-15 | Fujitsu Ltd | 情報収集方法及びその方法における処理をコンピュータに行なわせるためのプログラム |
JP4380375B2 (ja) * | 2003-03-19 | 2009-12-09 | 富士ゼロックス株式会社 | 文書収集装置および文書収集用コンピュータプログラム |
JP2004070957A (ja) * | 2003-08-01 | 2004-03-04 | Toshiba Corp | 検索システム |
-
2009
- 2009-09-28 JP JP2009222520A patent/JP5487854B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2011070523A (ja) | 2011-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100906262B1 (ko) | 원자적으로 갱신되는 중앙 캐시 메모리를 위한 방법 및시스템 | |
KR101150146B1 (ko) | 클라이언트가 서버와 상호작용하는 컴퓨터 구현 방법, 서버가 클라이언트와 상호작용하는 컴퓨터 구현 방법, 오브젝트를 공유하는 분산 파일 시스템 및 컴퓨터 판독가능 기록 매체 | |
WO2011108021A1 (en) | File level hierarchical storage management system, method, and apparatus | |
CN107943718B (zh) | 一种清理缓存文件的方法和装置 | |
CN108055302B (zh) | 一种图片缓存处理方法、系统和服务器 | |
US8041893B1 (en) | System and method for managing large filesystem-based caches | |
CN106230997B (zh) | 一种资源调度方法和装置 | |
JP2008546076A (ja) | 時間制限メッセージの効率的な処理 | |
JP2008293218A (ja) | ファイル管理システム、ファイル管理方法、ファイル管理プログラム | |
CN112052247A (zh) | 搜索引擎的索引更新系统、方法、装置、电子设备、存储介质 | |
CN111026728A (zh) | 一种日志数据处理方法及相关装置 | |
US8583662B2 (en) | Managing data across a plurality of data storage devices based upon collaboration relevance | |
US20060106960A1 (en) | Deleting expired items in a queue data structure | |
JP5487854B2 (ja) | 文書情報収集システム、文書情報収集方法、文書情報収集プログラム | |
JP5956064B2 (ja) | 計算機システム、データ管理方法、及び計算機 | |
CN110554914B (zh) | 资源锁管理方法、装置、服务器及存储介质 | |
US8805942B2 (en) | Storing and partitioning email messaging data | |
JP5131062B2 (ja) | 文書管理プログラム、文書管理装置及び文書管理システム | |
US9075857B2 (en) | Computer-readable non-transitory medium storing therein a control program, management apparatus, and information processing system | |
JP6135430B2 (ja) | 情報処理装置、方法、プログラム、及びシステム | |
JP2006139398A (ja) | キャッシュサーバ及びコンテンツ選定保持方法 | |
JP6522261B1 (ja) | ファイルの属性情報を管理する方法及びコンピューティング装置{method for managing attribute information of file and computing device using the same} | |
US10506063B2 (en) | Method and apparatus for caching user generated content messages | |
JP6638486B2 (ja) | ファイル管理装置及びプログラム | |
JP2004310630A (ja) | キャッシュ制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120808 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130904 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130917 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140210 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5487854 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |