JP2011192096A - 分析処理調整装置及び方法 - Google Patents
分析処理調整装置及び方法 Download PDFInfo
- Publication number
- JP2011192096A JP2011192096A JP2010058609A JP2010058609A JP2011192096A JP 2011192096 A JP2011192096 A JP 2011192096A JP 2010058609 A JP2010058609 A JP 2010058609A JP 2010058609 A JP2010058609 A JP 2010058609A JP 2011192096 A JP2011192096 A JP 2011192096A
- Authority
- JP
- Japan
- Prior art keywords
- archive data
- analysis
- data
- archive
- analysis processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 79
- 238000000034 method Methods 0.000 title claims abstract description 33
- 230000001105 regulatory effect Effects 0.000 title abstract 3
- 238000004458 analytical method Methods 0.000 claims abstract description 139
- 238000012937 correction Methods 0.000 claims abstract description 41
- 238000003860 storage Methods 0.000 claims abstract description 33
- 238000013500 data storage Methods 0.000 claims abstract description 24
- 238000007726 management method Methods 0.000 claims description 29
- 230000008569 process Effects 0.000 claims description 25
- 238000004891 communication Methods 0.000 claims description 19
- 230000004048 modification Effects 0.000 claims description 6
- 238000012986 modification Methods 0.000 claims description 6
- 238000007405 data analysis Methods 0.000 abstract description 15
- 238000010276 construction Methods 0.000 abstract description 4
- 239000000284 extract Substances 0.000 abstract description 3
- 230000006870 function Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000009193 crawling Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【解決手段】分析処理調整装置1は、クローラ等から得られたアーカイブデータを受信するアーカイブデータ受信部11と、アーカイブデータに基づいてWebページのURLを抽出してURLリストを記憶するURLリスト記憶部21と、アーカイブデータに対して分析処理を実行した結果として得られた、インデックスDBに反映するための分析データをURLリストに付加するアーカイブデータ分析部14と、アーカイブデータ受信部11が受信しアーカイブデータ記憶部22に記憶されたWebページの所定のURLに係るアーカイブデータを修正するアーカイブデータ修正部15と、修正されたアーカイブデータをアーカイブデータ受信部11に受け渡すアーカイブデータ受渡部16とを備える。
【選択図】図1
Description
[検索システム100の全体構成及び分析処理調整装置1の機能構成]
図1は、本実施形態に係る検索システム100の全体構成及び分析処理調整装置1の機能構成を示す図である。
次に、分析処理調整装置1での処理について説明する。図2は、本実施形態に係る分析処理調整装置1のフローチャートである。図3は、本実施形態に係るデータの概要を説明する図である。
本実施形態は、URLリスト記憶部にURLリストを記憶するものであったが、これに限定されるものではない。例えば、分析処理調整装置に対して通信ネットワークを介して接続された別の記憶領域にURLリストを記憶してもよいし、分析処理調整装置として実行するプログラム上でデータを保有しつづけていてもよい。
3 Webサーバ
4 インデックスサーバ
5 管理端末
10 制御部
11 アーカイブデータ受信部
12 メタデータ作成部
13 URLリスト記憶制御部
14 アーカイブデータ分析部
15 アーカイブデータ修正部
16 アーカイブデータ受渡部
17 分析データ修正部
20 記憶部
21 URLリスト記憶部
22 アーカイブデータ記憶部
30 アーカイブデータ
34 URLリスト
35 分析データ
36 修正後分析データ
38 修正後アーカイブデータ
100 検索システム
Claims (6)
- クローラ又はフィーダによって得られたWebページのコンテンツであるアーカイブデータを受信するアーカイブデータ受信手段と、
前記アーカイブデータに基づいて前記WebページのURLを抽出して入力対象リストを記憶する入力対象リスト記憶手段と、
前記アーカイブデータに対して分析処理を実行した結果として得られた、Webページの検索で用いるインデックスDBに反映するための分析データを、前記入力対象リスト記憶手段が記憶した前記入力対象リストに対して付加する分析手段と、
前記アーカイブデータ受信手段により受信した前記アーカイブデータを記憶するアーカイブデータ記憶手段と、
前記アーカイブデータ記憶手段に記憶され、前記Webページの所定のURLに係るアーカイブデータを修正するアーカイブデータ修正手段と、
前記アーカイブデータ修正手段により修正されたアーカイブデータを前記アーカイブデータ受信手段に受け渡すアーカイブデータ受渡手段と、
を備える分析処理調整装置。 - 前記アーカイブデータ記憶手段に記憶された前記アーカイブデータに基づいて、前記分析手段が付加した前記入力対象リストに係る前記分析データを修正する分析データ修正手段を備える、
請求項1に記載の分析処理調整装置。 - 前記分析データ修正手段は、前記分析処理調整装置に対して通信ネットワークを介して接続された管理端末からの入力によって、前記分析手段が付加した前記入力対象リストに係る前記分析データを修正する、
請求項2に記載の分析処理調整装置。 - 前記アーカイブデータ修正手段は、前記分析処理調整装置に対して通信ネットワークを介して接続された管理端末からの入力によって、前記アーカイブデータ記憶手段に記憶された前記アーカイブデータに対して修正する、
請求項1から請求項3までのいずれかに記載の分析処理調整装置。 - 前記分析手段は、前記アーカイブデータを複数の異なる工程を経由して順番に前記分析処理を実行し、得られた複数の前記分析データを前記入力対象リストに対して付加する、
請求項1から請求項4までのいずれかに記載の分析処理調整装置。 - クローラ又はフィーダによって得られたWebページのコンテンツであるアーカイブデータを受信する受信ステップと、
前記アーカイブデータに基づいて前記WebページのURLを抽出して入力対象リストを記憶させる入力対象リスト記憶ステップと、
前記アーカイブデータに対して分析処理を実行した結果として得られた、Webページの検索で用いるインデックスDBに反映するための分析データを、記憶された前記入力対象リストに対して付加する付加ステップと、
前記アーカイブデータを記憶させるアーカイブデータ記憶ステップと、
通信ネットワークを介して接続された管理端末からの入力によって、前記アーカイブデータ記憶ステップにより記憶され、前記Webページの所定のURLに係るアーカイブデータを修正する修正ステップと、
前記管理端末からの入力がなくなるまで、前記修正ステップにより修正された修正後の前記アーカイブデータを前記アーカイブデータとして、前記入力対象リスト記憶ステップ、前記付加ステップ、前記アーカイブデータ記憶ステップ、及び前記修正ステップを繰返す繰返しステップと、
を含む分析処理調整方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010058609A JP5084857B2 (ja) | 2010-03-16 | 2010-03-16 | 分析処理調整装置及び方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010058609A JP5084857B2 (ja) | 2010-03-16 | 2010-03-16 | 分析処理調整装置及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011192096A true JP2011192096A (ja) | 2011-09-29 |
JP5084857B2 JP5084857B2 (ja) | 2012-11-28 |
Family
ID=44796915
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010058609A Active JP5084857B2 (ja) | 2010-03-16 | 2010-03-16 | 分析処理調整装置及び方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5084857B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001350778A (ja) * | 2000-06-09 | 2001-12-21 | Canon Inc | 文書管理システム、情報処理装置、文書管理方法および記憶媒体 |
JP2006202118A (ja) * | 2005-01-21 | 2006-08-03 | Yafoo Japan Corp | 属性評価装置、属性評価方法および属性評価プログラム |
JP2007052552A (ja) * | 2005-08-16 | 2007-03-01 | Oki Electric Ind Co Ltd | コンテンツ管理方法及びコンテンツ管理システム |
JP2008097617A (ja) * | 2007-10-26 | 2008-04-24 | Nec Corp | ハイパーテキスト検査装置および方法ならびにプログラム |
JP2009146013A (ja) * | 2007-12-12 | 2009-07-02 | Fujifilm Corp | コンテンツ検索方法及び装置並びにプログラム |
-
2010
- 2010-03-16 JP JP2010058609A patent/JP5084857B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001350778A (ja) * | 2000-06-09 | 2001-12-21 | Canon Inc | 文書管理システム、情報処理装置、文書管理方法および記憶媒体 |
JP2006202118A (ja) * | 2005-01-21 | 2006-08-03 | Yafoo Japan Corp | 属性評価装置、属性評価方法および属性評価プログラム |
JP2007052552A (ja) * | 2005-08-16 | 2007-03-01 | Oki Electric Ind Co Ltd | コンテンツ管理方法及びコンテンツ管理システム |
JP2008097617A (ja) * | 2007-10-26 | 2008-04-24 | Nec Corp | ハイパーテキスト検査装置および方法ならびにプログラム |
JP2009146013A (ja) * | 2007-12-12 | 2009-07-02 | Fujifilm Corp | コンテンツ検索方法及び装置並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP5084857B2 (ja) | 2012-11-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10114818B2 (en) | System and method for locating bilingual web sites | |
US7660787B2 (en) | Customized, personalized, integrated client-side search indexing of the web | |
JP6356273B2 (ja) | バッチ最適化レンダリング及びフェッチアーキテクチャ | |
US8799262B2 (en) | Configurable web crawler | |
US8892543B1 (en) | Iterative off-line rendering process | |
US20110016104A1 (en) | Centralized web-based system for automatically executing search engine optimization principles for one, or more website(s) | |
JP2017157192A (ja) | キーワードに基づいて画像とコンテンツアイテムをマッチングする方法 | |
US20130019189A1 (en) | Augmented editing of an online document | |
US20130219255A1 (en) | Authorized Syndicated Descriptions of Linked Web Content Displayed With Links in User-Generated Content | |
US20120016857A1 (en) | System and method for providing search engine optimization analysis | |
JP4746439B2 (ja) | 文書検索サーバおよび文書検索方法 | |
JP6363682B2 (ja) | 画像とコンテンツのメタデータに基づいてコンテンツとマッチングする画像を選択する方法 | |
RU2733482C2 (ru) | Способ и система для обновления базы данных поискового индекса | |
JP6165955B1 (ja) | 検索クエリに応答してホワイトリストとブラックリストを使用し画像とコンテンツをマッチングする方法及びシステム | |
US7698329B2 (en) | Method for improving quality of search results by avoiding indexing sections of pages | |
US10007731B2 (en) | Deduplication in search results | |
JP5480058B2 (ja) | 広告マッチング装置、方法及びプログラム | |
US8712992B2 (en) | Method and apparatus for web crawling | |
US20160188717A1 (en) | Network crawling prioritization | |
US20110119250A1 (en) | Forward Progress Search Platform | |
US9881101B2 (en) | Dynamic file retrieving for web page loading | |
JP5084857B2 (ja) | 分析処理調整装置及び方法 | |
US20190384802A1 (en) | Dynamic Configurability of Web Pages Including Anchor Text | |
JP5928248B2 (ja) | 評価方法、情報処理装置およびプログラム | |
JP5072792B2 (ja) | 情報量に応じたページを優先的に表示する検索方法、プログラム及びサーバ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20120312 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120802 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120814 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120904 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5084857 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150914 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |