JP2017532625A - 個人用検索のための方法に用いるマルチユーザ検索システム - Google Patents

個人用検索のための方法に用いるマルチユーザ検索システム Download PDF

Info

Publication number
JP2017532625A
JP2017532625A JP2017505116A JP2017505116A JP2017532625A JP 2017532625 A JP2017532625 A JP 2017532625A JP 2017505116 A JP2017505116 A JP 2017505116A JP 2017505116 A JP2017505116 A JP 2017505116A JP 2017532625 A JP2017532625 A JP 2017532625A
Authority
JP
Japan
Prior art keywords
index
document
query
completion
token
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017505116A
Other languages
English (en)
Other versions
JP6487029B2 (ja
Inventor
サミール ゴエル,
サミール ゴエル,
フランク チャスタノール,
フランク チャスタノール,
アビシェック アグラウォル,
アビシェック アグラウォル,
Original Assignee
ドロップボックス, インコーポレイテッド
ドロップボックス, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ドロップボックス, インコーポレイテッド, ドロップボックス, インコーポレイテッド filed Critical ドロップボックス, インコーポレイテッド
Publication of JP2017532625A publication Critical patent/JP2017532625A/ja
Application granted granted Critical
Publication of JP6487029B2 publication Critical patent/JP6487029B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2308Concurrency control
    • G06F16/2315Optimistic concurrency control
    • G06F16/2329Optimistic concurrency control using versioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/31Indexing; Data structures therefor; Storage structures
    • G06F16/316Indexing structures
    • G06F16/328Management therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/13File access structures, e.g. distributed indices
    • G06F16/134Distributed indices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/14Details of searching files based on file metadata
    • G06F16/148File search processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/219Managing data history or versioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2358Change logging, detection, and notification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24564Applying rules; Deductive queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/31Indexing; Data structures therefor; Storage structures
    • G06F16/313Selection or weighting of terms for indexing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/31Indexing; Data structures therefor; Storage structures
    • G06F16/316Indexing structures
    • G06F16/319Inverted lists
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/80Information retrieval; Database structures therefor; File system structures therefor of semi-structured data, e.g. markup language structured data such as SGML, XML or HTML
    • G06F16/84Mapping; Conversion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/93Document management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/279Recognition of textual entities
    • G06F40/284Lexical analysis, e.g. tokenisation or collocates
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/101Access control lists [ACL]

Abstract

個人用検索のための方法に用いるマルチユーザ検索システム。ある実施形態では、例えば、個人用検索のシステムは、複数のインデックスシャードを格納する複数のインデックスサーバを含む。複数のインデックスシャードの各インデックスシャードは、複数のドキュメントをインデックス化する。複数のドキュメントにおける各ドキュメントは、インデックスシャードに割り当てられた複数のドキュメントネームスペースの1つに属す。システムは、更に、認証されたユーザから検索クエリを受信するフロントエンドサーバコンピュータと、認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースを決定するアクセス制御サーバと、検索クエリに回答するとともに、検索クエリを満たしかつ認証されたドキュメントネームスペースに属すドキュメントのみを特定するために、認証されたドキュメントネームスペースの識別子に基づいて検索クエリに対する回答を限定するクエリプロセッサと、を含む。

Description

[0001] 本開示の実施形態は、一般的に情報検索コンピュータシステムに関し、より詳細には、個人用検索のための手法を有するマルチユーザの検索システムに関する。
[0002] コンピュータは膨大な量の情報の中で関連情報を検索するための非常に強力なツールである。インデックスは、コンピュータを使用して、大規模なコーパスの情報の中で注目の情報を効率的に識別するためのありふれた仕組みである。通常のインデックスは、当該キーワードが抽出又は導出される文書情報への、体系化したキーワードのマッピングである。一例として、世界の公開されたアクセス可能なウェブページのインデックスとしては、当該ウェブページの単語を、当該単語を含むウェブページのサブセットへマッピングしてもよい。
[0003] 実際の物理的なインデックスそのもの(例えば、1以上のコンピュータに格納されるインデックスデータ)とシステムのユーザとの間で、検索システムが、ソフトウェアクッション又はレイヤとして通常提供される。本質的には、検索システムは、基本的なインデックスの詳細についてユーザが知る又は気にかけなくてよいようにする。通常、インデックスの情報に対するユーザからの全ての要求は検索システムによって処理される。基本的なインデックスの実装の知識を全てのユーザが有していなくても、例えば、情報に対するユーザの要求に関連する文書が検索システムによってインデックスを用いて識別されうる。この方法では、検索システムは、情報がどのようにインデックスが付与されるか又はアクセスされるかに関係なく関連情報へのアクセスをユーザへ提供する。世界の公開されているアクセス可能なウェブページの中から、関連情報を識別するための1つの良く知られた検索システムは、カリフォルニアのマウンテンデューにあるGoogle(登録商標) Incによって提供されるGOOGLE(登録商標)インターネット検索エンジンである。
[0004] 検索システムの1つの機能は、検索クエリ(ここでは単に短縮して“クエリ(問い合わせ)”)に応答することである。クエリは、1以上の検索タームのセットを含む論理的な表現で定義されてもよく、インデックス化された文書のサブセットの識別子となる。例えば、インターネット検索エンジンからの情報に対する要求の扱いを考慮しなければならない。動作中に、本要求は、通常、サーバコンピュータ上でインデックスからの特定の検索結果(例えば、単語”大学(college)”及び”バスケットボール(basketball)”を含む全てのインターネットウェブページのリスト)を取り出すための1以上のハイパーテキスト転送プロトコル、即ち“HTTP”要求としてクライアントシステムによって発行される。当該要求に応じて、検索システムは、通常、検索ターム“college”及び“basketball”に最も関連するものと考えられるそれらのインターネットウェブページへのハイパーリンクを含むウェブページを返す。
[0005] インターネット検索エンジンは、インターネット上で公的に利用可能な世界の全ての情報を検索するのに非常に適している。しかしながら、最近では、複数のユーザが、インターネット上で公的にアクセス可能でない、又は、インターネット検索エンジンによってインデックスが付与されていない、かなりの量の個人のデジタル情報を蓄積し始めている。そのような情報は、他の個人のデジタル情報及びプライベートなデジタル情報の中で、例えば、個人のデジタル写真や、学校及び仕事の文書を含むことができる。いくつかの例で、ユーザの個人的なデジタル情報は、定義されたグループユーザの間で共有される。例えば、従業員は、仕事の文書を他の同僚と共有してもよいし、或いは、ユーザはデジタル写真を友達や家族と共有してもよい。
[0006] 複数のユーザが彼ら全ての個人のデジタル情報を格納し管理し始めている1つの方法は、クラウドデータストレージサービスを用いることである。そのようなサービスは、ユーザが彼らの個人デジタル情報を、彼らの種々のエンドユーザコンピューティングデバイスからインターネット又は他のネットワーク上でアクセス可能なサーバコンピュータにアップロードして格納することを許容する。いくつかの例で、当該サービスは、ユーザがエンドユーザコンピューティングデバイスでローカルに情報にアクセスすることを容易にするために、エンドユーザコンピューティングデバイスとサービスサーバコンピュータとの間で情報を同期してもよい。1つの良く知られたクラウドデータストレージサービスは、カルフォルニア・サンフランシスコにあるDropbox社によって提供されるDROPBOXコンテンツ管理サービスである。
[0007] クラウドデータストレージサービスのユーザは、そのようなサービスによって提供される彼らの個人デジタル情報の検索方法や配置方法を評価するであろう。そのような個人的なデジタル情報は、通常、インターネット上で公的にアクセス可能ではない。本理由及び他の理由において、インターネット検索エンジンは、一般的には、それらのユーザの検索ニーズに合致するような適切なものではない。
[0008] ここで説明した上記アプローチは、さらに追及しうるアプローチであって、既に着想され、追及されたアプローチではない。したがって、特に示唆しない限り、ここで説明した任意のアプローチが、ここに組み込まれることにより単に先行技術として認識されることが想定されるべきではない。
[0009] 図1は、本発明のいくつかの実施形態に係る、基本的なコンピューティングデバイスのブロック図である。 [0010] 図2は、本発明のいくつかの実施形態に係る、コンピューティングデバイスの動作を制御するための基本的なソフトウェアシステムのブロック図である。 [0011] 図3は、本発明のいくつかの実施形態に係る、マルチユーザ検索システムを含むクライアント/サーバシステムのブロック図である。 [0012] 図4は、本発明のいくつかの実施形態に係る、マルチユーザ検索システムを含むサービングシステムのブロック図である。 [0013] 図5は、本発明のいくつかの実施形態に係る、共有ドキュメントインデックスのインデックスシャードのブロック図である。 [0014] 図6は、本発明のいくつかの実施形態に従って、マルチユーザ検索システムのサービングシステムによって実行される個人用検索の処理を示すフローチャートである。 [0015] 図7は、本発明のいくつかの実施形態に従って、所定のドキュメントネームスペースに属すドキュメントをインデックス化するインデックスシャードを格納するインデックスサーバを決定する、ルーティングサーバによって実行される処理を示すフロー図である。 [0016] 図8は、本発明のいくつかの実施形態に従って、非コンプリーションクエリに対する個別化された回答を生成するための、インデックスサーバにおけるクエリプロセッサによって実行される処理を示すフロー図である。 [0017] 図9は、本発明のいくつかの実施形態に従って、コンプリーションクエリに対する個別化された回答を生成するための、インデックスサーバにおけるクエリプロセッサによって実行される処理を示すフロー図である。
[0018] 以下の詳細な説明において、本開示技術の十分な理解を提供するために、説明の目的で多くの特定事例を記載する。しかしながら、本開示の技術がそれらの特定事例なしで実行されうるということが明らかであろう。他の例では、本開示の技術を不必要に不明りょうにすることを避けるために、既知の構成やデバイスがブロック図の形式で示される。フローチャートに関して、フローチャート内のブロックは方法ステップと、当該方法ステップを実行するための装置要素との両方を表してもよい。手近な特定の実施形態の要件に依存して、対応する装置要素は、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組み合わせで構成されてもよい。
[0019] 用語“第1の”及び“第2の”などは、種々の要素を説明するためにここで使用されるものの、それらの要素はそれらの用語によって限定されるべきではないことが理解されるであろう。それらの用語は、他の要素から区別するためにのみ使用される。例えば、本発明の範囲から逸脱することなく、第1のデバイスは、第2のデバイスと称されてもよく、同様に、第2のデバイスは第1のデバイスと称されてもよい。第1のデバイスおよび第2のデバイスは両方ともデバイスであるが、同一のデバイスでなくてもよい。
[0020] 本明細書で使用される専門用語は特定の実施形態のみを説明する目的であり、特許請求の範囲における請求項の限定を意図するものではない。本明細書及び添付の特許請求の範囲で使用されるように、単数形“a”、“an”及び“the”は、別途明確に言及しない限り、同様に複数形を含むことも意図されている。ここで使用される用語“and/or(〜及び〜少なくとも1つ)”は、1以上の関連する記載の項目の可能な全ての組み合わせを参照し、かつ、包含することも理解されるであろう。用語“含む”、“含んでいる”、“備える”、及び“備えている”の少なくとも1つは、本明細書で使用される場合、記載した特徴、整数、ステップ、動作、要素、及びコンポーネントの少なくとも1つの存在を特定するものの、1つ以上の他の特徴、整数、ステップ、動作、要素、コンポーネント及びそれらのグループの少なくとも1つを除外するわけではないこともさらに理解されるであろう。
[0021] 用語“if(であれば)”は、文脈に従って、“when(のとき、の場合)”、“upon(の際に)”、“判定に応じて”又は“検出に応じて”を意味するように解釈されてもよい。同様に、フレーズ“判定した場合”又は“(記載した条件又はイベントが)検出された場合”は、“判定した際に”、“判定に応じて”、“(記載した条件又はイベント)を検出した際に”又は“(記載した条件又はイベント)を検出することに応じて”とを意味するように解釈されてもよい。
<概要>
[0022] ドキュメントの検索の個別化のための方法を有するマルチユーザコンピュータシステムについて説明する。ドキュメントは、例えば、クラウドデータストレージサービスに持っているユーザのアカウントに関連付けられたドキュメントのような、ユーザの個人ドキュメントの例を含んでもよい。
[0023] 他の態様における本発明の種々の実施形態は、マルチユーザ検索システムにおいて、ユーザ個人のドキュメントにおけるフルテキスト検索、及びファイル名検索を容易にする。
[0024] 他の態様における本発明の種々の実施形態は、コンピュータを用いて情報検索の技術分野における改善をもたらす。
[0025] 他の態様における本発明の種々の実施形態は、クラウドデータストレージサービスプロバイダによって提供されるマルチユーザクラウドデータストレージサービスを改善する。
[0026] 他の態様における本発明の種々の実施形態は、マルチユーザ検索システムの機能構成を改善する。
[0027] 本発明に係る実施形態によれば、マルチユーザコンピュータシステムは、複数のインデックスサーバにおいて複数のインデックスシャードを格納する。複数のインデックスシャードの各インデックスシャードは、複数のドキュメントをインデックス化する。インデックスシャードによってインデックス化された、複数のドキュメントにおける各ドキュメントは、インデックスシャードに割り当てられた複数のドキュメントネームスペースの1つに属す。システムは、認証されたユーザから検索クエリを受信することと、認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースを決定することと、検索クエリに回答するとともに、検索クエリを満たしかつ認証されたドキュメントネームスペースに属すドキュメントのみを特定するために、認証されたドキュメントネームスペースの識別子に基づいて検索クエリに対する回答を限定することと、を含む個人検索の方法を実施する。
[0028] 本発明に係る他の実施形態では、方法は、認証されたドキュメントネームスペースの識別子に基づいて、認証されたドキュメントネームスペースが割り当てられたインデックスシャードを格納する、複数のインデックスサーバにおけるインデックスサーバを識別し、識別されたインデックスサーバに検索クエリを送信するステップを含む。
[0029] 本発明に係る更なる他の実施形態では、方法は、決定論マッピング機能を認証されたドキュメントネームスペースの識別子に適用した結果に基づいて、検索クエリを送信する、複数のインデックスサーバのインデックスサーバを選択すること、を含む。
[0030] 本発明に係る更なる他の実施形態では、複数のインデックスシャードのインデックスシャードは、インデックストークンの辞書と複数の対応する登録リストとを含む。各登録リストは、対応するトークンを1つ以上のドキュメントの識別子にマップし、登録リストのドキュメントの識別子のそれぞれは、ドキュメントの識別子によって識別されるドキュメントが属すドキュメントネームスペースの識別子と関連付けられる。
[0031] 本発明に係る更なる他の実施形態では、方法は、更に、ドキュメントの識別子によって識別されるどのドキュメントが認証されたドキュメントネームスペースに属すかを判定するために、認証されたドキュメントネームスペースの識別子と、複数のインデックスシャードにおけるインデックスシャードの登録リスト内にあるドキュメントの識別子に関連付けられたドキュメントネームスペースの識別子とを比較するステップ、を含む。
[0032] 他の態様において、本発明は、前述したステップを実行するように構成される、コンピュータシステム及びコンピュータで読取可能な媒体を包含する。
<基本的なコンピュータシステムハードウェア及びソフトウェア>
[0033] 本開示の技術は、1つ以上のコンピューティングデバイス上で実施されてもよい。そのようなコンピューティングデバイスは、限定はしないが、クライアントコンピュータ、サーバコンピュータ、ネットワークデバイス、モバイルデバイス、セルラー電話、スマートフォン、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーションコンピュータ、携帯情報端末、ブレードサーバコンピュータ、メインフレームコンピュータ、及び他のタイプのコンピュータを含む種々の形式で実装されてもよい。以下で説明するコンピューティングデバイス、及びそれらの接続、関係、及び機能を含むそのコンポーネントは、本明細書で説明する開示技術の実施形態の一例を意味し、当該実施形態を限定する意図はない。本開示の技術を実施するのに適切な他のコンピューティングデバイスは、異なる接続、関係及び機能を有するコンポーネントを含む異なるコンポーネントを含んでもよい。
<基本的なコンピューティングデバイス>
[0034] 次に、図1を参照して、本発明のいくつかの実施形態に従って、本開示の技術を実施するのに適した基本的なコンピューティングデバイス100のブロック図について説明する。コンピューティングデバイス100は、バス102又はメインメモリ106をアドレス解決し、かつ、コンピューティングデバイス100の種々のコンポーネント間で及び種々のコンポーネントの中でデータを転送するための他の通信機構を含む。コンピューティングデバイス100はまた、情報を処理するためのバス102と結合したハードウェアプロセッサ104を含む。ハードウェアプロセッサ104は、一般用途マイクロプロセッサ、システム・オン・チップ(SoC)、又は説明した技術を実施するのに適した他のプロセッサであってもよい。
[0035] ランダムアクセスメモリ(RAM)又は他の動的ストレージデバイスなどのメインメモリ106は、情報やプロセッサ104によって実行される命令を格納するためにバス102に結合される。メインメモリ106はまた、プロセッサ104によって実行されるべき命令の実行中に一時変数又は他の中間情報を格納するために使用されてもよい。プロセッサ104へアクセス可能な一時的でない記憶媒体に格納される場合、そのような命令は、コンピュータデバイス100が命令で特定される動作を実行するように、カスタマイズされた特定用途のコンピューティングデバイスへ変換する。
[0036] コンピューティングデバイス100はさらに、静的情報及びプロセッサ104への命令を格納するためにバス102に結合された読み取り専用メモリ(ROM)108又は他の静的ストレージデバイスを含む。
[0037] 大容量ストレージデバイス110は、磁性式メモリ、光学式メモリ、半導体メモリ、光磁気メモリ、フラッシュメモリ、又は大容量ストレージ技術を利用可能な他のものなどの固定媒体若しくは取り外し可能な媒体に、情報及び命令を永続的に格納するためのバス102に結合される。大容量ストレージデバイスは、ネットワーク上で共有され、或いは、専用の大容量ストレージであってもよい。通常、大容量ストレージデバイス110(例えば、デバイスに対するメインハードディスク)は、オペレーティングシステム、ユーザアプリケーションプログラム、ドライバ、他のサポートファイル、及び全ての種類の他のデータファイルを含む、コンピュータデバイスの動作を方向付けるためのプログラム本体とデータを格納する。
[0038] コンピューティングデバイス100は、バス102を介して、情報をコンピュータユーザに表示するための液晶ディスプレイ(LCD)又は他の電子的な視覚ディスプレイなどのディスプレイ112へ結合されうる。ディスプレイ112はまた、タッチジェスチャ(例えば、指又はスタイラス)入力をプロセッサ104へ通知するためのタッチ感知式のディスプレイであってもよい。
[0039] アルファベットキー及び他のキーを含む入力デバイス114は、情報及びコマンドの選択をプロセッサ104へ通知するためのバス102へ結合される。
[0040] ユーザ入力デバイスの他のタイプは、プロセッサ104へ方向情報やコマンドの選択を通知し、ディスプレイ112上でのカーソルの移動を制御するためのマウス、トラックボール、又はカーソル方向キーなどのカーソル制御部116である。当該入力デバイスは、通常、デバイスが平面上の位置を特定することを許容する第1軸(例えば、x)と第2軸(例えば、y)の二軸の2つの自由度を有する。
[0041] コンピューティングデバイス100は、カスタマイズされた配線論理、1以上の特定用途向け集積回路(ASIC)若しくは1以上のフィールドプログラマブルアレイ(FPGA)、ファームウェア、又は、コンピューティングデバイスと協働してコンピューティングデバイス100を特定用途向けの機械とさせる若しくはプログラムするプログラム論理を用いて、ここで説明される方法を実行することができる。
[0042] ここで説明する方法は、メインメモリ106に含まれる1以上の命令の1以上のシーケンスを実行するプロセッサ104に応じて、コンピューティングデバイス100によって実行されてもよい。そのような命令は、ストレージデバイス110などの他の記憶媒体からメインメモリ106へと読み込まれてもよい。メインメモリ106に含まれる命令のシーケンスの実行は、プロセッサ104にここで説明する処理ステップを実行させる。代替的な実施形態において、配線回路は、ソフトウェア命令の代わりに、又は、組み合わせで使用され得る。
[0043] ここで使用される用語“記憶媒体”は、コンピューティングデバイスを特定の様式で動作させるデータ及び命令の少なくとも1つを格納する非一時的な媒体として参照される。そのような記憶媒体は、不揮発性の媒体及び揮発性の媒体の少なくとも1つを備えてもよい。不揮発性媒体は、ストレージデバイス110などの、例えば、光学ディスク、磁性ディスク、又は半導体ドライバを含む。揮発性媒体はメインメモリ106などの動的メモリを含む。記憶媒体の共通の形式は、例えば、フロッピーディスク、フレキシブル・ディスク、ハードディスク、半導体ドライバ、磁性テープ若しくは任意の他の磁性データ記憶媒体、CD−ROM、任意の他の光学データ記憶媒体、ホールのパターン(空孔)を複数有する任意の物理的な媒体、RAM、PROM及びEPROM、フラッシュEPROM、NVRAM、任意の他のメモリチップ、又はカートリッジを含む。
[0044] 記憶媒体は、送信媒体とは区別されるものの、当該送信媒体と連結して使用されてもよい。送信媒体は、記憶媒体間で情報を転送することに使用されてもよい。例えば、送信媒体は、バス102を備える有線を含む同軸ケーブル、銅線、及び光ファイバーを含む。送信媒体はまた、電波及び赤外データ通信中に生成されるものなどの、音波又は光波の形式をとることもできる。
[0045] 媒体の種々の形態は、実行するプロセッサ104への1以上の命令の1以上のシーケンスを実行することに用いられてもよい。例えば、命令は、リモートコンピュータの磁性ディスク又は半導体ドライバ上でまず実行されうる。リモートコンピュータは、その動的メモリへ命令をロードし、モデムを用いて電話線を介して命令を送信することができる。コンピューティングデバイス100のローカルなモデムは、電話回線でデータを受信し、データを赤外線信号に変換するための赤外線送信機を用いることができる。赤外線検出機は赤外線信号で運搬されたデータを受信することができ、適切な回路がそのデータをバス102に乗せる。バス102は、プロセッサ104が命令を読み出して実行するメインメモリ106にデータを運搬する。メインメモリ106によって受信される命令は、プロセッサ104によって実行される前又は実行された後の何れかにストレージデバイス110に選択的に格納されうる。
[0046] コンピューティングデバイス100はまた、バス102へ結合される通信インタフェース118を含む。通信インタフェース118は、ローカルネットワーク122(例えば、イーサネットネットワーク、無線ローカルエリアネットワーク、セルラー電話ネットワーク、Bluetooth無線ネットワーク、又は同様のもの)へ接続された、有線又は無線のネットワークリンク120へ結合する2つの方法のデータ通信を提供する。通信インタフェース118は、種々のタイプの情報を表すデジタルデータストリームを伝達する電気信号、電磁信号、又は光信号を送受信する。例えば、通信インタフェース118は、有線のネットワークインタフェースカード、一体化された無線アンテナを有する無線ネットワークインタフェースカード、又はモデム(例えば、ISDN、DSL、又はケーブルモデム)であってもよい。
[0047] ネットワークリンク120は、通常、1以上のネットワークを通じて、他のデータデバイスへのデータ通信を提供する。例えば、ネットワークリンク120は、ホストコンピュータ124への、又は、インターネットサービスプロバイダ(ISP)126によって操作されるデータ機器へのローカルネットワーク122を通じた接続を提供してもよい。ISP126は順に、”Internet”128として通常参照されるワールド・ワイド・パケットデータ通信ネットワークを通じてデータ通信サービスを提供する。ローカルネットワーク122及びInternet128は、デジタルデータストリームを伝達する電気信号、磁性信号、又は光信号を使用する。コンピューティングデバイス100への及びコンピューティングデバイス100からのデジタルデータを伝達する、種々のネットワークを通じた信号、及び、ネットワークリンク120上の、及び通信インタフェース118を通じた信号は、送信媒体の例示の形式である。
[0048] コンピューティングデバイス100は、ローカルネットワーク122、インターネット128、ISP126、ネットワークリンク120、及び通信インタフェース118を通じて、プログラムコードを含む、メッセージを送信し、データを受信することができる。インターネットの一例において、サーバコンピュータ130は、インターネット128、ISP126、ローカルエリアネットワーク122、及び通信インタフェース118を通じて、アプリケーションプログラムに対して要求されるコードを送信するかもしれない。
[0049] 受信コードは、受信した際にプロセッサ104によって実行されてもよく、及び、後の実行のためにストレージデバイス110又は他の不揮発性のストレージに格納されてもよく、或いは、そのいずれもが行われてもよい。
<基本的なソフトウェアシステム>
[0050] 次に、図2を参照して、本発明のいくつかの実施形態に従って、コンピューティングデバイス100の動作を制御するための基本的なソフトウェアシステム200のブロック図について説明する。図示するように、コンピュータソフトウェアシステム200は、コンピューティングデバイス100の動作を方向付けるために提供される。システムメモリ(RAM)106及び固定ストレージ(例えば、ハードディスク)110に格納されるソフトウェアシステム200はカーネル又はオペレーティングシステム(OS)210を含む。OS210は、プロセス、メモリ配置、ファイル入力及び出力(I/O)、及びデバイスI/Oの実行を管理することを含む、コンピュータ動作のローレベルの態様を管理する。1以上のアプリケーションプログラム202(例えば、202A、202B、202C・・・202N)は、システム200による実行のために”ロードされ”うる(例えば、固定ストレージ110からメモリ106へ転送される)。いくつかの例において、アプリケーションプログラム202又はデバイス100上での使用を意図した他のソフトウェアはまた、ダウンロード可能で、コンピュータで実行可能な命令のセットとして、例えば、インターネット上の記憶場所から(例えば、ウェブサーバから)ダウンロード及びインストールするために格納されうる。
[0051] ソフトウェアシステム200は、グラフィカルな(例えば、”ポイント・アンド・クリック”又は”タッチジェスチャ”)形式で、ユーザコマンド及びデータを受信するためのグラフィカルユーザインタフェース(GUI)215を含んでもよい。これらの入力は順に、オペレーティングシステム210及びアプリケーションプログラム202の少なくとも1つからの命令に従ってシステム200によって作動される。GUI215はまた、ユーザが追加の入力を供給したり、又は、セッションを終了させたりする(例えば、ログオフする)とすぐに、OS210及びアプリケーションプログラム202からの動作結果を表示するように務める。
[0052] OS210は、デバイス100のベアハードウェア(例えば、プロセッサ104)上で直接的に実行することができる。代替的に、ハイパーバイザ又は仮想マシンモニタ(VMM)230は、ベアハードウェア及びOS210の間に割り込んで設けられてもよい。この構成において、VMM230はデバイス100のOS210及びベアハードウェアの間のソフトウェア”クッション”又は仮想レイヤとして作動する。
[0053] VMM230が存在すれば、仮想マシンインスタンス(例えばゲストマシン)を作成して実行する。各ゲストマシンは、OS210などの”ゲスト”オペレーティングシステムと、ゲストオペレーティングシステム上で実行するように設計された、アプリケーションプログラム202などの1以上のアプリケーションプログラムを含む。VMM230は、仮想オペレーティングプラットフォームを有するゲストオペレーティングシステムを提示し、ゲストオペレーティングシステムの実行を管理する。いくつかの例において、VMM230は、デバイス100のベアハードウェア上で直接実行されているかのように、ゲストオペレーティングシステムを実行することを許容してもよい。これらの例において、ベアハードウェア上で直接的に実行するように構成されたゲストオペレーティングシステムの同一のバージョンはまた、修正又は再構成なしにVMM230上で実行されうる。言い換えれば、VMM230は、いくつかの例において、ゲストオペレーティングシステムへ完全なハードウェアと、CPU仮想化を提供してもよい。他の例において、ゲストオペレーティングシステムは、効率的にVMM230上で実行されるように特別に設計されるか、又は、構成されてもよい。それらの例において、ゲストオペレーティングシステムは、仮想マシンモニタ上で実行する”気付かれるもの”であってもよい。言い換えれば、VMM230は、いくつかの例において、ゲストオペレーティングシステムへ準仮想化を提供することができる。
[0054] 上述のコンピュータハードウェア及びソフトウェアは、本開示の技術を実施するために採用されうる基本的な下層のコンピュータコンポーネントを示す目的で提示される。しかしながら、本開示の技術は、任意の特定のコンピューティング環境又はコンピューティングデバイス構成に限定されない。代わりに、本開示の技術は、システムアーキテクチャ、又は、ここで詳細に提示した本開示の技術をサポートすることが可能な処理環境の任意のタイプで実装されてもよい。
<クライアント/サーバ マルチユーザ検索システムコンポーネント>
[0055] 次に、図3を参照し、本発明のいくつかの実施形態に従って、クライアント/サーバシステム300の基本ブロック図について説明する。クライアント/サーバシステム300は、1以上のサーバ320を含む(ここではまとめて”マルチユーザ検索システム320”と称する。)。また、クライアント/サーバシステム300は、ネットワーク330を介して1以上のサーバ325(ここではまとめて”サービングシステム325”と称する。)へ接続された1以上のクライアント310を含む。具体的には、クライアント310は、1以上のサーバ326(ここではまとめて”検索フロントエンド326”と称する。)へ接続された1以上のエンドユーザコンピューティングデバイス311を備える。例示の実施形態において、エンドユーザコンピューティングデバイス311は、MICROSOFT WINDOWS(例えば、XP、VISTA、7、8等)、MAC OS X、LINUX(例えば、UBUNTU、FEDORA等)、IOS、ANDROID、BLACKBERRY OS、及び同等のものなどの従来のオペレーティングシステムを実行する上述のコンピューティングデバイス100などの複数のエンドユーザパーソナルコンピューティングデバイスをそれ自身に備えてもよい。
[0056] 例示の実施形態において前述したDROPBOXコンテンツ管理サービスの一部である、サービングシステム325及び1つ以上の他のサーバ321(ここでは、まとめて”ビルドシステム321”と称する。)は、一般的には、UNIX、LINUX及び同様のものなどのサーバオペレーティングシステムの下で実行する、1以上の独立したプロセス(例えば、独立した複数のクライアント)として動作する。ビルドシステム321は、トークン格納部324、インデクサーサーバ323(又は、単に”インデクサー323”)、及びトークナイザ322(又は、単に”トークナイザ322”)を含む。検索フロントエンド326に加えて、サービングシステム325はまた、クエリプロセッサ327及びドキュメントインデックス328を含む。
[0057] ビルドシステム321のサーバ及びサービングシステム325のサーバを含むマルチユーザ検索システム320のサーバは、サーバコンピュータ(例えば、図1のコンピューティングデバイス100)として、又は手近な特定の実施形態の要求に依存した仮想マシンインスタンスとして実現されてもよい。マルチユーザ検索システム320のサーバが仮想マシンインスタンスとして実現される場合には、”仮想”サーバをホストする(実行する)下層のサーバコンピュータであってもよい。しかしながら、仮想サーバとサーバコンピュータとの間において一対一で対応する必要性はない。例えば、サーバコンピュータは複数の仮想サーバをホストすることができる。
[0058] 本明細書及び添付の特許請求の範囲で使用される場合、”サーバ(server)”の単数形は、別段の明確な示唆がない限り、複数形を含むことも意図している。例えば、マルチユーザ検索システム320の”サーバ”は、実際には、手近な特定の実施形態の要件に従った、平衡性、フェイルオーバー、冗長性、高可用性、及び他の目的の少なくとも1つのための、互いのミラー又は複製である複数のサーバによって実現されてもよい。
[0059] 動作中において、クライアント310は、検索クエリ332を検索フロントエンド326へ送信し、検索フロントエンド326からクエリ回答334を受信する。クエリ332は、ネットワーク要求で検索フロントエンド326において受信されてもよく、当該回答334はネットワーク要求へのネットワーク応答で検索フロントエンド326から送信されてもよい。ネットワーク要求及びネットワーク応答は、ネットワークデータパケットでネットワーク330上で受信/送信されてもよい。本発明のいくつかの実施形態において、ネットワークデータパケットは、インターネットプロトコル(IP)に従ってフォーマットされる。ネットワーク要求及びネットワーク応答はまた、アプリケーションレイヤのネットワークプロトコルに従って受信/送信されてもよい。いくつかの実施形態において、アプリケーションレイヤのネットワークプロトコルは、ハイパーテキスト転送プロトコル(HTTP)又はセキュアハイパーテキスト転送プロトコル(HTTPS)である。例えば、クエリ332は、1以上のHTTP又はHTTPS要求で受信されてもよく、回答334は1以上のHTTP又はHTTP応答で送信されてもよい。
[0060] ネットワーク330は、例えば、セルラー電話ネットワーク、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)、インターネット及び同様のものなどの多くの従来の有線又は無線ネットワークシステムを含んでもよい。サービングシステム325、ビルドシステム321、及びそれらのサーバはまた、1以上のIPネットワーク及び他の適切な種別のデータ通信ネットワークによって相互に接続されてもよく、HTTP、HTTPS、及び他の適切なアプリケーションレイヤプロトコルの少なくとも1つを用いて互いに通信してもよい。
[0061] 検索クエリ332は検索式を含んでもよい。検索式の構文は、1以上のブール演算子(例えば、AND、OR、NOTなど)によって共に関連付けが可能な、1以上の検索トークンのシーケンスを含んでもよい。トークンは、1以上の文字の文字列として定義されてもよい。トークンの文字は、従来の文字符号化手法(例えば、ASCII、UTF-8、及び同等のもの)に従って符号化されてもよい。
[0062] クエリのトークンは、検索クエリ332に現れるトークンとして定義されてもよい。例えば、単一の結合クエリ332が[baguette fromage](囲い括弧(enclosing brackets)なしで)の場合を検討する。当該クエリ332を満足するドキュメント340は、トークン“baguette”と、トークン“fromage”との両方を含んでもよく、ドキュメント340の中で互いが隣接する必要はなく、かつドキュメント340の中でトークン“fromage”の前にトークン“baguette”が現れる必要性はない。しかしながら、トークン“baguette”と、トークン“fromage”とを互いに近くに含むか関連付けられ、トークン“fromage”の前にトークン“baguette”を含むか関連付けられるドキュメント340は、クエリ332を満足する他のドキュメント340よりも関連があるものとみなされてもよい。
[0063] 検索フロントエンド326からクライアント(例えば、エンドユーザコンピューティングデバイス311A)へ返される検索クエリ332に対するクエリ回答334は、関連性で順序づけられた検索回答の概要のリストを含んでもよい。それぞれのそのような概要は、検索クエリ332を満足するドキュメントインデックス328においてクエリプロセッサ327によって識別されたドキュメント340に対応してもよい。検索回答の概要は、例えば、対応するドキュメントの識別子(例えば、名称、タイトルなど)、対応するドキュメントの短い説明(例えば、概要、要約、抽出、抜粋など)、ダウンロード、閲覧又は対応するドキュメントへのいくつかの他のユーザアクションを行うためのインタラクティブなハイパーリンク(例えば、ユニフォーム・リソース・ロケータ(URL))、及び、対応するドキュメント340について可能な他の有用な情報(例えば、対応するドキュメントのサムネイル画像)を含んでもよい。概要のリストは、エンドユーザのコンピューティングデバイスのユーザへ、エンドユーザのコンピューティングデバイス上で実行するウェブブラウザアプリケーションのウェブページ上で、又は、例えばエンドユーザコンピューティングデバイス上で実行するアプリケーション(例えば、モバイルアプリケーション)のその他のグラフィカルユーザインタフェースで、提示されてもよい。
[0064] 検索フロントエンド326で受信される検索クエリ332は、クエリプロセッサ327によって処理されてもよい。クエリプロセッサ327は、検索クエリ332を満足するドキュメントを特定するためにドキュメントインデックス328を調べてもよい。検索クエリ332を満足するクエリプロセッサ327によって特定されるドキュメントへの参照(例えば、ハイパーリンク)は回答334で返されてもよい。以下では、クエリ332を処理するためのクエリプロセッサ327によって実行される本発明のいくつかの実施形態における技術をより詳細に説明する。
[0065] いくつかのケースにおいて、検索クエリ332は”コンプリーション(completion)”検索クエリ332である。コンプリーション検索クエリ332は、コンプリートしていないトークンを含む一連の1以上のクエリトークンを含む検索クエリ332として定義されうる。例えば、コンプリーション検索クエリ332は、エンドユーザコンピューティングデバイスのユーザがコンプリーション検索クエリ332のクエリトークンの1つを入力する(例えば、タイピングによって)過程にある(処理中の)場合に、エンドユーザコンピューティングデバイス(例えば、311A)から検索フロントエンド326へ提示されてもよい。この場合、コンプリーションクエリ332への回答334は、クエリプロセッサ327がコンプリーションクエリ332に基づいてドキュメントインデックス328を定義するコンプリーション検索クエリ332に対する可能なコンプリーション要素のリストを含んでもよい。
[0066] コンプリートしたコンプリーションクエリ332のクエリトークンは、”コンプリートトークン(complete tokens)”と称する。コンプリートしていないコンプリーションクエリ332のクエリトークンは、”コンプリーショントークン(completion tokens)”と称する。このように、コンプリーションクエリはまた、コンプリーショントークンを含むクエリ332として定義されてもよい。
[0067] コンプリーションクエリ332は、単に単一の文字又は一文字より多くの文字を含んでもよい。例えば、コンプリーションクエリ332[p](囲い括弧なし)では、コンプリートトークンは存在せず、トークン”p”はコンプリーショントークンとなりうる。コンプリーションクエリ332は、代わりに、1以上のコンプリートトークンを含んでもよい。例えば、コンプリーションクエリ332[private se](囲い括弧なし)では、トークン”private”がコンプリートトークンであり、トークン”se”はコンプリーショントークンとなりうる。
[0068] 典型的には、コンプリーションクエリ332の一連のトークン(又は、列の中にただ一つのトークンがある場合には唯一のトークン)の最後のトークンはコンプリーショントークンである。大抵の場合、これは、ユーザが列に現れるのと同じ順序でコンプリーションクエリ332のトークンを入力するためである。しかしながら、コンプリーションクエリ332の最後のトークンよりも前のトークンがコンプリーショントークンであってもよい。例えば、ユーザは前回入力されたトークンを編集するために彼らのエンドユーザコンピューティングデバイス(例えば、311A)において入力カーソルを動かしてもよい。例えば、ユーザは、最初にクエリ332[solved two problems](囲い括弧なし)を入力してもよい。その後、ユーザは、コンプリーションクエリ[solved th probrems]を生成するために、トークン”two”を”th”で置き換えるように入力カーソルを動かしてもよい。本例示のコンプリーションクエリ332において、第1のトークン”solved”と最後のトークン”problems”とは、コンプリートトークンであってもよく、第2のトークン”th”はコンプリーショントークンであってもよい。
[0069] 本発明のいくつかの実施形態において、クエリ332は、クエリ332を含むネットワーク要求において、コンプリーションクエリ332として指定される。例えば、ネットワーク要求は、クエリ332のクエリトークンがコンプリーショントークンであることを示してもよい。コンプリーショントークンの指標は、ユーザのエンドユーザコンピューティングデバイス(例えば、311A)において実行するソフトウェアによって作成されてもよい。例えば、ソフトウェアは、ユーザがユーザのエンドユーザコンピューティングデバイスで提示される検索ユーザインタフェースへ(例えば、物理的なキーボード、又はソフトウェアキーボードで)クエリ332のトークンの文字を入力している際に、フロントエンド326を検索するクエリ332を含むネットワーク要求を送信してもよい。そうすることで、ソフトウェアは、ユーザが入力しているトークンがコンプリーショントークンであることをネットワーク要求(例えば、メタデータ)においてフラグで示すか、印を付けるか、特定するか、さもなければ、示してもよい。本発明のいくつかの実施形態において、ユーザのエンドユーザコンピューティングデバイスで実行するソフトウェアはJAVASCRIPTソフトウェア又は他のウェブブラウザクライアント側のスクリプト言語ソフトウェアであり、検索ユーザインタフェースはユーザのウェブブラウザのウィンドウに表示されるウェブページ上に提示されてもよい。本発明のいくつかの実施形態において、ユーザのエンドユーザコンピューティングデバイスで実行するソフトウェアは、モバイルアプリケーション、又は、ユーザのエンドユーザコンピューティングデバイスにおいて検索ユーザインタフェースを駆動する他の専用のソフトウェアアプリケーションである。
[0070] コンプリーション検索クエリ332に対する可能性のあるコンプリーションは、ドキュメントインデックス328によってインデックスが付与された少なくとも1つのドキュメント340によって満足され、かつ、コンプリーションクエリ332をコンプリートする検索クエリ332として定義されてもよい。例えば、ドキュメントインデックス328によってインデックスが付与された少なくとも1つのドキュメント340によって満足される検索クエリ332[solved two problems](囲い括弧なし)は、コンプリーション検索クエリ332[solved two prob](囲い括弧なし)への可能性のあるコンプリーションであってもよい。コンプリーションクエリ332への可能なコンプリーションのリストは、コンプリーションクエリ332を満足するドキュメント340の検索回答の概要のリストへの追加として、又は、その代わりに、回答334で提示されてもよい。以下では、コンプリーションクエリ332を処理するためのクエリプロセッサ327によって採用される本発明のいくつかの実施形態における技術をより詳細に説明する。
[0071] コンプリーションクエリ332でないクエリ332は、時には、当該クエリ332をコンプリーションクエリ332から区別するために、”非コンプリーション(non-completion)”クエリ332として参照されてもよい。非コンプリーションクエリ332はまた、コンプリートトークンのみを含み、任意のコンプリーショントークンを含まないクエリ332として定義されてもよい。通常、クエリ332と称する場合、参照は、ここでは前述した”コンプリーション”又は”非コンプリーション”の限定詞なしで、”クエリ332”又は”検索クエリ332”として参照されてもよい。文中で明確に言及しない限り、クエリ332に関連するここでの説明は、通常、コンプリーションクエリ332及び非コンプリーションクエリ332の両方に関連する。
[0072] ドキュメント340は、テキストコンテンツを含むデジタル情報(例えば、文字データ)、及びテキストコンテンツに関連付けられるデジタル情報(例えば、テキストメタデータ)の少なくとも1つのデジタル情報の収集物として定義されてもよい。いくつかの例示では、ワード処理ドキュメント340は、大抵の場合、テキストコンテキスト(例えば、ドキュメントの作成者による単語及び文章)を含み、スプレッドシートのドキュメント340は、単語及び数字の形式でのテキストコンテキストを含んでもよく、デジタル画像ドキュメント340(例えば、デジタル写真)は、そのヘッダ(例えば、交換可能な画像ファイル形式(Exif))にテキストコンテンツを含んでもよい。追加的に又は代替的に、デジタル画像ドキュメント340は、画像コンテンツのテキストメタデータのタグ又は他のテキスト記述の形式でテキストコンテンツと関連付けられてもよい。それらは、単にドキュメントの可能ないくつかの例示であり、他の種別のドキュメントも本発明の範囲内にある。
[0073] いくつかの例で、ドキュメント340は、ファイルタイプを有するファイルに対応する。ドキュメントとなりうるいくつかのファイルタイプは、限定はしないが、画像ファイル(例えば、.jpg、.tiff、.giff)、音楽ファイル(例えば、.mp3、.aiff、.m4a、.wav)、動画ファイル(例えば、.mov、.mp4、.m4v)、ワード処理ファイル(例えば、.doc、.docx、.pages)、プレゼンテーションファイル(例えば、.ppt、.pptx、.key)、スプレッドシートファイル(例えば、.xls、.xlsx、.numbers)、ウェブページファイル(例えば、.htm、.html)、テキストファイル(例えば、.txt)、及び、テキストを含む及び/又はテキストに関連する任意の他のタイプのファイルを含む。
[0074] ドキュメント340は、ドキュメントの内容を記述するテキスト内容に関連付けられうる。当該関連付けられたテキスト内容は、ドキュメントについての”テキストメタデータ”として時には参照される。例えば、ドキュメント340のファイル名は、ドキュメント340についてのテキストメタデータでありうる。他の例として、デジタル画像ドキュメントのテキストメタデータは、画像のコンピュータ解析(例えば、光学文字認識(OCR)又は顔認識アルゴリズム等)によって作製されてもよい。ドキュメント340についてのテキストメタデータの他の形式は、例えば、ドキュメント340を参照する(例えば、ハイパーリンクによって)、ドキュメント340について言及する(例えば、ソーシャルネットワークへのポストにおいて)、又は、ドキュメント340を議論する(例えば、ブログポスト及び/又はユーザコメントのポストにおいて)、ウェブページから取得したドキュメント340についてのテキスト内容を含みうる。本説明の目的で、ドキュメント340についてのテキストメタデータは、ドキュメント340のテキスト内容の一部であり、かつ、ドキュメント340のテキスト内容に含まれる(現れる)ように考慮されてもよい。
[0075] ドキュメント340はまた、現在のバージョンとみなされるものを含む複数のバージョンを有してもよい。例えば、ユーザは、ワード処理プログラムを用いてワード処理ドキュメント340の第1のバージョンを作成し保存してもよい。その後、ユーザは、ドキュメント340の第1のバージョンを修正してもよく、当該修正を含むドキュメント340の第2のバージョンを保存してもよい。代替的には、ドキュメント340はまた、現在のバージョンとみなされる時間でのただ一つのバージョンを有してもよい。
[0076] ドキュメントインデックス328は、1以上の辞書及び登録(posting)のペアを含んでもよい。辞書のペアは、インデックストークンを格納してもよく、また、各インデックストークンについての登録のペアにおける登録リストへのポインタを含んでもよい。例えば、ポインタは、登録リストが格納される、揮発性又は不揮発性メモリの位置のアドレスであってもよい。
[0077] インデックストークンは、ドキュメントインデックス328においてドキュメント340がインデックス化されているトークンとして定義されてもよい。インデックストークンに加えて、辞書は、例えばトークンのドキュメントでの頻度などのインデックストークンについてのトークン属性を格納してもよい。インデックストークンについてのトークン属性は、クエリ処理効率及び検索結果ランキングを改善するためにクエリプロセッサ327によって使用されてもよい。
[0078] インデックストークンについての登録リストは、トークンが現れる1以上のドキュメント340の1以上のドキュメント識別子のリストを格納してもよく、また、例えばドキュメント340でのトークンの頻度、又はドキュメント340内のトークンの位置などの登録リストに特定されたドキュメント340についてのドキュメントトークン属性を格納してもよい。登録リストのドキュメント340についてのドキュメントトークン属性はまた、クエリ処理効率及び検索結果ランキングを改善するためにクエリプロセッサ327によって使用されてもよい。
[0079] クエリ332を処理する際に、クエリプロセッサ327は、クエリ332のクエリトークンに基づいて、ドキュメントインデックス328の辞書内のインデックストークンを探してもよい。例えば、[solved two problems](囲い括弧なし)などのクエリ332について、クエリプロセッサ327は、辞書内のインデックストークン”solved”、”two”、及び”problems”を探してもよい。クエリプロセッサ327は、辞書内で探されたインデックストークンに関連付けられるポインタを用いて探されたインデックストークンについての登録リストを取り出してもよい。例えば、クエリプロセッサ327は、インデックストークン”solved”、”two”、及び”problems”についての辞書の登録リストに関連付けられるドキュメントインデックス328の登録から取り出してもよい(例えば、RAMへロードしてもよい)。
[0080] クエリプロセッサ327は、クエリ332を満足するドキュメント340を特定するためにマージアルゴリズムを用いて取り出した登録リストをマージしてもよい。例えば、インデックストークン”solved”について取り出された登録リストがドキュメントD2及びD3を特定し、インデックストークン”two”について取り出された登録リストがドキュメントD2を特定し、インデックストークン”problems”について取り出された登録リストがドキュメントD2及びD3を特定することを想定する。従って、クエリプロセッサ327は、探し出したインデックストークンの全てを含むドキュメントD2を特定するために、マージアルゴリズムに従って、それら3つの登録リストをマージしてもよい。種々の異なるマージアルゴリズムは、登録リストをマージするために使用されてもよく、本発明は任意の特定のマージアルゴリズムに限定されない。例えば、マージアルゴリズムは、複数の登録リストのそれぞれを通じて複数のポインタを交互に進めることによって複数のポインティングリストを組み合わせてもよい。
[0081] クエリプロセッサ327は、ただ単一の結合クエリ332を処理することに限定されず、クエリプロセッサ327は、より複合的なクエリ332を処理してもよい。例えば、クエリプロセッサ327は、以下で例示のタイプのクエリ332、クエリA:[(two or three )NOT problems]、クエリB:[two three problems]、クエリC:[(two three) problems]、及びクエリD[(two OR three) (problems OR solutions)]を処理してもよい。囲い括弧[]内の前述の例示のクエリ332のそれぞれにおいて、囲い括弧[]はクエリの一部ではない。クエリAはクエリ332[(two or three) AND NOT problems]と同等であり、クエリBはブールクエリ332[two AND three AND problems]と同等であり、クエリCはブールクエリ332 [(two AND three) AND problems]と同等であり、クエリDはブールクエリ332 [(two OR three) AND (problems OR solutions)]と同等である。前述の例示のクエリ332において、AND OR NOT ()はブール演算子である。
[0082] いくつかの実施形態において、ドキュメントインデックス328は、インデックスサーバのそれぞれがドキュメントインデックス328の部分(例えば、共有部分)を格納するサービングシステム325の複数のインデックスサーバに渡って水平分割される(例えば、共有される)。種々の異なる技術が複数のインデックスサーバに渡ってインデックス328を水平分割する(共有する)ために使用されてもよい。本発明のいくつかの実施形態において、ドキュメントインデックス328は、”ドキュメンネームスペース”によって共有される。
[0083] ドキュメントネームスペースは、共有アクセス制御の下で、1以上のドキュメント340の収集物として定義されてもよい。共有アクセス制御は、ユーザ及びユーザグループの少なくとも1つのいずれがドキュメント340へのアクセスを有するかと、ユーザ及びユーザグループの少なくとも1つがドキュメントネームスペースに属するドキュメント340上にどんなアクセス(例えば、読み出しアクセス、書込みアクセス、共有アクセス、プレビューアクセス、ダウンロードアクセスなど)を有するかと、を特定する及び/又は示す、明示的な許可及び暗黙的な許可の少なくとも1つに基づくことができる。明示的な許可は、ユーザ及びユーザグループの少なくとも1つのいずれがドキュメント340へのアクセスを有するかと、ユーザ及びユーザグループの少なくとも1つがドキュメントネームスペースのドキュメント340上にどんなアクセスを有するかと、を特定する及び/又は示す、例えばドキュメントネームスペース(又は、それらの識別子)に関連付けられる1以上のアクセス制御リスト(ACL)及び他のデータの少なくとも1つの形式で行ってもよい。暗黙的な許可の一例は、ユーザが当該ユーザのユーザアカウント(又は、それらの識別子)に関連付けられるドキュメントネームスペースの全てのドキュメント340へのアクセスを有するものである。
[0084] 例示の実施形態において、ドキュメントネームスペースは、例えば、前述したDROPBOXコンテンツ管理サービスなどのクラウドデータストレージサービスで保持されるユーザのアカウントに関連付けられるドキュメント340を含む。アカウントに対する認証が成功すると(例えば、有効なユーザ名/パスワード)、ユーザは、ユーザのアカウントと関連付けられるドキュメントネームスペースにおいてドキュメント340へのアクセスを暗黙的に有する。
[0085] 例示の実施形態において、ドキュメントネームスペースは、例えば前述したDROPBOXコンテンツ管理サービスなどのオンラインデータストレージサービスで保持される複数のユーザアカウントの中で共有される1以上のドキュメント340の収集物に属しているドキュメント340を含む。いくつかの例で、ドキュメントの収集物は、”共有フォルダ”と称してもよい。ドキュメントの収集物が共有されるアカウントに対する認証が成功すると、ユーザは、共有されるドキュメントネームスペースにおけるドキュメントへのアクセスを有する。
[0086] ドキュメントインデックス328がドキュメントネームスペースによって共有される本発明のいくつかの実施形態によれば、サービングシステム325の複数のインデックスサーバのそれぞれは、1以上のドキュメントネームスペースに属しているドキュメント340にインデックスを付与する。本発明のいくつかの実施形態において、ドキュメントネームスペースの識別子は、ドキュメントネームスペース内のドキュメント340をインデックス化するインデックスサーバを決定するために、共有キーとして使用される。限定しない例示の実施形態において、ドキュメントインデックス328は、4億(400,000,000)を超えるドキュメントネームスペース内のドキュメントにインデックスを付与する。
[0087] ドキュメント340は、ビルドシステム321によって処理することが可能に提供されるか若しくは可能にされる任意のドキュメント340、又は、ドキュメントインデックス328でインデックスが付与される任意のドキュメント340を含んでもよい。ビルドシステム321は、ドキュメント340からドキュメントインデックス328のインデックスデータベースファイル351を構築する。ビルドシステム321はまた、ドキュメント340からドキュメントインデックス328へのインデックス変形352を生成する。
[0088] インデックスデータベースファイル351は、1以上のドキュメント340に共にインデックスを付与する辞書及び登録のペアを含んでもよい。より一般的には、インデックスデータベースファイル351内のデータは、キーが辞書のインデックストークンに対応し、かつ、その値が登録の登録リストに対応する、キーバリューペア(key-value pair)の集合(例えば、連想配列)として構成されてもよい。本発明のいくつかの実施形態において、インデックスデータベースファイル351は、1つのドキュメントネームスペースにおいてドキュメント340にインデックスを付与する。本発明のいくつかの実施形態において、ドキュメントのインデックス328のインデックスデータベースファイル351の数を低減するために、インデックスデータベースファイル351は、複数のドキュメントネームスペースにおいてドキュメント340にインデックスを付与する。インデックスデータベースファイル351によってインデックスが付与された複数のドキュメントネームスペースは、時には、ここでドキュメントネームスペースの”ドキュメントネームスペースのグループ”として参照される。
[0089] ビルドシステム321によるドキュメントインデックス328のインデックスデータベースファイル351を構築することは、ドキュメント340をトークン化することによって複数トークンのセットを生成し、トークン格納部324に生成した複数トークンのセットを格納するトークナイザ322に関与してもよい。その後、インデクサー323は、生成した複数トークンのセットに基づいてインデックスデータベースファイル351を生成してもよい。インデクサー323は、生成したインデックスデータベースファイル351を、ドキュメントインデックス328の一部として、サービングシステム325のインデックスサーバへの格納のために、サービングシステム325へ提供する。
[0090] ビルドシステム321によってドキュメント340からドキュメントインデックス328へのインデックス変形352を生成することは、最近作成された又は最近修正されたドキュメント340からの複数トークンのセットを生成した後に、インデクサー323に通知するトークナイザ322に関与してもよい。例えば、ドキュメント340は、エンドユーザコンピューティングデバイス311のユーザによって最近作成された又は最近修正されたものであってもよい。最近作成したドキュメント340の通知、或いは、修正したドキュメント340の通知が行われると、インデクサー323は、トークン格納部324に当該ドキュメントについて格納された1以上の複数トークンのセットに基づいて、ドキュメントについてのインデックス変形352を生成する。例えば、ドキュメントが修正される場合などのいくつかの例において、生成したインデックス変形352は、修正したドキュメントについて生成した複数トークンのセットと、以前のバージョンのドキュメントについて生成した複数トークンのセットとの間の差異を反映する。生成したインデックス変形352は、その後ドキュメントインデックス328にそれを適用するサービングシステム325へ提供されてもよい。
[0091] トークナイザ322は、ドキュメント340のテキスト内容をトークン化することによって複数トークンのセットを作製する。ドキュメントのテキスト内容をトークン化することは、ドキュメントの文字列を取得することを含んでもよい。種々の技術がドキュメントデータの形式に従って、ドキュメントの文字列を取得するトークナイザ322によって使用されてもよい。例えば、技術又は使用される当該技術は、ドキュメントの文字符号化手法(例えば、ASCII、Unicode、UTF-8、マイクロソフトWORD、ADOBE、PDFなど)に従ってドキュメントを復号することと、ドキュメントが圧縮されているかどうか(例えば、ZIP圧縮によって)に従ってドキュメントを解凍することとの少なくとも1つを含んでもよい。
[0092] ドキュメントの文字列が取得されるとすぐに、トークナイザ322は、同時にトークン上で言語プロセスを実行することが可能なように、文字列を、複数の小片、いわゆるトークンに分割する。言語プロセスは、例えば、所定の文字列(例えば、句読点)を無視することと、共通の単語(例えば、ストップワード)を除外することと、並びに、語幹解釈及び見出語解釈を行うこととの少なくとも1つを含んでもよい。言語プロセスはまた、付加記号、アクセント及び大文字化/大文字変換の少なくとも1つなどを取り除くことを含むトークンの正規化を含んでもよい。
[0093] トークナイザ322がドキュメントについての複数トークンのセットを生成した後に、トークナイザ322は、トークン格納部324に複数トークンのセットを格納する。例えばトークナイザ322がインデクサー323へ最近作成したドキュメント340を通知するか、或いは、インデクサー323へ最近修正されたドキュメント340を通知する場合などのいくつかの例において、トークナイザ322はまた、複数トークンのセットをインデクサー323へ提供してもよい。
[0094] トークン格納部324は、トークナイザ322によって複数のドキュメント340について生成された複数トークンのセットを格納する。例えば、所定バージョンのドキュメント340に関して、トークン格納部324は、当該ドキュメントバージョンについてトークナイザ322によって生成された複数トークンのセットを格納してもよい。
[0095] 本発明のいくつかの実施形態において、トークン格納部324は、例えば、APACHE HBASEデータベースシステムなどのカラム指向型の分散データベースシステムを含む。しかしながら、データベースシステムの他のタイプが、それぞれにおける特定の実装の要件に従って、他の実施形態に使用されてもよい。例えば、独自の、関係型、又は、独立型のデータベースシステムが、オープンソース、カラム指向型又は分散型のものの代わりに使用されてもよい。
[0096] 上記例示のクライアントサーバのマルチユーザ検索システム320を考慮すると、サービングシステム325及びクエリ332を処理し、個別の回答334をそれらへ返すために使用されるそれらのコンポーネントについて以下で詳細に説明する。
<サービングシステムの構成要素>
[0097] 次に、図4を参照して、本発明のいくつかの実施形態に従う、サービングシステム325のより詳細を示すブロック図について説明する。サービングシステム325は1つ以上のサーバ326(以下、まとめて”フロントエンドサーバ326”として参照する)と、1つ以上のサーバ410(以下、まとめて”アクセス制御サーバ410”として参照する)と、クエリプロセッサ327とを含む。
[0098] クエリプロセッサ327は、(1)ドキュメントインデックス328の格納と、ドキュメントインデックス328のインデックスシャード(index shard)(例えば328A、328B、328C...328N)に対するクエリ332の処理とに対して責任をもつ1つ以上のサーバ430(まとめて”インデックスサーバ430”として参照される)と、(2)クエリ332と関連付けられたドキュメントネームスペース識別子に基づいて、フロントエンドサーバ326から適切なインデックスサーバ430へのクエリ332のルーティングと、インデックスサーバ430から返答される回答418を、その後フロントエンドサーバ326に、そして最後にエンドユーザコンピューティングデバイス311に返答される回答334に統合すること、に対する責任をもつ1つ以上のサーバ430(まとめて”ルーティングサーバ420”として参照される)、との2つのレベルのサーバにわたって分散される。
[0099] ドキュメントインデックス328の各インデックスシャード(例えば、328A、328B、328C...328N)は、対応するインデックスサーバ(例えば、430A、430B、430C...430N)において格納されうる。インデックスサーバ(430B)におけるインデックスシャード(例えば328B)は、当該インデックスシャードに割り当てられた1つ以上のドキュメントネームスペース内の、インデックスドキュメント340でありうる。
[0100] 動作において、フロントエンドサーバ326Aは、エンドユーザコンピューティングデバイス(例えば311A)から検索クエリ332Aを受信して、個別化された回答334Aをエンドユーザコンピューティングデバイスに返答する。回答334Aは、クエリ332Aに関連するものとして回答334で特定されたドキュメント340が、ユーザがアクセスを認証されたドキュメントネームスペースに属すドキュメント340にのみ限定されうるという意味において個別化されうる。クエリ332Aがコンプリーションクエリ(completion query)である場合、回答334Aはまた、回答334に含まれるコンプリーションクエリにあり得るコンプリーション要素が、ユーザがアクセスを認証されたドキュメントネームスペースに属すインデックスドキュメント340のドキュメントインデックス328におけるインデックストークンのみから構成されうるという意味において個別化されうる。ユーザは、認証されて、回答334Aの個別化を促進しうる。
[0101] 例えば、クエリ332Aは、認証されたユーザに対して確立された認証セッションのコンテキストにおいて、フロントエンドサーチ326Aで受信されうる。例えば、認証されたユーザは、クエリ332Aをフロントエンドサーバ326Aに送信するエンドユーザコンピューティングデバイスのユーザでありうる。認証されたユーザは、フロントエンドサーバ326Aがクエリ332Aを受信する前に認証されうる。例えば、認証されたユーザは、認証クレデンシャル(例えばユーザ名/パスワードのペア)を含んだ、エンドユーザコンピューティングデバイスからの認証ネットワーク要求を受信したことに応答して認証されうる。認証ネットワーク要求を受信したことに応じて、当該ネットワーク要求内のパスワードが当該ユーザ名に対する既知のパスワードと比較されうる。パスワードが一致した場合には認証セッションが確立する。そうではなくパスワードが一致しない場合、認証セッションは確立しない。
[0102] ユーザ名/パスワードのペア以外の認証クレデンシャルがユーザを認証するために用いられうる。例えば、ある例では、ユーザはマルチファクタ(multi-factor)認証技術に従って認証されうる。例えば、ユーザの知っている何か(例えばユーザ名/パスワード)に加えて、ユーザはユーザの所有する何か(例えばFOB又は携帯電話機)及びユーザ自身である何か(生体測定値)の少なくともいずれかに基づきうる。ある例では、ユーザがパスワードを提供しない認証プロトコルに従って認証されうる。この目的に適した認証プロトコルのいくつかの例は、オーオース(Open Authorization)(OAuth)、オープンId(OpenId)及びセキュリティアサーションマークアップ言語(Security Assertion Markup Language)(SAML)認証プロトコルを含む。
[0103] いくつかの例では、ユーザはフロントエンドサーバ326Aがクエリ332Aを受信する前に認証されるのに対し、他の実施形態では、ユーザはクエリ332Aを受信することに応じて認証される。例えば、クエリ332Aを含むネットワーク要求はまた、ユーザを認証する認証クレデンシャルを含み得、又は、ユーザは、他の方法でクエリ332Aを含むネットワーク要求を受信したことに応じて認証されうる。
[0104] ユーザが認証された後で、認証セッションは、セッション識別トークンの形式でユーザのために確立されうる。特に、当該セッション識別トークンは、成功裏にユーザを認証したことに応じて生成されうる。生成後には、セッション識別トークンは、ユーザのエンドユーザコンピューティングデバイスとフロントエンドサーバ326Aとの間で、クエリ332Aを含んだネットワーク要求と回答334Aを含むネットワーク応答を含む、ネットワーク要求及びネットワーク応答において(例えば”クッキー”で)送信されうる。セッション識別トークンは、直接的又は間接的(例えば連想配列を介して)に、ユーザが成功裏に認証したユーザアカウント(例えばユーザ名によってユニークに識別されるアカウント)を識別する。セッション識別トークンは、更なるセキュリティのために暗号によって暗号化され得る。
[0105] 時々(例えば、クエリ332Aを受信することに応じて)又はある期間にわたって(例えばユーザが認証された時間からユーザのエンドユーザコンピューティングデバイスに回答334Aが戻るまで)、認証セッションデータ411は、フロントエンドサーバ326Aの揮発性又は不揮発性メモリに格納されうる。認証セッションデータ411は、認証されたユーザのユーザ名、ユーザ識別子又は他のユーザアカウント識別子と、関連付けられた特権、許可及び権限の少なくともいずれかと、のような認証されたユーザと関連する情報を含み得る。
[0106] サービングシステム325は、クエリ332Aを満たし、且つ、ユーザのアクセスが認証されたドキュメントネームスペースに属すドキュメントインデックス328にインデックス化されたドキュメント340のみを識別するために、クエリ332Aへの回答334Aを制限することができる。サービングシステム325は、ドキュメントインデックス328が、クエリ332Aを満たすが、ユーザのアクセスが認証されていないドキュメントネームスペースに属すインデックスドキュメント340をインデックス化しうるものの、この制限を行うことができる。
[0107] クエリ332Aに対する回答334Aを制限するために、フロントエンドサーバ326Aは、ネットワーク要求412を送信してアクセス制御サーバ410Aにアクセスし、認証されたユーザによるアクセスが許容されるドキュメントネームスペースの識別子を要求する。アクセス制御サーバ410Aによる決定を容易にするため、ネットワーク要求412は、認証されたユーザの表示又は識別子を含みうる。例えば、識別又は識別子は、ユーザ名、セッション識別子トークン、ユーザアカウント識別子、又は、ユーザ及び/又はユーザが成功裏に認証されたユーザアカウントをユニークに識別する他の情報であってよい。
[0108] ネットワーク要求412を受信したことに応じて、アクセス制御サーバ410Aは、認証されたユーザがアクセスすることが許可されたドキュメントネームスペースのユーザアカウントデータベースの識別子(図4では不図示)をルックアップすることができ、このルックアップは、要求412で提供された、認証されたユーザの識別又は識別子をルックアップ動作のキーとして用いてなされる。
[0109] フロントエンドサーバ326Aは、様々な異なる時間帯において、アクセス制御サーバ410Aにネットワーク要求412を送信し得、例えば、フロントエンドサーバ426Aは、クエリ332Aを受信したことに応じて、ネットワーク要求412を送信しうる。他の例として、フロントエンドサーバ426Aは、成功裏にユーザを認証した後にネットワーク要求412を送信しうる。
[0110] ネットワーク要求412を受信したことに応じて、アクセス制御サーバ410Aは、認証されたユーザがアクセスを許可された、認証されたドキュメントネームスペースの識別子を含むネットワーク応答413を返す。認証された各ドキュメントネームスペースは、認証されたユーザが、ドキュメントネームスペースの明示的及び/又は暗黙的なアクセス制御に従ういくつかのアクセスレベルでアクセスを許可された認証されたドキュメントネームスペースを、ユニークに識別する。例えば、認証されたドキュメントネームスペースの識別子は、認証されたユーザが、ドキュメントネームスペースに属すドキュメント340への、少なくとも読み取りアクセス権を有するドキュメントネームスペースを識別しうる。続くネットワーク要求に対する処理の効率化のため、フロントエンドサーバ326Aは、認証されたユーザのために維持される認証セッションデータ411の一部として、認証されたドキュメントネームスペースの識別子を格納(キャッシュ)しうる。この場合、フロントエンドサーバ326Aは、クエリ332Aを受信したことに応じて、ネットワーク要求412をアクセス制御サーバ410Aに送信する必要がない。
[0111] ユーザのエンドユーザコンピューティングデバイスからのクエリ332Aを含むネットワーク要求はまた、ユーザが検索することを望むドキュメントネームスペースの識別子を特定しうる。この場合、ユーザが検索することを望むドキュメントのネームスペースの識別子のセットと、ユーザのアクセスが許可された認証されたドキュメントネームスペースの識別子のセットとの共通部分が計算されて、検索のための認証されたドキュメントネームスペースの識別子のセットが決定されうる。この共通部分は、フロントエンドサーバ326Aによって実行されうる。或いは、この共通部分は、アクセス制御サーバ410Aによって実行されうる。この場合、フロントエンドサーバ326Aは、ネットワーク要求412内に、ユーザが検索することを望むドキュメントのネームスペースの識別子を含み、ネットワーク応答413は、アクセス制御サーバ410Aによって計算されるような共通部分の結果を含みうる。
[0112] クエリ332Aを含むネットワーク要求が、特定の要求された検索すべきドキュメントネームスペースでない場合、認証された検索すべきドキュメントネームスペースの識別子のデフォルトのセットが選択されうる。このデフォルトのセットの選択は、応答413で戻る認証されたドキュメントネームスペースの識別子から、又は、場合によっては認証セッションデータ11の一部としてのキャッシュから、フロントエンドサーバ326Aによって実行されうる。或いは、アクセス制御サーバ410Aは、ユーザがアクセスを許可された、全ドキュメントネームスペースのセットからデフォルトのセットを選択しうる。いずれの場合も、デフォルトのセットは、a)ユーザがアクセスを許可された、全ドキュメントネームスペース(例えば、認証されたユーザのアカウントに関連付けられた全ドキュメントネームスペース)、又は、b)それらのサブセットを特定することができる。
[0113] 検索のための認証されたドキュメントネームスペースの識別子が決定された後、クエリ332Aと検索のための認証されたドキュメントネームスペースの識別子とを含むネットワーク要求が、クエリプロセッサ327による更なるクエリ332Aの処理のために、フロントエンドサーバ326Aからルーティングサーバ420Aに送信されうる。
[0114] クエリ332Aと検索のための認証されたドキュメントネームスペースの識別子とを含む、フロントエンドサーバ326Aからのネットワーク要求を受信したことに応じて、ルーティングサーバ420Aにおけるクエリプロセッサ327は、クエリ332Aをルーティングする1つ以上のサーバ430を決定する。この決定は、ルーティングサーバ420Aが、検索のための認証されたドキュメントネームスペースの識別子の各々に対して決定論マッピング機能(deterministic mapping function)416を適用した結果に基づいてなされうる。決定論マッピング機能416と、ドキュメントネームスペースの識別子が与えられたインデックスサーバマッピング417とはルーティングサーバ(例えば420A)によって用いられて、所定のドキュメントネームスペースのドキュメントをインデックス化するインデックスシャード(例えば328B)を格納するインデックスサーバ(例えば430B)が決定される。
[0115] 本発明のいくつかの実施形態に従って、決定論マッピング機能416は、ドキュメントネームスペースを割り当てるインデックスシャード(例えば328B)を決定するために、一方向ハッシュ関数、単純なハッシュ関数、コンシステントハッシュ(consistent hash)関数等を検索するドキュメントネームスペースの識別子に適用する。この決定を実行するため、ルーティングサーバ420Aのクエリプロセッサ327は、インデックスサーバマッピング417へのアクセスを有しうる。同時に、決定論マッピング機能416とインデックスサーバマッピング417とは、ルーティングサーバ420Aのクエリプロセッサ327の方法を提供して、所定のドキュメントネームスペースのためのインデックスを含むインデックスシャード(例えば328B)を可能するインデックスサーバ(例えば430B)のホスト名又はネットワークアドレスを決定する。
[0116] 本発明のいくつかの実施形態では、決定論マッピング機能416は、ハッシュ機構(hash mechanism)とモジュロ機構(modulo mechanism)とを含む。ハッシュ機構は、入力としてドキュメントネームスペースの識別子(例えばドキュメントネームスペースの識別子を表す文字列データ)を受け付け、出力としてハッシュ値hvを生成しうる。例えば、ハッシュ機構は、MD4、MD5、SHA−1又はSHA2メッセージダイジェストアルゴリズムを含み得、メッセージダイジェストアルゴリズムは、入力として提供されたドキュメントネームスペースの識別子に適用したときに、出力としてハッシュ値(例えば32ビットのハッシュ値)を生成する。モジュロ機構は、係数kによってハッシュ値hvを除算した余りrを計算し、これにより、入力のドキュメントネームスペースの識別子を、0からk−1の範囲内でkの1つにマッピングする。係数kは、例えば、実際の、期待される又は望ましいインデックスサーバ430の数、ドキュメントインデックス328によってインデックス化された、実際の、期待される又は望ましいドキュメントネームスペースの数、及び、実際の、期待される又は望ましいドキュメントネームスペースのグループの数の少なくともいずれかを含む、様々な異なる要素に基づいて選択され得る。1つの例示的な実施形態では、値kは2のべき乗であり少なくとも1024と等しい。
[0117] 本発明のいくつかの実施形態では、インデックスサーバマッピング417は、インデックスサーバ430のそれぞれに対するエントリを含む。このようなエントリのそれぞれは、0からk−1の範囲の1つ以上の重複していないサブレンジ(sub-range)によってキーが付与(keyed)される。例えば、マッピング417内の第1エントリE1は、0からk−1の範囲内における連続値の第1の範囲を定義するK1とK2の値を含むキーを有し得、マッピング417内の第2エントリE2は、0からk−1の範囲内における連続値の第2の範囲を定義するK3とK4の値を含むキーを含み得、ここで第1の範囲のK1からK2は第2の範囲のK3からK4とは重複しない。
[0118] ルーティングサーバ420Aにおけるクエリプロセッサ327が所定のドキュメントネームスペースの識別子に決定論マッピング機能416を適用する場合、0からk−1の範囲内の値rが生成されうる。ルーティングサーバ420Aにおけるクエリプロセッサ327は、インデックスサーバマッピング417と値rを情報交換して、値rがエントリキーの範囲内であるエントリを識別する。このエントリのホスト名又はネットワークアドレスは、所定のドキュメントネームスペースに属すドキュメント340をインデックス化するインデックスシャード(例えば328B)が格納されるインデックスサーバ(例えば430B)を識別しうる。
[0119] 本発明のいくつかの実施形態では、インデックスシャード(例えば328B)に割り当てられるドキュメントネームスペースは、インデックスシャードが格納されるインデックスサーバ(例えば430B)に格納されるインデックスファイルの数を低減するために、インデックスシャードのより少ない数のドキュメントネームスペースのグループにグループ分けされる。すなわち、インデックスシャード(例えば328B)内で、インデックスシャードに割り当てられたるドキュメントネームスペースはドキュメントネームスペースのグループに分割されうる。そのようなドキュメントネームスペースのグループのそれぞれは、複数のドキュメントネームスペースを含みうる。
[0120] 例えば、インデックスシャード(例えば328B)に割り当てられる2百万(2,000,000)のドキュメントネームスペースのそれぞれは、インデックスシャードの80のドキュメントネームスペースのグループの1つに分割されうる。効率化のため、インデックスシャード(例えば328B)が格納されるインデックスサーバ(例えば430B)は、80のドキュメントネームスペースのグループのそれぞれに対する、1つ以上のインデックスファイルを、2百万(2,000,000)のドキュメントネームスペースのそれぞれに対する、1つ以上のインデックスファイルの代わりに格納しうる。この場合、ドキュメントネームスペースの識別子に適用される場合にハッシュ機構によって出力されるハッシュ値hvは、所定のドキュメントネームスペースが属すドキュメントネームスペースのグループの識別子として用いられうる。
[0121] いくつかの実施形態では、ドキュメントネームスペースのグループはインデックスシャード(例えば328B)を更に分割するためには用いられない。このような実施形態では、係数kによってハッシュ値hvを除算した余りrが、所定のドキュメントネームスペースが割り当てられるドキュメントネームスペースのグループの識別子として用いられうる。これらの実施形態ではまた、インデックスシャードが格納されるインデックスサーバは、インデックスシャードが割り当てられる全てのドキュメントネームスペースに対する1つ以上のインデックスファイルを格納しうる。例えば、インデックスサーバは、インデックスシャードが割り当てられる全てのドキュメントネームスペースに対する単一のインデックスファイルを格納しうる。
[0122] 図4では、インデックスサーバマッピング417が決定論マッピング機能416及びルーティングサーバ420Aにおけるクエリプロセッサ327とは別に図示されているが、インデックスサーバマッピング417は、決定論マッピング機能416の構成要素、又はルーティングサーバ420Aにおけるクエリプロセッサ327の構成要素であってもよい。更に、各ルーティングサーバ420Aは、インデックスサーバマッピング417へのアクセスを有しうる。この場合、効率的なアクセスのために、インデックスサーバマッピング417のコピーがルーティングサーバ420のそれぞれにおいて格納(キャッシュ)されうる。追加的に又は代替的に、インデックスサーバマッピング417は、ネットワークサービスとしてルーティングサーバに対して利用可能であってもよい。サービングシステム325は、負荷分散、容量の増加、スループットの増加、レイテンシの低減、フェイルオーバ、及び冗長性の少なくともいずれかのために、水平方向にスケールされる複数のルーティングサーバ420を含みうる。
[0123] 例示的な実施形態では、ドキュメントインデックス328は、4億(400,000,000)を超えるドキュメントネームスペースのドキュメント340をインデックス化し、決定論マッピング機能416とインデックスサーバマッピング417とは、4億(400,000,000)を超えるドキュメントネームスペースのそれぞれを、およそ2百(200)のインデックスシャード(例えば328A、328B、328C...328N)の1つに割り当てる(マッピングする)。この例示的な実施形態では、各インデックスシャード(例えば328A)は、およそ2百万(2,000,000)のドキュメントネームスペースにおけるドキュメント340をインデックス化する。
[0124] いくつかの例では、インデックスサーバ(例えば430C)は、実際には水平方向に分散された複数のサーバを含み、インデックスシャード(例えば328C)に対する負荷分散、フェイルオーバ、冗長性を提供する。この場合、複数のインデックスサーバのそれぞれは、インデックスシャード(例えば328C)の複製(replica)又はコピーを格納しうる。
[0125] いくつかの例では、インデックスサーバ(例えば430A)は、インデックスシャード(例えば328A)の一部を格納する、複数のサーバを含む。この場合、複数のレベルのルーティングサーバが存在しうる。第1のルーティングレベルは、フロントエンドサーバ326Aから受信したクエリ332Aを、1つ以上のインデックスサーバ430にルーティングするルーティングサーバ420Aによって例示される。この例では、ルーティングサーバの第2のレベルは、インデックスサーバ(例えば430C)内でクエリをインデックスサーバの複数のサーバの1つ以上に更にルーティングするために存在しうる。この場合、第2のレベルのルーティングサーバはまた、決定論マッピング機能と、ドキュメントネームスペースの識別子に基づいてクエリをルーティングするための決定論マッピング機能416とインデックスサーバマッピング417のようなマッピングとを有し得る。
[0126] 図4の例では、クエリ332Aは、ルーティングサーバ420Aにより、決定論マッピング機能416とインデックスサーバマッピング417に従ってインデックスサーバ430Bと430Cとにルーティングされる。しかし、クエリ332Aは、クエリ332Aを用いて検索する認証されたドキュメントネームスペースの数に応じて、容易に単なる1つのインデックスサーバ430にルーティングされるか、2つ以上のインデックスサーバ430にルーティングされるかする。例えば、検索する1つの認証されたドキュメントネームスペースのみが存在する場合、又は、検索する全ての認証されたドキュメントネームスペースが1つのインデックスシャード(例えば328B)に割り当てられている場合、そのときは、クエリ332Aは、ルーティングサーバ420Aにより、単なる1つのインデックスサーバ(例えば430B)にルーティングされうる。
[0127] クエリ332Aをインデックスサーバ(例えば430B)にルーティングする場合、ルーティングサーバ420Aは、インデックスサーバへクエリ332Aを含むネットワーク要求を送信しうる。加えて、ネットワーク要求は、インデックスサーバに格納されたインデックスシャード(例えば328B)に割り当てられる、検索する識別されたドキュメントネームスペースの識別子を含みうる。加えて、そのような認証されたドキュメントネームスペースの識別子のそれぞれは、ネットワーク要求内で、ドキュメントネームスペースが属すドキュメントネームスペースのグループの識別子と関連付けられ得る。
[0128] 本発明のある実施形態では、インデックスサーバ(例えば430B)のクエリプロセッサ327は、ルーティングサーバ420Aから受信したネットワーク要求内の、ドキュメントネームスペースのグループの識別子を用いる。例えば、インデックスサーバのクエリプロセッサ327は、ネットワーク要求内のドキュメントネームスペースのグループの識別子に基づいて、インデックスサーバの不揮発性メモリに格納される所定のインデックスデータベースにのみ、又はインデックスサーバの不揮発性メモリに格納された所定のデータ構造にのみアクセスしうる。
[0129] 例として、対応するドキュメントネームスペースの識別子”abcd”及び”defg”を用いて2つの認証されたドキュメントネームスペースが検索されるべきであることを特定したクエリ332Aを含むネットワーク要求が、フロントエンドサーバ326Aからルーティングサーバ420Aに送信されることを想定する。更に、決定論マッピング機能416とインデックスサーバマッピング417に従って、認証されたドキュメントネームスペース”abcd”がドキュメントネームスペースのグループ”1234”に属し、かつインデックスシャード328Bに割り当てられるとともに、認証されたドキュメントネームスペース”defg”がドキュメントネームスペースのグループ”5678”に属し、かつインデックスシャード328Cに割り当てられることを想定する。この場合、ルーティングサーバ420Aからインデックスサーバ430Bへのネットワーク要求が、ドキュメントネームスペースのグループ”1234”におけるドキュメントネームスペース”abcd”が検索されるべきであることを特定し、ルーティングサーバ420Aからインデックスサーバ430Cへのネットワーク要求が、ドキュメントネームスペースのグループ”5678”におけるドキュメントネームスペース”defg”が検索されるべきであることを特定する。インデックスサーバ430Bは、クエリ332Aに対する回答418Aを形成する場合に、インデックスサーバ430Bへ送信されたネットワーク要求内の、ドキュメントネームスペースのグループの識別子”1234”を用いて、インデックスサーバ430Bのクエリプロセッサ327によってアクセスされるインデックスシャード328Bの部分を限定する。同様に、インデックスサーバ430Cは、クエリ332Aに対する回答418Bを形成する場合に、インデックスサーバ430Cへ送信されたネットワーク要求内の、ドキュメントネームスペースのグループの識別子”5678”を用いて、インデックスサーバ430Cのクエリプロセッサ327によってアクセスされるインデックスシャード328Cの部分を限定する。このような限定は、例えば、インデックスサーバの不揮発性メモリに格納されるインデックスデータベースファイル351、及び/又は、特定されたドキュメントネームスペースのグループの識別子に関連付けられたインデックスサーバの不揮発性のメモリ内のデータにのみアクセスすることを含みうる。
[0130] ルーティングサーバ420Aは、インデックスサーバ430のそれぞれのクエリプロセッサ327が並行してクエリを処理することができるように、クエリ332Aを複数のインデックスサーバ(例えば430B、430C)にルーティングしうる。例えば、ルーティングサーバ420Aは、クエリ332Aを含むネットワーク要求を、ルーティングサーバ420Aが、クエリ332Aを含むインデックスサーバ430Cへのネットワーク要求を送信するのと同時又はほぼ同時に、インデックスサーバ430に送信しうる。この場合、インデックスサーバ430Bのクエリプロセッサ327は、インデックスシャード328Bに対するクエリ332Aを、インデックスサーバ430Bのクエリプロセッサ327がインデックスシャード328Cに対するクエリ332Aを処理するのと同時又はほぼ同時に、処理しうる。
[0131] インデックスサーバ430(例えば430B)においてクエリ332Aが受信された場合、インデックスサーバのクエリプロセッサ327はインデックスサーバに格納されたインデックスシャード(328B)を情報交換して(にアクセスして)、クエリを満たすドキュメント340を決定する。このようにするために、インデックスサーバのクエリプロセッサ327は、クエリに対する回答(例えば418A)においておそらく識別可能なドキュメント340を、検索されるべき認証されたドキュメントネームスペースに属すドキュメント340のみに制限しうる。この制限を行うために、インデックスサーバのクエリプロセッサ327は、ルーティングサーバ420Aからのネットワーク要求において識別子クエリ332Aに付随する、認証されたドキュメントネームスペースを用いうる。加えて、インデックスシャードにインデックス化されたドキュメント340のドキュメント識別子は、インデックス化されたドキュメント340が属すドキュメントネームスペースの、ドキュメントネームスペースの識別子と関連付けられうる。これらの関連は、クエリプロセッサ327がドキュメント340を制限することを容易にする。ここで、当該ドキュメントは、1)クエリ332Aを満たすドキュメント、及び、2)検索されるべき認証されたドキュメントネームスペースの識別子の1つである、ドキュメントネームスペースの識別子に関連付けられたドキュメントに対するクエリへの回答の中で識別されることができる。インデックス化されたドキュメント340が別のやり方でクエリを満たしたとしても、ドキュメント340が検索する認証されたドキュメントネームスペースの1つに属さない場合には、インデックスサーバのクエリプロセッサ327は、クエリ332への回答418Aにおいてドキュメント340を特定しないようにしてもよい。
[0132] ルーティングサーバ(例えば420A)に戻るインデックスサーバ(例えば430B)からの回答(例えば418A)は、クエリ332Aを満たす認証されたドキュメントネームスペースの1つ以上でドキュメント340を識別しうる。ドキュメントは、インデックスサーバのクエリプロセッサ327によって採用されるランキング機能に従ってランク付けされうる。このランキング機能は、インデックス化されたドキュメントに対して計算された、クエリ依存型メトリクス及びクエリ非依存型メトリクスの少なくともいずれかに基づきうる。
[0133] クエリ332Aに対するインデックスサーバ(例えば430B)からの回答(例えば418A)は、ランキング機能によって生成された、識別されたドキュメントのそれぞれに対するランキングスコアを含みうる。クエリプロセッサ327は、異なるインデックスサーバで生成された、同一のクエリに対するランキングスコアが互換性を有するように、インデックスサーバ(例えば、430A、430B、430C、...430N)と全く同一のランキング機能を採用しうる。インデックスサーバと全く同一のランキング機能を用いることは、ルーティングサーバ420Aにおけるクエリプロセッサ327が、インデックスサーバ430B及び430Cから戻る、クエリ332Aに対する複数の回答418A及び418Bで識別されたドキュメント340を、フロントエンドサーバ326Aへ戻る、そして最終的には、フロントエンドサーバ326Aがクエリ332Aを受信したエンドユーザコンピューティングデバイス311Aに戻る、単一の回答334Aに統合できるようにする。
[0134] 本発明のいくつかの実施形態に従って、フロントエンドサーバ326Aは、従来型のスペリング修正アルゴリズム及び従来型の発音修正アルゴリズム(例えばsoundexアルゴリズム)の少なくともいずれかを、得られた検索クエリ332Aに適用しうる。スペリング修正アルゴリズムはスペリング修正の異なる形式を適用することができる。例えば、スペリング修正アルゴリズムは、従来型の分離語の修正アルゴリズム(isolated-term correction algorithm)(例えば、距離編集及び/又はk-gram重複)及び/又は従来型のコンテキスト依存型の修正アルゴリズムを適用することができる。従って、ルーティングサーバ420Aに転送され、インデックスサーバ430にルーティングされたクエリ332Aは、フロントエンドサーバ326Aによってクエリ332Aのトークンに対して実行されるスペリング修正及び/又は発音修正の結果を反映しうる。
<インデックスシャード>
[0135] 次に、図5を参照して、本発明のいくつかの実施形態に従う、ドキュメントインデックス328のインデックスシャード(例えば328B)のブロック図について説明する。本発明のいくつかの実施形態では、インデックスシャードは、辞書510と、対応する登録520とを含む逆インデックスのように構築されうる。
[0136] 辞書510は、登録520内で識別されるドキュメント340がインデックス化される、インデックストークン(例えばトークン1、トークン2、トークン3、...トークンN、)を含みうる。辞書510もまた、各インデックストークン(例えばトークン1)に対して、1つ以上のドキュメントの識別子(例えばDOC ID1)の登録リスト(例えば登録リスト2)へのポインタを含み得、当該1つ以上のドキュメントの識別子は、インデックストークンがインデックス化された(現われる)ドキュメント340を識別する。
[0137] 辞書510はまた、例えばトークン頻度情報、又は、クエリに依存した方法及び/又はクエリに非依存の方法で検索クエリへのドキュメントの関連をランク付け又は他の方法で決定するクエリプロセッサ327のランキング機能で用いられうる他の情報などの、例えばトークン属性情報などのインデックストークン以外の情報を含みうる。
[0138] 登録520の登録リスト(例えば、登録リスト2)は、ドキュメント識別子以外の情報、例えば、ドキュメントトークンの属性情報、例えば、特定のドキュメント340内のトークンのトークン頻度、特定のドキュメント340内のトークンの1つの位置又は複数の位置などの情報、又は、クエリに依存した方法及び/又はクエリに非依存の方法でクエリへのドキュメント340の関連をランク付けする又は他の方法で決定するクエリプロセッサ327のランキングアルゴリズムによって使用されうる他の情報を含みうる。
[0139] 登録520内のドキュメント識別子(例えばDOC ID1、DOC ID2、DOC ID3...DOC ID N)は、識別されるドキュメント340が属すドキュメントネームスペースを示すドキュメントネームスペースの識別子と関連付けられうる。この関連はまた、インデックスサーバ(例えば430B)のクエリプロセッサ327が、クエリ(例えば332)に対する回答(例えば417A)を制限して、検索されるべき認証されたドキュメントネームスペースに属すドキュメント340のみを識別できるようにする。
[0140] 例えば、登録リスト(登録リスト2)の要素は、ドキュメント340が属すドキュメントネームスペースを識別するドキュメントネームスペースの識別子を用いてプリフィックスされ(prefixed)得る。例えば、登録リスト(例えば登録リスト2)は、<ドキュメントネームスペースの識別子>:<ドキュメント識別子>の形式の文字列データであり得、ここで<ドキュメントネームスペースの識別子>は、ドキュメントネームスペースを識別する文字列データフィールド、<ドキュメント識別子>はドキュメントネームスペースに属すドキュメント340を識別する文字列データフィールドである。コロン”:”文字は、セパレータ文字として用いられて、登録リスト要素内の文字列データフィールドを分割する。他のセパレータ文字も使用可能である。セパレータ文字を用いないことも可能であり、例えば、文字列データフィールドを固定長にすることもできる。ドキュメント識別子のための他の形式も使用可能であり、本発明は特定のプレフィックス形式を何ら限定しない。
[0141] ドキュメント340と属すドキュメントネームスペースとを関連付けるドキュメントネームスペースの識別子を用いて、登録リストのドキュメント識別子をプレフィックスする代わりに、インデックスシャードは、多対1マッピングを有し得る。この多対1マッピングは、所定のドキュメント識別子を、ドキュメント340が属すドキュメントネームスペースの識別子にマップする。このマッピングは、ドキュメントネームスペースは複数のドキュメント340を含みうるため、多対1である。
[0142] 本発明のいくつかの実施形態では、スペースの効率化及び登録520のサイズ低減のため、登録リストのドキュメントネームスペースの識別子又はドキュメント識別子(例えば登録リスト2)は、ローカル識別子を含み、このローカル識別子は、インデックスシャード(インデックスシャード328B)に対して局所的であり、かつ、(バイト数に関して)サイズがより大きい、グローバルのドキュメントネームスペースの識別子又はグローバルのドキュメント識別子の代用となる。このローカル識別子は、当該ローカル識別子が代用となる、グローバルのドキュメントネームスペースの識別子或いはグローバルのドキュメント識別子よりも(バイト数に関して)サイズが小さくなり得る。
[0143] インデックスシャード(例えば328B)は、所定のローカル識別子をグローバルのドキュメント識別子にマップする1対1マッピングを含みうる。或いは、2つの1対1のマッピングを有し得る。マッピングの1つは、ローカルのドキュメントネームスペースの識別子からグローバルのドキュメントネームスペースの識別子へ変換し、他のマッピングは、ローカルのドキュメント識別子をグローバルのドキュメント識別子に変換する。更に他の代替として、所定のローカルドキュメントネームスペースからグローバルの識別子とドキュメント340の属すドキュメントネームスペースのグローバルドキュメントネームスペースの識別子に変換する1対1マッピングを有し得る。
[0144] 本説明において、明示的な説明がない限り、ドキュメント340の”ドキュメント識別子”は、ドキュメント識別子の全ての取り得る形式を参照し得、当該ドキュメント識別子は、ドキュメント340のローカルなドキュメント識別子とドキュメント340のグローバルなドキュメントの識別子とを含み、直接的に又は間接的に(例えば、連想配列を通じて)ユニークにドキュメント340を識別する。
[0145] 同様に、本説明において、明示的に説明がない限り、ドキュメントネームスペースの”ドキュメントネームスペースの識別子”は、ドキュメントネームスペースの識別子の全ての取り得る形式を参照し得、当該ドキュメントネームスペースの識別子は、ローカルなドキュメントネームスペースの識別子とグローバルなドキュメントネームスペースの識別子とを含み、ドキュメントネームスペースを直接的に又は間接的に(例えば、連想配列を通じて)ユニークにドキュメントネームスペースを識別する。
[0146] 本発明のいくつかの実施形態によれば、クエリ(例えば332)がインデックスサーバ(例えば430B)において受信されると、インデックスサーバのクエリプロセッサ327は、対応する登録リスト520における登録リストを識別するために、辞書510へのキーとしてクエリのクエリトークンを使用する。クエリに複数のクエリトークンがある場合、対応する登録リストは、複数のクエリのトークンが論理式として互いにどのように関連するのかに従って適切にマージされうる。
[0147] 本発明の実施形態では、インデックスサーバのクエリプロセッサ327は、クエリに対する回答(例えば417A)に含まれ得る、対応する登録リスト内で識別されるドキュメント340を、検索されるべき認証されたドキュメントネームスペースに属すドキュメント340に制限する。本発明のいくつかの実施形態では、インデックスサーバのクエリプロセッサ327は、対応する登録リスト内でドキュメント識別子に関連付けられたドキュメントネームスペースの識別子を比較することによって、(ルーティングサーバ(例えば420A)からの、クエリを含むネットワーク要求に含まれる)クエリと関連付けられた認証されたドキュメントネームスペースの識別子に限定する。クエリを他の方法で満たす、ドキュメント340のドキュメント識別子と関連付けられたドキュメントネームスペースの識別子が、クエリと関連付けられた認証されたドキュメントネームスペースの識別子と一致する場合、ドキュメント340はクエリに対する回答に含まれうる。しかしながら、ドキュメント識別子と関連付けられたドキュメントネームスペースの識別子が、クエリと関連付けられた認証されたドキュメントネームスペースの識別子と一致しない場合、そのドキュメントが他の方法でクエリを満たす場合であっても、ドキュメント340はクエリに対する回答に含まれない。このように、インデックスサーバ430のクエリプロセッサ327は、回答を、検索されるべきクエリと関連付けられた認証されたドキュメントネームスペースに属すドキュメント340のみに制限しうる。
[0148] 本発明のいくつかの実施形態では、インデックスシャードは複数の辞書510/登録520のペアを格納する。例えば、インデックスシャードは、インデックスシャードに関連付けられた複数のドキュメントネームスペースのそれぞれに対して、又は、インデックスシャードに関連付けられた複数のドキュメントネームスペースのグループのそれぞれに対して、辞書510と対応する登録520とを格納し得る。
[0149] 本発明の複数の実施形態では、インデックスシャード(328B)は、インデックスデータファイル351の識別可能な別々のセットと、インデックスシャードに関連付けられるドキュメントネームスペースのグループの識別子に従う揮発性メモリデータ構造とに組織化され得る。この場合、分離された辞書510、又は、インデックスシャードに割り当てられるドキュメントネームスペースのグループのそれぞれに対して分離された辞書510と対応する登録520が存在し得る。クエリ(例えば332)がインデックスサーバ(例えば430B)において受信されると、インデックスサーバのクエリプロセッサ327は、ルーティングサーバからのネットワーク要求における、認証されたドキュメントネームスペースの識別子と関連付けられたドキュメントネームスペースのグループの識別子を用いて、アクセスすべき、辞書510或いは辞書510と対応する登録520を決定することができる。
[0150] 本発明の複数の実施形態では、インデックスシャード(328B)は、インデックスデータファイルの識別可能な別々のセットと、インデックスシャードに関連付けられるドキュメントネームスペースの識別子に従う揮発性メモリデータ構造とに組織化され得る。この場合、分離された辞書510、又は、インデックスシャードに割り当てられるドキュメントネームスペースのそれぞれに対して分離された辞書510と対応する登録520が存在し得る。クエリ(例えば332)がインデックスサーバ(例えば430B)において受信されると、インデックスサーバのクエリプロセッサ327は、ルーティングサーバからのネットワーク要求における、認証されたドキュメントネームスペースの識別子と関連付けられたドキュメントネームスペースのグループの識別子を用いて、アクセスすべき、辞書510或いは辞書510と対応する登録520を決定することができる。
[0151] 本発明のいくつかの実施形態では、インデックスシャードは複数の辞書510/登録520のペアを、クエリの異なる種別を処理するために格納する。例えば、インデックスシャードに関連付けられた、所定のドキュメントネームスペース又はドキュメントネームスペースのグループに対し、インデックスシャードは、非コンプリーションクエリを処理するための第1の辞書510/登録520のペアと、コンプリーションクエリを処理するための第2の辞書510/登録520とを格納し得る。分離された辞書510/登録520のペアを格納することにより、構造と、辞書510のコンテンツ及び対応する登録520とが、所定の種別のクエリを処理するために適合したものになる。例えば、コンプリーションクエリを処理するための辞書510は、ドキュメントの全テキストと対立するインデックストークンとして、ドキュメントのファイル名に対するインデックストークンのみを含んで、不揮発性メモリ(例えばフラッシュメモリ)又は揮発性メモリ(例えばRAM)に格納する際に消費されるバイトに関して辞書のサイズを低減し得る。これにより、クエリプロセッサ327がより高速にコンプリーションクエリを処理することを可能にする。
[0152] インデックスサーバ(例えば430C)のクエリプロセッサ327は、より効率的なアクセスのため、辞書510(又はその一部)を不揮発性メモリ(例えばフラッシュメモリ)から揮発性メモリ(例えばRAM)に読み込む。登録リスト(例えば登録リスト2)は、より効率的なアクセスのため、インデックスサーバ(例えば430C)の不揮発性メモリ(例えばフラッシュメモリ)に格納され、及び/又は、インデックスサーバの揮発性メモリ(例えばRAM)にキャッシュされうる。キャッシュされた登録リストは、例えば最長未アクセスポリシーなどのキャッシュ退避ポリシーに従って、インデックスサーバの揮発性メモリから退避される。インデックスサーバ(例えば430B)のクエリプロセッサ327はまた、登録520から検索された複数の登録リストについて実行されるマージアルゴリズムの結果として生成される登録リストを、揮発性メモリにキャッシュしうる。このようにすることで、インデックスサーバのクエリプロセッサ327は、複数の登録リストについてマージアルゴリズムを後に実行しなければならなくなることを回避し得る。
[0153] 図5の参照を継続して、本発明のいくつかの実施形態では、コンプリーションクエリの処理を容易にするため、辞書510内のインデックストークンはドキュメントネームスペースの識別子によってプレフィックスされ得、プレフィックスされたインデックストークンは、辞書内においてプレフィックスされたインデックストークンの辞書順でソートされうる。この方法で構成される辞書510は、以下では”コンプリーション(completion)”辞書として参照される。
[0154] 本発明のいくつかの実施形態では、プレフィックスされたインデックストークンに関連付けられた登録リストは、プレフィックスされたインデックストークンにおいて識別されるドキュメントネームスペースに属す、ドキュメント340のドキュメント識別子を含みうる。従って、コンプリーション辞書が、1つ以上のドキュメントネームスペースに対するプレフィックスされたインデックストークンを含む場合、インデックストークンは、1度以上、複数のドキュメントネームスペースのそれぞれに対して一度の頻度で、コンプリーション辞書に現れ得る。
[0155] 例えば、コンプリーション辞書におけるプレフィックスされたインデックストークンは、<ドキュメントネームスペースの識別子>:<インデックストークン>の形式を有し得、ここで<ドキュメントネームスペースの識別子>は、ドキュメントネームスペースを識別する文字列データフィールド、<インデックストークン>はインデックストークンの文字を含む文字列データフィールドである。コロン”:”又は他の文字は、セパレータ文字として用いられて、プレフィックスされたインデックストークン内の文字列データフィールドを分割する。プレフィックスされたインデックストークンの例は、[abcd:プライベート](囲い括弧は除く)であり、ここで、”abcd”はドキュメントネームスペースの識別子であり、”プライベート”(private)はインデックストークンである。
[0156] プレフィックスされたインデックストークンの辞書順ソートに従ってコンプリーション辞書内のプレフィックスされたインデックストークンをソートすることにより、インデックスサーバ(例えば430B)のクエリプロセッサ327は、コンプリーションクエリのコンプリーショントークンに対して、より効率的に可能性のあるコンプリーション要素を識別することができる。特に、同一のドキュメントネームスペースに属し且つコンプリーショントークンと一致するプレフィックスを共有するコンプリーション辞書におけるインデックストークンは、プレフィックスされたインデックストークンの辞書順ソートの結果として、コンプリーション辞書が不揮発性メモリ又は揮発性メモリに格納される際に、(連続して又は隣接するメモリロケーションに)互いに近くに格納され(クラスタ化され)うる。このようなクラスタリングは、クエリプロセッサが、コンプリーショントークンに対する可能性のあるコンプリーション要素を決定するために、コンプリーション辞書にアクセスする場合に、連続的なメモリアクセスを容易にし、また、コンプリーション辞書にアクセスする場合のランダムメモリアクセスを低減又は排除する。
[0157] 例えば、ドキュメントネームスペース”abcd”に対するインデックストークン”concession”、”conclude”、”conclusion”、”concrete”及び”concurrent”は、プレフィックスされたインデックストークン”abcd:concession”、”abcd:conclude”、”abcd:conclusion”、”abcd:concrete”及び”abcd:concurrent”として、それぞれメモリ内で互いに近く格納され得る。例えば、コンプリーショントークン”con”を用いるコンプリーションクエリであって、且つ、例えば”abcd”の識別子を有する特定のドキュメントネームスペースが、検索される認証されたドキュメントネームスペースである、コンプリーションクエリを処理する場合、クエリプロセッサは、コンプリーション辞書にアクセスするためのインデックスキー”abcd:con”を生成し得る。辞書順ソートの結果として、プレフィックスされたインデックストークンはメモリ内で互いに近くに格納されるため、クエリプロセッサは、プレフィックスされたインデックストークンがメモリ内で互いに近くに格納されていない場合よりも、ドキュメントネームスペース”abcd”内のコンプリーショントークン”con”に対してあり得るコンプリーション要素として、インデックストークン”concession”、”conclude”、”conclusion”、”concrete”及び”concurrent”をより効率的に識別することができる。
[0158] プレフィックスされたインデックストークンの辞書順ソートの結果として、コンプリーション辞書のプレフィックスされたインデックストークンがメモリ内で互いに近くに格納されることに加えて、ソートされたプレフィックスされたインデックストークンに関連付けられるコンプリーション辞書の、対応する登録リストの格納場所へのポインタ(例えばアドレス)もまた、プレフィックスされたインデックストークンの辞書順ソートの結果として、メモリ内で互いに近くに格納されうる。特に、プレフィックスされたインデックストークンに対する登録リストの格納場所へのポインタは、メモリ内のプレフィックスされたインデックストークンの近くに格納されうる。例えば、ポインタとプレフィックスされたインデックストークンとは、同一のメモリブロック、若しくは、連続する又は隣接するメモリブロックの同じ組に格納されうる。従って、クエリプロセッサが、例えば、ドキュメントネームスペース”abcd”内のコンプリーショントークン”con”に対してあり得るコンプリーション要素として、インデックストークン”concession”、”conclude”、”conclusion”、”concrete”及び”concurrent”をより効率的に識別することができるだけでなく、クエリプロセッサはまた、辞書順ソートの結果として、これらのインデックストークンに対応する登録リストの格納場所をより効率的に識別することができる。
[0159] 本発明のいくつかの実施形態では、プレフィックスされたインデックストークンの辞書順にコンプリーション辞書のプレフィックスされたインデックストークンをソートすることは、各レコードが、プレフィックスされたインデックストークンと、プレフィックスされたインデックストークンに対する登録リストが格納された、揮発性又は不揮発性メモリの場所へ関連付けられたポインタと、を含むコンプリーション辞書の複数のレコード(データ構造)をソートすることを含む。複数のレコードは、プレフィックスされたインデックストークンの辞書順に従ってソートされうる。そして、ソートされたレコードは、連続した又は隣接したコンピュータメモリ(例えば揮発性メモリ又は不揮発性メモリ)のブロックに格納されうる。
[0160] 以降の説明は、プロセッサの制御下で1つ以上のコンピューティングデバイスの動作を行わせる、コンピュータで実行可能な命令を用いて実施されうる方法のステップを示す。コンピュータで実行可能な命令は、CD、DVD、フラッシュメモリ等のコンピュータで読み取り可能な記録媒体に格納されうる。コンピュータで実行可能な命令はまた、例えば、インターネット上の記憶場所(例えば、ウェブサーバ)からダウンロード及びインストールするための、ダウンロード可能で、コンピュータで実行可能な命令のセットとして格納されうる。
[0161] 方法のステップに対する所定の順序が図及び以降の説明から暗示され得る一方で、文脈が明確に示さない限り、当該方法のステップは示され且つ/又は説明されたものとは異なる順序で実行されうることが理解されるだろう。更に、文脈が明確に示さない限り、方法のステップは、互いに並行して(同時に)実行され得る。
<個人用検索のための処理>
[0162] 図6は、本発明の実施形態に従って、マルチユーザ検索システム320のサービングシステム325によって実行される個人用検索の処理600を示すフロー図である。
[0163] ステップ602において、以下で説明されるように、フロントエンドサーバ326Aによって、検索クエリ332Aが認証されたユーザのエンドユーザコンピューティングデバイス311Aから取得される。検索クエリ332Aは、コンプリーションクエリ又は非コンプリーションクエリでありうる。
[0164] ステップ604において、フロントエンドサーバ326Aは、以下で説明されるように、検索するための1つ以上の認証されたドキュメントネームスペースの1つ以上の識別子を決定する。そして、フロントエンドサーバ326Aは、以下で説明されるように、クエリ332Aと、検索するための1つ以上の認証されたドキュメントネームスペースの1つ以上の識別子とを、ルーティングサーバ420Aに転送する。
[0165] ステップ606において、ルーティングサーバ420Aは、以下で説明されるように、クエリ332Aがルーティングされるべき1つ以上のインデックスサーバ430を決定する。どのインデックスサーバ430にクエリ332Aをルーティングするかを決定するための、ルーティングサーバ420Aによって実行される本発明のいくつかの実施形態における処理は、以下及び図7に関して以降で説明されるようであってよい。
[0166] ステップ608において、ルーティングサーバ420Aは、以下で説明されるように、ステップ606においてクエリ332Aをルーティングするように決定された1つ以上のインデックスサーバ430のそれぞれに、クエリ332Aをルーティングする。
[0167] ステップ610において、以下で説明されるように、クエリ332Aは、ステップ608においてクエリ332Aがルーティングされた1つ以上のインデックスサーバ430のそれぞれにおける、クエリプロセッサ327によって処理される。上述したように、検索クエリ332Aは、コンプリーションクエリ又は非コンプリーションクエリでありうる。クエリ332Aが非コンプリーションクエリである場合に、クエリ332Aに対する個別化された回答(例えば418)を生成するための、インデックスサーバ(例えば430)においてクエリプロセッサ327によって実行される本発明のいくつかの実施形態における処理は、以下及び図8に関して以降で説明されるようであってよい。クエリ332Aがコンプリーションクエリである場合に、クエリ332Aに対する個別化された回答(例えば418)を生成するための、インデックスサーバ(例えば430)においてクエリプロセッサ327によって実行される本発明のいくつかの実施形態における処理は、以下及び図9に関して以降で説明されるようであってよい。
[0168] ステップ612において、以下で説明されるように、ルーティングサーバ420Aは、ステップ608においてクエリ332Aがルーティングされたインデックスサーバ430のそれぞれからの、クエリ332Aに対する個別化された回答(例えば418A)を受信してもよい。クエリ332Aがステップ608において複数のインデックスサーバ430にルーティングされた場合、ルーティングサーバ420Aは、ステップ612において複数の対応する個別化された回答418を受信してもよい。
[0169] ステップ612においてルーティングサーバ420Aが複数の個別化された回答418を受信した場合、ステップ614においてルーティングサーバ420Aは、以下で説明されるように、複数の個別化された回答を、その後フロントエンドサーバ326Aへ返信される、1つの個別化された回答334Aに統合してもよい。
[0170] ステップ616において、以下で説明されるように、フロントエンドサーバ326Aは、クエリ332Aを送信したエンドユーザコンピューティングデバイス311Aへ、クエリ332に対する個別化された回答334Aを返す。
<決定論的なクエリのルーティング>
[0171] 図7は、本発明のいくつかの実施形態に従って、所定のドキュメントネームスペースに属すドキュメント340をインデックス化するインデックスシャード(例えば328B)を格納するインデックスサーバ(例えば430)を決定する、ルーティングサーバ420Aによって実行される処理700を示すフロー図である。
[0172] ステップ702において、ルーティングサーバ420Aは、検索するための認証されたドキュメントネームスペースのそれぞれに対する識別子を取得する。例えば、ルーティングサーバ420Aは、クエリ332Aをも含む、フロントエンドサーバ326Aから受信したネットワーク要求において識別子を取得してもよい。
[0173] ステップ704において、ルーティングサーバ420Aの決定論マッピング機能416は、認証されたドキュメントネームスペースの識別子のそれぞれにハッシュアルゴリズム(例えばメッセージダイジェストアルゴリズム)を適用して、以下に説明するように、認証されたドキュメントネームスペースの識別子のそれぞれに対してハッシュ値hvを生成する。あらゆる数の異なるハッシュアルゴリズムを用いてよい。しかし、用いられるハッシュアルゴリズムは、ハッシュアルゴリズムが所定の認証されたドキュメントネームスペースの識別子に対して同一のハッシュ値を矛盾なく出力するという意味で決定論的でなければならない。ステップ704において使用されてよい、いくつかの適切なハッシュアルゴリズムの非限定的な例は、MD4、MD5、SHA−1及びSHA−2メッセージダイジェストアルゴリズムを含む。
[0174] ステップ706において、検索するための認証されたドキュメントネームスペースのそれぞれに対し、ルーティングサーバ402Aの決定論マッピング機能416は、以下で説明するように、認証されたドキュメントネームスペースに対してステップ704で計算したハッシュ値hvを係数kによって除算した余りrを計算する。
[0175] ステップ708において、検索するための認証されたドキュメントネームスペースのそれぞれに対し、ルーティングサーバ402Aの決定論マッピング機能416は、以下で説明するように、認証されたドキュメントネームスペースに対してステップ706で計算した余りrがエントリのキーの範囲内である、マッピング417内のマッピングエントリを識別する。上述したように、マッピング417はキーと値とを含んでよい。エントリのキーは、0からk−1の範囲内で連続する値のサブレンジ(sub-range)を定義してもよい。エントリの値は、インデックスサーバ(例えば430B)のホスト名およびネットワークアドレスの少なくともいずれかを含んでよい。例えば、エントリの値は、インデックスサーバのホスト名又はネットワークアドレスを含んでもよい。ここで、ルーティングサーバ420Aは、他の様々な情報にクエリ332Aを含んだネットワーク要求を生成し、インデックスサーバへ送信してよい。
[0176] ステップ710において、ステップ708で識別したインデックスサーバのそれぞれに対し、ルーティングサーバ420Aは、以下に説明するように、クエリ332Aをインデックスサーバへルーティングする。
<非コンプリーションクエリの処理>
[0177] 図8は、本発明のいくつかの実施形態に従って、クエリ332Aが非コンプリーションクエリである場合に、クエリ332Aに対する個別化された回答(例えば418)を生成するための、インデックスサーバ(例えば430)におけるクエリプロセッサ327によって実行される処理800を示すフロー図である。クエリ332Aは、ネットワーク要求においてルーティングサーバ(例えば420A)から受信されてよい。ネットワーク要求はまた、検索するための1つ以上の認証されたドキュメントネームスペースの1つ以上の識別子を含んでよい。加えて、そのような認証されたドキュメントネームスペースの識別子のそれぞれは、ネットワーク要求内で、ドキュメントネームスペースが属すドキュメントネームスペースのグループの識別子と関連付けられ得る。
[0178] ステップ802において、インデックスサーバのクエリプロセッサ327は、アクセスするためのインデックスサーバにおけるインデックスシャード(例えば320B)の1つ以上のインデックスを決定する。そのような各インデックスは、インデックスデータベースファイル351内に、インデックスサーバの不揮発性メモリ(例えばフラッシュメモリ)に格納された辞書(例えば510)と対応する登録(例えば520)を含む。そのような各インデックスはまた、揮発性メモリの構成要素を有してもよい。例えば、インデックスの辞書は、インデックスサーバの揮発性メモリに格納されてもよい。加えて、インデックスの登録からの様々な登録リストは、インデックスサーバの揮発性メモリに時々キャッシュされてもよい。クエリプロセッサ327は、キャッシュされた登録リストを、キャッシュ退避ポリシー(例えばLRU)に従って、揮発性メモリから退避してよい。
[0179] いくつかの実施形態に従って、インデックスのインデックスデータベースファイル351は変更不可能なものとして扱われ、インデックスへの更新はインデックスサーバの揮発性メモリに格納される。この更新は、ドキュメント340がインデックスにインデックス化されるべき新たなインデックストークンと、ドキュメント340がもはやインデックスにインデックス化されるべきでないインデックストークンとを含んでよい。より具体的に、インデックスサーバにおける揮発性メモリに格納されるインデックスのインデックストークンに対する”デルタ(delta)”登録リストは、インデックスのインデックスデータベースファイル351に格納されたインデックストークンに対する”基礎(base)”登録リストへの更新を反映してよい。
[0180] 例えば、インデックスサーバ(例えば430A)におけるインデックスのインデックスデータベースファイル351が、”solved”、”two”及び”problem”のトークンによってドキュメントD2をインデックス化しているとする。この場合、インデックスデータベースファイル351は、個々が”solved”、”two”及び”problem”のインデックストークンのそれぞれに対するものである、3つの基礎登録リスト(base posting list)を含んでよい。次に、ドキュメントD2が編集されて、”solved two problems”から”solved three problems”に置き換えられたとする。次に、インデックスサーバは、ドキュメントD2が、もはやインデックストークン”two”によってインデックス化されるべきではなく、現在はインデックストークン”three”によってインデックス化されるべきであることを特定する、1つ以上のインデックス変形352を受信するものとする。これらの変形352を表すため、インデックストークン”two”に対するデルタ登録リストがインデックスサーバの揮発性メモリに格納されて、ドキュメントD2がもはやインデックストークン”two”によってインデックス化されるべきではないことを(例えば削除ビットベクトルを用いて)表してよく、そして、インデックストークン”three”に対する他のデルタ登録リストがインデックスサーバの揮発性メモリに格納されて、ドキュメントD2がインデックストークン”three”によってインデックス化されるべきであることを(例えば、登録リスト内のドキュメントD2の識別子を含むことによって)表してよい。これらの変形352を表すために、インデックスデータベースファイル351を修正する必要がない。クエリ(例えば332A)を処理する場合、インデックスサーバのクエリプロセッサ327は、(RAMにキャッシュされていてよい)インデックスデータベースファイル351内の所定のクエリトークンに対する基礎登録リストと、揮発性メモリに格納された所定のクエリトークンに対するデルタ登録リストとの両方を情報交換してよい。クエリプロセッサ327は、デルタ登録リストと基礎登録リストとをマージして、所定のクエリトークンを満たすドキュメントを決定してよい。
[0181] いくつかの実施形態に従って、インデックスサーバのクエリプロセッサ327は、ステップ802において、ルーティングサーバ420Aからのネットワーク要求内の、ドキュメントネームスペースのグループの識別子に基づいて、アクセスするインデックスを決定する。例えば、クエリプロセッサ327は、ルーティングサーバ420Aからのネットワーク要求内の、ドキュメントネームスペースのグループの識別子に基づいて、特定のインデックスデータベースファイル351及び揮発性メモリ内の特定のデータ構造(例えば辞書、登録リストなど)の少なくともいずれかへのアクセスを決定してよい。
[0182] ステップ804において、ステップ802において決定したアクセスするための各インデックスに対して、インデックスから、クエリ332A内のクエリトークンのための登録リストが読み出される。このような読み出しは、インデックスサーバにおける不揮発性メモリに格納された登録リストを検索して、インデックスサーバにおける揮発性メモリ内にこの登録リストを格納することを含んでよい。いくつかの場合には、登録リストは、インデックスサーバにおける揮発性メモリに既に格納(キャッシュ)されていてもよい。この場合、インデックスサーバにおける不揮発性メモリから登録リストを検索する必要はないかもしれない。
[0183] ステップ806において、複数の登録リストがステップ804において読み出された場合、複数の登録リストは適宜マージされて、クエリ332Aを満たす(一致する)1つ以上のドキュメントの1つ以上の識別子を含んでよい、1つの”結果”登録リストが生成される。クエリを満たす(一致する)ドキュメントを決定する目的に対して、様々な異なるアルゴリズムを登録リストをマージするために用いることができる。本発明の実施形態は、特定のマージアルゴリズムに何ら限定されない。1つの登録リストのみがステップ804において読み出された場合、例えば、クエリ332A内には1つのクエリトークンしかないため、当該1つの読み出された登録リストが結果登録リストとなってよい。
[0184] ステップ808において、インデックスサーバのクエリプロセッサ327は、ランキングアルゴリズムに従って、クエリ332Aと一致する、結果登録リスト内のドキュメントをランクで順番付けする。ランキングアルゴリズムは、クエリ332Aに関して一致するドキュメントのそれぞれについてランキングスコアを計算することを含んでよい。種々の異なるランキングアルゴリズムが使用されてよく、本発明の実施形態はあらゆる特定のランキングアルゴリズムに限定されない。例えば、このランキングアルゴリズムは、クエリトークンと一致するドキュメントとに対する、クエリ依存型メトリクス及びクエリ非依存型メトリクスの少なくともいずれかに基づいて、ランキングスコアを計算してもよい。
[0185] ステップ810において、インデックスサーバのクエリプロセッサ327は、クエリ332Aに対する個別化された回答(例えば418A)を生成し、ルーティングサーバ420Aへネットワーク応答において回答を送信する。個別化された回答は、検索するための認証されたドキュメントネームスペースに属す、一致するドキュメントのみを特定してよい。このことを容易にするため、結果登録リスト内で特定された一致するドキュメントのそれぞれは、一致するドキュメントが属すドキュメントネームスペースの識別子と関連付けられてよい。インデックスサーバのクエリプロセッサ327は、ドキュメントが個別化された回答のなかから特定されるべきかを判定するために、一致するドキュメントのドキュメントネームスペースの識別子と、ルーティングサーバ420Aからのネットワーク要求に含まれる、認証されたドキュメントネームスペースの識別子のセットとを比較してよい。この比較において、一致するドキュメントが認証されたドキュメントネームスペースに属す場合、一致するドキュメントは個別化された回答から特定されてよい。そうでない場合、一致するドキュメントは、個別化された回答において特定され得ない。
<コンプリーションクエリの処理>
[0186] 図9は、本発明のいくつかの実施形態に従って、クエリ332Aがコンプリーションクエリである場合に、クエリ332Aに対する個別化された回答(例えば418)を生成するための、インデックスサーバ(例えば430)におけるクエリプロセッサ327によって実行される処理900を示すフロー図である。
[0187] コンプリーションクエリ332Aは、ネットワーク要求においてルーティングサーバ(例えば420A)から受信されてよい。ネットワーク要求はまた、検索するための1つ以上の認証されたドキュメントネームスペースの1つ以上の識別子を含んでよい。加えて、そのような認証されたドキュメントネームスペースの識別子のそれぞれは、ネットワーク要求内で、ドキュメントネームスペースが属すドキュメントネームスペースのグループの識別子と関連付けられ得る。加えて、ネットワーク要求は、コンプリーションクエリ332のどのクエリトークンがコンプリーショントークンであるかを示す或いは特定してよい。コンプリーションクエリ332Aにおける任意の他のクエリトークンは、コンプリートトークンとして考慮される。
[0188] 本発明のいくつかの実施形態に従って、インデックスサーバ(430B)におけるインデックスシャード(例えば328B)は、当該インデックスシャードに割り当てられた1つ以上のドキュメントネームスペースグループのそれぞれに対する、”コンプリーション(completion)”インデックスを含んでよい。そのような各コンプリーションインデックスは、コンプリーションインデックスのドキュメントネームスペースのグループに属す1つ以上のドキュメントネームスペースに、共にドキュメントをインデックス化するコンプリーション辞書と対応する登録を含んでよい。
[0189] 本発明のいくつかの実施形態に従って、インデックスサーバ(430A)のクエリプロセッサ327は、コンプリーションインデックスのドキュメントネームスペースのグループに属す、検索するための認証されたドキュメントネームスペースに対するコンプリーションクエリ332Aを処理する場合に、ドキュメントネームスペースグループに対するコンプリーションインデックスにアクセスする。
[0190] 本発明のいくつかの実施形態に従って、コンプリーションインデックスは、ドキュメントのファイル名のみをインデックス化する。すなわち、コンプリーション辞書のインデックストークンは、コンプリーションインデックスのドキュメントネームスペースグループに属す1つ以上のドキュメントネームスペースにおけるドキュメントのファイル名から抽出されたトークンに限定される。このようにして、コンプリーションインデックスのサイズが、全テキストのインデックス又はドキュメントネームスペースに対する他のインデックスより相対的に小さくなり得る。これにより、インデックスサーバのクエリプロセッサ327によってコンプリーションクエリ332のより効率的な処理を促進する一方で、同時にコンプリーションクエリ332に関連する回答418を提供できるようにする。
[0191] 上述したように、コンプリーション辞書は、辞書順のソート順でソートされた、プレフィックスされたインデックストークンを含む。そのようなインデックストークンのそれぞれは、ドキュメントネームスペースの識別子にプレフィックスされたインデックストークンを含む。ソートされているプレフィックスされたインデックストークンは、揮発性メモリ及び不揮発性メモリの少なくともいずれかに、ソートされた順番で互いに近くに格納(クラスタ化)されてよい。このようにして、プレフィックスされたインデックストークンをソート順で繰り返すことは、繰り返しの間の逐次的なメモリアクセスを容易にし、繰り返しの間のランダムなメモリアクセスを減らし得る。これにより、インデックスサーバのクエリプロセッサ327が、共通のプレフィックスを共有するコンプリーション辞書においてプレフィックスされたインデックストークンのセットにわたって繰り返すことを、より効率化することができる。
[0192] ここで再び図9を参照すると、ステップ902において、インデックスサーバのクエリプロセッサ327は、1つ以上のコンプリーション辞書にアクセスする際に用いるための、コンプリーションクエリ332Aのクエリトークンに対するインデックスキーを生成する。一般に、インデックスキーは、コンプリーション辞書内のプレフィックスされたインデックストークンの形式と一致する形式で、認証されたドキュメントネームスペースの識別子を用いてクエリトークンをプレフィックスすることによって生成される。例えば、コンプリーション辞書内のプレフィックスされたインデックストークンの形式が<ドキュメントネームスペースの識別子>:<インデックストークン>である場合、生成されるインデックスキーの形式は、<認証されたドキュメントネームスペースの識別子>:<クエリトークン>の形式であってよい。
[0193] ステップ902において、インデックスサーバのクエリプロセッサ327は、各クエリトークンに対する複数のインデックスキーであって、検索するための複数の認証されたドキュメントネームスペースの識別子のそれぞれに対するインデックスキーを生成してよい。ここで、検索するための認証されたドキュメントネームスペースのそれぞれは、インデックスサーバのインデックスシャードに割りあてられる。
[0194] ステップ904−916は、ルーティングサーバ420Aからのネットワーク要求において特定される、検索するための認証された各ドキュメントネームスペースに対して、インデックスサーバのクエリプロセッサ327によって実行されてよい。
[0195] ステップ904において、所定の検索するための認証されたドキュメントネームスペースに対し、コンプリーションクエリ332Aの任意のコンプリートトークンについてステップ902で生成された、任意のインデックスキーを用いて、所定の認証されたドキュメントネームスペースが属すドキュメントネームスペースのグループに対するコンプリーション辞書にアクセスする。特に、インデックスキーに関連付けられた登録リストは、コンプリーションクエリ332Aのコンプリートトークンに対して読み出される。
[0196] ステップ906において、所定の検索するための認証されたドキュメントネームスペースに対し、ステップ904でコンプリートトークンについて読み出された任意の登録リストがマージされ、コンプリーションクエリ332Aのコンプリートトークンに対する”結果”登録リストが生成される。
[0197] ルーティングサーバ420Aからのネットワーク要求で特定される、検索するための認証されたドキュメントネームスペースのそれぞれに対して実行されるステップ908−916に加え、ステップ908−916は、コンプリーションクエリ332Aにおけるコンプリーショントークンに対して可能性のあるコンプリーションとして、コンプリーション辞書内で識別される複数の可能性のあるコンプリーショントークンのそれぞれに対して実行されてよい。
[0198] 認証されたドキュメントネームスペースに対して実行されるステップ908−916は、一般に、コンプリーショントークンのために生成されたインデックスキーを用いてコンプリーション辞書にアクセスすることと、複数のプレフィックスされたインデックストークンの辞書順で、複数のプレフィックスされたインデックストークンにわたって、停止条件に至るまで繰り返すことを含む。認証されたドキュメントネームスペースにわたって繰り返された、複数のプレフィックスされたインデックストークンのそれぞれは、プレフィックスとして認証されたドキュメントネームスペースの識別子、サフィックスとしてのインデックストークン、及び、プレフィックスである又はインデックストークンと一致するコンプリーショントークンを含んでよい。繰り返しの間はまた、複数のプレフィックスされたインデックストークンの各プレフィックスされたインデックストークンに対し、プレフィックスされたインデックストークンと関連付けられた登録リスト内で識別される任意のドキュメントがコンプリーションクエリを満たすかを判定する。コンプリーションクエリを満たす登録リスト内のドキュメントに対する情報は、コンプリーションクエリに対する回答に返されてよい。いくつかの実施形態では、プレフィックスされたインデックストークンは、ドキュメントのファイル名からのものであり、ドキュメントに対するコンプリーションクエリについての回答において返答される情報は、ドキュメントのファイル名である。
[0199] 本発明のいくつかの実施形態では、プレフィックスされたインデックストークンの辞書順で、複数のプレフィックスされたトークンにわたって繰り返す代わりに、プレフィックスされたインデックストークンは、対応する登録リストのサイズの減少順において繰り返す。ここで、登録リストのサイズは登録リストにおいて識別されたドキュメントの数によって決定される。プレフィックスされたインデックストークンをこの順番で繰り返すことにより、大部分のドキュメントがこれによりインデックスされる、コンプリーショントークンに対して可能性のあるコンプリーションが、コンプリーションクエリに対する回答に包含されるかをまず考慮にいれる。
[0200] この繰り返しを容易にするため、補助的なネームスペースのトークンごとの頻度マッピング(per-namespace token-frequency mapping)がインデックスサーバにおいて維持されてよい。このマッピングの各エントリは、キー(key)と対応する値(value)とを含む。このような各キーはインデックストークンを含み、このような値のそれぞれは、インデックストークンとドキュメントネームスペースに対するコンプリーション辞書内の登録リストのサイズを含む。補足的なマッピングのエントリは、マッピング内でエントリーキーのインデックストークンの辞書順でソートされ、揮発性メモリ及び不揮発性メモリの少なくともいずれかの隣接する位置に、ソートされた順番で格納(クラスタ化)されてよい。これは、インデックスサーバのクエリプロセッサ327が、コンプリーションクエリ332A内のコンプリーショントークンと一致する共通のプレフィックスを共有する、補足的なマッピング内の全てのインデックストークンをより効率的に識別することを可能にする。ひとたび全てのこのようなインデックストークンが識別されれば、これらは、補足的なマッピングのおいてエントリ値で特定される登録リストのサイズの減少順でソートされる。インデックストークンのソート順の結果は、コンプリーション辞書にアクセスし、コンプリーショントークンに対して可能性のあるコンプリーションを考慮する際の、インデックストークンに対する繰り返しの順序である。補足的なマッピングはインデックストークンに対して実際の登録リストを格納しないため、この補足的なマッピングは、コンプリーションインデックスのバイト数に関して、サイズにおいてずっと小さくなってよい。結果として、インデックストークンに対する繰り返しの順序は、繰り返しの順がコンプリーションインデックスそのものから決定されれば、より少ないメモリI/O動作を用いる付加的なマッピングから決定することができる。
[0201] ステップ908において、クエリプロセッサ327は、繰り返しの順で、コンプリーショントークンに対する可能性のあるコンプリーションである次のインデックストークンを決定する。説明したように、繰り返しの順は、コンプリーショントークンと一致する共通のプリフィックスを共有するインデックストークンの辞書順に基づく、又は、インデックストークンに対する登録リストのサイズの減少順に基づくことができる。
[0202] ステップ910において、クエリプロセッサ327は、繰り返しの中のステップ908において決定されたクエリ332A内のコンプリーショントークンに対する現在の可能性のあるコンプリーショントークンについての登録リストを読み出す。いくつかの場合には、現在の可能性のあるコンプリーショントークンについての登録リストは、インデックスサーバにおける揮発性メモリに既に格納されていてもよい。この場合、不揮発性メモリから登録リストを検索する必要はないかもしれない。
[0203] ステップ912において、コンプリーションクエリ332Aに任意のコンプリートトークンがあった場合、ステップ906において決定されたコンプリートトークンについての結果登録リストは、繰り返しの中のステップ910において決定されたコンプリーショントークンに対する現在の可能性のあるコンプリーショントークンについての登録リストにマージされる。このマージから生じるコンプリーションクエリ332Aに対するこの現在の”結果”登録リストは、コンプリーションクエリ332Aを満たす、認証されたドキュメントネームスペース内の1つ以上のドキュメントの識別子を含んでよい。ここで、コンプリーショントークンは、現在の可能性のあるコンプリーショントークンで置き換えられる。コンプリーションクエリ332Aに任意のコンプリートトークンがなかった場合、コンプリーションクエリ332Aに対する現在の結果登録リストは、繰り返しの中のステップ910における現在の可能性のあるコンプリーショントークンに対する登録リストでありうる。
[0204] ステップ914において、コンプリーションクエリ332Aに対する現在の結果登録リストが空でない(例えば、認証されたドキュメントネームスペースにおいて少なくとも1つのドキュメントが識別される)場合、コンプリーションクエリ332Aに対する現在の結果登録リスト内で識別される各ドキュメントの情報は、コンプリーションクエリ332Aに対する回答(例えば418A)において送信されてよい。いくつかの実施形態では、この情報は、ドキュメントのファイル名を含む。
[0205] いくつかの実施形態に対し、ドキュメントのファイル名は、コンプリーションクエリ332Aに対する回答(例えば418A)において返信され、現在の可能性のあるコンプリーショントークンで置き換えられたコンプリーショントークンを有するコンプリーションクエリ332Aは、コンプリーションクエリ332Aに対する現在の結果登録リストが空でない場合に、コンプリーションクエリ332Aに対する回答(例えば418A)において戻される。いずれの場合も、コンプリーションクエリ332Aに対する回答(例えば418A)において戻る情報は、ユーザによる選択と他のクエリ332Aとしてのサービングシステム325への送信のために、最終的にエンドユーザコンピューティングデバイスに提示されてよい。
[0206] ステップ916において、インデックスサーバのクエリプロセッサ327は、コンプリーションクエリ332Aのコンプリーショントークンに対する、可能性のあるコンプリーショントークンにわたる繰り返しを継続するかを判定する。いくつかの実施形態に従って、クエリプロセッサ327は、停止条件が成立した場合に繰り返しを停止する。いくつかの実施形態に従って、停止条件は、任意の以下の条件が真になった場合に成立する。
・可能性のあるコンプリーショントークンで置き換えられたコンプリーションクエリ332Aにおいて、コンプリーショントークンを有するコンプリーションクエリ332Aを満たすドキュメントの閾値数が特定されている、
・可能性のあるコンプリーショントークンの閾値数が考慮されている、又は、
・クエリ実行タイマの時間を経過している。
[0207] ステップ916において停止条件が成立したと判定した場合、コンプリーションクエリ332Aにおけるコンプリーショントークンに対する可能性のあるコンプリーショントークンについての繰り返しを終了する。そうでない場合、ステップ908において、次の可能性のあるコンプリーショントークンを用いて繰り返しが再び継続する。
[0208] コンプリーションクエリを処理する上述した処理は、エンドユーザに多くの利益を提供する。1つは、この処理は、興味のあるドキュメントを識別する回答をユーザが受信するために要する時間を低減することができる。他には、この処理は、興味のあるドキュメントを見つけるためにユーザが検索フィールドに入力するキーストロークの数を低減することができる。更に他の理由は、この処理は、ユーザがトークンの正しいスペルを覚えておく負担を抑制することができる。
[0209] いくつかの実施形態のおいて、上述した処理は、ドキュメントのファイル名に対する、個人用の検索クエリの自動コンプリーションを提供したが、上述した処理は、他の実施形態においてドキュメントコンテンツに対して、個人用の検索クエリの自動コンプリーションを提供する。
<拡張及び代替例>
[0210] 本発明は、1つの好ましい実施形態と所定の代替形態への特定の参照と共にいくつかの詳細を説明したが、本発明を特定の実施形態やこれらの特定の代替形態に限定する意図はない。従って、当業者は、当該好ましい実施形態に本発明の開示から離れること無く変形がなされてもよいことを理解するであろう。

Claims (42)

  1. 個人用検索のためのシステムであって、
    複数のインデックスシャードを格納する複数のインデックスサーバであって、前記複数のインデックスシャードの各インデックスシャードが複数のドキュメントをインデックス化するものであり、前記複数のドキュメントの各ドキュメントが、前記インデックスシャードに割り当てられる複数のドキュメントネームスペースの1つに属す、複数のインデックスサーバと、
    認証されたユーザのエンドユーザコンピューティングデバイスから検索クエリを受信するフロントエンドサーバコンピュータと、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースを決定するアクセス制御サーバと、
    前記検索クエリに回答するとともに、前記検索クエリを満たしかつ前記認証されたドキュメントネームスペースに属すドキュメントのみを特定するために、前記認証されたドキュメントネームスペースの識別子に基づいて前記検索クエリに対する回答を限定するクエリプロセッサと、
    を含むシステム。
  2. 請求項1に記載のシステムであって、前記クエリプロセッサは、更に、前記認証されたドキュメントネームスペースの識別子に基づいて、前記認証されたドキュメントネームスペースが割り当てられたインデックスシャードを格納する、前記複数のインデックスサーバのインデックスサーバを識別し、前記識別されたインデックスサーバに前記検索クエリを送信するように構成される、システム。
  3. 請求項1に記載のシステムであって、更に、
    前記認証されたドキュメントネームスペースの識別子を、前記複数のインデックスサーバのインデックスサーバに決定論的にマッピングする決定論マッピング機能と、
    前記決定論マッピング機能に従って前記検索クエリを前記複数のインデックスサーバのインデックスサーバにルーティングするルーティングサーバと、を含む、システム。
  4. 請求項1に記載のシステムであって、前記複数のインデックスシャードのうちのインデックスシャードは、インデックストークンの辞書と複数の対応する登録リストとを含み、前記複数の登録リストの登録リストは1つ以上のドキュメントの識別子を含み、前記1つ以上のドキュメントの識別子のドキュメントの識別子は、前記各ドキュメントの識別子によって識別されるドキュメントが属すドキュメントネームスペースの識別子と関連付けられる、システム。
  5. 請求項1に記載のシステムであって、前記クエリプロセッサは、更に、前記ドキュメントの識別子によって識別されるどのドキュメントが前記認証されたドキュメントネームスペースに属すかを判定するために、前記認証されたドキュメントネームスペースの識別子と、前記複数のインデックスシャードにおけるインデックスシャードの登録リスト内にあるドキュメントの識別子に関連付けられたドキュメントネームスペースの識別子とを比較するように構成される、システム。
  6. 複数のインデックスサーバにおいて複数のインデックスシャードを格納するマルチユーザコンピュータシステムであって、前記複数のインデックスシャードの各インデックスシャードは複数のドキュメントをインデックス化するものであり、前記複数のドキュメントの各ドキュメントは、前記インデックスシャードに割り当てられる複数のドキュメントネームスペースの1つに属す、マルチユーザコンピュータシステムにおける、個人用検索の方法であって、
    認証されたユーザのエンドユーザコンピューティングデバイスから検索クエリを受信することと、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースを決定することと、
    前記検索クエリを満たしかつ前記認証されたドキュメントネームスペースに属すドキュメントのみを特定するために、前記認証されたドキュメントネームスペースの識別子に基づいて前記検索クエリに対する回答を限定することと、
    を含む、方法。
  7. 請求項6に記載の方法であって、更に、
    前記認証されたドキュメントネームスペースの識別子に基づいて、前記認証されたドキュメントネームスペースが割り当てられたインデックスシャードを格納する、前記複数のインデックスサーバのインデックスサーバを識別することと、
    前記識別されたインデックスサーバに前記検索クエリを送信することと、を含む、方法。
  8. 請求項6に記載の方法であって、更に、
    決定論マッピング機能を前記認証されたドキュメントネームスペースの識別子に適用することに基づいて、前記検索クエリを送信する、前記複数のインデックスサーバのインデックスサーバを選択すること、を含む、方法。
  9. 請求項6に記載の方法であって、前記複数のインデックスシャードのうちのインデックスシャードは、インデックストークンの辞書と複数の対応する登録リストとを含み、前記複数の登録リストの登録リストは1つ以上のドキュメントの識別子を含み、前記1つ以上のドキュメントの識別子のドキュメントの識別子は、前記各ドキュメントの識別子によって識別されるドキュメントが属すドキュメントネームスペースの識別子と関連付けられる、方法。
  10. 請求項6に記載の方法であって、更に、前記ドキュメントの識別子によって識別されるどのドキュメントが前記認証されたドキュメントネームスペースに属すかを判定するために、前記認証されたドキュメントネームスペースの識別子と、前記複数のインデックスシャードにおけるインデックスシャードの登録リスト内にあるドキュメントの識別子に関連付けられたドキュメントネームスペースの識別子とを比較すること、を含む、方法。
  11. 1つ以上のプログラムを格納した1つ以上のコンピュータ可読媒体であって、前記1つ以上のプログラムは1つ以上のコンピューティングデバイスで実行されると、前記1つ以上のコンピューティングデバイスに請求項6から10のいずれか1項に記載の方法を実行させる、コンピュータ可読媒体。
  12. 個人用検索のためのシステムであって、
    複数のインデックスシャードを格納する複数のインデックスサーバであって、前記複数のインデックスシャードの各インデックスシャードが複数のドキュメントをインデックス化するものであり、前記複数のドキュメントの各ドキュメントが、前記インデックスシャードに割り当てられる複数のドキュメントネームスペースの1つに属す、複数のインデックスサーバと、
    認証されたユーザのエンドユーザコンピューティングデバイスから検索クエリを受信する手段と、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースを決定する手段と、
    前記検索クエリに回答するクエリプロセッサは、前記検索クエリを満たしかつ前記認証されたドキュメントネームスペースに属すドキュメントのみを特定するために、前記認証されたドキュメントネームスペースの識別子に基づいて前記検索クエリに対する回答を限定する手段を含む、クエリプロセッサと、
    を含むシステム。
  13. 請求項12に記載のシステムであって、更に、前記認証されたドキュメントネームスペースの識別子に基づいて、前記認証されたドキュメントネームスペースが割り当てられたインデックスシャードを格納する、前記複数のインデックスサーバのインデックスサーバを識別する手段を含む、システム。
  14. 請求項12に記載のシステムであって、更に、
    前記認証されたドキュメントネームスペースの識別子に基づいて、前記検索クエリを送信する、前記複数のインデックスサーバのインデックスサーバを決定論的に選択する手段を含む、システム。
  15. 請求項12に記載のシステムであって、前記複数のインデックスシャードのうちのインデックスシャードは、インデックストークンの辞書と複数の対応する登録リストとを含み、前記複数の登録リストの登録リストは1つ以上のドキュメントの識別子を含み、前記1つ以上のドキュメントの識別子のドキュメントの識別子は、前記各ドキュメントの識別子によって識別されるドキュメントが属すドキュメントネームスペースの識別子と関連付けられる、システム。
  16. 請求項12に記載のシステムであって、前記複数のインデックスシャードにおけるインデックスシャードの登録リスト内にあるドキュメントの識別子によって識別されたどのドキュメントが前記認証されたドキュメントネームスペースに属すかを判定する手段を含む、方法。
  17. マルチユーザコンピュータシステムにおける、個人用検索クエリをオートコンプリートする方法であって、
    認証されたユーザのエンドユーザコンピューティングデバイスから、コンプリーショントークンを含むコンプリーション検索クエリを受信することと、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースの識別子を決定することと、
    プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記コンプリーショントークンとを含むインデックスキーを生成することと、
    複数のプレフィックスされたインデックストークンの辞書順に並んだ前記複数のプレフィックスされたインデックストークンに対して、停止条件を満たすまで識別と繰り返しを行うために、前記インデックスキーを用いてインデックス辞書にアクセスすることであって、複数のプレフィックスされたインデックストークンのそれぞれは、プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記インデックストークンのそれぞれとを含み、前記コンプリーショントークンは、前記各インデックストークンのプレフィックスである、又は前記各インデックストークンと一致する、アクセスすることと、
    複数のプレフィックスされたインデックストークンにおける各プレフィックスされたインデックストークンに対し、前記各プレフィックスされたインデックストークンに関連付けられた登録リスト内で識別されたドキュメントのいずれかが前記コンプリーションクエリを満たすかを判定するとともに、前記コンプリーションクエリを満たすドキュメントのいずれかのファイル名を、前記コンプリーションクエリに対する回答において返すことと、を含む、方法。
  18. 請求項17に記載の方法であって、前記インデックス辞書は、複数のドキュメントネームスペースに属すドキュメントのファイル名から抽出されたインデックストークンを含む、方法。
  19. 請求項17に記載の方法であって、前記停止条件は、ドキュメントファイル名の数の閾値が、前記コンプリーションクエリに対する回答において返された後に、満たされる、方法。
  20. 請求項17に記載の方法であって、前記停止条件は、クエリ実行タイマの有効期限切れの後に、満たされる、方法。
  21. 請求項17に記載の方法であって、前記停止条件は、前記辞書順に並んだ前記複数のインデックストークンにおけるインデックストークンの数の閾値を超えて識別及び繰り返しを行った後に、満たされる、方法。
  22. 請求項17に記載の方法であって、前記コンプリーションクエリは、少なくとも1つのコンプリーショントークンを含む、方法。
  23. マルチユーザコンピュータシステムにおける、個人用検索クエリをオートコンプリートする方法であって、
    認証されたユーザのエンドユーザコンピューティングデバイスから、コンプリーショントークンを含むコンプリーション検索クエリを受信することと、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースの識別子を決定することと、
    プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記コンプリーショントークンとを含むインデックスキーを生成することと、
    複数のプレフィックスされたインデックストークンに関連付けられた登録リストのサイズの減少順に従った前記複数のプレフィックスされたインデックストークンに対して、停止条件を満たすまで識別と繰り返しを行うために、前記インデックスキーを用いてインデックス辞書にアクセスすることであって、複数のプレフィックスされたインデックストークンのそれぞれは、プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記インデックストークンのそれぞれとを含み、前記コンプリーショントークンは、前記各インデックストークンのプレフィックスである、又は前記各インデックストークンと一致する、アクセスすることと、
    複数のプレフィックスされたインデックストークンにおける各プレフィックスされたインデックストークンに対し、前記各プレフィックスされたインデックストークンに関連付けられた登録リスト内で識別されたドキュメントのいずれかが前記コンプリーションクエリを満たすかを判定するとともに、前記コンプリーションクエリを満たすドキュメントのいずれかのファイル名を、前記コンプリーションクエリに対する回答において返すことと、を含む、方法。
  24. 請求項23に記載の方法であって、前記インデックス辞書は、複数のドキュメントネームスペースに属すドキュメントのファイル名から抽出されたインデックストークンを含む、方法。
  25. 請求項23に記載の方法であって、前記停止条件は、ドキュメントファイル名の数の閾値が、前記コンプリーションクエリに対する回答において返された後に、満たされる、方法。
  26. 請求項23に記載の方法であって、前記停止条件は、クエリ実行タイマの有効期限切れの後に、満たされる、方法。
  27. 請求項23に記載の方法であって、前記停止条件は、前記複数のインデックストークンにおけるインデックストークンの数の閾値を超えて識別及び繰り返しを行った後に、満たされる、方法。
  28. 請求項23に記載の方法であって、前記コンプリーションクエリは、少なくとも1つのコンプリーショントークンを含む、方法。
  29. 1つ以上のプログラムを格納した1つ以上のコンピュータ可読媒体であって、前記1つ以上のプログラムは1つ以上のコンピューティングデバイスで実行されると、前記1つ以上のコンピューティングデバイスに請求項17から28のいずれか1項に記載の方法を実行させる、コンピュータ可読媒体。
  30. 個人用検索クエリをオートコンプリートするシステムであって、
    認証されたユーザのエンドユーザコンピューティングデバイスから、コンプリーショントークンを含むコンプリーション検索クエリを受信するように構成されたフロントエンドサーバコンピュータと、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースの識別子を決定するように構成されたアクセス制御サーバコンピュータと、
    プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記コンプリーショントークンとを含むインデックスキーを生成するように構成されたインデックスサーバコンピュータと、
    前記インデックスサーバは、更に、複数のプレフィックスされたインデックストークンの辞書順に並んだ前記複数のプレフィックスされたインデックストークンに対して、停止条件を満たすまで識別と繰り返しを行うために、前記インデックスキーを用いてインデックス辞書にアクセスするように構成され、複数のプレフィックスされたインデックストークンのそれぞれは、プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記インデックストークンのそれぞれとを含み、前記コンプリーショントークンは、前記各インデックストークンのプレフィックスである、又は前記各インデックストークンと一致し、
    前記インデックスサーバは、更に、複数のプレフィックスされたインデックストークンにおける各プレフィックスされたインデックストークンに対し、前記各プレフィックスされたインデックストークンに関連付けられた登録リスト内で識別されたドキュメントのいずれかが前記コンプリーションクエリを満たすかを判定するように構成されるとともに、前記コンプリーションクエリを満たすドキュメントのいずれかのファイル名を、前記コンプリーションクエリに対する回答において返すように構成される、ことを含む、システム。
  31. 請求項30に記載のシステムであって、前記インデックス辞書は、複数のドキュメントネームスペースに属すドキュメントのファイル名から抽出されたインデックストークンを含む、システム。
  32. 請求項30に記載のシステムであって、前記インデックスサーバは、更に、前記停止条件が、ドキュメントファイル名の数の閾値が前記コンプリーションクエリに対する回答において返された後に満たされる、ことを判定するように構成される、システム。
  33. 請求項30に記載のシステムであって、前記インデックスサーバは、更に、前記停止条件がクエリ実行タイマの有効期限切れの後に満たされる、ことを判定するように構成される、システム。
  34. 請求項30に記載のシステムであって、前記インデックスサーバは、更に、前記停止条件が前記辞書順に並んだ前記複数のインデックストークンにおけるインデックストークンの数の閾値を超えて識別及び繰り返しを行った後に満たされる、ことを判定するように構成される、システム。
  35. 請求項30に記載のシステムであって、前記コンプリーションクエリは、少なくとも1つのコンプリーショントークンを含む、システム。
  36. 個人用検索クエリをオートコンプリートするシステムであって、
    認証されたユーザのエンドユーザコンピューティングデバイスから、コンプリーショントークンを含むコンプリーション検索クエリを受信するように構成されたフロントエンドサーバコンピュータと、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースの識別子を決定するように構成されたアクセス制御サーバコンピュータと、
    プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記コンプリーショントークンとを含むインデックスキーを生成するように構成されたインデックスサーバコンピュータと、
    前記インデックスサーバは、更に、複数のプレフィックスされたインデックストークンに関連付けられた登録リストのサイズの減少順に従った前記複数のプレフィックスされたインデックストークンに対して、停止条件を満たすまで識別と繰り返しを行うために、前記インデックスキーを用いてインデックス辞書にアクセスするように構成され、複数のプレフィックスされたインデックストークンのそれぞれは、プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記インデックストークンのそれぞれとを含み、前記コンプリーショントークンは、前記各インデックストークンのプレフィックスである、又は前記各インデックストークンと一致し、
    前記インデックスサーバは、更に、複数のプレフィックスされたインデックストークンにおける各プレフィックスされたインデックストークンに対し、前記各プレフィックスされたインデックストークンに関連付けられた登録リスト内で識別されたドキュメントのいずれかが前記コンプリーションクエリを満たすかを判定するように構成されるとともに、前記コンプリーションクエリを満たすドキュメントのいずれかのファイル名を、前記コンプリーションクエリに対する回答において返すように構成される、ことを含む、システム。
  37. 請求項36に記載のシステムであって、前記インデックス辞書は、複数のドキュメントネームスペースに属すドキュメントのファイル名から抽出されたインデックストークンを含む、システム。
  38. 請求項36に記載のシステムであって、前記インデックスサーバは、更に、前記停止条件が、ドキュメントファイル名の数の閾値が前記コンプリーションクエリに対する回答において返された後に満たされる、ことを判定するように構成される、システム。
  39. 請求項36に記載のシステムであって、前記インデックスサーバは、更に、前記停止条件がクエリ実行タイマの有効期限切れの後に満たされる、ことを判定するように構成される、システム。
  40. 請求項36に記載のシステムであって、前記インデックスサーバは、更に、前記停止条件が前記複数のインデックストークンにおけるインデックストークンの数の閾値を超えて識別及び繰り返しを行った後に満たされる、ことを判定するように構成される、システム。
  41. 請求項36に記載のシステムであって、前記コンプリーションクエリは、少なくとも1つのコンプリーショントークンを含む、システム。
  42. 個人用検索クエリをオートコンプリートするシステムであって、
    認証されたユーザのエンドユーザコンピューティングデバイスから、コンプリーショントークンを含むコンプリーション検索クエリを受信し、前記コンプリーションクエリに対する回答において前記コンプリーションクエリを満たすドキュメントのファイル名を返す手段と、
    前記認証されたユーザがアクセスを許可される認証されたドキュメントネームスペースの識別子を決定する手段と、
    複数のプレフィックスされたインデックストークンに対して、停止条件を満たすまで識別と繰り返しを行う手段であって、複数のプレフィックスされたインデックストークンのそれぞれは、プレフィックスとしての前記認証されたドキュメントネームスペースの識別子と、サフィックスとしての前記インデックストークンのそれぞれとを含み、前記コンプリーショントークンは、前記各インデックストークンのプレフィックスである、又は前記各インデックストークンと一致する、識別と繰り返しを行う手段と、
    複数のプレフィックスされたインデックストークンにおける各プレフィックスされたインデックストークンに対し、前記各プレフィックスされたインデックストークンに関連付けられた登録リスト内で識別されたドキュメントのいずれかが前記コンプリーションクエリを満たすかを判定する手段と、を含む、システム。
JP2017505116A 2014-08-21 2015-05-13 個人用検索のための方法に用いるマルチユーザ検索システム Active JP6487029B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201462040382P 2014-08-21 2014-08-21
US62/040,382 2014-08-21
US14/555,147 US9977810B2 (en) 2014-08-21 2014-11-26 Multi-user search system with methodology for personal searching
US14/555,147 2014-11-26
PCT/US2015/030474 WO2016028345A1 (en) 2014-08-21 2015-05-13 Multi-user search system with methodology for personal searching

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017065726A Division JP6431114B2 (ja) 2014-08-21 2017-03-29 個人用検索のための方法に用いるマルチユーザ検索システム

Publications (2)

Publication Number Publication Date
JP2017532625A true JP2017532625A (ja) 2017-11-02
JP6487029B2 JP6487029B2 (ja) 2019-03-20

Family

ID=55348447

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2017505117A Active JP6446532B2 (ja) 2014-08-21 2015-05-13 インスタントインデックスのための手法を有するマルチユーザの検索システム
JP2017505116A Active JP6487029B2 (ja) 2014-08-21 2015-05-13 個人用検索のための方法に用いるマルチユーザ検索システム
JP2017065726A Active JP6431114B2 (ja) 2014-08-21 2017-03-29 個人用検索のための方法に用いるマルチユーザ検索システム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2017505117A Active JP6446532B2 (ja) 2014-08-21 2015-05-13 インスタントインデックスのための手法を有するマルチユーザの検索システム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2017065726A Active JP6431114B2 (ja) 2014-08-21 2017-03-29 個人用検索のための方法に用いるマルチユーザ検索システム

Country Status (8)

Country Link
US (8) US9984110B2 (ja)
EP (3) EP3206141B1 (ja)
JP (3) JP6446532B2 (ja)
KR (2) KR101965987B1 (ja)
CN (2) CN106605221B (ja)
AU (3) AU2015303992B2 (ja)
CA (3) CA2956145C (ja)
WO (2) WO2016028346A1 (ja)

Families Citing this family (93)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013079907A1 (en) * 2011-11-30 2013-06-06 The University Of Surrey System, process and method for the detection of common content in multiple documents in an electronic system
JP5863615B2 (ja) * 2012-09-28 2016-02-16 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 画像表示システム及び画像表示装置
US10740505B2 (en) 2014-08-01 2020-08-11 Riffyn, Inc. Systems and methods for process design and analysis
US9984110B2 (en) 2014-08-21 2018-05-29 Dropbox, Inc. Multi-user search system with methodology for personalized search query autocomplete
US10552464B2 (en) * 2014-12-18 2020-02-04 Salesforce.Com, Inc. Identifying relevant material for cases
US9785798B1 (en) * 2015-01-23 2017-10-10 Nacho Cove Inc. Privacy-protecting inter-user digital communication message search
US9361349B1 (en) 2015-01-30 2016-06-07 Dropbox, Inc. Storage constrained synchronization of shared content items
US9183303B1 (en) 2015-01-30 2015-11-10 Dropbox, Inc. Personal content item searching system and method
US9384226B1 (en) 2015-01-30 2016-07-05 Dropbox, Inc. Personal content item searching system and method
US10831715B2 (en) 2015-01-30 2020-11-10 Dropbox, Inc. Selective downloading of shared content items in a constrained synchronization system
US9922201B2 (en) 2015-04-01 2018-03-20 Dropbox, Inc. Nested namespaces for selective content sharing
US10963430B2 (en) 2015-04-01 2021-03-30 Dropbox, Inc. Shared workspaces with selective content item synchronization
US9959306B2 (en) * 2015-06-12 2018-05-01 International Business Machines Corporation Partition-based index management in hadoop-like data stores
US9992236B2 (en) * 2015-06-22 2018-06-05 Dell Products L.P. Systems and methods for providing protocol independent disjoint port names
US11281639B2 (en) 2015-06-23 2022-03-22 Microsoft Technology Licensing, Llc Match fix-up to remove matching documents
US10467215B2 (en) 2015-06-23 2019-11-05 Microsoft Technology Licensing, Llc Matching documents using a bit vector search index
US10733164B2 (en) * 2015-06-23 2020-08-04 Microsoft Technology Licensing, Llc Updating a bit vector search index
US11392568B2 (en) 2015-06-23 2022-07-19 Microsoft Technology Licensing, Llc Reducing matching documents for a search query
US10242071B2 (en) 2015-06-23 2019-03-26 Microsoft Technology Licensing, Llc Preliminary ranker for scoring matching documents
US10565198B2 (en) 2015-06-23 2020-02-18 Microsoft Technology Licensing, Llc Bit vector search index using shards
US10649850B1 (en) 2015-06-29 2020-05-12 Amazon Technologies, Inc. Heterogenous media storage and organization in automated data storage systems
US10379959B1 (en) * 2015-06-29 2019-08-13 Amazon Technologies, Inc. Techniques and systems for physical manipulation of data storage devices
US9852337B1 (en) * 2015-09-30 2017-12-26 Open Text Corporation Method and system for assessing similarity of documents
US10691718B2 (en) 2015-10-29 2020-06-23 Dropbox, Inc. Synchronization protocol for multi-premises hosting of digital content items
US9697269B2 (en) 2015-10-29 2017-07-04 Dropbox, Inc. Content item block replication protocol for multi-premises hosting of digital content items
US10616199B2 (en) * 2015-12-01 2020-04-07 Integem, Inc. Methods and systems for personalized, interactive and intelligent searches
US10817494B2 (en) * 2015-12-04 2020-10-27 Riffyn, Inc. Systems and methods for parsing data in order to form structured data tables
US10838911B1 (en) 2015-12-14 2020-11-17 Amazon Technologies, Inc. Optimization of data request processing for data storage systems
US9537952B1 (en) 2016-01-29 2017-01-03 Dropbox, Inc. Apparent cloud access for hosted content items
US10824671B2 (en) * 2016-04-08 2020-11-03 International Business Machines Corporation Organizing multiple versions of content
US11016955B2 (en) * 2016-04-15 2021-05-25 Hitachi Vantara Llc Deduplication index enabling scalability
US11210279B2 (en) * 2016-04-15 2021-12-28 Apple Inc. Distributed offline indexing
US10719532B2 (en) 2016-04-25 2020-07-21 Dropbox, Inc. Storage constrained synchronization engine
US10049145B2 (en) 2016-04-25 2018-08-14 Dropbox, Inc. Storage constrained synchronization engine
JP6570761B2 (ja) * 2016-04-25 2019-09-04 ドロップボックス, インコーポレイテッド ストレージ制約付きの同期エンジン
US10885009B1 (en) * 2016-06-14 2021-01-05 Amazon Technologies, Inc. Generating aggregate views for data indices
US10868674B2 (en) * 2016-08-12 2020-12-15 ALTR Solutions, Inc. Decentralized database optimizations
AU2017320476B2 (en) 2016-09-02 2021-10-07 FutureVault Inc. Systems and methods for sharing documents
CA3035277A1 (en) 2016-09-02 2018-03-08 FutureVault Inc. Real-time document filtering systems and methods
EP3507722A4 (en) 2016-09-02 2020-03-18 FutureVault Inc. METHOD AND SYSTEM FOR AUTOMATED DOCUMENT FILING AND PROCESSING
US10701176B1 (en) * 2016-09-23 2020-06-30 Amazon Technologies, Inc. Messaging using a hash ring with host groups
US20180089241A1 (en) * 2016-09-29 2018-03-29 Intel Corporation Context enhanced indexing
US10606902B1 (en) * 2016-09-29 2020-03-31 EMC IP Holding Company LLC Method and system for cached early-binding document search
US10534856B2 (en) * 2016-10-17 2020-01-14 International Business Machines Corporation Atom-based sensible synchronization for information indexing
US10642872B2 (en) * 2016-10-21 2020-05-05 Salesforce.Com, Inc. System for optimizing content queries
CN108243115B (zh) * 2016-12-26 2021-06-29 新华三技术有限公司 报文处理方法及装置
US10838819B2 (en) * 2017-01-18 2020-11-17 Microsoft Technology Licensing, Llc Including personal relationship metadata within duplicated resources shared across partitioned storage
US10542088B2 (en) 2017-01-18 2020-01-21 Microsoft Technology Licensing, Llc Modifying data resources within party-partitioned storage areas
US10536465B2 (en) 2017-01-18 2020-01-14 Microsoft Technology Licensing, Llc Security for accessing stored resources
US10482096B2 (en) * 2017-02-13 2019-11-19 Microsoft Technology Licensing, Llc Distributed index searching in computing systems
US10909074B2 (en) * 2017-04-18 2021-02-02 Microsoft Technology Licensing, Llc File table index aggregate statistics
US10338842B2 (en) * 2017-05-19 2019-07-02 Samsung Electronics Co., Ltd. Namespace/stream management
KR101961644B1 (ko) * 2017-05-19 2019-03-25 소프트캠프(주) 데이터 분산형 통합 관리시스템
US10089480B1 (en) * 2017-08-09 2018-10-02 Fmr Llc Access control governance using mapped vector spaces
US10701161B2 (en) * 2017-08-28 2020-06-30 Citrix Systems, Inc. Wrapping continuation tokens to support paging for multiple servers across different geolocations
CN107766414B (zh) * 2017-09-06 2020-06-12 北京三快在线科技有限公司 多文档交集获取方法、装置、设备及可读存储介质
US10733163B2 (en) * 2017-09-14 2020-08-04 International Business Machines Corporation Record insertion by generating unique index bases
US10866926B2 (en) 2017-12-08 2020-12-15 Dropbox, Inc. Hybrid search interface
US11210645B2 (en) 2017-12-21 2021-12-28 Paypal, Inc. Providing multiple authentication elements via a pointing device for user authentication
CN110019985B (zh) * 2017-12-29 2021-09-24 阿里巴巴(中国)有限公司 索引文件的建立、查询方法及装置
US10860614B2 (en) * 2018-03-19 2020-12-08 Landis+Gyr Innovations, Inc. Partitioning data in a clustered database environment
US11176105B2 (en) * 2018-04-27 2021-11-16 Sap Se System and methods for providing a schema-less columnar data store
CN110457528A (zh) * 2018-05-03 2019-11-15 茨特里克斯系统公司 提供基于用户的搜索索引漫游的虚拟化环境
US11216516B2 (en) 2018-06-08 2022-01-04 At&T Intellectual Property I, L.P. Method and system for scalable search using microservice and cloud based search with records indexes
US20200089783A1 (en) * 2018-09-14 2020-03-19 International Business Machines Corporation Collating file change sets as action groups
US11347778B2 (en) * 2018-10-26 2022-05-31 EMC IP Holding Company LLC Scale-out indexing for a distributed search engine
US11190598B2 (en) * 2018-10-31 2021-11-30 Comcast Cable Communications, Llc Methods and systems for session management
US11210293B2 (en) * 2018-11-27 2021-12-28 Sap Se Systems and methods for associating data entries
US11157477B2 (en) * 2018-11-28 2021-10-26 International Business Machines Corporation Handling queries in document systems using segment differential based document text-index modelling
CN109656923B (zh) * 2018-12-19 2020-11-24 北京字节跳动网络技术有限公司 一种数据处理方法、装置、电子设备及存储介质
DE102019108856A1 (de) * 2019-04-04 2020-10-08 Bundesdruckerei Gmbh Datenbankübergreifender Index auf einem verteilten Datenbanksystem
US11108850B2 (en) * 2019-08-05 2021-08-31 Red Hat, Inc. Triangulating stateful client requests for web applications
US11386101B2 (en) 2019-08-08 2022-07-12 Cisco Technology, Inc. Systems and methods for fuzzy search without full text
US11151041B2 (en) * 2019-10-15 2021-10-19 Micron Technology, Inc. Tokens to indicate completion of data storage
US11449548B2 (en) * 2019-11-27 2022-09-20 Elasticsearch B.V. Systems and methods for enriching documents for indexing
CN111078648A (zh) * 2019-11-29 2020-04-28 珠海金山网络游戏科技有限公司 实时获取GoCD执行任务的方法及系统
US11290531B2 (en) 2019-12-04 2022-03-29 Dropbox, Inc. Immediate cloud content item creation from local file system interface
US11334529B2 (en) * 2020-01-28 2022-05-17 Citrix Systems, Inc. Recommending files for file sharing system
US11575677B2 (en) 2020-02-24 2023-02-07 Fmr Llc Enterprise access control governance in a computerized information technology (IT) architecture
CN111683140B (zh) * 2020-06-05 2024-03-19 北京百度网讯科技有限公司 用于分发消息的方法和装置
US11531659B2 (en) * 2020-06-29 2022-12-20 EMC IP Holding Company LLC Extensible version history and comparison within a backup
KR20220031256A (ko) 2020-09-04 2022-03-11 주식회사 모카앤제이에스 문서 송신 제어 장치 및 방법
US20220156329A1 (en) * 2020-11-16 2022-05-19 Microsoft Technology Licensing, Llc. Mask-augmented inverted index
US11467949B2 (en) 2020-12-01 2022-10-11 Salesforce.Com, Inc. Techniques and architectures for providing an isolated runtime context in a shared environment
KR102417824B1 (ko) * 2021-01-20 2022-07-06 주식회사 한글과컴퓨터 복수의 문서 저장소들과 연동하여 클라이언트 단말로부터 수신된 종이 문서의 스캔 이미지와 유사한 문서 파일의 로드를 수행하는 문서 관리 서버 및 그 동작 방법
US11531684B2 (en) * 2021-02-20 2022-12-20 Meta Platforms, Inc. Session-level read your writes consistency among digital data versions in a distributed network
US11726957B2 (en) * 2021-04-07 2023-08-15 Pensando Systems Inc. Methods and systems for a network flow log database
US11550784B2 (en) * 2021-05-10 2023-01-10 Jpmorgan Chase Bank, N.A. Method and system for facilitating universal search
CN113672616B (zh) * 2021-07-22 2023-08-15 北京奇艺世纪科技有限公司 一种数据索引方法、装置、终端及存储介质
US20230208872A1 (en) * 2021-12-23 2023-06-29 Mcafee, Llc Methods and apparatus to determine mutex entropy for malware classification
US20240054102A1 (en) * 2022-08-12 2024-02-15 Google Llc Scalable and Cost-Efficient Information Retrieval Architecture for Massive Datasets
US11893037B1 (en) 2022-09-24 2024-02-06 Bank Of America Corporation Dynamic code generation utility with configurable connections and variables
KR102577032B1 (ko) 2023-06-01 2023-09-11 사단법인 한국선급 설계 규정 검토를 위한 변수 색인 및 플랫폼 고도화 시스템

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003337819A (ja) * 2002-05-21 2003-11-28 Nec Corp 文書全文検索システム,文書全文検索方法および文書全文検索プログラム
WO2012095973A1 (ja) * 2011-01-13 2012-07-19 三菱電機株式会社 データ処理装置及びデータ保管装置
JP2012530292A (ja) * 2009-06-12 2012-11-29 マイクロソフト コーポレーション コンテンツメッシュ検索

Family Cites Families (125)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07334406A (ja) 1994-06-13 1995-12-22 Hitachi Ltd マルチメディアデータベースシステム
US6151643A (en) 1996-06-07 2000-11-21 Networks Associates, Inc. Automatic updating of diverse software products on multiple client computer systems by downloading scanning application to client computer and generating software list on client computer
US6067541A (en) * 1997-09-17 2000-05-23 Microsoft Corporation Monitoring document changes in a file system of documents with the document change information stored in a persistent log
US6389412B1 (en) 1998-12-31 2002-05-14 Intel Corporation Method and system for constructing integrated metadata
US6510439B1 (en) * 1999-08-06 2003-01-21 Lucent Technologies Inc. Method and system for consistent update and retrieval of document in a WWW server
US6751603B1 (en) 2000-05-16 2004-06-15 Sun Microsystems, Inc. Autocomplete method and apparatus for data file selection
JP2002149970A (ja) * 2000-11-14 2002-05-24 Csk Corp 信用調査システム、信用調査情報処理装置、クライアントシステム、信用調査方法、および、記録媒体
US20020078134A1 (en) 2000-12-18 2002-06-20 Stone Alan E. Push-based web site content indexing
US7068309B2 (en) 2001-10-09 2006-06-27 Microsoft Corp. Image exchange with image annotation
JP2003162449A (ja) * 2001-11-27 2003-06-06 Mitsubishi Electric Corp アクセス統合管理システム、アクセス統合管理装置及び方法並びにプログラム
JP4186456B2 (ja) 2001-11-28 2008-11-26 沖電気工業株式会社 分散ファイル共有システムおよびその制御方法
US7260570B2 (en) 2002-02-01 2007-08-21 International Business Machines Corporation Retrieving matching documents by queries in any national language
JP4740543B2 (ja) 2002-03-14 2011-08-03 コンテントガード ホールディングズ インコーポレイテッド 使用権表現を処理する方法および装置
EP1552427A4 (en) * 2002-06-13 2009-12-16 Mark Logic Corp PARENT-CHILD QUERY INDEX FOR XML DATA BANKS
JP2004164555A (ja) * 2002-09-17 2004-06-10 Fuji Xerox Co Ltd 検索装置および方法ならびにそのインデクス構築装置および方法
CA2421825C (en) 2002-09-20 2012-07-10 Mks Inc. Version control system for software development
US7657597B2 (en) 2002-09-26 2010-02-02 Sun Microsystems, Inc. Instant messaging using distributed indexes
US8204992B2 (en) * 2002-09-26 2012-06-19 Oracle America, Inc. Presence detection using distributed indexes in peer-to-peer networks
US7398200B2 (en) 2002-10-16 2008-07-08 Adobe Systems Incorporated Token stream differencing with moved-block detection
US6976038B2 (en) * 2002-10-17 2005-12-13 International Business Machines Corporation Method and apparatus for real time creation and modification of a change log for multi-server synchronization
KR20040039691A (ko) 2002-11-04 2004-05-12 엘지전자 주식회사 정보 검색 시스템의 인덱싱 방법
US8005919B2 (en) 2002-11-18 2011-08-23 Aol Inc. Host-based intelligent results related to a character stream
US7299404B2 (en) 2003-05-06 2007-11-20 International Business Machines Corporation Dynamic maintenance of web indices using landmarks
US20040230896A1 (en) 2003-05-16 2004-11-18 Dethe Elza Method and system for enabling collaborative authoring of hierarchical documents with unique node identifications
US7779345B2 (en) * 2003-07-30 2010-08-17 Aol Inc. Reverse mapping method and apparatus for form filling
US20050055364A1 (en) 2003-08-01 2005-03-10 Ophir Frieder Hardware assisted pruned inverted index component
US7194487B1 (en) 2003-10-16 2007-03-20 Veritas Operating Corporation System and method for recording the order of a change caused by restoring a primary volume during ongoing replication of the primary volume
US7437353B2 (en) 2003-12-31 2008-10-14 Google Inc. Systems and methods for unification of search results
US7424467B2 (en) * 2004-01-26 2008-09-09 International Business Machines Corporation Architecture for an indexer with fixed width sort and variable width sort
US7392261B2 (en) 2004-05-20 2008-06-24 International Business Machines Corporation Method, system, and program for maintaining a namespace of filesets accessible to clients over a network
US8949395B2 (en) 2004-06-01 2015-02-03 Inmage Systems, Inc. Systems and methods of event driven recovery management
US7493303B2 (en) 2004-08-04 2009-02-17 International Business Machines Corporation Method for remotely searching a local user index
US8504565B2 (en) * 2004-09-09 2013-08-06 William M. Pitts Full text search capabilities integrated into distributed file systems— incrementally indexing files
US7606793B2 (en) * 2004-09-27 2009-10-20 Microsoft Corporation System and method for scoping searches using index keys
US8510657B2 (en) 2004-09-30 2013-08-13 Microsoft Corporation Editing the text of an arbitrary graphic via a hierarchical list
US8126895B2 (en) 2004-10-07 2012-02-28 Computer Associates Think, Inc. Method, apparatus, and computer program product for indexing, synchronizing and searching digital data
US20110029504A1 (en) 2004-12-03 2011-02-03 King Martin T Searching and accessing documents on private networks for use with captures from rendered documents
JP2006185368A (ja) * 2004-12-28 2006-07-13 Matsushita Electric Ind Co Ltd 文書データベース更新処理装置、文書データベース検索装置、文書データベース索引作成方法及び文書データベース検索方法
KR100672277B1 (ko) 2005-05-09 2007-01-24 엔에이치엔(주) 개인화 검색 방법 및 검색 서버
US7512620B2 (en) * 2005-08-19 2009-03-31 Google Inc. Data structure for incremental search
US7779347B2 (en) 2005-09-02 2010-08-17 Fourteen40, Inc. Systems and methods for collaboratively annotating electronic documents
US20070067726A1 (en) 2005-09-16 2007-03-22 Microsoft Corporation Content sharing user interface for mobile devices
JP4626483B2 (ja) 2005-10-27 2011-02-09 ソニー株式会社 サーバ装置、データ処理方法、プログラムおよび通信方法
KR101153534B1 (ko) 2005-11-15 2012-06-11 엔에이치엔(주) 웹 데이터 및 로컬 데이터에 대한 데이터 자동 태깅 방법및 데이터 자동 태깅 시스템
US7716180B2 (en) 2005-12-29 2010-05-11 Amazon Technologies, Inc. Distributed storage system with web services client interface
US7634517B1 (en) 2006-02-10 2009-12-15 Google Inc. System and method for dynamically updating a document repository without interrupting concurrent querying
US9177124B2 (en) * 2006-03-01 2015-11-03 Oracle International Corporation Flexible authentication framework
US7725431B2 (en) 2006-06-30 2010-05-25 Nokia Corporation Method and apparatus for the synchronization and storage of metadata
US20080250021A1 (en) 2006-09-08 2008-10-09 Donald Robert Martin Boys Method for Searching Private Data Via a Public Data Search Interface
US9141627B2 (en) 2006-09-26 2015-09-22 Sony Corporation Providing a user access to data files distributed in a plurality of different types of user devices
US7840537B2 (en) * 2006-12-22 2010-11-23 Commvault Systems, Inc. System and method for storing redundant information
US20080243788A1 (en) 2007-03-29 2008-10-02 Reztlaff James R Search of Multiple Content Sources on a User Device
US7716224B2 (en) 2007-03-29 2010-05-11 Amazon Technologies, Inc. Search and indexing on a user device
US7693813B1 (en) 2007-03-30 2010-04-06 Google Inc. Index server architecture using tiered and sharded phrase posting lists
US7702614B1 (en) 2007-03-30 2010-04-20 Google Inc. Index updating using segment swapping
US20080271156A1 (en) 2007-04-30 2008-10-30 Lipinski Gregory J Methods and systems for searching protected digital content and non-protected digital content
US8234282B2 (en) 2007-05-21 2012-07-31 Amazon Technologies, Inc. Managing status of search index generation
KR100912870B1 (ko) 2007-06-12 2009-08-19 삼성전자주식회사 컨텐츠 및 메타데이터의 무결성 보장 시스템 및 방법
US8887297B2 (en) 2007-07-13 2014-11-11 Microsoft Corporation Creating and validating cryptographically secured documents
US8046367B2 (en) 2007-08-20 2011-10-25 Microsoft Corporation Targeted distribution of search index fragments over a wireless communication network
US20090063448A1 (en) 2007-08-29 2009-03-05 Microsoft Corporation Aggregated Search Results for Local and Remote Services
US20090083268A1 (en) 2007-09-25 2009-03-26 International Business Machines Corporation Managing variants of artifacts in a software process
JP4661851B2 (ja) 2007-09-28 2011-03-30 富士ゼロックス株式会社 文書管理システム、文書利用制御装置、文書保管装置及びプログラム
US7961878B2 (en) 2007-10-15 2011-06-14 Adobe Systems Incorporated Imparting cryptographic information in network communications
NO327653B1 (no) * 2007-12-20 2009-09-07 Fast Search & Transfer As Fremgangsmate for dynamisk oppdatering av en indeks og en sokemotor som implementerer samme
US20090228528A1 (en) 2008-03-06 2009-09-10 International Business Machines Corporation Supporting sub-document updates and queries in an inverted index
US8533238B2 (en) 2008-04-30 2013-09-10 Microsoft Corporation Sharing information about a document across a private computer network
US20090276401A1 (en) 2008-05-02 2009-11-05 Motorola, Inc. Method and apparatus for managing associative personal information on a mobile communication device
US8340131B2 (en) 2008-05-05 2012-12-25 Sentilla Corporation, Inc. Efficient broadcast of data in a communication network
US8620923B1 (en) 2008-05-30 2013-12-31 Adobe Systems Incorporated System and method for storing meta-data indexes within a computer storage system
US20140032703A1 (en) 2008-05-30 2014-01-30 Matthew A. Wormley System and method for an expandable computer storage system
US8315953B1 (en) 2008-12-18 2012-11-20 Andrew S Hansen Activity-based place-of-interest database
AU2010253843B2 (en) 2009-05-27 2015-12-03 Google Inc. Computer application data in search results
US20110078243A1 (en) * 2009-09-30 2011-03-31 Boopsie, Inc. Leveraging Collaborative Cloud Services to Build and Share Apps
US8756215B2 (en) 2009-12-02 2014-06-17 International Business Machines Corporation Indexing documents
US8893120B2 (en) 2010-01-29 2014-11-18 Howard Pinsky Controlled use medical applicaton
US8244701B2 (en) 2010-02-12 2012-08-14 Microsoft Corporation Using behavior data to quickly improve search ranking
US8244700B2 (en) 2010-02-12 2012-08-14 Microsoft Corporation Rapid update of index metadata
US20110225627A1 (en) 2010-03-11 2011-09-15 Ricoh Company, Ltd. Access Limited Search Results
US8825602B1 (en) 2010-03-15 2014-09-02 Symantec Corporation Systems and methods for providing data protection in object-based storage environments
US8909669B2 (en) 2010-03-30 2014-12-09 Private Access, Inc. System and method for locating and retrieving private information on a network
US8805833B2 (en) 2010-11-24 2014-08-12 Microsoft Corp. Enhancing personal data search with information from social networks
US8983902B2 (en) 2010-12-10 2015-03-17 Sap Se Transparent caching of configuration data
US9047363B2 (en) * 2010-12-14 2015-06-02 Oracle International Corporation Text indexing for updateable tokenized text
US8620894B2 (en) * 2010-12-21 2013-12-31 Microsoft Corporation Searching files
US8527497B2 (en) * 2010-12-30 2013-09-03 Facebook, Inc. Composite term index for graph data
US9043358B2 (en) 2011-03-09 2015-05-26 Microsoft Technology Licensing, Llc Enterprise search over private and public data
US9152736B2 (en) * 2011-03-11 2015-10-06 Google Inc. Efficient indexing and searching of access control listed documents
EP2718832A4 (en) 2011-06-08 2015-03-18 Sgrouples Inc GROUP AUTHORIZATION METHOD AND SOFTWARE
US9152697B2 (en) 2011-07-13 2015-10-06 International Business Machines Corporation Real-time search of vertically partitioned, inverted indexes
KR20130023567A (ko) 2011-08-29 2013-03-08 삼성전자주식회사 파일 복사 수행 방법 및 장치
US9251505B2 (en) 2011-09-28 2016-02-02 International Business Machines Corporation Network contact management
US8918363B2 (en) 2011-11-14 2014-12-23 Google Inc. Data processing service
US8560496B2 (en) 2011-11-29 2013-10-15 Microsoft Corporation Database query across processes with change notification
US10257109B2 (en) 2012-01-18 2019-04-09 International Business Machines Corporation Cloud-based content management system
KR20130086005A (ko) 2012-01-20 2013-07-30 삼성전자주식회사 다수의 장치들에서 데이터 검색 방법 및 장치
WO2013147785A1 (en) * 2012-03-29 2013-10-03 Hitachi Data Systems Corporation Highly available search index with storage node addition and removal
CN102663086B (zh) * 2012-04-09 2014-05-07 华中科技大学 一种数据块索引的检索方法
US8868677B2 (en) 2012-04-16 2014-10-21 HGST Netherlands B.V. Automated data migration across a plurality of devices
US9294550B2 (en) 2012-06-11 2016-03-22 Zerodesktop, Inc. Efficient data transfer for cloud storage by centralized management of access tokens
WO2014010082A1 (ja) * 2012-07-13 2014-01-16 株式会社日立ソリューションズ 検索装置、検索装置の制御方法及び記録媒体
US9607001B2 (en) 2012-07-13 2017-03-28 Facebook, Inc. Automated failover of a metadata node in a distributed file system
US8935255B2 (en) * 2012-07-27 2015-01-13 Facebook, Inc. Social static ranking for search
US20140047349A1 (en) 2012-08-09 2014-02-13 Pro Softnet Corporation Application Neutral Visual Sharing
US9384736B2 (en) 2012-08-21 2016-07-05 Nuance Communications, Inc. Method to provide incremental UI response based on multiple asynchronous evidence about user input
US20140060253A1 (en) 2012-08-28 2014-03-06 Thomas William Brew Methods of manufacturing a die body
US9245003B2 (en) 2012-09-28 2016-01-26 Emc Corporation Method and system for memory efficient, update optimized, transactional full-text index view maintenance
US9531637B2 (en) 2012-11-08 2016-12-27 Ingersoll-Rand Company System, apparatus, and methods for server and computer interaction via web cookies
US9613165B2 (en) 2012-11-13 2017-04-04 Oracle International Corporation Autocomplete searching with security filtering and ranking
US9069857B2 (en) * 2012-11-28 2015-06-30 Microsoft Technology Licensing, Llc Per-document index for semantic searching
US9183239B2 (en) 2012-12-04 2015-11-10 Linkedin Corporation Optimizing a content index for target audience queries
US10346560B2 (en) 2013-02-14 2019-07-09 Plangrid, Inc. Electronic blueprint system and method
WO2014133495A1 (en) 2013-02-27 2014-09-04 Hitachi Data Systems Corporation Content class for object storage indexing system
US10341275B2 (en) 2013-04-03 2019-07-02 Dropbox, Inc. Shared content item commenting
US20140379661A1 (en) 2013-06-20 2014-12-25 Cloudfinder Sweden AB Multi source unified search
US20150026153A1 (en) * 2013-07-17 2015-01-22 Thoughtspot, Inc. Search engine for information retrieval system
US20150112996A1 (en) 2013-10-23 2015-04-23 Microsoft Corporation Pervasive search architecture
US9542391B1 (en) * 2013-11-11 2017-01-10 Amazon Technologies, Inc. Processing service requests for non-transactional databases
US20150193399A1 (en) * 2014-01-09 2015-07-09 Nokia Corporation Method and apparatus for determining partial updates for a document object model
US10749989B2 (en) 2014-04-01 2020-08-18 Microsoft Technology Licensing Llc Hybrid client/server architecture for parallel processing
CN103955498A (zh) * 2014-04-22 2014-07-30 北京联时空网络通信设备有限公司 一种搜索引擎创建方法及装置
US9984110B2 (en) 2014-08-21 2018-05-29 Dropbox, Inc. Multi-user search system with methodology for personalized search query autocomplete
US9183303B1 (en) 2015-01-30 2015-11-10 Dropbox, Inc. Personal content item searching system and method
US9384226B1 (en) 2015-01-30 2016-07-05 Dropbox, Inc. Personal content item searching system and method
US10324614B2 (en) 2015-10-12 2019-06-18 Dropbox, Inc. Sharing a file with a single contact

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003337819A (ja) * 2002-05-21 2003-11-28 Nec Corp 文書全文検索システム,文書全文検索方法および文書全文検索プログラム
JP2012530292A (ja) * 2009-06-12 2012-11-29 マイクロソフト コーポレーション コンテンツメッシュ検索
WO2012095973A1 (ja) * 2011-01-13 2012-07-19 三菱電機株式会社 データ処理装置及びデータ保管装置

Also Published As

Publication number Publication date
US20170011084A1 (en) 2017-01-12
KR101965987B1 (ko) 2019-04-04
AU2017200641B2 (en) 2018-08-02
US10817499B2 (en) 2020-10-27
US20160055248A1 (en) 2016-02-25
US20160055185A1 (en) 2016-02-25
US9977810B2 (en) 2018-05-22
EP3206141B1 (en) 2020-03-04
EP3164810A1 (en) 2017-05-10
US20180253460A1 (en) 2018-09-06
US9514123B2 (en) 2016-12-06
AU2015303992A1 (en) 2017-02-23
AU2015303991A1 (en) 2017-02-23
US20180253461A1 (en) 2018-09-06
AU2015303991B2 (en) 2017-03-30
CA2956141C (en) 2020-07-21
EP3164809A1 (en) 2017-05-10
EP3206141A1 (en) 2017-08-16
CA3009686A1 (en) 2016-02-25
KR101812459B1 (ko) 2018-01-25
JP2017152007A (ja) 2017-08-31
CA2956141A1 (en) 2016-02-25
EP3164810B1 (en) 2019-08-14
WO2016028346A1 (en) 2016-02-25
US9792315B2 (en) 2017-10-17
AU2015303992B2 (en) 2018-08-09
US9984110B2 (en) 2018-05-29
CN106575307A (zh) 2017-04-19
CN106605221B (zh) 2020-09-08
AU2017200641C1 (en) 2018-11-29
US10579609B2 (en) 2020-03-03
US10102238B2 (en) 2018-10-16
JP6446532B2 (ja) 2018-12-26
CA2956145A1 (en) 2016-02-25
US20160055188A1 (en) 2016-02-25
CA3009686C (en) 2021-05-04
KR20170033410A (ko) 2017-03-24
CA2956145C (en) 2020-03-10
JP6431114B2 (ja) 2018-11-28
US10853348B2 (en) 2020-12-01
JP6487029B2 (ja) 2019-03-20
US20160055143A1 (en) 2016-02-25
AU2017200641A1 (en) 2017-02-23
WO2016028345A1 (en) 2016-02-25
CN106605221A (zh) 2017-04-26
KR20170029010A (ko) 2017-03-14
EP3164809B1 (en) 2018-10-24
CN106575307B (zh) 2020-07-03
AU2015303991C1 (en) 2017-09-07
US20170300520A1 (en) 2017-10-19
JP2017532626A (ja) 2017-11-02

Similar Documents

Publication Publication Date Title
JP6431114B2 (ja) 個人用検索のための方法に用いるマルチユーザ検索システム

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190118

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20190218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190220

R150 Certificate of patent or registration of utility model

Ref document number: 6487029

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250