TWI351619B - Search engine that applies feedback from users to - Google Patents

Search engine that applies feedback from users to Download PDF

Info

Publication number
TWI351619B
TWI351619B TW095109496A TW95109496A TWI351619B TW I351619 B TWI351619 B TW I351619B TW 095109496 A TW095109496 A TW 095109496A TW 95109496 A TW95109496 A TW 95109496A TW I351619 B TWI351619 B TW I351619B
Authority
TW
Taiwan
Prior art keywords
user
file
search
model
result table
Prior art date
Application number
TW095109496A
Other languages
English (en)
Other versions
TW200643747A (en
Inventor
Lu Yunshan
P Rios Gordon
Tanne Michael
Original Assignee
Search Engine Technologies Llc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Search Engine Technologies Llc filed Critical Search Engine Technologies Llc
Publication of TW200643747A publication Critical patent/TW200643747A/zh
Application granted granted Critical
Publication of TWI351619B publication Critical patent/TWI351619B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9536Search customisation based on social or collaborative filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/332Query formulation
    • G06F16/3325Reformulation based on results of preceding query
    • G06F16/3326Reformulation based on results of preceding query using relevance feedback from the user, e.g. relevance feedback on documents, documents sets, document terms or passages
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/338Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/35Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9538Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00Data processing: database and file management or data structures
    • Y10S707/99931Database or file accessing
    • Y10S707/99933Query processing, i.e. searching

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

1351619 九、發明說明: 【相關申請案】 本申》月案依35 U.S.C § 119(e)主張2005年3月18曰申 請之發明名稱為“援用使用者反饋改善檢索結果之檢索引 擎之共同待審美國臨時專利申請案序號6〇/663,361的優先 權,該臨時專利申請案的内容以個之方式併人本文中。 【發明範疇】 本發明關於一種用來檢索網際網路的應用,更明確地 說侧於-種用來檢索網際網路的應用,其援用使用鎌 索應用之人的反饋以改善檢索結果的品質。 【發明背景】 網際網路檢索引擎被設計用來從網際網路所涵蓋的大 量資訊當令找出期望資訊。使用者以輸入含有檢索字辭之 查詢的方式贿其所查制資訊。檢料擎·多麵聯 性計算將這些檢索字辭與網頁之一索引作比較,目的是認 出最有可能與使用者想要之資訊有關的網頁。然後檢索引 擎送回連到這些網頁之超連結之一排行表,以連到被認為 最有關聯之網頁的連結較接近該表之頂部。 檢索引擎的目的是傳送對於一給定查詢之最相關網 頁。早期的檢索引擎利用每一網頁所含資訊譬如檢索字辭 在文件内的存在、密度、及近似度來判斷網頁的關聯性。 較先進的檢索引擎在判斷關聯性時會考慮有關於網頁間之 連結的資訊。 決定哪些網頁最具關性的程序是非常困難的 ,因為 5 1351619 網際網路上的網頁數量非常大且日益增長,而且經常有大 量網頁表面上來看會滿足使用者的查詢。許多不同概念可 被以相同或類似字辭稱述。大多數使用者並不精於創造及 輸入敘述明域之查詢的程序,所以對於其想要找之資訊的 類型會有含糊不清。
檢索引擎送回的結果易於受到人為操控。網站作業員 可從其他網站增添内容或媒介資料或超連結到他們的網 站,目的是使檢索引擎送回連到他們的網站之連結在結果 排行表居於高位的結果。這導致有些不含有使用者想找之 資訊的網頁被排在結果表之高位,從而降低檢索結果的整 體理解準確度。此措施通常被稱為檢索引擎最佳化(或 “SEO”卜檢索引擎必須耗費越來越多的努力才能在面對 SEO時勉強維持關聯性之一致水準。因此 引擎能夠直接從使用者收集反饋以判斷哪些網頁滿足或不
滿足使用者查詢,以便對於相同或不同使用者之後續查詢 傳送更具關聯的結果。 隨著時間經過’檢索引擎的作業員對被用來判斷關聯 性的方法及被驗這些方法每—者的權重目子進行調整以 便維持或改善檢索引擎_確度。此㈣通常涉及實驗 法,譬如由職使用者對檢索引擎就不同查詢給出之結果 予以評分。這些評分可經編譯和分_便蚊要使用哪些 方法或是要哪鋪重因子。此程序㈣、不嚴謹、不 ,代表性且不具魏雜。因此敏有—種機制直接 從真實使时取彳*輸人並據此調整齡咖性方法和權重 6 1351619 因子以提高檢索引擎的準確度。 此外,使用者在輸入-查詢時有著不同意圖,因為立 可能對於檢索字辭有-不同見解、具有不同品味和興趣;、 或者是處於-科的檢索“模式”。舉例來說,若三位不同 使用者輸入查詢“iPod,,,第-位使用者可能要購買_,第 一位使用者可能要檢索有關iPod的新聞,且第三位使用者 可能要檢索有關iPod的資訊或評論。使用者可在進行檢索 時給出一些有關於其興趣和目的的指示。因此期望開發 出一種能夠在判斷哪些結果與使用者查詢相關時考量不4 檢索模式及使用者興趣間之差異的檢索引擎。 【發明概述】 本發明針對用來預測文件對於一檢索查詢之關聯性的 方法和系統,藉此向一進行檢索的使用者送回更具關聯的 結果。在一較佳實施例中,一依據本發明之方法利用一公 式預測多份文件對於一檢索查詢的關聯性,以每一文件之 關聯性為基礎排行該等文件,且回應於_檢索查詢向一使 用者送回排行表。較佳來說,利用使用者輸入來調整該公 式之參數以提高送回文件確與該檢索查詢有關的可能性。 在本發明之一第一觀點中,一種回應於一檢索查詢排 行文件的方法包括(a)決定一具有變數和參數的公式,其 中該公式係用於計算一文件與一檢索查詢之一關聯性評 分,且(b)以該關聯性評分為基礎排行該文件。較佳來說, 该方法亦包括回應於該檢索查詢送回一結果表。該結果表 含有一連到以該關聯性評分為基礎排入該結果表内之該文 7 1351619 件的連結。 為美決錢公式的步驟包括以使用者輸入 為基礎調整該等參數。該公式雜諸如—標籤、文件内之
或文件之一 :字辭:文件内一字辭之一位置、文件之一結構、連到文 件之-連結、請在-檢纽果表巾之—位置、及文件已 被從-檢索結果表存取的次數、字辭評分、料資訊、聯 繫結構、_性文字、及摘要等特徵當中任—或多者導出。 另-選擇或除此之外,這些特徵包括一使用者表述、一使 用者輸入之一時間、封鎖、一使用者識別符 使用者評價。 在-實施例中,該公式對應於一使用者模型和一群組 模型。該使时模型個來決定文件與—使用者檢索查詢 的一關聯性評分。該群組模型係用來決定文件與一使用者 群之檢索查_-_性評分。該方法更包含比較該使用 者模型和該群組模型以決定一對於文件的偏好。
較佳來說,該等參數係利用一機器學習技術決定。在 實施例中,6玄機器學習技術包含一種統計分類形式,譬 如一邏輯回歸分析、一支援向量機器(supp〇rt vect〇r machine)、神經網路、升壓樹(b〇〇sted trees)、隨機森林 (randomforests)、樸實 Bayes(naiveBayes)、或圖形模型。 在另一實施例中,該機器學習技術運用一共軛梯度下降。 在另一實施例中,該公式之一或多個變數是從使用者 輸入產生。該使用者輸入是對文件加上標記、對文件之關 聯性給予評價、封鎖文件、或以上之任何組合。 8 1351619 在一實施例中,該關聯性評分係供一已在一檢索引擎 網點上登錄的使用者使用,且被用來決定一文件與未在該 檢索引擎網點上登錄之一使用者之一檢索查詢的關聯性評 分0
在本發明之一第二觀點中,一種組織檢索結果表的方 法包括(a)更新一包含變數和參數的關聯性公式,其中該 關聯性公式係用來決定因一檢索查詢而送回之多重結果每 一者的關聯性評分;且(b)送回一含有回應於該檢索查詢 之多重結果的檢索結果表,其中該等多重結果是利用該等 多重結果之一關聯性評分排行。在一實施例中,更新該關 聯性公式的步驟包括更新該等參數。較佳來說,該等參數 是利用使用者輸入譬如藉由對文件加上標記、對回應於一 檢索查詢之一文件的關聯性給予評價、及封鎖一文件的方 式予以更新。
較佳來說,該關聯性公式係利用一機器學習技術譬如 包含一種統計分類形式的機器學習技術導出。較佳來說, 該統計分類是邏輯回歸分析、支援向量機器、神經網路、 升壓樹、隨機森林、樸實Bayes、或圖形模型。在另一實施 例中,該機器學習技術運用一共軛梯度下降。 在本發明之一第三觀點中,一種排行一第一檢索引擎 送回之結果的方法包含接收一含有回應於一檢索查詢由一 第一檢索引擎排行之文件的第一檢索結果表;接收一含有 回應於該檢索查詢由一第二檢索引擎排行之文件的第二結 果表;決定一具有變數和參數的公式,該公式用於決定一 9 回應於該檢索查詢之文件的關聯性評分;且送回 檢索查詢之每一文件之一關聯性評分排行= 果表和該第二結果表之文件的第三結果表。本發明 實_因而能夠利用—或多個檢料擎送回的結果發 作用。較佳來說,該公式是利用使用者輸入決定。 在-實施财’該公式是姻料—結絲中之 的等級及該第二結絲巾之文件鱗級喊。該等參數是 利用-機科習技術譬如包含—種統計分類形式的機器學 ^技術決定。在替代實關巾,該辑分缺一邏輯回歸 分析、-支援向量機器、神經網路、升壓樹、隨機森林、 樸實Bayes、或圖形模型。 在本發明之-第四觀點中,-種用於回應於一檢索查 »旬送回-排行結果表的系統包含__接於—關聯性模型的 第一資料庫。該第一資料庫係用於儲存使用者輸人以供排 行來自回應於一第一檢索查詢之多重結果的結果。該關聯 性模型係用於利用使用者輸入計算來自一第二檢索查詢之 多重結果的每一結果的關聯性評分。 在一實施例中,該系統亦包含一耦接於該第一資料庫 的檢索引擎。該檢索引擎係用於接收一檢索查詢,以多重 結果每一者的關聯性評分為基礎排行該等結果,且送回一 含有排行多重結果的檢索結果表。較佳來說,該關聯性模 型被構形為利用使用者輸入更新。在另一實施例中,該關 聯性模型被構形為利用一機器學習技術譬如包含一種統計 分類形式的機器學習技術。在替代實施例中,該統計分類 rI351619 疋一邏輯回歸分析、一支援向量機器、神經網路、升壓樹、 (k機森林、樸實Bayes、或圖形模型。在另一實施例中,該 機器學習技術運用一共軛梯度下降。 在一實施例中,該關聯性模型係用於決定一使用者指 疋參數集以供決定一特定使用者之一檢索查詢與一文件的 關聯性評分。在另一實施例中,該關聯性模型亦用於決定
一群組模型之參數以供決定一使用者群之一檢索查詢與一 文件的關聯性評分。 在一實施例中,該系統亦包括一第二資料庫以供儲存 用於更新該關聯性模型的一或多個特徵。特 籤、文件内之一字辭、文件内一字辭之一位置二t 結構、連到文件之一連結、文件在一檢索結果表中之一位 置、文件已被從一檢索結果表存取的次數、字辭評分、章 節資訊'聯繫結構、關鍵性文字、摘要、—使用者表述、
-使用者輸人之-時間、封鎖、-使用者識別符、及文件 之一使用者評價當中任一或多者。 在本發明之一第五觀點中,一種用於組 表中之多重結果㈣統包含_祕於—檢料擎的關聯性 模型、及-祕於該檢索引擎及該關聯性模型的資料庫。 該關聯性模㈣姻使用者輸人決定—文件與一檢索 查詢的關聯性評分。該檢素引擎係用於接收—檢索查詢且 送回-含有已依據每-文件與該财查詢之_性&排 行之結果麟索結果表。該龍庫_於儲存—被該 性模型用來決定-文件與—檢索查詢之關聯性評分的特徵 11 1351619 集。 在一實施例中,該資料庫包括一耦接於該檢索引擎的 使用者資料庫及一耦接於該關聯性模型的使用者輸入資料 庫。該使用者資料庫係用於儲存使用者在該檢索結果表上 的輸入且該使用者輸入資料庫係用於儲存該特徵集。該特 徵集包括一標籤、文件内之一字辭、文件内一字辭之一位 置、文件之一結構、連到文件之一連結、文件在一檢索結
果表中之一位置、文件已被從一檢索結果表存取的次數、 字辭評分、章節資訊、聯繫結構、關鍵性文字、摘要、一 使用者表述、一使用者輸入之一時間、封鎖、一使用者識 別符、及文件之一使用者評價當中任一或多者。 較佳來說,該系統亦包括一輕接於該資料庫的網路伺 服器及一耦接於該關聯性模型和該檢索引擎二者的文件索 引。 '
較佳來說,該關聯性模型被構形為利用一機器學習技 術譬如包含一種統計分類形式的機器學習技術。在替代實 施例中,該統計分類是一邏輯回歸分析、一支援向量機器、 神經網路、升壓樹、隨機森林、樸實Bayes、或圖形模型。 在另一實施例中,該機器學習技術運用一共軛梯度下降。 【較佳實施例詳細說明】 不同於傳統檢索引擎,本發明之實施例利用使用者反 貝、向檢索網際網路的使用者提供更具關聯性的資訊。舉 例來說’依據本發明’―進行檢索的第—使用者能夠對該 檢索之結果給予評價。第—使用者可以這些結果與其檢索 12 A A在本說明書全文中’“檢索引擎,,一辭係指一種以一查 询當作輸人且送回連到電子文件或網頁之超連結之一結果 ^的襄置(或在-般細上運作的程式)^檢索引擎包括其 ίΐΐ料庫中之文件的索引、蚊每-文件之關聯性的碼 和演算法、及向使用者傳送結果表_形使用者介面。 在本說明書全文巾,“查詢,’—辭意指—提交給檢索引 的字辭集,不管是經由打字、口述、透過—已内嵌之“連 、乡。提父-檢索字辭集、或是藉由任何其他介面提交均屬 之。-查柯包含單-個字、多個字、或片語。該查詢可 破表達為-問題(例如一“自然語言,,查詢)、-不嚴謹字辭 集、或一結構化布林表示式。事實上,一查詢得包含被一 檢索引擎絲檢索含有或侧於檢索字狀電子文件或網 頁的符號或任何其他字符。 在本說明書全文中’“網站”一辭意指一多網頁集合 體,這些網頁被鏈結在-起且可從t球資賴取得。“網頁,, -辭意指-可透過全球資訊網從任何數量之主機存取的出 版物,且非侷限性包括文字、視訊、影像、音樂、及圖形。 在本說明書全文中,“結果表,,—辭意指一可利用超文 本傳輸協疋(HTTP)或任何其他用來存取網頁或其他電子 文件之協定存取參考文件或網頁之超連結暨驗每一連結 之其他相關資訊的表,此等相關資訊非侷限性包括文件標 題、文件摘要、連到文件之快取副本的連結、文件最近一 次被搜尋或最近-次被修改的日期、與文件相關或位於文 件内之影像、及從文件摘錄的資訊。 1351619 在本說明書中,“文件,,-辭依廣義定義,且除了其原 始意義還包括電腦㈣及網頁,不管這些㈣是實際被存 檔或是動態地回應於-請求才顯示而產生的。“文件,,一辭 不舰於含有文字的電腦齡,亦包括含有圖形、聲音、 視訊、及其他多媒體資料的電腦檔案。 在本說明書中,“機器學習,,—辭意指一軟體系統藉以 能經由制某些事件或分減些:#朗使其行為適應於創 造出一最佳結果的程序及演算法。 在本說明書中,“統計模型,,一辭意指一在已知一輸入 集條^下3丨算-科的鮮公式表示(例如數值式或分析 式)。該公式表示的參數可利用_機器學習程序獲得。在本 說明書中’統計模型得為以使用者反饋、來自檢索事件之 其他資訊、或以上之組合為基礎,且是多種數學技術 當中任一者產生。 如下文所將詳述’ 一檢索引擎取得一由一使用者輸入 的查詢’且顧多種_性計算將這些檢索㈣與網頁之 一索引作味,目的是如最有可能與使用者想要之資訊 有關的網頁。然後檢索引擎送回連到這些網頁之超連結之 一排行表,以連到被認為最有關聯之網頁的連結較接近該 表之頂部。依據本發明,一檢索引擎以使用者輸入為基礎 送回一結果表,且使用者有能力對這些結果給予評價藉 以例如影響列入結果表中之文件或連結的次序。依據本發 明,檢索結果能夠回應於使用者對其認為有關聯之網站加 上標記而被排行,即使他們造訪了檢索之背景條件以外的 15 1351619 網站或即使是他們用不同於被用來產生這些檢索結果之字 辭加上標記都算數。
如下文所將詳述,一檢索引擎取得一由一使用者輸入 的查詢,且利用多種關聯性計算將這些檢索字辭與網頁之 一索引作比較,目的是認出最有可能與使用者想要之資訊 有關的網頁。然後檢索引擎送回連到這些網頁之超連結之 一排行表’以連到被認為最有關聯之網頁的連結較接近該 表之頂部。在一傳統檢索中,檢索引擎主要送回結果表, 且使用者不具有將資訊輸入到系統内的能力。 依據本發明,當一使用者收到一含有一結果表之頁 時,其可選擇在該頁上提供對於結果的反饋,此反館會被 送到一分析該反饋並調整關聯性方法及權重因子的模型以 提高送交隨後藉由輸入一相同或不同查詢來存取該檢索引 擎之使用者的結果的關聯性。
第1圖是一圖形使用者介面(GUI)的螢幕快照,其顯 示一依據本發明回應於一查詢而送回的結果頁1〇〇。該Gui 允許使用者對個別檢索結果給予評價、封鎖個別檢索結 果、或存檔個別檢索結果。此外,使用者可添加、編輯及 檢視關於與一檢索字辭有關之概念的說明,且可添加、編 輯及檢視如何檢索關於此概念之資訊的建議。 結果頁100包含一用於插入一查詢字辭的方框11〇、及 一含有檢索引擎送回之結果表的區域16〇。區域16〇亦含有 用於輸入使用者反饋的機制170及用於存檔伴隨著檢索引 擎送回之每一結果之連結的機制190。結果頁100亦包括一 16 1351619 用於顯示與檢索字辭相關之一概念之說明的區域120、一含 有與檢索字辭相關之一不同概念之說明的區域13〇、一含有 連到與其他檢索字辭相關之概念之“參見(See als〇),,連結 的區域140、一含有會導致相關查詢字辭被執行之一連結表 的區域150、及一贊助連結的區域180。如下文所將詳述, 在一較佳實施例中’區域160内的結果可被修改以供隨後
讓其他使用者依據評價或封鎖連結170來查詢或是存檔連 結190以供稍後顯示。 如第1圖實例所示,當使用者在方框110内輸入查詢 字辭“U2”且請求一檢索時,結果頁100被送回給該使用者。 區域120顯示一與使用者輸入的查詢字辭“U2”相關之一概 念的說明,此處是樂團“U2”的說明。區域130顯示使用者 輸入的查詢“U2”之一不同概念的說明,此處是U2間諜飛 機。區域150顯示由使用者輸入或由演算法導出之使用者 可能也有興趣要檢索引擎執行之相關檢索的查詢字辭,譬
如U2 concert tickets”或“U2 iPod”。區域140含有連到與使 用者輸入或演算法導出之其他檢索字辭相關之概念的“參 見(See also) ’’超連結,譬如“瓜the band”概念的“B〇no”或 是“U2 the spy plane”概念的 “Dragon Lady”。 區域160含有檢索結果以及使用者反饋機制17〇。利用 使用者反饋機制170,使用者可對於對應網頁與其要找資料 的匹配程度給予評價。換句話說,若一列在區域160中第 一位的網頁含有關於使用者想要之搖滾樂團U2相關資 訊,則使用者可利用反饋機構17〇對該連結給予一高分評 17 1351619 價(例如5顆星)。一專注於一被稱為“U2”之服裝產品線名 稱、與使用者設想的概念無關但列在區域160内的第二位 網頁可被評予一低分(例如1顆星;^依據本發明,當一也 對樂團“U2”有興趣的後來使用者用查詢“U2”檢索時,送回 的結果表會含有較接近結果表頂部的該第一網頁(有5顆 星評價),且該第二網頁(有1顆星評價)較接近結果表底 部或甚至未被列入。依此方式,使用者會得到一只有以最 有關聯結果列在前頭的結果表。一連續造訪結果表中之網 站的使用者會有較大機會造訪到肖其想要的概念最具關聯 性之網站。結果表中之項目的次序因此是除了媒介資料及 使用者未曾輸入之其他資訊外更以使用者反饋為基礎。 Φ 使用者可添加關於與-查詢字辭相關之一或多個概念 的說,12G和130’提供關於此查詢所指概念的—些背景^ 訊或疋如何檢索關於此概念之資訊的建議。使用者亦可修 改、加強或移除先前已由自己或其他使用者添加或修改之 關於與-查詢字辭相關之概念的說明。使用者可添加、修 改或刪除連到與不同查詢字辭相關之概念的超連結或“參 見(See Ms。),,連結。使用者可添加用於—概念的聯想查詢 15〇 ’其在被點選時會導致該查詢被送交_檢索引擎。檢索 引擎亦可__電腦演算法產生聯想查詢字辭。 使用者能夠添加或存檔連到他們認為與其概念極有關 件的連結。使用者可存檔連到他們認為與其概念極 β之文件的連結此可由點選—被標為“_,,、或被稱 I、他名稱譬如“B〇〇kmark,,、“Μ%·⑺ 18 於)190來完成。由於不同使用者合tf 於那些網站最具關聯性有著不同 =用者會對 法決定所列綱的次^在:依據本發明之演算 民主程序,致使_^^ 軸算法運用一 的文件:==^响細者如 生之之讀㈣結軸祕檢索引擎產 被使用 1ϊ=利用一小圖示165表示此連結也是曾 rlir 又’在每—檢索結果底下有一“出處 送二tvr,其顯示添加此連結的使用者名使其可被 作、果表的-部分,且有一“標籤(Tags)”條目168, 其列出使用者對此連結加上的標記字辭或由—先前檢 生的字辭。 依據本發明’連到網站的連結可被以兩種方式在兩種 不同的表之—者巾邮:結果表(演算法的)及使用者輸 入的連結,或者是整合成—個表,如上_將個者輸入 的連結標上一小圖示。 應理解到有許多修改可錄本發财t舉例來說, 使用者產生的反饋可為從-觀讀取而非由_使用者直接 從-終端機輸入。此外,儘管結果頁励顯示諸如“參見(See also) ’’連結140的區域,應理解到依據本發明,含有使用 者輸入資訊的結果頁可隨任何區域組合顯示,包括或除了 第1圖所示者以外。此資訊被用來使檢索結果更為全面性、 準確、且更有意義。 第2圖是一例示依據本發明之一網際網路檢索應用2〇〇 1351619 之運作的流程圖。網際網路檢索應用200提供讓使用者能 夠向系統提供反饋的能力,藉此允許其他使用者收到以使 用者反饋之分析為基礎更有關聯的檢索結果。利用此資訊 調整檢索引擎用來在一回應於一特定查詢而產生之結果表 内排行文件的方法及權重因子。該檢索引擎因此可回應於 使用者反饋而被“調整,,以送回更具關聯性的結果。 在步驟210中,使用者向一檢索引擎提交一查詢。然 後該程序前進到步驟220,其中檢索引擎比較該查詢以組合 出一最具關聯性結果表。步驟220前進到步驟230,其中將 結果頁(例如第1圖的1〇〇)發送給使用者。步驟23〇前進 到步驟240或250。 在步驟240中,使用者依循連結之一或多者造訪結果 表中的網頁。另-選擇’在步驟25G +,使用者能夠與一 反饋機制(例如第1圖的區域17〇)互動以便提供反饋給檢 索引擎。在步驟250中,使用者亦可點選一存檔連結的機 制(例如第1圖的區域19〇)以用檢索引擎記錄連結。使用 者可從步驟造訪賴前糊倾25G給歧饋,或者 ,用者可從步驟25〇前進到步驟24〇^步驟24〇和25〇二者 白導往步驟260 ’其中檢索引擎記錄來自使用者的反饋。步 驟260導往步驟27〇,其中更新用於檢索關聯性的模型以供 用在後續檢索中。步驟27〇繞回步驟⑽,其中檢索引擎利 用更新模_提供的__些連輯後·詢來說 關聯的。 應理解到本發明之實施例可搭配一或一以上的檢衾引 20 擎使用。試舉-例,一第一檢索引擎依據該第 所用關聯性因子送回一文件表。然後一第二檢索引 1=結果排行或是料些結果與依據本發明由該第二檢 ,、產生之結果合在一起排行。然後可依據本發明利用 所有結果或這魏果的任何組合更新_義性模型。因 此’-依據本發明之檢索能夠在一媒介檢索引擎上執行。 1 一依據本發明之⑽係以-擁有註冊使財及未註冊 诗客的網路檢索引擎人口網站為基礎…如所有檢索引擎 對於每-制者查詢的作法,將文件—致性資源定位器 (urls)依最高關聯性評分到最低評分排行並以此次序送回 給使用者。關聯性評分是在已知χ所含特徵(或觀測跡證) 之條件下文件d與查詢q有關翻齡p(R|x),其中下標 在此處及後文中去掉以求簡潔。p(R丨χ)由方程^ f )=1/J;叫逼近,其中Χ是一特徵向量,且Θ是-包括被 1,0常數輸人乘之一截距項的參數向量;採用負的Θ使得 正係數代表確定的關聯性跡證。假設此利用邏輯回歸X 建,模型的機率包括文件指定特徵(譬如文件長度等)及 查洵-文件特徵譬如以文件標題進行的查詢發生率、文件從 檢索弓丨擎Ε得到排名κ等,且稍後會被υ 一稀疏指標變數 集增廣以供使用者對查詢和文件給予評價。 在觀測檢索引擎上的查詢結果後,使用者被允許以某 種順序形式對查詢所得文件給出反饋,其中最低等(譬如 :顆星)意味著完全虛偽,且最高等(譬如五顆星)代表 疋美或幾近完美的關聯性。然後此反饋被記錄成一新的查 1351619
一旦糸統中有用於母一已識別使用者的ψ向量,此等 向量可被組織成一座標空間且可執行群集。這可能會有幫 助,因為有可能會想要隔離檢索引擎最佳化程式或垃圾資 訊發送者(spammer)’這些程式或人會在參數當中有反常 處以反映出偏往自己的或相關内容之獨斷行為。此外,已 識別使用者的硬群落能夠被用來給未識別使用者(亦即未 註冊“訪客”)提供較好的預設參數。舉例來說,以一未識 別使用者發佈的查詢q為基礎,該使用者以群落c表示, 機率可藉由計算p(c|q)形成: P(c|q)=p(q|c)p(c)/[lCECp(q|c)p(c)] 利用貝氏定律且C為使用者群落之集合。然後關聯性 評分p(R|X)會等於每一群落成員機率乘上一已知群落成員 之機率或關聯性評分pc(R|X)的加權總和 P(R|X)= IeeCp(c|q)pc(R|X) 方程式(2)
其中用於每一群落的參數γ。會被計算為全域參數0的 加數。此程序在下文說明。 在使用者指定參數丫。之估計後,在以0參數化的原始 模型上進行更新。此係利用被開發用來估計ψϋ但此時ψ參 數是固定的相同使用者評價資料收集來完成。因此,達成 以一替代方式從所有使用者之累積經驗估計一般效應—先 是使用者指定效應然後是全域效應的嘗試。在用於每一使 用者之Ψ參數的估計(經由單一大規模回歸達成)中學習 到的是適當地針對每一情況給予不同的重度權重和輕度權 重。舉例來說,假設ψ中之係數獨立,每一資料點的值能 24 =’ IHf;h"為何触可被吸收朗於1所 含母一參數之群落指定修改量内。 作為利用7的確切實例,假設-來自200名使用者 提交從幾_數百個簡事件㈣料集,其帽每一使用 者從群落集c給卜群落指派e。在估計e (譬如 e(EngineHankE,4))時’亦針對對應^進行估計、譬如假設 使用者在群落k中的Yk(EngineRankE4)。㈣m估
計0(EngineRankE,4)但此時是就群落m決定 Ym(EngineRankE,4) ’前提是文件對於查詢有 且兩使用者分別來自群落k和m。因此,此時 e(EngmeRankE,4)是變數的平均效應且那些Y(EngineRankE4) 含有變數之群落指定效應(例如一 SE〇群落可能有一負係 數,因為其很可能比平均情況對於良好變數更不敏感,但 其有害影響已被有效地從全域模型去除)。在模型配適程序
中王都如此,因為此時特徵向量是依據使用者群落指派被 安頓。 在針對全域更新所述的兩種架構中,使用者評價決定 每一使用者對於全域參數之配適性的影響。在任一情況 中’以使用者評價行為為基礎之使用者輸入的效應自動受 到限制。 藉由先最佳化用於使用者之一參數集然後最佳化用於 全域及/或群落效應之另一參數集,配適程序交替著重於兩 種截然不同的分析層級之間。最佳化應當是要隨模型建立 作業循序執行還是以一交替最佳化之個別迭代執行並非完 26 1351619 文件索引350作比較以決定最具關聯性的文件,且將結果 表送回網路伺服器310。同樣回應於該查詢,使用者資料庫 330記錄與使用者檢索有關的資訊,譬如利用存檔連結機制 (譬如第1圖的區域190)存標的連結、列出的連結(譬如 第1圖的區域160)、及利用反饋機構(譬如第1圖的區域 170)給出的反饋。此資訊被網路伺服器31〇及檢索引擎32〇 使用以客製化給該使用者的後續檢索結果。同樣回應於一
查詢,來自反饋機構(譬如第1圖的區域170)的反饋也被 記錄在反饋資料庫340内。在本發明之一實施例中,被儲 存在使用者資料庫330及反饋資料庫340内的反饋資訊可 被實施成二個獨立資料庫,或者其可被實施在同一資料庫 中。
依某種及時基準、但不一定是進行一查詢之時,反饋 資料庫340所含反饋資料被送到機器學習模型36〇,在此接 受處理以產生被檢索引擎用來決定查詢之最有關聯網頁的 方法及權重因子。機器學習模型360將此反饋資訊存在文 件索引350内以供後續檢索使用。 反饋資料庫340向機器學習模型360發送特徵,其中 非侷限性包括查詢字辭、使用者識別符、文件ID、文件連 結、結果表内的位置、使用者評價、及使用者點選數。機 器學習模型360亦可察看已知文件之其他特徵,其中非侷 限性包括字辭評分、章節資訊、聯繫結構、關鍵性文字摘 要、標籤、文件内之一字辭、文件内一字辭之一位置、文 件之一結構、文件已被從一檢索結果表存取的次數、字辭 28 評分、章節資訊、聯繫結構、 入之一時間、封鎖。 一使用者表述、一使用者輸 機益學習模型36G利用這些特賴發_呈加到全域模 型參數之加數戦的细者指定參數集。這些參數是依下 述方式導出。每-反饋事件建構出—㈣點,其被加到反 饋資料庫34G中所有資料點之-資料庫。利用-模型以每
使用者枚事件為基準針對任何已知查詢·文件對作估計, 如上文方程式(1)所示。 透過先前所述輸人資料執行—回歸。—旦找到最好參 數’即利用11些參數更新全峨型及仙者指定模型。一 =而έ ’最好的參數會有最好的刪能力,其轉變成未見 貝料上的較好結果。在本發明之—實施例中,執行運用共 輛梯度下降的邏輯回歸作為—模型建立程序的—部分。應 理解到依據本發明之觀建立料得運用其他瞒形式以 及其他方法執行。
應理解到依據本發财許多種齡學習技術可被使 用,其中包括-種運賊計分類形式之技術。統計分類非 侷限性包括-邏輯回歸分析、—支援向量機器、神經網路、 升墨樹、機森林、樸實Bayes、圖形模型、及應imum & posteriori。在其他實施射,該機器學紐術運用一共輛梯 度下降。 第4圖是一例示依據本發明—實施例利用使用者反饋 資料計算結果之步驟4GG的流程圖。 參照第4圖,在步驟41〇中,一使用者輸入反饋資料, 29 1351619
且在步驟420中,該輸入資料被常態化,其包括全域和每 使用者資料之摘取及常態化。在步驟43〇中,利用方程式 (1)給資料點評分,且在步驟440中,利用方程式(3) 計算目標函數。方程式(1)得包含許多形式,其中包括利 用群集來評分。在步驟450 +,計算共祕度,且在步驟 460中’利用該新梯度更新參數。在步驟47〇中,判斷是否 已符合項停止準則。若·符合該—或多項停止準 則’則程序繞回步驟430 ;否則程序前進到步驟48〇,在此 更新全域和使用者模型。 任何數量和種類的準則可被用作步驟㈣之停止準 二卜舉例綠,停止準_侷限性包括⑴赋被執行預 定最大次數’⑺-蚊驗證失敗⑷如測 用資料),⑶解答收斂、亦即前次運作與下次運作;^ 間的差小於一預定值。
第5圖例示依據本發明給一使用者510使用之一網際 網路檢索應用系統5〇〇的硬體組件。系統篇^ 卜網路伺服請的用戶端裝置別。 利用絪^置52G疋被用來存取網路舰器54G且被構形為 非触性包括http (超文本傳輸協定) 用戶鮮用協定)進行通訊的任何裝置。較佳來說, 知裝置520是-個人電腦,但其亦可為另一裝置
Si) 包括一手持式裝置譬如行動電話或個人數位助理 脑- 料Η觀(紅料示語言)、 持式裝置^示語言)、職(無線標示語言) 30 1351619 或類似標準呈現資訊。 網路伺服器540被耦接到一檢索伺服器550及一反饋 資料儲存器560。反饋資料儲存器560被耦接到一機器學習 伺服器570且檢索伺服器550被耦接到一索引資料儲存器 580。此外,機器學習伺服器570被耦接到索引資料儲存器 580 〇
熟習此技藝者會理解到可不脫離如隨附申請專利範圍 項所定義之發明精神和範圍對於該等實施例作出其他修 改0
31 1351619 【圖式簡單說明】 第1圖是一例示結合了使用者反饋之檢索結果表以及供 使用者提供反饋之機制的一範例圖形使用者介面的示意 圖。 〜 第2圖是一例示能夠將使用者反饋援用於文件排行程序 之一範例網際網路檢索應用之作業的流程圖。
第3圖是-例示依據本發明之一範例網際網路檢索應用 流程圖之組件的示意圖。 第4圖是-例示依據本發明利用使用者反饋資料估計一 結果表所含結果之步驟的流程圖。 ** 第5圖是-例示依據本發明之一範例網際網路檢索應用 之組件的硬體示意圖。
【主要元件符號說明】 100 120 、 130 150 165 168 結果頁 11〇 說明區域 14〇 連結表區域 1 小圖示 167 標籤(Tags)條目 查詢字辭的方框 連結區域 結果表區域 出處(By)條目 170 使用者反饋機制 180 贊助連結區域 190 超連結或小圖示 32

Claims (1)

  1. Ό0: 2. 了 η 年月日 疹正替換買 1351619 十、申請專利範圍: 1· 一種回應一檢索查詢而排行呈現給一使用者的一文件 結果表中的文件的方法,其包含: a. 從該使用者接收輸入,該輸入關於一文件與該使用 者的關聯性; b. 持續不斷地將使用者輸入關聯於該檢索查詢與該 文件; c·決定具有變數和可調參數的一關聯性公式,該關聯 性公式用於計算該文件與該檢索查詢之一關聯性 評分;以及 d·以該關聯性評分為基礎排行該文件,其中該關聯性 評分取決於與該文件和該檢索查詢相關的該使用 者輸入。 2. 如申請專利範圍第1項之方法,更包含回應該檢索查 詢而送回一結果表’其中該結果表含有一連到以該關 聯性評分為基礎排行之該文件的連結。 3. 如申請專利範圍第1項之方法,其中決定該關聯性公 式的步驟包含以該使用者輸入為基礎調整該等參數。 4. 如申請專利範圍第3項之方法,其中該關聯性公式是 從由下列特徵組成之群中選出的任何一或多個特徵導 出· 一標籤、該文件内之一字辭、該文件内一字辭之 位置、該文件之一結構、連到該文件之一連結、該 文件在一檢索結果表中之一位置、該文件已被從一檢 索結果表存取的次數、字辭評分、章節資訊、聯繫結 33 135^19 構、關鍵性文字及摘要。 5如:„月專利範圍第3項之方法,其中該關聯性公式是 • 從由下列特徵組成之群中選出的任何-或多個特徵導 出使用者表述、—使用者輸入之-時間、封鎖、 -使用者識職及敎件之—賴者評價。 6.如申請專利範圍第3項之方法,其中該關聯性公式對 應於-使用者模型和一群組模型,其中該使用者模型 是用來決定該文件與-使用者之一檢索查詢的-關聯 攤 十生評分,且該群組模型是用來決定該文件與一使用者 群之一檢索查詢的一關聯性評分。 7如申„月專利範圍第6項之方法,更包含比較該使用者 模型和該群組模型以決定—對於該文件的偏好。 8如申明專利範圍第3項之方法,其中該等參數是利用 一機器學習技術決定。 9.如申凊專利範圍第8項之方法,其中該機器學習技術 參 包含一種統計分類形式。 H).如申請專利範圍第9項之方法,其中該統計分類技術 是-邏輯回歸分析、一支援向量機器(s叩卿 vector machine)神經網路、升壓樹(b〇〇ste(j frees)、隨機森 林(random f0rests)、樸實 (η_ Bayes)及圖 形模型當中任一者。 11·如申清專利範圍第8項之方法,其中該機器學習技術 運用一共輕梯度下降。 12.如申凊專利範圍第3項之方法,其中該關聯性公式之 34 1351619 一或多個變數是從該使用者輸入而產生。 . 13.如申請專利範圍帛12項之方法,其中該使用者輸入是 對該文件加上標記、對該文件之一關聯性給予評價及 封鎖該文件當中任一或多者。 M.如申請專利範圍第i項之方法,其中該關聯性評分係 供-在-檢索引擎醜上麵的者制,且用來 決定一文件與未在該檢索引擎網點上登錄之一使用者 G 鲁 之一檢索查詢的一關聯性評分。 15. -種組_應—檢索查詢而送_—檢索結果表的方 法,其包括: a. 針對雜索結果表巾多重結果的每—結果從一使 用者接收輸入,針對每-結果的使用者輪入是該結 果與該使用者的一關聯性; b. 持續不斷地將每一結果的該使用者輸入關聯於該 結果與該檢索查詢; c. 更新一包含變數和可調參數的關聯性公式,其中該 關聯性公式係利用該多重結果的每—者的該使用 者輸入來決定該多重結果的每一者的—關聯性評 分;以及 d. 送回一含有回應於該檢索查詢之該等多重結果的 檢索結果表,其中該等多重結果是利用各該等多重 結果之該關聯性評分所排行。 16=申請專利範圍第15項之方法,其中更新該關聯性公 式的步驟包含更新該等參數。 35 17. 如申請專利範圍第15項 ^ ^ JL AA >- 4,、方法,其中該等參數是利用 18. 19. 20. 21. 22. 母一者的該使用者輸入所更新。 對=賴第17項之方法,其中該使用者輸入是 對一文件加上標記、料门& ^ 關聯性給予及件的 如申請專利範圍第15項之太1 at 利用-機_辑;:料心麵性公式是 tr^範81第19項之方法,其中該機器學習技術 包含一種統計分類形式。 二1蝴第16項之方法’其巾該統計分類是邏 回听刀析、支援向H機器、神經網路、升壓樹、隨 機森林、樸實Bayes、及圖形模型當中任一者。 如申明專利範圍第15項之方法,其巾該齡學習技術 運用一共軛梯度下降。
    23. -種排行由一第一檢索引擎所送回結果的方法,宜包 含: 〃 a. 接收帛一結果表,該第一結果表含有回應於一檢 索查詢而由一第一檢索引擎所排行之文件; b. 接收帛一結果表,該第二結果表含有回應於該檢 索查詢而由一第二檢索引擎所排行之文件; c. 從該使用者接收輸入,該輸入關於該第一結果表中 的一文件; d. 持續不斷地將使用者輸入關聯於該文件與該檢索查 詢; 36 1351619 e. 決定一具有變數和可調參數的公式,該公式用於回 應於該檢索查詢而決定該文件的一關聯性評分,其 中該公式是設置為經由使用該使用者輸入及該使 用者輸入與該文件及該檢索查詢的該關聯性來決 定;以及 f. 送回一第三結果表,該第三結果表含有利用回應於 該檢索查詢之該文件之一關聯性評分所排行的該 第一結果表和該第二結果表之文件。 24. 如申請專利範圍第23項之方法,其中該關聯性評分取 決於與該文件相關的該使用者輸入。 25. 如申請專利範圍第23項之方法,其中該公式是利用該 第一結果表中之文件的等級及該第二結果表中之文件 的等級決定。 26. 如申請專利範圍第23項之方法,其中該等參數是利用 一機器學習技術決定。 27. 如㈣相翻第26項之方法,其巾賴器學習技術 包含一種統計分類形式。 28. 如申請專利範圍帛27項之方法,其中該統計分類是一 邏輯回歸分析、一支援向量機器、神經網路、升壓樹、 隨機森林、樸實Bayes、及圖形模型當中任一者。 29. -種用於回應-檢索查詢而送回一排行結果表的系 統,其包含: a.第貞料庫’其设置以儲存複數使用者輸入,以 供排行來自回應-第-檢索查詢之多重結果的結 37 果,其中一使用者輸入是儲存在該第一資料庫中作 為一紀錄,該紀錄持續不斷地將來自該多重結果的 一結果關聯於該檢索查詢與關聯於該使用者輪 入,該使用者輸入關於該結果與該使用者的關聯 性;及 " b.一關聯性模型,其輕接於該第一資料庫,該關聯性 模型用於利用該等使用者輸入以計算來自一第二 檢索查詢之多重結果之每一結果的一關聯性; 分,其中該關聯性模型包含變數和可調參數。 30. 如申請專利範圍第29項之系統,更包含一檢索引擎, 其耦接於該第一資料庫,該檢索引擎係用於接收一檢 索查詢、以多重結果每-者之—關聯性評分為基礎排 行該等結果、及送回-含有該等已排行多重結果的檢 索結果表。 31. 如申請專利範圍第29項之系統,其中該關聯性模型被 構形為利用該使用者輸入被更新。 32. 如申請專利範圍第29項之系統’其中該關聯性模型被 構形為利用一機器學習技術。 33. 如申請專利範圍第32項之系統,其中該機器學習技術 包含一種統計分類形式。 34. 如申請專利範圍第33項之系統,其中該統計分類是一 邏輯回歸分析、一支援向量機器、神經網路、升壓樹、 隨機森林、樸實Bayes、及圖形模型當中任一者。 35. 如申請專利範圍第33項之系統’其中該機器學習技術 運用一共軛梯度下降。 6’如申請專利範圍第29項之系統,其中該關聯性模型用 於決定一使用者指定參數集,以供決定一特定使用者 之一檢索查詢與一文件的一關聯性評分。 7.如申請專利範圍第36項之系統,其中該關聯性模型亦 用於決定一群組模型之參數,以供決定一使用者群之 —檢索查詢與一文件的一關聯性評分。 38.如申請專利範圍第29項之系統,其更包含一第二資料 庫’以供儲存用於更新該關聯性模型的一或多個特徵。 9’如申請專利範圍第38項之系統,其中該等特徵係從由 下列特徵組成之群中選出:一標籤、一文件内之一字 辭、一文件内一字辭之一位置、一文件之一結構、連 到—文件之一連結、一文件在一檢索結果表中之一位 置、一文件已被從一檢索結果表存取的次數、字辭評 分、章節資訊、聯繫結構、關鍵性文字、及摘要。 0‘如申凊專利範圍第38項之系統,其中該等特徵係從由 下列特徵組成之群中選出:一使用者表述,一使用者 輸入之一時間,封鎖,一使用者識別符,及文件之一 使用者評價。 41.如申請專利範圍第38項之系統,其中該等特徵包含一 連到一文件的超連結、一文件在一檢索結果表中之一 位置、一文件之一使用者評價、及一文件已被從一檢 索結果表存取的次數當中任一或多者。 種用於組織從一檢索查詢送回的一檢索結果表中之 39 42. 多重結果的系統,其包含: a. 一關聯性模型,其設置以利用一使用者的輸入決定 一文件與該檢索查詢的一關聯性評分,該輸入指出 在該多重結果中該文件的關聯性,其中使用者輸入 是持續地關聯於該文件與該檢索查詢,其中該關聯 性模型包含變數和可調參數; b. —檢索引擎,其耦接於該關聯性模型,該檢索引擎 用於接收該檢索查詢且送回一檢索結果表,該檢索 結果表含有已依據每一文件與該檢索查詢之關聯 性評分排行之結果;及 乜如申請專利範圍帛42項之系統,其中該資料庫包括一 耦接於該檢索引擎的使用者資料庫及一輕接於該關聯 I·生模型的使用者輸入資料庫,其中該使用者資料庫係 用於健存使用者在該檢索結果表上的輸入且該使用者 c•一輕接於該檢索引擎和該關聯性模型的資料庫,該 =貝料庫用於儲存一特徵集,該特徵集由該關聯性模 型用來決定該文件與該檢索查詢之該關聯性評分。 輸入資料庫係用於儲存該特徵
    性文字、及摘要當中任一 一文件已被從一檢索結果表 章節資訊、聯繫結構、關鍵 或多者。 如申請專利範圍第43項之系統,其中該特徵集包括一 使用者表述、一使用者輸入之一時間、封鎖、一使用 者識別符、及一文件之一使用者評價當中任—或多者。 如申請專利範圍第42項之系統’更包含一耦接^該資 料庫的網路伺服器。 、 如申請專纖圍第42項之系統’更包含__於該關 聯性模型和該檢索引擎二者的文件索引。 如申請專利範圍第42項之祕’其中該関性模型被 構形為利用一機器學習技術。 如申請專利範圍第48項之系統,其中該機器學習技術 包含一種統計分類形式。 如申請專利範圍第4 9項之系統,其中該統計分類是一 邏輯回歸分析、一支援向量機器、神經網路、升壓樹、 隨機森林、樸實Bayes、及圖形模型當中任一者。 如申請專利範圍第48項之系統,其中該機器 運用一共輕梯度下降。 學習技術 1351619 ♦ 年月日修正替換賓 十一、囷式·_ 100 ®c info Shopping News Local 110- 120- 130- U2 Search Advanced Search U2 The Band U2 U2 u sn irish band (aiunoj fiono (Paul David Havsen) on vocals uui guiur. The Edge (David Howeli Evans) c gmur «ui fiUacs. vocals, and bass, Adam Gcyion on bass and gunai, and l^ny Muklcn, Jr. on tiiums. U2 h» beat oneof (he most pqiular tock bands in ihc world “nee ihe 19丨Ql Τίκ bsod is also yciy poUiicsIly* hwmn nghu otso.Official Site:wwv/.u2.c〇Tn & .Albums Bi klbumsinchidc Boy (1980), Od^)er<l9t 1). Wax (1983), Tbe unforgeiublc Fire (I9M), The Joshua Tree (1987), Achtunt laby (IWI), Zoerapa (1992), Pop (I W7>, ΑΠ Thai You C» u You ΟηΊ Leave Βύήηύ (K00), How to DtftnsnUe an Aiomie Bffnb (20(H) See Also: Rock Bands. Bono. Animnarv toiemation»! -The Lockheed U-2 spy plane The U.2 is a singteOitine· Ugh*aliinu)e reconnaissance anplaneil pr〇v>to eonunuMis day od «{ta, Ugb>aniiu0e 〇0,fXO h, 21,000 m plus), d^waiherswciUiance of an area indiita suppon oTU^. «nd ftllicd graund and >ir forces, h provides cniical tmdUgaice id deasim vaksn thraogh all phases of cpn flin, including peacoime tndioDoas and wtminss, cri$tsa operatiens other ilun war and major thestef war. edftfp flown by the Uroted State Air Force· Jl Reiaied Searches:汹 £§ϊ •coneen tickets'·fO S曲 in ruitif labs {§) Auchune Babvg) Related Si tnSnvPl iearchcs: c£| {9 lanefO Dragon Lidv £) lrtflfhggdll.?tB
    -By. Carol i: Draton edit tfi Rate ihc results Results 0· )0(0.]lseamds) rdal fits of the rock croup from Dublin, Ireland Get Ihe laust band— I n H(wnc Pate @U7 U2 News. U7 Fix. U? Ivfia. \K Cnllccinr^, pnivida Ul phoistraphs, U2 lyrics, and oiher U2 i/iformaiim m 丨 ηαο^ρΓοΠι^ eduouional seoing for anyone interested in learning «bout (he... 30k-Feb 13,2005 . By: Tim T»gs: U2. Bodo n? Smion · Emg The U2 Station fi lourcoven^e, laii a» ",mdi Feixurcs «η oiclustre r iiesi news, guitar ubs.. ion.earn/ »4k· Ardiivt Tagr U2. U2 Nnw oiclustre rsdio suuon, an exicnsive collenioo of mp3s, ihe aclu^ive 2ognphy. Elevaiion Great tests at aiTordable prices All Nonb Amcrico U2 lour dues www.am<ieVeis.com U7 Venieo Coneen Tour Cheek lbs schedule L· buy liekeu tc see Bono sjmS U2 in coneenl afl TicketsNow?. earn 1-f^Stvc By: Bill ^.Tmig · iPod 1Π Sppp^ 〇☆☆☆☆☆ The disiictive new IPod U2 Special Edition far Mac and Windows. Jp〇d Spccul Mtisn Faint it Black. Like no oOier, iPod U2 Spcca) Edition cunds out.. y»n>;.tw»le-eom/mQd/u2/» IBk · Feb )5,2005 · Arthived - QSttfi By. Todd T»ts: U3 Music Producu ΪΤ? - tmoferoictconi· U? Newt. U2 Fomm. U2 Chat 1J2 Crniesn . U2 · to10fatnce.com is Oie premiff U2 fan conununiry in the world! Tbe siu featmts the meet complete tel 〇fU2 tyno,iU2CKU <wtfvir.tmerfgmee.com/»79k · Feb 15,2005· Archived »i^lS|ye By: Todd Ttp; U2 News, U3 Fin tile prt^amiiwi//Hnnie//£s»Mithed )uW200Q-_ P^5eareh ow mc/fA&tenisaaaii. See U2)live with ETS: tickeu, innsporuuaQ «nd acconodsUon fhrni HTS, VTt ofTicial uivd md tour opento^/riade.^lA.M ti3teK.com/·Ώ)ι»Γά> 15,200S-^tilttHl-[35iXt By; IDfan Tap: U? Tickeu, U2 Tiavel r No««r1( The U2 良 The OfTictil 11? PinKsnng (EM|22bii|&x6|dhuidI many tnnc& U2Lurvtf7 fwsaive>i)>TheU3ExchangeBai www tmthefm»g 〇fg/U?/ ♦ 4k ♦ Afchived Sayp B)r: U2f«〇 lacs: 112 Bamen
    >cc page · iisiins U2 smiles, U2 ilbums. U3 thg Pi^tpgnt>hv and U? Lvi_ Tbt U2 Diuofnphy of OlBoil R^easa: U2 DUcofnpby coliaboraiiatt, U2 to)o fjrDjccu, U2 ρτ〇ιοούοη»Ι items <ww.u2w«ndera.nre/ * 24k. Feb 12,2005 ♦ Afchived - Q By. Suzy Tipt U2 Mtstc lions, U? Promouons 第1圖 Hunrtrg 相 〇rU? rickets Any emoum 〇Γ U2 ockcu ivulible Book nov oxvlisc. Any sunds www.e-bav.rom ΙΠ Coneal Ticket Tickets for al) U2 concern ^ ihrough a reliible deketbroicer wwwAt3itc.kw.enrT) l-Π Tmtf Dues tnd Ttekete Book udtets io tee U2 b Ih^lio, Umdmi,p«nL Online or Call inTicke» Otcqi Priced Tickets We Best Evayaoe!s Pike W Tnur Tickets £or all ccncem Οτύσ ytiur ockett online now Cheap l?7 Qu^iiy sa Check our Tickets sals »i £scoum prices, fpeciah. book online now ItsFy)»inks> More «m/RemlK^ :Snonwirtil 1 ]80 165* 1351619 第2圖 2〇〇
    250 300 1351619 第3圖
    4101351619 第4圖 400
    420 430 440 450 460 470 480 500 I351§19 第5
TW095109496A 2005-03-18 2006-03-20 Search engine that applies feedback from users to TWI351619B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US66336105P 2005-03-18 2005-03-18

Publications (2)

Publication Number Publication Date
TW200643747A TW200643747A (en) 2006-12-16
TWI351619B true TWI351619B (en) 2011-11-01

Family

ID=37024438

Family Applications (1)

Application Number Title Priority Date Filing Date
TW095109496A TWI351619B (en) 2005-03-18 2006-03-20 Search engine that applies feedback from users to

Country Status (8)

Country Link
US (4) US8185523B2 (zh)
EP (1) EP1866738A4 (zh)
JP (2) JP5632124B2 (zh)
KR (2) KR101532715B1 (zh)
CN (1) CN101523338B (zh)
CA (1) CA2601768C (zh)
TW (1) TWI351619B (zh)
WO (1) WO2006102122A2 (zh)

Families Citing this family (213)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7617197B2 (en) * 2005-08-19 2009-11-10 Google Inc. Combined title prefix and full-word content searching
US7206780B2 (en) * 2003-06-27 2007-04-17 Sbc Knowledge Ventures, L.P. Relevance value for each category of a particular search result in the ranked list is estimated based on its rank and actual relevance values
US7505964B2 (en) 2003-09-12 2009-03-17 Google Inc. Methods and systems for improving a search ranking using related queries
US7606793B2 (en) 2004-09-27 2009-10-20 Microsoft Corporation System and method for scoping searches using index keys
US7827181B2 (en) * 2004-09-30 2010-11-02 Microsoft Corporation Click distance determination
US7761448B2 (en) 2004-09-30 2010-07-20 Microsoft Corporation System and method for ranking search results using click distance
US7739277B2 (en) * 2004-09-30 2010-06-15 Microsoft Corporation System and method for incorporating anchor text into ranking search results
US7716198B2 (en) * 2004-12-21 2010-05-11 Microsoft Corporation Ranking search results using feature extraction
US20060184517A1 (en) * 2005-02-15 2006-08-17 Microsoft Corporation Answers analytics: computing answers across discrete data
US9092523B2 (en) * 2005-02-28 2015-07-28 Search Engine Technologies, Llc Methods of and systems for searching by incorporating user-entered information
US7792833B2 (en) * 2005-03-03 2010-09-07 Microsoft Corporation Ranking search results using language types
US20060200460A1 (en) * 2005-03-03 2006-09-07 Microsoft Corporation System and method for ranking search results using file types
US8185523B2 (en) 2005-03-18 2012-05-22 Search Engine Technologies, Llc Search engine that applies feedback from users to improve search results
US7962462B1 (en) 2005-05-31 2011-06-14 Google Inc. Deriving and using document and site quality signals from search query streams
US20070005679A1 (en) * 2005-06-21 2007-01-04 Bui Richard T Server-client hybrid search systems, methods, and apparatuses
WO2007002820A2 (en) * 2005-06-28 2007-01-04 Yahoo! Inc. Search engine with augmented relevance ranking by community participation
US9715542B2 (en) 2005-08-03 2017-07-25 Search Engine Technologies, Llc Systems for and methods of finding relevant documents by analyzing tags
US7599917B2 (en) * 2005-08-15 2009-10-06 Microsoft Corporation Ranking search results using biased click distance
US20070124283A1 (en) * 2005-11-28 2007-05-31 Gotts John W Search engine with community feedback system
TW200729003A (en) * 2006-01-25 2007-08-01 Bridgewell Inc Conceptual keyword function generation method, adjustment method, system, search engine, and calculation method for keyword related value
US8874591B2 (en) * 2006-01-31 2014-10-28 Microsoft Corporation Using user feedback to improve search results
US8122019B2 (en) 2006-02-17 2012-02-21 Google Inc. Sharing user distributed search results
US8862572B2 (en) * 2006-02-17 2014-10-14 Google Inc. Sharing user distributed search results
US7844603B2 (en) * 2006-02-17 2010-11-30 Google Inc. Sharing user distributed search results
US7996396B2 (en) * 2006-03-28 2011-08-09 A9.Com, Inc. Identifying the items most relevant to a current query based on user activity with respect to the results of similar queries
US8799106B2 (en) * 2006-05-06 2014-08-05 Travelzoo, Inc. System and method for assisting online product research by consumers
US7603350B1 (en) 2006-05-09 2009-10-13 Google Inc. Search result ranking based on trust
EP1862916A1 (en) * 2006-06-01 2007-12-05 Microsoft Corporation Indexing Documents for Information Retrieval based on additional feedback fields
US7873641B2 (en) * 2006-07-14 2011-01-18 Bea Systems, Inc. Using tags in an enterprise search system
US20080016053A1 (en) * 2006-07-14 2008-01-17 Bea Systems, Inc. Administration Console to Select Rank Factors
US20080016052A1 (en) * 2006-07-14 2008-01-17 Bea Systems, Inc. Using Connections Between Users and Documents to Rank Documents in an Enterprise Search System
US20080016071A1 (en) * 2006-07-14 2008-01-17 Bea Systems, Inc. Using Connections Between Users, Tags and Documents to Rank Documents in an Enterprise Search System
US20080016061A1 (en) * 2006-07-14 2008-01-17 Bea Systems, Inc. Using a Core Data Structure to Calculate Document Ranks
US20080016072A1 (en) * 2006-07-14 2008-01-17 Bea Systems, Inc. Enterprise-Based Tag System
US8589869B2 (en) 2006-09-07 2013-11-19 Wolfram Alpha Llc Methods and systems for determining a formula
US20080065621A1 (en) * 2006-09-13 2008-03-13 Kenneth Alexander Ellis Ambiguous entity disambiguation method
US9110975B1 (en) 2006-11-02 2015-08-18 Google Inc. Search result inputs using variant generalized queries
US8661029B1 (en) 2006-11-02 2014-02-25 Google Inc. Modifying search result ranking based on implicit user feedback
KR100881668B1 (ko) * 2006-11-09 2009-02-06 삼성전자주식회사 웹 페이지 프리페치 장치 및 방법
US20080114753A1 (en) * 2006-11-15 2008-05-15 Apmath Ltd. Method and a device for ranking linked documents
US8635203B2 (en) * 2006-11-16 2014-01-21 Yahoo! Inc. Systems and methods using query patterns to disambiguate query intent
WO2008074152A1 (en) * 2006-12-20 2008-06-26 Ma, Gary, Manchoir Method of displaying a subjective score with search engine results
US7987185B1 (en) * 2006-12-29 2011-07-26 Google Inc. Ranking custom search results
US7801885B1 (en) 2007-01-25 2010-09-21 Neal Akash Verma Search engine system and method with user feedback on search results
US20080208836A1 (en) * 2007-02-23 2008-08-28 Yahoo! Inc. Regression framework for learning ranking functions using relative preferences
US8938463B1 (en) 2007-03-12 2015-01-20 Google Inc. Modifying search result ranking based on implicit user feedback and a model of presentation bias
US8694374B1 (en) 2007-03-14 2014-04-08 Google Inc. Detecting click spam
CN101286150B (zh) * 2007-04-10 2010-09-15 阿里巴巴集团控股有限公司 生成更新参数的方法和装置、展示相关关键词的方法和装置
US8977631B2 (en) * 2007-04-16 2015-03-10 Ebay Inc. Visualization of reputation ratings
US9092510B1 (en) 2007-04-30 2015-07-28 Google Inc. Modifying search result ranking based on a temporal element of user feedback
US7898394B2 (en) * 2007-05-10 2011-03-01 Red Hat, Inc. Systems and methods for community tagging
US8266127B2 (en) * 2007-05-31 2012-09-11 Red Hat, Inc. Systems and methods for directed forums
US8356048B2 (en) * 2007-05-31 2013-01-15 Red Hat, Inc. Systems and methods for improved forums
US7966319B2 (en) 2007-06-07 2011-06-21 Red Hat, Inc. Systems and methods for a rating system
US8694511B1 (en) 2007-08-20 2014-04-08 Google Inc. Modifying search result ranking based on populations
US8037009B2 (en) * 2007-08-27 2011-10-11 Red Hat, Inc. Systems and methods for linking an issue with an entry in a knowledgebase
US20090063416A1 (en) * 2007-08-31 2009-03-05 Norman Lee Faus Methods and systems for tagging a variety of applications
US10417586B2 (en) * 2007-08-31 2019-09-17 Red Hat, Inc. Attaching ownership to data
US8065619B2 (en) * 2007-09-04 2011-11-22 Yahoo! Inc. Customized today module
US8122015B2 (en) * 2007-09-21 2012-02-21 Microsoft Corporation Multi-ranker for search
US20090089275A1 (en) * 2007-10-02 2009-04-02 International Business Machines Corporation Using user provided structure feedback on search results to provide more relevant search results
US8909655B1 (en) 2007-10-11 2014-12-09 Google Inc. Time based ranking
US7840569B2 (en) * 2007-10-18 2010-11-23 Microsoft Corporation Enterprise relevancy ranking using a neural network
US9348912B2 (en) 2007-10-18 2016-05-24 Microsoft Technology Licensing, Llc Document length as a static relevance feature for ranking search results
US7734633B2 (en) * 2007-10-18 2010-06-08 Microsoft Corporation Listwise ranking
US8332411B2 (en) * 2007-10-19 2012-12-11 Microsoft Corporation Boosting a ranker for improved ranking accuracy
US8180780B2 (en) * 2007-12-06 2012-05-15 International Business Machines Corporation Collaborative program development method and system
US8099417B2 (en) * 2007-12-12 2012-01-17 Microsoft Corporation Semi-supervised part-of-speech tagging
US8775416B2 (en) * 2008-01-09 2014-07-08 Yahoo!Inc. Adapting a context-independent relevance function for identifying relevant search results
JP5351182B2 (ja) 2008-02-25 2013-11-27 アティジオ リミテッド ライアビリティ カンパニー 関心領域についての関連情報の決定
US20090216639A1 (en) * 2008-02-25 2009-08-27 Mark Joseph Kapczynski Advertising selection and display based on electronic profile information
US20090216563A1 (en) * 2008-02-25 2009-08-27 Michael Sandoval Electronic profile development, storage, use and systems for taking action based thereon
KR100918361B1 (ko) * 2008-02-26 2009-09-22 엔에이치엔(주) 고속화 검색 모델링 시스템 및 방법
US8412702B2 (en) * 2008-03-12 2013-04-02 Yahoo! Inc. System, method, and/or apparatus for reordering search results
US9477717B2 (en) * 2008-03-31 2016-10-25 Yahoo! Inc. Cross-domain matching system
US10664889B2 (en) * 2008-04-01 2020-05-26 Certona Corporation System and method for combining and optimizing business strategies
US20090254529A1 (en) * 2008-04-04 2009-10-08 Lev Goldentouch Systems, methods and computer program products for content management
US8812493B2 (en) 2008-04-11 2014-08-19 Microsoft Corporation Search results ranking using editing distance and document information
US8086590B2 (en) * 2008-04-25 2011-12-27 Microsoft Corporation Product suggestions and bypassing irrelevant query results
US8015137B2 (en) 2008-04-29 2011-09-06 International Business Machines Corporation Determining the degree of relevance of alerts in an entity resolution system over alert disposition lifecycle
US20090271394A1 (en) * 2008-04-29 2009-10-29 Allen Thomas B Determining the degree of relevance of entities and identities in an entity resolution system that maintains alert relevance
US8326788B2 (en) * 2008-04-29 2012-12-04 International Business Machines Corporation Determining the degree of relevance of alerts in an entity resolution system
US8250637B2 (en) * 2008-04-29 2012-08-21 International Business Machines Corporation Determining the degree of relevance of duplicate alerts in an entity resolution system
US20100082808A1 (en) * 2008-09-29 2010-04-01 Red Aril, Inc. System and method for automatically delivering relevant internet content
US8396865B1 (en) 2008-12-10 2013-03-12 Google Inc. Sharing search engine relevance data between corpora
WO2010068931A1 (en) * 2008-12-12 2010-06-17 Atigeo Llc Providing recommendations using information determined for domains of interest
US8799279B2 (en) 2008-12-31 2014-08-05 At&T Intellectual Property I, L.P. Method and apparatus for using a discriminative classifier for processing a query
US8175189B2 (en) 2009-03-11 2012-05-08 Hitachi, Ltd. Fast generalized decision feedback equalizer precoder implementation for multi-user multiple-input multiple-output wireless transmission systems
US9009146B1 (en) 2009-04-08 2015-04-14 Google Inc. Ranking search results based on similar queries
US8788524B1 (en) 2009-05-15 2014-07-22 Wolfram Alpha Llc Method and system for responding to queries in an imprecise syntax
US8447760B1 (en) 2009-07-20 2013-05-21 Google Inc. Generating a related set of documents for an initial set of documents
KR101072691B1 (ko) * 2009-07-23 2011-10-11 포항공과대학교 산학협력단 연관성 피드백을 이용한 데이터베이스 검색 방법 및 이를 수행하는 프로그램을 기록한 기록매체
US9727842B2 (en) * 2009-08-21 2017-08-08 International Business Machines Corporation Determining entity relevance by relationships to other relevant entities
US8498974B1 (en) 2009-08-31 2013-07-30 Google Inc. Refining search results
US8972391B1 (en) 2009-10-02 2015-03-03 Google Inc. Recent interest based relevance scoring
US7716205B1 (en) 2009-10-29 2010-05-11 Wowd, Inc. System for user driven ranking of web pages
US8874555B1 (en) 2009-11-20 2014-10-28 Google Inc. Modifying scoring data based on historical changes
US8311792B1 (en) * 2009-12-23 2012-11-13 Intuit Inc. System and method for ranking a posting
US20110191327A1 (en) * 2010-01-31 2011-08-04 Advanced Research Llc Method for Human Ranking of Search Results
US8615514B1 (en) * 2010-02-03 2013-12-24 Google Inc. Evaluating website properties by partitioning user feedback
US8924379B1 (en) 2010-03-05 2014-12-30 Google Inc. Temporal-based score adjustments
US8959093B1 (en) * 2010-03-15 2015-02-17 Google Inc. Ranking search results based on anchors
US8560528B2 (en) * 2010-03-17 2013-10-15 Microsoft Corporation Data structures for collaborative filtering systems
US10956475B2 (en) * 2010-04-06 2021-03-23 Imagescan, Inc. Visual presentation of search results
CN102236677A (zh) * 2010-04-28 2011-11-09 北京大学深圳研究生院 一种基于问答系统的信息匹配方法及系统
EP2567343A4 (en) 2010-05-06 2018-01-31 Atigeo Corporation Systems, methods, and computer readable media for security in profile utilizing systems
US9298818B1 (en) * 2010-05-28 2016-03-29 Sri International Method and apparatus for performing semantic-based data analysis
US8738635B2 (en) 2010-06-01 2014-05-27 Microsoft Corporation Detection of junk in search result ranking
US9623119B1 (en) 2010-06-29 2017-04-18 Google Inc. Accentuating search results
US8832083B1 (en) 2010-07-23 2014-09-09 Google Inc. Combining user feedback
US20120078885A1 (en) * 2010-09-24 2012-03-29 Rovi Technologies Corporation Browsing hierarchies with editorial recommendations
US9805022B2 (en) * 2010-12-09 2017-10-31 Apple Inc. Generation of topic-based language models for an app search engine
US9002867B1 (en) 2010-12-30 2015-04-07 Google Inc. Modifying ranking data based on document changes
US9449093B2 (en) * 2011-02-10 2016-09-20 Sri International System and method for improved search experience through implicit user interaction
US20130054591A1 (en) * 2011-03-03 2013-02-28 Brightedge Technologies, Inc. Search engine optimization recommendations based on social signals
US8645394B1 (en) * 2011-04-15 2014-02-04 Google Inc. Ranking clusters and resources in a cluster
US8645393B1 (en) * 2011-04-15 2014-02-04 Google Inc. Ranking clusters and resources in a cluster
US11841912B2 (en) * 2011-05-01 2023-12-12 Twittle Search Limited Liability Company System for applying natural language processing and inputs of a group of users to infer commonly desired search results
US9734252B2 (en) 2011-09-08 2017-08-15 Wolfram Alpha Llc Method and system for analyzing data using a query answering system
US20130110815A1 (en) * 2011-10-28 2013-05-02 Microsoft Corporation Generating and presenting deep links
US8990700B2 (en) * 2011-10-31 2015-03-24 Google Inc. Rating and review interface
US9851950B2 (en) 2011-11-15 2017-12-26 Wolfram Alpha Llc Programming in a precise syntax using natural language
US9495462B2 (en) 2012-01-27 2016-11-15 Microsoft Technology Licensing, Llc Re-ranking search results
US20130212173A1 (en) * 2012-02-13 2013-08-15 Robert William Carthcart Suggesting relationship modifications to users of a social networking system
US8843488B1 (en) * 2012-02-28 2014-09-23 The Boeing Company Nested display of contextual search results
US9514186B1 (en) * 2012-05-29 2016-12-06 Google Inc. User-list management
CN102708384B (zh) * 2012-06-04 2014-01-29 西南交通大学 一种基于随机蕨的自举弱学习方法及其分类器
US9710543B2 (en) * 2012-08-08 2017-07-18 Intelliresponse Systems Inc. Automated substitution of terms by compound expressions during indexing of information for computerized search
US9537706B2 (en) 2012-08-20 2017-01-03 Plentyoffish Media Ulc Apparatus, method and article to facilitate matching of clients in a networked environment
US10108704B2 (en) * 2012-09-06 2018-10-23 Microsoft Technology Licensing, Llc Identifying dissatisfaction segments in connection with improving search engine performance
IL228896A (en) 2012-10-15 2017-01-31 Wix Com Ltd A system that supports direct links and search engines to create websites that integrate third-party applications and components
CN103020164B (zh) * 2012-11-26 2015-06-10 华北电力大学 一种基于多语义分析和个性化排序的语义检索方法
FR2998998A1 (fr) * 2012-11-30 2014-06-06 France Telecom Selection de documents dans une base de donnees
US9398104B2 (en) * 2012-12-20 2016-07-19 Facebook, Inc. Ranking test framework for search results on an online social network
US9852223B2 (en) 2012-12-20 2017-12-26 Ebay Inc. Enhancing search results with social networking data
CN103020322A (zh) * 2013-01-11 2013-04-03 曙光信息产业(北京)有限公司 查询方法
US20150242930A1 (en) * 2013-01-31 2015-08-27 Alexander Greystoke Purchasing Feedback System
US11568008B2 (en) 2013-03-13 2023-01-31 Plentyoffish Media Ulc Apparatus, method and article to identify discrepancies between clients and in response prompt clients in a networked environment
US9875237B2 (en) * 2013-03-14 2018-01-23 Microsfot Technology Licensing, Llc Using human perception in building language understanding models
US9122681B2 (en) 2013-03-15 2015-09-01 Gordon Villy Cormack Systems and methods for classifying electronic information using advanced active learning techniques
US9183499B1 (en) 2013-04-19 2015-11-10 Google Inc. Evaluating quality based on neighbor features
CN103235821B (zh) * 2013-04-27 2015-06-24 百度在线网络技术(北京)有限公司 原创内容的搜索方法和搜索服务器
US9542473B2 (en) * 2013-04-30 2017-01-10 Microsoft Technology Licensing, Llc Tagged search result maintainance
US20140365453A1 (en) * 2013-06-06 2014-12-11 Conductor, Inc. Projecting analytics based on changes in search engine optimization metrics
US9672289B1 (en) 2013-07-23 2017-06-06 Plentyoffish Media Ulc Apparatus, method and article to facilitate matching of clients in a networked environment
US9612996B1 (en) * 2013-09-11 2017-04-04 Google Inc. Providing suggestions to a user based on social activity patterns
US9870465B1 (en) 2013-12-04 2018-01-16 Plentyoffish Media Ulc Apparatus, method and article to facilitate automatic detection and removal of fraudulent user information in a network environment
US10540607B1 (en) 2013-12-10 2020-01-21 Plentyoffish Media Ulc Apparatus, method and article to effect electronic message reply rate matching in a network environment
CN103646092B (zh) * 2013-12-18 2017-07-04 孙燕群 基于用户参与的搜索引擎排序方法
US20150169760A1 (en) * 2013-12-18 2015-06-18 International Business Machines Corporation Using Social Communities to Improve Search Results
CN103714174B (zh) * 2014-01-02 2017-01-11 武汉大学 用于互联网中加速经验知识积累的信息采集方法及系统
CN103902705B (zh) * 2014-03-31 2017-05-10 华中科技大学 一种基于元数据的跨机构云端数字内容集成系统和方法
US10387795B1 (en) * 2014-04-02 2019-08-20 Plentyoffish Media Inc. Systems and methods for training and employing a machine learning system in providing service level upgrade offers
US10642845B2 (en) * 2014-05-30 2020-05-05 Apple Inc. Multi-domain search on a computing device
USD784400S1 (en) * 2014-11-04 2017-04-18 Workplace Dynamics, LLC Display screen or portion thereof with rating scale graphical user interface
USD784401S1 (en) * 2014-11-04 2017-04-18 Workplace Dynamics, LLC Display screen or portion thereof with rating scale graphical user interface
US9870394B2 (en) 2014-12-09 2018-01-16 Lg Cns Co., Ltd. Query routing method, query routing server performing the same and storage medium storing the same
US10423704B2 (en) * 2014-12-17 2019-09-24 International Business Machines Corporation Utilizing hyperlink forward chain analysis to signify relevant links to a user
CN104598611B (zh) * 2015-01-29 2018-03-23 百度在线网络技术(北京)有限公司 对搜索条目进行排序的方法及系统
TWI550420B (zh) * 2015-02-12 2016-09-21 國立雲林科技大學 資訊取得系統與方法、以及儲存裝置
US10042961B2 (en) * 2015-04-28 2018-08-07 Microsoft Technology Licensing, Llc Relevance group suggestions
US11675795B2 (en) * 2015-05-15 2023-06-13 Yahoo Assets Llc Method and system for ranking search content
EP3096241A1 (de) * 2015-05-18 2016-11-23 Carsten Kraus Verfahren zum durchsuchen einer datenbasis mit datensätzen
US10229117B2 (en) 2015-06-19 2019-03-12 Gordon V. Cormack Systems and methods for conducting a highly autonomous technology-assisted review classification
US10586156B2 (en) 2015-06-25 2020-03-10 International Business Machines Corporation Knowledge canvassing using a knowledge graph and a question and answer system
CA2954251A1 (en) * 2015-06-29 2017-01-05 Nowfloats Technologies Pvt. Ltd. System and method for optimizing and enhancing visibility of the website
CN106339383B (zh) * 2015-07-07 2019-10-18 阿里巴巴集团控股有限公司 一种搜索排序方法及系统
US11803918B2 (en) 2015-07-07 2023-10-31 Oracle International Corporation System and method for identifying experts on arbitrary topics in an enterprise social network
JP6174099B2 (ja) * 2015-10-28 2017-08-02 ヤフー株式会社 検索装置、及び検索方法
CN105224959B (zh) * 2015-11-02 2019-03-26 北京奇艺世纪科技有限公司 排序模型的训练方法和装置
US20170147652A1 (en) * 2015-11-19 2017-05-25 Institute For Information Industry Search servers, end devices, and search methods for use in a distributed network
US10229210B2 (en) * 2015-12-09 2019-03-12 Oracle International Corporation Search query task management for search system tuning
US11847095B1 (en) * 2015-12-30 2023-12-19 EMC IP Holding Company LLC Managing truncation of files of file systems
US10360224B2 (en) * 2016-03-28 2019-07-23 International Business Machines Corporation Image and data capture and machine learning for automatic generation of search queries
WO2017201647A1 (en) * 2016-05-23 2017-11-30 Microsoft Technology Licensing, Llc Relevant passage retrieval system
US11042574B2 (en) * 2016-10-05 2021-06-22 International Business Machines Corporation Contextual enhancing of content participation in search results
US11093511B2 (en) 2016-10-12 2021-08-17 Salesforce.Com, Inc. Ranking search results using hierarchically organized coefficients for determining relevance
US20200051699A1 (en) * 2016-10-14 2020-02-13 Koninklijke Philips N.V. System and method to determine relevant prior radiology studies using pacs log files
WO2018087863A1 (ja) * 2016-11-10 2018-05-17 株式会社オプティム 情報処理装置、情報処理システムおよびプログラム
CN108182186B (zh) * 2016-12-08 2020-10-02 广东精点数据科技股份有限公司 一种基于随机森林算法的网页排序方法
US10698960B2 (en) 2016-12-08 2020-06-30 MetaSense Digital Marketing Management Inc. Content validation and coding for search engine optimization
JP6783133B2 (ja) * 2016-12-13 2020-11-11 ヤフー株式会社 情報処理装置、情報処理方法、およびプログラム
KR102585234B1 (ko) 2017-01-19 2023-10-06 삼성전자주식회사 전자 기기를 위한 비전 인텔리전스 관리
US10909371B2 (en) 2017-01-19 2021-02-02 Samsung Electronics Co., Ltd. System and method for contextual driven intelligence
CN106919702B (zh) * 2017-02-14 2020-02-11 北京时间股份有限公司 基于文档的关键词推送方法及装置
CN108874842A (zh) * 2017-09-08 2018-11-23 上海晓筑教育科技有限公司 一种建筑规范全文智能搜索设备及系统
US11698936B2 (en) 2017-10-09 2023-07-11 Home Depot Product Authority, Llc System and methods for search engine parameter tuning using genetic algorithm
CN107908662B (zh) * 2017-10-18 2020-11-03 北京京东尚科信息技术有限公司 搜索系统的实现方法和实现装置
US10922696B2 (en) * 2017-11-14 2021-02-16 Sap Se Smart agent services using machine learning technology
US11645277B2 (en) * 2017-12-11 2023-05-09 Google Llc Generating and/or utilizing a machine learning model in response to a search request
CN108170684B (zh) * 2018-01-22 2020-06-05 京东方科技集团股份有限公司 文本相似度计算方法及系统、数据查询系统和计算机产品
KR102055747B1 (ko) * 2018-04-02 2019-12-13 주식회사 클래스큐브 수식을 포함하는 문서를 검색하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
AU2018202382A1 (en) 2018-04-04 2019-10-24 ADEVI lP HOLDING COMPANY PTY LTD Methods and systems for resolving user interface features, and related applications
JP7165389B2 (ja) 2018-06-07 2022-11-04 株式会社三好キカイ 自在継手
US11574028B2 (en) * 2018-06-28 2023-02-07 Google Llc Annotation and retrieval of personal bookmarks
JP6879983B2 (ja) * 2018-09-11 2021-06-02 Kddi株式会社 情報抽出装置、情報抽出方法及び情報抽出プログラム
WO2020092670A2 (en) 2018-11-02 2020-05-07 Walmart Apollo, Llc Systems and methods for search modification
WO2020118432A1 (en) * 2018-12-13 2020-06-18 Element Ai Inc. Data set access for updating machine learning models
RU2721159C1 (ru) 2018-12-13 2020-05-18 Общество С Ограниченной Ответственностью "Яндекс" Способ и сервер генерирования мета-признака для ранжирования документов
US11328238B2 (en) * 2019-04-01 2022-05-10 Microsoft Technology Licensing, Llc Preemptively surfacing relevant content within email
US11669624B2 (en) * 2019-04-24 2023-06-06 Google Llc Response-hiding searchable encryption
CN110110001A (zh) * 2019-05-10 2019-08-09 八戒科技服务有限公司 服务成果数据处理方法、装置、存储介质及系统
WO2021039372A1 (ja) * 2019-08-29 2021-03-04 株式会社Nttドコモ リランキング装置
RU2019128026A (ru) 2019-09-05 2021-03-05 Общество С Ограниченной Ответственностью «Яндекс» Способ и система для ранжирования множества цифровых документов
JP7363929B2 (ja) * 2020-01-29 2023-10-18 日本電信電話株式会社 学習装置、検索装置、学習方法、検索方法及びプログラム
US11455346B2 (en) 2020-03-31 2022-09-27 International Business Machines Corporation Advanced search and document retrieval for development and verification system prototypes
US11238113B2 (en) * 2020-04-01 2022-02-01 Grand Rounds Inc. Systems and methods for machine learning models for search engine performance optimization
US10885436B1 (en) * 2020-05-07 2021-01-05 Google Llc Training text summarization neural networks with an extracted segments prediction objective
CN112269956A (zh) * 2020-11-11 2021-01-26 北大荒浪潮信息有限公司 一种基于机器学习引擎的农业大数据搜索结果呈现的方法和装置
US20220253470A1 (en) * 2021-02-05 2022-08-11 SparkCognition, Inc. Model-based document search
CN113449212B (zh) * 2021-06-25 2024-05-17 北京百度网讯科技有限公司 针对搜索结果的质量评估、优化方法和装置、设备
KR20230148995A (ko) 2022-04-19 2023-10-26 인하대학교 산학협력단 개인화된 리뷰를 제공하는 방법 및 시스템
US11868358B1 (en) 2022-06-15 2024-01-09 Microsoft Technology Licensing, Llc Contextualized novelty for personalized discovery

Family Cites Families (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US33771A (en) * 1861-11-26 Improvement in variable cams
US112761A (en) * 1871-03-14 Improvement in portable steam-generators
US5321833A (en) * 1990-08-29 1994-06-14 Gte Laboratories Incorporated Adaptive ranking system for information retrieval
US6029195A (en) * 1994-11-29 2000-02-22 Herz; Frederick S. M. System for customized electronic identification of desirable objects
US5680511A (en) 1995-06-07 1997-10-21 Dragon Systems, Inc. Systems and methods for word recognition
JP3284832B2 (ja) 1995-06-22 2002-05-20 セイコーエプソン株式会社 音声認識対話処理方法および音声認識対話装置
US6026388A (en) * 1995-08-16 2000-02-15 Textwise, Llc User interface and other enhancements for natural language information retrieval system and method
JP3674119B2 (ja) * 1995-11-29 2005-07-20 株式会社日立製作所 類似文書検索方法
US6314420B1 (en) * 1996-04-04 2001-11-06 Lycos, Inc. Collaborative/adaptive search engine
US5848396A (en) 1996-04-26 1998-12-08 Freedom Of Information, Inc. Method and apparatus for determining behavioral profile of a computer user
US5835712A (en) 1996-05-03 1998-11-10 Webmate Technologies, Inc. Client-server system using embedded hypertext tags for application and database development
US6070176A (en) * 1997-01-30 2000-05-30 Intel Corporation Method and apparatus for graphically representing portions of the world wide web
US6012053A (en) 1997-06-23 2000-01-04 Lycos, Inc. Computer system with user-controlled relevance ranking of search results
US6256622B1 (en) * 1998-04-21 2001-07-03 Apple Computer, Inc. Logical division of files into multiple articles for search and retrieval
US6212522B1 (en) * 1998-05-15 2001-04-03 International Business Machines Corporation Searching and conditionally serving bookmark sets based on keywords
US6006225A (en) 1998-06-15 1999-12-21 Amazon.Com Refining search queries by the suggestion of correlated terms from prior searches
US6360215B1 (en) * 1998-11-03 2002-03-19 Inktomi Corporation Method and apparatus for retrieving documents based on information other than document content
US7032030B1 (en) 1999-03-11 2006-04-18 John David Codignotto Message publishing system and method
US6327590B1 (en) * 1999-05-05 2001-12-04 Xerox Corporation System and method for collaborative ranking of search results employing user and group profiles derived from document collection content analysis
US7110993B2 (en) * 1999-05-28 2006-09-19 Overture Services, Inc. System and method for influencing a position on a search result list generated by a computer network search engine
IL147593A0 (en) 1999-07-19 2002-08-14 Sankyo Co Pharmaceutical compositions containing fused hetrocyclic compounds
JP2001052003A (ja) 1999-08-04 2001-02-23 Matsushita Electric Ind Co Ltd インターネット情報閲覧装置
US6785671B1 (en) * 1999-12-08 2004-08-31 Amazon.Com, Inc. System and method for locating web-based product offerings
US7428505B1 (en) 2000-02-29 2008-09-23 Ebay, Inc. Method and system for harvesting feedback and comments regarding multiple items from users of a network-based transaction facility
US6718365B1 (en) * 2000-04-13 2004-04-06 International Business Machines Corporation Method, system, and program for ordering search results using an importance weighting
JP2001350794A (ja) 2000-06-08 2001-12-21 Gram Design:Kk データベース検索用キーワードに基づくコミュニケーション装置及び方法並びに記録媒体
US6601075B1 (en) * 2000-07-27 2003-07-29 International Business Machines Corporation System and method of ranking and retrieving documents based on authority scores of schemas and documents
KR100378240B1 (ko) * 2000-08-23 2003-03-29 학교법인 통진학원 엔트로피와 사용자 프로파일을 적용한 문서순위 조정방법
US6823491B1 (en) 2000-08-31 2004-11-23 International Business Machines Corporation System and method for a dynamically integrated search engine
TW548557B (en) 2000-09-13 2003-08-21 Intumit Inc A method and system for electronic document to have fast-search category and mutual link
JP3934325B2 (ja) 2000-10-31 2007-06-20 株式会社日立製作所 文書検索方法、文書検索装置及び文書検索プログラムの記憶媒体
US6845374B1 (en) * 2000-11-27 2005-01-18 Mailfrontier, Inc System and method for adaptive text recommendation
US7356530B2 (en) * 2001-01-10 2008-04-08 Looksmart, Ltd. Systems and methods of retrieving relevant information
US7089237B2 (en) * 2001-01-26 2006-08-08 Google, Inc. Interface and system for providing persistent contextual relevance for commerce activities in a networked environment
JP2002230224A (ja) 2001-02-05 2002-08-16 Masafumi Sawara 評価装置、情報処理方法、評価サーバシステム
JP3964630B2 (ja) 2001-03-07 2007-08-22 日本電信電話株式会社 情報検索装置と情報検索プログラムおよび該プログラムを記録した記録媒体
US6714929B1 (en) * 2001-04-13 2004-03-30 Auguri Corporation Weighted preference data search system and method
US20020165856A1 (en) * 2001-05-04 2002-11-07 Gilfillan Lynne E. Collaborative research systems
JP3845553B2 (ja) * 2001-05-25 2006-11-15 インターナショナル・ビジネス・マシーンズ・コーポレーション データベースにおけるドキュメントのリトリーブ・ランク付けを実行するコンピュータ・システム、およびプログラム
US6728704B2 (en) * 2001-08-27 2004-04-27 Verity, Inc. Method and apparatus for merging result lists from multiple search engines
US20030046098A1 (en) 2001-09-06 2003-03-06 Seong-Gon Kim Apparatus and method that modifies the ranking of the search results by the number of votes cast by end-users and advertisers
US20020156779A1 (en) 2001-09-28 2002-10-24 Elliott Margaret E. Internet search engine
US6944609B2 (en) * 2001-10-18 2005-09-13 Lycos, Inc. Search results using editor feedback
TW530224B (en) 2001-12-07 2003-05-01 Inst Information Industry Relation establishment system and method for key words in search engine
US7986672B2 (en) 2002-02-25 2011-07-26 Qualcomm Incorporated Method and apparatus for channel quality feedback in a wireless communication
US6832491B2 (en) * 2002-03-21 2004-12-21 Ritchie Engineering Company, Inc. Compressor head, internal discriminator, external discriminator, manifold design for refrigerant recovery apparatus
US20030212663A1 (en) * 2002-05-08 2003-11-13 Doug Leno Neural network feedback for enhancing text search
US7188117B2 (en) * 2002-05-17 2007-03-06 Xerox Corporation Systems and methods for authoritativeness grading, estimation and sorting of documents in large heterogeneous document collections
JP2004013323A (ja) * 2002-06-04 2004-01-15 Nippon Telegraph & Telephone East Corp 情報検索方法、情報検索システム、情報検索プログラム、情報評価プログラム、情報検索プログラムおよび情報評価プログラムをそれぞれ記録した記録媒体
US20040030697A1 (en) * 2002-07-31 2004-02-12 American Management Systems, Inc. System and method for online feedback
US7599911B2 (en) 2002-08-05 2009-10-06 Yahoo! Inc. Method and apparatus for search ranking using human input and automated ranking
US20040024755A1 (en) * 2002-08-05 2004-02-05 Rickard John Terrell System and method for indexing non-textual data
US6829599B2 (en) * 2002-10-02 2004-12-07 Xerox Corporation System and method for improving answer relevance in meta-search engines
US20040083127A1 (en) 2002-10-29 2004-04-29 Lunsford Joseph R. Web site and method for search engine optimization by prompting, recording and displaying feedback of a web site user
US20040117354A1 (en) * 2002-12-16 2004-06-17 Azzaro Steven Hector Process for tagging and measuring quality
US20040133342A1 (en) 2002-12-20 2004-07-08 Banker Shailen V Linked information system
US20040215608A1 (en) * 2003-04-25 2004-10-28 Alastair Gourlay Search engine supplemented with URL's that provide access to the search results from predefined search queries
US7197497B2 (en) 2003-04-25 2007-03-27 Overture Services, Inc. Method and apparatus for machine learning a document relevance function
US20050033771A1 (en) 2003-04-30 2005-02-10 Schmitter Thomas A. Contextual advertising system
US7283997B1 (en) * 2003-05-14 2007-10-16 Apple Inc. System and method for ranking the relevance of documents retrieved by a query
US7401072B2 (en) * 2003-06-10 2008-07-15 Google Inc. Named URL entry
US8666983B2 (en) * 2003-06-13 2014-03-04 Microsoft Corporation Architecture for generating responses to search engine queries
US20050060210A1 (en) 2003-09-11 2005-03-17 Levi Ronald M. Rental system, method and apparatus
US20050071328A1 (en) * 2003-09-30 2005-03-31 Lawrence Stephen R. Personalization of web search
US7647242B2 (en) 2003-09-30 2010-01-12 Google, Inc. Increasing a number of relevant advertisements using a relaxed match
US7523096B2 (en) * 2003-12-03 2009-04-21 Google Inc. Methods and systems for personalized network searching
US7523109B2 (en) * 2003-12-24 2009-04-21 Microsoft Corporation Dynamic grouping of content including captive data
US20050160107A1 (en) 2003-12-29 2005-07-21 Ping Liang Advanced search, file system, and intelligent assistant agent
US20050149499A1 (en) * 2003-12-30 2005-07-07 Google Inc., A Delaware Corporation Systems and methods for improving search quality
US8375048B1 (en) 2004-01-20 2013-02-12 Microsoft Corporation Query augmentation
US8788492B2 (en) 2004-03-15 2014-07-22 Yahoo!, Inc. Search system and methods with integration of user annotations from a trust network
US7590619B2 (en) 2004-03-22 2009-09-15 Microsoft Corporation Search system using user behavior data
US8631001B2 (en) * 2004-03-31 2014-01-14 Google Inc. Systems and methods for weighting a search query result
US7689585B2 (en) * 2004-04-15 2010-03-30 Microsoft Corporation Reinforced clustering of multi-type data objects for search term suggestion
US7231405B2 (en) 2004-05-08 2007-06-12 Doug Norman, Interchange Corp. Method and apparatus of indexing web pages of a web site for geographical searchine based on user location
US7349901B2 (en) 2004-05-21 2008-03-25 Microsoft Corporation Search engine spam detection using external data
US7788260B2 (en) * 2004-06-14 2010-08-31 Facebook, Inc. Ranking search results based on the frequency of clicks on the search results by members of a social network who are within a predetermined degree of separation
US7730012B2 (en) 2004-06-25 2010-06-01 Apple Inc. Methods and systems for managing data
US20060047643A1 (en) 2004-08-31 2006-03-02 Chirag Chaman Method and system for a personalized search engine
US8109765B2 (en) 2004-09-10 2012-02-07 Scientific Learning Corporation Intelligent tutoring feedback
US7761448B2 (en) * 2004-09-30 2010-07-20 Microsoft Corporation System and method for ranking search results using click distance
US20060129324A1 (en) * 2004-12-15 2006-06-15 Biogenesys, Inc. Use of quantitative EEG (QEEG) alone and/or other imaging technology and/or in combination with genomics and/or proteomics and/or biochemical analysis and/or other diagnostic modalities, and CART and/or AI and/or statistical and/or other mathematical analysis methods for improved medical and other diagnosis, psychiatric and other disease treatment, and also for veracity verification and/or lie detection applications.
US8312003B2 (en) 2004-12-16 2012-11-13 Hewlett-Packard Development Company, L.P. Computer method and apparatus for collaborative web searches
US20060167848A1 (en) * 2005-01-26 2006-07-27 Lee Hang S Method and system for query generation in a task based dialog system
US20060173880A1 (en) * 2005-01-28 2006-08-03 Microsoft Corporation System and method for generating contextual survey sequence for search results
US20060170705A1 (en) 2005-02-01 2006-08-03 Lyris Technologies, Inc. Method and system to review the display of content
US9092523B2 (en) * 2005-02-28 2015-07-28 Search Engine Technologies, Llc Methods of and systems for searching by incorporating user-entered information
US8185523B2 (en) 2005-03-18 2012-05-22 Search Engine Technologies, Llc Search engine that applies feedback from users to improve search results
US7653302B2 (en) 2005-03-24 2010-01-26 Syabas Technology Inc. Techniques for transmitting personal data and metadata among computing devices
WO2006110684A2 (en) * 2005-04-11 2006-10-19 Textdigger, Inc. System and method for searching for a query
US8732175B2 (en) 2005-04-21 2014-05-20 Yahoo! Inc. Interestingness ranking of media objects
US7783135B2 (en) 2005-05-09 2010-08-24 Like.Com System and method for providing objectified image renderings using recognition information from images
US7809192B2 (en) 2005-05-09 2010-10-05 Like.Com System and method for recognizing objects from images and identifying relevancy amongst images and information
WO2007002820A2 (en) 2005-06-28 2007-01-04 Yahoo! Inc. Search engine with augmented relevance ranking by community participation
US9715542B2 (en) * 2005-08-03 2017-07-25 Search Engine Technologies, Llc Systems for and methods of finding relevant documents by analyzing tags
US20070112758A1 (en) 2005-11-14 2007-05-17 Aol Llc Displaying User Feedback for Search Results From People Related to a User
US20070112738A1 (en) * 2005-11-14 2007-05-17 Aol Llc Displaying User Relevance Feedback for Search Results
US7668821B1 (en) 2005-11-17 2010-02-23 Amazon Technologies, Inc. Recommendations based on item tagging activities of users
US7756855B2 (en) 2006-10-11 2010-07-13 Collarity, Inc. Search phrase refinement by search term replacement
US7953775B2 (en) 2006-11-07 2011-05-31 Yahoo! Inc. Sharing tagged data on the internet
US9137321B2 (en) 2013-03-15 2015-09-15 Citrix Systems, Inc. Pairing users with social media communities

Also Published As

Publication number Publication date
KR20080033137A (ko) 2008-04-16
US8185523B2 (en) 2012-05-22
US11036814B2 (en) 2021-06-15
US9367606B1 (en) 2016-06-14
US10157233B2 (en) 2018-12-18
KR101374651B1 (ko) 2014-03-17
US20070106659A1 (en) 2007-05-10
CN101523338A (zh) 2009-09-02
EP1866738A2 (en) 2007-12-19
KR101532715B1 (ko) 2015-07-02
US20190087504A1 (en) 2019-03-21
KR20130119981A (ko) 2013-11-01
EP1866738A4 (en) 2010-09-15
CA2601768A1 (en) 2006-09-28
WO2006102122A2 (en) 2006-09-28
TW200643747A (en) 2006-12-16
JP5632124B2 (ja) 2014-11-26
CN101523338B (zh) 2016-10-19
CA2601768C (en) 2016-08-23
JP2012212455A (ja) 2012-11-01
JP5638031B2 (ja) 2014-12-10
JP2008538149A (ja) 2008-10-09
US20160299981A1 (en) 2016-10-13
WO2006102122A3 (en) 2009-04-16

Similar Documents

Publication Publication Date Title
TWI351619B (en) Search engine that applies feedback from users to
US10963522B2 (en) Systems for and methods of finding relevant documents by analyzing tags
US9535911B2 (en) Processing a content item with regard to an event
US9576029B2 (en) Trust propagation through both explicit and implicit social networks
CA2833359C (en) Analyzing content to determine context and serving relevant content based on the context
KR101565339B1 (ko) 집단지성을 이용한 추천 시스템 및 방법
KR20160149978A (ko) 검색 엔진 및 그의 구현 방법
KR20140128443A (ko) 관련 엔티티들
WO2009082100A2 (en) Method and system for searching information of collective emotion based on comments about contents on internet
JP2011175362A (ja) 情報処理装置、重要度算出方法及びプログラム
Sun et al. CWS: a comparative web search system
KR101088710B1 (ko) 온라인 커뮤니티 사용자 간 상호작용 기반 온라인 커뮤니티 포스트 검색 방법, 장치 및 그 방법을 실행하는 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록매체
JP5952711B2 (ja) 予測対象コンテンツにおける将来的なコメント数を予測する予測サーバ、プログラム及び方法
JP4569380B2 (ja) ベクトル生成方法及び装置及びカテゴリ分類方法及び装置及びプログラム及びプログラムを格納したコンピュータ読み取り可能な記録媒体
Liu et al. Enlister: baidu's recommender system for the biggest chinese Q&A website
KR101074820B1 (ko) 인터넷을 활용한 추천 검색 시스템 및 그 방법
CN116431895A (zh) 安全生产知识个性化推荐方法及系统
Avigdor-Elgrabli et al. More than threads: Identifying related email messages
WO2008032037A1 (en) Method and system for filtering and searching data using word frequencies
Madisetty et al. A reranking-based tweet retrieval approach for planned events
JP2010282403A (ja) 文書検索方法
Pisal et al. AskUs: An opinion search engine
KR101083669B1 (ko) 인터넷을 활용한 전문가 웹사이트 검색시스템 및 그 방법
Ravva Personalized Book Retrieval System Using Amazon-LibraryThing Collection
Miao et al. An opinion search system for consumer products