CN1324046A - 信息检索系统 - Google Patents
信息检索系统 Download PDFInfo
- Publication number
- CN1324046A CN1324046A CN01118060A CN01118060A CN1324046A CN 1324046 A CN1324046 A CN 1324046A CN 01118060 A CN01118060 A CN 01118060A CN 01118060 A CN01118060 A CN 01118060A CN 1324046 A CN1324046 A CN 1324046A
- Authority
- CN
- China
- Prior art keywords
- document
- answer
- bunch
- documents
- retrieval
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000014509 gene expression Effects 0.000 claims description 53
- 238000000605 extraction Methods 0.000 claims description 25
- 239000000203 mixture Substances 0.000 claims description 15
- 230000015572 biosynthetic process Effects 0.000 claims description 14
- 239000000284 extract Substances 0.000 claims description 13
- 239000013598 vector Substances 0.000 abstract description 9
- 238000000034 method Methods 0.000 description 29
- 230000009471 action Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 239000000654 additive Substances 0.000 description 5
- 230000000996 additive effect Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 5
- 230000008676 import Effects 0.000 description 3
- 239000000047 product Substances 0.000 description 3
- KDCGOANMDULRCW-UHFFFAOYSA-N 7H-purine Chemical compound N1=CNC2=NC=NC2=C1 KDCGOANMDULRCW-UHFFFAOYSA-N 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 235000013351 cheese Nutrition 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 235000021185 dessert Nutrition 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 239000012467 final product Substances 0.000 description 1
- 235000015110 jellies Nutrition 0.000 description 1
- 239000008274 jelly Substances 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 235000011888 snacks Nutrition 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
- 235000013618 yogurt Nutrition 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/3331—Query processing
- G06F16/334—Query execution
- G06F16/3347—Query execution using vector based model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/35—Clustering; Classification
- G06F16/355—Class or cluster creation or modification
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99931—Database or file accessing
- Y10S707/99933—Query processing, i.e. searching
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99941—Database schema or data structure
- Y10S707/99943—Generating database or data structure, e.g. via user interface
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种信息检索系统将相对应的询问和回答保存在文档存储部中,簇分类部根据文档存储部中的各回答的特征矢量将回答进行簇分类,数据库更新部当利用者用自由文输入询问时检索相似询问并将对应的回答按簇归类后向利用者和专家提供。数据库更新部当选择利用者或者专家判定为最恰当的回答时以所选择的回答为基础,如没有恰当的回答时以专家新输入的回答为基础分别自动更新文档存储部。专家所输入的自由文的回答原样提供给利用者。
Description
本发明涉及一种能够从大量的信息中利用者容易发现所需求的信息的信息检索系统。
近年,随着互联网的普及,在WWW(World Wide Web)上登载有由HTML(Hyper Text Markup Language)记述的各种各样的首页,一般利用者需要处理大量的信息的时代已经到来。另外,公开有称为FAQ(FrequentlyAsked Questions)集的、针对频繁询问和解答的列表,利用者可以得到有关询问的解答。这些信息,对于利用者来说,如果知道所需求的信息的所在就可以立即阅览,非常方便,相反如果要从大量的信息中发现自己所需要的信息将是一件件难的事情。
为此,产生了从文档中选出关键词作为该文档的特征量,计算出特征量的内积求出为文挡间的近似度,检索针对询问的近似文档的检索技术。
但是,由于互联网上的信息或者在事例基础上积蓄的FAQ集是向很多人独立提供信息,不能避免信息的重复,大量存在具有相同内容的文档。因此,在现有技术中,作为类似于询问文的文档,结果检索出大量具有相同内容的文档,而利用者仍然需要从大量的检索结果中找出自己需要的信息的作业。如果将检索结果限制在一定数量内,又可能没有自己所需要的信息,这成为检索技术的课题。
另外,即使利用者成功地从检索结果中找出了自己希望的信息,由于在FAQ集中没有反应,其他利用者在相同条件下检索时需要同样的手续。在避免信息的重复的同时进一步充实FAQ集,必须要检查同样的信息是否存在,成为信息提供者的负担。
本发明的目的在于提供一种可以减轻利用者的信息检索的负担的信息检索系统。
本发明的另一目的在于提供一种容易更新检索对象的信息的信息检索系统。
为了达成上述目的,本发明的信息检索系统,计算文档的特征矢量,根据特征矢量对文档进行簇分类,将文档的检索结果按簇归类进行显示。这样,把检索结果为相似文档的集合,利用者容易把握。
另外,本发明的信息检索系统,当利用者输入询问时检索相似询问,将对应的回答向利用者或者专家提示,利用者或者专家选择了认为最恰当的回答时,以该选择的回答为基础自动更新文档数据库。如果没有恰当的回答,以专家输入的回答为基础自动更新文档数据库。这样,当下次输入了同样的询问时就可以适合的回答了。
下面对附图进行简要说明。
图1为表示本发明实施例的信息检索系统的构成的方框图。
图2为表示图1所示的文档存储部中所保存的文档例的图。
图3为表示图1所示的利用者显示部中检索结果的显示例的图。
图4为表示图1所示的特征矢量抽出部的处理顺序的流程图。
图5为表示所抽出的文档特征矢量例的图。
图6为表示图1所示的簇分类部的处理顺序的流程图。
图7为表示簇分类结果例的图。
图8为表示图1所示的簇标签作成部中单词标签作成顺序的流程图。
图9为表示作成的单词标签例的图。
图10为表示图1所示的簇标签作成部中文标签作成顺序的流程图。
图11为表示作成的文标签例的图。
图12为表示图1所示的文档标签作成部的处理顺序的流程图。
图13为表示作成的文档标签例的图。
图14为表示本发明实施例2的信息检索系统的构成的方框图。
图15为表示图14所示的文档存储部中所保存的文档中询问表部分例的图。
图16为表示图14所示的文档存储部中所保存的文档中回答表部分例的图。
图17为表示图14所示的专家显示部中检索结果的显示例的图。
图18为表示图14所示的利用者显示部中检索结果的显示例的图。
图19为表示图14所示的特征矢量抽出部中利用者询问的特征矢量抽出顺序的流程图。
图20为表示从利用者询问中抽出的特征矢量例的图。
图21为表示图14所示的近似度运算部的处理顺序的流程图。
图22为表示以图14所示的数据库检索更新部的处理顺序为主的流程图。
以下参照附图说明本发明的2个实施例。
实施例1
图1为表示本发明实施例1的信息检索系统的构成的方框图。图1所示的信息检索系统由文档存储部11、簇存储部12、簇标签存储部13、文档标签部14、特征矢量抽出部15、簇分类部16、簇标签作成部17、文档标签作成部18、数据库检索部19、接口部20、利用者输入部21和利用者显示部22所构成,例如通过互联网在相互连接的文档服务器和利用者终端之间实现。文档存储部11保存多个文档。特征矢量抽出部15从保存在文档存储部11中的文档中抽出特征矢量。簇分类部16根据特征矢量抽出部15获得的特征矢量,对保存在文档存储部11中的文档进行簇分类。簇存储部12保存由簇分类部16进行簇分类后的文档的簇。簇标签作成部17对于由簇分类部16作成的各簇作成表示该簇内容的簇标签。簇标签表示由单词构成的单词标签和由文句构成的文句标签。簇标签存储部13保存由簇标签作成部17作成的簇标签。文档标签作成部18根据由簇标签作成部17作成的簇标签的要素的各文档,作成表示该文档内容的文档标签。文档标签部14保存文档标签作成部18作成的文档标签。利用者输入部21接收由利用者给出的检索条件。作为检索条件,只要是文档的关键词、文档ID等文档检索的条件即可。接口部20管理与利用者之间的输入输出。数据库检索部19从文档存储部11中检索满足检索条件的文档。利用者显示部22向利用者提供检索结果。
图2为表示图1所示的文档存储部11中所保存的文档的例。在文档存储部11中保存成为检索对象的给定n(n≥2)个文档。各文档由唯一的文档ID和文章形式的正文构成。第i条文档记为Di(1≤i≤n)。
图3为表示图1所示的利用者显示部22中检索结果的显示例。依据图3,对于某一检索条件的文档检索结果按每一簇归类显示。具体讲,簇ID和包含在该簇中的文档的文档ID以及正文,按每一簇以表的形式显示,用鼠标点击[前一簇]或者[后一簇]按键,将显示其他簇的内容,这样可以显示所有的显示结果。这样利用者容易把握类似检索结果的文档。并且,在所显示的簇中,显示表示该簇内容的簇标签的同时,文句标签所指定的文句用下划线表示。因此,利用者容易把握簇的内容。此外,作为检索结果、虽然也显示了簇ID和文档ID,也可以部显示。
以下,分别按文档录入时动作和文档检索时动作说明上述实施例1的详细内容。文档录入时动作是指最初将文档录入到文档存储部11中时,或者在这之后进行文档的追加/变更/删除时的动作。文档检索时动作是指检索录入的文档进行阅览时的动作。
<文档录入时动作>
图4为表示图1所示的特征矢量抽出部15的处理顺序。首先,特征矢量抽出部15依次取出保存在文档存储部11中的所有文档Di,抽出各文档Di的特征矢量Vi。特征矢量是表示文档特征的单词Tj及其重要度Wij的组作为要素的矢量,其要素的数量依据文档而不同。在此,j表示识别单词的唯一的编号。在图4中,在第S101步,将文档计数i设定为i=1。在第S102步,从文档存储部11中取出文档Di,通过周知的形态要素解析、构文解析、除去不要词等方法,从正文中抽出所出现的单词Tj,计算在文档Di中单词Tj出现的次数Fij。在结束判定的第S103步,对于所有文档如果第S102步的处理已经结束,即i=n时进入到第S105步。没有结束时进入到第S104步。在第S104步,将计数器i加1进入到第S102步。在第S105步,作为单词Ti的相对于所有文档的重要度,由单词Tj出现的文档数的多少表示,即IDF(inverse document frequency)值由式(1)计算。
式中,Mj表示单词Tj出现的文档数。在第S106步,将文档计数器i设定为i=1。在第S107步,作为单词Tj在文档Di中的特征的重要度Wij,表示文档Di中单词Tj出现的几率的值TF(term frequency)和上述IDF值相乘后的TFIDF值由式(2)计算。
在结束判定的第S108步,对于所有文档如果第S107步的处理已经结束,即i=n时结束。没有结束时进入到第S109步。在第S109步,将计数器i加1进入到第S107步。
图5为表示所抽出的文档特征矢量Vi的例。此外,在上述特征矢量的计算中虽然采用了TFIDF值,也可以采用单纯的单词出现次数等其他方法。
图6为表示图1所示的簇分类部16的处理顺序。簇分类部16利用特征矢量抽出部15所抽出的特征矢量,将所有文档分类成m个簇(1<m<n)。在此,第k个簇由Ck表示(1≤k≤m)。作为簇分类的顺序,采用按树状图依次分类的阶层式簇分类。在图6中,在第S111步,进行簇间距离的初始计算。作为初始簇,设定以只有各个文档Di作为要素的n个簇Ci。各簇Ck、Cl(1≤k、1≤m)之间的距离为Lkl,各文档的特征矢量之间的距离采用式(3)表示。…………………(3)
在第S112步,设定聚类次数的计数器i位i=1。在第S113步中,在所有簇的组合中,搜索簇间距离Lkl为最小的簇Ck、Cl(k<1)。在第S114步中,将簇Ck、Cl合并作为簇Cg。即Cg=Ck∪Cl,Cl=φ(φ表示空集)。伴随簇的合并,簇Cg和其他簇Ch(1≤h≤n)之间的簇间距离采用区域法由式(4)计算。
式中,Nk表示簇Ck的要素的数量。在结束判定的第S115步,当聚类次数为n-1时,即所有初始簇合并在各簇中时进入到第S117步。否则进入到第S116步。在第S116步,将计数器i加1进入到第S112步。在第S117步,确定簇的数。在从第S111步到第S115步的簇分类过程中,对于每一聚类次数的簇的数量减1。在第S117步,返回簇分类过程,确定适当的聚类次数。在此,要素具有2个以上的簇的数量为最大的聚类次数为适当的聚类次数。在第S118步,将包含由第S117步确定的聚类次数之前进行聚分类时的各簇中的要素写入到簇存储部12中。
图7为表示保存在簇存储部12中的簇的例。各簇由簇ID和包含在该簇中的文档的文档ID构成。例如,在簇1中包含1、190、432、644号的4个文档。这表示这4个文档的特征矢量之间和其他矢量相比较要更相似一些。此外,在上述例中,作为簇分类的方法虽然采用的是阶层聚类法,也可以采用非阶层聚类法。作为初始簇间距离虽然采用的是式(3)的相似比,也可以采用欧几里得平方距离等其他距离。作为簇合并时的簇间距离的计算方法虽然采用的是式(4)的区域法,也可以采用最长距离法等其他手法。作为簇数量的确定方法,虽然采用的是具有2个以上要素的簇的数量最大的聚类次数,也可以采用簇数量为文档数量的一定比例等其他确定手法。
图8为表示图1所示的簇标签作成部17中单词标签作成顺序。在第S201步,设定簇的计数器k为k=1。在第S202步,对于每一个包含在簇Ck的要素的所有文档Di的特征矢量Vi中的单词Tj,在簇Ck的要素的文档Di中,有单词Tj出现的文档数进行计数。在第S203步,对于每一个包含在簇Ck的要素的所有文档Di中的单词Tj,计算出单词Tj的TFIDF值(=Wij)的、针对簇Ck的要素的所有文档Di的合计。在第S204步,对于每一个包含在簇Ck的要素的所有文档Di的特征矢量Vi中的单词Tj,按第S202步出现文档数的多少顺序进行排序。当出现文档数相同时按第S203步求出的TFIDF值的大小顺序进行排序。在第S205步,选择在第S204步排序后的上位3个单词,作为簇的单词标签写入到簇标签存储部13中。在结束判定的第S206步,当对于所有簇从第202步到第205步之间的处理结束时,即k=m时结束。否则进入到第S207步。在第S207步,将计数器k加1进入到第S202步。
图9为表示写入到簇标签存储部13中的单词标签的例。例如,在簇1中表示有[点心]、[零食]、[乳酪]等单词标签。此外,作为单词标签的作成方法,虽然采用的是按单词出现的文档数排序后的方法,也可以采用只按TFIDF值排序等其他方法。又,单词标签的单词数虽然选择的是3个,也可以采用3个之外的其他个数。
图10为表示图1所示的簇标签作成部17中文句标签作成顺序。在第S301步,设定簇的计数器k为k=1。在第S302步,对于每一个包含在簇Ck的要素的所有文档Di的特征矢量Vi中的单词Tj,在簇Ck的要素的文档Di中,有单词Tj出现的文档数进行计数。在第S303步,对于每一个构成簇Ck的要素的所有文档Di的文句,计算包含在该文句中的单词Tj,在第S302步计数的文档数的合计。在此,文句表示文档中由[。]句点区分的文字列。在第S304步,对于构成簇Ck的要素的所有文档Di的文句,按第S303步获得的出现文档数的合计的大小顺序进行排序。在第S305步,选择在第S304步排序后的最上位的文句,作为簇的文句标签写入到簇标签存储部13中。当最上位的文句为多个时,选择其中文字数最少的文句。在结束判定的第S306步,当对于所有簇从第302步到第305步之间的处理结束时,即k=m时结束。否则进入到第S307步。在第S307步,将计数器k加1进入到第S302步。
图11为表示写入到簇标签存储部13中的文句标签的例。例如,在簇1中,表示有[水分多的物品(果子冻、嘌呤、酸乳酪)…]文句标签。此外,作为文句标签的作成方法虽然采用的是按单词出现的文档数的合计排序,也可以采用TFIDF值的合计排序等其他方法。另外,当最上位的文句为多个时,虽然选择的是其中文字数最少的文句,也可以采用选择从文句开始位置最前方的文句等其他方法。
图12为表示图1所示的文档标签作成部18的处理顺序。在第S401步,设定簇的计数器i为i=1。在第S402步,对于每一个构成文档Di的各文句,计算包含在该文句中的所有单词Tj的TFIDF值(=Wij)。在结束判定的第S403步,当对于所有文档进行第402步的处理结束时,即i=n时进入到第405步。否则进入到第S404步。在第S404步,将计数器i加1进入到第S402步。在第S405步,设定簇的计数器k为k=1。在第S406步,对于构成簇Ck的要素的所有文档Di的文句,按第S402步获得的合计的大小顺序进行排序。在第S407步,作为文档Di的文档标签选择在第S406步排序后的最上位的文句。如果所选择的文句和由簇标签作成部17所作成的簇的文句标签相同时,作为文档Di的文档标签选择在第S406步排序后的最上位开始的第2号文句。在第S408步,将在第S407步所选择的文档Di的文档标签写入到文档标签部14中。在结束判定的第S409步,当对于所有簇从第406步到第408步之间的处理结束时,即k=m时结束。否则进入到第S410步。在第S410步,将计数器k加1进入到第S406步。
图13为表示写入到文档标签部14中的文档标签的例。例如,包含在簇1内的文档1中,表示有答复,不要向后翻,…]的文档标签。
依据以上的动作,在文档录入时,针对各文档抽出特征矢量,然后作成簇、簇标签以及文档标签,并分别保存在相应的存储部中。
<文档检索时动作>
首先,接口部20通过利用者输入部21接收文档检索条件。数据库检索部19从文档存储部11中检索满足检索条件的文档,从簇存储部12中检索包含在所检索的文档的簇,再从文档存储部11中检索包含所检索的簇的文档,其结果与簇标签以及文档标签一起送给接口部20。接口部20通过利用者显示部22向利用者提示检索结果(图1)。
此外,在本实施例中,文档虽然是预先保存的,也可以通过光盘等存储媒体或者通过互联网等网络媒体,在之后导入或者修正。又,文档的检索,除了关键词或者文档ID以外,也可以是全文检索或者模糊检索。
实施例2
图14为表示本发明实施例2的信息检索系统的构成。图14所示的信息检索系统,是针对利用者用自由文的询问,根据过去的事例检索,进行恰当回答的系统。例如可以通过互联网相互连接的文档服务器、利用者终端以及专家终端实现。图14的构成,是在图1的构成的基础上,追加了特征矢量存储部31、相似度运算部32、专家输入部41、专家显示部42,并且将图1中的数据库检索部19置换成数据库检索更新部33。文档存储部11保存相互对应的多个询问文档和多个回答文档。专家显示部42向专家提示检索结果。专家输入部41接收专家的选择输入以及自由文的回答输入。接口部20管理利用者以及专家的输入输出。特征矢量抽出部15包括从文档存储部11的询问文档和回答文档中分别抽出特征矢量的功能、从利用者用自由文询问输入中抽出特征矢量的功能、从专家用自由文回答输入中抽出特征矢量的功能。特征矢量存储部31保存由特征矢量抽出部15分别从文档存储部11的询问文档和回答文档中抽出的特征矢量。相似度运算部32包括计算从利用者询问文档中抽出的特征矢量与特征矢量存储部31保存的询问文档的特征矢量的相似度的功能、以及计算从专家回答文档中抽出的特征矢量与特征矢量存储部31保存的回答文档的特征矢量的相似度的功能。数据库检索更新部33,在检索文档存储部11的文档的功能的基础上,还包括根据利用者或者专家的应答更新文档存储部11的功能。
图15以及图16为表示图14所示的文档存储部11中所保存的文档的例。图15表示收集了询问文档的询问表的部分。该询问表由唯一的询问ID、文章形式的询问、以及与该询问对应的回答ID构成。图16表示收集了回答文档的回答表的部分。该回答表由唯一的回答ID、文章形式的回答构成。第i个询问记为Qi,第k个回答记为Ak(1≤i≤n并且1≤k≤m)。在此,n≥m的关系成立。即,有可能对于多个询问只有一个回答。
图17为表示图14所示的专家显示部42中检索结果的显示例。在图17中,在利用者的询问的基础上,将回答候选分类成簇的状态下,并且也显示了簇的文句标签以及簇中的文档标签。在图17中,通过用鼠标按下[前页]按键或者[后页]按键显示另外的页面,可以显示所有的显示结果。这样,专家参照作为相似文档的集合所显示的检索结果,可以容易选择最恰当的回答。或者,也可以用自由文输入专家回答。此外,在图17的例中,作为簇标签虽然显示的是文句标签,也可以用单词标签替代显示或者同时显示。又,作为检索结果虽然也显示了簇ID和文档ID,也可以不显示。
图18为表示图14所示的利用者显示部22中的检索结果的显示例。在此,选择编号1的文档作为专家回答。
以下和上述实施例1相同,分为文档录入时动作和文档检索时动作说明实施例2的详细内容。
<文档录入时动作>
首先,特征矢量抽出部15从保存在文档存储部的所有文档中抽出询问的特征矢量VQi和回答的特征矢量VAk,所抽出的特征矢量写入到特征矢量存储部31中。特征矢量的抽出顺序和实施例1相同。和实施例1不同点在于对于询问和回答的部分分别计算特征矢量,以及将特征矢量写入到特征矢量存储部31中。
然后,簇分类部16从特征矢量存储部31中读取回答的特征矢量VAk,将所有的回答文档分类成簇,在簇存储部12中写入簇。簇分类的顺序和实施例1相同。和实施例1不同点在于采用回答的特征矢量VAk进行簇分类。簇标签作成部17以及文档标签作成部18的各个动作和实施例1相同。
依据以上的动作,文档录入时,针对询问和回答分别抽出特征矢量,又,对于回答,在作成簇、簇标签、文档标签之后分别保存在相应的存储部中。
<文档检索时动作>
首先,接口部20通过利用者输入部21接收利用者的询问Q。特征矢量抽出部15抽出利用者询问的特征矢量VQ。
图19为表示图14所示的特征矢量抽出部15中利用者询问的特征矢量抽出顺序。在第S501步,从利用者询问Q中抽出出现的单词Tj,计算单词Tj在文档内出现的次数Fij。单词的抽出方法和实施例1相同。在第S502步,计算单词的IDF值。当单词Tj在文档存储部11的任一个文档中存在时,由于其IDF值已经在文档录入时计算出,则在第S502步直接使用。如果单词Tj不存在时,用式(5)计算单词Tj的IDF值IDFj=log(n+1)+1 ……………(5)
在第S503步,计算利用者询问Q中的单词Tj的重要度WQj(TFIDF值)。TFIDF值的计算方法和实施例1相同。图20为表示从利用者询问Q中抽出的特征矢量VQ的例。
然后,相似度运算部32从特征矢量存储部31中取出所有的询问的特征矢量VQi,计算这些特征矢量VQi与利用者询问的特征矢量VQ之间的相似度。
图21为表示图14所示的相似度运算部32的处理顺序。在第S511步,设定文档的计数器i为i=1。在第S512步,用式(6)计算矢量的内积求出特征矢量VQi与来自利用者的询问的特征矢量VQ之间的相似度Ei。
在结束判定的第S513步,当对于所有询问进行第512步的处理结束时,即i=n时进入到第515步。否则进入到第S514步。在第S514步,将计数器i加1进入到第S512步。在第S515步,对所有询问文档按第512步获得的相似度Ei高低顺序进行排序。
然后,数据库检索更新部33从文档存储部11中检索出由相似度运算部33计算的相似度Ei处于上位的给定数量的询问文档和与其相对应的回答文档,从簇存储部12中检索出包含该检索的回答文档的簇,再次从文档存储部11中检索出包含在该簇中的回答文档,并将其结果与簇标签以及文档标签一起送向接口部22。此外,作为特征矢量的相似度运算方法虽然采用的是矢量的内积,也可以采用矢量的相似比等其他方法。
然后,接口部20通过专家显示部42向专家提示检索结果的回答部分(图17),通过专家输入部41,接收参照了专家显示部42的显示的专家的回答选择或者用自由文的回答输入。进一步,接口部20通过利用者显示部22向利用者提示专家的回答(图18)。因此,只向利用者提供有用的信息。
图22为以流程图的形式表示的图14所示数据库检索更新部33的处理顺序。在第S601步,进行回答事例检索显示。具体讲,接口部20接收利用者用自由文的询问Q,通过专家显示部42向专家提示检索结果(图17)。在第S602步,进行检索结果的判断。专家看到图17的显示后,针对利用者询问Q判定是否有认为是恰当的回答。如果认为有恰当的回答时进入到第S603步。如果认为没有恰当的回答时进入到第S606步。在第S603步,专家选择认为针对利用者询问Q是最恰当的回答的文档ID。,接口部20通过专家输入部41,接收所选择的文档ID的输入。又,该文档ID由于后述的第S605步的原因,传递给数据库检索更新部33。在第S604步,作为回答,接口部20通过利用者显示部22向利用者提示专家所选择的文档ID的文档(图18)。
在第S605步,进行询问追加处理。数据库检索更新部33从与所传递的文档ID的回答对应的1个以上的询问中,当和利用者询问Q的相似度最高的询问的相似度在给定值以下时,作为不能恰当进行自动回答的询问,在图15的询问表中,追加由新的唯一的询问ID、利用者询问Q以及所选择的文档ID构成的行。然后,进入到第S612步。在第S612步,特征矢量抽出部15和文档录入时相同,从保存在文档存储部11中的所有询问Qi以及回答Ak中,分别抽出特征矢量VQi、VAk,将所抽出的特征矢量写入到特征矢量存储部31中。
如果在第S602步没有恰当的回答时,专家,在第S606步针对利用者询问Q用自由文输入恰当的回答A。接口部20通过专家输入部41接收自由文的回答。在第S607步,接口部20把专家输入的回答A提示给利用者。在第608步,特征矢量抽出部15抽出专家输入的回答A的特征矢量。该特征矢量的抽出顺序和图19中说明的利用者询问Q的特征矢量VQ的抽出顺序相同。在第S609步,相似度运算部32从特征矢量存储部31中取出所有回答的特征矢量VAk,计算和专家所输入的回答A的特征矢量VA之间的相似度。在此,该相似度的计算顺序和图21中说明的利用者询问Q的相似度的计算顺序相同。在第S610步,相似度运算部32,当在第S609步中获得的相似度Ek中的最大值在给定值以上时,则判定为在文档存储部11中有和专家输入的回答A相类似的回答,将类似回答Ak的文档ID传递给数据库更新部33,进入到第S605步。否则进入到第S611步。在第S611步,进行询问回答追加处理。数据库更新部33在图16所示的回答表中追加新的唯一的文档ID以及专家输入的回答A构成的行。又,在图15的询问表中,追加新的唯一的询问ID、利用者询问Q以及给与所追加的回答的文档ID构成的行。然后,进入到第S612步。第S612步的处理如上所述。
另一方面,如果没有选择或者输入回答的专家时,接口部20通过利用者显示部22,向利用者提供和图17相同的检索结果。利用者看见图17的显示后,选择认为对自己的询问Q是最恰当的回答的文档ID,接口部20通过利用者输入部21,接收所选择的文档ID的输入。数据库更新部33,在对应于所选择的文档ID回答的1个以上的询问中,当和利用者询问Q的相似度最高的询问的相似度在给定值以下时,作为不能恰当进行自动回答的询问,在图15的询问表中,追加由新的唯一的询问ID、利用者询问Q以及所选择的文档ID构成的行(和第605步相同)。然后,特征矢量抽出部15和文档录入时相同,从保存在文档存储部11中的所有询问Qi以及回答Ak中,分别抽出特征矢量VQi、VAk,将所抽出的特征矢量写入到特征矢量存储部31中(和第612步相同)。
如上所述,依据实施例2,可以提供一种根据利用者或者专家的应答,可以自动更新文档存储部11,当下一次输入相同的询问时,可以恰当回答的信息检索系统。
Claims (18)
1.一种信息检索系统,是从多个文档中检索出利用者所需要的信息,其特征是包括为保存所述多个文档的文档存储装置、
为抽出保存在所述文档存储装置中的多个文档的各个特征量的特征量抽出装置、
根据所述抽出的特征量,按照各簇由1个文档或者具有相互相似的特征量的多个文档构成的原则,将保存在所述文档存储装置中的多个文档分类成多个簇的簇分类装置、
从保存在所述文档存储装置中的多个文档中,为检索出满足所述利用者给出的检索条件的文档的文档检索装置、
所述检索的文档,当该检索出的文档所属的簇由多个文档构成时与该簇中的其他文档一起作为检索结果提示的接口装置。
2.根据权利要求1所述的信息检索系统,其特征是所述特征量抽出装置具有分别从保存在所述文档存储装置中的多个文档中,抽出作为特征量的以在该文档中出现1次或者多次的单词和表明该文档特征的该单词的重要度的组为要素的特征矢量的构成。
3.根据权利要求1所述的信息检索系统,其特征是所述簇分类装置为采用让多个文档构成的簇的数量为最大的聚类方式的构成。
4.根据权利要求1所述的信息检索系统,其特征是进一步包括为作成在各个所述多个簇中表示相对应的簇的内容的多个簇标签的簇标签作成装置,
所述接口装置具有从所述作成的多个簇标签中将表示所述检索的文档所属的簇的内容的簇标签与所述检索结果一起提示的构成。
5.根据权利要求4所述的信息检索系统,其特征是所述簇标签作成装置具有对于所述多个簇的每一个,从属于该簇的所有文档中选择以表征该簇的特征的1个或者多个单词作为所述簇标签的构成。
6.根据权利要求4所述的信息检索系统,其特征是所述簇标签作成装置具有对于所述多个簇的每一个,从属于该簇的所有文档中选择以表征该簇的特征的1个文句作为所述簇标签的构成。
7.根据权利要求4所述的信息检索系统,其特征是进一步包括为作成在保存在所述文档存储装置中的多个文档中表示相对应的文档的内容的多个文档标签的文档标签作成装置,
所述接口装置具有从所述作成的多个文档标签中将表示所述检索的文档所属的簇中个文档的内容的文档标签与所述检索结果一起提示的构成。
8.根据权利要求7所述的信息检索系统,其特征是所述文档标签作成装置具有对于保存在所述文档存储装置中的多个文档的每一个,从该文档中的所有文句中,选择以表征该文档的特征的1个文句作为所述文档标签的构成。
9.根据权利要求1所述的信息检索系统,其特征是所述多个文档包括相互对应的多个询问文档和多个回答文档,
所述检索条件是用自由文的利用者询问,
所述特征量抽出装置为了将保存在所述文档存储装置中的多个回答文档由所述簇分类装置分类成多个簇而抽出保存在所述文档存储装置中的多个回答文档的特征量,
所述信息检索系统进一步包括对于保存在所述文档存储装置中的多个询问文档的每一个,计算出与所述利用者询问相关的文档之间的相似度的相似度运算装置,
所述文档检索装置根据所述计算的相似度,从保存在所述文档存储装置中的多个询问文档中检索相似度高的询问文档,并且从保存在所述文档存储装置中的多个回答文档中检索与所述检索的询问文档对应的回答文档,
所述接口装置将所述检索的回答文档在该所检索的回答文档所属的簇由多个回答文档构成时与该簇中的其他回答文档一起作为所述检索结果提示。
10.根据权利要求9所述的信息检索系统,其特征是所述接口装置将所述检索结果向所述利用者提示。
11.根据权利要求10所述的信息检索系统,其特征是所述接口装置接收从所述提示检索结果中由所述利用者对回答文档的选择,
所述信息检索系统进一步包括为从保存在所述文档存储装置中的多个询问文档中检索与所述检索的回答文档相对应的询问文档,当该检索的询问文档和与所述利用者询问相关的文档之间的相似度在给定值以下时,让与所述利用者询问相关的文档与所选择的回答文档对应重新保存在所属文档存储装置中的文档更新装置。
12.根据权利要求9所述的信息检索系统,其特征是所述接口装置将所述检索结果和与所述利用者询问相关的文档向所述专家提示,并且从该提示的检索结果中又所述专家选择回答文档,向所述利用者提示。
13.根据权利要求12所述的信息检索系统,其特征是进一步包括为从保存在所述文档存储装置中的多个询问文档中检索与所述检索的回答文档相对应的询问文档,当该检索的询问文档和与所述利用者询问相关的文档之间的相似度在给定值以下时,让与所述利用者询问相关的文档与所选择的回答文档对应重新保存在所属文档存储装置中的文档更新装置。
14.根据权利要求9所述的信息检索系统,其特征是所述接口装置将所述检索结果和与所述利用者询问相关的文档向所述专家提示,并且参照该提示的检索结果、由所述专家用自由文输入回答文档,向所述利用者提示。
15.根据权利要求14所述的信息检索系统,其特征是进一步包括当保存在所述文档存储装置中的多个回答文档的每一个和所述输入的回答文档之间的相似度均比给定值低时,让与所述利用者询问相关的文档与所输入的回答文档相互对应重新保存在所属文档存储装置中的文档更新装置。
16.一种信息检索系统,是从多个文档中检索出利用者所需要的信息,其特征是包括为保存相互对应的多个询问文档和多个回答文档的文档存储装置、
当所述利用者用自由文给出利用者询问时,针对保存在所述文档存储装置中的多个询问文档的每一个,计算和与所述利用者询问相关的文档之间的相似度的相似度运算装置、
根据所述计算的相似度,从保存在所述文档存储装置中的多个询问文档中检索相似度高的多个询问文档,并且从保存在所述文档存储装置中的多个回答文档检索分别与所检索的多个询问文档对应的回答文档的文档检索装置、
将所述检索的多个回答文档与和所述利用者询问相关的文档一起作为检索结果向专家提示,并且将从该提示的检索结果中由所述专家选择的回答文档或者参照该提示的检索结果由所述专家输入的回答文档向所述利用者提示的接口装置。
17.根据权利要求16所述的信息检索系统,其特征是进一步包括从保存在所述文档存储装置中的多个询问文档中检索与所述选择的回答文档对应的询问文档,当该检索的询问文档和与所述利用者询问相关的文档之间的相似度在给定值以下时,让与所述利用者询问相关的文档与所选择的回答文档对应重新保存在所属文档存储装置中的文档更新装置。
18.根据权利要求16所述的信息检索系统,其特征是进一步包括当保存在所述文档存储装置中的多个回答文档的每一个和所述输入的回答文档之间的相似度均比给定值低时,让与所述利用者询问相关的文档与所输入的回答文档相互对应重新保存在所属文档存储装置中的文档更新装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000145168 | 2000-05-17 | ||
JP2000145168 | 2000-05-17 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN1324046A true CN1324046A (zh) | 2001-11-28 |
Family
ID=18651710
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN01118060A Pending CN1324046A (zh) | 2000-05-17 | 2001-05-17 | 信息检索系统 |
Country Status (4)
Country | Link |
---|---|
US (1) | US6993517B2 (zh) |
EP (1) | EP1156430A2 (zh) |
KR (1) | KR20010105241A (zh) |
CN (1) | CN1324046A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100378720C (zh) * | 2004-06-15 | 2008-04-02 | 富士施乐株式会社 | 文档处理装置和文档处理方法 |
CN101044484B (zh) * | 2005-06-16 | 2010-05-26 | 索尼株式会社 | 信息处理装置和信息处理方法 |
CN101505349B (zh) * | 2008-02-08 | 2011-08-17 | 夏普株式会社 | 图像处理方法、装置及系统、图像读取装置和形成装置 |
CN103150321A (zh) * | 2011-12-06 | 2013-06-12 | 纽昂斯通讯公司 | 适用于对以常见问题(faq)为基础的系统进行操作的方法和装置 |
WO2016041181A1 (en) * | 2014-09-18 | 2016-03-24 | Google Inc. | Clustering communications based on classification |
Families Citing this family (89)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6519603B1 (en) * | 1999-10-28 | 2003-02-11 | International Business Machine Corporation | Method and system for organizing an annotation structure and for querying data and annotations |
US6804665B2 (en) * | 2001-04-18 | 2004-10-12 | International Business Machines Corporation | Method and apparatus for discovering knowledge gaps between problems and solutions in text databases |
US7899825B2 (en) * | 2001-06-27 | 2011-03-01 | SAP America, Inc. | Method and apparatus for duplicate detection |
US20030028441A1 (en) * | 2001-08-02 | 2003-02-06 | International Business Machines Corporation | Answer fulfillment-based marketing |
US6868411B2 (en) * | 2001-08-13 | 2005-03-15 | Xerox Corporation | Fuzzy text categorizer |
US6978274B1 (en) * | 2001-08-31 | 2005-12-20 | Attenex Corporation | System and method for dynamically evaluating latent concepts in unstructured documents |
GB2382678A (en) * | 2001-11-28 | 2003-06-04 | Symbio Ip Ltd | a knowledge database |
KR20030069639A (ko) * | 2002-02-22 | 2003-08-27 | 이의범 | 계층적 및 개념적 클러스터링에 의한 증권정보 검색시스템및 그 방법 |
JP4142881B2 (ja) * | 2002-03-07 | 2008-09-03 | 富士通株式会社 | 文書類似度算出装置、クラスタリング装置および文書抽出装置 |
JP4177031B2 (ja) * | 2002-05-31 | 2008-11-05 | 富士通株式会社 | 通知方法及び通知装置 |
KR100811288B1 (ko) * | 2002-07-18 | 2008-03-07 | 주식회사 로앤비 | 통신망을 이용한 상담 시스템, 그의 컨텐츠 제작 방법 및그를 실행하는 프로그램을 저장한 기록 매체 |
US7596553B2 (en) * | 2002-10-11 | 2009-09-29 | Avaya Inc. | String matching using data bit masks |
US7315982B2 (en) | 2003-02-26 | 2008-01-01 | Xerox Corporation | User-tailorable romanized Chinese text input systems and methods |
US7296010B2 (en) * | 2003-03-04 | 2007-11-13 | International Business Machines Corporation | Methods, systems and program products for classifying and storing a data handling method and for associating a data handling method with a data item |
US8666983B2 (en) * | 2003-06-13 | 2014-03-04 | Microsoft Corporation | Architecture for generating responses to search engine queries |
US7231375B2 (en) * | 2003-10-10 | 2007-06-12 | Microsoft Corporation | Computer aided query to task mapping |
US7376752B1 (en) | 2003-10-28 | 2008-05-20 | David Chudnovsky | Method to resolve an incorrectly entered uniform resource locator (URL) |
US20050149546A1 (en) * | 2003-11-03 | 2005-07-07 | Prakash Vipul V. | Methods and apparatuses for determining and designating classifications of electronic documents |
KR100446640B1 (ko) * | 2003-12-16 | 2004-09-04 | 주식회사 아이리스이십일 | 유무선 네트워크를 이용한 실시간 지식정보 검색 시스템과실시간 지식정보 검색방법 및 이에 대한 지식정보의등록관리 방법 |
CN1629833A (zh) * | 2003-12-17 | 2005-06-22 | 国际商业机器公司 | 实现问与答功能和计算机辅助写作的方法及装置 |
US7478317B2 (en) * | 2004-02-12 | 2009-01-13 | International Business Machines Corporation | Method and apparatus for presenting a summary of selected values |
US7191175B2 (en) | 2004-02-13 | 2007-03-13 | Attenex Corporation | System and method for arranging concept clusters in thematic neighborhood relationships in a two-dimensional visual display space |
US20050210038A1 (en) * | 2004-03-18 | 2005-09-22 | International Business Machines Corporation | Method for providing workflow functionality and tracking in an annotation subsystem |
US7567895B2 (en) * | 2004-08-31 | 2009-07-28 | Microsoft Corporation | Method and system for prioritizing communications based on sentence classifications |
JP2006092473A (ja) * | 2004-09-27 | 2006-04-06 | Toshiba Corp | 回答支援システムおよび装置、回答支援プログラム |
US7805446B2 (en) * | 2004-10-12 | 2010-09-28 | Ut-Battelle Llc | Agent-based method for distributed clustering of textual information |
US7769579B2 (en) * | 2005-05-31 | 2010-08-03 | Google Inc. | Learning facts from semi-structured text |
US8244689B2 (en) * | 2006-02-17 | 2012-08-14 | Google Inc. | Attribute entropy as a signal in object normalization |
US20060179038A1 (en) * | 2005-02-04 | 2006-08-10 | Sbc Knowledge Ventures, L.P. | Presenting FAQ's during a task of entering an e-mail message |
US8682913B1 (en) | 2005-03-31 | 2014-03-25 | Google Inc. | Corroborating facts extracted from multiple sources |
US9208229B2 (en) | 2005-03-31 | 2015-12-08 | Google Inc. | Anchor text summarization for corroboration |
US7587387B2 (en) | 2005-03-31 | 2009-09-08 | Google Inc. | User interface for facts query engine with snippets from information sources that include query terms and answer terms |
US7831545B1 (en) | 2005-05-31 | 2010-11-09 | Google Inc. | Identifying the unifying subject of a set of facts |
US8996470B1 (en) | 2005-05-31 | 2015-03-31 | Google Inc. | System for ensuring the internal consistency of a fact repository |
US20090307194A1 (en) * | 2005-06-03 | 2009-12-10 | Delefevre Patrick Y | Neutral sales consultant |
DE102005045625B4 (de) * | 2005-09-23 | 2008-06-05 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung, Verfahren und Computerprogramm zum Zusammenstellen eines Tests sowie Vorrichtung, Verfahren und Computerprogramm zum Prüfen eines Prüflings |
US7991797B2 (en) | 2006-02-17 | 2011-08-02 | Google Inc. | ID persistence through normalization |
US8260785B2 (en) * | 2006-02-17 | 2012-09-04 | Google Inc. | Automatic object reference identification and linking in a browseable fact repository |
US8700568B2 (en) | 2006-02-17 | 2014-04-15 | Google Inc. | Entity normalization via name normalization |
JP4251652B2 (ja) * | 2006-06-09 | 2009-04-08 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 検索装置、検索プログラムおよび検索方法 |
JP4234740B2 (ja) * | 2006-08-03 | 2009-03-04 | 株式会社東芝 | キーワード提示装置、プログラムおよびキーワード提示方法 |
US20080040339A1 (en) * | 2006-08-07 | 2008-02-14 | Microsoft Corporation | Learning question paraphrases from log data |
AU2007296443B2 (en) * | 2006-09-15 | 2011-09-22 | The Nielsen Company (Us), Llc | Methods and apparatus to identify images in print advertisements |
US8122026B1 (en) | 2006-10-20 | 2012-02-21 | Google Inc. | Finding and disambiguating references to entities on web pages |
US8347202B1 (en) | 2007-03-14 | 2013-01-01 | Google Inc. | Determining geographic locations for place names in a fact repository |
US8239350B1 (en) | 2007-05-08 | 2012-08-07 | Google Inc. | Date ambiguity resolution |
US7966291B1 (en) | 2007-06-26 | 2011-06-21 | Google Inc. | Fact-based object merging |
US7970766B1 (en) | 2007-07-23 | 2011-06-28 | Google Inc. | Entity type assignment |
US8738643B1 (en) | 2007-08-02 | 2014-05-27 | Google Inc. | Learning synonymous object names from anchor texts |
US8812435B1 (en) | 2007-11-16 | 2014-08-19 | Google Inc. | Learning objects and facts from documents |
JP5157551B2 (ja) * | 2008-03-17 | 2013-03-06 | 株式会社リコー | オブジェクト連携システム、オブジェクト連携方法およびプログラム |
US8332394B2 (en) * | 2008-05-23 | 2012-12-11 | International Business Machines Corporation | System and method for providing question and answers with deferred type evaluation |
US8275803B2 (en) | 2008-05-14 | 2012-09-25 | International Business Machines Corporation | System and method for providing answers to questions |
US8407042B2 (en) * | 2008-12-09 | 2013-03-26 | Xerox Corporation | Cross language tool for question answering |
US20100235311A1 (en) * | 2009-03-13 | 2010-09-16 | Microsoft Corporation | Question and answer search |
US20100235343A1 (en) * | 2009-03-13 | 2010-09-16 | Microsoft Corporation | Predicting Interestingness of Questions in Community Question Answering |
US8572084B2 (en) | 2009-07-28 | 2013-10-29 | Fti Consulting, Inc. | System and method for displaying relationships between electronically stored information to provide classification suggestions via nearest neighbor |
WO2011028553A1 (en) | 2009-08-24 | 2011-03-10 | Fti Technology Llc | Generating a reference set for use during document review |
US20110125734A1 (en) * | 2009-11-23 | 2011-05-26 | International Business Machines Corporation | Questions and answers generation |
JP5448105B2 (ja) | 2009-12-09 | 2014-03-19 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 検索キーワードから文書データを検索する方法、並びにそのコンピュータ・システム及びコンピュータ・プログラム |
US9110882B2 (en) * | 2010-05-14 | 2015-08-18 | Amazon Technologies, Inc. | Extracting structured knowledge from unstructured text |
US8892550B2 (en) | 2010-09-24 | 2014-11-18 | International Business Machines Corporation | Source expansion for information retrieval and information extraction |
US8473499B2 (en) * | 2011-10-17 | 2013-06-25 | Microsoft Corporation | Question and answer forum techniques |
US9436758B1 (en) * | 2011-12-27 | 2016-09-06 | Google Inc. | Methods and systems for partitioning documents having customer feedback and support content |
US10614725B2 (en) | 2012-09-11 | 2020-04-07 | International Business Machines Corporation | Generating secondary questions in an introspective question answering system |
US9015097B2 (en) | 2012-12-19 | 2015-04-21 | Nuance Communications, Inc. | System and method for learning answers to frequently asked questions from a semi-structured data source |
US9064001B2 (en) * | 2013-03-15 | 2015-06-23 | Nuance Communications, Inc. | Method and apparatus for a frequently-asked questions portal workflow |
US9230009B2 (en) | 2013-06-04 | 2016-01-05 | International Business Machines Corporation | Routing of questions to appropriately trained question and answer system pipelines using clustering |
US9146987B2 (en) * | 2013-06-04 | 2015-09-29 | International Business Machines Corporation | Clustering based question set generation for training and testing of a question and answer system |
CN104424290A (zh) * | 2013-09-02 | 2015-03-18 | 佳能株式会社 | 基于语音的问答系统和用于交互式语音系统的方法 |
US9348900B2 (en) | 2013-12-11 | 2016-05-24 | International Business Machines Corporation | Generating an answer from multiple pipelines using clustering |
KR102222318B1 (ko) * | 2014-03-18 | 2021-03-03 | 삼성전자주식회사 | 사용자 인식 방법 및 장치 |
CN103902733B (zh) * | 2014-04-18 | 2017-02-01 | 北京大学 | 基于疑问词扩展的信息检索方法 |
US9984772B2 (en) * | 2016-04-07 | 2018-05-29 | Siemens Healthcare Gmbh | Image analytics question answering |
WO2017210618A1 (en) | 2016-06-02 | 2017-12-07 | Fti Consulting, Inc. | Analyzing clusters of coded documents |
US10331684B2 (en) * | 2016-06-03 | 2019-06-25 | International Business Machines Corporation | Generating answer variants based on tables of a corpus |
US9817806B1 (en) * | 2016-06-28 | 2017-11-14 | International Business Machines Corporation | Entity-based content change management within a document content management system |
US11681942B2 (en) | 2016-10-27 | 2023-06-20 | Dropbox, Inc. | Providing intelligent file name suggestions |
US9852377B1 (en) * | 2016-11-10 | 2017-12-26 | Dropbox, Inc. | Providing intelligent storage location suggestions |
EP3613016A4 (en) * | 2017-04-20 | 2020-11-25 | Hewlett-Packard Development Company, L.P. | DOCUMENT SECURITY |
US11068479B2 (en) * | 2018-01-09 | 2021-07-20 | GlobalWonks, Inc. | Method and system for analytic based connections among user types in an online platform |
JP7139728B2 (ja) | 2018-06-29 | 2022-09-21 | 富士通株式会社 | 分類方法、装置、及びプログラム |
US10909180B2 (en) | 2019-01-11 | 2021-02-02 | International Business Machines Corporation | Dynamic query processing and document retrieval |
US10949613B2 (en) * | 2019-01-11 | 2021-03-16 | International Business Machines Corporation | Dynamic natural language processing |
JP7187411B2 (ja) * | 2019-09-12 | 2022-12-12 | 株式会社日立製作所 | コーチングシステム及びコーチング方法 |
KR102383965B1 (ko) * | 2019-10-14 | 2022-05-11 | (주)디앤아이파비스 | 유사도 점수 및 비유사도 점수를 바탕으로 특허문서의 유사도를 판단하기 위한 방법, 장치 및 시스템 |
KR102085217B1 (ko) * | 2019-10-14 | 2020-03-04 | (주)디앤아이파비스 | 특허문서의 유사도 판단 방법, 장치 및 시스템 |
KR102300352B1 (ko) * | 2019-10-14 | 2021-09-09 | (주)디앤아이파비스 | 중요도 스코어를 바탕으로 특허문서의 유사도를 판단하기 위한 방법, 장치 및 시스템 |
CN113127616B (zh) * | 2021-03-25 | 2023-09-15 | 白鹭 | 应用于现场对话场景中的智能话术推荐方法及装置 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6029195A (en) * | 1994-11-29 | 2000-02-22 | Herz; Frederick S. M. | System for customized electronic identification of desirable objects |
JP3565239B2 (ja) | 1996-09-03 | 2004-09-15 | 日本電信電話株式会社 | 情報検索装置 |
JPH10187761A (ja) | 1996-10-29 | 1998-07-21 | Matsushita Electric Ind Co Ltd | 情報検索装置 |
JPH10154182A (ja) | 1996-11-25 | 1998-06-09 | Nippon Telegr & Teleph Corp <Ntt> | 問い合わせ回答方法及びシステム |
US6028601A (en) * | 1997-04-01 | 2000-02-22 | Apple Computer, Inc. | FAQ link creation between user's questions and answers |
JPH11134364A (ja) | 1997-10-31 | 1999-05-21 | Omron Corp | 体系化知識解析方法及び装置並びに分類方法及び装置 |
US6256648B1 (en) * | 1998-01-29 | 2001-07-03 | At&T Corp. | System and method for selecting and displaying hyperlinked information resources |
US6421065B1 (en) * | 1998-02-09 | 2002-07-16 | Microsoft Corporation | Access of online information featuring automatic hide/show function |
JPH11272710A (ja) | 1998-03-20 | 1999-10-08 | Omron Corp | 情報検索システム、情報検索方法および記録媒体 |
JPH11275137A (ja) | 1998-03-23 | 1999-10-08 | Hitachi Information Systems Ltd | 電子メール管理支援方法およびそのプログラム記録媒体 |
JPH11296552A (ja) | 1998-04-13 | 1999-10-29 | Ricoh Co Ltd | 文書分類装置、文書分類方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2000020541A (ja) | 1998-07-03 | 2000-01-21 | Nec Corp | 問題解決支援システム |
US6177932B1 (en) * | 1998-08-21 | 2001-01-23 | Kana Communications, Inc. | Method and apparatus for network based customer service |
JP2000105768A (ja) | 1998-09-28 | 2000-04-11 | Nippon Telegr & Teleph Corp <Ntt> | 問合わせ文書の特徴量計算装置および方法 |
JP2000123028A (ja) | 1998-10-13 | 2000-04-28 | Mitsubishi Electric Corp | 手順ベースヘルプデスクシステム、事例検索方法および事例検索装置 |
US20010047270A1 (en) * | 2000-02-16 | 2001-11-29 | Gusick David L. | Customer service system and method |
US6434550B1 (en) * | 2000-04-14 | 2002-08-13 | Rightnow Technologies, Inc. | Temporal updates of relevancy rating of retrieved information in an information search system |
-
2001
- 2001-05-16 EP EP01111883A patent/EP1156430A2/en not_active Withdrawn
- 2001-05-17 KR KR1020010026934A patent/KR20010105241A/ko not_active Application Discontinuation
- 2001-05-17 US US09/859,609 patent/US6993517B2/en not_active Expired - Lifetime
- 2001-05-17 CN CN01118060A patent/CN1324046A/zh active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100378720C (zh) * | 2004-06-15 | 2008-04-02 | 富士施乐株式会社 | 文档处理装置和文档处理方法 |
CN101044484B (zh) * | 2005-06-16 | 2010-05-26 | 索尼株式会社 | 信息处理装置和信息处理方法 |
CN101505349B (zh) * | 2008-02-08 | 2011-08-17 | 夏普株式会社 | 图像处理方法、装置及系统、图像读取装置和形成装置 |
CN103150321A (zh) * | 2011-12-06 | 2013-06-12 | 纽昂斯通讯公司 | 适用于对以常见问题(faq)为基础的系统进行操作的方法和装置 |
CN103150321B (zh) * | 2011-12-06 | 2019-03-05 | 纽昂斯通讯公司 | 适用于对以常见问题(faq)为基础的系统进行操作的方法和装置 |
WO2016041181A1 (en) * | 2014-09-18 | 2016-03-24 | Google Inc. | Clustering communications based on classification |
US10007717B2 (en) | 2014-09-18 | 2018-06-26 | Google Llc | Clustering communications based on classification |
Also Published As
Publication number | Publication date |
---|---|
US6993517B2 (en) | 2006-01-31 |
US20020065845A1 (en) | 2002-05-30 |
KR20010105241A (ko) | 2001-11-28 |
EP1156430A2 (en) | 2001-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1324046A (zh) | 信息检索系统 | |
CN112035636B (zh) | 医疗问诊系统的问答管理方法、装置、设备及存储介质 | |
US20040249808A1 (en) | Query expansion using query logs | |
US8983971B2 (en) | Method, apparatus, and system for mobile search | |
US8341159B2 (en) | Creating taxonomies and training data for document categorization | |
CN101320375B (zh) | 基于用户点击行为的数字图书搜索方法 | |
CN103400286B (zh) | 一种基于用户行为进行物品特征标注的推荐系统及方法 | |
KR101681109B1 (ko) | 대표 색인어와 유사도를 이용한 문서 자동 분류 방법 | |
US20060129843A1 (en) | Method and apparatus for electronically extracting application specific multidimensional information from documents selected from a set of documents electronically extracted from a library of electronically searchable documents | |
CN105159932B (zh) | 一种数据检索引擎和排序系统和方法 | |
CN102609433A (zh) | 基于用户日志进行查询推荐的方法及系统 | |
JPH10320419A (ja) | 情報関連づけ装置およびその方法 | |
CN101477554A (zh) | 基于用户兴趣的个性化元搜索引擎及搜索结果处理方法 | |
WO2007001128A1 (en) | Method and system for determining relation between search terms in the internet search system | |
CN109582852B (zh) | 一种全文检索结果的排序方法及系统 | |
CN101196900A (zh) | 一种基于元数据的信息检索方法 | |
CN105378730A (zh) | 社交媒体分析与输出 | |
CN112035599A (zh) | 基于垂直搜索的查询方法、装置、计算机设备及存储介质 | |
CN1629837A (zh) | 电子文档的处理、浏览及分类查询的方法、装置及其系统 | |
JP3654850B2 (ja) | 情報検索システム | |
CN112149422A (zh) | 一种基于自然语言的企业新闻动态监测方法 | |
CN113204669A (zh) | 一种基于语音识别的短视频搜索推荐方法、系统及计算机存储介质 | |
CN110413882B (zh) | 信息推送方法、装置及设备 | |
US20120239657A1 (en) | Category classification processing device and method | |
JP4087769B2 (ja) | サーバ、及び関連語提案方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |