JP2002132811A

JP2002132811A - 質問応答方法、質問応答システム及び質問応答プログラムを記録した記録媒体

Info

Publication number: JP2002132811A
Application number: JP2000319998A
Authority: JP
Inventors: Yutaka Sasaki; 裕佐々木; Hideki Isozaki; 秀樹磯崎; Hiroyori Taira; 博順平; Hideto Kazawa; 秀人賀沢; Keiichi Hirota; 啓一廣田; Hiroyuki Nakajima; 浩之中島; Tsutomu Hirao; 努平尾; Tsuneaki Kato; 恒昭加藤
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 2000-10-19
Filing date: 2000-10-19
Publication date: 2002-05-10

Abstract

(57)【要約】【課題】文書集合が与えられると質問文に対する回答
とその文書を出力できるようにする。【解決手段】文書集合と質問文が与えられると、質問
文に対する回答と文書の列を出力する質問応答システム
であって、文書集合を格納する文書集合格納装置１００
と、質問文を受けとる入力装置１０２と、入力装置から
得られた質問文から検索語集合と質問種別を判定する質
問解析装置１０４と、前記検索語集合と質問種別に従っ
て、文書集合格納装置に格納された文書集合から関連文
書集合を検索する文書検索装置１０６と、関連文書集合
中の各文書から質問文に対する回答を抽出し、該回答と
該回答を抽出した文書の列を質問文に対する応答結果と
して作成する回答抽出装置１０８と、応答結果を出力す
る出力装置１１０とを有する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、自然言語処理シス
テム、言語処理システム、知識処理システム、情報検索
システム、情報抽出システム等に用いられ、質問文に対
する回答を出力する質問応答方法、質問応答システム及
び質問応答プログラムを記録した記録媒体に関する。

【０００２】

【従来の技術】従来の情報検索技術は、与えられた文書
集合から、ユーザの入力した質問に合致する文書の集合
を取り出すものであった。また、従来の情報抽出技術
は、与えられた１つの文書について、分野ごとに予め決
められた項目を抽出するものであった。従来の日本語質
問応答システムは、回答として単語や単語の列を出力し
ていたが、その回答の元となる記事を同時に出力してい
なかった。

【０００３】さらに、固有名詞の抽出技術の利用や、質
問文に対する回答を含む可能性のある文書を検索する際
の文書スコア、及び回答を抽出する際の抽出スコアの両
方スコアを総合的に用いて、質問に対して出力する回答
と文書の列の順序を決める等の、回答の精度を向上させ
るための工夫が行なわれていなかった。

【０００４】

【発明が解決しようとする課題】まず、従来の情報検索
技術は質問に対する結果を文書の単位で応答するため、
ユーザが文書の内容を読まなければならない。例えば、
「日本の首相は誰ですが？」という質問に対して、返っ
てきた結果に含まれる文書を読むことにより初めて、
「森首相」という答が判る。文書を読まなければならな
いことは「森首相」といった直接的な回答が欲しいユー
ザにとっては非常に煩わしいという問題が有った。

【０００５】次に、従来の情報抽出技術は、予め決めら
れた特定の分野でしか使えないため、任意の質問文に対
する回答を出力する質問応答システムでは使えない。従
来の日本語質問応答システムは、回答として単語や単語
の列を出力していたが、回答の元となる記事を返してい
なかったため、回答を裏付ける情報をユーザが得ること
ができながった。例えば、「ジンバブエの大統領は誰で
すか？」という質問に対して、「ムガべ大統領」と回答
が返ってきても、ユーザが本当に「ムガべ大統領」が正
しいがどうかを確認できないという問題が有った。

【０００６】本発明はこのような事情に鑑みてなされた
ものであり、質問文に対する直接的な回答とその回答の
元となる文書を提示することにより回答の信頼性をユー
ザが確認することができる質問応答方法、質問応答シス
テム及び質問応答プログラムを記録した記録媒体を提供
することを目的とする。

【０００７】

【課題を解決するための手段】上記目的を達成するため
に、請求項１に記載の発明は、文書集合と質問文が与え
られると、該質問文に対する回答と文書の列を出力する
コンピュータシステムを使用した質問応答方法であっ
て、入力された質問文から検索語集合と質問種別を判定
し、該検索語集合および該質問種別に従って、前記与え
られた文書集合から関連文書集合を検索し、該関連文書
集合の各文書から回答を抽出し、該回答と該回答を抽出
した文書の列を前記質問文に対する応答結果として出力
することを特徴とする。

【０００８】請求項１に記載の発明によれば、入力され
た質問文から検索語集合と質問種別を判定し、該検索語
集合および該質問種別に従って、前記与えられた文書集
合から関連文書集合を検索し、該関連文書集合の各文書
から回答を抽出し、該回答と該回答を抽出した文書の列
を前記質問文に対する応答結果として出力するようにし
たので、質問文に対する直接的な回答とその回答の元と
なる文書を提示することにより回答の信頼性をユーザが
確認することができる。

【０００９】また請求項２に記載の発明は、請求項１に
記載の質問応答方法において、前記関連文書集合の要素
は文書全体ではなく、文書の一部として前記文書集合か
ら前記関連文書集合を検索することを特徴とする。

【００１０】請求項２に記載の発明によれば、請求項１
に記載の質問応答方法において、前記関連文書集合の要
素は文書全体ではなく、文書の一部として前記文書集合
から前記関連文書集合を検索するようにしたので、直接
的な回答が得られる。

【００１１】また、請求項３に記載の発明は、請求項１
または２のいずれかに記載の質問応答方法において、前
記関連文書集合を検索する際に計算した各文書のスコア
である文書スコアと前記関連文書集合の各文書から回答
を抽出する際に計算した抽出スコアの２つのスコアに従
って、回答と文書の列を順序付けることを特徴とする。

【００１２】請求項３に記載の発明によれば、請求項１
または２のいずれかに記載の質問応答方法において、前
記関連文書集合を検索する際に計算した各文書のスコア
である文書スコアと前記関連文書集合の各文書から回答
を抽出する際に計算した抽出スコアの２つのスコアに従
って、回答と文書の列を順序付けるようにしたので、質
問文に対する回答の精度の向上が図れる。

【００１３】また、請求項４に記載の発明は、請求項１
乃至３のいずれかに記載の質問応答方法において、前記
関連文書集の各文書から回答を抽出する際に、固有名詞
や数値表現の認識を行なうことを特徴とする。

【００１４】請求項４に記載の発明によれば、請求項１
乃至３のいずれかに記載の質問応答方法において、前記
関連文書集の各文書から回答を抽出する際に、固有名詞
や数値表現の認識を行なうようにしたので、質問文に対
する精度の向上が図れる。

【００１５】また、請求項５に記載の発明は、文書集合
と質問文が与えられると、該質問文に対する回答と文書
の列を出力する質問応答システムであって、文書集合を
格納する文書集合格納装置と、質問文を受けとる入力装
置と、該入力装置から得られた前記質問文から検索語集
合と質問種別を判定する質問解析装置と、前記検索語集
合と質問種別に従って、前記文書集合格納装置に格納さ
れた文書集合から関連文書集合を検索する文書検索装置
と、関連文書集合中の各文書から質問文に対する回答を
抽出し、該回答と該回答を抽出した文書の列を前記質問
文に対する応答結果として作成する回答抽出装置と、前
記応答結果を出力する出力装置とを有することを特徴と
する。

【００１６】請求項５に記載の発明によれば、文書集合
を格納する文書集合格納装置と、質問文を受けとる入力
装置と、該入力装置から得られた前記質問文から検索語
集合と質問種別を判定する質問解析装置と、前記検索語
集合と質問種別に従って、前記文書集合格納装置に格納
された文書集合から関連文書集合を検索する文書検索装
置と、関連文書集合中の各文書から質問文に対する回答
を抽出し、該回答と該回答を抽出した文書の列を前記質
問文に対する応答結果として作成する回答抽出装置と、
前記応答結果を出力する出力装置とを有するので、質問
文に対する直接的な回答とその回答の元となる文書を提
示することにより回答の信頼性をユーザが確認すること
ができる。

【００１７】また、請求項６に記載の発明は、請求項５
に記載の質問応答システムにおいて、前記文書検索装置
は、関連文書集合の要素を文書全体ではなく、文書の一
部として前記文書集合から前記関連文書集合を検索する
ことを特徴とする。

【００１８】請求項６に記載の発明によれば、請求項５
に記載の質問応答システムにおいて、前記文書検索装置
は、関連文書集合の要素を文書全体ではなく、文書の一
部として前記文書集合から前記関連文書集合を検索する
ので、直接的な回答が得られる。

【００１９】また、請求項７に記載の発明は、請求項５
または６のいずれかに記載の質問応答システムにおい
て、前記回答抽出装置は、前記文書検索装置が関連文書
集合を検索する際に計算した各文書のスコアである文書
スコアと前記回答抽出装置が前記関連文書集合の各文書
から回答を抽出する際に計算した抽出スコアの２つのス
コアに従って、回答と文書の列を順序付けることを特徴
とする。

【００２０】請求項７に記載の発明によれば、請求項５
または６のいずれかに記載の質問応答システムにおい
て、前記回答抽出装置は、前記文書検索装置が関連文書
集合を検索する際に計算した各文書のスコアである文書
スコアと前記回答抽出装置が前記関連文書集合の各文書
から回答を抽出する際に計算した抽出スコアの２つのス
コアに従って、回答と文書の列を順序付けるようにした
ので、質問文に対する回答の精度の向上が図れる。

【００２１】また、請求項８に記載の発明は、請求項５
乃至７のいずれかに記載の質問応答システムにおいて、
前記回答抽出装置は、前記関連文書集合の各文書から回
答を抽出する際に、固有名詞や数値表現の認識を行なう
ことを特徴とする。

【００２２】請求項８に記載の発明によれば、請求項５
乃至７のいずれかに記載の質問応答システムにおいて、
前記回答抽出装置は、前記関連文書集合の各文書から回
答を抽出する際に、固有名詞や数値表現の認識を行なう
ので、質問文に対する回答の精度の向上が図れる。

【００２３】また、請求項９に記載の発明は、文書集合
と質問文が与えられると、該質問文に対する回答と文書
の列を出力する質問応答を行うための質問応答プログラ
ムを記録したコンピュータ読み取り可能な記録媒体にお
いて、質問文を受け取る第１のステップと、入力された
質問文から検索語集合と質問種別を判定する第２のステ
ップと、前記検索語集合および質問種別に従って、前記
与えられた文書集合から関連文書集合を検索する第３の
ステップと、前記関連文書集合の各文書から回答を抽出
し、該回答と該回答を抽出した文書の列を作成する第４
のステップと、前記回答と該回答を抽出した文書の列を
前記質問文に対する応答結果として出力するステップと
をコンピュータに実行させる質問応答プログラムを記録
した記録媒体を要旨とする。

【００２４】請求項９に記載の発明によれば、文書集合
と質問文が与えられると、該質問文に対する回答と文書
の列を出力する質問応答を行うための質問応答プログラ
ムを記録したコンピュータ読み取り可能な記録媒体にお
いて、質問文を受け取る第１のステップと、入力された
質問文から検索語集合と質問種別を判定する第２のステ
ップと、前記検索語集合および質問種別に従って、前記
与えられた文書集合から関連文書集合を検索する第３の
ステップと、前記関連文書集合の各文書から回答を抽出
し、該回答と該回答を抽出した文書の列を作成する第４
のステップと、前記回答と該回答を抽出した文書の列を
前記質問文に対する応答結果として出力する第５のステ
ップとをコンピュータに実行させる質問応答プログラム
を記録媒体に記録したので、この記録媒体に記録した質
問応答プログラムをコンピュータシステムに読み込ま
せ、実行することにより、質問文に対する直接的な回答
とその回答の元となる文書を提示することにより回答の
信頼性をユーザが確認することができる。

【００２５】

【発明の実施の形態】以下、本発明の実施の形態を、図
面を参照して詳細に説明する。図１に本発明の実施の形
態に係る質問応答システムの構成を示す。本発明の実施
の形態に係る質問応答システムは、質問文に対する直接
的な回答として文書の一部を取り出すとともに、回答を
取り出した文書をユーザに出力することにより、回答の
信頼性をユーザが確認できるようにしている。

【００２６】また、固有名詞の抽出技術や、与えられた
文書集合から関連文書を検索する際における文書スコア
および関連文書集合から回答を抽出する際における抽出
スコアの両方を総合的に用いて評価することより、出力
する回答と文書の列の順序を決めることにより、質問に
対する正しい回答を回答と文書の列のより上位に並べる
ことを可能にしている。

【００２７】すなわち、本発明の実施の形態に係る質問
応答システムは、文書集合と質問文が与えられると、該
質問文に対する回答と文書の列を出力するコンピュータ
システムを使用した質問応答方法であって、入力された
質問文から検索語集合と質問種別を判定し、該検索語集
合および該質問種別に従って、前記与えられた文書集合
から関連文書集合を検索し、該関連文書集合の各文書か
ら回答を抽出し、該回答と該回答を抽出した文書の列を
前記質問文に対する応答結果として出力することを特徴
とする質問応答方法を実施するための装置である。

【００２８】図１において、本発明に係る質問応答シス
テム１０は、与えられた文書集合を格納する文書集合格
納装置１００と、質問文を受け取る入力装置１０２と、
質問文を解析し、上記質問文から検索語集合と質問種別
を判定する質問解析装置１０４と、検索語集合と質問種
別に従って文書集合格納装置１００に格納されている文
書集合から関連文書集合を検索する文書検索装置１０６
と、関連文書集合から上記質問文に対する回答を抽出
し、該回答と該回答を通出した文書の列を上記質問文に
対する応答結果として作成する回答抽出装置１０８と、
上記応答結果を出力する出力装置１１０とを有してい
る。

【００２９】上記構成からなる本実施の形態に係る質問
応答システム１０の処理内容を図２に示すフローチャー
トに基づいて説明する。まず、文書集合格納装置１００
に、与えられた文書の集合が格納される（ステップ２０
０）。入力装置１０２は、質問文が入力されると、その
質問文を質問解析装置１０４に渡す（ステップ２０
１）。質問解析装置１０４は質問文に対して形態素解析
を行い、質問文から検索語集合と質問種別を判定し、検
索語集合と質問種別を文書検索装置１０６に渡す（ステ
ップ２０２）。

【００３０】文書検索装置１０６は質問解析装置１０４
から受け取った検索語集合と質問種別に従って、文書集
合格納装置２に格納された文書集合を検索し、関連文書
集合を抽出し、該関連文書集合の各文書に対して検索語
が含まれている度合いを示す文書スコアを算出し、上記
関連文書集合を、検索語集合及び質問種別と共に回答抽
出装置１０８へ渡す（ステップ２０３）。

【００３１】回答抽出装置１０８は文書検索装置１０６
から受け取った関連文書集合中の各文書について形態素
解析を行う（ステップ２０４）。そして回答抽出装置１
０８は、形態素解析を行った各文書に対して質問種別に
従った単語を抽出対象とし、抽出すると共に（ステップ
２０５）、上記抽出対象についてその抽出対象が含まれ
る文書中における検索語との距離に基づいて抽出スコア
を算出する（ステップ２０６）。

【００３２】次いで、回答抽出装置１０８は、文書検索
装置１０６で算出した文書スコアと上記抽出スコアに従
って、上記関連文書集合中の各文書から質問文に対する
回答を抽出し、この回答と、この回答を抽出した元とな
る文書の列を取り出し、回答及び文書の列の順序付けを
行う（２０７）。そして回答抽出装置１０８は、順序付
けを行った回答及び文書を示す文書番号の列を応答結果
として出力装置１１０へ渡す。出力装置１１０は回答と
その文書番号の列を応答結果として出力する（ステップ
２０８）。

【００３３】なお、本実施の形態に係る質問応答システ
ムを構成する各装置は論理的につながっていればよく、
各装置が１台のコンピュータの上で通信しながら動く独
立したプロセスとして実装されていても良いし、ネット
ワークで接続された複数のコンピュータに分散されて実
装されていても良い。

【００３４】次に、本発明の実施の形態に係る質問応答
システムの具体的動作について説明する。以下では、例
として、質問文Ｑ１「アメリカの大統領は誰ですか？」
に対して、回答「クリントン」と記事番号「Ｄ１」を得
る例を述べる。まず、文書集合が表１に示すように、３
つの文書Ｄ１、Ｄ２、Ｄ３からなるとする。

【表１】本発明の実施の形態では、説明を容易にするため、文書
を１文だけで記述しているが、複数の文書からなる文書
でもよい。また、質問文を１つ受けて、回答とその文書
の列を返す例を述べているが、これを繰り返すことによ
り、質問と回答を繰り返すことができる。

【００３５】まず、文書集合格納装置１００に文書Ｄ
１、Ｄ２、Ｄ３を格納する。ここでは、表形式で表現し
ているが、格納の方法は文書が格納できればリストやデ
ータベースなどの他の方法であっても何でもよい。以
下、表形式でデータを表した時には同様のことが言え
る。

【００３６】入力装置１０２は、質問文を受けとり、質
問解析装置１０４へ渡す。まず、質問解析装置１０４
は、質問文の質問種別を判定する。本実施の形態では、
質問種別は人名を聞くｗｈｏ，場所を聞くｗｈｅｒｅ，
日時を聞くｗｈｅｎの３種類とする。なお、この他の物
の名前を聞くｗｈａｔや、方法を聞くｈｏｗなどの質問
種別があったとしても、同様な方法で質問種別を判定す
ることができる。

【００３７】質問種別の判定には、表２に示すような判
定表現を持つ判定表を用いる。なお、判定表現は質問の
種別を分けるために使える語であれば、他の語でもよ
い。

【表２】判定表現が質問文Ｑ１に含まれるかどうかをチェック
し、判定表現が含まれる質問種別をＱ１の質問種別ＱＴ
とする。Ｑ１には「誰」が含まれるので、Ｑ１の質問種
別はｗｈｏとなる。

【００３８】質問解析装置１０４は、質問文を形態素解
析し、単語に分けるとともに、品詞の情報を得る。形態
素解析の手法は例えば文献（長尾真編：自然言語処理、
岩波書店、１９９６）に述べられている。形態素解析
は、辞書に含まれる単語が文に現れるかどうかを調べ、
文を辞書にある単語の列に分割し、辞書に書かれている
各単語の品詞のうち、前後の単語の関係から最適な品詞
を選択することにより実現される。

【００３９】現在の例では、「アメリカの大統領は誰で
すか？」は、表３のように形態素解析されるとする。

【表３】なお、ここで品詞名は言語学や自然言語処理において利
用されるものであれば何でもよい。例えば、普通名詞を
一般名詞と表現してもよい。このうち、普通名詞、固有
名詞などの自立語を検索語集合ＫＷとする。

【００４０】上記質問文から検索語集合ＫＷは、ＫＷ＝｛アメリカ、大統領｝（１）と書ける。ここで、自立語のみを検索語集合とするの
は、説明の簡単化と検索精度の向上を図るためであるの
で、すべての単語を検索語集合にしたり、他の選択法に
よって検索語集合を選択したりしてもかまわない。

【００４１】質問解析装置１０４は検索語集合ＫＷと質
問種別ＱＴを文書検索装置１０６に渡す。文書検索装置
１０６は、検索語集合ＫＷがより多く含まれる文書を文
書集合格納装置１００に格納されている文書集合から探
す。検索語集合の含まれている数を数え、それを各文書
（文書番号で表される。）の文書スコアとする。この結
果を表４に示す。

【表４】

【００４２】文書番号Ｄ１の文書には「アメリカ」、
「大統領」の２つの検索語集合の要素が含まれるので、
文書番号Ｄ１の文書の文書スコアは２となる。また、文
書番号Ｄ２の文書スコアは、検索語集合の要素である
「大統領」しか含まないので文書スコアは１となる。さ
らに、文書番号Ｄ３の文書は、検索語集合の要素を含ま
ないので文書スコアは０である。

【００４３】文書検索装置１０６は文書スコアが０より
大きい文書を関連文書集合ＲＤとする。したがって、ＲＤ＝｛Ｄ１，Ｄ２｝（２）となる。なお、文書スコアの計算法はＩＤＦ法やＴＦＩ
ＤＦ法など、当業界において用いられる方法ならなんで
もよい。ＩＤＦ法やＴＦＩＤＦ法の計算式や検索の高速
化のためのインデックス作成法は、例えば、文献（徳永
健伸：情報検索と言語処理、東京大学出版会、１９９９
年）に述べられている。

【００４４】また、ここでは文書スコアの計算には、各
文書中に検索語集合の要素が現れるかどうかを文書中の
文字で調べたが、文書を形態素解析し、単語に分けてか
ら文書中の単語と検索語を比較してもよい。さらに、文
書全体を１まとまりとしなくても、文書の各段落を検索
の単位としたり、１００文字といったパッセージを検索
の単位としてもよい。文書検索装置１０６は関連文書集
合ＲＤを、検索語集合及び質問種別と共に、回答抽出装
置１０８に渡す。なお、関連文書集合ＲＤは文書全体を
渡しても良いし、文書の名前だけを渡してもよい。

【００４５】回答抽出装置１０８は、関連文書集合ＲＤ
中の文書を形態素解析する。文書番号Ｄ１と文書番号Ｄ
２の各文書の形態素解析結果をそれぞれ表５、表６に示
す。

【００４６】次に固有表現抽出法により、文書中の各単
語が＜人名＞、＜地名＞、＜日時＞という３種類の固有
表現のどれかに該当するかどうかを判定し、該当する場
合はその種別を単語に付与する。基本的には固有名詞の
辞書と周囲の単語により人名、地名、日時であるかを判
定する。固有表現の抽出法については、例えば特開平１
１−０６７５６２に記載されている。固有表現の判定後
の結果を表７、表８に示す。

【００４７】

【表５】

【表６】

【００４８】回答抽出装置１０８は、質問種別に従って
単語を抽出対象とする。ｗｈｏの場合は品詞・固有表現
が＜人名＞である単語を抽出対象とし、ｗｈｅｒｅの場
合は品詞・固有表現が＜場所＞である単語を抽出対象と
し、ｗｈｅｎの場合は品詞・固有表現が＜日時＞である
単語を抽出対象とする。但し、質問種別に対応する抽出
対象はこれに限るわけではない。例えば、ｗｈｅｒｅの
抽出対象に組職名を加えても良い。また、“「我輩は猫
である」”のようなカギ括弧で括られた部分を抽出対象
に加えても良い。

【００４９】

【表７】

【表８】

【００５０】本実施の形態の場合は、質問種別がｗｈｏ
であるので、文書番号Ｄ１の文書における単語「森」、
「クリントン」、文書番号Ｄ２の文書における単語「プ
ーチン」が抽出対象となる。これらの抽出対象につい
て、検索語ＫＷとの距離を使って抽出スコアを計算す
る。ここでは、抽出対象と検索語ＫＷの各要素が何単語
離れて出現するかを求めそれを距離とし、各要素につい
て求められた距離の逆数の和を抽出スコアとする。

【００５１】具体的には、単語間の距離は２つの単語の
単語番号の差の絶対値とする。文書番号Ｄ１の文書にお
ける単語「森」は単語「アメリカ」と５単語、単語「大
統領」と６単語離れているので単語「森」の抽出スコア
は１／５＋１／６＝0.37となる。また、文書番号Ｄ１の
文書「クリントン」は「アメリカ」と２単語、「大統
領」と３単語離れているので「クリントン」の抽出スコ
アは１／２＋１／３＝0.83となる。さらに、文書番号Ｄ
１の文書における単語「プーチン」は単語「大統領」と
１単語離れているので単語「プーチン」の抽出スコアは
１となる。なお、抽出スコアの計算は当業界で使われる
ものであれば、他のものでもよい。

【００５２】次に、回答抽出装置１０８は、各文書中の
抽出対象について、総合スコアを次のような総合計算式
で求める。総合スコア＝ａ×文書スコア＋ｂ×抽出スコア（３）但し、ａ、ｂはそれぞれ文書スコア、抽出スコアの重み
を表すパラメータであり様々な定め方がある。ここで
は、ａ＝１，ｂ＝１とする。なお、スコアの計算法は当
業界で用いられるものであれば他の方法でも構わない。

【００５３】例えば、ａ、ｂ、ｃ、ｄをパラメータとし
て、総合スコア＝ａ×文書スコア＋ｂ×段落スコア＋ｃ×文スコア＋ｄ ×抽出スコア（４）のように多段化してもよい。ここで、文書スコアの「文
書」は、読点で区切られた複数の文書の集合体であり、
文スコアの「文」は、読点までをひとかたまりとした文
字列の集合体である。各文書中の抽出対象についての抽
出スコア、文書スコア、総合スコアを計算した結果を表
９に示す。

【００５４】

【表９】

【００５５】さらに、回答抽出装置１０８は、抽出対象
の総合スコアの大きい順に抽出対象を回答とし、その文
書番号を出力装置１１０に渡し、結果を出力する。ここ
では、次ように出力される。１．回答＝「クリントン」、文書＝Ｄ１２．回答＝「森」、文書＝Ｄ１３．回答＝「プーチン」、文書＝Ｄ２なお、出力の形式は同じ内容を表していれば、他の形式
でもよい。このようにして、文書集合と「アメリカ大統
領は誰ですか？」という入力文が与えられると、それに
対する答えを文書集合から取り出し、回答とその回答を
含む文書の列として出力された。

【００５６】尚、図２に示す処理内容を質問応答プログ
ラムとして作成し、このプログラムをコンピュータによ
り読み取り可能な記録媒体に記録し、この記録媒体を使
用することによりコンピュータシステムに質問応答プロ
グラムを実行させることにより質問応答システムの機能
を実現するようにしてもよい。

【００５７】すなわち、文書集合と質問文が与えられる
と、該質問文に対する回答と文書の列を出力する質問応
答を行うための質問応答プログラムを記録したコンピュ
ータ読み取り可能な記録媒体において、質問文を受け取
る第１のステップと、入力された質問文から検索語集合
と質問種別を判定する第２のステップと、前記検索語集
合および質問種別に従って、前記与えられた文書集合か
ら関連文書集合を検索する第３のステップと、前記関連
文書集合の各文書から回答を抽出し、該回答と該回答を
抽出した文書の列を作成する第４のステップと、前記回
答と該回答を抽出した文書の列を前記質問文に対する応
答結果として出力する第５のステップとをコンピュータ
に実行させる質問応答プログラムを記録媒体に記録し、
この記録媒体に記録した質問応答プログラムをコンピュ
ータシステムに読み込ませ、実行することにより、質問
応答システムの機能を実現するようにしてもよい。

【００５８】なお、ここでいう「コンピュータシステ
ム」とは、ＯＳや周辺機器等のハードウェアを含むもの
とする。また、「コンピュータ読み取り可能な記録媒
体」とは、フロッピー（登録商標）ディスク、光磁気デ
ィスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可般媒体、コンピュ
ータシステムに内蔵されるハードディスク等の記憶装置
のことをいう。

【００５９】さらに「コンピュータ読み取り可能な記録
媒体」とは、インターネット等のネットワークや電話回
線等の通信回線を介してプログラムを送信する場合の通
信線のように、短時間の間、動的にプログラムを保持す
るもの（伝送媒体ないしは伝送波）、その場合のサーバ
やクライアントとなるコンピュータシステム内部の揮発
性メモリのように、一定時間プログラムを保持している
ものも含むものとする。

【００６０】また上記プログラムは、前述した機能の一
部を実現するためのものであっても良く、さらに前述し
た機能をコンピュータシステムにすでに記録されている
プログラムとの組み合わせで実現できるもの、所謂差分
ファイル（差分プログラム）であっても良い。

【００６１】以上説明したように、本発明の実施の形態
に係る質問応答方法、質問応答システム及び質問応答プ
ログラムを記録した記録媒体によれば、自然言語で表現
された質問文に対する回答を求めることが可能となる。
また、本発明の実施の形態に係る質問応答方法、質問応
答システム及び質問応答プログラムを記録した記録媒体
によれば、質問文に対する直接的な回答とその回答のも
とになる文書が求められるので、ユーザが直接回答を得
るとともに、その回答の根拠を文書でチェックできる。

【００６２】従来の情報検索技術では、文書全体の列が
提示されるため、上記実施の形態において質問文の内容
である「大統領の名前」は、ユーザが文書を読んで初め
て見つけることができたにすぎない。また、従来の情報
抽出技術は分野に依存していたため、自由な質問文に対
する答えを抽出することはできなかった。従来の質問応
答システムは、回答ととも文書を提示していなかったの
で、ユーザが回答の正しさを計ることができなかった。

【００６３】さらに、従来の質問応答システムでは、日
本語の処理に必要な単語分けを含む形態素解析を行なっ
ていなかったり、固有表現の抽出を行なっていなかった
り、抽出対象のスコアを評価する際に検索時のスコアを
利用したりしていなかったため、回答の精度が低くなっ
ていた。

【００６４】例えば、実施例において、検索スコアを無
視して、総合スコアを抽出スコアとすると、回答の列の
順序が、「プーチン」「クリントン」「森」の順になっ
てしまう。また、形態素解析や固有表現の抽出を行なわ
ないと、抽出対象の単語が決まらず、回答の精度が低く
なる。本発明の実施の形態に係る質問応答方法、質問応
答システム及び質問応答プログラムを記録した記録媒体
は、このような問題を解決し、質問文に対する回答とそ
の文書の列をユーザに提示できる効果がある。

【００６５】

【発明の効果】以上に説明したように、請求項１に記載
の発明によれば、入力された質問文から検索語集合と質
問種別を判定し、該検索語集合および該質問種別に従っ
て、前記与えられた文書集合から関連文書集合を検索
し、該関連文書集合の各文書から回答を抽出し、該回答
と該回答を抽出した文書の列を前記質問文に対する応答
結果として出力するようにしたので、質問文に対する直
接的な回答とその回答の元となる文書を提示することに
より回答の信頼性をユーザが確認することができる。

【００６６】請求項２に記載の発明によれば、請求項１
に記載の質問応答方法において、前記関連文書集合の要
素は文書全体ではなく、文書の一部として前記文書集合
から前記関連文書集合を検索するようにしたので、直接
的な回答が得られる。

【００６７】請求項３に記載の発明によれば、請求項１
または２のいずれかに記載の質問応答方法において、前
記関連文書集合を検索する際に計算した各文書のスコア
である文書スコアと前記関連文書集合の各文書から回答
を抽出する際に計算した抽出スコアの２つのスコアに従
って、回答と文書の列を順序付けるようにしたので、質
問文に対する回答の精度の向上が図れる。

【００６８】請求項４に記載の発明によれば、請求項１
乃至３のいずれかに記載の質問応答方法において、前記
関連文書集の各文書から回答を抽出する際に、固有名詞
や数値表現の認識を行なうようにしたので、質問文に対
する精度の向上が図れる。

【００６９】請求項５に記載の発明によれば、文書集合
を格納する文書集合格納装置と、質問文を受けとる入力
装置と、該入力装置から得られた前記質問文から検索語
集合と質問種別を判定する質問解析装置と、前記検索語
集合と質問種別に従って、前記文書集合格納装置に格納
された文書集合から関連文書集合を検索する文書検索装
置と、関連文書集合中の各文書から質問文に対する回答
を抽出し、該回答と該回答を抽出した文書の列を前記質
問文に対する応答結果として作成する回答抽出装置と、
前記応答結果を出力する出力装置とを有するので、質問
文に対する直接的な回答とその回答の元となる文書を提
示することにより回答の信頼性をユーザが確認すること
ができる。

【００７０】請求項６に記載の発明によれば、請求項５
に記載の質問応答システムにおいて、前記文書検索装置
は、関連文書集合の要素を文書全体ではなく、文書の一
部として前記文書集合から前記関連文書集合を検索する
ので、直接的な回答が得られる。

【００７１】請求項７に記載の発明によれば、請求項５
または６のいずれかに記載の質問応答システムにおい
て、前記回答抽出装置は、前記文書検索装置が関連文書
集合を検索する際に計算した各文書のスコアである文書
スコアと前記回答抽出装置が前記関連文書集合の各文書
から回答を抽出する際に計算した抽出スコアの２つのス
コアに従って、回答と文書の列を順序付けるようにした
ので、質問文に対する回答の精度の向上が図れる。

【００７２】請求項８に記載の発明によれば、請求項５
乃至７のいずれかに記載の質問応答システムにおいて、
前記回答抽出装置は、前記関連文書集合の各文書から回
答を抽出する際に、固有名詞や数値表現の認識を行なう
ので、質問文に対する回答の精度の向上が図れる。請求
項８に記載の発明によれば、請求項５乃至７のいずれか
に記載の質問応答システムにおいて、前記回答抽出装置
は、前記関連文書集合の各文書から回答を抽出する際
に、固有名詞や数値表現の認識を行なうので、質問文に
対する回答の精度の向上が図れる。

【００７３】請求項９に記載の発明によれば、文書集合
と質問文が与えられると、該質問文に対する回答と文書
の列を出力する質問応答を行うための質問応答プログラ
ムを記録したコンピュータ読み取り可能な記録媒体にお
いて、質問文を受け取る第１のステップと、入力された
質問文から検索語集合と質問種別を判定する第２のステ
ップと、前記検索語集合および質問種別に従って、前記
与えられた文書集合から関連文書集合を検索する第３の
ステップと、前記関連文書集合の各文書から回答を抽出
し、該回答と該回答を抽出した文書の列を作成する第４
のステップと、前記回答と該回答を抽出した文書の列を
前記質問文に対する応答結果として出力する第５のステ
ップとをコンピュータに実行させる質問応答プログラム
を記録媒体に記録したので、この記録媒体に記録した質
問応答プログラムをコンピュータシステムに読み込ま
せ、実行することにより、質問文に対する直接的な回答
とその回答の元となる文書を提示することにより回答の
信頼性をユーザが確認することができる。

【図面の簡単な説明】

【図１】本発明の実施の形態に係る質問応答システム
の構成を示すブロック図。

【図２】図１に示す質問応答システムの処理内容を示
すフローチャート。

【符号の説明】

１０質問応答システム１００文書集合格納装置１０２入力装置１０４質問解析装置１０６文書検索装置１０８回答抽出装置１１０出力装置

───────────────────────────────────────────────────── フロントページの続き (72)発明者平博順東京都千代田区大手町二丁目３番１号日本電信電話株式会社内 (72)発明者賀沢秀人東京都千代田区大手町二丁目３番１号日本電信電話株式会社内 (72)発明者廣田啓一東京都千代田区大手町二丁目３番１号日本電信電話株式会社内 (72)発明者中島浩之東京都千代田区大手町二丁目３番１号日本電信電話株式会社内 (72)発明者平尾努東京都千代田区大手町二丁目３番１号日本電信電話株式会社内 (72)発明者加藤恒昭東京都千代田区大手町二丁目３番１号日本電信電話株式会社内Ｆターム(参考） 5B075 ND03 NK32 PP24 PQ02 PQ74 5B091 AA11 AB06 CA02

Claims

【特許請求の範囲】

【請求項１】文書集合と質問文が与えられると、該質
問文に対する回答と文書の列を出力するコンピュータシ
ステムを使用した質問応答方法であって、入力された質問文から検索語集合と質問種別を判定し、
該検索語集合および該質問種別に従って、前記与えられ
た文書集合から関連文書集合を検索し、該関連文書集合
の各文書から回答を抽出し、該回答と該回答を抽出した
文書の列を前記質問文に対する応答結果として出力する
ことを特徴とする質問応答方法。
【請求項２】前記関連文書集合の要素は文書全体では
なく、文書の一部として前記文書集合から前記関連文書
集合を検索することを特徴とする請求項１に記載の質問
応答方法。
【請求項３】前記関連文書集合を検索する際に計算し
た各文書のスコアである文書スコアと前記関連文書集合
の各文書から回答を抽出する際に計算した抽出スコアの
２つのスコアに従って、回答と文書の列を順序付けるこ
とを特徴とする請求項１または２のいずれかに記載の質
問応答方法。
【請求項４】前記関連文書集の各文書から回答を抽出
する際に、固有名詞や数値表現の認識を行なうことを特
徴とする請求項１乃至３のいずれかに記載の質問応答方
法。
【請求項５】文書集合と質問文が与えられると、該質
問文に対する回答と文書の列を出力する質問応答システ
ムであって、文書集合を格納する文書集合格納装置と、質問文を受けとる入力装置と、該入力装置から得られた前記質問文から検索語集合と質
問種別を判定する質問解析装置と、前記検索語集合と質問種別に従って、前記文書集合格納
装置に格納された文書集合から関連文書集合を検索する
文書検索装置と、関連文書集合中の各文書から質問文に対する回答を抽出
し、該回答と該回答を抽出した文書の列を前記質問文に
対する応答結果として作成する回答抽出装置と、前記応答結果を出力する出力装置と、を有することを特徴とする質問応答システム。
【請求項６】前記文書検索装置は、関連文書集合の要
素を文書全体ではなく、文書の一部として前記文書集合
から前記関連文書集合を検索することを特徴とする請求
項５に記載の質問応答システム。
【請求項７】前記回答抽出装置は、前記文書検索装置
が関連文書集合を検索する際に計算した各文書のスコア
である文書スコアと前記回答抽出装置が前記関連文書集
合の各文書から回答を抽出する際に計算した抽出スコア
の２つのスコアに従って、回答と文書の列を順序付ける
ことを特徴とする請求項５または６のいずれかに記載の
質問応答システム。
【請求項８】前記回答抽出装置は、前記関連文書集合
の各文書から回答を抽出する際に、固有名詞や数値表現
の認識を行なうことを特徴とする請求項５乃至７のいず
れかに記載の質問応答システム。
【請求項９】文書集合と質問文が与えられると、該質
問文に対する回答と文書の列を出力する質問応答を行う
ための質問応答プログラムを記録したコンピュータ読み
取り可能な記録媒体において、質問文を受け取る第１のステップと、入力された質問文から検索語集合と質問種別を判定する
第２のステップと、前記検索語集合および質問種別に従って、前記与えられ
た文書集合から関連文書集合を検索する第３のステップ
と、前記関連文書集合の各文書から回答を抽出し、該回答と
該回答を抽出した文書の列を作成する第４のステップ
と、前記回答と該回答を抽出した文書の列を前記質問文に対
する応答結果として出力する第５のステップと、をコンピュータに実行させる質問応答プログラムを記録
した記録媒体。