JP2020095306A - 試験問題解析システム、方法、およびプログラム - Google Patents

Abstract

【課題】試験問題を合格に向けた勉強への利用が可能なように解析する技術を提供する。【解決手段】合否のある試験の問題を解析する試験問題解析システムは、解析対象となる対象問題を解くのに要する前提知識を判別する前提知識判別部と、前記対象問題の文の長さである問題文長を算出する問題文長算出部と、前記対象問題に対する回答形式を特定する回答形式特定部と、前記前提知識と前記問題文長と前記回答形式とに基づいて、前記試験に合格するために前記対象問題を正解することが求められる度合いである合格影響度を評価する影響度評価部と、を有する。【選択図】図１

Description

本発明は、試験問題を解析する技術に関する。

国家資格等の合否のある試験では、他の受験生が正解するレベルの問題を確実に正解することができれば試験に合格できると言われ、そのレベルの問題を確実に正解する力を身に着けるのが合格への近道と言われる。過去に行われた試験の問題（過去問）のレベルを的確に把握することができれば、受験生自身の勉強や予備校による受験生への指導に有益である。
特許文献１では、被験者から試験結果を取得し、その試験結果に基づくコンピュータ処理により問題の難易度を判定する手法が提案されている。

特開２００２−３５１３０４号公報

しかしながら、特許文献１の手法は、被験者が増加していくことを前提とし、被験者の試験結果に基づいて動的に問題の難易度を判定するものである。そのため被験者の現在の能力を把握するにはよいが、試験に合格するためにどの問題は解ける必要があるか、どの問題が解けなくても合否に影響は少ないかといったことが分かり難く、合格に向けた勉強に利用する情報として十分に有益とは言えなかった。そのため現状では予備校講師などは、知識と経験に基づいて感覚的に過去問のレベルを判定し、その結果に基づいて受験生へ指導を行っているのが現状である。
本開示の１つの目的は、試験問題を合格に向けた勉強への利用が可能なように解析する技術を提供することである。

本開示による１つの態様に従う試験問題解析システムは、合否のある試験の問題を解析する試験問題解析システムであって、解析対象となる対象問題を解くのに要する前提知識を判別する前提知識判別部と、前記対象問題の文の長さである問題文長を算出する問題文長算出部と、前記対象問題に対する回答形式を特定する回答形式特定部と、前記前提知識と前記問題文長と前記回答形式とに基づいて、前記試験に合格するために前記対象問題を正解することが求められる度合いである合格影響度を評価する影響度評価部と、を有する。

本開示の１つの態様によれば、試験問題を合格に向けた勉強への利用が可能なように解析する技術を提供することである。

試験問題解析システムの構成を示すブロック図である。 試験問題解析システムのハードウェア構成を示す図である。 正誤問題の一例を示す図である。 択一式問題の一例を示す図である。 組合せ問題の一例を示す図である。 選択式問題の一例を示す図である。 計算問題の一例を示す図である。 個数問題の一例を示す図である。 記述式問題の一例を示す図である。 試験問題解析システムが実行する全体処理の一例を示すフローチャートである。 試験問題情報の一例を示す図である。 前提知識判別処理の一例を示すフローチャートである。 知識分野情報の一例を示す図である。 回答形式特定処理の一例を示すフローチャートである。 影響度評価処理の一例を示すフローチャートである。 回答形式別評価処理のフローチャートである。 合格影響度判定情報の一例を示す図である。 択一式問題総合評価処理の判定論理情報の一例を示す図である。 択一式問題総合評価処理の一例を示すフローチャートである。

以下、本発明の実施形態について図面を参照して説明する。
本実施形態では、過去問などの試験問題を分析するコンピュータシステムを例示する。

試験には複数の試験問題が含まれている。受験者は試験問題に正解することにより得た得点の合計値がボーダーラインを越えたら合格でき、合計値がボーダーラインを下回ったら不合格となる。試験問題によって、試験に合格するためにその問題は解ける必要があるか、解けなくても合否に影響は少ないかが異なることが経験的に知られている。

試験問題の正解を導き出せるか否かを左右する要因として、正解を導き出すために必要な知識自体の習得の難易度、問題文の長さや複雑さ、正解を導きやすさ、など様々なものがある。各試験問題の正解率は、それらの要因が複雑に影響した結果であると想定される。各試験問題の正解率は、合格に向けた勉強における指標となりうると考えられる。しかしながら、資格試験の本試験などでは一般に、試験に含まれている各問題の正解率は公表されない。

そこで、本実施形態による試験問題解析システムは、合否のある試験の各試験問題を対象として解析を行うことにより、試験に合格するために当該試験問題を正解することが求められる度合いである合格影響度を評価する。

図１は、試験問題解析システムの構成を示すブロック図である。図１を参照すると、試験問題解析システム１０は、記憶部１１、前提知識判別部１２、問題文長算出部１３、回答形式特定部１４、影響度評価部１５、および所要時間算出部１６を備えている。

記憶部１１は、試験に含まれる複数の試験問題の問題文テキストを含む試験データを記憶している。複数の試験問題の全部または一部が解析対象（対象問題）となりうる。
前提知識判別部１２は、対象問題を解くのに要する前提知識を判別する。
問題文長算出部１３は、対象問題の文の長さである問題文長を算出する。
回答形式特定部１４は、対象問題に対する回答形式を特定する。

影響度評価部１５は、前提知識と問題文長と回答形式とに基づいて、試験に合格するために対象問題を正解することが求められる度合いを示す指標である合格影響度を評価する。例えば、合格影響度が小さいということは、その試験問題を正解できないことが合否を分けることにはなり難いことを意味する。一般に試験問題の難易度が高い方が影響度は小さくなる傾向となる。例えば、非常に難しい問題は、合格者を含むほとんどの受験者が正解できないため、合否に影響が殆どないということが起こりうる。

以上のように、試験問題の前提知識と問題文長と回答形式とに基づいてその試験問題の合否への影響の度合いを評価するので、試験に含まれる個々の試験問題が試験の合否に対してどの程度影響するかという曖昧になりがちな事柄を客観的に評価可能にすることができ、合格に向けた試験問題の勉強への利用が可能なように解析する技術を提供する。

なお、合格影響度を算出するのに対象問題を正解するのに要する所要時間を考慮してもよい。本実施形態の所要時間算出部１６はその場合のためにある。所要時間算出部１６は、対象問題を正解するのに要する所要時間を算出する。その場合、影響度評価部１５は、前提知識と問題文長と回答形式と所要時間とに基づいて対象問題の合格影響度を評価すればよい。前提知識、問題文長、および回答形式に加え、所要時間を考慮して合格影響度を決定するので、制限時間内に問題を解く形式の試験において、対象問題の合格影響度を所要時間の面の影響も考慮して客観的に評価することができる。

図２は、試験問題解析システムのハードウェア構成を示す図である。本実施形態では、試験問題解析システム１０は、ハードウェアとして、プロセッサ２１、メインメモリ２２、記憶装置２３、入力装置２４、および表示装置２５を有し、それらがバス２６に接続されている。記憶装置２３は、書込みおよび読み出しが可能にデータを記憶するものであって、この記憶装置２３によって、図１に示した記憶部１１が実現される。プロセッサ２１は、記憶装置２３に記憶された試験データをメインメモリ２２に読み出し、メインメモリ２２を利用してソフトウェアプログラムの処理を実行するプロセッサである。プロセッサ２１によって、図１に示した前提知識判別部１２、問題文長算出部１３、回答形式特定部１４、影響度評価部１５、および所要時間算出部１６が実現される。入力装置２４は、キーボードやマウスなどオペレータによる操作入力による情報を受け付ける装置であり、入力された情報はプロセッサ２１にてソフトウェア処理に利用される。例えば、試験データは入力装置２４を介して記憶装置２３に入力される。表示装置２５は、プロセッサ２１によるソフトウェア処理に伴って画像やテキストの情報をディスプレイ画面に表示する装置である。
以下、試験問題解析システム１０が実行する具体的な処理について説明する。

本実施形態にて対象とされる試験には様々な回答形式の試験問題が含まれている。代表的な回答形式として、正誤問題、択一式問題、組合せ問題、選択式問題、計算問題、個数問題、記述式問題がある。同じ分野の知識に関する問題であっても回答形式により正解の導きやすさが変わる可能性がある。回答形式により試験問題の正解の導き出しやすさが変わるので、回答形式は試験問題の合格影響度を定める要因となりうる。

試験問題の回答形式により試験問題の問題文の形式もある程度定まっている。したがって、回答形式特定部１４は、対象問題の問題文テキストを解析し、回答形式毎の所定の条件に該当するか否か判定することにより、対象問題がどの回答形式のものであるかを判別することができる。
以下、各回答形式の試験問題の例を示す。
図３は、正誤問題の一例を示す図である。

正誤問題は、ある事項が正しいあるいはそれに準ずるものであるか、誤っているあるいはそれに準ずるものであるかを答えさせる二者択一の問題である。図３には、一例として、与えられた文章が正しいあるいは適切なものであるか、その文章が誤っているあるいは不適切なものであるかを答えさせる正誤問題が示されている。正誤問題は、回答が二者択一であり、問題文に、「正しい」という語句あるいはそれに準ずる所定の語句、および／または、「誤っている」あるいはそれに準ずる所定の語句が含まれているという特徴がある。図３に示した正誤問題における「適切な」は「正しい」に準ずる語句の例である。また、「不適切な」は「誤っている」の準ずる語句の例である。
図４は、択一式問題の一例を示す図である。

択一式問題は、所定個の文章（肢文）を選択肢として有し、その選択肢の中から１つの正解であるもの（正解肢）を選択させる問題である。選択肢の個数（肢数）としては、試験によって、例えば、四肢、五肢、六肢などがある。図４には、一例として、５個の選択肢の文章（肢文）のうちいずれが正しいかを答えさせる択一式問題が示されている。正しいものが正解肢となる。他の例としては、複数の肢文の中から誤っている１つの肢文を答えさせる択一式問題もある。その場合には、誤っているものが正解肢となる。択一式問題は、問題文に複数の肢文を含み、その肢文自体が回答の選択肢となっているという特徴がある。

また法律に関連する試験などの択一式問題の選択肢には、知識問題選択肢、事例問題選択肢、および判例問題選択肢がある。事例問題選択肢は、具体的な事例について問う選択肢である。事例問題選択肢は、事例問題に登場する所定の主体を示す単語（事例主体用語）が問題文に含まれているという特徴がある。法律に関する試験に登場する典型的な事例主体用語として、甲、乙、丙、丁、Ａ社、Ｂ社、Ｃ社、Ｄ社などがある。判例問題選択肢は、特定の判例に関する理解について問う選択肢である。判例問題選択肢は、特定の判例に特有の語句あるいは語句の組合せが問題文に含まれているという特徴がある。知識問題選択肢は、特定の事項に関する知識を問う選択肢である。判例問題選択肢にも事例問題選択肢にも該当しない問題は知識問題選択肢と推定することができる。
図５は、組合せ問題の一例を示す図である。

組合せ問題は、複数個の肢文についての複数の組合せを選択肢として有し、その選択肢の中から、問題文で与えられた条件に該当する肢文の組合せを選択させる問題である。ここでいう組合せには、０個の場合および１個の場合も含まれる。図５には、一例として、ア、イ、ウという３つの事項について１、２、３、４という４つの組合せを選択肢とし、その選択肢の中から、誤っているものの組合せを選択させる組合せ問題が示されている。組合せ問題は、問題文に複数の肢文を有し選択肢の各々が０個以上の肢文の組合せとなっているという特徴がある。
図６は、選択式問題の一例を示す図である。

選択式問題は、問題文に複数の空欄があり問題文とは別にそれらの空欄に当てはまる語句を含む複数の語句が選択肢として与えられ、各空欄に当てはまる語句を選択肢の中から選択させる問題である。図６には、一例として、問題文にア、イ、ウ、エという４つの空欄があり、それら空欄に当てはまる語句を、１〜２０という２０個の選択肢から選択させる問題が示されている。選択式問題は、複数の空欄を含んだ問題文と空欄に当てはまる語句の候補を選択肢として羅列した部分とあるという特徴がある。
図７は、計算問題の一例を示す図である。

計算問題は、問題文の条件に従って数値計算を行い、正解を導く問題である。図７には、一例として、１〜４という４つの金額が選択肢として与えられており、問題文にて要求された金額を計算し、計算結果の金額と一致する選択肢を選択させる問題が示されている。計算問題は、回答の選択肢の各々に数値が含まれ、問題文にも計算に用いる数値が含まれているという特徴がある。
図８は、個数問題の一例を示す図である。

個数問題は、問題文に複数個の肢文を有し、複数個の肢文の個数を選択肢として有し、その選択肢の中から、問題文で与えられた条件に該当する肢文の個数を選択させる問題である。ここでいう個数には０個も含まれる。図８には、一例として、問題文にア、イ、ウという３つの肢文を有し、１（１つ）、２（２つ）、３（３つ）、４（なし）という４つの選択肢を有し、３つの肢文のうち誤っているものがいくつあるかを、選択肢の中から選択させる個数問題が示されている。個数問題は、複数の選択肢の各々が複数の肢文に対応する記号の組合せとなっているという特徴がある。ここでいう記号は各肢文を識別するものであればなんでも良く、例えば、数字、アルファベット、片仮名、平仮名、漢字、図形などでよい。
図９は、記述式問題の一例を示す図である。

記述式問題は、問題文に基づいて所定の事項について記述させる問題である。図９には、一例として、問題文にて要求される事項について、所定文字数程度の文章で記述させる記述式問題が示されている。記述式問題は、文章で記述することを要求する所定の語句が含まれているという特徴がある。図８に示した問題文における「記述しなさい」は、文章で記述することを要求する所定の語句の例である。他の例として、「記述せよ」「論述しなさい」「説明しなさい」などがある。
図１０は、試験問題解析システムが実行する全体処理の一例を示すフローチャートである。

まずステップ１０１にて前提知識判別部１２が前提知識判別処理を実行する。前提知識判別処理は、対象問題を解くのに要する前提知識の知識分野を判別する処理である。この処理により、対象問題がどの知識分野を前提とした問題か、すなわち、どの知識分野の知識の有無を問う問題かが特定される。前提知識判別処理の詳細は図１１を参照して後述する。

次にステップ１０２にて問題文長算出部１３が問題文長算出処理を実行する。問題文長算出処理は、対象問題の問題文長を判別する処理である。問題文長は問題文の長さである。問題文長を表す単位は特に限定されないが、例えば、文字数、単語数、行数などで表現されうる。文字数で表現する場合、問題文長算出部１３は、問題文に含まれる文字の個数をカウントすればよい。

図１１は、試験問題情報の一例を示す図である。試験問題情報４０には、試験問題の問題番号４１に対応付けて、該当知識分野４２、問題文長４３、回答形式４４、所要時間４５４、および合格影響度４６が登録される。本ステップ１０２では、試験問題情報４０に、対象問題の問題番号４１に対応付けて問題文長４３が登録される。

次にステップ１０３にて回答形式特定部１４が回答形式特定処理を実行する。回答形式特定処理は、対象問題の回答形式を特定する処理である。回答形式には、上述した、正誤問題、択一式問題、組合せ問題、選択式問題、計算問題、個数問題、記述式問題があり、択一式問題には更に判例問題、事例問題、知識問題がある。回答形式特定処理の詳細は図１４を参照して後述する。この処理により対象問題の回答形式が特定される。

次にステップ１０４にて影響度評価部１５が影響度評価処理を実行する。影響度評価処理は、対象問題の合格影響度を評価する処理である。例えば合格影響度を決定すればよい。合格影響度の表現は特に限定されないが、例えば、数値によるスコア、ランク付けなどにより表現することができる。合格影響度は、対象問題の前提知識の知識分野、問題文長、回答形式に基づいて、あるいは更に所要時間に基づいて決定することができる。影響度評価処理の詳細は図１５を参照して後述する。
図１２は、前提知識判別処理の一例を示すフローチャートである。
前提知識判別部１２は、記憶部１１から対象問題テキストを取得して解析することにより、対象問題に含まれている分野関連用語を抽出する。

分野関連用語とは、各知識分野の試験問題に登場する用語である。前提知識判別部１２は、各知識分野の分野関連用語を予め定めた知識分野情報を管理している。図１３は、知識分野情報の一例を示す図である。知識分野情報３０は、知識分野３１に対応付けて、用語数３２と、分野関連用語３３と、知識難易度３４とが登録されたテーブルである。用語数３２は、対応する知識分野に関連する用語の個数を示す。分野関連用語３３は、対応する知識分野に関連する用語を示す。知識難易度３４は、対応する知識分野の知識を習得の難易度を示す。ここでは一例として知識難易度が１０段階で示されているものとする。例えば、知識分野「１」には「ａｂｂ」、「ａｃｃ」、「ａｄｄ」、「ａｅｅ」という４個の分野関連用語３３が設定されている。知識分野「１」の知識難易度は「４」である。同様に、知識分野「２」には「ｂｃｃ」、「ｂｄｄ」、「ｂｅｅ」、「ｂｆｆ」、「ｂｇｇ」、「ｂｈｈ」、「ｂｉｉ」という７個の分野関連用語３３が設定されている。知識分野「２」の知識難易度は「７」である。

具体的には、前提知識判別部１２は、対象問題に登場する単語と知識分野情報３０にて各知識分野に対応づけられた分野関連用語とを照合し、対象問題に登場する各知識分野の分や関連用語を抽出する。

次に、前提知識判別部１２は、ステップ２０１の照合結果に基づいて、当該試験問題が各知識分野の問題である可能性がどの程度であるかについての指標として分野スコアを算出する（ステップ２０２）。一例として、知識分野Ｘの分野スコアは式（１）により算出される。
知識分野Ｘの分野スコアＳ_Ｘ＝（ＳＴ／Ｎ_Ｘ）×Ｎ_ｍ ・・・（１）

ここでＳＴは一定値であり、全知識分野に共通する値が用いられる。Ｎｘは知識分野Ｘに設定されている全体の分野関連用語の個数すなわち用語数３２である。Ｎｍは、対象問題に含まれている知識分野Ｘの分野関連用語の個数である。

各知識分野間でトータルのスコアが一定となるように、一定値ＳＴを当該知識分野Ｘの用語数Ｎｘで割った値を個々の分野関連用語３３のスコアとして各分野関連用語３３に均等に分配し、対象問題に含まれている分野関連用語３３のスコアを積算した値が当該対象問題の当該知識分野Ｘに対する分野スコアとなる。例えば、対象問題に知識分野Ａに関連する「ａｂｂ」および「ａｃｃ」という２つの分野関連用語３３が含まれていた場合、当該対象問題の知識分野「１」に対する分野スコアＳ_１は、Ｓ_１＝（ＳＴ／４）×２＝ＳＴ／２となる。

次に、前提知識判別部１２は、ステップ２０２で算出した各知識分野の分野スコアを基に、当該対象問題が該当する知識分野（該当知識分野）を特定する（ステップ２０３）。例えば、分野スコアが所定の閾値を越えている知識分野を、当該対象問題の該当知識分野としてもよい。当該対象問題の該当知識分野は複数であってもよい。

次に、前提知識判別部１２は、ステップ２０３で特定した対象問題の該当知識分野を試験問題情報４０に登録する。本ステップ２０３では、図１１に例示した試験問題情報４０に、対象問題の問題番号４１に対応付けて該当知識分野４２が登録される。
図１４は、回答形式特定処理の一例を示すフローチャートである。

まずステップ３０１にて、回答形式特定部１４は、対象問題が正誤問題であるか否か判定する。図３に例示した正誤問題には、回答が二者択一であり、問題文に、「正しい」という語句あるいはそれに準ずる所定の語句、および／または、「誤っている」あるいはそれに準ずる所定の語句が含まれているという特徴がある。回答形式特定部１４は対象問題の問題文テキストを解析し、対象問題の問題文テキストに正誤問題の特徴が含まれているか否か判定する。問題文テキストに正誤問題の特徴が含まれていれば、対象問題は正誤問題であると判断できる。対象問題が正誤問題であれば回答形式特定部１４はステップ３０９に進んで、試験問題情報４０に、対象問題の問題番号４１に対応する回答形式４４に「正誤問題」を登録する。

ステップ３０１にて対象問題が正誤問題でなければ、ステップ３０２にて、回答形式特定部１４は、対象問題が択一式問題であるか否か判定する。図４に示した択一式問題には、問題文に複数の肢文を含み、その肢文自体が回答の選択肢となっているという特徴がある。回答形式特定部１４は、対象問題の問題文テキストに択一式問題の特徴が含まれているか否か判定する。問題文テキストに択一式問題の特徴が含まれていれば、対象問題は択一式問題であると判断できる。対象問題が択一式問題であれば回答形式特定部１４はステップ３０３に進む。

ステップ３０３では、回答形式特定部１４は、択一式問題である対象問題の各選択肢が判例問題選択肢、事例問題選択肢、知識問題選択肢のいずれであるか判定する。判定問題選択肢には、特定の判例に特有の語句あるいは語句の組合せが問題文に含まれているという特徴がある。事例問題は、事例主体用語が問題文に含まれているという特徴がある。回答形式特定部１４は、問題文テキストに判例問題の特徴が含まれていれば対象問題は判例問題であると判断し、問題文テキストに事例問題の特徴が含まれていれば対象問題は事例問題であると判断し、問題文テキストに判例問題の特徴も事例問題の特徴も含まれていなければ対象問題は知識問題であると判断する。その後、回答形式特定部１４は、ステップ３０９に進んで、試験問題情報４０に、対象問題の問題番号４１に対応する回答形式４４に「択一式問題」を登録する。また、回答形式特定部１４は、択一式問題の各選択肢が、判例問題選択肢であるか、事例問題選択肢であるか、知識問題選択肢であるかを記録する。

ステップ３０２にて対象問題が択一式問題でなければ、ステップ３０４にて、回答形式特定部１４は、対象問題が組合せ問題であるか否か判定する。図５に例示した組合せ問題には、問題文に複数の肢文を有し選択肢の各々が０個以上の肢文の組合せとなっているという特徴がある。回答形式特定部１４は、対象問題の問題文テキストに組合せ問題の特徴が含まれているか否か判定する。問題文テキストに組合せ問題の特徴が含まれていれば、対象問題は組合せ問題であると判断できる。対象問題が組合せ問題であれば回答形式特定部１４はステップ３０９に進んで、試験問題情報４０に、対象問題の問題番号４１に対応する回答形式４４に「組合せ問題」を登録する。

ステップ３０４にて対象問題が組合せ問題でなければ、ステップ３０５にて、回答形式特定部１４は、対象問題が選択式問題であるか否か判定する。図６に例示した選択式問題には、複数の空欄を含んだ問題文と空欄に当てはまる語句の候補を選択肢として羅列した部分とあるという特徴がある。回答形式特定部１４は、対象問題の問題文テキストに選択式問題の特徴が含まれているか否か判定する。問題文テキストに選択式問題の特徴が含まれていれば、対象問題は選択式問題であると判断できる。対象問題が選択式問題であれば回答形式特定部１４はステップ３０９に進んで、試験問題情報４０に、対象問題の問題番号４１に対応する回答形式４４に「選択式問題」を登録する。

ステップ３０５にて対象問題が選択式問題でなければ、ステップ３０６にて、回答形式特定部１４は、対象問題が計算問題であるか否か判定する。図７に例示した計算問題には、回答の選択肢の各々に数値が含まれ、問題文にも計算に用いる数値が含まれているという特徴がある。回答形式特定部１４は、対象問題の問題文テキストに計算問題の特徴が含まれているか否か判定する。問題文テキストに計算問題の特徴が含まれていれば、対象問題は計算問題であると判断できる。対象問題が計算問題であれば回答形式特定部１４はステップ３０９に進んで、試験問題情報４０に、対象問題の問題番号４１に対応する回答形式４４に「計算問題」を登録する。

ステップ３０６にて対象問題が計算問題でなければ、ステップ３０７にて、回答形式特定部１４は、対象問題が個数問題であるか否か判定する。図８に例示した個数問題には、複数の選択肢の各々が複数の肢文に対応する記号の組合せとなっているという特徴がある。回答形式特定部１４は、対象問題の問題文テキストに個数問題の特徴が含まれているか否か判定する。問題文テキストに個数問題の特徴が含まれていれば、対象問題は個数問題であると判断できる。対象問題が個数問題であれば回答形式特定部１４はステップ３０９に進んで、試験問題情報４０に、対象問題の問題番号４１に対応する回答形式４４に「個数問題」を登録する。

ステップ３０７にて対象問題が個数問題でなければ、ステップ３０８にて、回答形式特定部１４は、対象問題が記述式問題であるか否か判定する。図９に例示した記述問題には、文章で記述することを要求する所定の語句が含まれているという特徴がある。回答形式特定部１４は、対象問題の問題文テキストに記述式問題の特徴が含まれているか否か判定する。問題文テキストに記述式問題の特徴が含まれていれば、対象問題は記述式問題であると判断できる。対象問題が記述式問題であれば回答形式特定部１４はステップ３０９に進んで、試験問題情報４０に、対象問題の問題番号４１に対応する回答形式４４に「記述式問題」を登録する。
ステップ３０８にて対象問題が記述式問題でなければ、回答形式特定部１４は、対象問題の回答形式がいずれにも該当しなかった旨のエラーを出力する。
図１５は、影響度評価処理の一例を示すフローチャートである。

本実施形態では、合格影響度には、試験に合格するために対象問題を正解することが求められる度合いが高い方からレベルＡ、Ｂ、Ｃ、Ｄという４段階がある。レベルＤは、正解しなくても合格が可能と想定される問題である。レベルＣは、正解の確率が１／２近傍と想定される問題である。レベルＢは、合格するには正解すべきと想定される難問である。レベルＡは、合格するには正解すべきと想定される易問である。影響度評価部１５は、対象試験がどのレベルに該当するか決定する。

このように、試験問題を、正解しなくても合格が可能と想定される問題、正解の確率が１／２近傍と想定される問題、合格するには正解すべきと想定される難問、合格するには正解すべきと想定される易問という４つのレベルに分類できるので、合格に向けた勉強への利用に有益な情報を提供することができる。

資格試験などの試験において、超難問や奇問などと言われる、合格者を含めてほとんど全ての受験者が解けないような問題が出題されることがある。そのような問題を他の問題と同様に扱って勉強するのは合格に向けた勉強としては効果的でない場合がある。レベルＤは正解しなくても合格が可能な試験対策の勉強における優先度の低い問題である。それ以外のレベルＡ〜Ｃは合格するには正解すべき勉強の必要性の高い問題である。勉強の必要性の高い問題に関する勉強において、３段階に分けたレベルが受験者の学力に合わせた勉強や受験指導に有益な情報となる。

正解できなくても合格が可能で勉強の優先度の低いレベルＤを除いた３段階のレベル分けというのは、勉強を段階的に進める上で有効な段階数の一例である。レベルＡ〜Ｃの３段階のレベルは段階的に勉強を進める上で有益な情報となる。

図１５を参照すると、まずステップ４０１にて、影響度評価部１５は、対象問題の出題頻度を評価する。対象問題の前提知識に対応する知識分野から試験問題が出題されていない期間が所定の期間閾値を越えていれば、対象問題をレベルＤと決定する。一般に多くの受験者は長期にわたり出題されていない知識分野を勉強の対象から除いたり、優先度を下げることが多い。そのため長期にわたり出題されていない知識分野の問題については、多くの受験者は、その前提知識を知らないため正解できないことが想定される。そのような知識分野からの試験問題は合否への影響が小さいと推定できる。

次にステップ４０２にて、影響度評価部１５は、対象問題の該当知識分野の知識難易度を評価する。対象問題の該当知識分野は、図１１に例示した試験問題情報４０を参照することにより知得することができる。対象問題の該当知識分野は１つとは限らず複数である場合もある。該当知識分野の知識難易度は、図１３に例示した知識分野情報３０を参照することにより、知得することができる。図１３に示すように、知識分野３１のそれぞれについて、当該知識分野３１の知識の習得の難易度を示す知識難易度３４が予め設定されている。一例として、各知識分野の知識難易度は予め講師などが設定しておくことにしてもよい。あるいは、教材における当該知識分野の分量に基づいて知識難易度を自動設定してもよい。例えばテキストのページ数が多い知識分野は知識難易度が高いとしてもよい。あるいはｅラーニングの時間が長い知識分野は知識難易度が高いとしてもよい。

影響度評価部１５は、対象問題の該当知識分野から出題されていない期間が期間閾値以下であれば、該当知識分野の知識難易度に応じて対象問題の合格影響度を設定する。このように対象問題の該当知識分野の知識の習得の難易度を合格影響度に反映させるので、習得すべき知識分野の知識を習得するための勉強に有益な知識難易度を反映した情報を提供することができる。

具体的には、影響度評価部１５は、対象問題の該当知識分野の最大値を所定の知識難易度閾値と比較することにより、対象問題の合格影響度をレベルＡ、Ｂ、Ｃのいずれかに分類する。上述したように、レベルＣは、正解の確率が１／２近傍と想定される問題であり、レベルＢは、合格するには正解すべきと想定される難問であり、レベルＡは、合格するには正解すべきと想定される易問である。知識難易度閾値は、対象問題がそれらレベルＡ、Ｂ、Ｃに適切に分類されるように予め設定しておく。具体的には、知識難易度が高ければ合格影響度が低くなるようにするとよい。知識難易度が高いほど多くの受験者がその知識分野の知識を習得していない可能性が高まることが想定されるからである。
なお、ここで設定する合格影響度は、最終決定されたものではない。後述するように、問題文長および回答形式に基づいて調整される。

続いてステップ４０３にて、影響度評価部１５は、対象問題の問題文長を評価する。具体的には、影響度評価部１５は、対象問題に設定されている合格影響度がレベルＡである場合、対象問題の問題文長が所定の問題文長閾値を越えていれば、対象問題の合格影響度をレベルＢに調整する。知識難易度の低い知識分野から出題された問題でも、問題文が長くなれば、問題文における前提知識を対応付ける箇所の個数が増え、出題者の意図を把握するのが難しくなる。一方、前提として知っておくべき知識の量が多く相互の関係が複雑であるなど、前提知識の知識難易度の高い分野の問題は性質が異なる。前提知識の知識難易度の高い分野の問題は、予め知識の難易度に合った影響度が設定されていれば、知識と問題の関係の複雑さは既に考慮済みとなるので、更に問題文が長かったとしても、必ずしも更に急激に難易度が上がり影響度が下がるというものではない。このような性質を踏まえ、本態様では、レベルＡの対象問題に限り、問題文長が所定の問題文長閾値を越えていれば影響度をレベルＢに変更するという処理を行って影響度の妥当性の向上を図っている。

続いてステップ４０４にて、影響度評価部１５は、回答形式別評価処理を実行する。回答形式別評価処理は、対象問題の回答形式に応じて、対象問題の合格影響度を評価する処理である。試験問題には様々な回答形式のものがある。回答形式により正解を導くことの難しさが異なる。回答形式によっては、関連する全ての知識を正確に理解し記憶していなければ正解を導くことが難しい問題がある。その一方で、関連する一部の知識を理解し記憶していれば、消去法等により正解を導ける問題もある。このような回答形式の違いを合格影響度に反映させることができる。回答形式別評価処理の詳細は図１６を参照して後述する。

続いてステップ４０５にて、影響度評価部１５は、所要時間により対象問題の合格影響度を評価する。ここでは、対象試験の合格影響度にその対象試験の正解を導くのに要する所要時間を反映させる例を示す。
その場合、所要時間算出部１６は、対象試験の所要時間を算出する。所要時間の算出は予め行っておいてもよい。

所要時間算出部１６は、試験に取り組んだ受験者のうち対象問題を正解した受験者が対象問題に要した時間である正解時間を取得し、正解時間に基づいて所要時間を算出し、図１１に例示した試験問題情報４０に所要時間４５として登録する。具体的には、例えば、所要時間算出部１６は、正解時間の平均値を所要時間としてもよい。正解時間は、例えば、当該試験の問題を提供するｅラーニングシステムから取得可能である。通常、ｅラーニングシステムから取得できるのは、受験勉強の途中段階の受験者の試験結果であるため、正解率は本試験のものと乖離する可能性がある。しかし、正解した受験者の所要時間（正解時間）については本試験での時間に近い値が得られると想定される。なお、対象問題の所要時間は、合格影響度の算出に利用可能であるだけでなく、単独でも受験勉強や受験指導に利用可能な有益な情報である。

影響度評価部１５は、対象問題に設定されている合格影響度を、その対象問題の所要時間に応じて調整する。所定時間内に所定数の試験問題を解くことが求められる試験において、他の試験問題に対して所要時間が長い試験問題は、受験者は試験時にその試験問題を後回しにする場合がある。そのため所要時間が長い試験問題は合格影響度が低いと想定される。本例によれば、そのような所要時間を合格影響度に反映させることができる。
図１６は、回答形式別評価処理のフローチャートである。

ステップ５０１にて、影響度評価部１５は、対象問題が択一式問題であるか否か判定する。対象問題が択一式問題であるか否かは、回答形式特定部１４による処理結果から判定することができる。

対象問題が択一式問題であれば、影響度評価部１５は、ステップ５０２にて、択一式問題に含まれる各選択肢を評価する。その際、影響度評価部１５は、各選択肢の選択肢種別に基づいて、当該選択肢の合格影響度を判定する。各選択肢の選択肢種別は回答形式特定部１４の処理結果から知得することができる。影響度評価部１５は、予め設定されている合格影響度判定情報を参照して、各選択肢の選択肢種別に対応する合格影響度を特定する。

図１７は、合格影響度判定情報の一例を示す図である。合格影響度判定情報５０は、対象問題の回答形式あるいは選択肢の選択肢種別５１に対応付けて、合格影響度５２が登録されたテーブルである。対象問題が択一式問題であれば選択肢種別毎に合格影響度が設定され、択一式問題でなければ回答形式毎に合格影響度が設定される。

図１７の例では、択一式問題の知識問題選択肢の合格影響度はＡ以上であると設定されている。択一式問題の低度事例問題選択肢の合格影響度はＢ以上であると設定されている。択一式問題の判例問題選択肢の合格影響度はＢ以上であると設定されている。択一式問題の高度事例問題選択肢の合格影響度はＣ以上であると設定されている。

当該選択肢に設定されている合格影響度が、合格影響度判定情報５０に「〇以上」と設定されている合格影響度「〇」より低い場合には、当該選択肢の合格影響度は「〇」に変更される。例えば、当該選択肢が択一式問題の低度事例問題選択肢でありその合格影響度がＡに設定されている場合には、合格影響度はＢに変更される。

事例問題の選択肢は、前提知識を知っているかどうかが問われる知識問題選択肢と異なり、前提知識を問題に当て嵌める必要があるため、前提知識を知っているだけで解ける簡単な問題ではない。そのため、事例問題選択肢は、知識問題選択肢よりも合格影響度を下げて妥当性を確保している。また、事例問題選択肢の中でも登場する主体が多い高度事例問題選択肢の方が、登場する主体の少ない低度事例問題選択肢よりも当て嵌めを行う箇所が多いので、より合格影響度を下げて妥当性を確保している。このような性質を踏まえ、本態様では、低度事例問題選択肢をレベルＢとし、高度事例問題選択肢をレベルＣとし、合格影響度の妥当性の確保を図っている。

続いて、影響度評価部１５は、ステップ５０３にて、択一式問題総合評価処理を実行する。択一式問題総合評価処理は、択一式問題である対象問題の合格影響度を、その対象問題に含まれてる各選択肢の合格影響度に基づいて設定する処理である。択一式問題総合評価処理の詳細は図１８および図１９を参照して後述する。

ステップ５０１にて対象問題が択一式問題でなければ、影響度評価部１５は、ステップ５０４にて対象問題の合格影響度を評価する。その際、影響度評価部１５は、予め設定されている合格影響度判定情報５０を参照して、対象問題の回答形式に対応する合格影響度を特定する。

図１７の例では、正誤問題の合格影響度はＡ以上であると設定されている。組合せ問題の合格影響度はＢ以上であると設定されている。選択式問題の合格影響度はＢ以上であると設定されている。計算問題の合格影響度はＣ以上であると設定されている。個数算問題の合格影響度はＣ以上であると設定されている。記述式問題の合格影響度はＣ以上であると設定されている。

対象問題に設定されている合格影響度が、合格影響度判定情報５０に「〇以上」と設定されている合格影響度「〇」より低い場合には、対象問題の合格影響度は「〇」に変更される。例えば、対象問題が組合せ問題でありその合格影響度がＡに設定されている場合には、合格影響度はＢに変更される。

すなわち、影響度評価部１５は、対象問題の前提知識および問題文長により設定された合格影響度がレベルＡであり、対象問題が組合せ問題または選択式問題であれば、対象問題をレベルＢに変更する。対象問題の前提知識および問題文長により設定された合格影響度がレベルＡまたはレベルＢであり、対象問題が計算問題、個数問題、または記述式問題のいずれかであれば、対象問題をレベルＣに変更する。回答形式により調整した妥当な合格影響度を提供することができる。
図１８は、択一式問題総合評価処理の判定論理情報の一例を示す図である。図１９は、択一式問題総合評価処理の一例を示すフローチャートである。

択一式問題総合評価は、択一式問題の合格影響度を各選択肢の合格影響度に基づく総合評価により設定する処理である。総合評価は図１８に示した判定論理情報により行われる。

択一式問題は、全ての選択肢について確実に正しい判断ができない場合には、消去法で選択肢を絞り込んでいくことにより正解を導くこととなる。したがって、消去法による選択肢の絞り込みの容易さにより択一式問題の正解を導くことの容易さが変わる。本実施形態では、どの程度絞り込みができるかと総合評価とを対応づける。

図１８に示すように、判定論理情報６０には、対象問題の選択肢が該当するか否か判定する条件（条件内容６２）と、当該条件に該当した対象問題の合格影響度（総合評価６３）とを対応付けて、条件番号６１を付与して設定されている。本例では条件番号６１が小さい順に判断するものとなっている。

条件番号＝１の条件では、条件内容「レベルＡかつ正解肢である選択肢が含まれている」に該当する対象問題の総合評価としての合格影響度がＡである。条件番号＝２の条件では、条件内容「レベルＡかつ不正解肢である選択肢が選択肢の総個数より１個少ない個数だけ含まれている」に該当する対象問題の総合評価としての合格影響度がＡである。条件番号＝３の条件では、条件内容「絞り込み条件２に該当せず、レベルＢかつ正解肢である選択肢が含まれている」に該当する対象問題の総合評価としての合格影響度がＢである。条件番号＝４の条件では、条件内容「絞り込み条件１、３に該当せず、レベルＡまたはＢかつ不正解肢である選択肢が選択肢の総個数より１個少ない個数だけ含まれている」に該当する対象問題の総合評価としての合格影響度がＢである。条件番号＝５の条件では、条件内容「絞り込み条件２、４に該当せず、レベルＣかつ正解肢である選択肢が含まれている」に該当する対象問題の総合評価としての合格影響度がＣである。条件番号＝６の条件では、条件内容「絞り込み条件１〜５のいずれにも該当せず、レベルＡまたはＢかつ不正解肢である選択肢が選択肢の総個数よりも２個少ない個数だけ含まれている」に該当する対象問題の総合評価としての合格影響度がＣである。条件番号＝７の条件では、条件内容「絞り込み条件１〜６のいずれにも該当しない」に該当する対象問題の総合評価としての合格影響度がＤである。
図１９の択一式問題総合評価処理は一連のフロチャートにより実現している。

まずステップ６０１にて、影響度評価部１５は、対象問題が絞り込み条件１に該当するか否か判定する。影響度評価部１５は、対象問題が絞り込み条件１に該当したらステップ６０３にて対象問題の合格影響度をＡとする。

対象問題が絞り込み条件１に該当しなければ、影響度評価部１５は、次にステップ６０２にて、対象問題が絞り込み条件２に該当するか否か判定する。影響度評価部１５は、対象問題が絞り込み条件２に該当したらステップ６０３にて対象問題の合格影響度をＡとする。

対象問題が絞り込み条件２に該当しなければ、影響度評価部１５は、次にステップ６０４にて、対象問題が絞り込み条件３に該当するか否か判定する。影響度評価部１５は、対象問題が絞り込み条件３に該当したらステップ６０６にて対象問題の合格影響度をＢとする。

対象問題が絞り込み条件３に該当しなければ、影響度評価部１５は、次にステップ６０５にて、対象問題が絞り込み条件４に該当するか否か判定する。影響度評価部１５は、対象問題が絞り込み条件４に該当したらステップ６０６にて対象問題の合格影響度をＢとする。

対象問題が絞り込み条件４に該当しなければ、影響度評価部１５は、次にステップ６０７にて、対象問題が絞り込み条件５に該当するか否か判定する。影響度評価部１５は、対象問題が絞り込み条件５に該当したらステップ６０９にて対象問題の合格影響度をＣとする。

対象問題が絞り込み条件５に該当しなければ、影響度評価部１５は、次にステップ６０８にて、対象問題が絞り込み条件６に該当するか否か判定する。影響度評価部１５は、対象問題が絞り込み条件６に該当したらステップ６０９にて対象問題の合格影響度をＣとする。
対象問題が絞り込み条件６に該当しなければ、影響度評価部１５は、ステップ６１０にて対象問題の合格影響度をＤとする。
図１９の処理を以下のように整理することもできる。

影響度評価部１５は、対象問題が、レベルＡかつ正解肢である選択肢が択一式問題に含まれているという絞り込み条件１に該当すればその対象問題をレベルＡに設定する。影響度評価部１５は、対象問題が、レベルＡかつ不正解肢である選択肢が択一式問題に選択肢の個数より１個少ない個数だけ含まれているという絞り込み条件２に該当すればその対象問題をレベルＡに設定する。影響度評価部１５は、対象問題が、絞り込み条件２に該当せず、レベルＢかつ正解肢である選択肢が択一式問題に含まれているという絞り込み条件３に該当すればその対象問題をレベルＢに設定する。影響度評価部１５は、対象問題が、絞り込み条件１にも絞り込み条件３に該当せず、レベルＡかつ不正解肢またはレベルＢかつ不正解肢である選択肢が択一式問題に選択肢の総個数より１個少ない個数だけ含まれているという絞り込み条件４に該当すればその対象問題をレベルＢに設定する。影響度評価部１５は、対象問題が、絞り込み条件２にも絞り込み条件４にも該当せず、レベルＣかつ正解肢である選択肢が択一式問題に含まれているという絞り込み条件５に該当すればその対象問題をレベルＣに設定する。影響度評価部１５は、対象問題が、絞り込み条件１〜５のいずれにも該当せず、レベルＡかつ不正解肢またはレベルＢかつ不正解肢である選択肢が択一式問題に選択肢の総個数より２個少ない個数だけ含まれているという絞り込み条件６に該当すればその対象問題をレベルＣに設定する。影響度評価部１５は、対象問題が、絞り込み条件１〜６のいずれにも該当しなければその対象問題をレベルＤに設定する。択一式問題についてその択一式問題の全体と各選択肢とについて合格影響度を、合格に向けた勉強への利用に有益な情報として提供することができる。

上述した本発明の実施形態は、本発明の説明のための例示であり、本発明の範囲をそれらの実施形態にのみ限定する趣旨ではない。当業者は、本発明の範囲を逸脱することなしに、他の様々な態様で本発明を実施することができる。

１０…試験問題解析システム、１１…記憶部、１２…前提知識判別部、１３…問題文長算出部、１４…回答形式特定部、１５…影響度評価部、１６…所要時間算出部、２１…プロセッサ、２２…メインメモリ、２３…記憶装置、２４…入力装置、２５…表示装置、２６…バス、３０…知識分野情報、３１…知識分野、３２…用語数、３３…分野関連用語、３４…知識難易度、４０…試験問題情報、４１…問題番号、４２…該当知識分野、４３…問題文長、４４…回答形式、４５…所要時間、４６…合格影響度、５０…合格影響度判定情報、５１…選択肢種別、５２…合格影響度、６０…判定論理情報、６１…条件番号
６２…条件内容、６３…総合評価

Claims (11)

1. 合否のある試験の問題を解析する試験問題解析システムであって、
   解析対象となる対象問題を解くのに要する前提知識を判別する前提知識判別部と、
   前記対象問題の文の長さである問題文長を算出する問題文長算出部と、
   前記対象問題に対する回答形式を特定する回答形式特定部と、
   前記前提知識と前記問題文長と前記回答形式とに基づいて、前記試験に合格するために前記対象問題を正解することが求められる度合いである合格影響度を評価する影響度評価部と、
   を有する試験問題解析システム。
2. 前記合格影響度には、前記試験に合格するために前記対象問題を正解することが求められる度合いが高い方からレベルＡ、Ｂ、Ｃ、Ｄという４段階があり、
   前記レベルＤは、正解しなくても合格が可能と想定される問題であり、
   前記レベルＣは、正解の確率が１／２近傍と想定される問題であり、
   前記レベルＢは、合格するには正解すべきと想定される難問であり、
   前記レベルＡは、合格するには正解すべきと想定される易問であり、
   前記影響度評価部は、前記対象試験がどのレベルに該当するか決定する、
   請求項１に記載の試験問題解析システム。
3. 前記前提知識となりうる複数の知識分野が予め設定されており、
   前記影響度評価部は、前記対象問題の前提知識に対応する知識分野から出題されていない期間が所定の期間閾値を越えていれば、前記対象問題をレベルＤと決定する、
   請求項２に記載の試験問題解析システム。
4. 前記知識分野のそれぞれについて、当該知識分野の知識の習得の難易度を示す知識難易度が予め設定されており、
   前記影響度評価部は、前記対象問題の前提知識に対応する知識分野から出題されていない期間が前記期間閾値以下であれば、前記知識分野の知識難易度に応じて前記対象問題の合格影響度を設定し、前記問題文長および前記回答形式に基づいて、前記設定した合格影響度を調整する、
   請求項３に記載の試験問題解析システム。
5. 前記対象問題を正解するのに要する所要時間を算出する所要時間算出部を更に有し、
   前記影響度評価部は、前記前提知識と前記問題文長と前記回答形式と前記所要時間とに基づいて、前記対象問題の前記合格影響度を評価する、
   請求項１に記載の試験問題解析システム。
6. 前記所要時間算出部は、前記試験に取り組んだ受験者のうち前記対象問題を正解した受験者が前記対象問題に要した時間である正解時間を取得し、前記正解時間に基づいて前記所要時間を算出する、
   請求項５に記載の試験問題解析システム。
7. 前記影響度評価部は、前記対象問題の合格影響度がレベルＡである場合、前記対象問題の問題文長が所定の問題文長閾値を越えていれば、前記対象問題の合格影響度をレベルＢに調整する、
   請求項４に記載の試験問題解析システム。
8. 前記回答形式特定部は、
   前記対象問題が複数の選択肢の中から１つの正解肢を選択する択一式問題である場合には、更に、該対象問題の各選択肢について、特定の事項に関する知識を答えさせる知識問題選択肢であるか、具体的な事例に対して答えさせる事例問題選択肢であるか、判例に関する理解に基づいて答えさせる判例問題選択肢であるか、特定し、
   前記選択肢が事例問題選択肢である場合には、更に、該選択肢が、登場する所定の主体の数が２以下の低度事例問題選択肢か、登場する所定の主体の数が３以上の高度事例問題選択肢かを特定し、
   前記影響度評価部は、
   前記対象問題の各選択肢について、前記選択肢が知識問題選択肢であれば該選択肢をレベルＡとし、前記選択肢が低度事例問題選択肢または判例問題選択肢であれば該選択肢をレベルＢとし、前記選択肢が高度事例問題選択肢であれば該選択肢をレベルＣとし、前記選択肢が所定の期間閾値を越えて出題されていない知識分野から出題されたものであれば該選択肢をレベルＤとし、
   前記対象問題が、レベルＡかつ正解肢である選択肢が択一式問題に含まれているという絞り込み条件１に該当すれば該対象問題をレベルＡに設定し、
   前記対象問題が、レベルＡかつ不正解肢である選択肢が択一式問題に選択肢の個数より１個少ない個数だけ含まれているという絞り込み条件２に該当すれば該対象問題をレベルＡに設定し、
   前記対象問題が、前記絞り込み条件２に該当せず、レベルＢかつ正解肢である選択肢が択一式問題に含まれているという絞り込み条件３に該当すれば該対象問題をレベルＢに設定し、
   前記対象問題が、前記絞り込み条件１にも前記絞り込み条件３に該当せず、レベルＡかつ不正解肢またはレベルＢかつ不正解肢である選択肢が択一式問題に選択肢の総個数より１個少ない個数だけ含まれているという絞り込み条件４に該当すれば該対象問題をレベルＢに設定し、
   前記対象問題が、前記絞り込み条件２にも前記絞り込み条件４にも該当せず、レベルＣかつ正解肢である選択肢が択一式問題に含まれているという絞り込み条件５に該当すれば該対象問題をレベルＣに設定し、
   前記対象問題が、前記絞り込み条件１〜５のいずれにも該当せず、レベルＡかつ不正解肢またはレベルＢかつ不正解肢である選択肢が択一式問題に選択肢の総個数より２個少ない個数だけ含まれているという絞り込み条件６に該当すれば該対象問題をレベルＣに設定し、
   前記対象問題が、前記絞り込み条件１〜６のいずれにも該当しなければ該対象問題をレベルＤに設定する、
   請求項２に記載の試験問題解析システム。
9. 前記回答形式特定部は、
   前記対象問題が、
   複数の肢文を含み所定の条件に該当する肢文の組合せを選択させる組合せ問題であるか、
   問題文に複数の空欄があり前記問題文とは別に前記空欄に該当する語句を含む複数の語句が提示され、前記複数の語句から前記空欄に該当する語句を選択させる選択式問題であるか、
   問題文に基づく数値計算の計算結果を回答させる計算問題であるか、
   複数の肢文を含み所定の条件に該当する肢文の個数を選択させる個数問題であるか、
   問題文に基づいて所定の事項について記述させる記述式問題であるか、判別し、
   前記影響度評価部は、
   前記対象問題の前記前提知識および前記問題文長により設定された合格影響度がレベルＡであり、前記対象問題が組合せ問題または選択式問題であれば、前記対象問題をレベルＢに変更し、
   前記対象問題の前記前提知識および前記問題文長により設定された合格影響度がレベルＡまたはレベルＢであり、前記対象問題が計算問題、個数問題、または記述式問題のいずれかであれば、前記対象問題をレベルＣに変更する、
   請求項７に記載の試験問題解析システム。
10. 合否のある試験の問題を解析するための試験問題解析方法であって、
    解析対象となる対象問題を解くのに要する前提知識を判別し、
    前記対象問題の文の長さである問題文長を算出し、
    前記対象問題に対する回答形式を特定し、
    前記前提知識と前記問題文長と前記回答形式とに基づいて、前記試験に合格するために前記対象問題を正解することが求められる度合いである合格影響度を評価する、
    ことをコンピュータが実行する試験問題解析方法。
11. 合否のある試験の問題を解析するための試験問題解析プログラムであって、
    解析対象となる対象問題を解くのに要する前提知識を判別し、
    前記対象問題の文の長さである問題文長を算出し、
    前記対象問題に対する回答形式を特定し、
    前記前提知識と前記問題文長と前記回答形式とに基づいて、前記試験に合格するために前記対象問題を正解することが求められる度合いである合格影響度を評価する、
    ことをコンピュータに実行させるための試験問題解析プログラム。

Images