JP3687785B2 - 採点処理方法および採点処理システム - Google Patents
採点処理方法および採点処理システム Download PDFInfo
- Publication number
- JP3687785B2 JP3687785B2 JP2001246762A JP2001246762A JP3687785B2 JP 3687785 B2 JP3687785 B2 JP 3687785B2 JP 2001246762 A JP2001246762 A JP 2001246762A JP 2001246762 A JP2001246762 A JP 2001246762A JP 3687785 B2 JP3687785 B2 JP 3687785B2
- Authority
- JP
- Japan
- Prior art keywords
- answer
- data
- scoring
- correct
- incorrect
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
Landscapes
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Finance (AREA)
- Economics (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Electrically Operated Instructional Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Character Discrimination (AREA)
Description
【０００１】
【発明の属する技術分野】
この発明は採点処理方法および採点処理システムに関し、特にたとえば、マークシート式試験、記述式試験や口述式試験などの採点結果を迅速且つ正確に集計・分類して統計結果を得ることができる採点結果の処理方法および採点結果処理システムに関する。
【０００２】
【従来の技術】
従来、マークシート式試験、記述式（筆記）試験、口述式（口頭）試験の解答結果の採点は、マークシート式試験の場合にはＯMＲ処理により採点が行われ、記述式試験の場合には採点者が模範解答等を参照しながら解答用紙に記された解答に対する採点を行い、口述式試験の場合には受験者が口頭で答えた内容に対する評価を試験官がチェックシート等に記録することで行っていた。また、採点結果は、手作業により集計・分類を行うことにより統計データを作成して今後の試験問題作成や学習指導等の参考データとして活用していた。
【０００３】
【発明が解決しようとする課題】
しかしながら、従来の方法では、多数の受験者の採点を行うのには非常に多くの時間を要し非常に効率が悪かった。また、記述式試験や口述式試験の採点については、採点者等が模範解答やチェックシートを参照しながら採点を行っていたが、採点者により採点基準が異なるため受験者に不公平な採点結果となっていた。
【０００４】
さらに、採点の結果を集計・分類して統計データを作成するには、採点結果のデータのほか、受験者の年齢、性別、職業等の属性データを手作業でデータベースに入力する必要であるため、非常に効率が悪くコストが嵩む作業であった。そのため、試験結果から得ることができる統計データが作成されることは少なく、今後の試験問題作成や学習指導等の参考データとして活用されることは稀であった。
【０００５】
それゆえ、この発明の目的は、迅速且つ正確に採点が行え、容易に採点結果を集計・分類して統計データ得ることが出来る採点処理方法および採点処理システムを提供することである。
【０００６】
【課題を解決するための手段】
請求項１に記載の発明は、入力手段により入力された解答データを集信し、採点処理を行って採点コンテンツデータを作成する採点処理手段により採点処理する方法であって、試験において複数の受験者が解答を行った解答データを収集するステップと、前記受験者の各種属性データを収集するステップと、入力手段により入力された解答データを、変換手段により採点処理可能な形式に変換するステップと、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量と、前記受験者が解答を行った解答データとを比較対照して、前記最も小さい解答データのデータ容量より小さいデータ容量の解答データを無解答と判断することを含む、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップと、解答判断手段により正答または誤答であると判断された解答データについてのみ採点処理をするステップと、前記解答データの内容毎に前記受験者の各種属性データの集計を行うステップとを含むことを特徴とする、採点処理方法である。
【０００７】
請求項２に記載の発明は、前記解答データが正答、誤答または無解答のうちいずれに該当するかを判断するステップは、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量の値と、各設問に対する受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値と比較対照して、各設問に対し受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値が、前記最低データより大きいデータ容量の解答データを正答または誤答であると判断し、前記最低データ容量の値より小さいデータ容量の解答データを無解答と判断するステップを含む、請求項１に記載の採点処理方法である。
【０００８】
請求項３に記載の発明は、前記受験者の各種属性データを収集するステップにおける前記受験者の各種属性データは、少なくとも年齢、性別、職業、住所、所属団体のうちいずれか１つを含む、請求項１または請求項２に記載の採点処理方法である。
【０００９】
請求項４に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、文字データである、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１０】
請求項５に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、画像データであり、画像認識処理することにより採点に用いられる、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１１】
請求項６に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、画像データであり、前記採点処理をするステップは、前記画像データと正答が答えられたときに描画される画像データとを比較対照して採点が行われる、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１２】
請求項７に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、音声データであり、前記採点処理をするステップは、前記音声データが再生されたときに生ずる音波波形を比較することにより採点が行われる、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１３】
請求項８に記載の発明は、配信された試験コンテンツデータについて作成された解答データは、前記端末で作成された解答コンテンツデータである、請求項１ないし請求項７のいずれかに記載の採点処理方法である。
【００１４】
請求項９に記載の発明は、前記画像データは、解答者が解答を行ったプロセスに関する情報を含む、請求項５または請求項６に記載の採点処理方法である。
【００１５】
請求項１０に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記した筆順である、請求項９に記載の採点処理方法である。
【００１６】
請求項１１に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記したときの筆圧である、請求項９に記載の採点処理方法である。
【００１７】
請求項１２に記載の発明は、試験において行った複数の受験者の解答を入力手段によって入力された解答データを収集する解答データ収集手段と、前記受験者の各種属性データを収集する属性データ収集手段と、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量と、前記受験者が解答を行った解答データとを比較対照して、前記最も小さい解答データより小さいデータ容量の解答データを無解答と判断することを含む、前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断する解答判断手段と、前記解答判断手段により正答または誤答であると判断された解答データについてのみ採点処理をする採点処理手段と、
前記解答データの内容毎に前記受験者の各種属性データの集計・分類を行う集計・分類手段とを含むことを特徴とする、採点処理システム。
【００１８】
請求項１３に記載の発明は、前記解答判断手段は、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量の値と、各設問に対する受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値と比較対照して、各設問に対し受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値が、前記最低データの値より大きいデータ容量の解答データを正答または誤答であると判断し、前記最低データ容量の値より小さいデータ容量の解答データを無解答と判断する、請求項１２に記載の採点処理システムである。
【００１９】
請求項１４に記載の発明は、前記属性データ収集手段は、少なくとも年齢、性別、職業、住所、所属団体のうちいずれか１つを含む受験者の各種属性データを収集する、請求項１２または請求項１３に記載の採点処理システムである。
【００２０】
請求項１５に記載の発明は、前記解答判断手段は、文字データである解答データを判断する、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２１】
請求項１６に記載の発明は、前記解答判断手段は、画像データである解答データを判断し、前記採点処理手段は、画像認識処理することにより採点をする、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２２】
請求項１７に記載の発明は、前記解答判断手段は、画像データである解答データを判断し、前記採点処理手段は、前記画像データと正答が答えられたときに描画される画像データとを比較対照して採点を行なう、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２３】
請求項１８に記載の発明は、前記解答判断手段は、音声データである解答データを判断し、前記採点処理手段は、前記音声データが再生されたときに生ずる音波波形を比較することにより採点を行う、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２４】
請求項１９に記載の発明は、前記入手手段は、配信された試験コンテンツデータについて解答コンテンツデータを作成する端末である、請求項１２ないし請求項１８のいずれかに記載の採点処理システムである。
【００２５】
請求項２０に記載の発明は、前記画像データは、解答者が解答を行ったプロセスに関する情報を含む、請求項１６または請求項１７に記載の採点処理システムである。
【００２６】
請求項２１に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記した筆順である、請求項２０に記載の採点処理システムである。
【００２７】
請求項２２に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記したときの筆圧である、請求項２０に記載の採点処理システムである。
【００２８】
この発明の上述の目的，その他の目的，特徴および利点は、図面を参照して行う以下の実施例の詳細な説明から一層明らかとなろう。
【００２９】
【発明の実施の形態】
図１は、本発明にかかる採点処理システムの一実施形態を示す図解図である。以下図１乃至図１４を参照しながらオンライン受験システム１０のハードウェア構成について説明する。
【００３０】
オンライン受験システム１０は、図１に示すように、受験端末１２と受験会場サーバ３８と試験管理サーバ５８と採点サーバ７８とを含む。
【００３１】
受験端末１２は、配信された試験コンテンツデータを閲覧・ヒアリングしながら受験者が解答コンテンツデータを作成するための端末である。受験端末１２は、図２に示すようにＣＰＵ１４を有する。ＣＰＵ１４は、受験端末１２において各種処理を行うときに演算処理を行う中央演算処理装置である。また、ＣＰＵ１４にはＲＯＭ１６が接続されている。ＲＯＭ１６は、受験端末１２起動時に実行する基本入出力処理プログラムを格納するためのメモリである。さらに、ＣＰＵ１４にはＲＡＭ１８が接続されている。ＲＡＭ１８は、ＣＰＵ１４において、各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００３２】
ＣＰＵ１４には、画像処理部２０が接続されている。画像処理部２０は、ＣＰＵ１４の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部２０には、ディスプレイ２２が接続されている。ディスプレイ２２は、画像処理部２０で生成された画像表示データに基いて試験コンテンツデータを表示画面として表示する。
【００３３】
ＣＰＵ１４には記憶装置２４が接続されている。記憶装置２４は、ＣＰＵ１４が各種処理を実行するときに使用するプログラムやデータを記憶する。また、記憶装置２４はＣＰＵ１４が演算処理により生成したデータが記憶する。記憶装置２４に記憶されるアプリケーションとしては、図３に示すように図示しないＯＳ（operating system）の他に、受験アプリケーション２４ａが記憶されている。受験アプリケーション２４ａは、後述する受験会場サーバ３８から配信された試験コンテンツデータに含まれるテキストデータ，静止画データおよび動画データをディスプレイ２２において可視化する。また、受験アプリケーション２４ａは試験コンテンツデータに含まれる音声データや動画データに含まれる音声を後述する音声再生部３２で再生する。さらに、受験アプリケーション２４ａは受験者が後述する入力装置２８等を用いて入力した解答内容に基づいて解答コンテンツデータを生成し記憶装置２４に記憶する。
【００３４】
ＣＰＵ１４には、入力部２６が接続されている。入力部２６は、後述する入力装置２８を接続するためのインターフェイスである。入力部２６は、入力装置２８から入力された各種の指示信号や各種データをＣＰＵ１４に入力する。入力部２６には、入力装置２８が接続されている。入力装置２８には、キーボード，マウス，筆圧感知機能付きタブレット，タッチパネルが使用される。入力装置２８は、指示信号を入力したり、受験端末１２で実施される試験の解答を入力するために使用される。
【００３５】
ＣＰＵ１４には、サウンドカード３０が接続されている。サウンドカード３０は、各種音源チップ等が搭載されており受験端末１２において音声を再生・録音する機能を提供する。サウンドカード３０には、音声再生部３２が接続されている。音声再生部３２には、スピーカやヘッドフォンが使用される。音声再生部３２は、サウンドカード３０から供給される試験問題等の音声信号を再生する。サウンドカード３０には、マイク３４が接続されている。マイク３４は、試験の解答を音声や音声付動画により行うとき、受験者が発生した音声を集音するために使用される。
【００３６】
ＣＰＵ１４には、ネットワーク接続部３６が接続される。ネットワーク接続部３６としては、ＬＡＮカード，モデムやターミナルアダプタ等が用いられネットワーク２００と接続される。
【００３７】
なお、受験端末１２は受験者数に応じて複数設置され、受験者が受験する試験に応じた内容の試験コンテンツデータが適宜配信される。上述した受験端末１２は、パーソナルコンピュータ，ワークステーションに受験アプリケーション２４ａをインストールすることで同様な構成とすることが可能である。
【００３８】
受験会場サーバ３８は、ネットワーク２００に接続されている受験端末１２に試験コンテンツデータを配信する。また、受験端末１２で作成された解答コンテンツデータを集信し採点サーバ７８に送信する。受験会場サーバ３８は、図４に示すようにＣＰＵ４０を含む。ＣＰＵ４０は、受験会場サーバ３８において各種処理を行うとき演算処理を行う中央演算処理装置である。ＣＰＵ４０には、ＲＯＭ４２が接続されている。ＲＯＭ４２は、受験会場サーバ３８起動時に実行する基本入出力処理プログラムを格納するためのメモリである。また、ＣＰＵ４０にはＲＡＭ４４が接続されている。ＲＡＭ４４は、ＣＰＵ４０において各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００３９】
ＣＰＵ４４には、画像処理部４６が接続されている。画像処理部４６は、ＣＰＵ４４の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部４６には、ディスプレイ４８が接続されている。ディスプレイ４８は、画像処理部４６で生成された画像表示データに基いて画面を表示する。なお、受験会場サーバ３８における処理過程をモニタする必要がない場合には、ディスプレイ４８が接続される必要はない。
【００４０】
ＣＰＵ４０には記憶装置５０が接続されている。記憶装置５０は、ＣＰＵ４０が各種処理を実行するときに使用するプログラムやデータを記憶する。また、記憶装置５０はＣＰＵ４０が演算処理により生成したデータが記憶する。記憶装置５０に記憶されるアプリケーションとしては、図５に示すように図示しないＯＳの他に、試験処理アプリケーション５０ａと会場用受験者データベース５０ｂと試験コンテンツデータ５０ｃが記憶されている。
【００４１】
試験処理アプリケーション５０ａは、受験端末１２から受験者により入力される受験票に記載されている受付番号等の情報に基いて受験者の認証を行う。また、試験管理サーバ５８に記憶されている試験コンテンツデータベース６６ｂから試験の種類毎に抽出されたデータである試験コンテンツデータ５０ｃを集信する。さらに、認証した内容に基いて受験端末１２に受験者が受験する試験の試験コンテンツデータ５０ｃを配信する。さらに、試験時間が終了した時点に受験端末１２から解答コンテンツデータを集信し採点サーバ７８に送信する。
【００４２】
会場用受験者データベース５０ｂは、図６に示すように、後述する試験管理サーバ５８に記憶されている受験者データベース６６ａから試験処理アプリケーション５０ａにより受験会場毎に抽出された受付番号、受付日、氏名、年齢、性別、住所、職業、職種、所属団体、受験クラス、受験地、支払方法、クレジット会社、クレジットカードＮｏ．、顔写真データ、メールアドレス等の受験者の個人情報、個人の属性データ、受験者が受験する試験を特定するための情報および受験料の支払方法が記憶されている。会場用受験者データベース５０ｂの情報は試験処理アプリケーション５０ａが受験者の認証を行うときに参照される。
【００４３】
試験コンテンツデータ５０ｃは、後述する試験管理サーバ５８に記憶されている試験コンテンツデータベース６６ｂから試験処理アプリケーション５０ａにより試験の種類毎に抽出されたデータである。なお、試験コンテンツデータ５０ｃは受験会場で実施される試験の種類に応じた内容の試験コンテンツデータ５０ｃが複数の試験管理サーバ５８から配信される。試験コンテンツデータ５０ｃに含まれるデータとしては、問題を示す文字・記号を記録したテキストデータや、試験官が問題を発声した音声を記録した音声データやビデオ信号から作成された動画データが含まれる。
【００４４】
ＣＰＵ４０には、入力部５２が接続されている。入力部５２は、後述する入力装置５４を接続するためのインターフェイスである。入力部５２は、入力装置５４から入力された各種の指示信号や各種データをＣＰＵ４０に入力する。入力部５２には、入力装置５４が接続されている。入力装置５４には、キーボード，マウス等が使用される。なお、受験会場サーバ３８において各種のデータ入力処理等を行わない場合には、入力装置５４は入力部５２に接続される必要はない。
【００４５】
ＣＰＵ４０には、ネットワーク接続部５６が接続されている。ネットワーク接続部５６としては、モデム，ターミナルアダプタやＬＡＮカード等が用いられネットワーク２００と接続される。
【００４６】
なお、受験会場サーバ３８は受験会場毎に設置される。上述した受験会場サーバ３８は、ワークステーション，サーバに試験処理アプリケーション５０ａをインストールすることで同様な構成とすることが可能である。
【００４７】
試験管理サーバ５８は，ネットワーク２００に接続されている受験会場サーバ３８に試験コンテンツデータ５０ｃを配信し、採点サーバ７８により作成された採点コンテンツデータを各種のデータとして受験端末１２に提供する。試験管理サーバ５８は、図７に示すようにＣＰＵ６０を含む。ＣＰＵ６０は、試験管理サーバ５８において各種処理を行うとき演算処理を行う中央演算処理装置である。ＣＰＵ６０には、ＲＯＭ６２が接続されている。ＲＯＭ６２は、試験管理サーバ５８起動時に実行する基本入出力処理プログラムを格納するためのメモリである。また、ＣＰＵ６０にはＲＡＭ６４が接続されている。ＲＡＭ６４は、ＣＰＵ６０において各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００４８】
ＣＰＵ６０には、画像処理部６６が接続されている。画像処理部６６は、ＣＰＵ６０の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部６６には、ディスプレイ６８が接続されている。ディスプレイ６８は、画像処理部６６で生成された画像表示データに基いて画面を表示する。なお、試験管理サーバ５８における処理過程をモニタする必要がない場合には、ディスプレイ６８が接続される必要はない。
【００４９】
ＣＰＵ６０には記憶装置７０が接続されている。記憶装置７０は、ＣＰＵ６０が各種処理を実行するときに使用するプログラムやデータを記憶する。また、記憶装置７０はＣＰＵ６０が演算処理により生成したデータが記憶する。記憶装置５６に記憶されるアプリケーションとしては、図８に示すように図示しないＯＳの他に、受験者データベース７０ａ，試験コンテンツデータベース７０ｂ，ＷＷＷサーバアプリケーション７０ｃ，電子メールサーバアプリケーション７０ｄおよび解答データ７０ｅが記憶されている。
【００５０】
受験者データベース７０ａは、図９に示すように全受験者の受付番号、受付日、氏名、年齢、性別、住所、職業、職種、所属団体、受験クラス、受験地、支払方法、クレジット会社、クレジットカードNｏ．、顔写真データ、メールアドレス等の受験者の個人情報、個人の属性データ、受験者が受験する試験を特定するための情報および受験料の支払方法が記憶されている。なお、受験者データベース７０ａは、受験申込み書類に記載された内容に基いて試験実施者により入力されるか、ＷＷＷサーバアプリケーション７０ｃ等を介して受験者自身により入力される。
【００５１】
試験コンテンツデータベース７０ｂは、複数の試験コンテンツデータ５０ｃをデータとして記録している。試験コンテンツデータベース７０ｂは、記憶されている試験コンテンツデータ５０ｃを試験処理アプリケーション５０ａの要求に基いて受験会場サーバ３８に配信する試験コンテンツデータ５０ｃを抽出する。
【００５２】
ＷＷＷサーバアプリケーション７０ｃは、採点サーバ７８により作成された採点コンテンツデータを用いて試験結果発表をインターネット上で行うために用いられる。また、ＷＷＷサーバアプリケーション７０ｃは、受験者データベース７０ａをＣＧＩ（common gateway interface）アプリケーションとして適用することで受験手続を行うためのインターフェイスを提供する。
【００５３】
電子メールサーバアプリケーション７０ｄは、採点サーバ７８により作成された採点コンテンツデータを用いて直接受験者に試験結果の通知を行うメールを送信するために用いられる。なお、受験者の電子メールアドレスは、受験者データベース７０ａから適宜抽出される。
【００５４】
解答データ７０ｅは、試験コンテンツデータ５０ｃに対応した解答内容を示すデータである。解答データ７０ｅには、ＯＭＲ処理、ＯＣＲ処理、画像比較対照処理および音声認識処理に使用されるデータが含まれており、適宜採点サーバ７８に配信される。
【００５５】
ＣＰＵ６０には、入力部７２が接続されている。入力部７２は、後述する入力装置７４を接続するためのインターフェイスである。入力部７２は、入力装置７４から入力された各種の指示信号や各種データをＣＰＵ６０に入力する。入力部７２には、入力装置７４が接続されている。入力装置７４には、キーボード，マウス等が使用される。
【００５６】
ＣＰＵ６０には、ネットワーク接続部７６が接続されている。ネットワーク接続部７６としては、モデム，ターミナルアダプタやＬＡＮカード等が用いられネットワーク２００と接続される。
【００５７】
採点サーバ７８は、ネットワーク２００に接続されている受験会場サーバ３８から解答コンテンツデータを集信し、採点処理を行い採点コンテンツデータを作成する。採点サーバ７８は、図１０に示すようにＣＰＵ８０を含む。ＣＰＵ８０は、採点サーバ７８において各種処理を行うとき演算処理を行う中央演算処理装置である。ＣＰＵ８０には、ＲＯＭ８２が接続されている。ＲＯＭ８２は、採点サーバ７８起動時に実行する基本入出力処理プログラムを格納するためのメモリである。また、ＣＰＵ８０にはＲＡＭ８４が接続されている。ＲＡＭ８４は、ＣＰＵ８０において各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００５８】
ＣＰＵ８０には、画像処理部８６が接続されている。画像処理部８６は、ＣＰＵ８０の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部８６には、ディスプレイ８８が接続されている。ディスプレイ８８は、画像処理部８６で生成された画像表示データに基いて画面を表示する。
【００５９】
ＣＰＵ８０には、記憶装置９０が接続されている。記憶装置９０は、ＣＰＵ８０が各種処理を実行するときに使用するプログラムやデータを記憶する。具体的に記憶装置９０に記憶されるものとしては、図１１に示すようにＯＳ(operation system)の他、採点処理アプリケーション９０ａ，ＯＭＲ処理アプリケーション９０ｂ，ＯＣＲ処理アプリケーション９０ｃ，画像比較対照アプリケーション９０ｇ，音声認識処理アプリケーション９０ｄ，解答コンテンツデータ再生アプリケーション９０ｅおよび解答データ９０ｆが記憶されている。
【００６０】
採点処理アプリケーション９０ａは、主として集信した解答コンテンツデータと解答データ９０ｆを照合して解答の採点を行い採点コンテンツデータを作成する。また、採点処理アプリケーション９０ａは、採点処理を行う前に各設問に対する解答である文字データ、画像データおよび音声データのデータ容量から解答が正答および誤答か無回答であるかの判断を行う。各設問に対する解答である各データが正答または誤答の場合に生成されるデータ容量より大きなデータ容量を有するときには、各データをＯＭＲ処理アプリケーション９０ｂ，ＯＣＲ処理アプリケーション９０ｃ，画像比較対照アプリケーション９０ｇ，音声認識処理アプリケーション９０ｄまたは解答コンテンツデータ再生アプリケーション９０ｅに引渡し、採点処理アプリケーション９０ａで採点処理可能な文字データ形式や音波波形データに変換した後、採点処理を行い採点コンテンツデータを作成する。なお、採点コンテンツデータとしては、ＷＷＷサーバや電子メールで配信可能なデータおよびデータベースに入力可能なデータが作成される。
【００６１】
ＯＭＲ処理アプリケーション９０ｂは、解答コンテンツデータに含まれる画像データをＯＭＲ(Optical Mark Reader)処理することにより採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。生成された文字データ形式のデータは、採点処理アプリケーション９０ａで採点処理に使用される。なお、ＯＭＲ処理アプリケーション９０ｂにより処理される解答コンテンツデータとしては、受験端末１２を用いて、解答としてマークが描画された状態を保存した画像データである。
【００６２】
ＯＣＲ処理アプリケーション９０ｃは、解答コンテンツデータに含まれる画像データをＯＣＲ(Optical Character Reader)処理することにより採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。生成された文字データ形式のデータは、採点処理アプリケーション９０ａで採点処理に使用される。なお、ＯＣＲ処理アプリケーション９０ｃにより処理される解答コンテンツデータとしては、受験端末１２を用いて、解答として文字や記号が描画された状態を保存した画像データである。
【００６３】
画像比較対象アプリケーション９０ｇは、図１２に示すように解答コンテンツデータに含まれる画像データと、解答データとして記録されている画像データとをパターンマッチング処理することにより採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。生成された文字データ形式のデータは、採点処理アプリケーション９０ａで採点処理に使用される。なお、ＯＣＲ処理アプリケーション９０ｃにより処理される解答コンテンツデータとしては、受験端末１２を用いて、解答として文字や記号が描画された状態を保存した画像データである。
【００６４】
音声認識処理アプリケーション９０ｄは、図１３に示すように解答コンテンツデータに含まれる音声データを解答データとして記録されている音声データとを音波波形比較処理することで採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。なお、音声認識処理アプリケーション９０ｄにより処理される解答コンテンツデータとしては、受験端末１２を用いて、発声された解答を保存した音声データである。
【００６５】
解答コンテンツデータ再生アプリケーション９０ｅは、ＯＭＲ処理アプリケーション９０ｂ、ＯＣＲ処理アプリケーション９０ｃ、画像比較対象アプリケーション９０ｇおよび音声認識処理アプリケーション９０ｄで変換された文字データから採点処理アプリケーション９０ａが採点することができない設問の解答データを採点者が閲覧することにより採点処理を行うためのアプリケーションである。解答コンテンツデータ再生アプリケーション９０ｅは、解答コンテンツデータに含まれる各種データを全て閲覧、再生する機能を有する。
【００６６】
解答データ９０ｆは、図１４に示すように、各設問の正答データと正答または誤答が解答された場合に生成される最も小さい解答データの最低データ容量が記憶されている。
【００６７】
ＣＰＵ８０には、入力部９２が接続されている。入力部９２は、後述する入力装置９４を接続するためのインターフェイスである。入力部９２は、入力装置９４から入力された各種の指示信号や各種データをＣＰＵ８０に入力する。入力部９２には、入力装置９４が接続されている。入力装置９４には、キーボード，マウス等が使用される。
【００６８】
ＣＰＵ８０には、サウンドカード９６が接続されている。サウンドカード９６は、各種音源チップ等が搭載されており採点サーバ７８において音声を再生・録音する機能を提供する。サウンドカード９６には、音声再生部９８が接続されている。音声再生部９８には、スピーカやヘッドフォンが使用される。音声再生部９８は、サウンドカード９６から供給される解答コンテンツデータに含まれる音声データを再生する。
【００６９】
ＣＰＵ８０には、ネットワーク接続部１００が接続されている。ネットワーク接続部１００としては、モデム，ターミナルアダプタやＬＡＮカード等が用いられネットワーク２００と接続される。
【００７０】
引き続いて、採点処理システム１０の動作について説明する。なお、図１５は、採点処理システムの動作を示すフローチャート図である。
【００７１】
まず、試験管理サーバ５８から受験会場サーバ３８へ会場用受験者データベース５０ｂと試験コンテンツデータ５０ｃとがネットワーク２００を介して配信される（ステップＳ１）。なお、会場用受験者データベース５０ｂと試験コンテンツデータ５０ｃとの配信は手動または自動により行われる。
【００７２】
次に、受験端末１２において受験者により受験票に記載されている受付番号が入力され、受験会場サーバ３８の試験処理アプリケーション５０ａにより会場用受験者データベース５０ｂとの照合が行われ受験者の認証が行われる（ステップＳ２）。受験者の認証が認められた場合には、会場用受験者データベース５０ｂに基いて受験者の受験する試験が特定される。
【００７３】
認証が行われた後、各受験端末１２には受験者が受験する試験に応じた試験コンテンツデータ５０ｃが配信される（ステップＳ３）。
【００７４】
試験コンテンツデータ５０ｃが配信された受験端末１２では、試験コンテンツデータ５０ｃの内容が受験アプリケーション２４ａにより画面表示，音声再生または動画再生されて試験が開始される。受験者は画面表示，音声再生または動画再生された内容に対する解答を受験アプリケーション２４ａに入力して解答コンテンツデータを作成する（ステップＳ４）。
【００７５】
なお、解答コンテンツデータの作成は、試験形式がマークシート式や選択式の場合には、図１６に示すようにディスプレイ２２内に表示された文字や記号を入力装置２８により選択して入力することにより解答コンテンツデータである画像データの作成が行われる。なお、この実施形態においては、マークシート式や選択式の場合においても、解答コンテンツデータとして画像データを作成したが、これに限らず、受験端末１２のキーボード等により入力されたデータを文字データ形式のデータとして作成してもよい。
【００７６】
試験形式が記述式の試験や習字等の文字等の描画の順序、描画した状況を問う試験の場合には、図１７に示すようにディスプレイ２２内に表示された手書入力欄に入力装置２８である筆圧感知機能付きタブレットを用いて文字，記号や図形を入力することで設問毎にＯＣＲ処理や画像比較対照処理が可能な画像データが生成され解答コンテンツデータの作成が行われる。画像データの形式としては、tiff,gif,jpeg,bmp,png,wmf等の汎用画像フォーマットの他独自の画像フォーマットが用いられる。また、文字書き順や作図問題などの筆順（文字や図形を描いた順序）が問われる設問の場合には、最終的に入力された文字や図形の画像のみを記録した画像データのみではなく、図１８（ａ）から図１８（ｅ）に示すように、文字や図形入力した過程を認識できるように、描く過程の複数の画像データを記録したり、図１９（ａ）から図１９（ｅ）に示すように、文字や図形を入力するために描いた要素が数値的に記録されたベクトル画像データとして記録される。さらに、筆順の他、文字や図形入力した過程の筆圧履歴を示すデータを画像データと共に生成し記録するようにしてもよい。
【００７７】
試験形式が口述式の場合には、受験者が口頭により解答を答えて音声をマイク３４に入力することで音声データである解答コンテンツデータの作成が行われる。音声データの形式としては、mp3,avi,wav等の汎用音声フォーマットの他独自の音声フォーマットが用いられる。
【００７８】
なお、解答コンテンツデータは、必ずしも文字データ、画像データまたは音声データいずれか単一種類のデータで構成される必要はなく、これらのデータが混在する形式に構成されてもよい。
【００７９】
試験時間が終了した時点で、受験会場サーバ３８により各受験端末１２の解答コンテンツデータが集信される。さらに、受験会場サーバ３８に集信された解答コンテンツデータは、会場用受験者データベース５０ｂ受験者の個人情報および属性データと共に受験会場サーバ３８から採点サーバ７８へ配信される（ステップＳ５）。
【００８０】
次に、採点サーバ７８により各設問に対する解答である文字データ、画像データおよび音声データのデータ容量の大きさから解答が正答、誤答または無解答のどちらに該当するかを判断する（ステップＳ６）。判断は、解答データ９０ｆに記録されている各設問の最低データ容量の値に基いて行われ、各設問に対する解答である文字データ、画像データおよび音声データのデータ容量の値が解答データ９０ｆに記載されている最低データ容量の値より大きい場合には、正答または誤答の解答であると判断し、最低データ容量の値より小さい場合には、無解答と判断する。
【００８１】
無回答と判断されたものについては、図２０に示す無回答データベース９０ｈが作成・更新され無回答であった設問に対する無回答者数が登録されると共に、年齢、住所、職業、受験クラス等の属性のほか、性別、職種、所属団体、受験地等の属性データ毎に集計が行われる。これにより、問題作成者は無回答データベース９０ｈの内容を参考することにより、今後の問題作成を的確に行うことができる。
【００８２】
ステップＳ７においては、ステップＳ６において正答または誤答の解答であると判断されたデータの採点が行われる。採点は、採点処理アプリケーション９０ａにより解答コンテンツデータに含まれるデータの種類に応じた採点処理が行われる。
【００８３】
解答コンテンツデータがＯＭＲ用の画像データにより作成されている場合には、ＯＭＲ処理アプリケーション９０ｂによりデータを変換して後、採点処理アプリケーション９０ａが解答データ９０ｆとデータを照合することにより採点処理が行われる。解答コンテンツデータがＯＣＲ用の画像データにより作成されている場合には、ＯＣＲ処理アプリケーション９０ｃによりデータを変換して後、採点処理アプリケーション９０ａが解答データ９０ｆとデータを照合することにより採点処理が行われる。解答コンテンツデータが画像比較対照用の画像データにより作成されている場合には、画像比較対照処理アプリケーション９０ｇによりデータを変換して後、採点処理アプリケーション９０ａが解答データ９０とデータを照合することにより採点処理が行われる。解答コンテンツデータが音声データにより作成されている場合には、音声認識処理アプリケーション９０ｄによりデータを変換して後、採点処理アプリケーション９０ａにより採点処理が行われる。なお、採点処理アプリケーション９０ａにより正誤の判断が行えない設問のデータや、ＯＭＲ処理アプリケーション９０ｂ、ＯＣＲ処理アプリケーション９０ｃ、画像比較対照処理アプリケーション９０ｇおよび音声認識処理アプリケーション９０ｄでデータ変換が行えなかったデータについては、解答コンテンツデータ再生アプリケーション９０ｅを用いて手作業により採点が行われ、その結果が採点処理アプリケーション９０ａに送られる。
【００８４】
すべての設問について採点が行われた後、採点処理アプリケーション９０ａにより採点コンテンツデータが作成される（ステップＳ８）。作成される採点コンテンツデータとしては、ＷＷＷサーバアプリケーション７０ｃにより受験者に閲覧可能なＨＴＭＬデータ等や、電子メールサーバアプリケーション７０ｄに電子メールとして受験者に配信されるテキストデータおよび受験した試験に合格したことを証明する書類を印刷することができる印刷データが作成される。
【００８５】
作成された採点コンテンツデータは、そのデータの種類に応じて適宜採点サーバ７８のＷＷＷサーバアプリケーション７０ｃおよび電子メールサーバアプリケーション７０ｄに送信される（ステップＳ９）。
【００８６】
採点コンテンツデータを受信したＷＷＷサーバアプリケーション７０ｃは、受験者に閲覧可能のデータ領域に記憶して試験結果がホームページとして公開する。電子メールサーバアプリケーション７０ｄは、受信した採点コンテンツデータを適宜受験者の電子メールアドレスに向けて発信する（ステップＳ９）。なお、受験者の電子メールアドレスは、適宜電子メールサーバアプリケーション７０ｄにより受験者データベース７０ａの内容が検索・抽出される。
【００８７】
ステップ１０Ｓにおいては、採点処理アプリケーション９０ａにより採点を行った結果に対する集計・分類がおこなわれ無回答データベース９０ｈと同様の構成で誤答データベース（図示しない）の作成・更新される。採点処理アプリケーション９０ａは、各設問の誤答毎に数を集計するとともに、年齢、性別、住所、職業、職種、所属団体、受験クラス、受験地等の属性データ毎の集計を行う。これにより、問題作成者は誤答データベースの内容を参考にし、問題の解答系統を解析することにより、今後問題作成するときに難易度が高すぎたり、低すぎる設問を問題から除外し受験等級に的確な問題を作成することができる。
【００８８】
【発明の効果】
このように、本発明にかかるオンライン試験システムによれば、迅速且つ正確に採点が行え、容易に採点結果を集計・分類して統計データ得ることが出来る採点処理方法および採点処理システムを提供することができる。
【図面の簡単な説明】
【図１】本発明にかかる採点処理システムの一実施形態を示す図解図である。
【図２】受験端末を示すブロック図である。
【図３】記憶装置に記憶されている受験アプリケーションを示す図解図である。
【図４】受験会場サーバを示すブロック図である。
【図５】記憶装置に記憶されている各種アプリケーション等を示す図解図である。
【図６】会場用受験者データベースの内容を示す図解図である。
【図７】試験管理サーバを示すブロック図である。
【図８】記憶装置に記憶されている各種アプリケーション等を示す図解図である。
【図９】受験者データベースの内容を示す図解図である。
【図１０】採点サーバを示すブロック図である。
【図１１】記憶装置に記憶されている各種アプリケーション等を示す図解図である。
【図１２】画像比較対照処理を示す概念図である。
【図１３】音波波形比較処理を示す概念図である。
【図１４】解答データを示す図解図である。
【図１５】オンライン受験システムの動作を示すフローチャート図である。
【図１６】解答状況を示す図解図である。
【図１７】解答状況を示す他の図解図である。
【図１８】画像データを示す図解図であり、（ａ）はタブレットにより最初に入力された画像の状態を示す図であり、（ｂ）は２回目に入力された画像の状態を示す図であり、（ｃ）は３回目に入力された画像の状態を示す図であり、（ｄ）は４回目に入力された画像の状態を示す図であり、（ｅ）は最後に入力された画像の状態を示す図である。
【図１９】画像データを示す図解図であり、（ａ）はタブレットにより最初に描いた要素を示す図であり、（ｂ）は２回目に描いた要素を示す図であり、（ｃ）は３回目に描いた要素を示す図であり、（ｄ）は４回目に描いた要素を示す図であり、（ｅ）は最後に描いた要素を示す図である。
【図２０】無回答データベースを示す図解図である。
【符号の説明】
１０ 採点処理システム
１２ 受験端末
３８ 受験会場サーバ
５８ 試験管理サーバ
７８ 採点処理サーバ
２００ ネットワーク
【発明の属する技術分野】
この発明は採点処理方法および採点処理システムに関し、特にたとえば、マークシート式試験、記述式試験や口述式試験などの採点結果を迅速且つ正確に集計・分類して統計結果を得ることができる採点結果の処理方法および採点結果処理システムに関する。
【０００２】
【従来の技術】
従来、マークシート式試験、記述式（筆記）試験、口述式（口頭）試験の解答結果の採点は、マークシート式試験の場合にはＯMＲ処理により採点が行われ、記述式試験の場合には採点者が模範解答等を参照しながら解答用紙に記された解答に対する採点を行い、口述式試験の場合には受験者が口頭で答えた内容に対する評価を試験官がチェックシート等に記録することで行っていた。また、採点結果は、手作業により集計・分類を行うことにより統計データを作成して今後の試験問題作成や学習指導等の参考データとして活用していた。
【０００３】
【発明が解決しようとする課題】
しかしながら、従来の方法では、多数の受験者の採点を行うのには非常に多くの時間を要し非常に効率が悪かった。また、記述式試験や口述式試験の採点については、採点者等が模範解答やチェックシートを参照しながら採点を行っていたが、採点者により採点基準が異なるため受験者に不公平な採点結果となっていた。
【０００４】
さらに、採点の結果を集計・分類して統計データを作成するには、採点結果のデータのほか、受験者の年齢、性別、職業等の属性データを手作業でデータベースに入力する必要であるため、非常に効率が悪くコストが嵩む作業であった。そのため、試験結果から得ることができる統計データが作成されることは少なく、今後の試験問題作成や学習指導等の参考データとして活用されることは稀であった。
【０００５】
それゆえ、この発明の目的は、迅速且つ正確に採点が行え、容易に採点結果を集計・分類して統計データ得ることが出来る採点処理方法および採点処理システムを提供することである。
【０００６】
【課題を解決するための手段】
請求項１に記載の発明は、入力手段により入力された解答データを集信し、採点処理を行って採点コンテンツデータを作成する採点処理手段により採点処理する方法であって、試験において複数の受験者が解答を行った解答データを収集するステップと、前記受験者の各種属性データを収集するステップと、入力手段により入力された解答データを、変換手段により採点処理可能な形式に変換するステップと、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量と、前記受験者が解答を行った解答データとを比較対照して、前記最も小さい解答データのデータ容量より小さいデータ容量の解答データを無解答と判断することを含む、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップと、解答判断手段により正答または誤答であると判断された解答データについてのみ採点処理をするステップと、前記解答データの内容毎に前記受験者の各種属性データの集計を行うステップとを含むことを特徴とする、採点処理方法である。
【０００７】
請求項２に記載の発明は、前記解答データが正答、誤答または無解答のうちいずれに該当するかを判断するステップは、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量の値と、各設問に対する受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値と比較対照して、各設問に対し受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値が、前記最低データより大きいデータ容量の解答データを正答または誤答であると判断し、前記最低データ容量の値より小さいデータ容量の解答データを無解答と判断するステップを含む、請求項１に記載の採点処理方法である。
【０００８】
請求項３に記載の発明は、前記受験者の各種属性データを収集するステップにおける前記受験者の各種属性データは、少なくとも年齢、性別、職業、住所、所属団体のうちいずれか１つを含む、請求項１または請求項２に記載の採点処理方法である。
【０００９】
請求項４に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、文字データである、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１０】
請求項５に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、画像データであり、画像認識処理することにより採点に用いられる、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１１】
請求項６に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、画像データであり、前記採点処理をするステップは、前記画像データと正答が答えられたときに描画される画像データとを比較対照して採点が行われる、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１２】
請求項７に記載の発明は、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、音声データであり、前記採点処理をするステップは、前記音声データが再生されたときに生ずる音波波形を比較することにより採点が行われる、請求項１ないし請求項３のいずれかに記載の採点処理方法である。
【００１３】
請求項８に記載の発明は、配信された試験コンテンツデータについて作成された解答データは、前記端末で作成された解答コンテンツデータである、請求項１ないし請求項７のいずれかに記載の採点処理方法である。
【００１４】
請求項９に記載の発明は、前記画像データは、解答者が解答を行ったプロセスに関する情報を含む、請求項５または請求項６に記載の採点処理方法である。
【００１５】
請求項１０に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記した筆順である、請求項９に記載の採点処理方法である。
【００１６】
請求項１１に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記したときの筆圧である、請求項９に記載の採点処理方法である。
【００１７】
請求項１２に記載の発明は、試験において行った複数の受験者の解答を入力手段によって入力された解答データを収集する解答データ収集手段と、前記受験者の各種属性データを収集する属性データ収集手段と、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量と、前記受験者が解答を行った解答データとを比較対照して、前記最も小さい解答データより小さいデータ容量の解答データを無解答と判断することを含む、前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断する解答判断手段と、前記解答判断手段により正答または誤答であると判断された解答データについてのみ採点処理をする採点処理手段と、
前記解答データの内容毎に前記受験者の各種属性データの集計・分類を行う集計・分類手段とを含むことを特徴とする、採点処理システム。
【００１８】
請求項１３に記載の発明は、前記解答判断手段は、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量の値と、各設問に対する受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値と比較対照して、各設問に対し受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値が、前記最低データの値より大きいデータ容量の解答データを正答または誤答であると判断し、前記最低データ容量の値より小さいデータ容量の解答データを無解答と判断する、請求項１２に記載の採点処理システムである。
【００１９】
請求項１４に記載の発明は、前記属性データ収集手段は、少なくとも年齢、性別、職業、住所、所属団体のうちいずれか１つを含む受験者の各種属性データを収集する、請求項１２または請求項１３に記載の採点処理システムである。
【００２０】
請求項１５に記載の発明は、前記解答判断手段は、文字データである解答データを判断する、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２１】
請求項１６に記載の発明は、前記解答判断手段は、画像データである解答データを判断し、前記採点処理手段は、画像認識処理することにより採点をする、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２２】
請求項１７に記載の発明は、前記解答判断手段は、画像データである解答データを判断し、前記採点処理手段は、前記画像データと正答が答えられたときに描画される画像データとを比較対照して採点を行なう、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２３】
請求項１８に記載の発明は、前記解答判断手段は、音声データである解答データを判断し、前記採点処理手段は、前記音声データが再生されたときに生ずる音波波形を比較することにより採点を行う、請求項１２ないし請求項１４のいずれかに記載の採点処理システムである。
【００２４】
請求項１９に記載の発明は、前記入手手段は、配信された試験コンテンツデータについて解答コンテンツデータを作成する端末である、請求項１２ないし請求項１８のいずれかに記載の採点処理システムである。
【００２５】
請求項２０に記載の発明は、前記画像データは、解答者が解答を行ったプロセスに関する情報を含む、請求項１６または請求項１７に記載の採点処理システムである。
【００２６】
請求項２１に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記した筆順である、請求項２０に記載の採点処理システムである。
【００２７】
請求項２２に記載の発明は、解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記したときの筆圧である、請求項２０に記載の採点処理システムである。
【００２８】
この発明の上述の目的，その他の目的，特徴および利点は、図面を参照して行う以下の実施例の詳細な説明から一層明らかとなろう。
【００２９】
【発明の実施の形態】
図１は、本発明にかかる採点処理システムの一実施形態を示す図解図である。以下図１乃至図１４を参照しながらオンライン受験システム１０のハードウェア構成について説明する。
【００３０】
オンライン受験システム１０は、図１に示すように、受験端末１２と受験会場サーバ３８と試験管理サーバ５８と採点サーバ７８とを含む。
【００３１】
受験端末１２は、配信された試験コンテンツデータを閲覧・ヒアリングしながら受験者が解答コンテンツデータを作成するための端末である。受験端末１２は、図２に示すようにＣＰＵ１４を有する。ＣＰＵ１４は、受験端末１２において各種処理を行うときに演算処理を行う中央演算処理装置である。また、ＣＰＵ１４にはＲＯＭ１６が接続されている。ＲＯＭ１６は、受験端末１２起動時に実行する基本入出力処理プログラムを格納するためのメモリである。さらに、ＣＰＵ１４にはＲＡＭ１８が接続されている。ＲＡＭ１８は、ＣＰＵ１４において、各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００３２】
ＣＰＵ１４には、画像処理部２０が接続されている。画像処理部２０は、ＣＰＵ１４の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部２０には、ディスプレイ２２が接続されている。ディスプレイ２２は、画像処理部２０で生成された画像表示データに基いて試験コンテンツデータを表示画面として表示する。
【００３３】
ＣＰＵ１４には記憶装置２４が接続されている。記憶装置２４は、ＣＰＵ１４が各種処理を実行するときに使用するプログラムやデータを記憶する。また、記憶装置２４はＣＰＵ１４が演算処理により生成したデータが記憶する。記憶装置２４に記憶されるアプリケーションとしては、図３に示すように図示しないＯＳ（operating system）の他に、受験アプリケーション２４ａが記憶されている。受験アプリケーション２４ａは、後述する受験会場サーバ３８から配信された試験コンテンツデータに含まれるテキストデータ，静止画データおよび動画データをディスプレイ２２において可視化する。また、受験アプリケーション２４ａは試験コンテンツデータに含まれる音声データや動画データに含まれる音声を後述する音声再生部３２で再生する。さらに、受験アプリケーション２４ａは受験者が後述する入力装置２８等を用いて入力した解答内容に基づいて解答コンテンツデータを生成し記憶装置２４に記憶する。
【００３４】
ＣＰＵ１４には、入力部２６が接続されている。入力部２６は、後述する入力装置２８を接続するためのインターフェイスである。入力部２６は、入力装置２８から入力された各種の指示信号や各種データをＣＰＵ１４に入力する。入力部２６には、入力装置２８が接続されている。入力装置２８には、キーボード，マウス，筆圧感知機能付きタブレット，タッチパネルが使用される。入力装置２８は、指示信号を入力したり、受験端末１２で実施される試験の解答を入力するために使用される。
【００３５】
ＣＰＵ１４には、サウンドカード３０が接続されている。サウンドカード３０は、各種音源チップ等が搭載されており受験端末１２において音声を再生・録音する機能を提供する。サウンドカード３０には、音声再生部３２が接続されている。音声再生部３２には、スピーカやヘッドフォンが使用される。音声再生部３２は、サウンドカード３０から供給される試験問題等の音声信号を再生する。サウンドカード３０には、マイク３４が接続されている。マイク３４は、試験の解答を音声や音声付動画により行うとき、受験者が発生した音声を集音するために使用される。
【００３６】
ＣＰＵ１４には、ネットワーク接続部３６が接続される。ネットワーク接続部３６としては、ＬＡＮカード，モデムやターミナルアダプタ等が用いられネットワーク２００と接続される。
【００３７】
なお、受験端末１２は受験者数に応じて複数設置され、受験者が受験する試験に応じた内容の試験コンテンツデータが適宜配信される。上述した受験端末１２は、パーソナルコンピュータ，ワークステーションに受験アプリケーション２４ａをインストールすることで同様な構成とすることが可能である。
【００３８】
受験会場サーバ３８は、ネットワーク２００に接続されている受験端末１２に試験コンテンツデータを配信する。また、受験端末１２で作成された解答コンテンツデータを集信し採点サーバ７８に送信する。受験会場サーバ３８は、図４に示すようにＣＰＵ４０を含む。ＣＰＵ４０は、受験会場サーバ３８において各種処理を行うとき演算処理を行う中央演算処理装置である。ＣＰＵ４０には、ＲＯＭ４２が接続されている。ＲＯＭ４２は、受験会場サーバ３８起動時に実行する基本入出力処理プログラムを格納するためのメモリである。また、ＣＰＵ４０にはＲＡＭ４４が接続されている。ＲＡＭ４４は、ＣＰＵ４０において各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００３９】
ＣＰＵ４４には、画像処理部４６が接続されている。画像処理部４６は、ＣＰＵ４４の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部４６には、ディスプレイ４８が接続されている。ディスプレイ４８は、画像処理部４６で生成された画像表示データに基いて画面を表示する。なお、受験会場サーバ３８における処理過程をモニタする必要がない場合には、ディスプレイ４８が接続される必要はない。
【００４０】
ＣＰＵ４０には記憶装置５０が接続されている。記憶装置５０は、ＣＰＵ４０が各種処理を実行するときに使用するプログラムやデータを記憶する。また、記憶装置５０はＣＰＵ４０が演算処理により生成したデータが記憶する。記憶装置５０に記憶されるアプリケーションとしては、図５に示すように図示しないＯＳの他に、試験処理アプリケーション５０ａと会場用受験者データベース５０ｂと試験コンテンツデータ５０ｃが記憶されている。
【００４１】
試験処理アプリケーション５０ａは、受験端末１２から受験者により入力される受験票に記載されている受付番号等の情報に基いて受験者の認証を行う。また、試験管理サーバ５８に記憶されている試験コンテンツデータベース６６ｂから試験の種類毎に抽出されたデータである試験コンテンツデータ５０ｃを集信する。さらに、認証した内容に基いて受験端末１２に受験者が受験する試験の試験コンテンツデータ５０ｃを配信する。さらに、試験時間が終了した時点に受験端末１２から解答コンテンツデータを集信し採点サーバ７８に送信する。
【００４２】
会場用受験者データベース５０ｂは、図６に示すように、後述する試験管理サーバ５８に記憶されている受験者データベース６６ａから試験処理アプリケーション５０ａにより受験会場毎に抽出された受付番号、受付日、氏名、年齢、性別、住所、職業、職種、所属団体、受験クラス、受験地、支払方法、クレジット会社、クレジットカードＮｏ．、顔写真データ、メールアドレス等の受験者の個人情報、個人の属性データ、受験者が受験する試験を特定するための情報および受験料の支払方法が記憶されている。会場用受験者データベース５０ｂの情報は試験処理アプリケーション５０ａが受験者の認証を行うときに参照される。
【００４３】
試験コンテンツデータ５０ｃは、後述する試験管理サーバ５８に記憶されている試験コンテンツデータベース６６ｂから試験処理アプリケーション５０ａにより試験の種類毎に抽出されたデータである。なお、試験コンテンツデータ５０ｃは受験会場で実施される試験の種類に応じた内容の試験コンテンツデータ５０ｃが複数の試験管理サーバ５８から配信される。試験コンテンツデータ５０ｃに含まれるデータとしては、問題を示す文字・記号を記録したテキストデータや、試験官が問題を発声した音声を記録した音声データやビデオ信号から作成された動画データが含まれる。
【００４４】
ＣＰＵ４０には、入力部５２が接続されている。入力部５２は、後述する入力装置５４を接続するためのインターフェイスである。入力部５２は、入力装置５４から入力された各種の指示信号や各種データをＣＰＵ４０に入力する。入力部５２には、入力装置５４が接続されている。入力装置５４には、キーボード，マウス等が使用される。なお、受験会場サーバ３８において各種のデータ入力処理等を行わない場合には、入力装置５４は入力部５２に接続される必要はない。
【００４５】
ＣＰＵ４０には、ネットワーク接続部５６が接続されている。ネットワーク接続部５６としては、モデム，ターミナルアダプタやＬＡＮカード等が用いられネットワーク２００と接続される。
【００４６】
なお、受験会場サーバ３８は受験会場毎に設置される。上述した受験会場サーバ３８は、ワークステーション，サーバに試験処理アプリケーション５０ａをインストールすることで同様な構成とすることが可能である。
【００４７】
試験管理サーバ５８は，ネットワーク２００に接続されている受験会場サーバ３８に試験コンテンツデータ５０ｃを配信し、採点サーバ７８により作成された採点コンテンツデータを各種のデータとして受験端末１２に提供する。試験管理サーバ５８は、図７に示すようにＣＰＵ６０を含む。ＣＰＵ６０は、試験管理サーバ５８において各種処理を行うとき演算処理を行う中央演算処理装置である。ＣＰＵ６０には、ＲＯＭ６２が接続されている。ＲＯＭ６２は、試験管理サーバ５８起動時に実行する基本入出力処理プログラムを格納するためのメモリである。また、ＣＰＵ６０にはＲＡＭ６４が接続されている。ＲＡＭ６４は、ＣＰＵ６０において各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００４８】
ＣＰＵ６０には、画像処理部６６が接続されている。画像処理部６６は、ＣＰＵ６０の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部６６には、ディスプレイ６８が接続されている。ディスプレイ６８は、画像処理部６６で生成された画像表示データに基いて画面を表示する。なお、試験管理サーバ５８における処理過程をモニタする必要がない場合には、ディスプレイ６８が接続される必要はない。
【００４９】
ＣＰＵ６０には記憶装置７０が接続されている。記憶装置７０は、ＣＰＵ６０が各種処理を実行するときに使用するプログラムやデータを記憶する。また、記憶装置７０はＣＰＵ６０が演算処理により生成したデータが記憶する。記憶装置５６に記憶されるアプリケーションとしては、図８に示すように図示しないＯＳの他に、受験者データベース７０ａ，試験コンテンツデータベース７０ｂ，ＷＷＷサーバアプリケーション７０ｃ，電子メールサーバアプリケーション７０ｄおよび解答データ７０ｅが記憶されている。
【００５０】
受験者データベース７０ａは、図９に示すように全受験者の受付番号、受付日、氏名、年齢、性別、住所、職業、職種、所属団体、受験クラス、受験地、支払方法、クレジット会社、クレジットカードNｏ．、顔写真データ、メールアドレス等の受験者の個人情報、個人の属性データ、受験者が受験する試験を特定するための情報および受験料の支払方法が記憶されている。なお、受験者データベース７０ａは、受験申込み書類に記載された内容に基いて試験実施者により入力されるか、ＷＷＷサーバアプリケーション７０ｃ等を介して受験者自身により入力される。
【００５１】
試験コンテンツデータベース７０ｂは、複数の試験コンテンツデータ５０ｃをデータとして記録している。試験コンテンツデータベース７０ｂは、記憶されている試験コンテンツデータ５０ｃを試験処理アプリケーション５０ａの要求に基いて受験会場サーバ３８に配信する試験コンテンツデータ５０ｃを抽出する。
【００５２】
ＷＷＷサーバアプリケーション７０ｃは、採点サーバ７８により作成された採点コンテンツデータを用いて試験結果発表をインターネット上で行うために用いられる。また、ＷＷＷサーバアプリケーション７０ｃは、受験者データベース７０ａをＣＧＩ（common gateway interface）アプリケーションとして適用することで受験手続を行うためのインターフェイスを提供する。
【００５３】
電子メールサーバアプリケーション７０ｄは、採点サーバ７８により作成された採点コンテンツデータを用いて直接受験者に試験結果の通知を行うメールを送信するために用いられる。なお、受験者の電子メールアドレスは、受験者データベース７０ａから適宜抽出される。
【００５４】
解答データ７０ｅは、試験コンテンツデータ５０ｃに対応した解答内容を示すデータである。解答データ７０ｅには、ＯＭＲ処理、ＯＣＲ処理、画像比較対照処理および音声認識処理に使用されるデータが含まれており、適宜採点サーバ７８に配信される。
【００５５】
ＣＰＵ６０には、入力部７２が接続されている。入力部７２は、後述する入力装置７４を接続するためのインターフェイスである。入力部７２は、入力装置７４から入力された各種の指示信号や各種データをＣＰＵ６０に入力する。入力部７２には、入力装置７４が接続されている。入力装置７４には、キーボード，マウス等が使用される。
【００５６】
ＣＰＵ６０には、ネットワーク接続部７６が接続されている。ネットワーク接続部７６としては、モデム，ターミナルアダプタやＬＡＮカード等が用いられネットワーク２００と接続される。
【００５７】
採点サーバ７８は、ネットワーク２００に接続されている受験会場サーバ３８から解答コンテンツデータを集信し、採点処理を行い採点コンテンツデータを作成する。採点サーバ７８は、図１０に示すようにＣＰＵ８０を含む。ＣＰＵ８０は、採点サーバ７８において各種処理を行うとき演算処理を行う中央演算処理装置である。ＣＰＵ８０には、ＲＯＭ８２が接続されている。ＲＯＭ８２は、採点サーバ７８起動時に実行する基本入出力処理プログラムを格納するためのメモリである。また、ＣＰＵ８０にはＲＡＭ８４が接続されている。ＲＡＭ８４は、ＣＰＵ８０において各種演算処理を実行するとき使用するプログラムやデータを一時的に格納するためのメモリである。
【００５８】
ＣＰＵ８０には、画像処理部８６が接続されている。画像処理部８６は、ＣＰＵ８０の演算処理の結果に基づいて画面表示データを生成するものである。画像処理部８６には、ディスプレイ８８が接続されている。ディスプレイ８８は、画像処理部８６で生成された画像表示データに基いて画面を表示する。
【００５９】
ＣＰＵ８０には、記憶装置９０が接続されている。記憶装置９０は、ＣＰＵ８０が各種処理を実行するときに使用するプログラムやデータを記憶する。具体的に記憶装置９０に記憶されるものとしては、図１１に示すようにＯＳ(operation system)の他、採点処理アプリケーション９０ａ，ＯＭＲ処理アプリケーション９０ｂ，ＯＣＲ処理アプリケーション９０ｃ，画像比較対照アプリケーション９０ｇ，音声認識処理アプリケーション９０ｄ，解答コンテンツデータ再生アプリケーション９０ｅおよび解答データ９０ｆが記憶されている。
【００６０】
採点処理アプリケーション９０ａは、主として集信した解答コンテンツデータと解答データ９０ｆを照合して解答の採点を行い採点コンテンツデータを作成する。また、採点処理アプリケーション９０ａは、採点処理を行う前に各設問に対する解答である文字データ、画像データおよび音声データのデータ容量から解答が正答および誤答か無回答であるかの判断を行う。各設問に対する解答である各データが正答または誤答の場合に生成されるデータ容量より大きなデータ容量を有するときには、各データをＯＭＲ処理アプリケーション９０ｂ，ＯＣＲ処理アプリケーション９０ｃ，画像比較対照アプリケーション９０ｇ，音声認識処理アプリケーション９０ｄまたは解答コンテンツデータ再生アプリケーション９０ｅに引渡し、採点処理アプリケーション９０ａで採点処理可能な文字データ形式や音波波形データに変換した後、採点処理を行い採点コンテンツデータを作成する。なお、採点コンテンツデータとしては、ＷＷＷサーバや電子メールで配信可能なデータおよびデータベースに入力可能なデータが作成される。
【００６１】
ＯＭＲ処理アプリケーション９０ｂは、解答コンテンツデータに含まれる画像データをＯＭＲ(Optical Mark Reader)処理することにより採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。生成された文字データ形式のデータは、採点処理アプリケーション９０ａで採点処理に使用される。なお、ＯＭＲ処理アプリケーション９０ｂにより処理される解答コンテンツデータとしては、受験端末１２を用いて、解答としてマークが描画された状態を保存した画像データである。
【００６２】
ＯＣＲ処理アプリケーション９０ｃは、解答コンテンツデータに含まれる画像データをＯＣＲ(Optical Character Reader)処理することにより採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。生成された文字データ形式のデータは、採点処理アプリケーション９０ａで採点処理に使用される。なお、ＯＣＲ処理アプリケーション９０ｃにより処理される解答コンテンツデータとしては、受験端末１２を用いて、解答として文字や記号が描画された状態を保存した画像データである。
【００６３】
画像比較対象アプリケーション９０ｇは、図１２に示すように解答コンテンツデータに含まれる画像データと、解答データとして記録されている画像データとをパターンマッチング処理することにより採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。生成された文字データ形式のデータは、採点処理アプリケーション９０ａで採点処理に使用される。なお、ＯＣＲ処理アプリケーション９０ｃにより処理される解答コンテンツデータとしては、受験端末１２を用いて、解答として文字や記号が描画された状態を保存した画像データである。
【００６４】
音声認識処理アプリケーション９０ｄは、図１３に示すように解答コンテンツデータに含まれる音声データを解答データとして記録されている音声データとを音波波形比較処理することで採点処理アプリケーション９０ａで採点処理可能な文字データ形式に変換する。なお、音声認識処理アプリケーション９０ｄにより処理される解答コンテンツデータとしては、受験端末１２を用いて、発声された解答を保存した音声データである。
【００６５】
解答コンテンツデータ再生アプリケーション９０ｅは、ＯＭＲ処理アプリケーション９０ｂ、ＯＣＲ処理アプリケーション９０ｃ、画像比較対象アプリケーション９０ｇおよび音声認識処理アプリケーション９０ｄで変換された文字データから採点処理アプリケーション９０ａが採点することができない設問の解答データを採点者が閲覧することにより採点処理を行うためのアプリケーションである。解答コンテンツデータ再生アプリケーション９０ｅは、解答コンテンツデータに含まれる各種データを全て閲覧、再生する機能を有する。
【００６６】
解答データ９０ｆは、図１４に示すように、各設問の正答データと正答または誤答が解答された場合に生成される最も小さい解答データの最低データ容量が記憶されている。
【００６７】
ＣＰＵ８０には、入力部９２が接続されている。入力部９２は、後述する入力装置９４を接続するためのインターフェイスである。入力部９２は、入力装置９４から入力された各種の指示信号や各種データをＣＰＵ８０に入力する。入力部９２には、入力装置９４が接続されている。入力装置９４には、キーボード，マウス等が使用される。
【００６８】
ＣＰＵ８０には、サウンドカード９６が接続されている。サウンドカード９６は、各種音源チップ等が搭載されており採点サーバ７８において音声を再生・録音する機能を提供する。サウンドカード９６には、音声再生部９８が接続されている。音声再生部９８には、スピーカやヘッドフォンが使用される。音声再生部９８は、サウンドカード９６から供給される解答コンテンツデータに含まれる音声データを再生する。
【００６９】
ＣＰＵ８０には、ネットワーク接続部１００が接続されている。ネットワーク接続部１００としては、モデム，ターミナルアダプタやＬＡＮカード等が用いられネットワーク２００と接続される。
【００７０】
引き続いて、採点処理システム１０の動作について説明する。なお、図１５は、採点処理システムの動作を示すフローチャート図である。
【００７１】
まず、試験管理サーバ５８から受験会場サーバ３８へ会場用受験者データベース５０ｂと試験コンテンツデータ５０ｃとがネットワーク２００を介して配信される（ステップＳ１）。なお、会場用受験者データベース５０ｂと試験コンテンツデータ５０ｃとの配信は手動または自動により行われる。
【００７２】
次に、受験端末１２において受験者により受験票に記載されている受付番号が入力され、受験会場サーバ３８の試験処理アプリケーション５０ａにより会場用受験者データベース５０ｂとの照合が行われ受験者の認証が行われる（ステップＳ２）。受験者の認証が認められた場合には、会場用受験者データベース５０ｂに基いて受験者の受験する試験が特定される。
【００７３】
認証が行われた後、各受験端末１２には受験者が受験する試験に応じた試験コンテンツデータ５０ｃが配信される（ステップＳ３）。
【００７４】
試験コンテンツデータ５０ｃが配信された受験端末１２では、試験コンテンツデータ５０ｃの内容が受験アプリケーション２４ａにより画面表示，音声再生または動画再生されて試験が開始される。受験者は画面表示，音声再生または動画再生された内容に対する解答を受験アプリケーション２４ａに入力して解答コンテンツデータを作成する（ステップＳ４）。
【００７５】
なお、解答コンテンツデータの作成は、試験形式がマークシート式や選択式の場合には、図１６に示すようにディスプレイ２２内に表示された文字や記号を入力装置２８により選択して入力することにより解答コンテンツデータである画像データの作成が行われる。なお、この実施形態においては、マークシート式や選択式の場合においても、解答コンテンツデータとして画像データを作成したが、これに限らず、受験端末１２のキーボード等により入力されたデータを文字データ形式のデータとして作成してもよい。
【００７６】
試験形式が記述式の試験や習字等の文字等の描画の順序、描画した状況を問う試験の場合には、図１７に示すようにディスプレイ２２内に表示された手書入力欄に入力装置２８である筆圧感知機能付きタブレットを用いて文字，記号や図形を入力することで設問毎にＯＣＲ処理や画像比較対照処理が可能な画像データが生成され解答コンテンツデータの作成が行われる。画像データの形式としては、tiff,gif,jpeg,bmp,png,wmf等の汎用画像フォーマットの他独自の画像フォーマットが用いられる。また、文字書き順や作図問題などの筆順（文字や図形を描いた順序）が問われる設問の場合には、最終的に入力された文字や図形の画像のみを記録した画像データのみではなく、図１８（ａ）から図１８（ｅ）に示すように、文字や図形入力した過程を認識できるように、描く過程の複数の画像データを記録したり、図１９（ａ）から図１９（ｅ）に示すように、文字や図形を入力するために描いた要素が数値的に記録されたベクトル画像データとして記録される。さらに、筆順の他、文字や図形入力した過程の筆圧履歴を示すデータを画像データと共に生成し記録するようにしてもよい。
【００７７】
試験形式が口述式の場合には、受験者が口頭により解答を答えて音声をマイク３４に入力することで音声データである解答コンテンツデータの作成が行われる。音声データの形式としては、mp3,avi,wav等の汎用音声フォーマットの他独自の音声フォーマットが用いられる。
【００７８】
なお、解答コンテンツデータは、必ずしも文字データ、画像データまたは音声データいずれか単一種類のデータで構成される必要はなく、これらのデータが混在する形式に構成されてもよい。
【００７９】
試験時間が終了した時点で、受験会場サーバ３８により各受験端末１２の解答コンテンツデータが集信される。さらに、受験会場サーバ３８に集信された解答コンテンツデータは、会場用受験者データベース５０ｂ受験者の個人情報および属性データと共に受験会場サーバ３８から採点サーバ７８へ配信される（ステップＳ５）。
【００８０】
次に、採点サーバ７８により各設問に対する解答である文字データ、画像データおよび音声データのデータ容量の大きさから解答が正答、誤答または無解答のどちらに該当するかを判断する（ステップＳ６）。判断は、解答データ９０ｆに記録されている各設問の最低データ容量の値に基いて行われ、各設問に対する解答である文字データ、画像データおよび音声データのデータ容量の値が解答データ９０ｆに記載されている最低データ容量の値より大きい場合には、正答または誤答の解答であると判断し、最低データ容量の値より小さい場合には、無解答と判断する。
【００８１】
無回答と判断されたものについては、図２０に示す無回答データベース９０ｈが作成・更新され無回答であった設問に対する無回答者数が登録されると共に、年齢、住所、職業、受験クラス等の属性のほか、性別、職種、所属団体、受験地等の属性データ毎に集計が行われる。これにより、問題作成者は無回答データベース９０ｈの内容を参考することにより、今後の問題作成を的確に行うことができる。
【００８２】
ステップＳ７においては、ステップＳ６において正答または誤答の解答であると判断されたデータの採点が行われる。採点は、採点処理アプリケーション９０ａにより解答コンテンツデータに含まれるデータの種類に応じた採点処理が行われる。
【００８３】
解答コンテンツデータがＯＭＲ用の画像データにより作成されている場合には、ＯＭＲ処理アプリケーション９０ｂによりデータを変換して後、採点処理アプリケーション９０ａが解答データ９０ｆとデータを照合することにより採点処理が行われる。解答コンテンツデータがＯＣＲ用の画像データにより作成されている場合には、ＯＣＲ処理アプリケーション９０ｃによりデータを変換して後、採点処理アプリケーション９０ａが解答データ９０ｆとデータを照合することにより採点処理が行われる。解答コンテンツデータが画像比較対照用の画像データにより作成されている場合には、画像比較対照処理アプリケーション９０ｇによりデータを変換して後、採点処理アプリケーション９０ａが解答データ９０とデータを照合することにより採点処理が行われる。解答コンテンツデータが音声データにより作成されている場合には、音声認識処理アプリケーション９０ｄによりデータを変換して後、採点処理アプリケーション９０ａにより採点処理が行われる。なお、採点処理アプリケーション９０ａにより正誤の判断が行えない設問のデータや、ＯＭＲ処理アプリケーション９０ｂ、ＯＣＲ処理アプリケーション９０ｃ、画像比較対照処理アプリケーション９０ｇおよび音声認識処理アプリケーション９０ｄでデータ変換が行えなかったデータについては、解答コンテンツデータ再生アプリケーション９０ｅを用いて手作業により採点が行われ、その結果が採点処理アプリケーション９０ａに送られる。
【００８４】
すべての設問について採点が行われた後、採点処理アプリケーション９０ａにより採点コンテンツデータが作成される（ステップＳ８）。作成される採点コンテンツデータとしては、ＷＷＷサーバアプリケーション７０ｃにより受験者に閲覧可能なＨＴＭＬデータ等や、電子メールサーバアプリケーション７０ｄに電子メールとして受験者に配信されるテキストデータおよび受験した試験に合格したことを証明する書類を印刷することができる印刷データが作成される。
【００８５】
作成された採点コンテンツデータは、そのデータの種類に応じて適宜採点サーバ７８のＷＷＷサーバアプリケーション７０ｃおよび電子メールサーバアプリケーション７０ｄに送信される（ステップＳ９）。
【００８６】
採点コンテンツデータを受信したＷＷＷサーバアプリケーション７０ｃは、受験者に閲覧可能のデータ領域に記憶して試験結果がホームページとして公開する。電子メールサーバアプリケーション７０ｄは、受信した採点コンテンツデータを適宜受験者の電子メールアドレスに向けて発信する（ステップＳ９）。なお、受験者の電子メールアドレスは、適宜電子メールサーバアプリケーション７０ｄにより受験者データベース７０ａの内容が検索・抽出される。
【００８７】
ステップ１０Ｓにおいては、採点処理アプリケーション９０ａにより採点を行った結果に対する集計・分類がおこなわれ無回答データベース９０ｈと同様の構成で誤答データベース（図示しない）の作成・更新される。採点処理アプリケーション９０ａは、各設問の誤答毎に数を集計するとともに、年齢、性別、住所、職業、職種、所属団体、受験クラス、受験地等の属性データ毎の集計を行う。これにより、問題作成者は誤答データベースの内容を参考にし、問題の解答系統を解析することにより、今後問題作成するときに難易度が高すぎたり、低すぎる設問を問題から除外し受験等級に的確な問題を作成することができる。
【００８８】
【発明の効果】
このように、本発明にかかるオンライン試験システムによれば、迅速且つ正確に採点が行え、容易に採点結果を集計・分類して統計データ得ることが出来る採点処理方法および採点処理システムを提供することができる。
【図面の簡単な説明】
【図１】本発明にかかる採点処理システムの一実施形態を示す図解図である。
【図２】受験端末を示すブロック図である。
【図３】記憶装置に記憶されている受験アプリケーションを示す図解図である。
【図４】受験会場サーバを示すブロック図である。
【図５】記憶装置に記憶されている各種アプリケーション等を示す図解図である。
【図６】会場用受験者データベースの内容を示す図解図である。
【図７】試験管理サーバを示すブロック図である。
【図８】記憶装置に記憶されている各種アプリケーション等を示す図解図である。
【図９】受験者データベースの内容を示す図解図である。
【図１０】採点サーバを示すブロック図である。
【図１１】記憶装置に記憶されている各種アプリケーション等を示す図解図である。
【図１２】画像比較対照処理を示す概念図である。
【図１３】音波波形比較処理を示す概念図である。
【図１４】解答データを示す図解図である。
【図１５】オンライン受験システムの動作を示すフローチャート図である。
【図１６】解答状況を示す図解図である。
【図１７】解答状況を示す他の図解図である。
【図１８】画像データを示す図解図であり、（ａ）はタブレットにより最初に入力された画像の状態を示す図であり、（ｂ）は２回目に入力された画像の状態を示す図であり、（ｃ）は３回目に入力された画像の状態を示す図であり、（ｄ）は４回目に入力された画像の状態を示す図であり、（ｅ）は最後に入力された画像の状態を示す図である。
【図１９】画像データを示す図解図であり、（ａ）はタブレットにより最初に描いた要素を示す図であり、（ｂ）は２回目に描いた要素を示す図であり、（ｃ）は３回目に描いた要素を示す図であり、（ｄ）は４回目に描いた要素を示す図であり、（ｅ）は最後に描いた要素を示す図である。
【図２０】無回答データベースを示す図解図である。
【符号の説明】
１０ 採点処理システム
１２ 受験端末
３８ 受験会場サーバ
５８ 試験管理サーバ
７８ 採点処理サーバ
２００ ネットワーク
Claims (22)
- 入力手段により入力された解答データを集信し、採点処理を行って採点コンテンツデータを作成する採点処理手段により採点処理する方法であって、
試験において複数の受験者が解答を行った解答データを収集するステップと、
前記受験者の各種属性データを収集するステップと、
入力手段により入力された解答データを、変換手段により採点処理可能な形式に変換するステップと、
記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量と、前記受験者が解答を行った解答データとを比較対照して、前記最も小さい解答データのデータ容量より小さいデータ容量の解答データを無解答と判断することを含む、解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップと、
解答判断手段により正答または誤答であると判断された解答データについてのみ採点処理をするステップと、
前記解答データの内容毎に前記受験者の各種属性データの集計を行うステップとを含むことを特徴とする、採点処理方法。 - 前記解答データが正答、誤答または無解答のうちいずれに該当するかを判断するステップは、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量の値と、各設問に対する受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値と比較対照して、各設問に対し受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値が、前記最低データより大きいデータ容量の解答データを正答または誤答であると判断し、前記最低データ容量の値より小さいデータ容量の解答データを無解答と判断するステップを含む、請求項１に記載の採点処理方法。
- 前記受験者の各種属性データを収集するステップにおける前記受験者の各種属性データは、少なくとも年齢、性別、職業、住所、所属団体のうちいずれか１つを含む、請求項１または請求項２に記載の採点処理方法。
- 解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、文字データである、請求項１ないし請求項３のいずれかに記載の採点処理方法。
- 解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、画像データであり、画像認識処理することにより採点に用いられる、請求項１ないし請求項３のいずれかに記載の採点処理方法。
- 解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、画像データであり、
前記採点処理をするステップは、前記画像データと正答が答えられたときに描画される画像データとを比較対照して採点が行われる、請求項１ないし請求項３のいずれかに記載の採点処理方法。 - 解答判断手段により前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断するステップにおける前記解答データは、音声データであり、
前記採点処理をするステップは、前記音声データが再生されたときに生ずる音波波形を比較することにより採点が行われる、請求項１ないし請求項３のいずれかに記載の採点処理方法。 - 配信された試験コンテンツデータについて作成された解答データは、前記端末で作成された解答コンテンツデータである、請求項１ないし請求項７のいずれかに記載の採点処理方法。
- 前記画像データは、解答者が解答を行ったプロセスに関する情報を含む、請求項５または請求項６に記載の採点処理方法。
- 前記解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記した筆順である、請求項９に記載の採点処理方法。
- 前記解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記したときの筆圧である、請求項９に記載の採点処理方法。
- 試験において行った複数の受験者の解答を入力手段によって入力された解答データを収集する解答データ収集手段と、
前記受験者の各種属性データを収集する属性データ収集手段と、
記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量と、前記受験者が解答を行った解答データとを比較対照して、前記最も小さい解答データより小さいデータ容量の解答データを無解答と判断することを含む、前記解答データが正答、誤答、無解答のうちいずれに該当するかを判断する解答判断手段と、
前記解答判断手段により正答または誤答であると判断された解答データについてのみ採点処理をする採点処理手段と、
前記解答データの内容毎に前記受験者の各種属性データの集計・分類を行う集計・分類手段とを含むことを特徴とする、採点処理システム。 - 前記解答判断手段は、記憶手段によって記憶されている各設問に対して正答または誤答が解答された場合に生成される最も小さい解答データのデータ容量の値と、各設問に対する受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値と比較対照して、各設問に対し受験者が解答を行った解答に関する文字データ、画像データおよび音声データのデータ容量の値が、前記最低データの値より大きいデータ容量の解答データを正答または誤答であると判断し、前記最低データ容量の値より小さいデータ容量の解答データを無解答と判断する、請求項１２に記載の採点処理システム。
- 前記属性データ収集手段は、少なくとも年齢、性別、職業、住所、所属団体のうちいずれか１つを含む受験者の各種属性データを収集する、請求項１２または請求項１３に記載の採点処理システム。
- 前記解答判断手段は、文字データである解答データを判断する、請求項１２ないし請求項１４のいずれかに記載の採点処理システム。
- 前記解答判断手段は、画像データである解答データを判断し、
前記採点処理手段は、画像認識処理することにより採点をする、請求項１２ないし請求項１４のいずれかに記載の採点処理システム。 - 前記解答判断手段は、画像データである解答データを判断し、
前記採点処理手段は、前記画像データと正答が答えられたときに描画される画像データとを比較対照して採点を行なう、請求項１２ないし請求項１４のいずれかに記載の採点処理システム。 - 前記解答判断手段は、音声データである解答データを判断し、
前記採点処理手段は、前記音声データが再生されたときに生ずる音波波形を比較することにより採点を行う、請求項１２ないし請求項１４のいずれかに記載の採点処理システム。 - 前記入手手段は、配信された試験コンテンツデータについて解答コンテンツデータを作成する端末である、請求項１２ないし請求項１８のいずれかに記載の採点処理システム。
- 前記画像データは、解答者が解答を行ったプロセスに関する情報を含む、請求項１６または請求項１７に記載の採点処理システム。
- 前記解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記した筆順である、請求項２０に記載の採点処理システム。
- 前記解答者が解答を行ったプロセスに関する情報は、文字、記号を筆記したときの筆圧である、請求項２０に記載の採点処理システム。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001246762A JP3687785B2 (ja) | 2001-08-15 | 2001-08-15 | 採点処理方法および採点処理システム |
| US10/217,304 US6996365B2 (en) | 2001-08-15 | 2002-08-13 | Scoring method and scoring system |
| CA002398095A CA2398095C (en) | 2001-08-15 | 2002-08-14 | Scoring method and scoring system |
| EP02018375A EP1284466A1 (en) | 2001-08-15 | 2002-08-14 | Scoring method and scoring system |
| US11/085,897 US7146128B2 (en) | 2001-08-15 | 2005-03-22 | Scoring method and scoring system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001246762A JP3687785B2 (ja) | 2001-08-15 | 2001-08-15 | 採点処理方法および採点処理システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003058034A JP2003058034A (ja) | 2003-02-28 |
| JP3687785B2 true JP3687785B2 (ja) | 2005-08-24 |
Family
ID=19076237
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001246762A Expired - Fee Related JP3687785B2 (ja) | 2001-08-15 | 2001-08-15 | 採点処理方法および採点処理システム |
Country Status (4)
| Country | Link |
|---|---|
| US (2) | US6996365B2 (ja) |
| EP (1) | EP1284466A1 (ja) |
| JP (1) | JP3687785B2 (ja) |
| CA (1) | CA2398095C (ja) |
Families Citing this family (37)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2409314A (en) * | 2002-09-25 | 2005-06-22 | Benesse Corp | Test system and control method thereof |
| US7213968B2 (en) * | 2002-09-25 | 2007-05-08 | Illinois Tool Works Inc. | Hot melt adhesive detection methods and systems |
| JP5097346B2 (ja) * | 2003-10-03 | 2012-12-12 | 村上 淳 | サーバーシステム |
| JP2005141432A (ja) * | 2003-11-05 | 2005-06-02 | Kinesics Inc | 社員採用支援方法及び社員採用支援システム |
| US7657220B2 (en) | 2004-05-21 | 2010-02-02 | Ordinate Corporation | Adaptive scoring of responses to constructed response questions |
| US20060014130A1 (en) * | 2004-07-17 | 2006-01-19 | Weinstein Pini A | System and method for diagnosing deficiencies and assessing knowledge in test responses |
| JP4872214B2 (ja) * | 2005-01-19 | 2012-02-08 | 富士ゼロックス株式会社 | 自動採点装置 |
| US10127130B2 (en) | 2005-03-18 | 2018-11-13 | Salesforce.Com | Identifying contributors that explain differences between a data set and a subset of the data set |
| US7849062B1 (en) * | 2005-03-18 | 2010-12-07 | Beyondcore, Inc. | Identifying and using critical fields in quality management |
| US8782087B2 (en) | 2005-03-18 | 2014-07-15 | Beyondcore, Inc. | Analyzing large data sets to find deviation patterns |
| US7844641B1 (en) * | 2005-03-18 | 2010-11-30 | Beyondcore Inc. | Quality management in a data-processing environment |
| WO2007015869A2 (en) * | 2005-07-20 | 2007-02-08 | Ordinate Corporation | Spoken language proficiency assessment by computer |
| US20070048718A1 (en) * | 2005-08-09 | 2007-03-01 | Exam Grader, Llc | System and Method for Test Creation, Verification, and Evaluation |
| JP5220278B2 (ja) * | 2006-01-27 | 2013-06-26 | 任天堂株式会社 | ゲーム装置および手書き入力プログラム |
| WO2008121730A1 (en) * | 2007-03-28 | 2008-10-09 | Prometric Inc. | Identity management system for authenticating test examination candidates and /or individuals |
| JP2009048531A (ja) * | 2007-08-22 | 2009-03-05 | Softbank Bb Corp | 帳票処理システム及び帳票処理方法 |
| US9311581B2 (en) * | 2007-10-19 | 2016-04-12 | Daniel W. Shinn | System and method for tracking the fulfillment status of requirements for completing an objective |
| US9646079B2 (en) | 2012-05-04 | 2017-05-09 | Pearl.com LLC | Method and apparatus for identifiying similar questions in a consultation system |
| US9904436B2 (en) | 2009-08-11 | 2018-02-27 | Pearl.com LLC | Method and apparatus for creating a personalized question feed platform |
| US20110269110A1 (en) * | 2010-05-03 | 2011-11-03 | Mcclellan Catherine | Computer-Implemented Systems and Methods for Distributing Constructed Responses to Scorers |
| US9099007B1 (en) | 2011-05-15 | 2015-08-04 | Quaest, Inc. | Computerized processing of pictorial responses in evaluations |
| JP5905690B2 (ja) * | 2011-09-15 | 2016-04-20 | 国立大学法人 大阪教育大学 | 答案処理装置、答案処理方法、プログラム、およびシール |
| US10802687B2 (en) | 2011-12-04 | 2020-10-13 | Salesforce.Com, Inc. | Displaying differences between different data sets of a process |
| US10796232B2 (en) | 2011-12-04 | 2020-10-06 | Salesforce.Com, Inc. | Explaining differences between predicted outcomes and actual outcomes of a process |
| US20130297553A1 (en) * | 2012-05-04 | 2013-11-07 | Pearl.com LLC | Method and apparatus for predicting question answerability in an online consultation system |
| US9501580B2 (en) | 2012-05-04 | 2016-11-22 | Pearl.com LLC | Method and apparatus for automated selection of interesting content for presentation to first time visitors of a website |
| US9275038B2 (en) | 2012-05-04 | 2016-03-01 | Pearl.com LLC | Method and apparatus for identifying customer service and duplicate questions in an online consultation system |
| JP2015025873A (ja) * | 2013-07-24 | 2015-02-05 | 株式会社ベネッセコーポレーション | 情報処理装置、情報処理方法及びプログラム |
| CN104347071B (zh) * | 2013-08-02 | 2020-02-07 | 科大讯飞股份有限公司 | 生成口语考试参考答案的方法及系统 |
| JP6707825B2 (ja) * | 2015-09-14 | 2020-06-10 | 富士ゼロックス株式会社 | 情報処理装置及びプログラム |
| JP6228269B1 (ja) * | 2016-06-27 | 2017-11-08 | 株式会社Ｃｏｍｐａｓｓ | 判定システム、プログラム、及び、判定方法 |
| CN107240394A (zh) * | 2017-06-14 | 2017-10-10 | 北京策腾教育科技有限公司 | 一种动态自适应语音分析技术以用于人机口语考试的方法及系统 |
| JP6329315B1 (ja) * | 2017-10-27 | 2018-05-23 | ウェルネット株式会社 | 合格者管理システム、方法、およびプログラム |
| CN108492227A (zh) * | 2018-03-23 | 2018-09-04 | 李丽娅 | 一种评测方法、系统及电子设备 |
| CN109711377B (zh) * | 2018-12-30 | 2023-04-18 | 陕西师范大学 | 标准化考场监控的单帧图像中考生定位和计数方法 |
| CN111431964B (zh) * | 2020-02-20 | 2023-04-07 | 视联动力信息技术股份有限公司 | 一种消息同步处理方法、装置及存储介质 |
| CN114882504B (zh) * | 2022-07-06 | 2022-11-11 | 成都西交智汇大数据科技有限公司 | 一种评分方法、装置、设备及可读存储介质 |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US3284929A (en) * | 1964-05-19 | 1966-11-15 | Automata Corp | Test grading machine |
| GB1224414A (en) * | 1968-06-04 | 1971-03-10 | Ricoh Kk | Improvements in and relating to teaching aid installations |
| US4337051A (en) * | 1980-10-14 | 1982-06-29 | Thomas Donlon | Self-scoring test with non-disclosed key |
| US4764120A (en) * | 1986-05-27 | 1988-08-16 | Mcdonald's Corporation | Student response system |
| US5211564A (en) * | 1989-07-19 | 1993-05-18 | Educational Testing Service | Computerized figural response testing system and method |
| US5724357A (en) * | 1992-01-28 | 1998-03-03 | Fleetwood Group, Inc. | Remote response system and data transfer protocol |
| US5280581A (en) * | 1992-02-27 | 1994-01-18 | Hughes Aircraft Company | Enhanced call-back authentication method and apparatus for remotely accessing a host computer from a plurality of remote sites |
| JPH06266281A (ja) | 1992-04-21 | 1994-09-22 | Nippon Denshi Keisan Kk | タブレット或いはその他ペン入力コンピュータを用いた採点、集計システム |
| US5672060A (en) * | 1992-07-08 | 1997-09-30 | Meadowbrook Industries, Ltd. | Apparatus and method for scoring nonobjective assessment materials through the application and use of captured images |
| US5420407A (en) * | 1993-09-17 | 1995-05-30 | National Computer Systems, Inc. | Adjustable read level threshold for optical mark scanning |
| JPH07121098A (ja) | 1993-10-26 | 1995-05-12 | Hitachi Ltd | 文字学習機 |
| US5991595A (en) * | 1997-03-21 | 1999-11-23 | Educational Testing Service | Computerized system for scoring constructed responses and methods for training, monitoring, and evaluating human rater's scoring of constructed responses |
| WO1998043221A1 (en) * | 1997-03-21 | 1998-10-01 | Educational Testing Service | Methods and systems for presentation and evaluation of constructed responses assessed by human evaluators |
| US6173154B1 (en) * | 1997-07-31 | 2001-01-09 | The Psychological Corporation | System and method for imaging test answer sheets having open-ended questions |
| US6311040B1 (en) * | 1997-07-31 | 2001-10-30 | The Psychological Corporation | System and method for scoring test answer sheets having open-ended questions |
| US6112049A (en) * | 1997-10-21 | 2000-08-29 | The Riverside Publishing Company | Computer network based testing system |
| US6000945A (en) * | 1998-02-09 | 1999-12-14 | Educational Testing Service | System and method for computer based test assembly |
| JP3579599B2 (ja) | 1998-10-20 | 2004-10-20 | 株式会社日本総合研究所 | 電子採点システム |
| US6296489B1 (en) * | 1999-06-23 | 2001-10-02 | Heuristix | System for sound file recording, analysis, and archiving via the internet for language training and other applications |
-
2001
- 2001-08-15 JP JP2001246762A patent/JP3687785B2/ja not_active Expired - Fee Related
-
2002
- 2002-08-13 US US10/217,304 patent/US6996365B2/en not_active Expired - Lifetime
- 2002-08-14 CA CA002398095A patent/CA2398095C/en not_active Expired - Lifetime
- 2002-08-14 EP EP02018375A patent/EP1284466A1/en not_active Withdrawn
-
2005
- 2005-03-22 US US11/085,897 patent/US7146128B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| CA2398095C (en) | 2008-05-06 |
| US20030036047A1 (en) | 2003-02-20 |
| CA2398095A1 (en) | 2003-02-15 |
| EP1284466A1 (en) | 2003-02-19 |
| US20050164155A1 (en) | 2005-07-28 |
| US7146128B2 (en) | 2006-12-05 |
| US6996365B2 (en) | 2006-02-07 |
| JP2003058034A (ja) | 2003-02-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3687785B2 (ja) | 採点処理方法および採点処理システム | |
| US11455475B2 (en) | Human-to-human conversation analysis | |
| CN109360550B (zh) | 语音交互系统的测试方法、装置、设备和存储介质 | |
| US8768241B2 (en) | System and method for representing digital assessments | |
| CN110543550A (zh) | 自动生成试题的方法和装置 | |
| JP2007025497A (ja) | 教育支援プログラムおよび教育支援装置 | |
| Strimling | Beyond accuracy: What documentation quality means to readers | |
| JP3887525B2 (ja) | オンライン試験システム | |
| JP7074170B2 (ja) | 採点支援装置、採点支援システム、採点支援方法および採点支援プログラム | |
| JP3677006B2 (ja) | 情報処理装置およびその方法 | |
| JP2007226458A (ja) | 授業管理装置および授業管理方法 | |
| JP4911756B2 (ja) | オンライン試験システム | |
| US20120082964A1 (en) | Enhanced graphological detection of deception using control questions | |
| CN116167727B (zh) | 一种基于图像解析的流程节点识别与处理系统 | |
| JP2004046255A (ja) | コンピュータ適応型テスト装置、コンピュータ適応型テストシステム、コンピュータ適応型テスト方法およびコンピュータ適応型テストプログラムを格納する記録媒体 | |
| TWI774105B (zh) | 公文書解析方法 | |
| JP2006078740A (ja) | 問題作成プログラム、問題作成装置および問題作成方法 | |
| JP6844076B1 (ja) | データ処理装置、データ処理方法及びプログラム | |
| JP7172219B2 (ja) | 情報処理装置及びプログラム | |
| CN113393098A (zh) | 一种教师发展数据分析方法 | |
| Nicolaides et al. | Forensic Analysis of Handwritten Electronic Signatures | |
| JP2006053578A (ja) | 試験の実施方法 | |
| CN117314251A (zh) | 一种监测学生线下学习的方法及装置 | |
| CN113850486A (zh) | 数据检验方法、数据检验系统和可读存储介质 | |
| CN112884306A (zh) | 一种对教师的教学质量进行测评的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050125 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050328 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050524 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050601 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 3687785 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080617 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090617 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090617 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130617 Year of fee payment: 8 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130617 Year of fee payment: 8 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130617 Year of fee payment: 8 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |