JPH08504282A - コンピュータによるテストを管理するための集中システム及び方法 - Google Patents

コンピュータによるテストを管理するための集中システム及び方法

Info

Publication number
JPH08504282A
JPH08504282A JP7510906A JP51090695A JPH08504282A JP H08504282 A JPH08504282 A JP H08504282A JP 7510906 A JP7510906 A JP 7510906A JP 51090695 A JP51090695 A JP 51090695A JP H08504282 A JPH08504282 A JP H08504282A
Authority
JP
Japan
Prior art keywords
test
workstation
management
computer
center
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7510906A
Other languages
English (en)
Other versions
JP3776117B2 (ja
Inventor
カーショー,ロジャー,シー
ロマーノ,フランク,ジェイ
Original Assignee
エデュケーショナル・テスティング・サービス
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by エデュケーショナル・テスティング・サービス filed Critical エデュケーショナル・テスティング・サービス
Publication of JPH08504282A publication Critical patent/JPH08504282A/ja
Application granted granted Critical
Publication of JP3776117B2 publication Critical patent/JP3776117B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/02Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/06Electrically-operated teaching apparatus or devices working with questions and answers of the multiple-choice answer-type, i.e. where a given question is provided with a series of answers and a choice has to be made from the answers
    • G09B7/07Electrically-operated teaching apparatus or devices working with questions and answers of the multiple-choice answer-type, i.e. where a given question is provided with a series of answers and a choice has to be made from the answers providing for individual presentation of questions to a plurality of student stations

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Strategic Management (AREA)
  • Educational Technology (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Data Mining & Analysis (AREA)
  • Marketing (AREA)
  • Debugging And Monitoring (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Investigating Or Analysing Biological Materials (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

(57)【要約】 本発明は複数の受験者に対して行なわれる標準テストを管理するための集中管理システム及び方法を提供する。本発明による管理システムはテストセンターの種々の部屋に設置した中央管理ワークステーションと、少なくとも1つのテスト用ワークステーションの上で実現される。実質的な管理機能を提供する管理システムソフトウエアは中央管理ワークステーションから実行される。テストに関連して実行される機能を提供する管理システムソフトウエアはテスト用ワークステーションから実行される。

Description

【発明の詳細な説明】 コンピュータによるテストを管理するための集中システム及び方法 背景 最近、継続出願第08/082,038号に記載されるようなコンピュータに よるテスト施行システムが出現したことにより、標準テストの全プロセスが実質 的に自動化されている。コンピュータによるテスト施行システムを用いる典型的 な標準テスト方式を図1に示す。中央処理施設1が、コンピュータによるテスト 施行システム及び後処理をサポートするためのソフトウエアの開発を行なう。例 えば、GRE(General Record Examination)のような1つのテストプログラムが 中央処理施設1で開発され、作成され、そしてパッケージにされる。このコンピ ュータによるテストは1または2以上のテストセンター2へ送られる。各テスト センター2は少なくとも1つのコンピュータワークステーション3を備え、この ワークステーションの上でコンピュータによるテストを受験者に対して実施でき る。 一般的に、受験者は特定のコンピュータによるテストを受けるための登録手続 きをするが、登録時にそのテストを特定のテストセンター2で受けるため予約を 行う。受験者がテストを受けるため予約通りにテストセンター2へ到着すると、 通常、テスト管理者が受験者の予約を確認してテストを開始させる。受験者がテ ストを受けた後、テスト時に記録された受験者の回答及び他の情報が中央処理施 設1へ送られ、後処理される。即ち、新しいテストの開発に使用される統計的及 び分析的研究が行なわれる。 教室でのテストが通常少数の学生に対して実施され、これら学生の行動及びテ ストの際の教室の状態を熟知している一人の人間により採点が行われるのとは対 照的に、標準テストは文字通り数百のテストセンターで、異なる日時に、数千人 の受験者に対して実施されるものである。したがって、標準テストの環境では、 受験者のテストに影響を与えるかもしれないハードウエアまたはソフトウエアの 問題もしくは停電のようなテストセンターの状態を追跡できるようにすることが 肝要である。さらに、テストをすべてのまたはほとんど全部の受験者に対して同 一時刻且つ同一場所で実施しない場合、コンピュータによるテスト及び受験者の 回答を含むすべての関連テストデータの秘密を守り、それが破壊されないように するため別の安全対策を施すことが必要である。したがって、コンピュータによ るテストシステムはこれらの機能を実現するための管理システムを提供する。 しかしながら、管理システムと、コンピュータによるテストを受験者に対して 実施し回答を記録するテスト施行システムは共に図1に示すテストセンター2の コンピュータワークステーション3上に常駐する。したがって、管理者はコンピ ュータワークステーション3上で多くの管理的仕事を行なわなければならず、こ のためコンピュータワークステーション3をテストに使用できない。加えて、ほ とんどのテストセンター2は単一のテストアルームから成り、そこでコンピュー タワークステーション3がコンピュータによるテストを実施するためにセットさ れている。その理由は、各コンピュータワークステーション3につき個室を用意 することは通常、費用及び労力のうえで実際的でないからである。したがって、 各受験者が予約したテストを受けるために到着すると、管理者はその受験者を、 他の受験者がその時コンピュータによるテストを受けているかもしれないテスト ルームヘ入室させて、到着時の受験者のチェックインを行い、受験者のIDをチ ェックし、必要とあらば受験者の写真を撮り、受験者の予約データにしたがって テストを開始させる必要が必然的に生じる。かかる手続きは、特に標準テストに よりしばしば必要となる時間的な制約がそのテストに存在する場合、テストを受 けている他の受験者の注意をそらせることになりかねない。 さらに、テストセンターにおいて管理者が迅速に対応しなければならない不測 の事態が生じることがある。例えば、管理者が別の管理の仕事を行なっている場 合に受験者が予約のための電話をしてくる場合がある。管理者は進行中の仕事を キャンセルしないでその電話に応答できなければならない。コンピュータによる テスト施行システムでは現在、テスト管理者が進行中の事態に対応するため1つ の仕事から別の仕事へ迅速にスイッチすることができない。 さらに、今のコンピュータによるテスト施行システムでは、その一部として提 供される管理システムにより実施可能なテストを種々のテスト作成者が作成でき るような構成にない。例えば、Educational Testing Service 社はコンピュータ によるGRE(General Record Examination)テストを開発・作成し、それをパッ ケージにしている。Sylvan Kee Systems(SKS)のような独立のテストサービス はスケジューリング及び登録の仕事を行ない、テストセンターを用意し、そして テストセンターに管理者を派遣する。コンピュータによるテスト施行システムは テスト作成システム、テスト実施システム及びテスト管理システムを含む。かか るシステムの一例が本明細書の一部を形成するものとして引用する継続出願第0 8/082,038号(出願日1993年6月22日)に記載されている。しか しながら、SKSのようなテストサービスは、種々の作成者により作成されたコン ピュータによるテストの施行を引き受けようとすれば、上述した管理の仕事を行 なうため各作成者が別個の管理システムを提供する以外方法がない。 さらに、コンピュータによるテスト施行システムは、特に管理システムが作動 中の場合、新しいテストを追加したり、古いテストを削除したり、テストを実施 可能な状態に或いは実施不可能な状態にしたり、若しくは副次的なシステム機能 を追加したり、それらを容易に作動或いは非作動状態にできるような特徴を備え ていない。 したがって、管理の仕事専用にされたワークステーション上において汎用且つ 柔軟性のある管理システムを提供する必要が存在する。発明の概要 本発明は、コンピュータによるテストを管理するための集中管理システム及び 方法を提供することによってこの必要性を充足する。本発明のシステムは、中央 管理ワークステーションを始動させるための始動手順を提供し且つ中央管理ワー クステーションのディスプレイ上にメインメニューを表示するようなソフトウエ ア構成を有する。このシステムはまた、予約データより成るテスト予約状況の更 新データを受け、予約されたテストを受験者に対して実施する少なくとも1つの テスト用ワークステーションを始動するための1日開始サブシステムを提供する 。サービス開始モジュール及び一般的なステーション管理モジュールより成るテ スト開始サブシステムは、コンピュータによるテストを呼び出して実施するため に用いるジョブ情報ファイルとジョブデータファイルを発生させる。管理者はチ ェ ックインサブシステムを用いて、各受験者のIDと予約データを確認し且つ受験 者が到着して予約したコンピュータによるテストを受け得る状態にあるという指 示を管理システムに与える。管理システムが作動中発生した任意の記録を独立の データセンターへ送るために1日終了サブシステムが設けられている。好ましく は通信マネジャーがテストセンターと独立のデータセンターとの間に設けらてデ ータを送受信する。 本発明による集中管理システムはテストセンターにおいて実現するのが好まし く、このテストセンターには1つの中央管理ワークステーション、1つのファイ ルサーバー及び少なくとも1つのテスト用ワークステーションが提供される。中 央管理ワークステーションは好ましくは、管理カーネル、1日開始手順、サービ ス開始手順、中央ステーション管理手順を実行するように構成されている。これ らの手順の組み合わせにより、管理者は1日の開始、1日の終了、チェックイン 、保守、サービス開始、サービス再開、及びセンターメッセージの伝達の仕事を 行なうことができる。テスト用ワークステーションは、テストを開始させ管理す るテスト実施アプリケーションを呼び出す。テスト用ワークステーションはテス ト用カーネル及びテスト用ステーション管理手順を実行するように構成されてい る。好ましい実施例のファイルサーバーは、中央管理ワークステーション及びテ スト用ワークステーションにとって唯一のメモリを提供する。 本発明の方法は、特異なロッグインIDを用い中央管理ワークステーションに ロッグオンしてまず管理システムを呼び出すことにより実施される。その後、あ る特定の期間に亘ってそのテストセンターでテストを受ける予約をした各受験者 を同定する予約データの入力をその管理システムが受ける。管理者は、受験者が テストを受けるためテストセンターに到着すると各受験者に関連する予約データ を検証する。その際、管理者は受験者がテストを受け得る状態にあることを管理 システムに指示する。次いで、受験者は中央管理ワークステーションの場所から 離れたテストルームに設置された1つのテスト用ワークステーションへエスコー トされる。管理システムはそのテスト用ワークステーション上において受験者に 標準テストを開始させる。好ましくは、テスト中、受験者の回答が受験者成績フ ァイルに記録され、それに続いて適当な後処理システムへ送られてそこでその回 答が採点される。図面の簡単な説明 本発明の以下の詳細な説明を添付図面と共に参照するとより良く理解され、そ の多くの目的及び利点が明らかになるであろう。 図1は典型的なコンピュータによるテストの構成を示すブロック図である。 図2は本発明の好ましい実施例によるハードウエアアーキテクチュアのブロッ ク図である。 図3は本発明の好ましい実施例によるコンピュータによるテスト施行システム の管理システムの1つの実例を示すブロック図である。 図4は本発明の好ましい実施例によるソフトウエアアーキテクチュアのブロッ ク図である。 図5は管理ワークステーション開始手順の機能的な流れ図である。 図6は中央管理ワークステーションのディスプレイ上に表示されるメインメニ ューの一例である。 図7は1日開始管理手順の機能的な流れ図である。 図8はチェックイン手順の機能的な流れ図である。 図9はサービス開始手順の機能的な流れ図である。 図10Aは中央管理ワークステーションにより表示されるチェックインスクリ ーンの一例である。 図10Bは中央管理ワークステーション上に表示されるエスコートメッセージ スクリーンの一例である。 図11はテストを開始し終了させるための管理手順を示す機能的な流れ図であ る。 図12はテスト用ワークステーション上に表示される受験者確認スクリーンの 一例である。 図13は1日終了手順の機能的な流れ図である。詳細な説明 図2はテストセンターにおける管理システムの好ましい実施例の基本的なハー ドウエアアーキテクチュアを示すブロック図である。図2に示すように、このハ ードウエアは1つの中央管理ワークステーション5、1つのファイルサーバー6 、1または2以上のテスト用ワークステーション7より成る。好ましい実施例に おいて、中央管理ワークステーション5はIBM PS2/35であり、最小限 4メガバイトのRAM、標準型VGAモニター、標準型マウス、1.44メガバ イトフロッピードライブ、及びMNPで通信可能な9600ボウ、V.32/V .42のZoomモデムである。この実施例におけるテスト用ワークステーショ ン7は同一構成であり、即ち最小限4メガバイトのRAM、標準型VGAモニタ ー及び標準型マウスを有するIBM PS2/35である。テスト用ワークステ ーション7はフロッピードライブ具備しないのが好ましく、このため権限のない 人は情報をファイルサーバー6上に或いはデータまたはファイルをファイルサー バー6からコピーすることができない。 この好ましい実施例のファイルサーバー6は最小限8メガバイトのRAM、フ ロッピーディスクドライブ、内部テープバックアップユニット及びモノクロのモ ニターを有するIBM PS2/57SXである。中央管理ワークステーション 5及びテスト用ワークステーション7は、ワークステーションがそのファイル及 びデータを権限のない人によるアクセスまたは操作から守るために単一の永久デ ィスク記憶装置として働くのが好ましいファイルサーバー6へエサーネット(Eth erNet)を介して接続されている。しかしながら、他のコンパチブルなハードウエ アも使用できることも理解されたい。 中央管理ワークステーション5は通常、テストルームの外に設置され、例えば 下記の目的のため使用される。 −システム開始及びシステム停止手順を実行する、 −予約のスケジューリングを行なう、 −到着した受験者のチェックインを行なう、 −所定のテストステーションにおいて受験者のテストを開始させる、 −テスト用ワークステーションまたは一般的な管理システムが故障した後テス トを再開する、 −新しい管理者の追加、他の人のアクセス権の変更等のような日常のシステム 機能を提供する、 −継続中のファイル及び業務を独立のデータセンターへ送る、及び −ファイル及び業務を受けで種々のソフトウエアコンポーネントへの配布を行 う。 −通常、テスト用ワークステーション7はテストルーム内に設置されている。 好ましくは、テスト用ワークステーション7に中央管理ワークステーションの機 能は付与されない。例えば、テスト用ワークステーション7は下記の仕事を行う 。 −テストを開始させる、 −テストを終了させる、 −中央管理ワークステーションからの命令により進行中のテストを中断させる 。 図3は、コンピュータによるテスト施行システムの管理システム10及びその インターフェイスの構成を示すブロック図である。テストを受けるために受験者 20が登録手続をすると、独立のデータセンター12がこの受験者が特定の日時 に所定のテストセンターで所定のテストを受けられるようにスケジューリングを 行なう。独立のデータセンター12はSKSのような独立のテストサービス会社 により運営されている。受験者20及び受験者の予約を識別するための情報は受 験者の予約データとして提示され、独立のデータセンター12のデータベースに 蓄積される。 好ましい実施例において、テストセンターの管理者は毎日、任意のテストを始 める前にテストセンターの中央管理ワークステーション上において管理システム 10を始動させる。中央管理ワークステーションの始動手順の間、独立のデータ センター12は図3に示すように予約データを管理システム10へ送る。別の方 法として、受験者20がテストセンターへ来てテストを受ける前に登録手続きが できるように中央管理ワークステーション上にオンライン登録及びスケジューリ ングシステム(図示せず)を提供するようにしてもよい。予約データが登録及び スケジューリングシステムにより作成されて管理システム10へ送られ、この管 理システム10が予約データを独立のデータセンター12へ送信して適当なデー タベースに蓄積させる。 テストの間の受験者の行動、例えばコンピュータによるテストが提示する質問 に対する受験者の回答を記録するために、テストの間、受験者の成績記録(EP R)が作成される。秘密保持関連(ESL)記録もまた毎日作成するのが好まし い。このESLはコンピュータシステム及びテストの秘密保持に関連する情報、 例えば管理システム開始手順を呼び出した管理者のID及びテストを開始させた 各管理者の名前を記録する。EPR及びESLのフォーマット及び内容の一例は 継続出願第08/082,038号にある。さらに、好ましい実施例では、テス トの間受験者が機器に関して遭遇する問題、及びテスト中のテストセンターの状 況に関連する問題、例えばテストルームが暑すぎるという問題を報告するために 異常事態報告記録(IRR)が発生される。 EPR、ISL、IRRは独立のデータセンター12へ送信され、このセンタ ーがそれらをルータ14へ送る。ルータ14は記録の種類に応じてこれらの記録 を分離させる。EPRは適当なネットワークデータ配布システム(NDDS)1 6へ送られ、このシステムがテストプログラムの特定のフォーマットにしたがっ て採点するため各EPRをフォーマットする。NDDSの一例及びこのフォーマ ット手順の説明は継続出願第08/082,038号に記載されている。ESL 及びIRRはテストセンターにおける装置及び秘密保持上の問題をモニターでき るようにオペレーションセンター22へ送られる。例えば、継続出願第08/0 82,038号に記載されるように毎日の活動レポートをこれらの記録に基づき 作成することができる。 テストプログラムオペレーション18は受験者20の回答を採点して受験者の 採点レポートを作成する。採点システムパラメータは特定のテストプログラム、 例えばGREなどに応じて異なる。好ましい実施例におけるテストプログラムオ ペレーション18はオペレーションセンター22からIRR情報を受けて、各受 験者のテスト中テストセンターで生じた秘密保持または装置の問題が受験者の採 点レポートに反映されるようにする。 さらに好ましい実施例では、図3に示すように、管理システム10はオペレー ションセンター22または独立のデータセンター12からオンラインメッセージ を受信するように構成されている。かかるオンラインメッセージ機能により、装 置の故障または秘密保持上の問題が発生した場合リアルタイムの指示をテストセ ンターの管理者へ送ることができる。 本発明の実施例による管理システムアーキテクチュアを図4に示す。この管理 システムのアーキテクチュアは、中央管理ワークステーションまたは各テスト用 ワークステーションのいずれかで実行される幾つかのサブシステムを含む。図4 に示すように、管理カーネル30、1日開始(SOD)サブシステム32、1日 終了(COD)サブシステム34及びテスト開始サブシステム38が中央管理ワ ークステーション上で実行される。テストステーションカーネル40及びテスト ステーション管理サブシステム42はテスト用ワークステーション上で実行され る。 管理カーネル30は管理者がシステムを始動させた結果として中央管理ワーク ステーションのオペレーティングシステムにより実行される。以下においてそれ が提供する幾つかの機能の例を示す。 −システムメニューを表示し、メニューの項目に関連するプログラムを実行す る、 −独立のデータセンターまたはオペレーションセンターから送られてきたメッ セージをシステムの管理者に表示する、 −ウィルスを走査検出する、 −システムが一晩中管理者がいない状態に置かれる場合1日終了手順(以下に おいて説明する)を自動的に実行する、 −メニュー項目へ権限のないものがアクセスするのを阻止するためロッグイン によるアクセス安全防護策を提供する。 1日開始(SOD)サブシステム32はシステム開始手順の一部として実行さ れるプログラムに与えられた一般的なタイトルである。使用可能な管理システム 機能を実行するプログラムは、独立のデータセンターの必要に応じて各テストセ ンターのファイルサーバー上にプロフィール50として蓄積される。プロフィー ルのフォーマットは幾つかのフィールドを含む場合があり、このフィールドには 管理システム開始手順の間実行する必要のある機能を同定するためのフィールド を含む。プロフィール50の1つの例示的なフォーマットを付録Aに示す。SO Dサブシステム32はプロフィールをチェックして管理システムの開始時どの機 能を実行させるべきかを決定する。SODサブシステム32はまた独立のデータ センターから予約データをダウンロードするのが好ましい。 かくして1日終了(COD)サブシステム34は管理システムの作動を停止さ せる前に実行するのが好ましい。このサブシステムは各予約の状態を独立のデー タセンターへ向けてアップロードする。 図4に示すスケジューリング/登録モジュール36は、テストのスケジューリ ングを行ない、受験者をチェックインし、予定されたテストをキャンセルし、他 の同様なタスクを実行できるようにする。このモジュールは好ましくは特定のテ スト施行プログラムまたはコンピュータによるテストを管理する特定のテストサ ービス(例えばSKS)に応じて特別に作られている。したがって、スケジュー リング/登録モジュール36は、好ましくはテスト作成者またはテストサービス により提供される。したがって、本発明の好ましい実施例による管理システムは 図4において点線で示すようにスケジューリング/登録モジュール36を含まな いが、スケジューリング/登録モジュール36へのインターフェイスを含む。し かしながら、本発明の管理システムにより適当なスケジューリング/登録モジュ ール36を提供できることを理解されたい。 テスト開始サブシステム38は2つのソフトウエアモジュールより成る。テス トの予約をした受験者のリストを表示するサービス開始モジュール、及び特定の 受験者のテスト開始前においてテストプログラムの特定の特徴となる或る種のプ ログラムに対して与えられる一般的な名称である中央ステーション管理モジュー ルである。 これらの特徴はテストプログラムの必要性に応じて異なる。例えば、GREテ ストでは写真を撮ることのが必要である。したがって、GREの中央管理ステー ションの管理モジュールは好ましくは写真の存否をチェックする。 テスト開始サブシステム38はジョブ情報ファイル49及びジョブデータファ イル51を作成し、これらはそれぞれテストステーションカーネル40とテスト ステーション管理42を指示する。 コンピュータによるテストは管理者が受験者のIDと予約データを最終的に確 認した後テスト用ワークステーションで受けられる。 テストステーションカーネル40は管理者がテスト用ワークステーションを始 動させた結果オペレーティングシステムにより実行される。以下おいてそれが提 供可能な機能の例を示す。 −管理者と共に日時を確認する、 −管理者がテスト用ワークステーションにステーション番号を付与できるよう にする、 −中央管理ワークステーション上で実行されるテスト開始サブシステム38の サービス開始モジュールからのジョブ情報ファイル49に応答する、 −予備的な管理者確認スクリーンを表示する、 −テストの最中であってもワークステーションを迅速に停止できる中央管理ワ ークステーションからの「停止信号」に応答させる。 テストステーション管理42はテストステーションカーネル40とテスト実施 アプリケーション44との間にあるソフトウエアの総称である。このコンポーネ ントにより実行される機能はテストプログラムの必要性に応じて決定される。し かしながら、その典型的な用途は、(a)受験者確認スクリーンを表示し、(b )管理システムデータをテスト実施アプリケーションの標準フォーマットに変換 することである。テスト実施アプリケーション44の一例は継続出願第08/0 82,038号に記載されている。テスト実施アプリケーション44の主要な機 能はコンピュータによるテストを実施することである。 図5は管理ワークステーションの開始手順の機能的な流れ図である。管理者は まず図5の60に示す個人的なログインIDを用いてオペレーティングシステム から中央管理ワークステーションにログオンする。この操作により管理カーネル が呼び出される。管理カーネルの第1の仕事は62において内部の初期化を実行 することである。好ましい実施例において、管理カーネルは重要なソフトウエア 及びデータのファイルが破壊されていないことを検証する。これは、継続出願第 08/082,038号に記載された市販のウィルス走査検出ソフトウエアを用 いて行なうことができる。初期化62が完了すると、図6に示すメインメニュー が64において表示される。その後管理カーネルは管理者が66においてメイン メニューのオプションの1つを選択するのを待つ。このオプションにはSOD7 0、チェックイン80、サービス開始90、COD100、オペレーティングシ ステムへの脱出110、サービス再開120、IRR130及びセンターメッセ ージ140が含まれるが、それらに限定されない。 1日の開始、即ちシステムが給電停止後再開されていない場合、管理者は70 においてメインメニューからSODのオプションを選択する。これにより、図7 に示すSOD管理手順が呼び出される。この手順の第1のそして主要な機能は7 2に示す独立のデータセンターを呼び出して予約データを受けることであるのが 好ましい。好ましい実施例において、このSOD手順はテストが実施される日毎 に実行され、予約データにはその日の実質的にすべての予約が含まれる。メイン メニューは74において再び表示できる。SOD手順及び開始手順は中央管理ワ ークステーション上で実行されるが、これは管理カーネルの一部である。管理カ ーネルプログラムの詳細なフローチャート及び擬似コードが付録Bに与えられて いる。 SOD管理手順はテスト用ワークステーションにおいて継続する。次に、管理 者がテストルームに入り、75において好ましくは中央管理ステーションへのロ グインとは異なるログインを用いることにより1つずつ各テスト用ワークステー ションにログインする。ログインの結果、オペレーティングシステムが自動的に テストステーションカーネルを自動的に実行する。各テスト用ワークステーショ ンが始動されると、テストステーションカーネルは管理者が日付と時間を確認し てステーション番号を入力するように促す。76においてステーション番号をチ ェックすることにより、同じ番号に他のいずれのテスト用ワークステーションも 割り当てられていないことを確認する。77においてすべてのテスト用ワークス テーションにステーション番号が割り当てられたことが判明すると、テストステ ーションカーネルが適当なアイドルスクリーンを表示し、78においてジョブ情 報ファイルのポーリングを開始させる。テストステーションカーネルプログラム の詳細なフローチャート及びそれに付随する擬似コードを付録Cに示す。 テストを受ける受験者が到着すると、管理者はメインメニューから図5の80 で示すチェックインのオプションを選択する。チェックイン手順の流れ図を図8 に示す。図8の82で示すように、これによりスケジューリング/登録モジュー ルの対応チェックイン機能が呼び出される。管理者はその後84においてスケジ ューリング/登録モジュールから得られる受験者の予約データを調べ、85にお いて受験者がテストを受け得る状態にあるという指示を与える。その後、86に おいてメインメニューが再び表示され、管理カーネルが次のメニューの選択を待 つ。 次のステップはメインメニューから図5の90に示すサービス開始のオプショ ンを呼び出すことである。サービス開始手順の流れ図を図9に示す。サービス開 始モジュールは91において予約リストを表示する。チェックインしたばかりの 受験者は一例として図10に示すスクリーン上のリストに現れる。管理者は92 においてこのリストから受験者を選択する。その後、93においてサービス開始 モジュールはテストプログラムのための中央ステーション管理モジュールを呼び 出す。 中央ステーション管理モジュールはテストプログラムにより必要とされる任意 のタスクを実行する。例えば、写真が撮られているか否かの判定を行って、必要 であれば管理者に写真を撮ることを促し、また管理者に重要なIDなどを調べる ように促す。すべての情報を調べる情報チェックが完了すると、中央ステーショ ン管理モジュールは内部ルールに基づくサブテストの1つを実行し、受験者とテ スト実施情報を含むデータファイルを書き込む。 さらに詳細には、ジョブデータファイルはテスト実施アプリケーションにより 必要とされる情報を含む。それに含まれる情報の幾つかの例を示すと下記の通り である。 −受験者名、 −受験者ID、 −受験者の生年月日、 −受験者社会保険番号、 −テスト許可番号、 −前に開始されたが中断したテストの再開か否かを示すフラグ、 −上記フラグが再開を指示する場合再開の種類を示すフラグ、 −送られてくるパッケージ名を含むストリング、 −パッケージタイトル(例えば、GRE一般テスト)、 −ディスク上のどこでそのパッケージを見付けることができるかを記載したス トリング、 −得られた受験者成績記録をディスク上のどこに書き込むべきかを記載したス トリング、 −送るべき動的に選択されたテストコンポーネントの数(おそらくゼロ)、 −テストコンポーネントそれ自体(もしあれば)、 −受験者成績記録の完全な構成のテスト開始記録。 中央ステーション管理は脱出して、コードを開始サービスモジュールヘ戻す。 詳細なフローチャート及びそれに付随する擬似コードは付録D及びEに示されて いる。 リターンコードにより中央ステーション管理が満足すべきものであったことが 示されると、95においてサービス開始モジュールがテストステーションカーネ ルのためにジョブ情報ファイルを書き込み、脱出する。ジョブ情報ファイルは2 つのASCIIライン、即ちコマンドライン及び予約番号ラインを含むのが好ま しい。コマンドラインは好ましくは、開始/再開指示手段、テストプログラム名 及びそれが必要とする任意の引き数を含む完全格づけされたストリングである。 予約番号ラインは予約番号を含むストリングである。 管理システムはその後、図10Bに示すようなエスコートメッセージを表示す る。管理者はその後、受験者をテストルーム内の割り当てられたテスト用ワーク ステーションへエスコートする。その後、97において管理システムカーネルが メインメニューを再表示する。 ところで、受験者に割り当てられたテスト用ワークステーション上のテストス テーションカーネルは図11の150においてジョブ情報ファイルを検知し、そ れに含まれる情報を151で処理し、152で予備的な確認スクリーンを表示す る。 管理者はテスト用ワークステーションへ到着すると予備的確認スクリーンを調 べ、153において特異なオーバーライドキー手順によりキー入力する。テスト ステーションカーネルは154においてテストプログラムのためのテストステー ション管理プログラムを実行するが、これは155においてジョブ情報ファイル により特定される。 テストステーション管理はジョブデータファイル155を読み取り、156に おいて受験者確認スクリーンを表示する。受験者確認スクリーンの一例を図12 に示す。受験者はその情報をチェックする。 その情報が正しければ受験はエンターを押すが、これにより157においてテ スト実施アプリケーション(TDA)が開始される。テストステーション管理は 158においてTDAからリターンステイタスを得べくポーリングを行なう。テ ストステーション管理がTDAのリターンステイタスを検知すると、以下の如き 処理が行われる。テストステーション管理が160においてクリーンアップし、 テストステーションカーネルに信号を送ると、カーネルがクリーンアップして予 約を適当な状態にセットする。 テストが成功裡に終了した場合、受験者成績レコード、写真などが通信マネー ジャへ送られ、最終的にEPSへ送信される。その後160において、テストス テーション管理がクリーンアップを行って、テストステーションカーネルに信号 を送ると、カーネルがクリーンアップして、予約状態を、予約が最早サービス開 始または再開サービスのいずれにも現れないようにセットする。 或いは、EPR、写真などが保持され、テストを再開できるサービス再開リス ト(以下において説明する)に現れるように予約状態がセットされる。 その情報が正しくない場合、受験者は156において管理者に通告する。管理 者は161において特別なキーの組合わせを入力して管理オーバライドを強制的 に導入する。これによりテストステーション管理が終了し、アボートコードがテ ストステーションカーネルに戻され、それに応じて予約の状態がセットされる。 テストステーション管理プログラムの詳細なフローチャート及びそれに付随する 擬似コードを付録Fに示す。 管理者の介入またはシステムの故障のいずれかにより異常な状態で終了したテ ストを再開サービスにより再開することができる。再開サービスモジュールはそ のテストが中断した受験者のリストを表示する。 上述したように、TDAはテストステーション管理サブシステムにリターンス テイタスを送る。テストが中断した場合、テストステーション管理サブシステム はジョブデータファイルを更新するが、「JOB」パラメータは再開可能な状態 にセットされている。詳細なフローチャート及びそれに付随する擬似コードが付 録Fに与えられている。好ましい実施例では、管理者は再開サービスによりその リストから再開すべきテストを選択できるに過ぎない。選択を行うと、図10B に示すエスコートメッセージが表示される。管理者がエスコートメッセージを確 認すると、ジョブ情報ファイルが書き込まれ(今度は再開インジケータと共に) テストステーションカーネルと再開サービスが指示される。開始サービス手順の 間に作成されたジョブデータファイルは再開サービス手順の間に再利用されるの が好ましく、このためテスト再開のためにテストプログラムに固有の特徴は必要 ではない。その後、管理者は受験者をテストルームの割り当てたテスト用ワーク ステーションにエスコートする。テストステーションにおいて生じる出来事の時 系列、即ちテストステーションカーネルからテストステーション管理を経てテス ト実施アプリケーションへ至る間、各テストプログラムがこれは後処理の目的の ための再開であると通告される点を除くと、開始サービス手順に関連して上述し たと同じように実行される。 上述した時系列はその日の間仕事の終了時まで繰り返される。図13は管理者 のCODプロセスの流れ図である。テストサービスにより決定されたテスト日ま たは他のテスト期間の終了時、管理者は101においてテストルームを再入力し 各テスト用ワークステーションを停止させる。中央管理ワークステーションを再 び参照して、管理者は100において1日終了メニューの項目を選択し、テスト プログラムが1つの場合各テストプログラムのCODプログラムを呼び出す。 CODプログラムにより多くのタスクを実行できるが、その幾つかの例を以下 に示す。 −すべての予約のステイタスを103においてロッグ記録に書き込み、104 において独立したデータセンタへ戻す。 −中断し再開されなかったテストのEPR、写真などを通信マネージャへ送り 、104において示すように適当なテスト作成者へ送信する。 −105に示すように、その日の出席者ファイルがファイルサーバーから削除 される。 1日の終了手順が終了すると、106において管理システムカーネルがメイン メニューを再表示し、次の1日開始手順の開始を待つ。 その後、図5の110で示すように、管理者は管理システムをロッグオフする ことによりオペレーティングシステムへ脱出できる。図6に示すように、例えば 、DOSへの脱出ボタンがメインメニューに与えられている。 使用可能な状態にすることができるテスト用ワークステーションの別の特徴は 図6に示す「ステーション再割当て」オプションである。この特徴は、装置の故 障によって、またはテスト用ワークステーションが別の目的で用いられている時 のように、1または2以上のテスト用ワークステーションが使用不能である場合 に利用できる。ワークステーション番号は、テストが実施中でない予約のリスト から1つの予約を選択し、ステーションのリストから1つのステーションを選択 することにより、再割当て可能である。選択が確認されると、選択された予約が その選択されたステーション番号で更新される。 上述したチェックイン機能とは別に、管理者に中央管理ワークステーションを 用いて他の管理機能を実行できる能力を与えるようにしてもよい。例えば、テス トプログラムの幾つかは予約したテストを受ける前に受験者の写真を撮ることが 必要である。写真撮影ボタンにより管理者は受験者の写真を撮ってそれをデジタ ル的に受験者のID及び予約データと共に蓄積することができる。電子的な画像 撮影方法は当業者に一般的に知られている。 本発明の好ましい実施例の管理システムがアクセスできる別の管理機能として 図6に示すスケジューリング/登録機能がある。このボタンを選択すると、管理 者はオンラインスケジューリング/管理施設にアクセスでき、これにより受験者 はテストセンターに来場して登録を行ないテストの予約をすることができる。し かしながら、このスケジューリング/登録ソフトウエアは、特定のテストセンタ ーでテストを管理するテストサービスにより提供されるのが好ましい。 図6に示す異常事態報告ボタンは管理者が異常事態報告を作成したい場合に選 択する。例えば、テスト中発生した機器の或る種の故障が受験者にとって問題で ある場合、テストを管理するテストサービス及びテスト作成者がかかる事実の通 告を受けたい場合がある。一例として、暑い日にテストセンターの空調機器が故 障した場合、その日にテストを受けている受験者全員の成績はもしテストルーム が空調されていた場合ほどよくないことがあろう。したがって、かかる情報は受 験者の回答を採点するテストプログラムオペレーションにとって役立つものであ り、また受験者の回答によりテストの評価を行なうテスト作成者にも役に立つ。 異常事態報告は、異常事態報告として表示可能なフォーマットを有するログファ イルを作成し、所望の情報を有するログ記録をそのファイルに書き込むことによ って作成することができる。 図6に示す「ロックスクリーン」ボタンは管理者が中央管理ワークステーショ ンを管理者のいない状態にしておきたい場合に選択するものである。これにより 管理システムカーネルはアイドルスクリーンを表示する。このスクリーンのロッ クを外すためには、管理者が管理オーバーライド用のキー組合わせを入力する必 要がある。これによりログインスクリーンが現れ、ログインを成功裡に行なうと メインメニューが再表示される。 図6に示す「センターメッセージ」ボタンは、管理者が待機状態にあるメッセ ージの順番を調べるために選択するものである。選択されると、プログラムは並 べられた各メッセージの短い説明を、そのメッセージを読むために必要なセキュ リティレベルと共に表示するのが好ましくい。管理者はリストからメッセージを 選択し、管理者が必要とされるセキュリティレベルを持っていればそのメッセー ジが表示される。その後、管理者はそのメッセージを印刷するかまたは削除でき る。メッセージを処理した後、残りのメッセージのリストが表示される。 図6に示す「セキュリティ保守」ボタンは、管理者がパスワードをリセットし 、最も高いレベルの管理者であれば任意の他の管理者のパスワードをリセットし 、または任意の管理者のためにログイン情報を追加、削除または変更するために 管理者が選択するものである。 図6に示す「データ引出し」ボタンは、通信マネジャーにより以前独立したデ ータセンターへ送られたデータのバックアップコピーをコピーするために選択さ れるものである。選択されると、プログラムはシステムが作動状態にあった最近 の何日かの間得られたデータのリストを表示するのが好ましい。その後、管理者 は日付を選択する。次いで、プログラムは管理者にフロッピーディスクを挿入し てその日に送信されたデータをフロッピーディスクにコピーするように促す。そ れが完了するとプログラムが脱出する。 図6に示す「システムステイタス」ボタンは、例えば下記の情報を表示するた めに管理者が選択するものである。 −日付及び時間、 −センター番号及び名称、 −利用可能なディスクスペース(バイトで)、 −通信ステイタス、即ち通信がオンかオフか、 −ステーション情報、即ちステーションが作動状態或いは使用可能状態にある か、受験者が作動中のステーションにいるか、テストが実施中であるか、 −インストールされた機能、ステイタス(作動状態かまたは非作動状態か)及 び機能のバージョンのリスト。 図6に示す「システム保守」ボタンは、管理者がシステムの保守をディスケッ トから行なう場合に選択するものである。選択されると、管理者はディスケット を挿入するように促される。ディスケットは、それが有効な保守用ディスケット であり、使用中のセンターに対応するものであることを確認するためにチェック するのが好ましい。もしそうであれば、ディスケットからファイルサーバーへ仕 事の順番がコピーされ、プログラムを脱出する。バックグラウンド保守プログラ ムはしかるべきとき管理システムカーネルにより実行されることが好ましい。保 守プログラムは新しい仕事の順番を検知してそれらを利用する。仕事の順番には ファイルまたは命令、及び仕事の順番を直ちに適用するか或いは作動状態にある 命令を待つか(以下に説明する)を保守プログラムに指示するフラッグを含まれ る。ファイルにはプロフィール、データ、プログラムまたは任意の他のシステム ファイルがファイルの行き先と共に含まれる。保守プログラムはファイルを特定 の行き先へ移動することによって「利用」する。これら幾つかの可能性のある命 令の例を下記に示す。 −機能(プロフィール)を作動状態または非作動状態にするかの作動命令、 −前に送られたが適用されなかった仕事の順番を使用できる状態にするか或い は除去する作動及び非作動命令、 −インストールしたプロフィール及びそのプロフィールに関連するデータを除 去する登録取消し、 −特定のファイルを除去する削除。 本発明を特定の実施例に関連して説明し図示したが、当業者は変形例及び設計 変更が以下の特許請求の範囲に示した本発明の精神から逸脱することなく実施可 能であることを認識するであろう。付録A プロフィールのためのフォーマット例 プロフィールフォーマット フィールド 説 明 コード 機能番号(例えば、01000)を含む ルートディレクトリ この機能のルートディレクトリを含む。この機能に関連 するすべての情報はこのディレクトリに包まれる。 ワーキング 初期設定のワーキングディレクトリ、即ちこの機能のた ディレクトリ めのプログラムまたはデータのルートディレクトリを含 む。 保守パスワード この機能の保守を行なうために保守サブシステム(もし あれば)がマッチする必要のあるパスワード 機能名 報告に現れるこの機能のフルネーム(例えば、XYZ職 業評価テストプログラム) イベント名 スクリーン表示に用いられる機能名を短縮したもの(例 えばXYZ評価テスト) 短いタイトル 限られた情報のみが得られるが得られる場合スクリーン 表示に用いられる機能名の非常に短い要約(例えば、X YZテスト) ボタンタイトル この機能がシステムメニューに現れる場合ボタンに現れ る短いタイトル(例えば、1日開始) ボタン メニュー内のこの機能のボタンの配置を制御するために プライオリティ 用いる整数値。低い値がメニューの上方に現れる QCステイタス この機能のステイタス.考えられる幾つかの値は下記の 通りである。 0−作動状態 1−MaintQcの故障 2−SODQC故障 3−管理者が実行不能 ネットステイタス 外部のグループ(例えば、オペレーションセンタグルー プ)がこのフィールドを介してこの機能を作動状態にま たは非作動状態にできる。許容可能な幾つかの値は下記 の通りである 0−作動状態 1−ネットワーク管理が非作動状態 システムの種類 この機能に関連するプログラムを走らせるために用いる ホストオペレーティングシステム 機能の種類 この機能をいかに用いるかを決定する。考えられる幾つ かの値は下記の通りである。 0−システム 1−管理 2−テスト 3−サポート 4−デモテスト さらにこの機能がメニューのボタンとして現れる場合、 値0−2は好ましくはボタンを適当なメニューのコラム に配置するように用いられる。 実行パス この機能のための任意のプログラムを実行する前にオペ レーティングシステムの環境に付加される値 実行命令ライン ユーザがメニューのボタンをクリック・オンし/または 「1日開始フィールド実行」パラメータが真であれば実 行するプログラム 始動時における実行 真であれば、カーネルが開始される度に管理システムカ ーネルの初期化手順の間実行命令ラインが実行される 従属関係 この機能を使用できる前に作動状態にする必要のある他 の機能のリスト 使用可能性 この機能が作動状態にあるのを判定する。考えられる幾 つかの値は下記の通りである。 0−作動及び非作動状態の両方の間使用可能 1−作動状態の間のみ使用可能 2−非作動状態の間のみ使用可能 QCチェック 真であれば、この機能は1日開始処理時にQCチェック される。 プログラムにつき 1日開始または1日終了等により使用可能なこの機能に 特有のコードを含むロードモジュールの名称 リターンEPR 真であれば、受験者成績記録はテスト完了時または1日 終了若しくは他の場合に戻される。もし非真であれば除 去される 写真が必要 真であれば、テスト開始前に受験者の電子写真が必要 ユーザ この機能がメニュー上に表示されている場合、この機能 セキュリティレベル を実行するため管理者が所持する必要のある最低限のセ キュリティレベル カストマーサービス テストステーションカーネルによりテストステーション 命令ライン 管理として実行されるプログラム(もしあれば)の名称 を含む 1日開始実行 1日開始手順の間実行されるプログラムの名称を含む 1日開始手順 1日開始実行も含む他のすべての機能のリストにあるこ の機能の1日開始実行の順番を決める値を含む。低い値 ほど先に実行される 1日終了実行 1日終了手順の間実行されるプログラムの名称を含む 1日終了手順 1日終了実行も含む他のすべての機能のリストにおいて この機能の1日終了実行の順番を決める値を含む。低い 値ほど先に実行される。 プロフィールは、システムプログラム及びテストプログラムデータの両方のた めの重要な構成情報の伝達手段である。例えば、システムメニューにボタンを付 加し且つシステムにテストプログラムのデータを付加するためにプロフィールが 必要とされる。

Claims (1)

  1. 【特許請求の範囲】 1.少なくとも1つのテスト用ワークステーション上で複数の受験者へ実施され るコンピュータによるテストを管理するための集中管理システムであって、各受 験者が選択したコンピュータによるテストを受けるために予約し、前記予約がス ケジューリング及び登録モジュールによってスケジューリングされ、前記システ ムが、 集中管理システムに用意された管理機能を同定し関連の情報を有する複数のプ ロフィールと、 複数のプロフィールの少なくとも一部により同定される管理機能を実行し且つ 各受験者のIDと予約に関する入力をスケジューリング及び登録モジュールから 受ける1日開始(SOD)サブシステムと、 SODサブシステムに結合されて予約データの入力を受け、選択したコンピュ ータによるテストを受けるため各受験者が到着するとその各受験者と共に予約デ ータを確認するチェックインサブシステムと、 SODサブシステム及びチェックインサブシステムに結合されて各受験者の到 着後選択したコンピュータによるテストを呼び出すに必要なテストデータを有す るジョブ情報ファイルを作成するサービス開始モジュールと、 サービス開始モジュールに結合されてそのモジュールによりジョブ情報ファイ ルが作成されるとそのジョブ情報ファイルを検知し、その後複数のプロフィール の少なくとも一部により同定される管理機能の実行させ適当なテスト実施アプリ ケーションを用いる選択したコンピュータによるテストを開始させるテストステ ーションカーネルと より成る集中管理システム。 2.ディスプレイを備え且つ各テスト用ワークステーションから離れたところに ある中央管理ワークステーションが提供され、前記システムはさらに、 中央管理ワークステーションを初期化しメニューを表示するための開始手順よ り成り、そのメニューから権限のある管理者がSODサブシステム及びチェック インサブシステムを実行でき、開始手順、SODサブシステム、開始サービスモ ジュール及びチエックインサブシステムが中央管理ワークステーションから始動 される請求項1のシステム。 3.ディスプレイを備え且つ各テスト用ワークステーションから離れたところに ある中央管理ワークステーションが提供され、テスト用ワークステーション及び 中央管理ワークステーションがテスト用ワークステーションと中央管理ワークス テーションの両方のためのプログラム及びデータ蓄積手段を提供するファイルサ ーバーに結合されている請求項1のシステム。 4.ファイルサーバーは集中管理システムのために実質的にすべてのデータ蓄積 を行なう請求項3のシステム。 5.適当なテスト実施アプリケーションは少なくとも1つのログ記録を発生させ 、前記システムはさらに このようにして発生されたログ記録を適当な後処理システムに送信する1日終 了サブシステムより成る請求項1のシステム。 6.コンピュータによるテストシステムを用いる標準テストを管理する方法であ って、標準テストはテストセンターを構成する少なくとも1つの場所で複数の受 験者に実施され、各テストセンターは標準テストを複数の受験者の各々に実施可 能な少なくとも1つのテスト用ワークステーションと、標準テストを管理する中 央管理ワークステーションとを用意しており、 テスト用ワークステーション及び中央管理ワークステーションから用意され実 行される管理機能を同定しそれに関連する情報を有する複数のプロフィールを蓄 積し、 コンピュータによるテストシステムの自動化された管理システムを呼び出して 特異なログインIDにより中央管理ワークステーションにログオンすることによ り管理システムを作動状態にし、 複数のプロフィールの少なくとも一部により同定される管理機能を実行し且つ 特定の期間に亘って1つのテストセンターで標準テストを受ける予約をした各受 験者を同定する予約データの入力を受けることより成るシステム開始手順を実行 し、 標準テストを受けるため各受験者が1つのテストセンターに到着すると各受験 者に関連する予約データを検証し、 予約データを検証して受験者がテストを受け得る状態にあることを管理システ ムに指示し、 1つのテスト用ワークステーション上で受験者への標準テストを開始すること により、受験者に質問を提示して受験者の回答を受験者成績ファイルに記録し、 受験者成績ファイルを適当な後処理システムに送信して回答を採点されるよう にするステップより成る方法。 7.1つのテスト用ワークステーションを各々の予約に対して割り当て、 少なくとも1つの予約が割り当てられた各テスト用ワークステーションを前記 特異なログインIDとは異なる所定のログインIDによりログオンするステップ より成る請求項6の方法。 8.受験者が予約した1つの標準テストを同定するデータを有するジョブ情報フ ァイルを作成し、 そのようにして作成したジョブ情報ファイルの存在を検知するステップより成 り、 標準テストを開始させる前記ステップはジョブ情報ファイルを検知すると自動 的に実行される請求項6の方法。 9.テストが中断したか否かを示すステイタス入力を標準テストの終了後受け、 ステイタス入力が受験者に実施中の標準テストが中断したものであることを示 す場合標準テストを再開可能なことをジョブ情報ファイルに与え、 ジョブ情報ファイルが標準テストが再開可能なことを示す場合受験者に標準テ ストを再開するステップより成る請求項8のシステム。 10.1つのテストセンターの状態及び各テストの間のテスト用ワークステーシ ョンの状態に関する情報を有する異常事態報告を作成し、 異常事態報告を後処理システムに送信するステップより成る請求項6の方法。 11.標準テスト、コンピュータによるシステム及びテストのセキュリティに関 する情報を有するセキュリティログ記録を自動化管理システムが作動状態にある 間実質的に任意の時間に作成し、 1つのテストセンターにおける活動をモニターする能力を有するオペレーショ ンセンターへセキュリティログ記録を送信するステップより成る請求項6の方法 。 12.少なくとも1つのテストセンターにおける複数の受験者へのコンピュータ によるテストを管理するための自動化された管理システムであって、 管理用ディスプレイを備えた中央管理ワークステーションであって、中央管理 ワークステーションのオペレーティングシステムから管理システムを呼び出しテ スト管理者により選択可能な管理オプションのメニューを表示するため管理カー ネルを実行できる中央管理ワークステーションと、 中央管理ワークステーションに結合され、テスト用ディスプレイを備え、コン ピュータによるテストを呼び出すテストステーションカーネルを実行することが できる少なくとも1つのテスト用ワークステーションと、 中央管理ワークステーションと少なくとも1つのテスト用ワークステーション に結合されて管理カーネル、テストステーションカーネル及びコンピュータによ るテストを蓄積するためのファイルサーバーとより成るシステム。 13.複数の受験者は少なくとも1つのコンピュータによるテストを受けるため の登録を済ましており、各受験者はコンピュータによるテストを受けるための予 約をし、受験者が予約したコンピュータによるテストのためにテストセンターに 到着するとテスト管理者はその予約を選択することが可能であり、中央管理ワー クステーションは予約に基づいて少なくとも1つのコンピュータによるテストを 開始させるためのサービス開始モジュールを実行するように構成されている請求 項12のシステム。 14.中央管理ワークステーションは、一般的な管理ステーションモジュールを 実行して予約を同定し且つ予約のステイタスを表示する情報を有するジョブデー タファイルを作成するように構成されている請求項13のシステム。 15.サービス開始モジュールは選択した各予約に対してコンピュータによるテ ストに関連するデータを有するジョブ情報ファイルを作成する請求項13のシス テム。 16.テストカーネルはそのようにして作成したジョブ情報ファイルを検知し、 テストステーション管理プログラムを呼び出してコンピュータによるテストを開 始させる請求項15のシステム。 17.選択可能な管理オプションには以下のうち少なくとも1つが含まれる請求 項12のシステム: 到着した受験者を同定して受験者の予約ステイタスを更新することにより到着 した受験者がコンピュータによるテストを受け得る状態にあることを指示するチ ェックインサービス; 中断した1または2以上のテストを再開するためのテスト再開サービス; テストセンターの状態に関する情報を有するレポートを作成するための異常事 態レポート作成手段と; 受験者の予約と共に蓄積される複数の受験者の少なくとも一部の電子像をとら えるための画像蓄積手順。 18.コンピュータによるテストがコンピュータによるテストシステムを用いて 受験者に実施され、コンピュータによるテストシステムが 1)受験者の1人の回答に関する情報を有する受験者成績記録; 2)コンピュータによるテスト及びコンピュータによるテストシステムのセキ ュリティに関する情報を有するセキュリティログ記録; 3)テスト用ワークステーション及びテストセンターの状態に関する情報を有 する異常事態記録 の内の1つを作成し、前記システムが 受験者成績記録、セキュリティログ記録及び異常事態記録を、少なくとも1つ のテストセンターにおけるコンピュータによるテストを管理するための独立のデ ータセンターに送るための通信マネージャより成る請求項12のシステム。 19.中央管理ワークステーションは少なくとも独立のデータセンターからオン ラインメッセージを受けるように構成されている請求項12のシステム。 20.システム保守プログラムを中央管理ワークステーションから実行できる請 求項12のシステム。
JP51090695A 1993-09-30 1994-09-28 コンピュータによるテストを管理するための集中システム及び方法 Expired - Lifetime JP3776117B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12947393A 1993-09-30 1993-09-30
US08/129,473 1993-09-30
PCT/US1994/011068 WO1995010095A2 (en) 1993-09-30 1994-09-28 A centralized system and method for administering computer based tests

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2005222616A Division JP4304174B2 (ja) 1993-09-30 2005-08-01 コンピュータによるテストを管理するための集中システム

Publications (2)

Publication Number Publication Date
JPH08504282A true JPH08504282A (ja) 1996-05-07
JP3776117B2 JP3776117B2 (ja) 2006-05-17

Family

ID=22440135

Family Applications (2)

Application Number Title Priority Date Filing Date
JP51090695A Expired - Lifetime JP3776117B2 (ja) 1993-09-30 1994-09-28 コンピュータによるテストを管理するための集中システム及び方法
JP2005222616A Expired - Fee Related JP4304174B2 (ja) 1993-09-30 2005-08-01 コンピュータによるテストを管理するための集中システム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2005222616A Expired - Fee Related JP4304174B2 (ja) 1993-09-30 2005-08-01 コンピュータによるテストを管理するための集中システム

Country Status (6)

Country Link
US (1) US5513994A (ja)
EP (1) EP0671039B1 (ja)
JP (2) JP3776117B2 (ja)
CA (1) CA2149660C (ja)
DE (1) DE69433616T2 (ja)
WO (1) WO1995010095A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010009055A (ja) * 1997-03-11 2010-01-14 Prometric Inc 遠隔的に監督される安全な試験の運営システム

Families Citing this family (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5267865A (en) * 1992-02-11 1993-12-07 John R. Lee Interactive computer aided natural learning method and apparatus
US5788508A (en) * 1992-02-11 1998-08-04 John R. Lee Interactive computer aided natural learning method and apparatus
US7483670B2 (en) * 1996-05-09 2009-01-27 Walker Digital, Llc Method and apparatus for educational testing
US5947747A (en) * 1996-05-09 1999-09-07 Walker Asset Management Limited Partnership Method and apparatus for computer-based educational testing
US6427063B1 (en) 1997-05-22 2002-07-30 Finali Corporation Agent based instruction system and method
US5727950A (en) * 1996-05-22 1998-03-17 Netsage Corporation Agent based instruction system and method
US5909589A (en) * 1996-11-12 1999-06-01 Lance T. Parker Internet based training
WO1998025195A2 (en) 1996-12-03 1998-06-11 Ergolight Ltd. Computerized apparatus and methods for identifying usability problems of a computerized system
IL119746A (en) * 1996-12-03 2000-06-01 Ergolight Ltd Computerized apparatus and methods for identifying usability problems of a computerized system
WO1998043223A1 (en) * 1997-03-21 1998-10-01 Educational Testing Service System and method for on-line essay evaluation
US5991595A (en) * 1997-03-21 1999-11-23 Educational Testing Service Computerized system for scoring constructed responses and methods for training, monitoring, and evaluating human rater's scoring of constructed responses
WO1998043222A1 (en) * 1997-03-21 1998-10-01 Educational Testing Service System and method for evaluating raters of scoring constructed responses to test questions
US6141528A (en) * 1997-09-23 2000-10-31 Sony Corporation Learning system with roster files
US6198905B1 (en) * 1997-10-01 2001-03-06 Sony Corporation Learning system with student tape auto compile
US6347943B1 (en) * 1997-10-20 2002-02-19 Vuepoint Corporation Method and system for creating an individualized course of instruction for each user
US6112049A (en) 1997-10-21 2000-08-29 The Riverside Publishing Company Computer network based testing system
US6154631A (en) * 1997-11-14 2000-11-28 Sony Corporation Learning system with synchronized control of hardware and switching network
US6148174A (en) * 1997-11-14 2000-11-14 Sony Corporation Learning systems with patterns
US6141529A (en) * 1997-11-14 2000-10-31 Sony Corporation Learning system with random assignments, conferencing and modeling
US6411796B1 (en) * 1997-11-14 2002-06-25 Sony Corporation Computer assisted learning system
US6208832B1 (en) * 1997-11-14 2001-03-27 Sony Corporation Learning system with response analyzer
AU2314099A (en) * 1998-01-20 1999-08-02 Examsoft Worldwide, Inc. Secure exam method
US6181910B1 (en) 1998-09-03 2001-01-30 David A. Jerrold-Jones Portable automated test scoring system and method
US6173153B1 (en) 1998-11-13 2001-01-09 Dean Bittman Method and apparatus for taking school attendance
US6288753B1 (en) 1999-07-07 2001-09-11 Corrugated Services Corp. System and method for live interactive distance learning
US6681098B2 (en) * 2000-01-11 2004-01-20 Performance Assessment Network, Inc. Test administration system using the internet
US7505921B1 (en) 2000-03-03 2009-03-17 Finali Corporation System and method for optimizing a product configuration
US7069586B1 (en) * 2000-04-03 2006-06-27 Software Secure, Inc. Securely executing an application on a computer system
US20020078139A1 (en) * 2000-12-18 2002-06-20 International Business Machines Corporation System and method of administering exam content
CN102024347A (zh) * 2001-01-09 2011-04-20 托普科德公司 用于编码竞赛的系统和方法
US20020147848A1 (en) * 2001-04-05 2002-10-10 Burgin Daniel Keele System and method for enabling communication between browser frames
US7614014B2 (en) * 2001-04-05 2009-11-03 Daniel Keele Burgin System and method for automated end-user support
US8096809B2 (en) 2001-04-05 2012-01-17 Convergys Cmg Utah, Inc. System and method for automated end-user support
US20030064354A1 (en) * 2001-09-28 2003-04-03 Lewis Daniel M. System and method for linking content standards, curriculum, instructions and assessment
US7177823B2 (en) * 2001-11-06 2007-02-13 International Business Machines Corporation In-queue jobs information monitoring and filtering
AU2002361616A1 (en) 2001-11-13 2003-05-26 Prometric Inc. Extensible exam language (xxl) protocol for computer based testing
US7778866B2 (en) * 2002-04-08 2010-08-17 Topcoder, Inc. Systems and methods for software development
CN1679034A (zh) * 2002-04-08 2005-10-05 托普科德公司 用于对软件开发服务征求建议的系统以及方法
US8776042B2 (en) * 2002-04-08 2014-07-08 Topcoder, Inc. Systems and methods for software support
US8892895B1 (en) * 2002-05-07 2014-11-18 Data Recognition Corporation Integrated system for electronic tracking and control of documents
US6772081B1 (en) * 2002-05-21 2004-08-03 Data Recognition Corporation Priority system and method for processing standardized tests
US8128414B1 (en) 2002-08-20 2012-03-06 Ctb/Mcgraw-Hill System and method for the development of instructional and testing materials
US8385811B1 (en) 2003-02-11 2013-02-26 Data Recognition Corporation System and method for processing forms using color
US20040202987A1 (en) * 2003-02-14 2004-10-14 Scheuring Sylvia Tidwell System and method for creating, assessing, modifying, and using a learning map
US7308581B1 (en) 2003-03-07 2007-12-11 Traffic101.Com Systems and methods for online identity verification
US20040230825A1 (en) * 2003-05-16 2004-11-18 Shepherd Eric Robert Secure browser
US20050282133A1 (en) * 2004-06-18 2005-12-22 Christopher Crowhurst System and method for facilitating computer-based testing using traceable test items
US20050008998A1 (en) * 2003-07-10 2005-01-13 Munger Chad B. System and method for providing certified proctors for examinations
US7228484B2 (en) * 2003-09-11 2007-06-05 International Business Machines Corporation Method and apparatus for implementing redundancy enhanced differential signal interface
US8190080B2 (en) 2004-02-25 2012-05-29 Atellis, Inc. Method and system for managing skills assessment
US20050196734A1 (en) * 2004-03-04 2005-09-08 Amir Poreh Method for improving the administration of psychological examinations
US7995735B2 (en) 2004-04-15 2011-08-09 Chad Vos Method and apparatus for managing customer data
US20050238260A1 (en) * 2004-04-16 2005-10-27 Dave Coleman Image and optical mark scanner with encryption
US20050237580A1 (en) * 2004-04-16 2005-10-27 Dave Coleman Scanner read head for images and optical mark recognition
US7980855B1 (en) 2004-05-21 2011-07-19 Ctb/Mcgraw-Hill Student reporting systems and methods
US20070042335A1 (en) * 2005-05-11 2007-02-22 Ctb Mcgraw-Hill System and method for assessment or survey response collection using a remote, digitally recording user input device
US8170466B2 (en) * 2005-05-27 2012-05-01 Ctb/Mcgraw-Hill System and method for automated assessment of constrained constructed responses
US20070009871A1 (en) * 2005-05-28 2007-01-11 Ctb/Mcgraw-Hill System and method for improved cumulative assessment
US20070031801A1 (en) * 2005-06-16 2007-02-08 Ctb Mcgraw Hill Patterned response system and method
US20070162761A1 (en) * 2005-12-23 2007-07-12 Davis Bruce L Methods and Systems to Help Detect Identity Fraud
RU2008134126A (ru) * 2006-01-20 2010-02-27 Топкоудер, Инк. (Us) Система и способ разработки проектов
US20070220479A1 (en) * 2006-03-14 2007-09-20 Hughes John M Systems and methods for software development
US20070250378A1 (en) * 2006-04-24 2007-10-25 Hughes John M Systems and methods for conducting production competitions
US20080052146A1 (en) * 2006-05-01 2008-02-28 David Messinger Project management system
US8182271B2 (en) * 2006-07-25 2012-05-22 Siemens Aktiengesellschaft Training method and system
US7831195B2 (en) * 2006-12-11 2010-11-09 Sharp Laboratories Of America, Inc. Integrated paper and computer-based testing administration system
US20080167960A1 (en) * 2007-01-08 2008-07-10 Topcoder, Inc. System and Method for Collective Response Aggregation
US20080196000A1 (en) * 2007-02-14 2008-08-14 Fernandez-Lvern Javier System and method for software development
US20080222055A1 (en) * 2007-03-07 2008-09-11 Hughes John M System and Method for Creating Musical Works
US8073792B2 (en) * 2007-03-13 2011-12-06 Topcoder, Inc. System and method for content development
US20080227080A1 (en) * 2007-03-14 2008-09-18 Gekl Technologies, Inc. Student assessment system
US8358964B2 (en) * 2007-04-25 2013-01-22 Scantron Corporation Methods and systems for collecting responses
US20090192849A1 (en) * 2007-11-09 2009-07-30 Hughes John M System and method for software development
US20090162826A1 (en) * 2007-11-26 2009-06-25 Ayati Mohammad B Mass Customization Method for High School and Higher Education
WO2009089447A1 (en) * 2008-01-11 2009-07-16 Topcoder, Inc. System and method for conducting competitions
EP2478511A4 (en) 2009-09-18 2015-10-21 Innovative Exams Llc DEVICE AND SYSTEM FOR REGISTERING, ALLOCATING AND TESTING CANDIDATES
US20110295657A1 (en) * 2009-10-23 2011-12-01 Herman Euwema Test-weighted voting
WO2011094214A1 (en) * 2010-01-29 2011-08-04 Scantron Corporation Data collection and transfer techniques for scannable forms

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0158633A4 (en) * 1983-10-07 1986-07-24 Nat Information Utilities Corp EDUCATION SYSTEM.
JPH0776939B2 (ja) * 1988-03-16 1995-08-16 富士ゼロックス株式会社 通信ネットワークシステム
US5002491A (en) * 1989-04-28 1991-03-26 Comtek Electronic classroom system enabling interactive self-paced learning
US5211564A (en) * 1989-07-19 1993-05-18 Educational Testing Service Computerized figural response testing system and method
US5318450A (en) * 1989-11-22 1994-06-07 Gte California Incorporated Multimedia distribution system for instructional materials
US5176520A (en) * 1990-04-17 1993-01-05 Hamilton Eric R Computer assisted instructional delivery system and method
US5204813A (en) * 1990-06-08 1993-04-20 Assessment Systems, Inc. Computer-controlled testing process and device for administering an examination
US5195033A (en) * 1990-06-08 1993-03-16 Assessment Systems, Inc. Testing system including removable storage means for transfer of test related data and means for issuing a certification upon successful completion of the test
US5170362A (en) * 1991-01-15 1992-12-08 Atlantic Richfield Company Redundant system for interactively evaluating the capabilities of multiple test subjects to perform a task utilizing a computerized test system
US5309564A (en) * 1992-03-19 1994-05-03 Bradley Graham C Apparatus for networking computers for multimedia applications
US5442759A (en) * 1992-03-26 1995-08-15 International Business Machines Corporation Interactive online tutorial system with user assistance function for software products
US5287519A (en) * 1992-09-17 1994-02-15 International Business Machines Corp. LAN station personal computer system with controlled data access for normal and unauthorized users and method
US5432932A (en) * 1992-10-23 1995-07-11 International Business Machines Corporation System and method for dynamically controlling remote processes from a performance monitor
US5321611A (en) * 1993-02-05 1994-06-14 National Computer Systems, Inc. Multiple test scoring system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010009055A (ja) * 1997-03-11 2010-01-14 Prometric Inc 遠隔的に監督される安全な試験の運営システム

Also Published As

Publication number Publication date
CA2149660C (en) 1996-12-03
EP0671039A1 (en) 1995-09-13
EP0671039B1 (en) 2004-03-17
US5513994A (en) 1996-05-07
WO1995010095A2 (en) 1995-04-13
EP0671039A4 (en) 1996-05-01
WO1995010095A3 (en) 1995-04-27
JP2006053913A (ja) 2006-02-23
DE69433616D1 (de) 2004-04-22
DE69433616T2 (de) 2005-02-10
JP3776117B2 (ja) 2006-05-17
JP4304174B2 (ja) 2009-07-29

Similar Documents

Publication Publication Date Title
JPH08504282A (ja) コンピュータによるテストを管理するための集中システム及び方法
US9141513B2 (en) Maintaining a secure computing device in a test taking environment
JP4616423B2 (ja) 遠隔データ回復用の装置及び方法
US20070162514A1 (en) Database sizing and diagnostic utility
US6964044B1 (en) System and process for management of changes and modifications in a process
US7725352B2 (en) Method and system for enterprise-wide migration
US20020112232A1 (en) System and process for building host computers
US20030229653A1 (en) System and method for data backup
WO2001082205A1 (en) Method, system, and computer program product for assessing information security
JP2004514208A (ja) コンピュータハードウェア及びソフトウェアのオンライン診断
JP2006119848A (ja) ソフトウェア更新プログラム、ソフトウェア更新装置およびソフトウェア更新方法
US7331791B2 (en) System and method for evaluating a person's information technology skills
JP2006048679A (ja) 失敗した要求にサービスを提供するエージェント管理コンソールソフトウェア
JP2009277168A (ja) 労働実態情報の収集方法、情報処理システム、管理装置及び情報処理装置
JP4531529B2 (ja) 情報処理装置管理システム及び情報処理装置管理方法およびプログラムおよび記録媒体
US20060160056A1 (en) System for electronically administering a certification program
JP2010067056A (ja) 制御プログラム、情報処理システム、および情報処理方法
CN112650532B (zh) 一种多人模式下修改源码文件的方法、系统及介质
CN112035362A (zh) 测试项目进度管理方法、装置、设备以及存储介质
WO2019167340A1 (ja) 報告書作成システム及びプログラム
CA2145194C (en) System and method for computer based testing
Powers et al. AS/400e Diagnostic Tools for System Administrators
JP2004199557A (ja) テストレポート管理システム
Dulaney Novell Linux Certification Practicum Lab Manual
Zhao What is the Decision-Making Process of Computer Service Technicians in Their Routine Work?

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050201

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20050427

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20050620

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050801

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060124

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060222

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100303

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100303

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110303

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120303

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130303

Year of fee payment: 7