KR20000058902A - 인터넷상에서의 원격 개별적응검사시스템 및 실시간문항모수치추정시스템 - Google Patents

Abstract

본 발명은 인터넷상에서 문항에 대한 피험자 반응을 이용하여 개별 피험자의 능력수준에 가장 적합한 난이도의 문항만으로 구성된 검사를 제공하는 원격 개별적응검사시스템과 피험자 반응자료를 이용하여 문항모수치를 지속적으로 재추정하는 실시간 문항모수치추정시스템에 관한 것이다.

본 발명의 시스템은 문항과 문항정보를 저장·관리하는 문제은행관리장치(11), 피험자의 검사결과 및 기타 정보를 저장·관리하는 피험자정보관리장치(12), 문항반응이론에 의해 문항과 피험자의 모수치를 실시간으로 추정하는 모수치추정장치(13), 피험자별 검사결과와 문항별 통계자료 및 학습정보를 제공하는 결과프로파일제공장치(14)를 내장하며, 인터넷 또는 네트워크 등의 망을 통해 연결된 검사관리자단말(15)과 피험자단말들(16-18)로 구성된다.

따라서 본 발명은 피험자 능력을 정확하게 측정하면서도 검사시행의 효율성을 극대화하는 개별적응검사를 가능토록 하며 실시간으로 문제은행의 질을 관리하는 효과를 제공한다.

Description

인터넷상에서의 원격 개별적응검사시스템 및 실시간 문항모수치추정시스템{Internet-based adaptive testing system and real-time item parameter estimating system}

본 발명은 원격 개별적응검사시스템 및 실시간 문항모수치추정시스템에 관한 것으로, 보다 상세하게는 인터넷상에서 개별 피험자의 문항에 대한 반응을 이용하여 피험자의 능력모수치를 추정함으로써 개별 피험자의 능력수준에 가장 적합한 난이도 수준의 문항만으로 구성된 검사를 제공하는 원격 개별적응검사시스템과 피험자의 반응이 입력될 때마다 이 반응자료를 이용하여 문제은행에 저장된 문항들의 모수치를 지속적으로 재추정하는 실시간 문항모수치추정시스템에 관한 것이다.

최근 들어 인터넷상에서 실시되는 원격검사서비스가 많이 등장하고 있다. 인터넷을 통한 원격검사는 장소에 구애받지 않고 피험자가 원하는 시간에 검사를 치를 수 있으며 동화상과 음성 등의 데이터를 이용한 양질의 검사를 제공할 수 있다는 장점을 지닌다.

그러나 인터넷을 통한 원격검사는 개별 피험자의 능력수준을 고려하지 않는 획일적인 검사를 제공한다는 한계를 지닌다. 인터넷을 통해 원격검사를 치르는 피험자의 능력수준은 매우 다양하다. 이처럼 다양한 능력수준을 지닌 피험자의 능력을 보다 정확하게 측정하기 위해서는 각 피험자의 능력을 가장 잘 변별해낼 수 있는 문항으로 구성된 검사가 필요하다. 그러나 획일적인 문항으로 구성된 검사로는 다양한 피험자의 능력을 정확하게 측정하기란 불가능하다. 특히 종래의 원격검사가 지닌 이러한 한계는 매우 능력이 높거나 매우 능력이 낮은 피험자의 능력을 측정하는데 있어서 더욱 극명하게 드러날 수 있다. 인터넷을 통해 제공된 검사에서 만점을 맞거나 영점을 맞은 피험자는 그 능력이 완벽하거나 전무해서가 아니라 다만 그 피험자의 능력을 변별해 낼 수 있는 문항이 제공되지 않았기 때문이다.

본 발명의 목적은 인터넷상에서 개별 피험자가 검사문항에 반응한 자료를 활용하여 피험자의 능력모수치를 지속적으로 재추정함으로서 개별 피험자의 능력을 가장 잘 변별할 수 있는 문항만으로 구성된 개별적응검사를 제공하는 것이다. 또한 피험자가 검사문항에 반응한 자료를 활용하여 문제은행에 저장된 문항의 모수치를 지속적으로 재추정하여 문항정보의 질을 효율적으로 관리하는 것이다.

도1은 본 발명에 따른 원격 개별적응검사시스템과 실시간 문항모수치추정시스템을 나타내는 구성도.

도2는 도1 시스템의 문제은행관리장치를 나타내는 도면.

도3은 도1 시스템의 동작을 설명하기 위한 흐름도.

*도면의 주요부분에 대한 부호의 설명

11: 문제은행관리장치

12: 피험자정보관리장치

13: 모수치추정장치

14: 결과프로파일제공장치

15: 검사관리자단말

16-18: 피험자단말

상기의 목적을 달성하기 위한 본 발명의 원격 개별적응검사시스템 및 실시간 문항모수치추정시스템은 검사관리자와 피험자들 사이에 각 피험자의 능력수준에 맞춘 개별적응검사가 가능하도록 문항과 문항정보를 체계적으로 관리하는 문제은행관리장치를 내장하며, 문항에 대한 피험자의 반응을 이용하여 문항반응이론에 의한 피험자의 능력모수치를 추정하고, 이에 근거하여 피험자의 능력모수치를 측정하는데 가장 적절한 문항을 문제은행에서 선택하여 피험자에게 제공하며, 검사종료기준에 도달했을 때 피험자에게 검사결과와 문항에 대한 실시간 통계정보를 제공하고, 피험자의 검사 결과에 대한 각종 정보를 체계적으로 관리하고, 각 문항에 대한 피험자의 반응들을 활용하여 문항반응이론에 의한 문항모수치를 지속적으로 재추정하는 장치를 포함한다.

이하, 첨부한 도면들을 참조하여 본 발명의 바람직한 실시 예를 상세히 기술하기로 한다.

도 1은 본 발명에 따른 원격 개별적응검사시스템과 실시간 문항모수치추정시스템을 나타내는 구성도이다. 도시된 바와 같이, 본 발명의 시스템은 문제은행관리장치(11), 피험자정보관리 장치(12), 모수치추정장치(13), 결과프로파일제공장치(14), 검사관리자단말(15)과 다수의 피험자단말(16∼18)을 구비하며, 문제은행관리장치(11)는 모수치추정장치(13)를 통해 재추정된 문항모수치를 문항별로 체계적으로 저장·관리하고, 피험자정보관리장치(12)는 피험자별 검사결과 및 기타 정보를 체계적으로 저장·관리하고, 모수치추정장치(13)는 피험자단말들(16-18)을 통해 입력된 피험자의 반응을 이용하여 문항반응이론에 의한 문항모수치와 피험자능력모수치를 실시간으로 추정하고, 결과프로파일제공장치(14)는 각 피험자별로 검사 결과와 관련된 정보를 실시간으로 제공한다. 관리자단말(l5)은 모수치추정모형을 선택하고 검사의 시작과 종료기준을 관리하며 문제은행관리장치(11)로부터 적합한 문항을 선정하여 피험자단말들(16-18)에 제시한다. 여기에서 관리자단말(15)과 피험자단말들(16-18) 사이에는 인터넷(Internet) 또는 여러 지역을 함께 연결할 수 있는 네트워크(Network)등의 망을 통해 연결된다.

이와 같이 구성된 본 발명의 원격 개별적응검사시스템과 실시간 문항모수치추정시스템에 대한 동작을 도 2 및 도 3을 참조하여 좀더 구체적으로 설명한다.

먼저, 피험자단말들(16-18)을 통해 검사가 요청되면 관리자단말(15)에서는 검사의 시작과 종료기준, 그리고 모수치추정모형을 선택하고 이에 따라 문제은행관리장치(11)에서 첫 번째 문항을 선택하여 피험자단말들(16-18)에 제공한다. 피험자단말들을 통해 첫 번째 문항에 대한 피험자의 반응이 입력되고 이 반응자료가 관리자단말(15)에 전달되면 모수치추정장치(13)에서 피험자의 능력모수치를 추정한다. 모수치추정장치(13)를 통해 추정된 피험자의 능력모수치에 근거하여 관리자단말(15)에서는 해당 피험자의 능력을 측정하는데 가장 적합한 문항을 문제은행관리장치(11)로부터 선택하여 다시 피험자단말들(16-18)에 제시한다. 제시된 문항에 다시 피험자가 반응하면 이 반응이 관리자단말(15)에 전달되면서 종료기준에 도달할 때까지 상기의 과정이 반복된다. 관리자단말(15)에 의한 검사 종료기준에 도달하면 모수치추정장치(13)에 의해 추정된 피험자별 검사 결과와 문제은행관리장치(11)에 저장된 실시간 문항별 통계정보가 결과프로파일제공장치(14)에 전달되고 이는 다시 피험자단말들(16-18)에 제공된다. 피험자별 검사결과 및 기타 정보는 피험자정보관리장치(12)에 저장되어 체계적으로 관리된다.

도 2의 문제은행관리장치(11)에서는 문항에 대한 질적 정보, 통계 정보, 검사정보를 문항번호별로 체계적으로 관리하여 관리자단말(15)에서 개별 피험자의 능력수준에 가장 적합한 문항을 가장 효율적으로 선택할 수 있도록 한다. 검사 종료시에는 피험자단말들(16-18)에 개별 피험자의 검사 결과와 함께 문항별 통계정보를 제공한다. 모수치추정장치(13)에 전달된 피험자의 반응을 이용하여 문항모수치를 재추정한 결과를 문제은행관리장치에 저장하여 문항의 통계정보가 실시간으로 수정되도록 한다. 검사가 종료되면 피험자별 검사결과가 결과프로파일제공장치(14)를 통해 결과, 도표, 그래프 등으로 작성되어 피험자단말들에 제공된다. 개별 피험자별 검사 결과는 피험자단말들(16-18)에 제시된 후 피험자정보관리장치(12)에 저장되어 피험자번호별로 관리된다.

도 3에서 첫 번째 피험자단말(16)에서 검사를 요청하면 관리자단말(15)에서는 출발점을 규정한다(단계 301). 출발점 규정은 검사의 목적과 대상에 따라 달리 규정된다. 관리자단말(15)은 문제은행관리장치(11)에 저장된 문항들의 정보를 계산하여(단계 302, 303), 출발점 규정에 가장 적합한 문항을 피험자단말(16)에 제공한다(단계304). 이 문항에 대해 피험자가 반응한다(단계 305). 관리자는 모수치추정장치(13)를 통해 피험자의 능력 수준을 추정한다(단계 306). 관리자가 규정한 검사 종료 기준에 도달했는지의 여부를 판단한다(단계 307). 검사 종료 기준에 도달하지 않았을 경우 다시 문제은행관리장치(11)에 저장된 문항들의 정보를 계산하는 단계 302부터 반복적으로 수행한다. 검사 종료 기준에 도달했을 경우에는 피험자의 검사 결과를 피험자단말(16)에 제공한다(단계 308). 이 경우 피험자정보관리장치(12)에 저장된 피험자의 과거 검사결과와 문제은행관리장치(11)에 저장된 문항별 실시간 통계정보를 결과프로파일제공장치(14)에서 가공하여 피험자단말(16)에 제공한다.

위의 단계 수행을 통해 피험자의 능력 수준에 맞춘 원격 개별적응검사와 문항모수치의 지속적인 재추정을 통한 문제은행의 질적 관리가 실시간으로 수행되도록 한다.

상술한 바와 같이, 본 발명은 원격 개별적응검사시스템과 실시간 문항모수치추정시스템에 관한 것으로 피험자단말들을 통해 입력된 정보자료를 이용하여 피험자의 능력수준을 추정한 뒤 피험자의 능력을 가장 잘 변별할 수 있는 문항을 문제은행에서 선택하여 제시함으로써 피험자의 능력을 가장 정확하게 측정할 수 있는 검사를 시행한다는 잇점이 있다. 이는 검사관리자 측면에서는 적은 수의 문항으로 피험자의 능력을 보다 정확하게 측정할 수 있으므로 검사시행의 효율성을 극대화할 수 있으며, 피험자 측면에서는 능력에 비해 지나치게 쉽거나 어려운 문항을 풀지 않게 되므로 검사에 대한 의욕을 극대화할 수 있다는 잇점이 있다.

본 발명은 피험자단말들을 통해 입력된 정보를 이용하여 문제은행에 저장된 문항의 모수치를 지속적으로 재추정하여 문항에 대한 통계정보를 수정함으로서 문제은행의 지속적인 질적 관리를 수행한다는 잇점이 있다.

본 발명은 결과프로파일제공장치를 통해 피험자의 검사 결과에 대한 다양한 정보와 피험자의 자기 학습에 도움이 되는 정보를 제공하여 피험자가 검사를 통해 자기 학습의 효과를 극대화할 수 있도록 도움을 주는 잇점이 있다.

본 발명은 피험자별 검사결과를 피험자정보관리장치에 지속적으로 저장·관리하여 피험자가 원할 경우 자신의 검사 결과의 추이를 확인할 수 있도록 하여 피험자의 자기 학습에 도움을 주는 잇점이 있다.

Claims (5)

1. 피험자의 능력수준에 적합한 문항만으로 구성된 검사를 시행하는 원격 개별적응검사시스템에 있어서,

   피험자가 검사를 요청하면 관리자가 출발점 규정에 따른 문항을 제공하고, 이에 대해 피험자가 반응하면 이 자료를 이용하여 피험자의 능력모수치를 추정하고, 이를 근거로 개별 피험자의 능력 측정에 가장 적합한 문항을 문제은행에서 선택하여 다시 피험자에게 제공하는 과정을 종료기준에 도달할 때까지 반복하는 개별적응검사시스템; 및 문항에 대한 피험자의 반응자료를 이용하여 문제은행에 저장·관리되는 문항의 모수치를 지속적으로 재추정하여 수정하는 실시간 문항모수치추정시스템.
2. 제 1항에 있어서, 문항번호별로 문항에 대한 질적 정보와 통계 정보, 검사 정보 등을 체계적으로 관리하고 지속적으로 수정·보완하는 문제은행관리장치.
3. 제 1항에 있어서, 피험자번호별로 피험자에 대한 검사 결과 및 기타 정보 등을 체계적으로 관리하고 지속적으로 수정·보완하는 피험자정보관리장치.
4. 제 1항에 있어서, 피험자단말들을 통해 입력된 문항에 대한 피험자의 반응을 이용하여 실시간으로 피험자의 능력 수준과 문항의 모수치를 재추정하는 모수치추정장치.
5. 제 1항에 있어서, 피험자의 검사결과와 이에 대한 해석, 문항별 실시간 통계정보, 피험자의 과거 모든 검사 결과를 제공하는 결과 프로파일 제공장치.