KR100522355B1 - 시험문제 구성장치 및 방법 - Google Patents

시험문제 구성장치 및 방법 Download PDF

Info

Publication number
KR100522355B1
KR100522355B1 KR1020050006330A KR20050006330A KR100522355B1 KR 100522355 B1 KR100522355 B1 KR 100522355B1 KR 1020050006330 A KR1020050006330 A KR 1020050006330A KR 20050006330 A KR20050006330 A KR 20050006330A KR 100522355 B1 KR100522355 B1 KR 100522355B1
Authority
KR
South Korea
Prior art keywords
test
correct answer
question
information
array
Prior art date
Application number
KR1020050006330A
Other languages
English (en)
Inventor
이종민
Original Assignee
이종민
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이종민 filed Critical 이종민
Priority to KR1020050006330A priority Critical patent/KR100522355B1/ko
Application granted granted Critical
Publication of KR100522355B1 publication Critical patent/KR100522355B1/ko
Priority to EP05821919A priority patent/EP1844404A1/en
Priority to US11/795,807 priority patent/US20080145832A1/en
Priority to PCT/KR2005/004445 priority patent/WO2006078092A1/en
Priority to CNA2005800471386A priority patent/CN101107601A/zh

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00Electrically-operated teaching apparatus or devices working with questions and answers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • G06Q50/205Education administration or guidance

Abstract

본 발명은 시험을 치르는 다수의 시험 응시자간의 부정행위를 방지하기 위해 시험문제의 패턴을 다변화시켜 시험 응시자간의 변별력을 증대시킬 수 있도록 한 시험문제 구성장치 및 방법에 관한 것으로, 다수의 문제 및 각 문제의 속성을 내포하는 메타정보를 네트워크를 통해 수신하는 수신부; 상기 수신된 문제를, 컨텐츠 및 조판정보를 내재하는 데이터파일로 변환하는 제 1변환부; 상기 수신된 각 문제의 메타정보 및 상기 데이터파일이 저장되는 데이터베이스; 상기 데이터베이스의 데이터파일 및 메타정보를 이용하여 일정 시험과목의 문제항수 및 보기들을 구성하고 그 구성한 문제항수의 정답배열을, 시험응시자별로 각기 다른 정답배열이 되도록 소정 혼합도에 따라 가변시키는 정답배열 생성부; 및 상기 추출된 다수의 데이터파일을 시험응시가능한 형태로 변환하되, 상기 정답배열 생성부에서 생성된 정답배열 정보에 근거하여 시험응시자별로 각기 다른 정답배열의 시험문제로 출력하는 제 2변환부를 구비한 것이다.

Description

시험문제 구성장치 및 방법{Apparatus and method for composing examination questions}
본 발명은 시험문제 구성장치 및 방법에 관한 것으로, 보다 상세하게는 다수의 시험 응시자간의 부정행위를 방지할 수 있도록 한 시험문제 구성장치 및 방법에 관한 것이다.
일반적으로, 시험의 종류는 문제 및 문제별로 여러 선택지(보기)를 제시하고 해당 문제의 답을 여러 선택지에서 선택하도록 하는 선다형 객관식, 문제를 제시하고 해당 문제의 간단한 답을 쓰도록 하는 단답형 주관식, 및 제시된 문제를 보고 자신의 의견 등을 장문의 글로 쓰도록 하는 논술형 주관식으로 구분할 수 있다.
논술형 주관식은 시험 응시자의 특성과 지식의 정도를 정확히 파악할 수 있는 장점이 있지만, 채점자가 시험 응시자의 답안을 읽고 이해하는 데에 많은 시간이 소요되며 채점하는 과정에서 채점자의 주관적인 견해에 의해 동일한 답안에서 점수가 다르게 나오는 문제점이 발생한다.
단답형 주관식은 논술형 주관식과는 달리 채점자의 주관에 의한 영향이 비교적 적게 나타나며, 시험 응시자가 정확한 답을 알아야 문제의 답을 쓸 수 있어 답을 모르는 상태에서 운으로 정답을 맞추는 경우가 거의 없다. 하지만, 문제 하나하나를 파악하여 정확히 답을 기재하였는지를 채점자가 직접 파악하여야 하므로 채점시간이 많이 소요된다.
그리고, 선다형 객관식은 상기의 논술형 주관식과 단답형 주관식과는 달리 문제를 파악하고 문제와 같이 제시된 번호가 붙어 있는 여러 선택지(보기)들 중에서 하나의 선택지를 선택하도록 하는 것으로서, 시험 응시자가 해당 문제의 답이라고 여기는 선택지에 해당하는 번호를 OMR 카드 등에 기록하면 그 기록된 결과를 컴퓨터를 이용하여 파악하고 채점을 할 수 있어 채점하는 과정이 매우 짧게 걸려 시험 응시 직후 응시자가 시험 점수를 알 수 있다.
현재, 이러한 여러 종류의 시험 방식중에서 많은 사람들이 동시에 시험에 응시할 수 있고 채점이 편리하다는 이유 등으로 인해 주로 선다형 객관식이 많이 채택되고 있다.
그런데, 요즘 무선통신기술의 발전으로 인해 시험 응시자간의 휴대폰 등을 이용한 부정행위가 빈번하게 발생하고 있다. 그로 인해 선다형 객관식의 시험을 치르는 시험 응시자의 변별력이 떨어질 뿐만 아니라 본의 아니게 피해를 입는 선의의 시험 응시자가 속출하고 있으며 그러한 시험 부정행위는 사회 이슈로 대두되고 있는 실정이다.
본 발명은 상기한 종래의 문제점을 해결하기 위해 제안된 것으로, 시험을 치르는 다수의 시험 응시자간의 부정행위를 방지하기 위해 시험문제의 패턴을 다변화시켜 시험 응시자간의 변별력을 증대시킬 수 있도록 한 시험문제 구성장치 및 방법을 제공함에 그 목적이 있다.
상기와 같은 목적을 달성하기 위하여 본 발명의 바람직한 실시예에 따른 시험문제 구성장치는, 다수의 문제 및 각 문제의 속성을 내포하는 메타정보를 네트워크를 통해 수신하는 수신부; 상기 수신된 문제를, 컨텐츠 및 조판정보를 내재하는 데이터파일로 변환하는 제 1변환부; 상기 수신된 각 문제의 메타정보 및 상기 데이터파일이 저장되는 데이터베이스; 상기 데이터베이스의 데이터파일 및 메타정보를 이용하여 일정 시험과목의 문제항수 및 보기들을 구성하고 그 구성한 문제항수의 정답배열을, 시험응시자별로 각기 다른 정답배열이 되도록 소정 혼합도에 따라 가변시키는 정답배열 생성부; 및 상기 추출된 다수의 데이터파일을 시험응시가능한 형태로 변환하되, 상기 정답배열 생성부에서 생성된 정답배열 정보에 근거하여 시험응시자별로 각기 다른 정답배열의 시험문제로 출력하는 제 2변환부를 구비한다.
한편, 본 발명의 실시예에 따른 시험문제 구성방법은, 다수의 문제 및 각 문제의 속성을 내포하는 메타정보를 네트워크를 통해 수신하는 제 1과정; 상기 수신된 문제를, 컨텐츠 및 조판정보를 내재하는 데이터파일로 변환하는 제 2과정; 상기 수신된 각 문제의 메타정보 및 상기 데이터파일을 데이터베이스에 저장하는 제 3과정; 상기 데이터베이스의 데이터파일 및 메타정보를 이용하여 일정 시험과목의 문제항수 및 보기들을 구성하고 그 구성한 문제항수의 정답배열을, 시험응시자별로 각기 다른 정답배열이 되도록 소정 혼합도에 따라 가변시키는 제 4과정; 및 상기 추출된 다수의 데이터파일을 시험응시가능한 형태로 변환하되, 상기 제 4과정에 의해 생성된 정답배열 정보에 근거하여 시험응시자별로 각기 다른 정답배열의 시험문제로 출력하는 제 5과정을 구비한다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예에 따른 시험문제 구성장치 및 방법에 대하여 설명하면 다음과 같다.
본 발명의 실시예에 따른 시험문제 구성장치는 온라인상에서 시험문제를 구성시키고 그 구성시킨 시험문제를 온라인 또는 오프라인을 통해 시험응시자에게 보내지도록 하는 장치이다. 즉, 본 발명의 시험문제 구성장치는 온라인 및 오프라인과도 연계되어 있다.
도 1은 본 발명에 따른 시험문제 구성장치의 구성도로서, 도 1에 도시된 구성은 웹서버(도시 생략) 및 전용선(도시 생략) 등을 갖춘 운영자 서버(즉, 다양한 문제의 수신 및 수신된 문제를 근거로 본 발명에서의 시험문제 구성이 가능한 서버)(도시 생략)내에 구비된다.
도 1에 따르면, 본 발명의 시험문제 구성장치는, 문제 출제자 등으로부터 전송하는 다수의 문제(예컨대, 마이크로소프트사의 워드문서 프로그램(이하, MS-WORD라 함)에 의해 작성된 문제) 및 각 문제의 속성을 내포하는 메타정보를 네트워크(예컨대, 인터넷 등)를 통해 수신하는 수신부(10); 상기 수신된 문제를, 컨텐츠 및 조판정보를 내재하는 데이터파일(XML)로 변환하는 제 1변환부인 XML변환부(12); 상기 수신부(10)에 수신된 각 문제의 메타정보 및 상기 데이터파일이 시험과목별로 저장되는 데이터베이스(14); 상기 데이터베이스(14)의 데이터파일 및 메타정보를 이용하여 일정 시험과목의 문제항수 및 보기들을 구성하고 그 구성한 문제항수의 정답배열을, 시험응시자수별로 각기 다른 정답배열이 되도록 소정 혼합도에 따라 가변시키는 정답배열 생성부(16); 상기 추출된 다수의 데이터파일을 시험응시가능한 형태로 변환하되, 상기 정답배열 생성부(16)에서 생성된 정답배열 정보에 근거하여 시험응시자별로 각기 다른 정답배열의 시험문제로 출력하는 제 2변환부(18); 및 상기 각 부의 동작을 제어하는 제어부(20)를 구비한다.
여기서, 문제 출제자의 PC(도시 생략)에는 키보드, 펜 마우스 또는 통상적인 음성인식 소프트웨어 패키지와 같은 데이터입력수단, 비디오 모니터와 같은 표시수단, 스피커와 같은 음성 출력수단, 및 CPU와 같은 프로세싱 수단을 구비하고, 웹 브라우저(web-browser) 프로그램과 유무선 인터넷 통신 기능을 제공하는 소프웨어 및 하드웨어 등을 내장한 단말기이다. 그리고, 문제 출제자의 PC에는 MS-WORD작업이 가능한 프로그램이 내장되어 있을 뿐만 아니라 시험문제 구성에 관련된 문제 및 메타정보의 입력이 가능하도록 하는 프로그램이 내장되어 있다.
상기 문제 출제자의 PC의 모니터상에는 도 2에서와 같이 개괄적으로 문제에 대한 선행학습을 하도록 하는 선행지식부(30), 지문부(31), 문제입력부(32), 해설부(33), 메타정보 입력부(34) 등으로 구획된 화면이 디스플레이된다. 그래서, 문제 출제자는 문제를 입력하고자 할 때에는 각각의 구획된 부분에 적절한 내용을 입력하면 된다. 상기 메타정보 입력부(34)에 입력되는 메타정보는 문제입력부(32)에 입력된 문제에 종속되고, 그 메타정보는 문제의 정답, 문제의 보기섞기 가능여부, 문제가 소속되는 과목, 문제의 ID 등을 포함한다.
문제 출제자가 도 2의 화면을 보면서 희망하는 문제 및 그에 따른 메타정보 등을 입력한 후에 저장버튼을 클릭하게 되면 그 문제 및 메타정보 등은 인터넷 등의 네트워크를 통해 수신부(10)에게로 전달되어 XML변환부(12)에서 XML변환된다. 그 XML변환부(12)는 변환결과 예를 들어 "sample.xml"이라는 데이터파일을 생성하게 된다. 그 "sample.xml"을 UTF-8방식으로 노트패드에서 저장시킨 후 MS-WORD에서 열기하면 원본문서를 볼 수 있다. 상기 선행지식부(30), 지문부(31), 문제입력부(32), 해설부(33) 등에 입력된 컨텐츠는 상기 XML변환부(12)에 의해 XML로 변환되어 제 1저장부(14a)에 저장되며, XSL 및 기타 변환기술에 의해서 자유롭게 조판될 수 있다.
상기 XML변환부(12)에서 출력되는 데이터파일(sample.xml)을 살펴보면 도 3과 같이 된다. 도 3의 데이터파일에는 컨텐츠 및 조판정보가 내재된다. 도 3에서 컨텐츠라 함은 "나의 살던 고향은?", "①", "무지게 언덕", "②", "꽃피는 산골", "③", "해뜨는 언덕", "④", "정동진", "⑤", "왜목마을"이 된다. 도 3에서 조판정보라 함은 상기의 컨텐츠를 조판할 수 있도록 하는 정보로서, 상기 컨텐츠를 제외한 정보(예컨대, 띄어쓰기, 보기의 순서 등)를 의미한다.
상기 데이터베이스(14)는 상기 XML변환부(12)에 의해 변환되어 출력되는 데이터파일(XML)내의 컨텐츠 및 조판정보가 저장되는 제 1저장부(14a), 및 상기 수신부(10)에 수신된 다수의 문제에 종속되는 메타정보가 저장되는 제 2저장부(14b)를 구비한다. 그리고, 상기 제 2저장부(14b)에는 후술한 정답배열 정보도 저장하게 된다.
상기 정답배열 생성부(16)에서 생성되는 정답배열 정보에는 과목코드, 상기 과목코드의 시험지 ID, 싱기 시험지 ID에 소속된 시험응시자수별 시험지 번호, 상기 시험지 번호별로 각기 다른 보기섞기가 된 문제들의 정답이 포함된다. 즉, 상기 정답배열 생성부(16)에 의한 정답배열 정보는 도 4에서와 같이 구성되는 것으로 보면 된다. 도 4는 "T1"이라는 과목코드에 대하여 "10"이라는 시험지 ID를 갖는 시험지 번호 "123, 124, 125, 126, 127"에 대하여 동일한 10문제를 수록하되 그 각각의 시험지 번호별로 각 문제의 정답배열을 다르게 한 것이다. 도 4는 각 시험지 번호별로 존재하는 문제들의 순서는 바뀌지 않고 각 문제들의 보기 배열만 섞기한 것인데, 만약 각 시험지 번호별로 동일하게 수록되는 문제들의 순서도 바꿀 수 있다. 도 4에서, 시험지 번호가 5개인데, 이는 "T1"이라는 과목코드에 대하여 "10"이라는 시험지 ID를 갖고 시험을 치르는 시험응시자의 수와 동일하다.
상기 정답배열 생성부(16)에서 사용되는 혼합도는 3이상으로 한다. 예를 들어, 원본 문제의 보기의 배열이 A, B, C, D, E로 되어 있는데, 그 원본 문제의 보기 배열을 A, C, B, D, E로 바뀌게 되면 혼합도 2가 되는 것이다. 따라서, 혼합도 3이상이라 함은 원본 문제의 보기 배열에 대하여 세 개 이상의 보기의 배열이 바뀐 것을 의미한다.
본 발명의 장치를 운영하는 운영자측에서는 과목당 필요한 시험문제와 시험문항수 등을 언제든지 선정할 수 있으므로, 과목별 또는 과목별 시험범위내에서 소정의 시험문제와 시험문항수를 미리 정해 두고서 미리 정해진 시험문제들에 대한 원본정답배열을 미리 세팅해 둘 수 있다.
상기 제 2변환부(18)는 상기 다수의 데이터파일을 각각 DOC문서로 변환시키는 DOC변환부(18a), 및 상기 다수의 데이터파일을 각각 HTML문서로 변환시키는 HTML변환부(18b)를 구비한다.
상기 DOC변환부(18a)에서 출력되는 DOC문서들은 주문형 인쇄(Print On Demand; POD)시스템(22)에게로 전송되고, 상기 HTML변환부(18b)에서 출력되는 HTML문서들은 웹브라우저를 통해 시험응시자의 단말기화면상에 표시된다.
상기 제 2변환부(18)의 DOC변환부(18a)와 HTML변환부(18b)는 상황에 따라 어느 하나만 선택적으로 동작하기도 하고, 동시에 함께 동작하기도 한다. 즉, 오프라인상의 주문형 인쇄시스템(22)에게로 시험문제를 제공하여 시험지 인쇄를 해야 할 경우에는 최종적으로 DOC변환부(18a)를 통해 시험문제가 그 주문형 인쇄시스템(22)에게로 보내지고, 온라인상의 회원이 시험문제를 요구하였을 경우에는 최종적으로 HTML변환부(18b)를 통해 시험문제가 해당 회원에게 보내진다.
상기 HTML변환부(18b)에서 행해지는 워드용 XML문서의 변환은 데이터파일(XML) -> XSL변환 -> HTML문서로 처리하는 과정에 의해서 웹브라우저에서 볼 수 있다. 즉, sample.xml + xml_to_html.xsl = sample.html 로 처리되어 웹브라우저에서 볼 수 있게 된다. XML을 XSL로 변환시키는 프로세스(즉, xml_to_html.xsl)는 도 5에 예시한 바와 같이 된다.
그리고, 웹브라우저에서 보기섞기된 후의 결과를 볼 수 있는데, 우선 보기섞기가 안된 원본형태는 도 6에서와 같이 보여지고, 그 원본 형태를 기준으로 하여 5-4-3-2-1순으로 보기섞기된 경우에는 도 7에서와 같이 보여지며, 그 원본 형태를 기준으로 하여 2-3-5-1-4순으로 보기섞기된 경우에는 도 8에서와 같이 보여진다. 상기 도 6 내지 도 8과 같이 동일한 문제에 대하여 보기 배열이 바뀐 상태로 각각의 시험응시자에게 보여지므로, 상호간의 부정행위가 방지된다.
즉, 도 9 내지 도 11을 보면 더욱 확실하게 알 수 있게 된다. 도 9 내지 도 11은 세명의 회원에게 사회탐구 영역이라는 과목에 대하여 동일한 문제를 제시하여 온라인상에서 시험을 치르는 경우의 시험문제 유형이다. 세명의 회원이 동시에 시험을 치름에 있어서 그 세명의 회원에게 제시된 문제는 상호 동일한 번호순으로 제시되었지만 각 회원의 문제에 종속된 보기배열이 뒤섞여 있다. 여기서, 도 9 내지 도 11에서는 문제의 보기배열만을 뒤섞었지만, 문제의 순서 및 각 문제의 보기배열을 함께 뒤섞을 수도 있다.
상기 도 9 내지 도 11의 시험문제 유형은 상기 HTML변환부(18b)에서 출력되는 HTML문서에 의해 시험을 치르는 온라인상의 회원들에게 제시되는 것이다. 만약 오프라인상에서 많은 수의 시험응시자에게 도 9 내지 도 11에서와 같은 시험문제 유형을 제공해야 될 경우에는 상기 DOC변환부(18a)에서 출력되는 DOC문서가 주문형 인쇄시스템(22)에게로 보내지고, 그 주문형 인쇄시스템(22)에서 인쇄된 시험지가 많은 수의 시험응시자에게 동일날에 동시간대에 제공된다.
도 1에서는 주문형 인쇄시스템(22)을 하나만 도시하였으나, 필요에 따라서 여러개로 구성시켜도 무방하다.
그리고, 상기 제어부(20)는 문제 출제자로부터 문제 및 그에 종속되는 메타정보가 수신되는지에 따라 데이터베이스(14)로의 저장동작을 제어하고, 인터넷 등과 같은 통신망을 통해 회원으로부터의 시험지 요구 또는 오프라인상의 시험지 주문자로부터의 시험지 요구가 있게 되면 상기 정답배열 생성부(16) 및 제 2변환부(18)의 동작이 행해지게 제어한다. 그리고, 상기 제어부(20)에는 회원 인증을 위한 정보가 미리 내장되어 있다. 물론, 그 회원 인증을 위한 정보는 제 2저장부(14b)에 저장되는 것으로 하여도 된다. 그리고, 상기 제어부(20)는 상기 정답배열 생성부(16)에서 도 4와 같은 정답배열 정보를 생성할 수 있도록 기본적인 정보(시험과목, 시험응시자의 수, 문제항수 등)를 제공해 주기도 하고, 그 정답배열 생성부(16)에서 생성된 정답배열 정보에 따라 제 2변환부(18)에서의 변환동작이 정상적으로 이루어지고 있는지를 감시하기 위해 그 정답배열 생성부(16)로부터 정답배열 정보를 수신하여 일시저장하기도 한다.
이어, 본 발명의 실시예에 따른 시험문제 구성방법에 대하여 도 12 내지 도 14의 플로우차트를 참조하여 설명하면 다음과 같다.
우선, 제어부(20)는 수신부(10)에서 수신되는 문제 및 그 문제의 속성을 내포하는 메타정보가 있는지를 판단하게 된다. 판단결과, 수신부(10)에서 수신되는 문제(MS-WORD로 작성된 문제임) 및 그 문제에 종속되는 메타정보가 있으면(S10에서 "Yes") 그 제어부(20)는 그 수신부(10)에 수신된 해당 문제에 종속되는 메타정보를 데이터베이스(14)의 제 2저장부(14b)에게로 저장시키고, XML변환부(12)에게 XML변환을 명령한다. 그에 따라, 그 XML변환부(12)는 그 수신부(10)에서 제공되는 문제를 입력받아 XML변환하여 해당 문제에 대한 컨텐츠 및 조판정보를 상기 데이터베이스(14)의 제 1저장부(14a)에게로 저장시킨다(S12). 상기 제어부(20)는 계속적으로 문제 및 해당 문제에 종속되는 메타정보가 입력되면 상술한 데이터베이스(14)로의 저장동작이 행해지도록 제어한다.
만약, 더 이상의 문제 및 메타정보의 입력이 없는 상태에서 온라인 또는 오프라인을 통해 시험지 요구정보가 입력되면(S14에서 "Yes") 그 제어부(20)는 정답배열 생성부(16)에게 정답배열 생성을 명령하면서 정답배열 생성에 필요한 기본적인 정보(시험과목, 시험응시자의 수, 문제항수 등)를 제공한다.
그에 따라, 그 정답배열 생성부(16)는 상기 데이터베이스(14)의 데이터파일 및 메타정보를 이용하여 일정 시험과목의 문제항수 및 보기들을 구성하고 그 구성한 문제항수의 정답배열을, 시험응시자별로 각기 다른 정답배열이 되도록 소정 혼합도에 따라 수회 가변시켜(예를 들어, 혼합도 3이상으로 각 문제의 보기배열을 섞기함) 시험응시자별로 상호 다른 정답배열이 되도록 한다(S16).
그리고, 그 정답배열 생성부(16)는 그 생성시킨 시험응시자 수별로의 정답배열 정보(도 4 참조)를 제 2저장부(14b)에 저장시키고(S18), 그 저장사실을 제어부(20)에게 통지하면서 그 시험응시자별로의 정답배열 정보를 상기 제어부(20)에게로 보낸다.
그 후, 그 제어부(20)는 상기 제 2변환부(18)를 제어하여 변환동작이 행해지게 한다.
즉, DOC변환부(18a)는 상기 제어부(20)의 제어하여 데이터베이스(14)에서 데이터파일을 독출하여 DOC문서로 변환시키되, 해당 데이터파일의 메타정보에 근거하여 각각의 시험응시자가 각기 다른 정답배열로 된 시험지를 받아 볼 수 있도록 각 문제의 보기를 각각 다르게 섞는다. 이와 같은 방법으로 상기 DOC변환부(18a)에서는 시험응시자의 수에 맞게 시험지 구성을 하는데(S20), 각각의 시험응시자는 동일한 시험문제를 받아보게 되지만 상호 다른 정답배열로 된 시험문제를 접하게 된다. 그 DOC변환부(18a)에서 출력되는 시험문제는 오프라인상의 주문형 인쇄시스템(22)에게로 보내져서 시험지상에 인쇄되어 시험응시자들에게 배포된다.
한편, HTML변환부(18b)는 상기 제어부(20)의 제어하에 데이터베이스(14)에서 데이터파일을 독출하여 HTML문서로 변환시키되, 해당 데이터파일의 메타정보에 근거하여 각각의 시험응시자가 각기 다른 정답배열로 된 시험지를 받아 볼 수 있도록 각 문제의 보기를 각각 다르게 섞는다. 이와 같은 방법으로 상기 HTML변환부(18b)에서는 시험응시자의 수에 맞게 시험지 구성을 하는데(S20), 각각의 시험응시자는 동일한 시험문제를 받아보게 되지만 상호 다른 정답배열로 된 시험문제를 온라인상에서 접하게 된다. 그 HTML변환부(18b)에서 출력되는 시험문제는 온라인을 통해 각각의 시험응시자의 단말기화면상에 표시된다.
상기 DOC변환부(18a)와 HTML변환부(18b)는 항상 동시에 동작을 수행하는 것이 아니고, 오프라인상의 주문형 인쇄시스템(22)에게로 시험문제를 제공하여 시험지 인쇄를 해야 할 경우에는 최종적으로 DOC변환부(18a)를 통해서만 시험문제가 그 주문형 인쇄시스템(22)에게로 보내지고, 온라인상의 회원이 시험문제를 요구하였을 경우에는 최종적으로 HTML변환부(18b)를 통해서만 시험문제가 해당 회원에게 보내진다.
상술한 설명중에서 정답배열 생성 및 저장과정에 대하여, 도 13의 플로우차트를 참조하여 보다 상세히 설명한다. 본 발명의 장치를 운영하는 운영자측에서는 과목당 필요한 시험문제와 시험문항수 등을 언제든지 선정할 수 있으므로, 과목별 또는 과목별 시험범위내에서 소정의 시험문제와 시험문항수를 미리 정해 두고서 미리 정해진 시험문제들에 대한 원본정답배열을 미리 세팅해 둘 수 있다.
정답배열 생성부(16)는 시험응시자의 수대로 가변적인 정답배열을 생성하기 위해, 시험응시자수(Testee), 객관식문항중 보기섞기 가능한 문항수(ItemCnt), 문항별 보기섞기 유무 및 위치변경 가능 옵션(OptArr), 원본정답배열(ansArr) 등이 미리 세팅된 상태에서 정답배열 생성 동작을 시작한다(S16-1).
최초 시작시, 상기 정답배열 생성부(16)는 시험응시자수(Testee; 예컨대 10이라 가정함)와 비교값(Start; 1)을 비교하게 된다. 그 비교동작은 제어부(20)에서 할 수도 있다. 처음에는 그 비교값(Start)이 시험응시자수보다 작으므로(S16-2) 상기 정답배열 생성부(16)는 선정된 시험문제(즉, 데이터파일)중에서 객관식문항중 보기섞기 가능한 문항수(ItemCnt)만큼의 보기섞기된 배열을 얻는다(S16-3). 그리고 나서, 그 정답배열 생성부(16)는 문항별 보기섞기 유무 및 위치변경 가능 옵션(OptArr)에 따라 위치변경가능한 문항에 대하여 섞기를 행한다(S16-4). 이와 같이 보기섞기된 배열과 정답배열(즉, 첫 번째 시험응시자에게 제공되는 시험문제에 대한 정답배열)을 제 2저장부(14b)에 저장한다(S18). 그리고 나서, 이전의 비교값을 +1한 후에 재차 상기 단계 S16-2로 가서 그 단계부터의 동작을 반복한다. 이와 같은 동작은 시험응시자수(Testee)가 비교값(Start)에 비해 크거나 같으면 종료된다.
그리고, 상술한 도 12의 설명중에서 정답배열대로 시험문제를 구성하는 과정에 대하여, 도 14의 플로우차트를 참조하여 보다 상세히 설명한다. ItemNo를 문항번호(초기치=1)라 하고, ItemCnt를 정답배열에 따른 문항수라고 설정한다(S20-1).
최초 시작시, 제 2변환부(18)는 문항번호(ItemNo)와 문항수(ItemCnt; 예컨대 10이라 가정함)를 비교하게 된다. 그 비교동작은 제어부(20)에서 할 수도 있다. 처음에는 그 문항번호(ItemNo)가 문항수(ItemCnt)보다 작으므로(S20-2) 상기 제 2변환부(18)는 제 2저장부(14b)로부터 보기섞기 배열을 할당받고 제 1저장부(14a)로부터 첫 번째 문항번호에 해당하는 데이터파일(XML)을 로드한다(S20-3).
그리고 나서, 현재 로드한 데이터파일을 HTML문서로 변환해야 할 것이면(S20-4에서 "Yes") 그 제 2변환부(18)내의 HTML변환부(18b)가 동작하고(S20-5) 그 변환결과를 HTML문서에 문항으로 추가시킨다(S20-7). 반대로, 그 로드한 데이터파일을 DOC문서로 변환해야 할 것이면(S20-4에서 "No") 그 제 2변환부(18)내의 DOC변환부(18a)가 동작하고(S20-6) 그 변환결과를 DOC문서에 문항으로 추가시킨다(S20-8). 여기서, 상기 로드한 데이터를 HTML문서 또는 DOC문서로 변환해야 할 것인지에 대해서는 제어부(20)에서 명령한다.
이와 같이 하여 하나의 문항이 추가되면 이전의 문항번호(ItemNo)를 +1증가시킨 후에 재차 상기 S20-2의 동작을 수행하여 상술한 동작을 계속 진행시킨다. 이러다가, 문항번호(ItemNo)가 문항수(ItemCnt)보다 크게 되면 더 이상의 문서변환동작을 수행하지 않고, 그동안의 변환동작에 의해 구성시킨 시험문제를 출력하게 된다. 즉, 온라인상으로 출력해야 할 경우(S20-9에서 "Yes")에는 그 구성시킨 시험문제를 시험지형태화하여 온라인을 통해 각각의 시험응시자의 단말기화면상에 표시시킨다. 반대로 오프라인상으로 출력해야 할 경우(S20-9에서 "No")에는 그 구성시킨 시험문제를 주문형 인쇄시스템(22)에게로 보내게 되고, 그 주문형 인쇄시스템(22)에 의해 시험지로 인쇄된다.
한편, 온라인상에서 시험을 치르는 회원 또는 오프라인상에서 시험을 치르는 응시자는 도 15에서와 같은 형태로 된 OMR카드에 답을 기재하게 된다. 물론, 온라인상에서 시험을 치르는 회원은 자신의 단말기의 입력수단을 사용하여 답을 입력할 수도 있다. 도 15에서 시험지번호는 도 4에서의 시험지번호와 동일한 것으로 보면 된다. 예를 들어, 그 시험지번호는 과목별로 0 ∼ 999999번까지 100만명분의 서로 다른 일련번호로 발급된다.
상술한 본 발명의 실시예에서는 DOC문서 또는 HTML문서로 변환하여 시험응시자에게 시험문제를 제공하는 것으로 하였으나, 예를 들어 아래한글문서 또는 궉(querk)문서 등으로 변환하여 제공하여도 무방하다.
이상 상세히 설명한 바와 같이 본 발명에 따르면, 다수의 시험응시자가 동시에 시험을 치르는 경우 서로 상이한 보기섞기에 의해 정답배열이 제각기 다르기 때문에 시험중의 응시자간의 부정행위를 방지하게 되어, 시험응시자간의 변별력을 증대시키는 효과가 있다.
한편, 본 발명은 상술한 실시예로만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위내에서 수정 및 변형하여 실시할 수 있고, 그러한 수정 및 변형이 가해진 기술사상 역시 이하의 특허청구범위에 속하는 것으로 보아야 한다.
도 1은 본 발명에 따른 시험문제 구성장치의 구성도,
도 2는 도 1의 수신부로 입력되는 문제에 대한 MS-WORD에서 편집된 상태를 나타낸 화면예,
도 3은 도 1의 XML변환부에서의 변환후의 소스 샘플을 나타낸 도면,
도 4는 도 1의 데이터베이스에 저장되는 정답배열 정보의 예,
도 5는 도 1의 HTML변환부에서의 동작을 설명하기 위해 예시한 도면,
도 6 내지 도 8은 본 발명의 실시예 설명에 채용되는 화면예로서, 동일한 문제에 대하여 각기 다른 보기섞기가 행해진 경우를 예시한 화면예,
도 9 내지 도 11은 본 발명의 실시예 설명에 채용되는 화면예로서, 동일한 시험과목의 각 문제에 대하여 각기 다른 보기섞기가 행해진 경우를 예시한 화면예,
도 12는 본 발명의 실시예에 따른 시험문제 구성방법을 설명하는 플로우차트,
도 13은 도 12의 정답배열 생성 및 저장과정을 세부적으로 설명하는 플로우차트,
도 14는 도 12의 정답배열대로 시험문제를 구성하는 과정을 세부적으로 설명하는 플로우차트,
도 15는 본 발명의 실시예에 채용되는 OMR카드의 예이다.
< 도면의 주요부분에 대한 부호의 설명 >
10 : 수신부 12 : XML변환부
14 : 데이터베이스 16 : 정답배열 생성부
18 : 제 2변환부 20 : 제어부
22 : 주문형 인쇄시스템 14a : 제 1저장부
14b : 제 2저장부 18a : DOC변환부
18b : HTML변환부

Claims (14)

  1. 다수의 문제 및 각 문제의 속성을 내포하는 메타정보를 네트워크를 통해 수신하는 수신부;
    상기 수신된 문제를, 컨텐츠 및 조판정보를 내재하는 데이터파일로 변환하는 제 1변환부;
    상기 수신된 각 문제의 메타정보 및 상기 데이터파일이 저장되는 데이터베이스;
    상기 데이터베이스의 데이터파일 및 메타정보를 이용하여 각 시험응시자에게 동일하게 제공될 시험문제들의 각각의 보기배열을 기설정된 혼합도에 따라 가변시켜서, 시험응시자별로 각기 다른 정답배열을 생성하는 정답배열 생성부; 및
    상기 데이터베이스에 저장된 다수의 데이터파일을 추출하여 시험가능한 형태로 변환하되, 상기 정답배열 생성부에서 생성된 정답배열 정보에 근거하여 시험응시자별로 각기 다른 정답배열의 시험문제로 출력하는 제 2변환부를 구비하는 것을 특징으로 하는 시험문제 구성장치.
  2. 제 1항에 있어서,
    상기 메타정보에는 각 문제의 정답, 각 문제의 보기섞기 가능여부, 각 문제가 소속되는 과목, 각 문제의 ID가 포함되는 것을 특징으로 하는 시험문제 구성장치.
  3. 제 1항 또는 제 2항에 있어서,
    상기 정답배열 정보에는 과목코드, 상기 과목코드의 시험지 ID, 싱기 시험지 ID에 소속된 시험응시자수별 시험지 번호, 상기 시험지 번호별로 각기 다른 보기섞기가 된 문제들의 정답이 포함되는 것을 특징으로 하는 시험문제 구성장치.
  4. 제 1항에 있어서,
    상기 제 2변환부는 상기 다수의 데이터파일을 각각 DOC문서로 변환시키는 제 1변환기, 및 상기 다수의 데이터파일을 각각 HTML문서로 변환시키는 제 2변환기를 구비하는 것을 특징으로 하는 시험문제 구성장치.
  5. 제 4항에 있어서,
    상기 제 1변환기에서 출력되는 DOC문서들은 주문형 인쇄시스템에게로 전송되는 것을 특징으로 하는 시험문제 구성장치.
  6. 제 4항에 있어서,
    상기 제 2변환기에서 출력되는 HTML문서들은 웹브라우저를 통해 시험응시자의 단말기화면상에 표시되는 것을 특징으로 하는 시험문제 구성장치.
  7. 다수의 문제 및 각 문제의 속성을 내포하는 메타정보를 네트워크를 통해 수신하는 제 1과정;
    상기 수신된 문제를, 컨텐츠 및 조판정보를 내재하는 데이터파일로 변환하는 제 2과정;
    상기 수신된 각 문제의 메타정보 및 상기 데이터파일을 데이터베이스에 저장하는 제 3과정;
    상기 데이터베이스의 데이터파일 및 메타정보를 이용하여 각 시험응시자에게 동일하게 제공될 시험문제들의 각각의 보기배열을 기설정된 혼합도에 따라 가변시켜서, 시험응시자별로 각기 다른 정답배열을 생성하는 제 4과정; 및
    상기 데이터베이스에 저장된 다수의 데이터파일을 추출하여 시험가능한 형태로 변환하되, 상기 제 4과정에 의해 생성된 정답배열 정보에 근거하여 시험응시자별로 각기 다른 정답배열의 시험문제로 출력하는 제 5과정을 구비하는 것을 특징으로 하는 시험문제 구성방법.
  8. 제 7항에 있어서,
    상기 메타정보에는 각 문제의 정답, 각 문제의 보기섞기 가능여부, 각 문제가 소속되는 과목, 각 문제의 ID가 포함되는 것을 특징으로 하는 시험문제 구성방법.
  9. 제 7항에 있어서,
    상기 정답배열 정보에는 과목코드, 상기 과목코드의 시험지 ID, 싱기 시험지 ID에 소속된 시험응시자수별 시험지 번호, 상기 시험지 번호별로 각기 다른 보기섞기가 된 문제들의 정답이 포함되는 것을 특징으로 하는 시험문제 구성방법.
  10. 제 7항에 있어서,
    상기 제 5과정은, 오프라인상의 시험응시자에게 시험문제를 제공할 경우에는 상기 다수의 데이터파일을 각각 DOC문서로 변환시키고, 온라인상의 시험응시자에게 시험문제를 제공할 경우에는 상기 다수의 데이터파일을 각각 HTML문서로 변환시키는 것을 특징으로 하는 시험문제 구성방법.
  11. 제 10항에 있어서,
    상기 DOC문서로 변환된 시험문제들은 주문형 인쇄시스템에게로 전송되는 것을 특징으로 하는 시험문제 구성방법.
  12. 제 10항에 있어서,
    상기 HTML문서로 변환된 시험문제들은 웹브라우저를 통해 시험응시자의 단말기화면상에 표시되는 것을 특징으로 하는 시험문제 구성방법.
  13. 제 7항 내지 제 12항중의 어느 한 항에 기재된 시험문제 구성방법에 의해 제작된 시험지.
  14. 제 7항 내지 제 12항중의 어느 한 항에 기재된 방법을 실행시키기 위한 시험문제 구성 프로그램이 기록된 컴퓨터 판독 가능한 기록매체.
KR1020050006330A 2005-01-24 2005-01-24 시험문제 구성장치 및 방법 KR100522355B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020050006330A KR100522355B1 (ko) 2005-01-24 2005-01-24 시험문제 구성장치 및 방법
EP05821919A EP1844404A1 (en) 2005-01-24 2005-12-22 Test question constructing method and apparatus, test sheet fabricated using the method, and computer-readable recording medium storing test question constructing program for executing the method
US11/795,807 US20080145832A1 (en) 2005-01-24 2005-12-22 Test Question Constructing Method and Apparatus, Test Sheet Fabricated Using the Method, and Computer-Readable Recording Medium Storing Test Question Constructing Program for Executing the Method
PCT/KR2005/004445 WO2006078092A1 (en) 2005-01-24 2005-12-22 Test question constructing method and apparatus, test sheet fabricated using the method, and computer-readable recording medium storing test question constructing program for executing the method
CNA2005800471386A CN101107601A (zh) 2005-01-24 2005-12-22 测试题构建方法和设备、使用该方法制作的试卷以及存储用于执行该方法的测试题构建程序的计算机可读记录介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050006330A KR100522355B1 (ko) 2005-01-24 2005-01-24 시험문제 구성장치 및 방법

Publications (1)

Publication Number Publication Date
KR100522355B1 true KR100522355B1 (ko) 2005-10-18

Family

ID=36692447

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050006330A KR100522355B1 (ko) 2005-01-24 2005-01-24 시험문제 구성장치 및 방법

Country Status (5)

Country Link
US (1) US20080145832A1 (ko)
EP (1) EP1844404A1 (ko)
KR (1) KR100522355B1 (ko)
CN (1) CN101107601A (ko)
WO (1) WO2006078092A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008032962A1 (en) * 2006-09-11 2008-03-20 Ddh, Inc. System and method for transforming electronic document
KR100935913B1 (ko) * 2007-07-16 2010-01-06 이종민 시험문제 생성장치 및 방법
KR101401722B1 (ko) * 2013-12-24 2014-05-30 박형용 개인 맞춤형 온라인 학습 시스템

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10074290B2 (en) * 2009-10-20 2018-09-11 Worddive Ltd. Language training apparatus, method and computer program
WO2011061758A1 (en) * 2009-11-18 2011-05-26 Kumar Gl Umesh Assessment for efficient learning and top performance in competitive exams - system, method, user interface- and a computer application
CN103136172B (zh) * 2011-12-05 2016-08-24 北大方正集团有限公司 输出试题的方法和装置
US9207834B2 (en) * 2012-06-11 2015-12-08 Edupresent Llc Layered multimedia interactive assessment system
JP6205720B2 (ja) * 2012-12-27 2017-10-04 富士通株式会社 試験実施端末、試験実施方法及び試験実施プログラム
CN104298652A (zh) * 2013-07-19 2015-01-21 深圳习习网络科技有限公司 一种电子试卷格式转换方法及装置
CN103902662B (zh) * 2014-03-06 2017-10-20 杭州施强网络科技有限公司 一种基于浏览器的试题生成方法
JP6451580B2 (ja) * 2015-09-30 2019-01-16 京セラドキュメントソリューションズ株式会社 選択肢問題作成装置
JP2017120368A (ja) * 2015-12-25 2017-07-06 カシオ計算機株式会社 通信機器、通信方法及びプログラム
CN107221215A (zh) * 2016-03-21 2017-09-29 上海鸣皋教育科技有限公司 一种快速生成动态练习题的方法
CN105975175A (zh) * 2016-04-26 2016-09-28 广东小天才科技有限公司 选择项的标识方法及装置
CN108154734A (zh) * 2016-12-02 2018-06-12 英业达科技有限公司 试题建立与解答分析系统及其方法
CN109062659A (zh) * 2018-07-04 2018-12-21 广州大学 一种防作弊泛ctf虚拟机的生成方法及其推送方法
JP2022120338A (ja) * 2021-02-05 2022-08-18 セイコーエプソン株式会社 情報処理装置、及び情報処理装置の制御方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3693691B2 (ja) * 1993-12-30 2005-09-07 株式会社リコー 画像処理装置
US6513042B1 (en) * 1999-02-11 2003-01-28 Test.Com Internet test-making method
US6988138B1 (en) * 1999-06-30 2006-01-17 Blackboard Inc. Internet-based education support system and methods
KR19990078964A (ko) * 1999-08-25 1999-11-05 양재근 온라인 시험 서비스 시스템 및 방법
KR20010077611A (ko) * 2000-02-03 2001-08-20 고광선 전자기기를 이용한 시험 관리 시스템
KR20010090664A (ko) * 2000-04-10 2001-10-19 남헌기 인터넷망을 이용한 원격교육시스템 및 그 운영방법
US7922494B2 (en) * 2001-08-28 2011-04-12 International Business Machines Corporation Method for improved administering of tests using customized user alerts
KR20030024306A (ko) * 2001-09-17 2003-03-26 주식회사 한해인포시스템 어학시험평가시스템 및 어학시험평가방법
US7318191B2 (en) * 2002-10-10 2008-01-08 Bhk Systems, L.P. Automated system and method for dynamically generating customized typeset question-based documents
US20040153504A1 (en) * 2002-11-21 2004-08-05 Norman Hutchinson Method and system for enhancing collaboration using computers and networking
US20050181346A1 (en) * 2004-02-17 2005-08-18 Philip Heller Creating variants of one or more statements
US20060134593A1 (en) * 2004-12-21 2006-06-22 Resource Bridge Toolbox, Llc Web deployed e-learning knowledge management system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008032962A1 (en) * 2006-09-11 2008-03-20 Ddh, Inc. System and method for transforming electronic document
KR100935913B1 (ko) * 2007-07-16 2010-01-06 이종민 시험문제 생성장치 및 방법
KR101401722B1 (ko) * 2013-12-24 2014-05-30 박형용 개인 맞춤형 온라인 학습 시스템
WO2015099385A1 (ko) * 2013-12-24 2015-07-02 박형용 개인 맞춤형 온라인 학습 시스템

Also Published As

Publication number Publication date
EP1844404A1 (en) 2007-10-17
WO2006078092A1 (en) 2006-07-27
CN101107601A (zh) 2008-01-16
US20080145832A1 (en) 2008-06-19

Similar Documents

Publication Publication Date Title
KR100522355B1 (ko) 시험문제 구성장치 및 방법
KR100533358B1 (ko) 시험문제 구성장치 및 방법
Paltridge Academic writing
Freund et al. The effects of textual environment on reading comprehension: Implications for searching as learning
Jones et al. Reading engagement: A comparison between e-books and traditional print books in an elementary classroom
Hennessy et al. Emerging teacher strategies for mediating ‘Technology-integrated Instructional Conversations’: a socio-cultural perspective
Cameron et al. Comparing weblogs to threaded discussion tools in online educational contexts.
Elwood et al. Predictability in high-stakes examinations: Students’ perspectives on a perennial assessment dilemma
Fielding Jean Rudduck (1937–2007)‘Carving a new order of experience’: A preliminary appreciation of the work of Jean Rudduck in the field of student voice
Van Weerdenburg et al. Touch‐typing for better spelling and narrative‐writing skills on the computer
Shintani Repeating input-based tasks with young beginner learners
Cheng et al. Screencast video feedback in online TESOL classes
Davis et al. Assessing student writing on tablets
Barrance et al. Young people’s views on choice and fairness through their experiences of curriculum as examination specifications at GCSE
Coniam et al. Incorporating wikis into the teaching of English writing
Buckingham Doing a research project in English studies: A guide for students
CN111915174A (zh) 基于电子绘本的小学生审辩性思维测评方法及系统
Fitzpatrick et al. A DBQ in a multiple-choice world: A tale of two assessments in a unit on the Byzantine Empire
US20180357914A1 (en) Method and System of Customizing Scripture Study
Jansen et al. How research can lead to better government forms
Hammersley A sociology of truth?
Morris et al. Literacy for life: Evaluating the National Literacy Trust’s bespoke programme for schools
Sidler et al. Writing in a post-Berlinian landscape: Cultural composition in the classroom
Bjerg et al. Enacting subjectivities in educational history: Methodological reflections on the use of qualitative interviews for history writing
Anna Computerized testing in a nursing curriculum: a case study

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
J204 Request for invalidation trial [patent]
J301 Trial decision

Free format text: TRIAL DECISION FOR INVALIDATION REQUESTED 20061108

Effective date: 20070731

J2X1 Appeal (before the patent court)

Free format text: INVALIDATION

J2X1 Appeal (before the patent court)
J302 Written judgement (patent court)

Free format text: JUDGMENT (PATENT COURT) FOR INVALIDATION REQUESTED 20070904

Effective date: 20080612

J301 Trial decision

Free format text: TRIAL DECISION FOR INVALIDATION REQUESTED 20080721

Effective date: 20081007

EXTG Ip right invalidated