KR20200086498A - Computer program for extracting and analyzing learning completeness of an examinee from multiple choice tests and method using the same - Google Patents
Computer program for extracting and analyzing learning completeness of an examinee from multiple choice tests and method using the same Download PDFInfo
- Publication number
- KR20200086498A KR20200086498A KR1020190002744A KR20190002744A KR20200086498A KR 20200086498 A KR20200086498 A KR 20200086498A KR 1020190002744 A KR1020190002744 A KR 1020190002744A KR 20190002744 A KR20190002744 A KR 20190002744A KR 20200086498 A KR20200086498 A KR 20200086498A
- Authority
- KR
- South Korea
- Prior art keywords
- answer
- question
- item
- weight
- scoring target
- Prior art date
Links
- 238000004590 computer program Methods 0.000 title claims abstract description 50
- 238000012360 testing method Methods 0.000 title claims abstract description 37
- 238000000034 method Methods 0.000 title claims description 19
- 238000011156 evaluation Methods 0.000 claims description 28
- 238000012015 optical character recognition Methods 0.000 claims 2
- 239000000284 extract Substances 0.000 abstract description 11
- 238000004458 analytical method Methods 0.000 description 57
- 238000013135 deep learning Methods 0.000 description 6
- 238000010801 machine learning Methods 0.000 description 6
- 238000013473 artificial intelligence Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
- G06Q50/2057—Career enhancement or continuing education service
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
- G09B7/06—Electrically-operated teaching apparatus or devices working with questions and answers of the multiple-choice answer-type, i.e. where a given question is provided with a series of answers and a choice has to be made from the answers
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Theoretical Computer Science (AREA)
- Strategic Management (AREA)
- General Physics & Mathematics (AREA)
- Human Resources & Organizations (AREA)
- Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Electrically Operated Instructional Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
본 발명의 개념에 따른 실시예는 수험자의 학습완성도를 추출하고 분석하는 방법에 관한 것으로, 특히 객관식 시험에서 객관식 문항들로부터 수험자의 학습완성도를 추출하고 분석하는 시험 설계 및 분석방법과 상기 분석방법을 수행할 수 있는 컴퓨터 프로그램에 관한 것이다.An embodiment according to the concept of the present invention relates to a method of extracting and analyzing the learner's learning completion level, in particular, a test design and analysis method and the analysis method for extracting and analyzing the learner's learning completion level from multiple-choice questions in the multiple-choice test It relates to a computer program that can be executed.
시험의 목적은 수험자의 학습 완성도를 확인하는 것으로서 상기 학습 완성도를 확인하는 가장 좋은 방법은 서술형 또는 주관식 문항에 대한 평가를 통해서이다. 그러나 이러한 방법은, 수험자들의 수가 많아질수록, 많은 시간과 비용이 소요되고, 채점자에 따라 서술형 또는 주관식 문항에 대한 평가가 달라질 수 있으므로 객관적이지 못하다는 단점이 있다. 따라서, 서술형 또는 주관식 문항에 대한 평가의 대안으로 객관식 문항을 통하여 수험자의 학습 완성도를 확인하는 방법이 보편화되었다.The purpose of the test is to confirm the completeness of the learner's learning. The best way to confirm the completeness of the test is to evaluate the narrative or subjective questions. However, this method has disadvantages that it is not objective, as the number of examinees increases, it takes more time and money, and evaluation of narrative or subjective questions may vary depending on the scorer. Therefore, as an alternative to evaluating the narrative or subjective questions, a method of confirming the learner's learning completion through the multiple choice questions has become common.
객관식 문항들의 경우에는 OMR 카드를 통해 많은 수험자들에 대한 성적 처리가 빠른 시간 내에 가능하고 채점자에 따라 상기 객관식 문항들에 대한 평가가 달라지지 않는 장점이 있다. 그러나, 객관식 문항들을 이용한 객관식 시험의 경우에는 상기 객관식 시험의 난이도에 따른 변별력에 대한 문제가 있고, 수험자가 객관식 문항의 정답을 맞춘 경우 상기 수험자가 상기 정답을 진짜로 알고 맞춘것인지 아니면 어쩌다 맞춘것인지를 확인하기 어렵다. 또한, 객관식 문항에 대한 수험자의 학습 완성도는 두 가지, 예컨대 정답과 오답으로만 판단되므로 상기 수험자의 학습 완성도를 정확하게 확인하기 어려웠다.In the case of multiple-choice questions, there is an advantage in that score processing for a large number of examinees through the OMR card is possible within a short time and evaluation of the multiple-choice questions does not vary according to the scorer. However, in the case of a multiple-choice test using multiple-choice questions, there is a problem of discrimination according to the difficulty of the multiple-choice test, and when the examinee corrects the correct answer of the multiple-choice question, check whether the examinee really knows and corrects the correct answer. It is difficult to do. In addition, it is difficult to accurately check the learning completion degree of the examinee because the candidate's learning completion degree for the multiple-choice question is judged by only two types, for example, correct answers and incorrect answers.
본 발명이 이루고자 하는 기술적인 과제는 객관식 시험의 수험자가 객관식 문항의 정답을 맞춘 경우 상기 수험자가 상기 정답을 진짜로 알고 맞춘것인지 아니면 어쩌다 맞춘것인지를 추출, 분석, 및 평가할 수 있는 컴퓨터 프로그램과 이를 이용한 분석방법을 제공하는 것이다.The technical problem to be achieved by the present invention is a computer program capable of extracting, analyzing, and evaluating whether the candidate really knows or corrects the correct answer when the candidate of the multiple choice test answers the correct answer of the multiple choice question and analysis using the same Is to provide a way.
본 발명에 따른 저장 매체에 저장되고 객관식 시험으로부터 수험자의 학습 완성도를 분석하는 컴퓨터 프로그램은 객관식 답안지를 외부 장치로부터 수신하는 단계; 상기 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항에 제1답안만이 존재하고 상기 제1답안이 정답인지를 판단하는 단계; 상기 채점 대상 문항에 상기 제1답안만이 존재하고 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 제1답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제2가중치를 부여하는 단계; 상기 채점 대상 문항에 상기 제1답안과 제2답안이 존재하고 상기 제1답안과 상기 제2답안 중에서 어느 하나가 상기 정답인지를 판단하는 단계; 및 상기 채점 대상 문항에 상기 제1답안과 상기 제2답안이 존재하고 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제3가중치를 부여하고, 상기 제2답안이 상기 정답일 때 상기 채점 대상 문항에 제4가중치를 부여하고, 상기 제1답안과 상기 제2답안 모두가 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함한다.A computer program stored in a storage medium according to the present invention and analyzing the learner's learning completeness from the multiple-choice test comprises: receiving a multiple-choice answer sheet from an external device; Determining whether only the first answer exists in the item to be graded from the first item to the last item included in the multiple-choice answer sheet and whether the first answer is the correct answer; When only the first answer is present in the scoring target question and the first answer is the correct answer, a first weight is given to the scoring target question, and when the first answer is not the correct answer, Assigning two weights; Determining whether one of the first answer and the second answer is the correct answer, and the first answer and the second answer exist in the scoring target question; And when the first answer and the second answer exist in the question to be scored, and when the first answer is the correct answer, a third weight is given to the scoring target question, and when the second answer is the correct answer, the scoring is performed. And assigning a fourth weighting value to the target item, and assigning a fifth weighting value to the scoring target item when both the first answer and the second answer are not the correct answer.
본 발명에 따른 저장 매체에 저장되고 객관식 시험으로부터 수험자의 학습 완성도를 분석하는 컴퓨터 프로그램은 외부 장치로부터 객관식 답안지를 수신하는 단계; 상기 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항에 하나의 답안만이 존재하는지 두 개의 답안들이 존재하는지를 판단하는 단계; 상기 채점 대상 문항에 상기 하나의 답안이 존재하고 상기 하나의 답안이 정답일 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 하나의 답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제2가중치를 부여하는 단계; 및 상기 채점 대상 문항에 상기 두 개의 답안들이 존재하고 상기 두 개의 답안들 중에서 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제3가중치를 부여하고, 상기 두 개의 답안들 중에서 제2답안이 상기 정답일 때 제4가중치를 부여하고, 상기 두 개의 답안들 모두가 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함한다.A computer program stored in a storage medium according to the present invention and analyzing the learner's learning completeness from the multiple-choice test comprises: receiving a multiple-choice answer sheet from an external device; Determining whether there is only one answer or two answers from the first item to the last item included in the multiple-choice answer sheet; When a single answer exists in the scoring target question and the answer is correct, a first weight is given to the scoring target question, and when the answer is not the correct answer, a second weight is applied to the scoring target question. Granting; And when the two answers exist in the scoring target question and the first answer is the correct answer among the two answers, a third weight is given to the scoring target question, and the second answer among the two answers is the And assigning a fourth weighting value when the answer is correct, and assigning a fifth weighting value to the item to be scored when both of the answers are not the correct answer.
본 발명에 따른 저장 매체에 저장되고 객관식 시험으로부터 수험자의 학습 완성도를 분석하는 컴퓨터 프로그램은 외부 장치로부터 객관식 답안지를 수신하는 단계; 상기 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항에 포함된 제1답안이 정답인지 판단하는 단계; 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제2답안이 존재하는지를 판단하는 단계; 상기 채점 대상 문항에 상기 제2답안이 존재하지 않을 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 채점 대상 문항에 상기 제2답안이 존재할 때 상기 채점 대상 문항에 제3가중치를 부여하는 단계; 및 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하지 않을 때 상기 채점 대상 문항에 제2가중치를 부여하고, 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하고 상기 채점 대상 문항에 포함된 상기 제2답안이 상기 정답일 때 상기 채점 대상 문항에 제4가중치를 부여하고, 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하고 상기 채점 대상 문항에 포함된 상기 제2답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함한다.A computer program stored in a storage medium according to the present invention and analyzing the learner's learning completeness from the multiple-choice test comprises: receiving a multiple-choice answer sheet from an external device; Determining whether the first answer included in the scoring target item is the correct answer from the first item to the last item included in the multiple-choice answer sheet; Determining whether a second answer exists in the scoring target question when the first answer included in the scoring target question is the correct answer; Assigning a first weight to the scoring target question when the second answer does not exist in the scoring target question, and assigning a third weight to the scoring target question when the second answer exists in the scoring target question; ; And when the first answer included in the scoring target question is not the correct answer and the second answer does not exist in the scoring target question, a second weight is assigned to the scoring target question, and included in the scoring target question. When the first answer is not the correct answer and the second answer exists in the scoring target question and the second answer included in the scoring target question is the correct answer, a fourth weight is assigned to the scoring target question, and the When the first answer included in the question to be scored is not the correct answer, and the second answer is present in the question to be scored and the second answer included in the question to be scored is not the correct answer, the question is submitted to the question to be scored. And assigning a 5 weight.
본 발명의 실시예에 따른 객관식 문항들(또는 객관식 문제들)을 포함하는 객관식 시험으로부터 수험자의 학습완성도를 추출, 분석, 및/또는 평가하는 컴퓨터 프로그램과 이를 이용한 분석방법은, 상기 객관식 문항들(또는 객관식 문제들)에 대한 답들로부터 상기 수험자의 상기 객관식 문항들(또는 객관식 문제들)에 대한 학습완성도를 세밀하고 정확하게 추출, 분석, 및/또는 평가할 수 있는 효과가 있다.A computer program for extracting, analyzing, and/or evaluating an examinee's learning completion from a multiple-choice test including multiple-choice questions (or multiple-choice questions) according to an embodiment of the present invention, and an analysis method using the same, include the multiple-choice questions ( Or, from the answers to multiple choice questions), the examinee has the effect of precisely, accurately extracting, analyzing, and/or evaluating the learning completion of the multiple choice questions (or multiple choice questions).
상기 컴퓨터 프로그램과 상기 분석방법은 객관식 문항들 각각을 카테고리들 중에서 해당 카테고리로 분류하고, 분류의 결과에 따라 수험자가 어떤 카테고리에 속하는 분야에 대한 학습량이 많은지 또는 어떤 카테고리에 속하는 분야에 대한 학습량은 충분하나 연습이 부족한지 등을 정확하게 추출, 분석, 및/또는 평가할 수 있는 효과가 있다.The computer program and the analysis method classify each of the multiple-choice items into a corresponding category among categories, and according to the result of the classification, the amount of learning for a category to which the examinee belongs to a category or a category for which the category belongs is sufficient. One has the effect of accurately extracting, analyzing, and/or evaluating lack of practice.
본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 상세한 설명이 제공된다.
도 1은 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습완성도 분석방법을 수행할 수 있는 학습 완성도 분석 시스템을 나타낸다.
도 2는 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습완성도 분석방법을 수행할 수 있는 학습 완성도 분석 시스템을 나타낸다.
도 3은 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습완성도 분석방법의 실시 예를 나타낸다.
도 4는 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습완성도 분석방법의 다른 실시 예를 나타낸다.
도 5는 각 문항별 카테고리와 점수, 및 평가 의견을 포함하는 문서의 실시 예를 나타낸다.
도 6은 각 가중치의 총합과 이에 따른 평가 의견을 포함하는 문서의 실시 예를 나타낸다.
도 7은 카테고리별 점수 총합과 평가 의견을 포함하는 문서의 실시 예를 나타낸다.In order to better understand the drawings cited in the detailed description of the present invention, detailed descriptions of each drawing are provided.
1 is a learning completion analysis system capable of performing a learning completion analysis method using a computer program that extracts and analyzes a student's learning completion level from a multiple-choice test according to embodiments of the present invention.
2 shows a learning completeness analysis system capable of performing a learning completeness analysis method using a computer program that extracts and analyzes a candidate's learning completeness from a multiple-choice test according to embodiments of the present invention.
3 shows an embodiment of a method for analyzing learning completion using a computer program that extracts and analyzes a student's learning completeness from a multiple-choice test according to embodiments of the present invention.
4 shows another embodiment of a method for analyzing learning completion using a computer program that extracts and analyzes a student's learning completeness from a multiple-choice test according to embodiments of the present invention.
5 shows an embodiment of a document including a category, score, and evaluation opinion for each item.
6 shows an example of a document including the sum of weights and evaluation opinions accordingly.
7 shows an example of a document including a total score for each category and evaluation opinions.
본 발명에 따른 객관식 시험(또는 객관식 문항들)으로부터 수험자의 학습 완성도를 분석, 추출, 및/또는 평가(또는 판정)하는 컴퓨터 프로그램(이하, '학습 완성도 분석 컴퓨터 프로그램')은 컴퓨터와 결합되어 본 명세서에서 설명되는 상기 학습완성도를 추출, 분석, 및/또는 평가(또는 판정)할 수 있고, 저장 매체(예컨대, 데이터를 저장하는 데이터 저장 매체 또는 메모리 장치)에 저장되고 상기 컴퓨터에 의해 실행될 수 있다.A computer program that analyzes, extracts, and/or evaluates (or judges) a student's learning completeness from a multiple-choice test (or multiple-choice items) according to the present invention (hereinafter referred to as a'learning completion analysis computer program') is combined with a computer. The learning completion described in the specification can be extracted, analyzed, and/or evaluated (or judged), stored on a storage medium (eg, a data storage medium or memory device storing data) and executed by the computer. .
본 발명에서 학습 완성도는 해당 객관식 문항(또는 객관식 문제)을 정확히 이해하고 정답을 맞춘 것인지, 두 개의 선택할 수 있는 항목들을 고민하다가 정답을 맞춘 것인지, 두 개의 선택할 수 있는 항목들을 고민했으나 정답을 맞추지 못한 것인지, 학습량이 부족하여 정답을 찾지 못한 것인지, 정답을 착각한 것인지, 실수로 정답을 맞추지 못한 것인지, 및/또는 정확히 이해하지는 못했으나 어쩌다 정답을 맞춘 것인지 등을 의미한다.In the present invention, the learning completion degree accurately understands the corresponding multiple-choice item (or multiple-choice question) and corrects the correct answer, or contemplates two selectable items and then corrects the answer, or contemplates two selectable items, but fails to match the correct answer It means whether the correct answer was not found due to lack of learning volume, the mistake of the correct answer, the mistake of incorrectly answering the correct answer, and/or how the correct answer was corrected even though it was not correctly understood.
컴퓨터는 학습 완성도 분석 컴퓨터 프로그램을 실행할 수 있는 하드웨어 장치(또는 컴퓨팅 장치)를 의미하고, 상기 하드웨어 장치(또는 컴퓨팅 장치)는 PC (personal computer), 랩탑 컴퓨터, 태블릿 PC, 인터넷 모바일 장치(Internet Mobile Device(MID)), 스마트폰, 프로세서, 또는 서버 등을 의미한다.The computer means a hardware device (or computing device) capable of executing a learning completion analysis computer program, and the hardware device (or computing device) is a personal computer (PC), a laptop computer, a tablet PC, or an Internet mobile device. (MID)), a smartphone, a processor, or a server.
하드웨어 장치(또는 컴퓨팅 장치)에 의해 실행되는 학습 완성도 분석 컴퓨터 프로그램은 애플리케이션(또는 애플리케이션 프로그램) 또는 모바일 앱과 같이 소프트웨어로 구현될 수 있다. 상기 학습 완성도 분석 컴퓨터 프로그램은 인공 지능 (Artificial Intelligence(AI)) 알고리즘, 머신 러닝(Machine Learning) 알고리즘, 또는 딥 러닝(deep learning) 알고리즘을 이용하여 수험자의 객관식 문항들을 자동으로 분석할 수 있다.A learning completion analysis computer program executed by a hardware device (or computing device) may be implemented in software such as an application (or application program) or a mobile app. The learning completion analysis computer program may automatically analyze the multiple-choice questions of the examinee using an artificial intelligence (AI) algorithm, a machine learning algorithm, or a deep learning algorithm.
머신 러닝을 이용한 학습 완성도 분석 컴퓨터 프로그램은 머신 러닝 알고리즘을 이용하여 수험자의 데이터(예컨대, 상기 수험자가 과거 및/또는 현재에 치른 객관식 시험들 각각에 포함된 객관식 문항들에 대한 학습완성도)를 추출하여 분석하고, 분석을 통해 스스로 학습하고, 스스로 학습된 내용을 기반으로 상기 수험자의 학습 정도(또는 학습량) 및/또는 상기 학습 완성도를 판단하거나 예측할 수 있다.Analysis of Learning Completion Using Machine Learning The computer program extracts the examinee's data using the machine learning algorithm (for example, the learning completion degree for multiple choice questions included in each of the multiple-choice tests that the candidate took in the past and/or present) Analyze, self-learning through analysis, and can determine or predict the learner's learning degree (or learning amount) and/or learning completion based on self-learning content.
딥 러닝을 이용한 학습 완성도 분석 컴퓨터 프로그램은 딥 러닝 알고리즘(또는 인공 신경망(artificial neural network))을 이용하여 수험자의 데이터(예컨대, 상기 수험자가 과거 및/또는 현재에 치른 객관식 시험들 각각에 포함된 객관식 문항들에 대한 학습 완성도)를 추출하여 분석하고, 분석을 통해 스스로 학습하고, 스스로 학습된 내용을 기반으로 상기 수험자의 학습 정도(또는 학습량) 및/또는 상기 학습 완성도를 판단하거나 예측할 수 있다.Analysis of learning completeness using deep learning A computer program uses a deep learning algorithm (or an artificial neural network) to select multiple subjects included in each of the candidate's past and/or present multiple-choice tests. It can extract and analyze the completeness of learning for questions), self-learn through analysis, and judge or predict the learning degree (or amount of learning) and/or the completeness of learning by the self-learned content.
학습 완성도 분석 컴퓨터 프로그램은 수험자가 과거 및/또는 현재에 치른 객관식 시험들 각각에 포함된 객관식 문항들을 학습 완성도를 판단하기 위해 상기 수험자의 빅 데이터로서 이용할 수 있다. 따라서 학습 완성도 분석 컴퓨터 프로그램은 상기 빅 데이터를 이용하여 상기 수험자의 주간, 월간, 분기별, 반기별, 및/또는 년간 학습량의 변화 또는 성적의 변화 등을 분석할 수 있다.A learning completion analysis computer program can use multiple choice questions included in each of the multiple choice tests the candidate took in the past and/or present as big data of the test taker to determine learning completion. Therefore, the learning completion analysis computer program may analyze the change in the amount of learning or the change in the amount of learning in the weekly, monthly, quarterly, semi-annually, and/or annually by using the big data.
본 명세서에서 학습완성도 분석 컴퓨터 프로그램이 다른 컴퓨팅 장치와 신호 (데이터 또는 정보)를 주고받는다 함은 상기 학습 완성도 분석 컴퓨터 프로그램을 실행하는 프로세서(또는 제어 장치)의 제어에 따라 작동하는 유무선 송수신기를 통해 상기 다른 컴퓨팅 장치의 송수신기와 신호(데이터 또는 정보)를 주고받는 것을 의미한다.In this specification, the learning completion analysis computer program exchanges signals (data or information) with other computing devices through a wired/wireless transceiver that operates under the control of a processor (or control device) executing the learning completion analysis computer program. It means sending and receiving signals (data or information) with the transceivers of other computing devices.
본 명세서에서는 설명의 편의를 위해, 각 문항(또는 각 문제)에 대해 다섯 개의 선택지들(또는 항목들, 예컨대 오지선다(五枝選多)) 가운데 하나 또는 2개의 답안들을 선택하게 하는 실시 예가 도시되고 설명되나, 본 발명은 각 문항(또는 각 문제)에 대해 사지선다(四枝選多) 중에서 하나 또는 2개의 답안들을 선택하게 하는 실시 예, 또는 각 문항(또는 각 문제)에 대해 6개의 항목들 중에서 하나 내지 3개의 답안들을 선택하게 하는 실시 예 등으로 변형가능하다.In the present specification, for convenience of explanation, an embodiment in which one or two answers are selected from among five options (or items, for example, five items) for each item (or each problem) is illustrated. As described and described, the present invention is an embodiment in which one or two answers are selected among four questions (or each question), or six items for each question (or each question). It may be modified to an embodiment in which one to three answers are selected among them.
도 1은 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습 완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습 완성도 분석 방법을 수행할 수 있는 학습 완성도 분석 시스템을 나타낸다. 도 1을 참조하면, 학습 완성도 분석 시스템은 컴퓨터와 스캐너(200A)를 포함한다.1 is a learning completeness analysis system capable of performing a learning completeness analysis method using a computer program that extracts and analyzes a student's learning completeness from a multiple-choice test according to embodiments of the present invention. Referring to FIG. 1, the learning completion analysis system includes a computer and a
상기 컴퓨터는 컴퓨터 본체(100A), 입력 장치(130), 및 출력 장치(140)를 포함하고, 컴퓨터 본체(100A)는 학습 완성도 분석 컴퓨터 프로그램(115)에 해당하는 애플리케이션을 실행시킬 수 있는 프로세서(또는 CPU(110))와, 애플리케이션(115)과 애플리케이션(115)에 의해 생성된 데이터를 저장할 수 있는 메모리 장치(120)를 포함한다.The computer includes a computer
메모리 장치(120)는 하드 디스크 드라이브(hard disc drive(HDD) 또는 솔리드 스테이트 드라이브(solid state drive(SDD))와 같은 불휘발성 메모리 장치와, DRAM 또는 SRAM과 같은 휘발성 메모리 장치를 포함한다.The
스캐너(200A)는 종이 답안지(또는 객관식 답안지; 210A)에 포함된 첫 번째 문항부터 마지막 문항까지 각 문항에 대한 하나의 답안 또는 두 개의 답안들을 획득(또는 스캔)할 수 있는 장치를 의미한다. 답안지(210A)가 OMR(optical mark reader) 카드일 때, 스캐너(200A)는 OMR(optical mark reader)일 수 있으나 이에 한정되는 것은 아니다.The
애플리케이션(115)은 제1답안과 제2답안을 서로 식별(또는 구분)할 수 있다. 예컨대, 제1답안이 제1마크(예컨대, 원)로 표시(또는 표기)되고 제2답안이 제2마크 (예컨대, 삼각형)로 표시될 때, 애플리케이션(115)은 각 문항에 표시된 상기 제1마크와 상기 제2마크를 식별(또는 구분)할 수 있는 기능을 갖는다. 또한, 제1답안이 제1컬러로 표시되고 제2답안이 상기 제1컬러와 다른 제2컬러로 표시될 때, 애플리케이션(115)은 각 문항에 표시된 상기 제1컬러와 상기 제2컬러를 식별(또는 구분)할 수 있는 기능을 갖는다.The
문항들 각각에 표시된 제1마크와 제2마크 각각의 특징(예컨대, 모양과 크기)이 서로 다를 수 있고, 문항들 각각에 표시된 제1컬러와 제2컬러 각각의 특징(예컨대, 모양, 크기, 채도, 및/또는 명도)이 서로 다를 수 있다.The characteristics of each of the first mark and the second mark (eg, shape and size) displayed on each of the questions may be different, and the characteristics of each of the first color and the second color displayed on each of the questions (eg, shape, size, Saturation, and/or brightness).
그러나, 애플리케이션(115)은 문항들 각각에 표시된 제1마크의 특징(예컨대, 모양과 크기), 및/또는 제2마크의 특징(예컨대, 모양과 크기)을 스스로 학습하여, 상기 문항들에 표시된 특징들이 서로 다르더라도 학습 결과에 따라 상기 제1마크의 특징과 동일(또는 유사)한 특징을 갖는 마크를 제1답안으로 그리고 상기 제2마크의 특징과 동일(또는 유사)한 특징을 갖는 마크를 제2답안으로 스스로 판단(또는 결정)할 수 있다.However, the
또한, 애플리케이션(115)은 문항들 각각에 표시된 제1컬러의 특징(예컨대, 모양, 크기, 명도, 및/또는 채도), 및/또는 제2컬러의 특징(예컨대, 모양, 크기, 명도, 및/또는 채도)을 스스로 학습하여, 상기 문항들에 표시된 특징들이 서로 다르더라도 학습 결과에 따라 상기 제1컬러의 특징과 동일(또는 유사)한 특징을 갖는 컬러를 제1답안으로 그리고 상기 제2컬러의 특징과 동일(또는 유사)한 특징을 갖는 컬러를 제2답안으로 스스로 판단(또는 결정)할 수 있다.In addition, the
제1답안은 정답인지의 여부와 무관하게 답안지(210A)를 제출한 수험자가 제1마크 또는 제1컬러로 표시한 답안을 의미하고, 제2답안은 정답인지의 여부와 무관하게 상기 수험자가 제2마크 또는 제2컬러로 표시한 답안을 의미한다고 가정한다. 그 명칭에도 불구하고, 제1답안이 정답일 확율은 제2답안이 정답일 확율보다 높다고 가정한다.The first answer means the answer indicated by the first mark or the first color by the examinee who submitted the answer sheet 210A regardless of whether the answer is correct or not, and the second answer is irrespective of whether the answer is correct or not. It is assumed that it means the answer marked with 2 mark or 2nd color. Despite the name, it is assumed that the probability that the first answer is correct is higher than the probability that the second answer is correct.
도 2는 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습 완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습 완성도 분석 방법을 수행할 수 있는 학습 완성도 분석 시스템을 나타낸다. 도 2를 참조하면, 학습 완성도 분석 시스템은 서비스 서버(100B)와 사용자 컴퓨터(200B)를 포함한다.2 shows a learning completion analysis system capable of performing a learning completion analysis method using a computer program that extracts and analyzes a student's learning completeness from a multiple-choice test according to embodiments of the present invention. 2, the learning completion analysis system includes a
서비스 서버(100B)와 사용자 컴퓨터(200B)는 통신망, 예컨대 인터넷 또는 인트라넷을 통해 신호들(데이터 또는 정보)을 주거나 받을 수 있다.The
서비스 서버(100B)는 학습 완성도 분석 컴퓨터 프로그램(115)에 해당하는 애플리케이션을 실행시킬 수 있는 프로세서(또는 CPU(110))와, 애플리케이션(115)과 애플리케이션(115)에 의해 생성된 데이터를 저장할 수 있는 데이터베이스(300)를 포함한다.The
실시 예에 따라 서비스 서버(100B)가 서비스 제공자의 컴퓨터일 때, 상기 서비스 제공자의 컴퓨터는 도 1을 참조하여 설명한 컴퓨터 본체(100A), 입력 장치 (130), 및 출력 장치(140)를 포함하는 컴퓨터일 수 있다.According to an embodiment, when the
사용자 컴퓨터(200B)는 프로그램(220)을 실행할 수 있는 프로세서를 포함하고, 상기 프로세서에 의해 실행되는 프로그램(220)은 첫 번째 문항부터 마지막 문항까지를 포함하는 시험 문제지(예컨대, 객관식 시험 문제지)를 사용자 컴퓨터 (200B)의 디스플레이 장치를 통해 사용자(또는 수험자)에게 제공하고, 문항별로 상기 사용자가 입력하는 하나의 답안 또는 두 개의 답안들을 포함하는 답안지(또는 객관식 답안지; 210B)에 해당하는 신호(데이터 또는 정보)를 통신망, 예컨대 인터넷 또는 인트라넷을 통해 서비스 서버(100B)의 애플리케이션(115)으로 전송할 수 있다.The
도 3은 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습 완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습 완성도 분석 방법의 실시 예를 나타내고, 도 5는 각 문항별 카테고리와 점수, 및 평가 의견을 포함하는 문서의 실시 예를 나타낸다.FIG. 3 shows an embodiment of a method for analyzing learning completion using a computer program that extracts and analyzes a student's learning completeness from a multiple-choice test according to embodiments of the present invention, and FIG. 5 shows categories, scores, and evaluation opinions for each item. An example of an included document is shown.
도 1 내지 도 3, 및 도 5를 참조하면, 학습 완성도 분석 컴퓨터 프로그램, 즉 애플리케이션(115)은 답안지(210A 또는 210B)에 표시(또는 표기)된 답안 정보(이하, 설명의 편의를 위해 '객관식 답안지'라 한다.)를 외부 장치(200A 또는 200B)로부터 수신한다.1 to 3, and 5, the learning completion analysis computer program, that is, the
애플리케이션(115)은, 제1마크와 제2마크 중에서 적어도 하나 및/또는 제1컬러와 제2컬러 중에서 적어도 하나를 이용하여, 첫 번째 문항부터 마지막 문항까지 각 문항의 정답과 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 각 채점 대상 문항의 답안(또는 답안들)을 비교하고 비교 결과에 따라 상기 각 채점 대상 문항의 맞고 틀림을 판단한다.The
예컨대, 애플리케이션(115)은 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항에 제1마크(또는 제1컬러)로 표시된 제1답안만이 존재하는지를 판단한 후 상기 제1답안이 정답인지를 판단한다(S110과 S115).For example, the
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항1'이고 하나의 답안(즉, 제1마크로 표시된 제1답안)만이 존재하고 상기 제1답안이 정답이라고 가정한다(또는 애플리케이션(115)이 판단한다.). 수험자는 문항1의 답안에 확신을 갖고 하나의 답안만을 표시한 예이다. 예컨대, 애플리케이션(115)은 '문항1'에 대한 5개의 항목들을 한번에 판독하여 '문항1'에 제1마크(원)로 표시된 제1답안만이 존재함을 판단할 수 있다.As a result of the operation of the
문항1에 제1답안만이 존재하고(S110의 YES) 상기 제1답안이 정답이므로(S115의 YES), 애플리케이션(115)은 상기 문항1에 제1가중치(예컨대, 도 5의 +3)를 점수로서 부여한다(S120).Since only the first answer exists in question 1 (YES in S110) and the first answer is correct (YES in S115), the
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항2'이고 제1마크로 표시된 하나의 답안(즉, 제1답안)만이 존재하고 상기 제1답안이 정답이 아니라고 가정한다(또는 애플리케이션(115)이 판단한다.). 수험자는 문항2의 답안에 확신을 갖지 못한 채 하나의 답안만을 표시한 예이다. 예컨대, 애플리케이션(115)은 '문항2'에 대한 5개의 항목들을 한번에 판독하여 '문항2'에 제1마크(원)로 표시된 제1답안만이 존재함을 판단할 수 있다.As a result of the operation of the
문항2에 제1답안만이 존재하고(S110의 YES) 상기 제1답안이 상기 정답이 아니므로(S115의 NO), 애플리케이션(115)은 상기 문항2에 제2가중치(예컨대, 도 5의 -1)를 점수로서 부여한다(S125).Since only the first answer exists in question 2 (YES in S110) and the first answer is not the correct answer (NO in S115), the
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항3'이고, 두 개의 답안들, 즉 제1마크(원)로 표시된 제1답안과 제2마크(삼각형)로 표시된 제2답안이 존재하고 상기 제1마크로 표시된 상기 제1답안이 정답이라고 가정한다(또는 애플리케이션(115)이 판단한다.). 수험자는 문항3 내지 문항5 각각의 답안에 확신을 갖지 못하고 두 개의 답안들을 표시한 예이다. 예컨대, 애플리케이션(115)은 '문항3', '문항4', 및 '문항5' 각각에 대한 5개의 항목들을 한번에 판독하여 '문항3', '문항4', 및 '문항5' 각각에 두 개의 답안들이 존재함을 판단할 수 있다.As a result of the operation of the
문항3에 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고(S110의 NO) 상기 제1답안이 정답이므로(S130의 YES), 애플리케이션(115)은 문항3에 제3가중치(예컨대, 도 5의 +2)를 점수로서 부여한다(S135).Since the first answer indicated by the first mark in
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항4'이고, 두 개의 답안들, 즉 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고 상기 제2답안이 정답이라고 가정한다((또는 애플리케이션(115)이 판단한다.).As a result of the operation of the
문항4에 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고 (S110의 NO) 상기 제1답안이 정답이 아니고(S130의 NO) 상기 제2답안이 정답이므로 (S140의 YES), 애플리케이션(115)은 문항4에 제4가중치(예컨대, +1)를 점수로서 부여한다(S145).In
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항5'이고, 두 개의 답안들, 즉 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고 상기 제1답안과 상기 제2답안 모두가 정답이 아니라고 가정한다(또는 애플리케이션(115)이 판단한다.).As a result of the operation of the
문항5에 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고(S110의 NO) 상기 제1답안이 정답이 아니고(S130의 NO) 상기 제2답안이 정답이 아니므로(S140의 NO), 애플리케이션(115)은 문항5에 제5가중치(예컨대, 도 5의 0)를 점수로서 부여한다(S150).Since the first answer indicated by the first mark in
위에서 설명한 바와 같이, 애플리케이션(115)은 첫 번째 문항부터 마지막 문항까지 제1가중치 내지 제5가중치 중에서 어느 하나의 가중치를 채점 대상 문항별로 부여한다.As described above, the
모든 문항들에 대해 가중치들이 부여되면, 애플리케이션(115)은 첫 번째 문항부터 마지막 문항까지 부여된 가중치들의 총합을 계산한다(S155).If weights are assigned to all items, the
도 6은 각 가중치의 총합과 이에 따른 평가 의견을 포함하는 문서의 실시 예를 나타낸다.6 shows an example of a document including the sum of weights and evaluation opinions accordingly.
도 1 내지 도 3, 및 도 6을 참조하면, 애플리케이션(115)은 문항1부터 문항40까지 중에서 제1가중치(예컨대, 도 5의 +3)가 부여된 문항(들)의 개수를 카운트하여 제1카운트 값(WCNT1)을 계산하거나 제1카운트 값(WCNT2)에 해당하는 제1가중치 총합 (WSUM1=3*WCNT1)을 계산한다(S160).1 to 3, and 6, the
또한, 애플리케이션(115)은 문항1부터 문항40까지 중에서 제2가중치(예컨대, 도 5의 -1)가 부여된 문항(들)의 개수를 카운트하여 제2카운트 값(WCNT2)을 계산하거나 제2카운트 값(WCNT2)에 해당하는 제2가중치 총합(WSUM2=(-1)*WCNT2)을 계산한다 (S160).In addition, the
또한, 애플리케이션(115)은 문항1부터 문항40까지 중에서 제3가중치(예컨대, 도 5의 2)가 부여된 문항(들)의 개수를 카운트하여 제3카운트 값(WCNT3)을 계산하거나 제3카운트 값(WCNT3)에 해당하는 제3가중치 총합(WSUM3=2*WCNT3)을 계산한다(S160).In addition, the
또한, 애플리케이션(115)은 문항1부터 문항40까지 중에서 제4가중치(예컨대, 도 5의 1)가 부여된 문항(들)의 개수를 카운트하여 제4카운트 값(WCNT4)을 계산하거나 제4카운트 값(WCNT4)에 해당하는 제4가중치 총합(WSUM4=WCNT4)을 계산한다(S160).In addition, the
또한, 애플리케이션(115)은 문항1부터 문항40까지 중에서 제5가중치(예컨대, 도 5의 0(zero))가 부여된 문항(들)의 개수를 카운트하여 제5카운트 값(WCNT5)을 계산하거나 제5카운트 값(WCNT5)에 해당하는 제4가중치 총합(WSUM5=0)을 계산한다(S160).In addition, the
도 7은 카테고리별 점수 총합과 평가 의견을 포함하는 문서의 실시 예를 나타낸다. 도 1 내지 도 3, 도 5, 및 도 7을 참조하면, 애플리케이션(115)은 문항1부터 문항40 각각을 복수의 카테고리들(예컨대, 화법, 문법, 작문, 비문학, 및 복합 영역) 중에서 어느 하나의 카테고리로 분류한다(S160). 여기서 도 7의 카테고리는 도 5의 대분류 또는 소분류 일 수 있으나, 설명의 편의를 위해 도 7의 카테고리는 도 5의 대분류라고 가정한다.7 shows an example of a document including a total score for each category and evaluation opinions. 1 to 3, 5, and 7, the
도 5에 예시적으로 도시된 바와같이, 애플리케이션(115)에 의해 문항1은 화법으로 분류되고, 문항2는 문법으로 분류되고, 문항3은 작문으로 분류되고, 문항4는 비문학으로 분류되고, 문항5는 복합영역으로 분류되고, 문항40은 문법으로 분류된다. 이와 같은 방법으로, 애플리케이션(115)은 문항1부터 문항40 각각을 복수의 카테고리들(예컨대, 화법, 문법, 작문, 비문학, 및 복합 영역) 중에서 어느 하나의 카테고리로 분류한다(S160).As illustrated by way of example in FIG. 5, by
애플리케이션(115)은 문항1부터 문항40까지 중에서 제1카테고리(예컨대, 문법)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제1총합(CSUM1)을 계산한다(S160).The
애플리케이션(115)은 문항1부터 문항40까지 중에서 제2카테고리(예컨대, 화법)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제2총합(CSUM2)을 계산한다(S160).The
애플리케이션(115)은 문항1부터 문항40까지 중에서 제3카테고리(예컨대, 작문)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제3총합(CSUM3)을 계산한다(S160).The
애플리케이션(115)은 문항1부터 문항40까지 중에서 제4카테고리(예컨대, 비문학)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제4총합(CSUM4)을 계산한다(S160).The
애플리케이션(115)은 문항1부터 문항40까지 중에서 제5카테고리(예컨대, 복합 영역)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제5총합(CSUM5)을 계산한다(S160).The
해당 총합(CSUM1-CSUM5)이 평가자에 의해 선택(또는 클릭)되면, 애플리케이션(115)은 도 6을 참조하여 설명된 해당 가중치에 대한 정보(WCNT1~CCNT5 및/또는 SWUM1~WSUM5)를 디스플레이 할 수 있다. 예컨대, 제1총합(CSUM1)이 평가자에 의해 선택(또는 클릭)되면, 애플리케이션(115)은 도 6을 참조하여 설명된 해당 가중치에 대한 정보(WCNT1 및/또는 SWUM1)를 디스플레이 할 수 있다.When the corresponding sum (CSUM1-CSUM5) is selected (or clicked) by the evaluator, the
실시 예에 따라, 인공 지능 알고리즘, 머신 러닝 알고리즘, 또는 딥 러닝 알고리즘을 수행하는 애플리케이션(115)은 도 5에 도시된 평가 의견을 각 문항에 부여된 점수를 분석하여 분석 결과에 따라 자동으로(또는 스스로) 작성하거나, 도 6에 도시된 각 카운트 값(WCNT1~WCNT5) 및/또는 각 가중치 총합(WSUM1~WSUM5)을 분석하여 분석 결과에 따라 자동으로(또는 스스로) 작성하거나, 도 7에 도시된 각 총합(CSUM1~CSUM5)을 분석하여 분석 결과에 따라 자동으로(또는 스스로) 작성할 수 있다(S160).According to an embodiment, the
실시 예에 따라, 평가자는 도 5에 도시된 각 문항에 부여된 점수를 확인한 후 평가 의견을 애플리케이션(115)에 입력하거나, 도 6에 도시된 각 카운트 값 (WCNT1~WCNT5) 및/또는 각 가중치 총합(WSUM1~WSUM5)을 확인한 후 평가 의견을 애플리케이션(115)에 입력하거나, 도 7에 도시된 각 총합(CSUM1~CSUM5)을 확인한 후 평가 의견을 애플리케이션(115)에 입력하면, 애플리케이션(115)은 평가 의견을 포함하는 분석 문서(AD1, AD2, 및/또는 AD3)를 수험자의 컴퓨터 또는 수험자의 보호자의 컴퓨터로 전송할 수 있다.According to an embodiment, the evaluator confirms the score assigned to each item shown in FIG. 5 and then inputs the evaluation opinion into the
실시 예에 따라, 애플리케이션(115)은 컴퓨터 본체(100A), 서비스 서버 (100B), 또는 서비스 제공자의 컴퓨터에 연결된 디스플레이 장치 또는 프린터를 통해 평가 의견을 포함하는 분석 문서(AD1, AD2, 및/또는 AD3)를 출력할 수 있다.According to an embodiment, the
도 4는 본 발명의 실시 예들에 따른 객관식 시험으로부터 수험자의 학습 완성도를 추출하고 분석하는 컴퓨터 프로그램을 이용한 학습 완성도 분석 방법의 다른 실시 예를 나타낸다.4 shows another embodiment of a method for analyzing learning completion using a computer program that extracts and analyzes a student's learning completeness from a multiple-choice test according to embodiments of the present invention.
도 1, 도 2, 도 4, 및 도 5를 참조하면, 학습 완성도 분석 컴퓨터 프로그램, 즉 애플리케이션(115)은 답안지(210A 또는 210B)에 표시된 답안 정보(이하, 설명의 편의를 위해 '객관식 답안지'라 한다.)를 외부 장치(200A 또는 200B)로부터 수신한다.1, 2, 4, and 5, the learning completion analysis computer program, that is, the
애플리케이션(115)은 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항의 제1마크로 표시된 제1답안이 정답인지를 판단한다(S210).The
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항1'이고 제1마크로 표시된 제1답안이 정답이라고 가정한다(또는 애플리케이션(115)이 판단한다).As a result of the operation of the
제1마크로 표시된 제1답안이 정답이고(S210의 YES) 제2답안이 존재하지 않을 때(S215의 NO), 애플리케이션(115)은 문항1에 제1가중치(예컨대, +3)를 점수로서 부여한다(S220).When the first answer indicated by the first mark is the correct answer (YES in S210) and the second answer does not exist (NO in S215), the
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항2'이고 제1마크로 표시된 제1답안이 정답이 아니라고 가정한다(또는 애플리케이션(115)이 판단한다).As a result of the operation of the
제1마크로 표시된 제1답안이 정답이 아니고(S210의 NO) 제2답안이 존재하지 않을 때(S230의 NO), 애플리케이션(115)은 문항2에 제2가중치(에컨대, -1)를 점수로서 부여한다 (S235).When the first answer indicated by the first mark is not the correct answer (NO in S210) and the second answer does not exist (NO in S230), the
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항3'이고, 두 개의 답안들, 즉 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고 상기 제1답안이 정답이라고 가정한다(또는 애플리케이션(115)이 판단한다).As a result of the operation of the
문항3에 정답이고 제1마크로 표시된 제1답안이 존재하고(S210의 YES) 상기 정답이 아니고 제2마크로 표시된 제2답안이 존재할 때(S215의 YES), 애플리케이션(115)은 문항3에 제3가중치(예컨대, +2)를 점수로서 부여한다(S225).When the first answer, which is the correct answer in
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항4'이고, 두 개의 답안들, 즉 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고 상기 제2답안이 정답이라고 가정한다(또는 애플리케이션(115)이 판단한다).As a result of the operation of the
문항4에 제1마크로 표시된 제1답안이 정답이 아니고(S210의 NO) 제2마크로 표시된 제2답안이 존재하고(S230의 YES), 상기 제2답안이 상기 정답일 때(S240의 YES), 애플리케이션(115)은 문항4에 제4가중치(예컨대, +1)를 점수로서 부여한다 (S245).When the first answer indicated by the first mark in
애플리케이션(115)의 작동 결과, 채점 대상 문항이 '문항5'이고, 두 개의 답안들, 즉 제1마크로 표시된 제1답안과 제2마크로 표시된 제2답안이 존재하고 상기 제1답안과 상기 제2답안 모두가 정답이 아니라고 가정한다(또는 애플리케이션(115)이 판단한다).As a result of the operation of the
문항5에 제1마크로 표시된 제1답안이 정답이 아니고(S210의 NO), 제2마크로 표시된 제2답안이 존재하고(S230의 YES), 상기 제2답안이 상기 정답이 아닐 때 (S240의 NO), 애플리케이션(115)은 문항5에 제5가중치(예컨대, 0)를 점수로서 부여한다(S250).When the first answer indicated by the first mark in
애플리케이션(115)은 첫 번째 문항부터 마지막 문항까지 제1가중치 내지 제5가중치 중에서 어느 하나의 가중치를 채점 대상 문항별로 부여한다. 모든 문항들에 대해 해당 가중치들이 부여되면, 애플리케이션(115)은 첫 번째 문항부터 마지막 문항까지 부여된 가중치들의 총합을 계산한다(S255).The
도 1, 도 2, 도 4, 및 도 6을 참조하면, 애플리케이션(115)은 문항1부터 문항40까지 중에서 제1가중치(예컨대, +3)가 부여된 문항(들)의 개수를 카운트하여 제1카운트 값(WCNT1)을 계산하거나 제1카운트 값(WCNT2)에 해당하는 제1가중치 총합(WSUM1=3*WCNT1)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제2가중치 (예컨대, -1)가 부여된 문항(들)의 개수를 카운트하여 제2카운트 값(WCNT2)을 계산하거나 제2카운트 값(WCNT2)에 해당하는 제2가중치 총합(WSUM2=(-1)*WCNT2)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제3가중치(예컨대, 2)가 부여된 문항(들)의 개수를 카운트하여 제3카운트 값(WCNT3)을 계산하거나 제3카운트 값 (WCNT3)에 해당하는 제3가중치 총합(WSUM3=2*WCNT3)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제4가중치(예컨대, 1)가 부여된 문항(들)의 개수를 카운트하여 제4카운트 값(WCNT4)을 계산하거나 제4카운트 값(WCNT4)에 해당하는 제4가중치 총합(WSUM4=WCNT4)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제5가중치(예컨대, 0)가 부여된 문항(들)의 개수를 카운트하여 제5카운트 값(WCNT5)을 계산하거나 제5카운트 값(WCNT5)에 해당하는 제4가중치 총합(WSUM5=0)을 계산한다(S260).1, 2, 4, and 6, the application 115 counts the number of item(s) to which the first weight (for example, +3) is assigned from item 1 to item 40, Calculate the first count value (WCNT1) or calculate the sum of the first weights (WSUM1=3*WCNT1) corresponding to the first count value (WCNT2), and calculate the second weight from the items 1 to 40 (for example,- 1) Calculate the second count value (WCNT2) by counting the number of item(s) assigned or calculate the second weighted sum (WSUM2=(-1)*WCNT2) corresponding to the second count value (WCNT2) And counting the number of item(s) to which the third weight value (e.g., 2) is assigned from items 1 to 40, to calculate the third count value (WCNT3) or corresponds to the third count value (WCNT3) Calculate the sum of the third weighted values (WSUM3=2*WCNT3), and count the number of item(s) to which the fourth weight (for example, 1) is assigned from the items 1 to 40, and count the fourth count ( WCNT4) or a fourth weighted sum (WSUM4=WCNT4) corresponding to the fourth count value (WCNT4), and a fifth weighted value (e.g., 0) among items 1 to 40. The number of fields) is counted to calculate the fifth count value WCNT5 or the fourth weighted sum (WSUM5=0) corresponding to the fifth count value WCNT5 (S260).
도 1, 도 2, 도 4, 도 5, 및 도 7을 참조하면, 애플리케이션(115)은 문항1부터 문항40 각각을 복수의 카테고리들(예컨대, 화법, 문법, 작문, 비문학, 및 복합 영역) 중에서 어느 하나의 카테고리로 분류한다(S260).1, 2, 4, 5, and 7, the
애플리케이션(115)은 문항1부터 문항40까지 중에서 제1카테고리(예컨대, 문법)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제1총합(CSUM1)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제2카테고리(예컨대, 화법)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제2총합(CSUM2)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제3카테고리(예컨대, 작문)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제3총합(CSUM3)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제4카테고리(예컨대, 비문학)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제4총합(CSUM4)을 계산하고, 상기 문항1부터 상기 문항40까지 중에서 제5카테고리(예컨대, 복합 영역)으로 분류되고 정답인 문항(들)의 개수를 카운트하여 제5총합(CSUM5)을 계산한다(S260).The
해당 총합(CSUM1~CSUM5)이 평가자에 의해 선택(또는 클릭)되면, 애플리케이션(115)은 도 6을 참조하여 설명된 해당 가중치에 대한 정보(WCNT1~CCNT5 및/또는 SWUM1~WSUM5)를 디스플레이 할 수 있다. 예컨대, 제1총합(CSUM1)이 평가자에 의해 선택(또는 클릭)되면, 애플리케이션(115)은 도 6을 참조하여 설명된 해당 가중치에 대한 정보(WCNT1 및/또는 SWUM1)를 디스플레이 할 수 있다.When the corresponding sum (CSUM1 to CSUM5) is selected (or clicked) by the evaluator, the
실시 예에 따라, 인공 지능 알고리즘, 머신 러닝 알고리즘, 또는 딥 러닝 알고리즘을 수행하는 애플리케이션(115)은 도 5에 도시된 평가 의견을 각 문항에 부여된 점수를 분석하여 분석 결과에 따라 자동으로 작성하거나, 도 6에 도시된 각 카운트 값(WCNT1~WCNT5) 및/또는 각 가중치 총합(WSUM1~WSUM5)을 분석하여 분석 결과에 따라 자동으로 작성하거나, 도 7에 도시된 각 총합(CSUM1~CSUM5)을 분석하여 분석 결과에 따라 자동으로 작성할 수 있다(S260).Depending on the embodiment, the artificial intelligence algorithm, the machine learning algorithm, or the
실시 예에 따라, 평가자는 도 5에 도시된 각 문항에 부여된 점수를 확인한 후 평가 의견을 애플리케이션(115)에 입력하거나, 도 6에 도시된 각 카운트 값 (WCNT1~WCNT5) 및/또는 각 가중치 총합(WSUM1~WSUM5)을 확인한 후 평가 의견을 애플리케이션(115)에 입력하거나, 도 7에 도시된 각 총합(CSUM1~CSUM5)을 확인한 후 평가 의견을 애플리케이션(115)에 입력하면, 애플리케이션(115)은 평가 의견을 포함하는 분석 문서(AD1, AD2, 및/또는 AD3)를 수험자의 컴퓨터 또는 수험자의 보호자의 컴퓨터로 전송할 수 있다.According to an embodiment, the evaluator confirms the score assigned to each item shown in FIG. 5 and then inputs the evaluation opinion into the
실시 예에 따라, 애플리케이션(115)은 컴퓨터 본체(100A), 서비스 서버 (100B), 또는 서비스 제공자의 컴퓨터에 연결된 디스플레이 장치 또는 프린터를 통해 평가 의견을 포함하는 분석 문서(AD1, AD2, 및/또는 AD3)를 출력할 수 있다.According to an embodiment, the
학습 완성도 분석 컴퓨터 프로그램(115)이 수행하는 분석은 다양할 수 있다.Analysis of learning completion The analysis performed by the
예를 들면, 학습 완성도 분석 컴퓨터 프로그램(115)은 현재 객관식 답안지 (210A 또는 210B)에 포함된 문항들 중에서 제5가중치를 받은 문항들의 개수 및/또는 상기 제5가중치를 받은 문항들이 속하는 카테고리들을 분석하고, 분석 결과에 따라 평가 의견, 예를 들면 해당 카테고리에 대한 문제들을 계속 푸는 것보다는 상기 해당 카테고리에 대한 이론 공부를 다시 해야하다는 평가 의견을 생성할 수 있다. 또한, 학습 완성도 분석 컴퓨터 프로그램(115)은 상기 해당 카테고리에 대한 이론 공부를 위해 컴퓨터 또는 서비스 서버(100B)의 운영자가 제공하는 강좌에 대한 정보를 생성할 수 있다.For example, the learning completeness
예를 들면, 학습 완성도 분석 컴퓨터 프로그램(115)은 현재 객관식 답안지 (210A 또는 210B)에 포함된 문항들 중에서 제2가중치를 받은 문항들의 개수 및/또는 상기 제2가중치를 받은 문항들이 속하는 카테고리들을 분석하고, 분석 결과에 따라 평가 의견, 예를 들면 해당 카테고리에 대한 공부를 않 했음, 문제를 빨리 풀려고 하다가 상기 문제를 잘 못읽음, 또는 맞는 것과 틀린 것은 반대로 생각함과 같은 평가 의견을 생성할 수 있다.For example, the learning completeness
예를 들면, 학습 완성도 분석 컴퓨터 프로그램(115)은 현재 객관식 답안지 (210A 또는 210B)에 포함된 문항들 중에서 제3가중치와 제4가중치를 받은 문항들의 개수 및/또는 상기 제3가중치와 상기 제4가중치를 받은 문항들이 속하는 카테고리들을 분석하고, 분석 결과에 따라 평가 의견, 예를 들면 정답이 아닌 오답을 선택한 상황에 따라 해당 카테고리에 대한 이론 공부를 더 하거나 상기 해당 카테고리에 대한 문제들을 더 많이 풀면 성적이 향상될 수 있다는 평가 의견을 생성할 수 있다.For example, the learning completion
실시 예에 따라, 학습 완성도 분석 컴퓨터 프로그램(115)은 현재 객관식 답안지(210A 또는 210B)에 포함된 문항들에 대한 학습 완성도의 분석 결과와 이전 객관식 답안지들에 포함된 문항들에 대한 학습 완성도의 분석 결과를 빅 데이터로서 활용하여 수험자가 어떤 카테고리에 속하는 문항들을 잘 푸는지 못 푸는지, 어떤 카테고리에 속하는 분야의 성적이 일정 시간 동안 올랐는지 내렸는지를 분석할 수 있다.According to an embodiment, the learning completeness
앞에서 설명한 바와 같이 인공 지능 알고리즘, 머신 러닝 알고리즘, 또는 딥 러닝 알고리즘을 이용할 수 있는 학습 완성도 분석 컴퓨터 프로그램(115)은 객관식 답안지(또는 답안 정보)에 포함된 채점 대상 문항마다 제1마크(또는 제1컬러) 및/또는 제2마크(또는 제2컬러)가 존재하는지를 판단하고, 판단의 결과에 따라 상기 제1마크(또는 제1컬러)로 표시된 제1답안이 정답인지 또는 상기 제2마크(또는 제2컬러)로 표시된 제2답안이 정답인지를 판단하고, 판단의 결과에 따라 도 3 또는 도 4를 참조하여 설명한 바와 같이 상기 채점 대상 문항마다 제1가중치 내지 제5가중치 중에서 어느 하나를 부여하고, 상기 채점 대상 문항마다 부여된 상기 가중치를 분석하고, 분석의 결과에 따라 평가 의견을 자동으로(또는 스스로) 작성할 수 있다.As described above, the learning completion
가중치들은 실시 예들에 따라 다양하게 변경될 수 있다.Weights may be variously changed according to embodiments.
본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.The present invention has been described with reference to the embodiments shown in the drawings, but these are merely exemplary, and those skilled in the art will understand that various modifications and other equivalent embodiments are possible therefrom. Therefore, the true technical protection scope of the present invention should be determined by the technical spirit of the appended claims.
100A: 컴퓨터 본체
100B: 서비스 서버
110: 프로세서
115: 학습 완성도 분석 컴퓨터 프로그램 또는 애플리케이션
120: 메모리 장치
130: 입력 장치
140: 출력 장치
200A: 스캐너, OCR
200B: 사용자(수험자) 컴퓨터
210A, 210B, 210C: 답안지
220: 프로그램100A: computer body
100B: service server
110: processor
115: learning completion analysis computer program or application
120: memory device
130: input device
140: output device
200A: Scanner, OCR
200B: User (examiner) computer
210A, 210B, 210C: answer sheet
220: program
Claims (15)
객관식 답안지를 외부 장치로부터 수신하는 단계;
상기 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항에 제1답안만이 존재하고 상기 제1답안이 정답인지를 판단하는 단계;
상기 채점 대상 문항에 상기 제1답안만이 존재하고 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 제1답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제2가중치를 부여하는 단계;
상기 채점 대상 문항에 상기 제1답안과 제2답안이 존재하고 상기 제1답안과 상기 제2답안 중에서 어느 하나가 상기 정답인지를 판단하는 단계; 및
상기 채점 대상 문항에 상기 제1답안과 상기 제2답안이 존재하고 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제3가중치를 부여하고, 상기 제2답안이 상기 정답일 때 상기 채점 대상 문항에 제4가중치를 부여하고, 상기 제1답안과 상기 제2답안 모두가 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함하는 저장 매체에 저장된 컴퓨터 프로그램.A computer program stored in a storage medium and analyzing a candidate's learning completeness from a multiple-choice test,
Receiving a multiple-choice answer sheet from an external device;
Determining whether only the first answer exists in the item to be graded from the first item to the last item included in the multiple-choice answer sheet and whether the first answer is the correct answer;
When only the first answer is present in the scoring target question and the first answer is the correct answer, a first weight is given to the scoring target question, and when the first answer is not the correct answer, Assigning two weights;
Determining whether one of the first answer and the second answer is the correct answer, and the first answer and the second answer exist in the scoring target question; And
When the first answer and the second answer exist in the question to be scored and the first answer is the correct answer, a third weight is given to the question to be scored, and the scoring target is provided when the second answer is the correct answer And assigning a fourth weight to a question, and assigning a fifth weight to the scoring target question when both the first answer and the second answer are not the correct answer.
상기 첫 번재 문항부터 상기 마지막 문항까지 문항별로 부여된 상기 제1가중치 내지 상기 제5가중치의 총합을 계산하는 단계를 더 포함하고,
상기 외부 장치는 컴퓨터 또는 광문자 인식 장치인 저장 매체에 저장된 컴퓨터 프로그램.According to claim 1,
Comprising the step of calculating the total of the first weight to the fifth weight assigned to each item from the first item to the last item,
The external device is a computer program stored in a storage medium that is a computer or an optical character recognition device.
상기 첫 번째 문항부터 상기 마지막 문항까지 중에서 상기 제1가중치가 부여된 문항의 개수를 계산하고.
상기 첫 번재 문항부터 상기 마지막 문항까지 중에서 상기 제2가중치가 부여된 문항의 개수를 계산하고.
상기 첫 번재 문항부터 상기 마지막 문항까지 중에서 상기 제3가중치가 부여된 문항의 개수를 계산하고,
상기 첫 번재 문항부터 상기 마지막 문항까지 중에서 상기 제4가중치가 부여된 문항의 개수를 계산하고,
상기 첫 번재 문항부터 상기 마지막 문항까지 중에서 상기 제5가중치가 부여된 문항의 개수를 계산하는 단계를 더 포함하는 저장 매체에 저장된 컴퓨터 프로그램.According to claim 2,
Calculate the number of items assigned the first weight among the first item to the last item.
The number of items assigned the second weight is calculated from the first item to the last item.
Calculate the number of items to which the third weight is assigned from the first item to the last item,
Calculate the number of items to which the fourth weight is assigned from the first item to the last item,
And calculating the number of items to which the fifth weight is assigned from the first item to the last item.
상기 제1가중치가 부여된 문항의 개수 내지 상기 제5가중치가 부여된 문항의 개수 중에서 적어도 하나에 기초하여 평가 의견을 자동으로 생성하는 단계를 더 포함하는 저장 매체에 저장된 컴퓨터 프로그램.According to claim 3,
And automatically generating an evaluation opinion based on at least one of the number of items assigned the first weight value or the number of items assigned the fifth weight value.
상기 제1가중치가 부여된 문항의 개수 내지 상기 제5가중치가 부여된 문항의 개수 중에서 적어도 하나를 디스플레이하는 단계; 및
평가 의견을 수신하는 단계를 더 포함하는 저장 매체에 저장된 컴퓨터 프로그램.According to claim 1,
Displaying at least one of the number of items assigned the first weight value to the number of items assigned the fifth weight value; And
The computer program stored in the storage medium further comprising the step of receiving an evaluation opinion.
상기 제1가중치 내지 상기 제5가중치 중에서 적어도 하나, 상기 제1가중치가 부여된 문항의 개수 내지 상기 제5가중치가 부여된 문항의 개수 중에서 적어도 하나, 및 상기 평가 의견을 상기 외부 장치로 전송하는 단계를 더 포함하는 저장 매체에 저장된 컴퓨터 프로그램.The method of claim 5,
Transmitting at least one of the first weighted value to the fifth weighted value, at least one of the number of items assigned the first weight value to the number of items assigned the fifth weight value, and transmitting the evaluation opinion to the external device Computer program stored in a storage medium further comprising a.
외부 장치로부터 객관식 답안지를 수신하는 단계;
상기 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항에 하나의 답안만이 존재하는지 두 개의 답안들이 존재하는지를 판단하는 단계;
상기 채점 대상 문항에 상기 하나의 답안이 존재하고 상기 하나의 답안이 정답일 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 하나의 답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제2가중치를 부여하는 단계; 및
상기 채점 대상 문항에 상기 두 개의 답안들이 존재하고 상기 두 개의 답안들 중에서 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제3가중치를 부여하고, 상기 두 개의 답안들 중에서 제2답안이 상기 정답일 때 제4가중치를 부여하고, 상기 두 개의 답안들 모두가 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함하는 저장 매체에 저장된 컴퓨터 프로그램.A computer program stored in a storage medium and analyzing a candidate's learning completeness from a multiple-choice test,
Receiving a multiple choice answer sheet from an external device;
Determining whether there is only one answer or two answers in the scoring target item from the first item to the last item included in the multiple-choice answer sheet;
A first weight is assigned to the scoring target question when the one answer exists in the scoring target question and the answer is the correct answer, and a second weight to the scoring target question when the answer is not the correct answer Granting; And
When the two answers exist in the question to be scored and the first answer among the two answers is the correct answer, a third weight is given to the question to be scored, and the second answer from the two answers is the correct answer And a fourth weighting value, and when the two answers are not the correct answer, assigning a fifth weighting value to the scoring target question.
상기 첫 번째 문항부터 상기 마지막 문항까지 각 문항을 카테고리들 중에서 해당 카테고리로 분류하는 단계; 및
분류된 해당 카테고리별로 포함된 문항들 각각에 부여된 가중치들의 총합을 계산하는 단계를 더 포함하는 저장 매체에 저장된 컴퓨터 프로그램.The method of claim 8,
Classifying each item from the first item to the last item into a corresponding category among categories; And
And calculating a total sum of weights assigned to each of the items included in each of the classified categories.
외부 장치로부터 객관식 답안지를 수신하는 단계;
상기 객관식 답안지에 포함된 첫 번째 문항부터 마지막 문항까지 채점 대상 문항에 포함된 제1답안이 정답인지 판단하는 단계;
상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제2답안이 존재하는지를 판단하는 단계;
상기 채점 대상 문항에 상기 제2답안이 존재하지 않을 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 채점 대상 문항에 상기 제2답안이 존재할 때 상기 채점 대상 문항에 제3가중치를 부여하는 단계; 및
상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하지 않을 때 상기 채점 대상 문항에 제2가중치를 부여하고, 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하고 상기 채점 대상 문항에 포함된 상기 제2답안이 상기 정답일 때 상기 채점 대상 문항에 제4가중치를 부여하고, 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하고 상기 채점 대상 문항에 포함된 상기 제2답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함하는 저장 매체에 저장된 컴퓨터 프로그램.A computer program stored in a storage medium and analyzing a candidate's learning completeness from a multiple-choice test,
Receiving a multiple choice answer sheet from an external device;
Determining whether the first answer included in the scoring target item is the correct answer from the first item to the last item included in the multiple-choice answer sheet;
Determining whether a second answer exists in the scoring target question when the first answer included in the scoring target question is the correct answer;
Assigning a first weight to the scoring target question when the second answer does not exist in the scoring target question, and assigning a third weight to the scoring target question when the second answer exists in the scoring target question; ; And
When the first answer included in the scoring target question is not the correct answer and the second answer does not exist in the scoring target question, a second weight is given to the scoring target question, and the included in the scoring target question When the first answer is not the correct answer and the second answer exists in the scoring target question and the second answer included in the scoring target question is the correct answer, a fourth weight is given to the scoring target question, and the scoring When the first answer included in the target question is not the correct answer, and the second answer exists in the scoring target question and the second answer included in the scoring target question is not the correct answer, the fifth answer is the fifth target answer A computer program stored in a storage medium comprising weighting.
상기 첫 번재 문항부터 상기 마지막 문항까지 문항별로 부여된 상기 제1가중치 내지 상기 제5가중치의 총합을 계산하는 단계를 더 포함하고,
상기 외부 장치는 컴퓨터 또는 광문자 인식 장치인 저장 매체에 저장된 컴퓨터 프로그램.The method of claim 10,
Comprising the step of calculating the total of the first weight to the fifth weight assigned to each item from the first item to the last item,
The external device is a computer program stored in a storage medium that is a computer or an optical character recognition device.
객관식 답안지를 외부 장치로부터 수신하는 단계;
상기 객관식 답안지에 포함된 첫 번재 문항부터 마지막 문항까지 채점 대상 문항에 제1답안만이 존재하고 상기 제1답안이 정답인지를 판단하는 단계;
상기 채점 대상 문항에 상기 제1답안만이 존재하고 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 제1답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제2가중치를 부여하는 단계;
상기 채점 대상 문항에 상기 제1답안과 제2답안이 존재하고 상기 제1답안과 상기 제2답안 중에서 어느 하나가 상기 정답인지를 판단하는 단계; 및
상기 채점 대상 문항에 상기 제1답안과 상기 제2답안이 존재하고 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제3가중치를 부여하고, 상기 제2답안이 상기 정답일 때 상기 채점 대상 문항에 제4가중치를 부여하고, 상기 제1답안과 상기 제2답안 모두가 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함하는 컴퓨터를 이용한 객관식 시험으로부터 수험자의 학습 완성도를 분석하는 방법.In the method of analyzing a student's learning completion from a multiple-choice test using a computer,
Receiving a multiple-choice answer sheet from an external device;
Determining whether only the first answer exists in the item to be graded from the first question to the last question included in the multiple-choice answer sheet and that the first answer is the correct answer;
When only the first answer is present in the scoring target question and the first answer is the correct answer, a first weight is given to the scoring target question, and when the first answer is not the correct answer, Assigning two weights;
Determining whether one of the first answer and the second answer is the correct answer, and the first answer and the second answer exist in the scoring target question; And
When the first answer and the second answer exist in the question to be scored and the first answer is the correct answer, a third weight is given to the question to be scored, and the scoring target is provided when the second answer is the correct answer Assigning a fourth weight to a question, and assigning a fifth weight to the scoring target question when both the first answer and the second answer are not the correct answer. How to analyze.
상기 첫 번재 문항부터 상기 마지막 문항까지 문항별로 부여된 상기 제1가중치 내지 상기 제5가중치의 총합을 계산하는 단계를 더 포함하는 컴퓨터를 이용한 객관식 시험으로부터 수험자의 학습 완성도를 분석하는 방법.The method of claim 12,
A method of analyzing a student's learning completeness from a multiple-choice test using a computer, further comprising calculating the sum of the first to fifth weights assigned to each item from the first item to the last item.
외부 장치로부터 객관식 답안지를 수신하는 단계;
상기 객관식 답안지에 포함된 첫 번재 문항부터 마지막 문항까지 채점 대상 문항에 포함된 제1답안이 정답인지 판단하는 단계;
상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답일 때 상기 채점 대상 문항에 제2답안이 존재하는지를 판단하는 단계;
상기 채점 대상 문항에 상기 제2답안이 존재하지 않을 때 상기 채점 대상 문항에 제1가중치를 부여하고, 상기 채점 대상 문항에 상기 제2답안이 존재할 때 상기 채점 대상 문항에 제3가중치를 부여하는 단계; 및
상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하지 않을 때 상기 채점 대상 문항에 제2가중치를 부여하고, 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하고 상기 채점 대상 문항에 포함된 상기 제2답안이 상기 정답일 때 상기 채점 대상 문항에 제4가중치를 부여하고, 상기 채점 대상 문항에 포함된 상기 제1답안이 상기 정답이 아니고 상기 채점 대상 문항에 상기 제2답안이 존재하고 상기 채점 대상 문항에 포함된 상기 제2답안이 상기 정답이 아닐 때 상기 채점 대상 문항에 제5가중치를 부여하는 단계를 포함하는 컴퓨터를 이용한 객관식 시험으로부터 수험자의 학습 완성도를 분석하는 방법.In the method of analyzing a student's learning completion from a multiple-choice test using a computer,
Receiving a multiple choice answer sheet from an external device;
Determining whether the first answer included in the scoring target question from the first question to the last question included in the multiple-choice answer sheet is the correct answer;
Determining whether a second answer exists in the scoring target question when the first answer included in the scoring target question is the correct answer;
Assigning a first weight to the scoring target question when the second answer does not exist in the scoring target question, and assigning a third weight to the scoring target question when the second answer exists in the scoring target question; ; And
When the first answer included in the scoring target question is not the correct answer and the second answer does not exist in the scoring target question, a second weight is given to the scoring target question, and the included in the scoring target question When the first answer is not the correct answer and the second answer exists in the scoring target question and the second answer included in the scoring target question is the correct answer, a fourth weight is assigned to the scoring target question, and the scoring When the first answer included in the target question is not the correct answer, and the second answer exists in the scoring target question and the second answer included in the scoring target question is not the correct answer, the fifth answer is the fifth target answer A method of analyzing a student's learning completion from a multiple-choice test using a computer, which includes assigning weights.
상기 첫 번재 문항부터 상기 마지막 문항까지 문항별로 부여된 상기 제1가중치 내지 상기 제5가중치의 총합을 계산하는 단계를 더 포함하는 컴퓨터를 이용한 객관식 시험으로부터 수험자의 학습 완성도를 분석하는 방법.The method of claim 14
A method of analyzing a student's learning completeness from a multiple-choice test using a computer, further comprising calculating the sum of the first to fifth weights assigned to each item from the first item to the last item.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190002744A KR20200086498A (en) | 2019-01-09 | 2019-01-09 | Computer program for extracting and analyzing learning completeness of an examinee from multiple choice tests and method using the same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190002744A KR20200086498A (en) | 2019-01-09 | 2019-01-09 | Computer program for extracting and analyzing learning completeness of an examinee from multiple choice tests and method using the same |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20200086498A true KR20200086498A (en) | 2020-07-17 |
Family
ID=71832343
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190002744A KR20200086498A (en) | 2019-01-09 | 2019-01-09 | Computer program for extracting and analyzing learning completeness of an examinee from multiple choice tests and method using the same |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20200086498A (en) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110000316U (en) | 2009-07-06 | 2011-01-13 | 오충탁 | 1 2 A notebook that includes answer sheet which can be marked by the first and secondary answers and then analyze wrong answers and organize the key points and its composition and the method of analysis to students' learning. |
-
2019
- 2019-01-09 KR KR1020190002744A patent/KR20200086498A/en unknown
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110000316U (en) | 2009-07-06 | 2011-01-13 | 오충탁 | 1 2 A notebook that includes answer sheet which can be marked by the first and secondary answers and then analyze wrong answers and organize the key points and its composition and the method of analysis to students' learning. |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102250854B1 (en) | Computer program for evaluating study level of learner and method of evaluating study level of learner using the same | |
| Lee et al. | Vlat: Development of a visualization literacy assessment test | |
| KR101816665B1 (en) | Method, apparatus and computer program for analysis educational data of multiple-choice question | |
| Schanzer et al. | Assessing Bootstrap: Algebra students on scaffolded and unscaffolded word problems | |
| CN110909035A (en) | Personalized review question set generation method and device, electronic equipment and storage medium | |
| Beck et al. | Person-fit as an index of inattentive responding: A comparison of methods using polytomous survey data | |
| CN113851020A (en) | Self-adaptive learning platform based on knowledge graph | |
| KR101265720B1 (en) | System for improving studying capability using relational questions and Operating method thereof | |
| Hastings et al. | Active learning for improving machine learning of student explanatory essays | |
| Maynes | Detecting potential collusion among individual examinees using similarity analysis | |
| CN116452022A (en) | Teacher teaching effect evaluation method and device and electronic equipment | |
| Hazzan et al. | Teaching core principles of machine learning with a simple machine learning algorithm: the case of the KNN algorithm in a high school introduction to data science course | |
| Saldanha et al. | Conceptual issues in understanding the inner logic of statistical inference: Insights from two teaching experiments | |
| Kortemeyer et al. | A user-transaction-based recommendation strategy for an educational digital library | |
| US10665123B2 (en) | Smart examination evaluation based on run time challenge response backed by guess detection | |
| Fouh et al. | Investigating Difficult Topics in a Data Structures Course Using Item Response Theory and Logged Data Analysis. | |
| KR102232599B1 (en) | Computer program for evaluating study level of learner from an objective test and method using the same | |
| Gorgun et al. | Identifying aberrant responses in intelligent tutoring systems: an application of anomaly detection methods | |
| JP2019185343A (en) | Question analysis system, method, and program | |
| KR20200086498A (en) | Computer program for extracting and analyzing learning completeness of an examinee from multiple choice tests and method using the same | |
| Hoskins et al. | The design and implementation of the Carolina Automated Reading Evaluation for reading deficit screening | |
| Wojatzki et al. | Bundled gap filling: A new paradigm for unambiguous cloze exercises | |
| Arlitt et al. | Feature engineering for design thinking assessment | |
| TW201443667A (en) | Artificial intelligent test paper item system and item method thereof | |
| KR20050049461A (en) | Management system and the method for examination paper |