KR20200114519A - method and system for predicting pass rate of making question - Google Patents

method and system for predicting pass rate of making question Download PDF

Info

Publication number
KR20200114519A
KR20200114519A KR1020190036437A KR20190036437A KR20200114519A KR 20200114519 A KR20200114519 A KR 20200114519A KR 1020190036437 A KR1020190036437 A KR 1020190036437A KR 20190036437 A KR20190036437 A KR 20190036437A KR 20200114519 A KR20200114519 A KR 20200114519A
Authority
KR
South Korea
Prior art keywords
year
test
data
average score
current
Prior art date
Application number
KR1020190036437A
Other languages
Korean (ko)
Other versions
KR102222026B1 (en
Inventor
김재해
박칠규
송동건
Original Assignee
한국산업인력공단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국산업인력공단 filed Critical 한국산업인력공단
Priority to KR1020190036437A priority Critical patent/KR102222026B1/en
Publication of KR20200114519A publication Critical patent/KR20200114519A/en
Application granted granted Critical
Publication of KR102222026B1 publication Critical patent/KR102222026B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • G06Q50/205Education administration or guidance
    • G06Q50/2057Career enhancement or continuing education service
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/04Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • Marketing (AREA)
  • Theoretical Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Development Economics (AREA)
  • Operations Research (AREA)
  • Game Theory and Decision Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

The present invention relates to a method for exam pass rate prediction. The present invention is to stabilize the yearly pass rate of an exam in order to improve the public confidence in the given exam. The method includes: a first step of inputting and storing, in a database unit, past year-specific exam scoring data and past year-specific mock exam scoring data including past exam average score data and mock exam average score data, current-year mock exam scoring data, and past year-specific exam difficulty adjustment history data; a second step of calculating a past year-specific learning index by extracting and calculating, with a plan calculation unit, the past year-specific exam scoring data, the past year-specific and current-year mock exam scoring data, and the past year-specific exam difficulty adjustment history data stored in the database unit; a third step of calculating a current-year learning index through the plan calculation unit based on the past year-specific learning index and pre-stored past year-specific exam applicant count data; and a fourth step of calculating current-year predicted average score data for predicted pass rate determination and exam difficulty management by calculating, with the plan calculation unit, the current-year learning index, previous-year exam average score data, previous-year mock exam average score data, current-year mock exam average score data, and current-year exam difficulty adjustment history data.

Description

시험 합격률 예측 방법 및 시스템{method and system for predicting pass rate of making question}Method and system for predicting pass rate of making question}

본 발명은 시험 합격률 예측 방법 및 시스템에 관한 것으로, 보다 상세하게는 출제되는 시험의 공신력이 향상되도록 시험의 연도별 합격률을 안정화시키기 위한 시험 합격률 예측 방법 및 시스템에 관한 것이다.The present invention relates to a test pass rate prediction method and system, and more particularly, to a test pass rate prediction method and system for stabilizing the pass rate by year of the test so that the public confidence of the exam to be questioned is improved.

시험은 응시자의 학습능력 또는 자격 검증을 위하여 시행되는 제도로서 응시자의 정확한 실력을 평가하는 것이 주목적이다. 특히, 시험 점수에 따라 자격의 부여가 결정되는 자격 검증 시험 등에서는 시행된 시험의 회차별로 합격인원의 편차가 크지 않도록 합격률을 안정적으로 유지하는 것이 중요하다. The test is a system implemented to verify the candidate's learning ability or qualification, and its main purpose is to evaluate the candidate's accurate ability. In particular, it is important to maintain a stable pass rate so that the number of passers does not have a large variation in the number of passed tests for each test run in the qualification verification test, where qualifications are granted based on test scores.

이에, 시험을 주관하는 기관에서는 기존 시험의 채점 결과를 토대로 문항 난이도를 설정하고, 설정된 문항 난이도에 적합하도록 출제위원별로 문항을 작성하는 방식으로 합격률의 안정화를 도모하고 있다. Accordingly, the institution in charge of the test is trying to stabilize the pass rate by setting the question difficulty level based on the scoring results of the existing test, and writing questions for each questionnaire to suit the set difficulty level.

또한, 시험을 주관하는 기관의 입장에서 볼 때 시험의 공신력 및 신뢰성이 지속적으로 유지되도록 매회마다 출제되는 시험에서 일정한 합격률이 유지되도록 관리하는 것이 중요하다.In addition, from the standpoint of the organization in charge of the test, it is important to manage to maintain a certain pass rate in each exam so that the public confidence and reliability of the exam are continuously maintained.

그러나, 출제위원에 의한 난이도 평가는 개인의 지식, 성격, 성향에 따라 편차가 크기 때문에 설정된 난이도와 불일치 가능성이 높고, 시험의 회차별로 난이도가 크게 변화되는 경우가 많아 시험의 공신력이 저하되는 문제점이 있었다. However, since the difficulty evaluation by the questionnaire varies greatly depending on the individual's knowledge, personality, and disposition, the possibility of inconsistency with the set difficulty level is high, and the degree of difficulty varies greatly for each test session. there was.

특히, 종래에는 출제할 시험의 예상 합격률을 미리 산출하여 예측하는 방법에 대한 연구가 실질적으로 미비하여 문제 출제시 매회 시험의 난이도가 일정하게 유지되도록 조정하기 어려운 문제점이 있었다.In particular, conventionally, there is a problem in that it is difficult to adjust the difficulty of each exam so that the difficulty of each exam is kept constant when questioning, since there is substantially insufficient research on a method of calculating and predicting the expected pass rate of the exam to be given in advance.

한국 공개특허 제10-2002-0023519호Korean Patent Application Publication No. 10-2002-0023519

상기와 같은 문제점을 해결하기 위하여, 본 발명은 출제되는 시험의 공신력이 향상되도록 시험의 연도별 합격률을 안정화시키기 위한 시험 합격률 예측 방법 및 시스템을 제공하는 것을 해결과제로 한다.In order to solve the above problems, the present invention has as a solution to provide a test pass rate prediction method and system for stabilizing the pass rate for each year of the test so that the public confidence of the test to be questioned is improved.

상기의 과제를 해결하기 위하여, 본 발명은 기시행된 시험 및 모의시험의 각 평균점수데이터를 포함하는 과년도별 시험 채점데이터 및 과년도별 모의시험 채점데이터와, 당해연도 모의시험 채점데이터와, 과년도별 시험난이도 조정내역데이터가 데이터베이스부에 입력 및 저장되는 제1단계; 상기 데이터베이스부에 저장된 상기 과년도별 시험 채점데이터와, 과년도별 및 당해연도 모의시험 채점데이터와, 상기 과년도별 시험난이도 조정내역데이터가 플랜연산부로 추출 및 연산되어 과년도별 학습지수가 산출되는 제2단계; 상기 과년도별 학습지수 및 기저장된 과년도별 시험 응시자수데이터를 기반으로 상기 플랜연산부를 통해 당해연도 학습지수가 산출되는 제3단계; 및 상기 당해연도 학습지수와, 직전년도 시험 평균점수데이터와, 직전년도 모의시험 평균점수데이터와, 당해연도 모의시험 평균점수데이터와, 당해연도 시험난이도 조정내역데이터가 상기 플랜연산부를 통해 연산되어 예상 합격률 판단 및 시험 난이도 관리를 위한 당해연도 예상 평균점수데이터가 산출되는 제4단계를 포함하는 시험 합격률 예측 방법을 제공한다.In order to solve the above problems, the present invention provides test scoring data for each past year and mock test scoring data for each past year, including average score data for each of the previously implemented tests and simulation tests, and the mock exam scoring data for the current year, and the past year. A first step of inputting and storing test difficulty adjustment detail data in a database unit; A second step of extracting and calculating the test scoring data for each past year, the mock test scoring data for each past year and the current year, and the test difficulty adjustment details data for each past year, stored in the database unit, by a plan calculation unit to calculate a learning index for each past year; A third step of calculating a learning index for the current year through the plan calculation unit based on the learning index for each past year and the previously stored data on the number of test takers for each past year; And the current year's learning index, the previous year's test average score data, the previous year's simulation test average score data, the current year's simulation test average score data, and the current year's test difficulty adjustment history data calculated through the plan calculation unit. It provides a test pass rate prediction method including a fourth step of calculating the expected average score data for the current year for determining the pass rate and managing test difficulty.

또한, 본 발명은 기시행된 시험의 응시율데이터 및 평균점수데이터를 포함하는 과년도별 시험 채점데이터와, 기시행된 모의시험 평균점수데이터를 포함하는 과년도별 모의시험 채점데이터와, 당해연도 모의시험 채점데이터와, 과년도별 시험난이도 조정내역데이터가 입력 및 저장되는 데이터베이스부; 상기 데이터베이스부에 저장된 상기 과년도별 시험 채점데이터, 상기 과년도별 모의시험 채점데이터 및 상기 과년도별 시험난이도 조정내역데이터를 추출하여 과년도별 학습지수를 산출하며, 상기 과년도별 학습지수 및 기저장된 당해연도 시험 응시자수데이터를 기반으로 당해연도 학습지수를 산출하고, 상기 당해연도 학습지수, 직전년도 시험 평균점수데이터, 직전년도 모의시험 평균점수데이터, 당해연도 모의시험 평균점수데이터 및 당해연도 시험난이도 조정내역데이터를 연산하여 당해연도 예상 평균점수데이터를 산출하는 플랜연산부; 및 예상 합격률 보정을 통한 시험 난이도 관리를 위해 상기 당해연도 시험난이도 조정내역데이터를 자동 추출하는 출제관리부를 포함하는 시험 합격률 예측 시스템을 제공한다.In addition, the present invention is a test scoring data for each past year including application rate data and average score data of the previously implemented test, mock test scoring data for each past year including the average score data of the previously implemented simulation test, and scoring for the current year. A database unit for inputting and storing data and test difficulty adjustment history data for each past year; By extracting the test scoring data for each past year, the simulation test scoring data for each past year, and the test difficulty adjustment data for each past year stored in the database unit, the learning index for each past year is calculated, and the learning index for each past year and the pre-stored current year test Calculate the learning index for the current year based on the number of test takers data, and the learning index for the current year, the average score data for the previous year's test, the average score data for the simulation test for the previous year, the average score data for the simulation test for the current year, and the adjustment history data for the current year test A plan calculation unit that calculates the predicted average score data for the current year by calculating; And it provides a test pass rate prediction system including a questionnaire management unit for automatically extracting the current year test difficulty adjustment history data for test difficulty through correction of the expected pass rate.

상기의 해결 수단을 통하여, 본 발명은 다음과 같은 효과를 제공한다.Through the above solution means, the present invention provides the following effects.

첫째, 당해연도 시험의 실시전에 모의시험의 채점데이터를 기반으로 미리 산출된 예상 평균점수데이터를 통해 당해연도 시험의 예상 합격률을 판단할 수 있어 이를 기초로 출제될 시험의 난이도를 시험 실시전에 조정함에 따라 매년 시행되는 시험의 연도별 합격률이 안정화되므로 시험의 공신력이 현저히 향상될 수 있다.First, it is possible to determine the expected pass rate of the current year test through the predicted average score data calculated in advance based on the scoring data of the simulation test before the current year's test, so the difficulty of the test to be presented is adjusted before the test. As a result, the passing rate of each year of the exam is stabilized, so the public confidence of the exam can be remarkably improved.

둘째, 시험 난이도 관리를 위한 당해연도 예상 평균점수데이터가 실제 시험 및 모의시험에 대한 평균점수데이터 간의 비율 및 당해연도 학습지수를 기반으로 산출되되 당해연도 시험난이도 조정내역데이터가 보정됨에 따라 예상 평균점수데이터가 산출되므로 정확한 예상 합격률을 판단할 수 있다.Second, the expected average score data for the current year for test difficulty management is calculated based on the ratio between the average score data for the actual test and the simulation test, and the learning index for the current year, but as the test difficulty adjustment data for the current year are corrected, the expected average score Since the data is calculated, it is possible to judge the exact expected pass rate.

셋째, 조정하고자 하는 시험출제 난이도에 대응하여 상이한 각 난이도 구간별 정답률의 중간값이 상기 당해연도 시험난이도 조정내역데이터에 반영되므로 정확한 당해연도 예상 평균점수데이터의 산출이 가능하여 이로부터 도출되는 시험 예상 합격률의 신뢰성이 현저히 개선될 수 있다.Third, since the median value of the correct answer rate for each different difficulty section corresponding to the difficulty of the exam to be adjusted is reflected in the current year's test difficulty adjustment history data, it is possible to accurately calculate the predicted average score data for the current year. The reliability of the pass rate can be remarkably improved.

넷째, 별도로 선발된 모의시험요원을 대상으로 출제위원이 출제한 문제로 실시된 모의시험의 평균점수데이터가 반영된 과년도별 학습지수를 통해 과년도별 시험 응시자의 학습 수준을 객관적으로 판단 가능하며, 상기 과년도별 학습지수를 기반으로 당해연도 학습지수가 산출되므로 예상 합격률의 정확성이 개선될 수 있다.Fourth, it is possible to objectively judge the learning level of test takers by past year through the past year's learning index reflecting the average score data of the mock exam conducted as a question asked by the questioning committee for the separately selected mock exam personnel. Since the learning index for the current year is calculated based on each learning index, the accuracy of the expected pass rate can be improved.

도 1은 본 발명의 일실시예에 따른 시험 합격률 예측 시스템을 나타낸 블록도.
도 2 및 도 3은 본 발명의 일실시예에 따른 시험 합격률 예측 방법을 나타낸 흐름도.
1 is a block diagram showing a test pass rate prediction system according to an embodiment of the present invention.
2 and 3 are flow charts showing a test pass rate prediction method according to an embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 따른 시험 합격률 예측 방법 및 시스템을 상세히 설명한다.Hereinafter, a method and system for predicting a test pass rate according to a preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 시험 합격률 예측 시스템을 나타낸 블록도이다. 1 is a block diagram showing a test pass rate prediction system according to an embodiment of the present invention.

도 1에서 보는 바와 같이, 본 발명의 일실시예에 따른 시험 합격률 예측 시스템(100)은 데이터베이스부(10), 플랜연산부(20), 그리고 출제관리부(30)를 포함함이 바람직하다. 이러한 시험 합격률 예측 시스템(100)은 시험출제 기관의 PC 등과 같이 시험 합격률 예측 방법을 실시할 수 있는 장치를 의미한다. As shown in FIG. 1, the test pass rate prediction system 100 according to an embodiment of the present invention preferably includes a database unit 10, a plan calculation unit 20, and a questionnaire management unit 30. The test pass rate prediction system 100 refers to a device capable of performing a test pass rate prediction method, such as a PC of a test questioning organization.

한편, 상기 데이터베이스부(10)에는 기시행된 시험의 응시율데이터 및 평균점수데이터를 포함하는 과년도별 시험 채점데이터와, 기시행된 모의시험 평균점수데이터를 포함하는 과년도별 모의시험 채점데이터와, 당해연도 모의시험 평균점수데이터를 포함하는 당해연도 모의시험 채점데이터와, 과년도별 시험난이도 조정내역데이터가 입력 및 저장됨이 바람직하다. Meanwhile, the database unit 10 includes test scoring data for each past year including application rate data and average score data of the previously administered test, and mock test scoring data for each past year including average score data for the previously conducted simulation test, It is preferable to input and store the scoring data of the simulation test for the current year, including the average score data of the simulation test for the year, and the adjustment history data of the test difficulty for each year.

이때, 본 발명의 일실시예에서 시험 및 모의시험이 연도별로 출제되는 것으로 설명되나, 경우에 따라 일년에 시험 및 모의시험이 수회 실시되는 경우에는 각 회차별로 각 채점데이터가 입력 및 저장될 수도 있다. At this time, in one embodiment of the present invention, it is described that the test and mock test are presented by year, but in some cases, when the test and mock test are conducted several times a year, each scoring data may be input and stored for each round. .

그리고, 기시행된 시험이라 함은 출제대상시험과 동일한 과목으로 출제대상당해연도 시험의 시행일 이전에 시행되어 채점이 완료된 시험을 의미하는 것으로 이해함이 바람직하다. 또한, 상기 모의시험은 별도로 선발된 모의시험요원을 대상으로 출제위원이 출제한 문제로 실시된 모의시험을 의미한다. In addition, it is desirable to understand that the previously conducted test refers to a test that is the same subject as the test subject to be tested, and has been conducted before the enforcement date of the test subject to the year to be tested and has been scored. In addition, the above mock test refers to a mock exam conducted by the questionnaire for the mock test personnel selected separately.

더불어, 상기 당해연도 모의시험은 당해연도에 실시 예정인 당해연도 시험에 대응하여 모의시험요원을 대상으로 출제위원이 출제한 문제로 실시된 모의시험을 의미한다. In addition, the mock exam for the current year refers to a mock exam conducted by the questionnaire for the mock test personnel in response to the exam for the current year scheduled for the current year.

또한, 각 상기 채점데이터 및 각 상기 시험난이도 조정내역데이터는 스프레드시트데이터 형식으로 구비될 수 있다. 여기서, 상기 채점데이터는 기시행된 시험의 연도별 또는 회차별로 해당 시험의 모든 응시자에 대한 문항별 정답여부를 포함할 수 있다. In addition, each of the scoring data and each of the test difficulty adjustment history data may be provided in a spreadsheet data format. Here, the scoring data may include whether or not the correct answer for each question for all candidates of the corresponding test by year or by each round of the previously administered test.

이때, 각 문항은 과목별로 구분되며, 문항별 정답여부 및 문항별 배점에 따라 각 응시자의 과목별 점수데이터 및 평균점수데이터가 산출될 수 있다. At this time, each question is classified for each subject, and score data and average score data for each subject of each candidate may be calculated according to whether or not the question is answered correctly and the points are allocated for each question.

그리고, 합격기준점수, 과목별 과락기준점수 등에 따라 합격/불합격 여부가 산출될 수 있다. 물론, 상기 각 응시자의 과목별 점수, 평균점수, 합격/불합격 여부 등은 채점데이터 내에 기산출되어 구비될 수 있다. In addition, the pass/fail status may be calculated according to the pass criterion score, the error criterion score for each subject, and the like. Of course, each candidate's score for each subject, average score, pass/fail, etc. may be pre-calculated and provided in the scoring data.

또한, 상기 데이터베이스부(10)에는 시험의 과년도별 응시율데이터, 과년도별 선택과목 응시율데이터 및 당해연도 선택과목 접수자수데이터가 각각 입력 및 저장될 수 있다.In addition, the database unit 10 may input and store application rate data for each past year of the exam, data for an exam rate for elective courses for each past year, and data on the number of recipients for elective courses for the current year, respectively.

한편, 상기 플랜연산부(20)는 상기 데이터베이스부에 저장된 상기 과년도별 시험 채점데이터, 상기 과년도별 모의시험 채점데이터 및 상기 과년도별 시험난이도 조정내역데이터를 추출하여 과년도별 학습지수를 산출함이 바람직하다.On the other hand, it is preferable that the plan calculation unit 20 extracts the test scoring data for each past year, the simulation test scoring data for each past year, and the adjustment history data for each past year, stored in the database unit, and calculates a learning index for each past year. .

그리고, 상기 플랜연산부(20)는 상기 과년도별 학습지수 및 기저장된 당해연도 시험 응시자수데이터를 기반으로 당해연도 학습지수를 산출함이 바람직하다. In addition, it is preferable that the plan calculation unit 20 calculates the learning index for the current year based on the learning index for each previous year and the previously stored data on the number of test takers for the current year.

또한, 상기 플랜연산부(20)는 상기 당해연도 학습지수, 직전년도 시험 평균점수데이터, 직전년도 모의시험 평균점수데이터, 당해연도 모의시험 평균점수데이터 및 당해연도 시험난이도 조정내역데이터를 연산하여 당해연도 예상 평균점수데이터를 산출함이 바람직하다.In addition, the plan calculation unit 20 calculates the current year's learning index, the previous year's test average score data, the previous year's simulation test average score data, the current year's simulation test average score data, and the current year test difficulty adjustment history data. It is desirable to calculate the expected average score data.

이때, 상기 직전년도 시험 평균점수데이터는 상기 과년도별 시험 채점데이터에 포함되며, 상기 직전년도 모의시험 평균점수데이터는 상기 과년도별 모의시험 채점데이터에 포함됨으로 이해함이 바람직하다. In this case, it is preferable to understand that the average score data for the previous year's test is included in the test scoring data for each past year, and the average score data for the simulation test for the previous year is included in the scoring data for the simulation test for each past year.

또한, 상기 당해연도 모의시험 평균점수데이터는 상기 당해연도 모의시험 채점데이터에 포함됨으로 이해함이 바람직하다.In addition, it is preferable to understand that the average score data for the simulation test for the current year is included in the score data for the simulation test for the current year.

그리고, 상기 플랜연산부(20)는 과년도별 시험 응시자수데이터에 포함된 과년도별 시험의 접수자수 및 응시자수의 각 평균비를 통해 당해연도 예상응시율데이터를 산출함이 바람직하다.In addition, it is preferable that the plan calculation unit 20 calculates the predicted application rate data for the current year through the average ratio of the number of applicants and the number of test takers for each previous year included in the data for the number of applicants for each year.

한편, 상기 출제관리부(30)는 예상 합격률 보정을 통한 시험 난이도 관리를 위해 상기 당해연도 시험난이도 조정내역데이터를 자동 추출함이 바람직하다.On the other hand, it is preferable that the question management unit 30 automatically extracts the test difficulty adjustment history data for the current year in order to manage the test difficulty through correcting the expected pass rate.

여기서, 상기 출제관리부(30)는 상기 당해연도 시험난이도 조정내역데이터를 자동 추출하여 상기 플랜연산부(20)로 전송하되, 상기 플랜연산부(20)는 1차로 산출된 당해연도 예상 평균점수데이터에 상기 당해연도 시험난이도 조정내역데이터를 반영 및 연산하여 최종 보정된 당해연도 예상 평균점수데이터를 산출함이 바람직하다.Here, the question management unit 30 automatically extracts the test difficulty adjustment details data for the current year and transmits the data to the plan calculation unit 20, and the plan calculation unit 20 is the first calculated average score data for the current year. It is desirable to calculate the final corrected estimated average score data for the current year by reflecting and calculating the test difficulty adjustment data for the current year.

따라서, 당해연도 시험의 실시전에 모의시험의 채점데이터를 기반으로 미리 산출된 예상 평균점수데이터를 통해 당해연도 시험의 예상 합격률을 판단할 수 있어 이를 기초로 출제될 시험의 난이도를 시험 실시전에 조정함에 따라 매년 시행되는 시험의 연도별 합격률이 안정화되므로 시험의 공신력이 현저히 향상될 수 있다.Therefore, it is possible to determine the expected pass rate of the current year test through the predicted average score data calculated in advance based on the scoring data of the mock test before the current year test is conducted, and the difficulty of the test to be presented based on this can be adjusted before the test. As a result, the passing rate of each year of the exam is stabilized, so the public confidence of the exam can be remarkably improved.

도 2 및 도 3은 본 발명의 일실시예에 따른 시험 합격률 예측 방법을 나타낸 흐름도이다. 이하에서, 본 발명의 일실시예에 따른 시험 합격률 예측 방법을 상세히 설명한다. 2 and 3 are flowcharts illustrating a method of predicting a test pass rate according to an embodiment of the present invention. Hereinafter, a method for predicting a test pass rate according to an embodiment of the present invention will be described in detail.

도 2 내지 도 3에서 보는 바와 같이, 본 발명의 일실시예에 따른 시험 합격률 예측 방법은 각 데이터 입력 및 저장(s10), 과년도별 학습지수 산출(s20), 당해연도 학습지수 산출(s30), 당해연도 예상 평균점수데이터 산출(s40)의 일련의 단계를 포함함이 바람직하다.As shown in FIGS. 2 to 3, the test pass rate prediction method according to an embodiment of the present invention includes input and storage of each data (s10), calculation of a learning index for each past year (s20), calculation of a learning index for the current year (s30), It is preferable to include a series of steps of calculating the predicted average score data for the current year (s40).

여기서, 본 발명의 일실시예에 따른 시험 합격률 예측 방법이 수행되기 위한 세 가지 가정이 존재하며, 상기 가정은 다음과 같다.Here, there are three assumptions for performing the test pass rate prediction method according to an embodiment of the present invention, and the assumptions are as follows.

첫째, 예측한 과목별 점수 및 수험자 평균점수의 분포는 정규분포를 따른다.First, the distribution of the predicted scores for each subject and the average scores of examinees follows a normal distribution.

둘째, 난이도 조정으로 인한 점수 분포의 모양은 변하지 않는다.Second, the shape of the score distribution due to the difficulty adjustment does not change.

셋째, 과락자의 과락과목이 한 과목만 있고 이를 제외한 다른 과목은 합격 평균점수 이상이다. 예컨대, 합격 기준점수가 60점인 경우, 과락자는 한 과목만 25점 이상 40점 미만이고, 그 외 과목은 60점 이상으로 가정한다.Third, there is only one subject for the missed person, and the other subjects except for this are above the passing average score. For example, if the passing criterion score is 60, it is assumed that only one subject has 25 points or more and less than 40 points, and 60 points or more for other subjects.

이에 따라, 상술된 세 가지 가정이 성립한다는 전제하에 각 데이터 입력 및 저장, 과년도별 학습지수 산출, 당해연도 학습지수 산출, 당해연도 예상 평균점수데이터 산출의 일련의 단계가 수행됨에 따라 시험출제 합격률을 예측할 수 있다.Accordingly, on the premise that the three assumptions described above are established, a series of steps of inputting and storing each data, calculating the learning index for each past year, calculating the learning index for the current year, and calculating the expected average score data for the current year are performed. It is predictable.

한편, 기시행된 시험 및 모의시험의 각 평균점수데이터를 포함하는 과년도별 시험 채점데이터 및 과년도별 모의시험 채점데이터와, 당해연도 모의시험 평균점수데이터를 포함하는 당해연도 모의시험 채점데이터와, 과년도별 시험난이도 조정내역데이터가 상기 데이터베이스부(10)에 입력 및 저장된다(s10). On the other hand, test scoring data for each past year and mock test scoring data for each past year, including average score data of the previously conducted test and simulation test, the current year mock test scoring data including the average score data for the current year, and the past year. The individual test difficulty adjustment history data is input and stored in the database unit 10 (s10).

이때, 각 상기 채점데이터의 입력은 각 시험 및 각 모의시험의 시행과 함께 이루어짐이 가장 바람직하다. At this time, it is most preferable that the input of each of the scoring data is performed together with the execution of each test and each simulation test.

그리고, 각 데이터 입력 및 저장 단계(s10)는, 상기 데이터베이스부(10)에 시험의 과년도별 응시율데이터, 과년도별 선택과목 응시율데이터 및 당해연도 선택과목별 접수자수데이터가 각각 입력 및 저장되는 단계를 더 포함할 수 있다.And, each data input and storage step (s10), the step of inputting and storing the application rate data for each past year of the exam, the exam rate data for the past year, and the number of applicants for each selected subject in the current year, respectively, in the database unit 10 It may contain more.

또한, 각 데이터 입력 및 저장 단계(s10)는, 과년도별 시험 응시자수데이터에 포함된 과년도별 시험의 접수자수 및 응시자수의 각 평균비를 통해 당해연도 예상응시율데이터가 산출되는 단계를 더 포함할 수 있다. 즉, 과년도별 시험 응시자수데이터에 포함된 과년도별 시험의 접수자수 및 응시자수의 각 평균을 통해 당해연도 예상 접수자수 및 예상 응시자수가 추정될 수 있다. In addition, each data input and storage step (s10) may further include a step of calculating the estimated test rate data for the current year through the average ratio of the number of applicants and the number of test takers for each previous year included in the data for the number of test takers for each previous year. I can. In other words, the estimated number of applicants and the expected number of applicants for the current year can be estimated through the average of the number of applicants and the number of applicants for each previous year included in the data on the number of candidates for the previous year.

한편, 상기 데이터베이스부(10)에 저장된 상기 과년도별 시험 채점데이터와, 상기 과년도별 모의시험 채점데이터와, 상기 당해연도 모의시험 채점데이터와, 상기 과년도별 시험난이도 조정내역데이터가 기저장된 수학식을 기반으로 연산수행을 처리하도록 구비된 플랜연산부(20)로 추출 및 연산되어 과년도별 학습지수가 산출된다(s20). On the other hand, an equation in which the test scoring data for each past year, the mock test scoring data for each past year, the mock exam scoring data for the current year, and the test difficulty adjustment history data for each past year are stored in the database unit 10 in advance. Based on the extraction and calculation by the plan calculation unit 20 provided to process the calculation performance, the learning index for each past year is calculated (s20).

여기서, 상기 과년도별 학습지수는 하기의 수학식 1에 의해 산출된다.Here, the learning index for each past year is calculated by Equation 1 below.

Figure pat00001
Figure pat00001

여기서, St는 t년도 과년도별 학습지수, At는 t년도 과목별 수험자의 시험 평균점수데이터, At-1은 t-1년도 과목별 수험자의 시험 평균점수데이터, Bt-1은 t-1년도 과목별 t년도 모의시험요원의 모의시험 평균점수데이터, Ct는 t년도 과목별 t년도 모의시험요원의 모의시험 평균점수데이터, Dt는 t년도 과목별 과년도별 시험난이도 조정내역데이터를 의미한다. 이때, 상술된 t년도는 당해연도를 제외한 과년도로 이해함이 바람직하다.Here, S t is the learning index for each year in t, A t is the test average score data of examinees for each subject in t year, A t-1 is the test average score data for each subject in t-1, B t-1 is t -Average score data for mock exams by mock test personnel in year t for each subject in year 1, C t is data on average score data for mock exams by mock test personnel in t year for each subject in t year, and D t is data for adjustment of test difficulty for each subject in year t Means. In this case, it is preferable to understand that the above-described year t is the past year excluding the current year.

상세히, 상기 수학식 1의 상기 과년도별 학습지수(St)는 해당 연도의 시험 평균점수데이터(At)의 분자값과, 해당 연도의 직전 연도 시험 평균점수데이터(At-1) 및 해당 연도의 모의시험 평균점수데이터(Ct) 간의 곱에서 해당 연도의 직전 연도 모의시험 평균점수데이터(Bt-1)를 나눈 값에 해당 연도의 시험난이도 조정내역데이터(Dt)를 더한 값의 분모값을 통해 당해연도를 제외한 연도별로 개별 산출됨이 바람직하다.In detail, the learning index (S t ) for each previous year in Equation 1 is the numerator value of the test average score data (A t ) for the corresponding year, the test average score data (A t-1 ) and the corresponding the simulation of the flue test average score data obtained by adding the multiplied test difficulty level adjustment history data (D t) of the year, the value obtained by dividing the immediately preceding year simulated average score data (B t-1) of the year in between (C t) value It is preferable that the denominator is calculated individually for each year excluding the current year.

이를 통해, 별도로 선발된 모의시험요원을 대상으로 출제위원이 출제한 문제로 실시된 모의시험의 평균점수데이터가 반영된 상기 과년도별 학습지수(St)를 통해 과년도별 시험 응시자의 학습 수준을 객관적으로 판단 가능하다. 즉, 모의시험의 평균점수데이터가 반영 상기 분모값과 해당 연도의 시험 평균점수데이터(At)인 분자값 간의 비로써 객관적인 과년도별 학습지수의 도출이 가능하다.Through this, the learning level of test takers for each year can be objectively determined through the study index (S t ) for each year, reflecting the average score data of the simulation test conducted by the questionnaire as a question set by the questionnaire. It is possible to judge. That is, as the ratio between the denominator value reflected by the average score data of the simulation test and the numerator value, which is the test average score data (A t ) for the corresponding year, it is possible to derive an objective learning index for each past year.

그리고, 개별 산출된 상기 과년도별 학습지수(St)는 상기 데이터베이스부(10)에 입력 및 저장됨이 바람직하다. 이어서, 상기 과년도별 학습지수(St) 및 기저장된 과년도별 시험 응시자수데이터를 기반으로 상기 플랜연산부(20)를 통해 당해연도 학습지수(Sn)가 산출된다(s30). In addition, it is preferable that the individually calculated learning index (S t ) for each past year is input and stored in the database unit 10. Subsequently, the learning index (S n ) for the current year is calculated through the plan calculation unit 20 based on the previous year-specific learning index (S t ) and the previously stored data on the number of test takers for each previous year (s30).

여기서, 상기 당해연도 학습지수는 하기의 수학식 2에 의해 산출된다.Here, the learning index for the current year is calculated by Equation 2 below.

Figure pat00002
Figure pat00002

여기서, Sn은 과목별 당해연도 학습지수, Et는 t년도 과년도별 시험 응시자수데이터, St는 t년도 과년도별 학습지수를 의미한다.Here, S n is the learning index for the current year for each subject, E t is the data on the number of test takers for each year in t, and S t is the learning index for each year in t.

상세히, 상기 수학식 2의 상기 당해연도 학습지수(Sn)는 과년도별 시험 응시자수에 과년도별 학습지수를 곱한 값의 총합인 분자값과, 과년도별 시험 응시자수의 총합인 분모값을 통해 산출될 수 있다. 그리고, 산출된 상기 당해연도 학습지수(Sn)가 상기 데이터베이스부(10)에 입력 및 저장됨이 바람직하다. In detail, the current year's learning index (S n ) in Equation 2 is calculated through a numerator value, which is the sum of the value of multiplying the number of test takers for each past year by the learning index for each past year, and a denominator value that is the sum of the number of test takers for each past year. Can be. In addition, it is preferable that the calculated learning index (S n ) for the current year is input and stored in the database unit 10.

이를 통해, 상기 과년도별 학습지수(St) 및 기저장된 과년도별 시험 응시자수데이터를 기반으로 상기 당해연도 학습지수(Sn)가 산출되므로 당해연도의 시험 응시자의 학습 수준의 객관적인 판단이 가능하다. 따라서, 상기 과년도별 학습지수(St)를 기반으로 상기 당해연도 학습지수(Sn)가 산출되므로 최종 도출되는 예상 합격률의 정확성이 개선될 수 있다.Through this, the learning index for the current year (S n ) is calculated based on the learning index for each past year (S t ) and the previously stored data for the number of test takers for each past year, so it is possible to objectively judge the learning level of the test takers for the current year. . Therefore, since the current year's learning index (S n ) is calculated based on the previous year's learning index (S t ), the accuracy of the final derived expected pass rate can be improved.

한편, 상기 당해연도 학습지수 산출 단계(s30)와 더불어, 상기 플랜연산부(20)를 통해 시행되는 당해연도 시험이 단일교시인지 판단하는 단계(s31)가 수행될 수 있다. On the other hand, in addition to the current year's learning index calculation step (s30), a step (s31) of determining whether the current year test performed through the plan calculation unit 20 is a single lesson may be performed.

여기서, 시행되는 당해연도 시험이 단일교시인 경우, 상기 플랜연산부(20)를 통해 상기 단일교시에 대한 당해연도 시험 응시율을 추정하는 단계(s32a)가 수행될 수 있다. 반면, 시행되는 당해연도 시험이 복수교시인 경우, 상기 플랜연산부(20)를 통해 상기 복수교시에 대한 교시별 당해연도 시험 응시율을 추정하는 단계(s32b)가 수행될 수 있다. Here, when the current year test to be implemented is a single class, a step (s32a) of estimating the current year test application rate for the single class may be performed through the plan calculation unit 20. On the other hand, when the current year test to be implemented is a plurality of lessons, a step (s32b) of estimating a current year test application rate for each period for the plurality of lessons may be performed through the plan calculation unit 20.

이때, 상기 플랜연산부(20)는 과년도별 시험의 접수자수 및 응시자수의 각 평균비를 통해 당해연도 예상응시율데이터를 산출함이 바람직하다. 이를 통해, 시행되는 당해연도 시험의 각 교시별 당해연도 예상 평균점수데이터의 정확한 산출이 가능하다. In this case, it is preferable that the plan calculation unit 20 calculates the expected application rate data for the current year through the average ratio of the number of applicants and the number of applicants for each past year. Through this, it is possible to accurately calculate the predicted average score data for the current year for each period of the current year test being conducted.

한편, 상기 당해연도 학습지수 산출 단계(s30)와 더불어, 상기 플랜연산부(20)를 통해 시행되는 당해연도 시험에 선택과목이 존재하는지 판단하는 단계(s33)가 수행될 수 있다. On the other hand, in addition to the calculation of the learning index for the current year (s30), a step (s33) of determining whether an optional subject exists in the exam for the current year performed through the plan calculation unit 20 may be performed.

여기서, 시행되는 당해연도 시험에 선택과목이 존재하지 않는 경우 당해연도 접수자수데이터가 상기 데이스베이스부(10)에 입력 및 저장되는 단계(s34a)가 수행될 수 있다. 반면, 시행되는 당해연도 시험에 선택과목이 존재하는 경우 선택과목별 당해연도 시험 응시율을 추정하고, 선택과목별 당해연도 접수자수데이터가 상기 데이스베이스부(10)에 입력 및 저장되는 단계(s34b)가 수행될 수 있다. Here, when there are no elective subjects in the current year test being conducted, a step (s34a) of inputting and storing data on the number of applicants for the current year in the database unit 10 may be performed. On the other hand, if there are elective subjects in the current year's test being implemented, the step of estimating the current year test application rate for each elective subject, and inputting and storing data on the number of applicants for the current year for each elective subject in the database unit 10 (s34b). Can be performed.

이때, 시험 응시율을 추정을 추정한다 함은 상기 당해연도 예상응시율데이터을 산출하는 것과 동일한 의미로 이해함이 바람직하며, 선택과목별 당해연도 예상응시율데이터는 상기 당해연도 예상응시율데이터의 산출 과정과 동일함으로 이해함이 바람직하다.At this time, it is desirable to understand that estimating the test application rate is the same as calculating the expected application rate data for the current year, and it is understood that the expected application rate data for the current year for each elective subject is the same as the process of calculating the expected application rate data for the current year. This is desirable.

한편, 상기 당해연도 학습지수와, 직전년도 시험 평균점수데이터와, 직전년도 모의시험 평균점수데이터와, 당해연도 모의시험 평균점수데이터와, 당해연도 시험난이도 조정내역데이터가 상기 플랜연산부(20)를 통해 연산되어 예상 합격률 판단 및 시험 난이도 관리를 위한 당해연도 예상 평균점수데이터가 산출된다(s40).On the other hand, the learning index for the current year, the average score data for the previous year, the average score data for the simulation test for the previous year, the average score data for the simulation test for the current year, and the adjustment history data for the test difficulty for the current year are used by the plan calculation unit 20. It is calculated through the calculation to calculate the expected average score data for the current year for determining the expected pass rate and managing the difficulty of the test (s40).

여기서, 상기 당해연도 예상 평균점수데이터는 하기의 수학식 3에 의해 산출된다.Here, the expected average score data for the current year is calculated by Equation 3 below.

Figure pat00003
Figure pat00003

여기서, An은 당해연도 과목별 수험자의 시험 예상 평균점수데이터, An-1은 n-1년도 과목별 수험자의 시험 평균점수데이터, Bn-1은 n-1년도 과목별 n년도 모의시험요원의 모의시험 평균점수데이터, Cn는 n년도 과목별 n년도 모의시험요원의 모의시험 평균점수데이터, Dn는 n년도 과목별 시험난이도 조정내역데이터, Sn은 과목별 당해연도 학습지수를 의미한다.Here, A n is the test expected average score data for each subject in the current year, A n-1 is the test average score data for each subject in the n-1 year, and B n-1 is the mock test for each subject in year n-1. The average score data of the simulation test of the agent, C n is the average score data of the simulation test of the simulation test agent in the n year for each subject in the year n , D n is the data on the adjustment history of the test difficulty for each subject in the year n , and S n is the learning index for the current year for each subject. it means.

상세히, 상기 당해연도 학습지수(Sn)와, 직전년도 시험 평균점수데이터(An-1)와, 직전년도 모의시험 평균점수데이터(Bn-1)와, 당해연도 모의시험 평균점수데이터(Cn)와, 당해연도 시험난이도 조정내역데이터(Dn)를 기반으로 상기 당해연도 예상 평균점수데이터(An)가 1차 산출될 수 있다.In detail, the current year's learning index (S n ), the previous year's test average score data (A n-1 ), the previous year's simulation test average score data (B n-1 ), and the current year's simulation test average score data ( Based on C n ) and test difficulty adjustment history data for the current year (D n ), the predicted average score data for the current year (A n ) may be calculated first.

즉, 상기 수학식 3에서 상기 예상 평균점수데이터(An)는 직전년도 시험 평균점수데이터(An-1) 및 당해연도 모의시험 평균점수데이터(Cn) 간의 곱에서 직전년도 모의시험 평균점수데이터(Bn-1)를 나눈 값에 당해연도 시험난이도 조정내역데이터(Dn)를 더한 값과, 상기 당해연도 학습지수(Sn) 간의 곱으로 1차 산출될 수 있다.That is, in Equation 3, the expected average score data (A n ) is the average score of the simulation test in the previous year from the product of the test average score data (A n-1 ) for the previous year and the simulation test average score data (C n ) for the current year. A value obtained by dividing the data (B n-1 ) and the test difficulty adjustment history data (D n ) for the current year may be calculated first by multiplying the learning index (S n ) for the current year.

또한, 1차 산출된 상기 예상 평균점수데이터(An)가 상기 데이터베이스부(10)에 입력 및 저장됨이 바람직하다.In addition, it is preferable that the first calculated predicted average score data (A n ) is input and stored in the database unit 10.

그리고, 상기 당해연도 예상 평균점수데이터(An)가 시험 난이도 관리를 위한 과목별 기설정된 목표평균점수를 초과하거나 미달하는지 상기 출제관리부(30)에 의해 판단되는 단계(s41)가 수행됨이 바람직하다. In addition, it is preferable to perform a step (s41) of determining by the questionnaire management unit 30 whether the expected average score data for the current year (A n ) exceeds or falls short of a target average score preset for each subject for test difficulty management. .

여기서, 상기 당해연도 예상 평균점수데이터(An)가 과목별 기설정된 목표평균점수를 기준으로 기설정범위를 초과하거나 미달하는 경우 과목별 난이도, 즉 당해연도 시험난이도 조정내역데이터(Dn)를 조정하는 단계(s42)가 수행됨이 바람직하다. Here, if the predicted average score data for the current year (A n ) exceeds or falls short of the preset range based on the target average score for each subject, the difficulty of each subject, that is, the adjustment history data for the test difficulty for the current year (D n ) It is preferable that the adjusting step (s42) is performed.

상세히, 당해연도 예상 평균점수데이터 산출(s40) 단계는, 1차로 산출된 당해연도 예상 평균점수데이터(An)에 시험 난이도 관리를 위해 구비되는 상기 출제관리부(30)로부터 자동 추출된 상기 당해연도 시험난이도 조정내역데이터(Dn)가 대입 및 연산되어 최종 보정된 당해연도 예상 평균점수데이터(An)가 산출되는 단계를 더 포함함이 바람직하다.In detail, in the step of calculating the predicted average score data for the year (s40), the current year automatically extracted from the question management unit 30 provided for managing the difficulty of the test in the predicted average score data for the year (A n ) calculated first. It is preferable to further include the step of calculating the final corrected estimated average score data (A n ) for the current year by substituting and calculating the test difficulty adjustment details data (D n ).

이때, 상기 당해연도 시험난이도 조정내역데이터(Dn)는 하기의 수학식 4에 개시된 수학식 중 어느 하나에 의해 산출된다.At this time, the current year test difficulty adjustment history data (D n ) is calculated by any one of the equations disclosed in Equation 4 below.

Figure pat00004
Figure pat00004

Figure pat00005
Figure pat00005

Figure pat00006
Figure pat00006

여기서, 조정문제수는 당해연도 시험중 난이도 조정을 위해 조정되는 문제수를 의미하며, 과목별 만점에 해당하는 점수 및 과목별 문제수는 상기 데이터베이스부(10)에 각각 기저장된다. 이때, 과목별 만점에 해당되는 점수에서 과목별 문제수를 나눈값이 시험의 배점을 의미함으로 이해함이 바람직하다. Here, the number of adjusted questions means the number of questions adjusted for adjustment of the difficulty level during the exam in the current year, and the score corresponding to the perfect score for each subject and the number of questions for each subject are previously stored in the database unit 10, respectively. At this time, it is desirable to understand that the value obtained by dividing the number of questions for each subject from the score corresponding to the perfect score for each subject means the score for the test.

그리고, 상기 당해연도 시험난이도 조정내역데이터(Dn)는 하기의 표 1의 중간값을 기반으로 상기 출제관리부(30)에 의해 추출될 수 있다.In addition, the current year test difficulty adjustment history data (D n ) may be extracted by the questionnaire management unit 30 based on the median value in Table 1 below.

난이도difficulty 단계step 정답률(%)Correct answer rate (%) 중간값Median Prize 1One 0~100-10 0.150.15 22 10~2010-20 33 20~3020~30 medium 44 30~4030~40 0.450.45 55 40~5040-50 66 50~6050~60 Ha 77 60~7060~70 0.80.8 88 70~8070~80 99 80~9080~90 1010 90~10090~100

이때, 표 1에서 보는 바와 같이, 시험 문제의 정답률을 기설정된 구간별로 구분하여 문제별 난이도를 설정하고, 문제별 난이도에 대응하는 기설정된 중간값이 설정될 수 있다. 예컨대, 상기 출제관리부(30)에 의해 정답률 0~30% 구간이 '난이도 상'으로 설정되며, 정답률 30~60% 구간이 '난이도 중'으로 설정되고, 정답률 60~100% 구간이 '난이도 하'로 설정될 수 있다. In this case, as shown in Table 1, a difficulty level for each question may be set by dividing the correct answer rate of the test question for each preset section, and a preset intermediate value corresponding to the difficulty level for each question may be set. For example, by the questionnaire management unit 30, a section of 0 to 30% of correct answers is set to'high difficulty', a section of 30 to 60% of correct answers is set to'under difficulty', and a section of 60 to 100% of correct answers is set to'lower difficulty'. Can be set to'.

이에 따라, 각 난이도 구간별 정답률의 중간값이 상기 당해연도 시험난이도 조정내역데이터(Dn)에 반영될 수 있으며, 시행되는 시험의 각 문제별 정답률을 기반으로 객관적인 시험난이도의 도출이 가능하다.Accordingly, the median value of the correct answer rate for each difficulty level can be reflected in the current year's test difficulty adjustment history data (D n ), and objective test difficulty can be derived based on the correct answer rate for each question of the test being conducted.

상세히, 당해연도 시험의 난이도를 상에서 중, 또는 중에서 상으로 조정되는 경우에는 상기 수학식 4에서 In detail, when the difficulty of the current year test is adjusted to medium or medium, in Equation 4 above

Figure pat00007
Figure pat00007

의 수학식이 상기 출제관리부(30)에 의해 자동 추출될 수 있다. Equation of may be automatically extracted by the question management unit 30.

그리고, 당해연도 시험의 난이도를 중에서 하, 또는 하에서 중으로 조정되는 경우에는 상기 수학식 4에서 And, if the difficulty of the current year test is adjusted to medium or low, in Equation 4 above

Figure pat00008
Figure pat00008

의 수학식이 상기 출제관리부(30)에 의해 자동 추출될 수 있다. Equation of may be automatically extracted by the question management unit 30.

또한, 당해연도 시험의 난이도를 상에서 하, 또는 하에서 상으로 조정되는 경우에는 상기 수학식 4에서 In addition, if the difficulty level of the current year test is adjusted from top to bottom, or from bottom to top, in Equation 4 above

Figure pat00009
Figure pat00009

의 수학식이 상기 출제관리부(30)에 의해 자동 추출될 수 있다. Equation of may be automatically extracted by the question management unit 30.

이를 통해, 조정하고자 하는 시험출제 난이도에 대응하여 상이한 각 난이도 구간별 정답률의 중간값이 상기 당해연도 시험난이도 조정내역데이터(Dn)에 반영되므로 정확한 상기 당해연도 예상 평균점수데이터(An)의 산출이 가능하여 이로부터 도출되는 시험 예상 합격률의 신뢰성이 현저히 개선될 수 있다.Through this, the median value of the correct answer rate for each different difficulty section corresponding to the difficulty of the test question to be adjusted is reflected in the current year's test difficulty adjustment history data (D n ), so that the correct average score data for the current year (A n ) Since calculation is possible, the reliability of the expected test pass rate derived therefrom can be significantly improved.

즉, 1차 산출된 상기 예상 평균점수데이터(An)에 상기 당해연도 시험난이도 조정내역데이터(Dn)가 보정됨에 따라 최종 예상 평균점수데이터(An)가 산출될 수 있다. 또한, 최종 보정된 상기 예상 평균점수데이터(An)가 상기 데이터베이스부(10)에 입력 및 저장될 수 있다.That is, it can be estimated that the final average score data (A n) calculated as the year the test difficulty level adjustment history data (D n) is corrected to the first said estimated mean score data (A n) calculated difference. In addition, the final corrected predicted average score data A n may be input and stored in the database unit 10.

이에 따라, 최종 보정된 상기 예상 평균점수데이터(An) 및 상기 데이터베이스부(10)에 저장된 당해연도 시험 응시자수데이터를 기반으로 당해연도 시험의 예상 합격률이 산출될 수 있다. 이때, 예상 합격률은 시험의 전체 응시자 수에 대한 합격자 수의 비율로 산출될 수 있다.Accordingly, the expected pass rate of the current year exam may be calculated based on the final corrected expected average score data A n and the number of candidates for the current year test stored in the database unit 10. At this time, the expected pass rate is the ratio of the number of passers to the total number of test takers. Can be calculated.

그리고, 최종 보정된 상기 당해연도 예상 평균점수데이터(An)를 기반으로 상기 출제관리부(30)를 통해 당해연도 시험 문제가 출제될 수 있다. 여기서, 상기 출제관리부(30)에 의해 상기 데이터베이스부(10)에 기저장된 베이스문항으로부터 출제대상문항이 추출될 수 있다. In addition, a test question for the current year may be presented through the question management unit 30 based on the final corrected average score data A n for the current year. Here, the questionnaire subject question may be extracted from the base question previously stored in the database unit 10 by the questionnaire management unit 30.

따라서, 당해연도 시험의 실시전에 모의시험의 채점데이터를 기반으로 미리 산출된 예상 평균점수데이터를 통해 당해연도 시험의 예상 합격률을 판단할 수 있어 이를 기초로 출제될 시험의 난이도를 시험 실시전에 조정함에 따라 매년 시행되는 시험의 연도별 합격률이 안정화되므로 시험의 공신력이 현저히 향상될 수 있다.Therefore, it is possible to determine the expected pass rate of the current year test through the predicted average score data calculated in advance based on the scoring data of the mock test before the current year test is conducted, and the difficulty of the test to be presented based on this can be adjusted before the test. As a result, the passing rate of each year of the exam is stabilized, so the public confidence of the exam can be significantly improved.

또한, 시험 난이도 관리를 위한 당해연도 예상 평균점수데이터가 실제 시험 및 모의시험에 대한 평균점수데이터 간의 비율 및 당해연도 학습지수를 기반으로 산출되되, 당해연도 시험난이도 조정내역데이터가 보정됨에 따라 예상 평균점수데이터가 산출되므로 정확한 예상 합격률을 판단할 수 있다.In addition, the predicted average score data for the current year for test difficulty management is calculated based on the ratio between the average score data for the actual test and the simulation test, and the learning index for the current year, and as the test difficulty adjustment data for the current year are corrected, the expected average Since score data is calculated, it is possible to determine an accurate expected pass rate.

이때, 이상에서 기재된 "포함하다", "구성하다" 또는 "구비하다" 등의 용어는, 특별히 반대되는 기재가 없는 한, 해당 구성 요소가 내재할 수 있음을 의미하는 것이므로, 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것으로 해석되어야 한다. 기술적이거나 과학적인 용어를 포함한 모든 용어들은, 다르게 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥상의 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.At this time, the terms such as "include", "comprise" or "have" described above mean that the corresponding component may be present unless otherwise stated, excluding other components. It should not be construed as being able to include other components. All terms, including technical or scientific terms, have the same meaning as commonly understood by a person of ordinary skill in the art, unless otherwise defined. Terms generally used, such as terms defined in the dictionary, should be interpreted as being consistent with the meaning of the context of the related technology, and are not interpreted as ideal or excessively formal meanings unless explicitly defined in the present invention.

이상 설명한 바와 같이, 본 발명은 상술한 각 실시예에 한정되는 것은 아니며, 본 발명의 청구항에서 청구하는 범위를 벗어남 없이 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 변형 실시되는 것은 가능하며, 이러한 변형 실시는 본 발명의 범위에 속한다.As described above, the present invention is not limited to each of the above-described embodiments, and it is possible to be modified and implemented by those of ordinary skill in the art without departing from the scope claimed in the claims of the present invention. And, these modifications are within the scope of the present invention.

100: 시험 합격률 예측 시스템 10: 데이터베이스부
20: 플랜연산부 30: 출제관리부
100: test pass rate prediction system 10: database unit
20: Plan calculation department 30: Question management department

Claims (10)

기시행된 시험 및 모의시험의 각 평균점수데이터를 포함하는 과년도별 시험 채점데이터 및 과년도별 모의시험 채점데이터와, 당해연도 모의시험 채점데이터와, 과년도별 시험난이도 조정내역데이터가 데이터베이스부에 입력 및 저장되는 제1단계;
상기 데이터베이스부에 저장된 상기 과년도별 시험 채점데이터와, 과년도별 및 당해연도 모의시험 채점데이터와, 상기 과년도별 시험난이도 조정내역데이터가 플랜연산부로 추출 및 연산되어 과년도별 학습지수가 산출되는 제2단계;
상기 과년도별 학습지수 및 기저장된 과년도별 시험 응시자수데이터를 기반으로 상기 플랜연산부를 통해 당해연도 학습지수가 산출되는 제3단계; 및
상기 당해연도 학습지수와, 직전년도 시험 평균점수데이터와, 직전년도 모의시험 평균점수데이터와, 당해연도 모의시험 평균점수데이터와, 당해연도 시험난이도 조정내역데이터가 상기 플랜연산부를 통해 연산되어 예상 합격률 판단 및 시험 난이도 관리를 위한 당해연도 예상 평균점수데이터가 산출되는 제4단계를 포함하는 시험 합격률 예측 방법.
Test scoring data for each past year, including average score data for each of the previously conducted tests and mock tests, and mock exam scoring data for each past year, mock exam scoring data for the current year, and test difficulty adjustment history data for each past year are entered into the database. A first step of being stored;
A second step of extracting and calculating the test scoring data for each past year, the mock test scoring data for each past year and the current year, and the test difficulty adjustment details data for each past year, stored in the database unit, by a plan calculation unit to calculate a learning index for each past year;
A third step of calculating a learning index for the current year through the plan calculation unit based on the learning index for each past year and the previously stored data on the number of test takers for each past year; And
The study index for the current year, the average score data for the previous year, the average score data for the simulation test for the previous year, the average score data for the simulation test for the current year, and the adjustment history data for the current year test difficulty are calculated through the plan calculation unit and the expected pass rate. A test pass rate prediction method including a fourth step of calculating the predicted average score data for the year for judgment and test difficulty management.
제 1 항에 있어서,
상기 제4단계는,
1차로 산출된 당해연도 예상 평균점수데이터에 시험 난이도 관리를 위해 구비되는 출제관리부로부터 자동 추출된 당해연도 시험난이도 조정내역데이터가 대입 및 연산되어 최종 보정된 당해연도 예상 평균점수데이터가 산출되는 단계를 더 포함함을 특징으로 하는 시험 합격률 예측 방법.
The method of claim 1,
The fourth step,
The step of calculating the final corrected estimated average score data for the current year by substituting and calculating the test difficulty adjustment details data automatically extracted from the questionnaire management unit provided for test difficulty management to the first calculated average score data for the current year. Test pass rate prediction method, characterized in that it further includes.
제 2 항에 있어서,
상기 제4단계에서, 상기 당해연도 예상 평균점수데이터는
Figure pat00010

에 의해 산출되되, 여기서, An은 당해연도 과목별 수험자의 시험 예상 평균점수데이터, An-1은 n-1년도 과목별 수험자의 시험 평균점수데이터, Bn-1은 n-1년도 과목별 n년도 모의시험요원의 모의시험 평균점수데이터, Cn는 n년도 과목별 n년도 모의시험요원의 모의시험 평균점수데이터, Dn는 n년도 과목별 시험난이도 조정내역데이터, Sn은 과목별 당해연도 학습지수임을 특징으로 하는 시험 합격률 예측 방법.
The method of claim 2,
In the fourth step, the expected average score data for the current year is
Figure pat00010

Calculated by, where A n is the candidate's expected average score data for each subject in the current year, A n-1 is the test average score data of the examinee for each subject in n-1, B n-1 is the n-1 subject For each n-year mock test agent's average score data, C n is the n-year mock exam average score data for each n-year subject, D n is the test difficulty adjustment history data for each n-year subject, and S n is for each subject. A test pass rate prediction method characterized by the learning index for the current year.
제 2 항에 있어서,
상기 제4단계에서, 상기 당해연도 시험난이도 조정내역데이터는
Figure pat00011

Figure pat00012

Figure pat00013

중 어느 하나로 산출됨을 특징으로 하는 시험 합격률 예측 방법.
The method of claim 2,
In the fourth step, the test difficulty adjustment history data for the current year is
Figure pat00011

Figure pat00012

Figure pat00013

Test pass rate prediction method, characterized in that calculated by any one of.
제 1 항에 있어서,
상기 제3단계에서, 상기 당해연도 학습지수는
Figure pat00014

에 의해 산출되되, 여기서 Sn은 과목별 당해연도 학습지수, Et는 t년도 과년도별 시험 응시자수데이터, St는 t년도 과년도별 학습지수임을 특징으로 하는 시험 합격률 예측 방법.
The method of claim 1,
In the third step, the learning index for the current year is
Figure pat00014

It is calculated by, where S n is the study index for the current year for each subject, E t is the data on the number of test takers by the previous year in t, and S t is the learning index for each year in t.
제 1 항에 있어서,
상기 제2단계에서, 상기 과년도별 학습지수는
Figure pat00015

에 의해 산출되되, 여기서 St는 t년도 과년도별 학습지수, At는 t년도 과목별 수험자의 시험 평균점수데이터, At-1은 t-1년도 과목별 수험자의 시험 평균점수데이터, Bt -1은 t-1년도 과목별 t년도 모의시험요원의 모의시험 평균점수데이터, Ct는 t년도 과목별 t년도 모의시험요원의 모의시험 평균점수데이터, Dt는 t년도 과목별 과년도별 시험난이도 조정내역데이터임을 특징으로 하는 시험 합격률 예측 방법.
The method of claim 1,
In the second step, the learning index for each past year is
Figure pat00015

Calculated by, where S t is the study index for each year in t, A t is the test average score data for each subject in t year, A t-1 is the test average score data for each subject in t-1, B t -1 is the average score data of the mock test of the mock test personnel in the t year for each subject in the t-1 year, C t is the average score data for the mock test of the mock test personnel in the t year for each subject in the t year, and D t is the test by year for each subject in the t year. Test pass rate prediction method, characterized in that the difficulty adjustment history data.
제 1 항에 있어서,
상기 제1단계는,
과년도별 시험 응시자수데이터에 포함된 과년도별 시험의 접수자수 및 응시자수의 각 평균비를 통해 당해연도 예상응시율데이터가 산출되는 단계와,
상기 데이터베이스부에 시험의 과년도별 응시율데이터, 과년도별 선택과목 응시율데이터 및 당해연도 선택과목별 접수자수데이터가 각각 입력 및 저장되는 단계를 더 포함함을 특징으로 하는 시험 합격률 예측 방법.
The method of claim 1,
The first step,
The step of calculating the expected application rate data for the current year through the average ratio of the number of applicants and the number of test takers for the last year included in the data for the number of applicants for the previous year;
And the step of inputting and storing data on the test application rate for each previous year of the test, data on the application rate for selected subjects for each year, and data for the number of applicants for each selected subject for the current year, respectively, in the database unit.
기시행된 시험의 응시율데이터 및 평균점수데이터를 포함하는 과년도별 시험 채점데이터와, 기시행된 모의시험 평균점수데이터를 포함하는 과년도별 모의시험 채점데이터와, 당해연도 모의시험 채점데이터와, 과년도별 시험난이도 조정내역데이터가 입력 및 저장되는 데이터베이스부;
상기 데이터베이스부에 저장된 상기 과년도별 시험 채점데이터, 상기 과년도별 모의시험 채점데이터 및 상기 과년도별 시험난이도 조정내역데이터를 추출하여 과년도별 학습지수를 산출하며, 상기 과년도별 학습지수 및 기저장된 당해연도 시험 응시자수데이터를 기반으로 당해연도 학습지수를 산출하고, 상기 당해연도 학습지수, 직전년도 시험 평균점수데이터, 직전년도 모의시험 평균점수데이터, 당해연도 모의시험 평균점수데이터 및 당해연도 시험난이도 조정내역데이터를 연산하여 당해연도 예상 평균점수데이터를 산출하는 플랜연산부; 및
예상 합격률 보정을 통한 시험 난이도 관리를 위해 상기 당해연도 시험난이도 조정내역데이터를 자동 추출하는 출제관리부를 포함하는 시험 합격률 예측 시스템.
Test scoring data for each past year, including the application rate data and average score data of the previously administered exam, and mock test scoring data for each past year, including the average score data for the previously administered mock exam, and the scoring data for the mock exam for the current year, and each year. A database unit for inputting and storing test difficulty adjustment history data;
By extracting the test scoring data for each past year, the simulation test scoring data for each past year, and the test difficulty adjustment data for each past year stored in the database unit, the learning index for each past year is calculated, and the learning index for each past year and the pre-stored current year test Calculate the learning index for the current year based on the number of test takers data, and the learning index for the current year, the average score data for the previous year's test, the average score data for the simulation test for the previous year, the average score data for the simulation test for the current year, and the adjustment history data for the current year test A plan calculation unit that calculates the predicted average score data for the current year by calculating; And
A test pass rate prediction system comprising a questionnaire management unit that automatically extracts the data on the test difficulty adjustment details for the current year for test difficulty management through correction of the expected pass rate.
제 8 항에 있어서,
상기 출제관리부는 상기 당해연도 시험난이도 조정내역데이터를 자동 추출하여 상기 플랜연산부로 전송하되,
상기 플랜연산부는 1차로 산출된 상기 당해연도 예상 평균점수데이터에 상기 당해연도 시험난이도 조정내역데이터를 반영 및 연산하여 최종 보정된 당해연도 예상 평균점수데이터를 산출함을 특징으로 하는 시험 합격률 예측 시스템.
The method of claim 8,
The questionnaire management unit automatically extracts the test difficulty adjustment details data for the current year and transmits it to the plan calculation unit,
The plan calculation unit calculates the final corrected estimated average score data for the current year by reflecting and calculating the test difficulty adjustment details data for the current year to the estimated average score data for the current year, which was calculated first.
제 8 항에 있어서,
상기 플랜연산부는 과년도별 시험 응시자수데이터에 포함된 과년도별 시험의 접수자수 및 응시자수의 각 평균비를 통해 당해연도 예상응시율데이터를 산출하며,
상기 데이터베이스부에는 시험의 과년도별 응시율데이터, 과년도별 선택과목 응시율데이터 및 당해연도 선택과목 접수자수데이터가 각각 입력 및 저장됨을 특징으로 하는 시험 합격률 예측 시스템.
The method of claim 8,
The plan calculation unit calculates the expected application rate data for the current year through the average ratio of the number of applicants and the number of applicants for the previous year, which are included in the data on the number of candidates for the previous year.
The test pass rate prediction system, characterized in that, in the database unit, test pass rate data by past year, elective subject test rate data by past year, and elective subject number data for the current year are input and stored, respectively.
KR1020190036437A 2019-03-29 2019-03-29 method and system for predicting pass rate of making question KR102222026B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190036437A KR102222026B1 (en) 2019-03-29 2019-03-29 method and system for predicting pass rate of making question

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190036437A KR102222026B1 (en) 2019-03-29 2019-03-29 method and system for predicting pass rate of making question

Publications (2)

Publication Number Publication Date
KR20200114519A true KR20200114519A (en) 2020-10-07
KR102222026B1 KR102222026B1 (en) 2021-03-03

Family

ID=72883523

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190036437A KR102222026B1 (en) 2019-03-29 2019-03-29 method and system for predicting pass rate of making question

Country Status (1)

Country Link
KR (1) KR102222026B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116342083A (en) * 2023-05-30 2023-06-27 山东经纬信息集团有限公司 Talent supply and demand butt joint matching system and method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010103093A (en) * 2001-09-24 2001-11-23 남궁석 Automatic contorol method of the difficulty of problem-bank type on-line testing solution
KR20020023519A (en) 2000-09-22 2002-03-29 이예범 Testing and evaluation program of the problem bank type and keeping same testing difficulty to examinee in spite of different test problem for the internet
JP2002351304A (en) * 2001-05-29 2002-12-06 Fujitsu Ltd Program and device for deciding difficulty
KR20140110323A (en) * 2013-03-07 2014-09-17 메가스터디(주) Method for estimating the distribution and grade cut of exam results in real time
KR20140127483A (en) * 2013-04-25 2014-11-04 (주)이노소프트기술 System of a sham examination and study using application
KR101673448B1 (en) * 2016-06-13 2016-11-16 한국산업인력공단 method for adjustment difficulty level of making question

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020023519A (en) 2000-09-22 2002-03-29 이예범 Testing and evaluation program of the problem bank type and keeping same testing difficulty to examinee in spite of different test problem for the internet
JP2002351304A (en) * 2001-05-29 2002-12-06 Fujitsu Ltd Program and device for deciding difficulty
KR20010103093A (en) * 2001-09-24 2001-11-23 남궁석 Automatic contorol method of the difficulty of problem-bank type on-line testing solution
KR20140110323A (en) * 2013-03-07 2014-09-17 메가스터디(주) Method for estimating the distribution and grade cut of exam results in real time
KR20140127483A (en) * 2013-04-25 2014-11-04 (주)이노소프트기술 System of a sham examination and study using application
KR101673448B1 (en) * 2016-06-13 2016-11-16 한국산업인력공단 method for adjustment difficulty level of making question

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116342083A (en) * 2023-05-30 2023-06-27 山东经纬信息集团有限公司 Talent supply and demand butt joint matching system and method
CN116342083B (en) * 2023-05-30 2023-08-18 山东经纬信息集团有限公司 Talent supply and demand butt joint matching system and method

Also Published As

Publication number Publication date
KR102222026B1 (en) 2021-03-03

Similar Documents

Publication Publication Date Title
Schmidt et al. Measurement error in psychological research: Lessons from 26 research scenarios.
Boulet et al. Quality assurance methods for performance-based assessments
US20110165550A1 (en) Management system for online test assessment and method thereof
KR102222026B1 (en) method and system for predicting pass rate of making question
Wainer A primer
Gomaa et al. The effect of time pressure, task complexity and litigation risk on auditors’ reliance on decision aids
Dilbeck et al. Socio-communicative orientation, communication competence, and rhetorical sensitivity
Oranje et al. A multistage testing approach to group-score assessments
Kuo et al. Multidimensional computerized adaptive testing for Indonesia junior high school biology
Mead Assessment of fit of data to the Rasch model through analysis of residuals.
JP2019101161A (en) Test device, test method and test program
Zvoch et al. Measuring and evaluating school performance: An investigation of status and growth-based achievement indicators
Kalender et al. Can computerized adaptive testing work in students’ admission to higher education programs in Turkey?
Andreatta et al. Measuring Competency: Improving the validity of your procedural performance assessments
Çisar et al. Computer adaptive testing for student's knowledge in C++ exam
CN112862642A (en) College education quality evaluation method, device and medium
Marchant Assessing the validity of multiple-choice questions, using them to undertake comparative analysis on student cohort performance, and evaluating the methodologies used
Coniam et al. Awarding passes in the language proficiency assessment for teachers of English: Different methods, varying outcomes
Eboatu Comparative study of the impact of class repetition and mass promotion on students’ academic achievement in Anambra State
Hargis The Impact of IXL on Math and ELA Learning in a New Jersey School District
Chen et al. Beyond Subjectivity: Exploring Factors Impacting Course and Teaching Evaluation
Pozdneev et al. Reliability evaluation of knowledge e-testing based on statistical methods
Martinussen Measuring learning under uncertainty
Wichert A Monte Carlo Analysis of Standard Error-Based Methods for Computing Confidence Intervals
JP2002073913A (en) Method for rationally evaluating ability of technician

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant