KR20060041465A - On-line grading system by mobile camera phone - Google Patents

On-line grading system by mobile camera phone Download PDF

Info

Publication number
KR20060041465A
KR20060041465A KR1020040090682A KR20040090682A KR20060041465A KR 20060041465 A KR20060041465 A KR 20060041465A KR 1020040090682 A KR1020040090682 A KR 1020040090682A KR 20040090682 A KR20040090682 A KR 20040090682A KR 20060041465 A KR20060041465 A KR 20060041465A
Authority
KR
South Korea
Prior art keywords
scoring
answer
test
online
server
Prior art date
Application number
KR1020040090682A
Other languages
Korean (ko)
Inventor
김대희
Original Assignee
김대희
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김대희 filed Critical 김대희
Priority to KR1020040090682A priority Critical patent/KR20060041465A/en
Publication of KR20060041465A publication Critical patent/KR20060041465A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education

Abstract

본 발명은 수험자가 소지한 모바일 카메라폰의 디지털 카메라를 통하여 촬영한 시험지를 시험 답안별로 분류하여, 모바일 인터넷을 통하여 온라인 채점 서버에 전송하고, 이를 채점하여 그 결과에 따른 해당 데이터를 다시 모바일 인터넷을 통해 수험자의 모바일 카메라폰에 전송하는 시스템과 그 방법에 대한 것으로서, 이를 위해 본 발명은 휴대폰에서 시험지를 촬영하고 이를 문제 답안 영역별로 이미지를 나눈 후 전송하는 수험자의 모바일폰에서 온라인 채점 서버로의 전송과정, 전송 받은 이미지 정보를 문항 유형별로 분류하여 저장하는 온라인 채점 서버 부분에서의 처리 및 저장과정, 그리고 온라인 채점 서버에 저장된 각 답안 이미지 데이터를 업데이트 경우 영상 분석을 통해 자체적으로 채점하는 과정, 주관식의 경우 다수의 채점자가 서버에 접속하여 채점할 수 있게 해주는 채점 클라이언트에서의 채점과정, 그리고 온라인 채점 서버에서 채점된 결과를 분석한 후 결과에 따른 해당 데이터를 다시 수험자의 모바일폰에 전송하는 결과 전송 과정으로 나뉜다.

본 발명을 통해 수험자는, 언제 어디서든지 필기 시험 후 모바일 카메라폰을 이용하여 시험 응시가 가능하며, 시험 결과에 따른 오답노트나 시험 결과 분석 데이터를 모바일폰으로 확인할 수 있는 장점이 있으며, 다수의 채점자는 수험자에 대한 인적 정보의 확인 없이 다수의 시험답안지의 이미지만을 각 문항별로 반복하여 전문 채점함으로써, 기존의 필기시험에서 발생하였던 수험자의 시험지에 따른 부정이나 채점 오류를 방지할 수 있다는 장점이 있다. 또한 기존의 온라인 시험이나, OMR 카드를 통한 대규모 시험에서만 가능했던 전국 순위 파악, 또는 이전 성적과의 비교 등을 주관식 입력 가능한 일반 필기 답안 시험지를 통해 실시간으로 처리 가능하다는 장점도 가지고 있다. 또한 시험지의 답안 이미지 데이터는 온라인 채점 서버에 저장되므로 기존의 시험지의 원본 저장과 같은 공신력을 가지며, 이를 통해 시험지의 원본을 대조할 수 있다.

Figure 112004051717975-PAT00001

모바일 카메라폰, 온라인 채점 서버, 채점 클라이언트, 모바일 인터넷, 답안 촬영 보정 영역

The present invention classifies test papers taken through the digital camera of the mobile camera phone possessed by the examinee for each test answer, transmits them to the online scoring server through the mobile Internet, and scores the corresponding data according to the results. The present invention relates to a system for transmitting an examinee's mobile camera phone and a method thereof. To this end, the present invention takes a test paper from a mobile phone and divides the image for each question answer area and transmits the image to the online scoring server. Process, processing in the online scoring server part that classifies and stores the received image information by item type, and in case of updating each answer image data stored in the online scoring server through video analysis, self scoring If multiple scorers are on the server Access to the results divided into the transmission process of transmitting the data according to the scoring process, and results after analyzing the scoring results from an online server in scoring Scoring client that allows you to re-grade the mobile phone of the examinees.

Through the present invention, the examinee can take the test by using a mobile camera phone anytime, anywhere after the written test, there is an advantage that can be confirmed by the mobile phone with incorrect notes or test result analysis data according to the test results, a number of scorers By repeating the professional scoring of only a plurality of test answer images for each question without checking human information on the examinee, there is an advantage that it is possible to prevent fraud or scoring errors due to the test paper of the examinee that occurred in the existing written test. It also has the advantage that it can be processed in real time through the general written answer test paper which can be inputted in the form of a short answer by the existing online test, the national ranking which was only possible in the large-scale test through the OMR card, or the comparison with the previous score. In addition, since the answer image data of the test paper is stored in the online scoring server, it has the same credibility as the original test paper storage, so that the original test paper can be collated.

Figure 112004051717975-PAT00001

Mobile camera phone, online scoring server, scoring client, mobile internet, answer shooting correction area

Description

모바일 카메라폰을 이용한 온라인 채점 시스템 { On-line grading system by mobile camera phone } On-line grading system by mobile camera phone}

도 1. 모바일 카메라폰에서 시험지를 읽어들인 후, 서버에 전송하고, 이를 채점 클라이언트에서 채점하는 과정에 대한 개념도.1 is a conceptual diagram of a process of reading test papers from a mobile camera phone, transmitting them to a server, and scoring them in a scoring client.

도 2. 모바일 카메라폰에서 시험지를 읽어들인 후 서버에 전송, 채점 클라이언트에서 채점하는 과정에 대한 시스템 플로우차트.Figure 2 is a system flow chart for the process of reading the test paper from the mobile camera phone and sending it to the server, scoring in the scoring client.

도 3. 채점할 시험지의 원본과 답안기재의 예.3. An example of the original and answer sheet of the paper to be scored.

도 4. 모바일 카메라폰의 촬영 화면과, 답안 촬영 방법의 실시 예.4. The embodiment of the shooting screen and the answer shooting method of the mobile camera phone.

도 5. 온라인 채점 서버에서 분류되어 저장되는 답안 데이터의 예.5. An example of answer data that is classified and stored at an online scoring server.

기존의 전산처리 시스템을 활용한 시험지 채점 방법에는 OMR 카드를 이용한 채점 방식과 인터넷 접속을 통한 온라인 테스트가 있다. 그리고 채점자가 직접 답안을 채점 수동으로 전산 입력하는 기존의 수동 채점 방식이 있다. Test site scoring methods using existing computer processing systems include scoring methods using OMR cards and online tests through internet access. In addition, there is a conventional manual scoring method in which a grader manually inputs and scores an answer.

기존의 OMR카드를 이용한 채점 방식은 전문 판독기를 통해 객관식 문제를 빠 르게 채점할 수 있으나, 문제지에 직접 답을 기재하지 않고 별도의 OMR 카드에 답안을 작성해야 하며, 답안지를 별도의 판독기가 있는 곳으로 운반 전산 처리해야 하므로 최종적으로 수험자가 시험 결과를 확인하기까지 많은 시간을 필요로 한다. 또한 주관식 답안의 경우 직접 채점이 불가능하므로, OMR카드에 별도의 주관식 답안 난을 마련, 그곳에 주관식 답안을 쓰고, 채점자가 육안으로 판독하여 채점한 후 전산처리 가능하도록 객관식 답안에 기재하는 방식을 사용해왔다. 이로 인해 OMR 카드를 이용한 시험 방식은 수험자가 문제지 외에 별도의 답안지를 작성해야 하는 부담, 그리고 채점을 위한 답안지 운반 등 시간적 제한이 존재하며, 이 때문에 수능시험이나 토익 시험등 대규모의 시험에만 사용되어져 왔다. The existing OMR card scoring system can quickly score multiple-choice questions through a professional reader, but the answer must be written on a separate OMR card without writing the answer directly on the questionnaire. Because of the need for computerized processing, the test takes a lot of time before the examinee finally confirms the test results. In addition, in the case of the short answer, it is impossible to directly score the answer. Therefore, a separate short answer question is prepared on the OMR card, and the short answer is written there. . Because of this, the test method using the OMR card has a time limit such as the examinee's burden of writing a separate answer sheet in addition to the questionnaire, and the transport of the answer sheet for grading. Therefore, it has been used only for large-scale tests such as the SAT test and the TOEIC test. .

이에 비하여 온라인 테스트 방법은 인터넷을 통하여 화면상에 직접 수험자가 체크하여 시험을 치르는 것으로, OMR 카드와 같이 빠른 객관식 전산처리와 키보드를 이용한 텍스트 입력을 통한 주관식 답안 작성과 인터넷을 통한 빠른 채점, 그리고 실시간으로 시험 결과를 보여줄 수 있다는 장점을 가지고있다. 그러나 수험자가 컴퓨터 앞에 앉아 시험을 치러야 하는 공간적 제한이 있으며, 온라인 전산처리를 위하여 객관식 답안 위주로 문제가 출제되고 주관식 답안의 경우 타이핑 가능한 문자로 답안 작성이 가능하도록 하기 때문에, 수학이나 과학 등 공식과 풀이 과정이 중요한 문제나 그림과 같은 답안을 채점하기에는 한계가 있다. 또한 인터넷으로 접속한 수험자의 본인 여부를 직접적으로 확인할 수 없어, 부정행위를 방지 할 수 없다는 단점이 있다.On the other hand, the online test method is to take a test by checking the examinee directly on the screen through the Internet, and to write a short answer through the fast multiple choice computer processing such as an OMR card and text input using a keyboard, and to quickly score through the Internet, and to perform a test. It has the advantage of being able to show the test results. However, there is a spatial limitation that the examinee must sit in front of the computer to take the test, and since the questions are focused on multiple-choice answers for the online computer processing, and the answers to the short-answer questions can be written in typeable letters, mathematical and scientific formulas and solutions The process is limited in scoring important questions or answers such as pictures. In addition, there is a disadvantage in that it is impossible to directly check whether or not the examinee is connected to the Internet and thus prevent cheating.

채점자가 시험지 원본을 직접 채점한 후 그 결과를 전산 입력하는 방식의 경 우 복잡한 도식을 사용하는 답안도 직접 육안으로 확인하여 채점할 수 있다는 장점이 있으나, 수험자로부터 채점할 답안지를 직접 수령하고 이를 수동 채점한 후 직접 결과를 전산 입력하기 때문에, 상대적으로 많은 시간이 소모되고 수동 채점과 전산 입력에 따른 실수가 발생할 수 있다. 또한, 답안지에 기재된 이름이나 표시등을 통하여 수험자를 확인할 수 있어 채점자가 특정 수험자의 답안에 좋은 점수를 주거나, 시험지의 답안을 변경하는 부정행위의 위험을 안고 있다.In the case of a grader who directly scores the original test paper and inputs the result, it is advantageous to check and score the answer using the complex diagram directly by the naked eye. Since the results are computed and directly inputted, scoring is relatively time consuming and mistakes may occur due to manual scoring and computational input. In addition, the examinee can be identified through the name or indicator on the answer sheet, so the grader risks cheating by giving a good score to the specific examinee's answer or changing the answer sheet.

본 발명은 이와 같은 종래 채점 방식들의 문제점을 해결하기 위한 것으로, 모바일폰을 통해 시험지 답안부분을 전송하고 이를 서버에 저장한 후, 객관식 답안의 경우 자동 채점을, 주관식 답안의 경우 채점 클라이언트를 통하여 채점자가 실시간으로 채점하는 시험지 채점 및 전산 처리 방법을 제공하고자 한다. The present invention is to solve the problems of the conventional scoring method, after sending the test part answer section through the mobile phone and storing it in the server, the objective scorer through the automatic scoring, the scorer through the scoring client To provide a method for grading test papers and computing in real time.

본 발명의 다른 목적은, 수험자의 시험지를 모바일 카메라폰과 온라인 채점 서버를 이용하여 채점하고 그 결과에 대응하여 오답노트와 같은 데이터를 다시 수험자의 모바일폰에 전송함으로써, 수험자가 실시간으로 언제 어디서든지 자신이 수험 결과를 확인할 수 있으며, 그에 따라 오답 노트나 단어장 등의 교육 컨텐츠를 활용할 수 있는 방법을 제공하는데 있다.Another object of the present invention is to examine the test taker's test paper using a mobile camera phone and an online scoring server, and in response to the results, the examinee sends the data such as incorrect notes back to the examinee's mobile phone anytime, anywhere. You can check the results of the test, and accordingly provide a way to use the educational content, such as incorrect notes and vocabulary.

상기와 같은 본 발명의 목적을 달성하기 위하여, 본 발명은 모바일 카메라폰을 통해 시험지를 촬영하고 온라인 채점 서버에 전송하는 과정에 있어, 답안 촬영용 영상을 통해 시험지를 촬영하는 단계와, 답안별로 촬영된 이미지를 분류하여 답 안 데이터를 작성하고 채점 서버를 호출한 후 답안 데이터를 무선 인터넷을 통하여 전송하는 과정, 온라인 채점 서버에서 답안 데이터를 분류하여 저장한 후 자동으로 채점하거나 채점 클라이언트를 호출하는 과정에 있어서, 답안 데이터의 객관식 여부를 판별하여 객관식의 경우 영상인식 방법을 통해 채점하고 주관식의 경우 채점 클라이언트를 호출하는 단계, 채점 클라이언트에서 호출 신호를 수신하고 채점하는 과정에 있어서, 온라인 채점 서버의 답안 DB로부터 자료를 다운로드하고 이를 화면에 출력한 후 그 결과를 입력하고 이를 온라인 채점 서버로 전송하는 단계, 다시 온라인 채점 서버에서 채점 결과를 전산처리하고 그 결과를 수험자의 모바일 카메라폰에 전송하는 과정에 있어서, 채점결과 DB로부터 채점결과를 전산처리하고 조합한 후 채점 결과 컨텐츠DB를 통해 채점 결과 및 컨텐츠 데이터를 조합하고 수험자의 모바일 카메라폰을 호출한 후 전송하는 단계를 포함한다.
In order to achieve the object of the present invention as described above, the present invention in the process of photographing the test paper through the mobile camera phone and transmitting to the online scoring server, the step of photographing the test paper through the answer-taking video, and taken by answer In the process of writing the answer data by classifying the image, calling the grading server, and transmitting the answer data through the wireless Internet, classifying and storing the answer data in the online grading server, and then automatically scoring or calling the grading client. To determine whether the answer data is multiple choice, scoring in the multiple-choice method through the image recognition method, and in the case of the subjective method to call the scoring client, in the process of receiving and scoring the call signal from the scoring client, the answer DB of the online scoring server Download the data from the In the step of inputting the result and transmitting it to the online scoring server, in the process of computerizing the scoring result in the online scoring server and transmitting the result to the examinee's mobile camera phone, the scoring result is computed from the scoring result DB. And combining the scoring result and the content data through the scoring result content DB and calling and calling the examinee's mobile camera phone.

본 발명의 실시 예는 다수개가 존재할 수 있으며, 이하에서 첨부한 도면을 참조하여 바람직한 예에 대하여 상세히 설명하기로 한다. Exemplary embodiments of the present invention may exist, and a preferred example will be described in detail below with reference to the accompanying drawings.

먼저 본 발명은, 시스템 개념을 나타내는 도 1에서처럼 시험 답안지(도1-110)를 모바일 카메라폰(도1-100)으로 촬영한 후 분류하여 이를 온라인 채점 서버(도1-200)로 전송하고 이를 채점 클라이언트(도1-300)에서 채점하여 채점 서버를 경유하여 모바일 카메라폰으로 다시 전송하는 일련의 과정과 그 시스템에 대한 것이다. First, the present invention, after taking the test answer sheet (Fig. 1-10) with a mobile camera phone (Fig. 1-100) as shown in Fig. 1 showing the system concept and classify it and send it to the online scoring server (Fig. 1-200) It is about a series of processes and the system for scoring in the scoring client (FIGS. 1-300) and transmitting back to the mobile camera phone via the scoring server.

이를 여러 단계로 구분한 한 플로우차트인 도 2에서처럼, 본 시스템은 수험자의 모바일 카메라폰(도2-100), 시험 답안 데이터를 입력받고, 전산 처리 후 , 채점 결과 및 데이터를 전송하기 위한 온라인 채점 서버(도2-200), 각 문항별 전문 채점자의 채점 클라이언트(도2-300)로 시스템이 구분되어 있으며, 이를 통한 일련의 과정을 기술하면 다음과 같다.  As shown in Fig. 2, which is a flowchart that divides this into several steps, the system receives an examinee's mobile camera phone (Fig. 2-100) and test answer data, and after computerized processing, online scoring for sending the scoring results and data. The system is divided into a server (FIG. 2-200) and a scoring client (FIG. 2-300) of a professional grader for each item, and a series of processes through this is described as follows.

도 2에서와 같이 먼저 수험자는 자신의 모바일 카메라폰(도2-100)에 채점하고자 하는 시험 답안지의 페이지 고유번호를 입력하게 된다(도2-101). 이때 수험자가 촬영할 시험 답안지는 도 3에서 보는 것처럼 시험지 답안 원본(도3-101)에 답안을 자유롭게 기입하여 작성한 시험 답안지로서(도3-102) 기존의 시험지와 답안 기입 형식이 동일하다. 도 2에서 고유번호가 입력되면 단계 도2-102에서처럼 모바일 카메라폰에 미리 설치된 촬영 프로그램에 의해, 모바일 카메라폰의 촬영 화면상에서 촬영해야 할 답안의 답안 촬영 보정 영역이 표시되게 된다. 답안 촬영 보정 영역이란 답안지에 수험자가 기재한 답안 부분만을 정확히 촬영하기 위해 모바일 카메라폰의 카메라 촬영 화면에 나타나는 영역 표시로서, 도 4의 도4-101, 도4-102, 도4-103은 이를 설명하기 위한 것이다. 도4-101은 일반적인 카메라 촬영 화면에 일반 촬영대상이 표시되는 상태를, 도4-102는 영상이 나타나지 않고 아무 것도 표시되지 않은 촬영 화면을, 도4-103은 시험 답안지를 채점하기 위해 답안 촬영 보정 영역이 화면에 표시된 촬영 화면의 예이며, 도 4-103의 영역 a와 b는 각각 촬영 시 답안이 들어갈 공간의 촬영 보정 영역이다. 이후 도 2에서 단계 도2-103에서 수험자는 작성된 시험 답안을 도 4의 도4-104에서처럼 촬영 보정 영역 a, b에 맞추어 촬영하게 된다. 이후, 촬영된 시험 답안지의 이미지는 도4-105에서 보는 바와 같이, 내장된 프로그램에 의해 자동적으로 촬영 보정 영역내의 이미지만 편집된 후 따로 분리되어 저장된다. 이처럼 촬영 보정 영역을 통해 단계 도2-101에서 도2-104의 과정을 수행함으로써, 초점이 어긋나거나 답안지가 기울어져 있어 식별하기 힘든, 잘못된 시험답안지 촬영을 방지할 수 있으며, 이후 채점 과정에서 시험답안지의 기울기를 보정하는 과정을 생략할 수 있게 된다. 또한 시험답안지의 답안 기재 부분만을 분리하여 저장함으로써 모바일 카메라폰의 저장공간을 절약할 수 있을뿐만 아니라, 이후의 답안 전송 과정에서 부분 이미지 전송 방식을 이용하여 전체 이미지 전송 방식보다 전송 데이터의 크기를 줄여 전송시간 및 전송 용량에 따른 비용을 절감할 수 있다. 이후 단계 도2-105에서처럼, 수험자의 모바일 카메라폰에 내장된 시험지 답안 촬영 프로그램은 추가적으로 촬영할 시험답안지의 존재 유무를 묻고, 이후 추가 촬영할 시험 답안지가 존재하지 않을 때까지 단계 도2-101에서 도2-105까지의 과정을 반복하게 된다. 시험 답안 촬영이 모두 끝난 후, 단계 도2-106에서는 이전 과정에서 분리 추출된 답안 이미지 도4-105의 a와 b에 각각 답안에 대한 문제 번호 및 유형 인식 번호를 부여하고 시험답안지 정보를 결합하여 데이터를 작성한 후, 이를 모바일 카메라폰에 저장된 수험자의 고유 정보와 통합시킨 답안 데이터를 작성한다. 답안 데이터가 작성된 후 도2의 단계 도2-107에서 무선 인터넷을 통하여 온라인 채점 서버(도2-200)를 호출하고 답안 데이터를 온라인 채점 서버에 전송하게 된다. 여기서 단계 도2-107에서 나오는 점선은 답안 데이터가 모바일 인터넷을 통하여 온라인 채점 서버에 전달되는 흐름을 표시한 것이다.  As shown in FIG. 2, the examinee first inputs a page unique number of a test answer sheet to be scored on his mobile camera phone (FIGS. 2-100). At this time, the test answer sheet to be photographed by the examinee is a test answer sheet prepared by freely filling in the original answer sheet (FIG. 3-101) as shown in FIG. 3 (FIG. 3-102). When the unique number is input in FIG. 2, the answer photographing correction area of the answer to be photographed on the photographing screen of the mobile camera phone is displayed by the photographing program pre-installed in the mobile camera phone as shown in FIG. 2-102. The answer photographing correction area is an area mark that appears on the camera photographing screen of the mobile camera phone in order to accurately photograph only the answer portion described by the examinee on the answer sheet, and FIGS. 4 to 101, 4 to 102, and 4 to 103 of FIG. To illustrate. Fig. 4-101 shows a state in which a general shooting target is displayed on a general camera shooting screen; Fig. 4-102 shows a shooting screen in which no image is displayed and nothing is shown; Fig. 4-103 shows an answer shot for scoring a test answer sheet. An example of a photographing screen in which a correction area is displayed on the screen, and areas a and b in FIGS. 4-103 are photographing correction areas of a space where an answer is to be taken when photographing. 2, the examinee photographs the prepared test answer in accordance with the photographing correction areas a and b as shown in FIG. 4-104 of FIG. 4. Then, as shown in Figure 4-105, the photographed test answer sheet automatically edits only the image in the photographing correction area by the built-in program and is separately stored. By performing the process of Fig. 2-104 through Fig. 2-101 through the photographing correction area as described above, it is possible to prevent the wrong answer sheet photographing, which is difficult to identify due to the out of focus or the answer sheet being tilted, and then the test in the scoring process. The process of correcting the tilt of the answer sheet can be omitted. In addition, by saving only the answer section of the test answer sheet, it not only saves the storage space of the mobile camera phone, but also reduces the size of the transmission data compared to the entire image transmission method by using the partial image transmission method in the subsequent answer transmission process. The cost of transmission time and transmission capacity can be reduced. Subsequently, as shown in FIG. 2-105, the test answer sheet photographing program embedded in the examinee's mobile camera phone asks whether the test answer sheet to be additionally photographed exists, and then there is no test answer sheet to be photographed further. Repeat the process up to -105. After all of the test answer photographing is completed, in step 2-106, a and b of the answer image of FIG. 4-105 extracted in the previous step are assigned a question number and a type recognition number for the answer respectively, and the test answer sheet information is combined. After the data is created, answer data is created by integrating it with the candidate's unique information stored in the mobile camera phone. After the answer data is created, the online scoring server (Fig. 2-200) is called through the wireless Internet in step 2-107 of FIG. 2 and the answer data is transmitted to the online scoring server. Here, the dotted line in FIG. 2-107 indicates the flow of answer data through the mobile Internet to the online scoring server.

이후 단계 도2-201에서처럼 온라인 채점 서버는 수험자의 모바일 카메라폰으로부터 호출 신호를 수신하고 답안 데이터를 전송 받는다. 전송된 답안 데이터는 단계 도2-202에서 수험자의 고유 정보와 문제유형별로 고유 식별 코드가 부여된다. 이후 고유 식별 코드가 부여된 답안 데이터를 단계 도2-203에서 고유 식별 코드에 따라 분류하여 도2의 답안 DB에(도2-a) 저장하게 된다. 이때 답안 DB(a)에 저장되는 데이터는 답안 이미지 외에도, 답안 이미지의 객관식 및 주관식 여부를 판별하고, 어느 수험자의 답안인지, 어느 시험지의 몇 번 문제인지를 확인할 수 있는 고유 식별 번호와 수험자 정보 등이 있다. 도 5의 도5-101은 객관식으로 분류된 답안 이미지들의 예를, 도 5의 도5-102는 주관식으로 분류된 답안 이미지들의 저장 예를 도식화 한 것이다. 이때, 도 5의 도5-101의 a와 도5-102의 b는 이전 단계에서 전송 받은 수험자의 답안 이미지로서 다른 수험자의 답안 이미지와 함께 분류되어 저장되는 예를 보여주기 위한 것이다. 이후 도2의 도2-204의 단계에서 저장된 답안은, 답안 유형이 객관식인지 주관식인지 여부에 따라 그 처리과정이 나뉘게 된다. 이후 채점 과정에서 채점할 답안이 객관식인 경우 단계 2-205에서처럼 온라인 채점 서버 자체에서 자동 채점하게 된다. 이때, 객관식 답안 이미지는 4지선다 혹은 5지선다로서, 인식해야 할 숫자 이미지가 4개에서 5개로 제한되어 종래의 OCR 판독에 의한 필기 이미지 인식이 비교적 용이하므로, 신속한 자동 채점이 가능하다. 만약 채점 할 답안이 주관식일 경우, 단계 도2-206에서 온라인 채점 서버는, 일정 기준을 만족하였을 때 인터넷을 통하여 채점 클라이언트(도2-300)를 호출하고 다른 수험자의 동일한 문항에 대한 답안 자료를 포함하여, 답안 DB(도2-a)에 저장된 주관 식 답안의 정보를 전송하게 된다. 이때 일정기준이란 것은 일정 시간이 지났을 때, 혹은 일정 수의 답안 데이터가 축적될 때와 같이 채점 클라이언트에서 한꺼번에 일정수의 답안을 정기적으로 효율적으로 처리하기 위한 기준을 의미한다. Subsequently, the online scoring server receives a call signal from the examinee's mobile camera phone and transmits answer data as shown in FIG. The transmitted answer data is assigned a unique identification code for each examinee's unique information and problem type in step 2-202. Thereafter, the answer data assigned with the unique identification code is classified according to the unique identification code in FIG. 2-203 and stored in the answer DB of FIG. 2 (FIG. 2-a). At this time, the data stored in the answer DB (a) is a unique identification number and examinee information, such as to determine whether the answer image multiple choice and subjective, in addition to the answer image, and to determine which examinee's answer, which test questions how many times There is this. 5-101 of FIG. 5 illustrates an example of answer images classified as multiple choices, and FIG. 5-102 of FIG. 5 illustrates an example of storage of answer images classified as subjective answers. 5A and 5B-102 of FIG. 5 are examples of answer images of the examinees received in the previous step, which are classified and stored together with the answer images of other examinees. Thereafter, the answer stored in the step of FIG. 2-204 of FIG. 2 is divided according to whether the answer type is a multiple choice or a short answer. If the answer to be graded in the scoring process is a multiple choice, the online scoring server itself is automatically scored as in step 2-205. In this case, the multiple-choice answer image is four-choice or five-choice, and the number of images to be recognized is limited to four to five, so that it is relatively easy to recognize a handwritten image by conventional OCR reading, thereby enabling rapid automatic scoring. If the answer to be scored is a short answer, the online scoring server in step 2-206 calls the grading client (FIG. 2-300) over the Internet when the certain criteria are satisfied and answers data for the same question of other examinees. Including, the answer information stored in the answer DB (Fig. 2-a) will be transmitted. In this case, the schedule criteria refers to a standard for efficiently processing a certain number of answers at a time by the scoring client, such as when a certain time has passed or when a certain number of answer data is accumulated.

이후 채점 클라이언트는 단계 도2-301에서처럼 호출 신호를 수신하고 단계 도2-302에서 온라인 채점 서버로부터 채점할 답안 이미지들을 다운로드 받게 된다. 이때 도 5의 도5-102의 형태로 전송된 주관식 답안 이미지들은 단계 도2-303에서 채점 클라이언트의 화면에 표시되고, 채점 클라이언트의 채점 요원은 화면상에 표시된 복수의 주관식 답안을, 육안으로 채점하여 단계 도2-304에서처럼 결과를 입력하게 된다. 이때, 채점 요원은 다수의 주관식 답안의 이미지만을 확인 할 수 있고 답안 작성자 즉 수험자의 신상 정보를 확인할 수 없기 때문에 답안 채점에 있어서의 공정성을 확보할 수 있으며, 채점 요원은 일정 수의 같은 주관식 답안을 화면에 한꺼번에 표시하여 전문적으로 채점하기 때문에 시험 답안지를 직접 손으로 채점하는 수동 채점 방식에 비교하여 보다 능률적이고 신속한 채점을 수행할 수 있다. 이후 단계 도2-305에서처럼 추가적으로 채점할 답안 이미지들이 존재하는지 여부를 물은 후 추가 답안이미지들이 존재하지 않을 때까지 단계 도2-302에서 도2-305의 과정을 반복하게 된다. 일련의 과정을 통해 저장된 채점 결과는 단계 도2-306에서 채점 결과 데이터로 편집 및 작성되고, 단계 도2-307에서처럼 인터넷을 통하여 온라인 채점 서버를 호출하고 채점 결과 데이터를 전송한다. 이때 채점 데이터에 포함되는 내용은 답안에 대한 고유 식별번호와 그 번호에 해당하는 점수 이외에도 채점 사유 및 의견 등도 첨부될 수 있다. 이후 온라인 채점 서버는 단계 도2-207에서 처럼 호출 신호를 수신하고, 주관식 채점 결과 데이터를 다운로드 받게 된다. The scoring client then receives the call signal as in step 2-301 and downloads answer images to be scored from the online scoring server in step 2-302. At this time, the subjective answer images transmitted in the form of Fig. 5-102 of Fig. 5 are displayed on the screen of the scoring client in step 2-303, and the scoring agent of the scoring client visually marks the plurality of subjective answers displayed on the screen. The result is then entered as shown in Fig. 2-304. At this time, the scoring agent can check only the images of the multiple-choice answers, and because the identification information of the answer maker, that is, the examinee, cannot be confirmed, the scoring agent can secure fairness in the scoring of the answers. Because professional marking is done on the screen at the same time, scoring can be performed more efficiently and quickly than manual scoring, which is a manual scoring method. Thereafter, as shown in FIG. 2-305, the process of FIG. 2-305 is repeated in FIG. 2-302 until there are no additional answer images. The scoring results stored through the series of processes are edited and written into the scoring result data in step 2-306, and the online scoring server is called through the internet and the scoring result data is transmitted through the internet as in step 2-307. In this case, the content included in the scoring data may be attached with the reason for the scoring and the opinion in addition to the unique identification number for the answer and the score corresponding to the number. The online scoring server then receives the call signal and downloads the subjective scoring result data as in step 2-207.

이와 같이 객관식 채점을 위한 단계 도2-205와 주관식 채점을 위한 단계 도2-206에서 단계 도2-207까지의 분리된 채점 과정은 답안 유형에 따른 채점 효율을 높이기 위한 것으로, 객관식 답안의 경우라도 보다 높은 정확도를 요하게 되면, 단계 채점 클라이언트를 이용한 육안 채점도 할 수 있다. As such, the separate scoring process of the step 2-205 for the multiple-choice scoring and the step 2-206 to the step 2-207 for the multiple-choice scoring is to enhance the scoring efficiency according to the answer type, even in the case of the multiple choice answer. If higher accuracy is required, visual scoring can also be performed using a step scoring client.

이후, 채점된 주관식 및 객관식 답안의 결과는 고유 식별 번호에 따라 수험자 별로 수렴되어 단계 도2-208에서 채점 결과 DB(도2-b)에 저장되게 된다. 다음으로, 도2-209의 단계에서 정답 여부에 따른 전산처리 및 점수 환산을 위해 채점 결과는 환산을 위한 참고 데이터가 저장되어 있는 도2의 전산처리 DB(도2-c)의 내용에 따라 전산처리 된다. 이 단계에서 전산처리 DB(도 2-c)는 채점 결과에 따라 각 문항별 배점 점수와 이에 해당하는 부속 데이터, 점수 비교를 위한 이전 수험자의 점수 등을 포함한다. 이후 전산 처리된 결과 데이터는 결과에 따라 단계 도2-210에서 석차, 문제 성향, 난이도 분석, 및 통계 결과 등을 갱신해 주는 전산처리 결과 DB(도2-d)에 저장된다. 이를 통해 시험 출제자 및 시험 수행 기관은 수험자별 성적 향상 여부, 전체 순위, 문제의 난이도 등의 분석 데이터를 획득할 수 있게 된다. 전산처리결과 DB(도2-d)에 저장단계 이후, 단계 도2-211에서 전산처리 결과에 따라 도2의 컨텐츠 DB(도2-e)로부터 해당 컨텐츠와 접목시킨 후, 모바일 카메라폰을 호출하고 채점 결과 및 컨텐츠 데이터를 모바일 인터넷을 통하여 전송하게 된다. 이때 컨텐츠 데이터라 함은 채점 결과에 따른 오답 노트나 단어장, 문제 설명, 전국 순위, 수험자의 성적 분석과 같이 수험자의 수험 결과에 따라 제공될 수 있는 음 성, 이미지, 영상 등 멀티미디어 컨텐츠 데이터를 의미한다. 이후 수험자의 모바일 카메라폰은 단계 도2-108에서 호출 신호를 수신 후 채점 결과 및 컨텐츠 데이터를 다운로드 하여 카메라폰에 저장하게 된다. 이후 도2-109의 단계에서 수험자가 모바일 카메라폰의 디스플레이를 통해 채점 결과를 확인하고 컨텐츠를 활용할 수 있게 된다. Then, the results of the scored short answer and multiple choice answers are converged for each examinee according to the unique identification number and stored in the scoring result DB (Fig. 2-b) in step 2-208. Next, the scoring result is computed according to the contents of the computational processing DB (FIG. 2-c) of FIG. Is processed. In this step, the computational processing DB (FIG. 2-c) includes a scoring score for each item, corresponding data, and scores of previous examinees for comparing scores according to the scoring result. After that, the computerized result data is stored in the computerized result DB (Fig. 2-d), which updates the ranking, problem propensity, difficulty analysis, and statistical results in step 2-210 according to the result. This allows test takers and test institutes to obtain analytical data such as test scores, overall rankings, and difficulty levels. After the storing step in the computation result DB (Fig. 2-d), the mobile camera phone is called after grafting with the corresponding content from the content DB (Fig. 2-e) of Fig. 2 according to the computation result in step 2-211. The scoring results and the content data are transmitted through the mobile internet. In this case, the content data refers to multimedia content data such as voice, image, and video that can be provided according to the examinee's test result, such as an incorrect answer note, a wordbook, a problem description, a national ranking, and the examinee's grade analysis. . The examinee's mobile camera phone then receives the call signal in step 2-108 and downloads the scoring results and content data to store in the camera phone. Subsequently, in the step of FIG. 2-109, the examinee can check the scoring result and use the contents through the display of the mobile camera phone.

이상 설명한 바와 같이, 본 시스템을 통하여 수험자는 언제 어디서든지 필기 시험 후 모바일 카메라폰을 이용한 원격 시험 응시가 가능하며, 채점된 결과는 수험자의 모바일 카메라폰으로 전송되어 수험자가 실시간으로 확인할 수 있을 뿐 아니라 결과에 따라 오답노트, 단어장, 진도 그래프, 동영상 설명과 같은 멀티미디어 데이터를 모바일 컨텐츠의 형태로 수험자의 카메라폰에 함께 전송함으로써 모바일 교육 컨텐츠로 활용할 수 있는 효과가 있다. As described above, the examinee can take a remote test using the mobile camera phone anytime, anywhere after the written test, and the scored results are sent to the examinee's mobile camera phone so that the examinee can check in real time. According to the result, multimedia data such as incorrect notes, vocabulary, progress graph, and video description can be transmitted to the examinee's camera phone together in the form of mobile content.

또한 전송된 수험자의 답안 데이터는 온라인 채점 서버에 저장되므로, 시험 결과에 대한 문제가 제기될 경우 검색을 통해 수험자의 답안데이터를 검색할 수 있으므로, 시험 답안지 원본과 같은 공신력을 가지게 된다. In addition, since the test taker's answer data is stored in the online scoring server, when the question about the test result is raised, the test taker's answer data can be searched by the search, and thus has the same credibility as the original test answer sheet.

채점 방식에 있어서 4지선다, 5지선다 등의 문자인식이 비교적 간단한 객관식 답안은 채점 서버에서 이미지 판별을 통해 신속하게 자동 채점을 수행하며, 주관식 답안의 경우, 채점자가 채점 클라이언트를 통해 온라인 채점 서버와 접속, 원격으로 채점할 수 있다. 채점 클라이언트에서 채점자는 시험답안지의 답안 이미지 만을 반복하여 전문적으로 채점하기 때문에 시험 답안지 단위로 수동 채점하는 것에 비하여 신속한 속도로 다량의 시험답안을 채점할 수 있으며, 답안 외의 수험자 정보가 제공되지 않아 시험 답안지를 통한 특정 수험자 여부를 확인할 수 없으므로, 기존의 주관식 필기시험에서 발생할 수 있었던 수험자의 답안지 확인에 의한 부정 채점 행위나, 채점 오류를 방지할 수 있다는 장점이 있다. In the grading method, the multiple choice answer with simple character recognition such as four-choice and five-choice choices performs automatic scoring quickly through image discrimination on the grading server.In the case of the short answer, the grader connects to the online grading server through the grading client. Can be scored remotely. In the grading client, the scorer can professionally score only the answer image of the test answer sheet, so that a large amount of test answers can be scored at a faster speed than manual scoring by the test answer sheet, and no test taker information is provided other than the test answer sheet. Since it is not possible to check whether a specific examinee through the test, there is an advantage that can prevent the grading behavior or scoring errors by checking the answer sheet of the examinee who could have occurred in the conventional written test.

이와 같이 상기의 시스템은 모바일 카메라폰을 이용한 온라인 채점 시스템을 이용하여 신속하고 신뢰성 있는 주관식과 객관식의 채점과정을 수행하므로, 수험자는 OMR카드나 특별한 시험 답안 기재 형식 없이도, 모바일 카메라폰을 이용해 자유로이 실시간으로 수험 결과를 확인 할 수 있으며, 대규모 온라인 시험이나 OMR카드를 이용한 모의 고사 등에서만 처리될 수 있었던 이전 성적 비교, 전국 순위 비교, 문제 난이도 분석 등이 실시간으로 전산 처리 될 수 있다는 장점을 가지고 있다. As described above, the above system performs a fast and reliable subjective and multiple choice scoring process using an online scoring system using a mobile camera phone. Therefore, the examinee can freely use a mobile camera phone without using an OMR card or a special test answer form. The results of the examination can be checked, and the previous grade comparison, national ranking comparison, problem difficulty analysis, etc., which could only be processed in a large-scale online exam or mock test using an OMR card, can be processed in real time.

Claims (3)

상기 온라인 채점 서버와, 모바일 카메라폰에 내장되어 시험지를 촬영하고 모바일 인터넷을 통하여 무선전송하기 위한 시험지 촬영 프로그램과, 상기 온라인 채점서버와 인터넷을 통하여 연결되어 촬영된 시험지 영상을 판독하여 채점할 수 있는 채점 클라이언트가 구비된 모바일 채점 시스템에서 시험지답안지를 채점 대상으로 하여 수험자의 모바일 카메라폰으로 촬영하고 이를 온라인 채점하여 전산처리하고 그 결과를 확인하는 온라인 채점 방법에 있어서. 상기 시험지의 답안을 촬영하여 이를 시험지 정보와 함께 온라인 채점 서버에 전송하는 단계와 온라인 채점 서버에서 이를 문항별로 구분하여 다른 수험자의 답안과 함께 데이터베이스 형태로 저장하고 채점 클라이언트를 호출하는 단계와 채점 클라이언트에서 문항별로 구분된 답안을 채점하고 채점 결과를 온라인 채점 서버에 전송하는 단계, 상기 온라인 채점 서버에서 채점 결과를 수렴하고 전산 처리하여 데이터베이스에 저장한 후 그 결과를 수험자의 모바일 카메라폰에 전송하는 단계를 포함하는 것을 특징으로 하는 모바일 카메라폰을 이용한 온라인 채점 방법A test paper photographing program embedded in the online scoring server, a mobile camera phone for photographing a test paper, and wirelessly transmitting through a mobile internet, and reading and scoring a test paper image connected to the online scoring server through the Internet. In a mobile scoring system equipped with a grading client, the test answer sheet is taken as a grading target, photographed by the examinee's mobile camera phone, the online grading is performed, and the computerized processing is performed. Taking the answer of the test paper and sending it along with the test information to the online scoring server and the online scoring server to divide it by question and store it in a database form along with the answers of other examinees and to call the scoring client and the scoring client Grading the answers divided by questions and transmitting the scoring results to the online scoring server, collecting and computing the scoring results in the online scoring server, storing the results in a database, and transmitting the results to the examinee's mobile camera phone. Online scoring method using a mobile camera phone, characterized in that it comprises 제 1항에 있어서 상기 온라인 채점 서버에서 온라인 클라이언트 서버로부터 받은The method of claim 1, wherein the online scoring server receives from an online client server. 답안 채점결과를 전산처리하고 그 결과를 수험자 모바일 카메라폰에 전송하는 과정에 있어서 답안 채점 결과와 전산처리 결과에 따라 컨텐츠 데이터 베이스를 통하여In the process of computerizing the answer scoring result and transmitting the result to the examinee's mobile camera phone, through the content database according to the answer scoring result and the computing result 문서, 이미지, 영상, 음성 등 멀티미디어 컨텐츠를 채점 결과로서 전송하는 단계를 더 포함하는 모바일 카메라폰을 이용한 온라인 채점 방법Online scoring method using a mobile camera phone further comprising the step of transmitting the multimedia content, such as documents, images, video, audio, as a scoring result 제 1항에 있어서 모바일 카메라폰으로 시험지를 촬영하고 전송하는 과정에 있어According to claim 1 in the process of photographing and transmitting the test paper with a mobile camera phone 상기 모바일 카메라폰에서 답안 촬영 보정 영역을 화면에 출력하고, 이를 통해 답안 촬영 보정 영역에 맞춰 시험지 답안을 촬영하고, 답안 촬영 보정 영역의 답안만 분리하여 답안에 따라 주관식 객관식을 분류하여 고유번호를 부여한 후 시험답안 정보를 저장하는 단계를 포함하고, 상기의 온라인 채점 서버에서 수험자의 답안을 데이터 베이스 형태로 저장하는 과정에 있어서 답안 이미지 고유번호에 따라 주관식과 객관식으로 분류하여 저장하고 객관식의 경우 영상인식 방법에 따라 자동적으로 채점하고, 주관식의 경우 답안 정보를 채점 클라이언트로 호출하는 단계를 포함하는 것을 특징으로 한 모바일 카메라폰을 이용한 온라인 채점 방법The mobile camera phone outputs the answer photographing correction area on the screen, through which photographs of the test paper according to the answer photographing correction area, and separates only the answers in the answer photographing correction area to classify the multiple-choice multiple-choice according to the answer to assign a unique number And storing the test answer information, and storing the test taker's answers in the form of a database in the online scoring server and storing the test answer information as a subjective and multiple choice according to the answer image unique number. Automatic scoring according to the method, and in the case of the short answer online scoring method using a mobile camera phone comprising the step of calling the answer information to the scoring client
KR1020040090682A 2004-11-09 2004-11-09 On-line grading system by mobile camera phone KR20060041465A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040090682A KR20060041465A (en) 2004-11-09 2004-11-09 On-line grading system by mobile camera phone

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040090682A KR20060041465A (en) 2004-11-09 2004-11-09 On-line grading system by mobile camera phone

Publications (1)

Publication Number Publication Date
KR20060041465A true KR20060041465A (en) 2006-05-12

Family

ID=37148008

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040090682A KR20060041465A (en) 2004-11-09 2004-11-09 On-line grading system by mobile camera phone

Country Status (1)

Country Link
KR (1) KR20060041465A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008085754A1 (en) * 2007-01-08 2008-07-17 Microsoft Corporation Techniques using captured information
KR101278496B1 (en) * 2009-11-14 2013-07-02 권승철 The system for manufacturing an incorrect answer note and the method for manufacturing the same
KR20130108849A (en) * 2012-03-26 2013-10-07 주식회사 소프트펍 Method for providing error note
KR20160061753A (en) * 2014-11-24 2016-06-01 오종현 Examination paper recognition and scoring system
CN108053348A (en) * 2017-12-11 2018-05-18 上海启思教育科技服务有限公司 A kind of intelligently reading system for mathematics examination
CN110058824A (en) * 2019-04-18 2019-07-26 江苏曲速教育科技有限公司 Trace of going over examination papers print system and method
CN114938443A (en) * 2022-05-10 2022-08-23 广州长鹏光电科技有限公司 Real-time scoring method for experimental practice test based on streaming media
KR102473059B1 (en) * 2021-10-28 2022-12-02 주식회사 테스트뱅크 Digitized reference book element extraction system and method the same

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008085754A1 (en) * 2007-01-08 2008-07-17 Microsoft Corporation Techniques using captured information
US8082276B2 (en) 2007-01-08 2011-12-20 Microsoft Corporation Techniques using captured information
KR101278496B1 (en) * 2009-11-14 2013-07-02 권승철 The system for manufacturing an incorrect answer note and the method for manufacturing the same
KR20130108849A (en) * 2012-03-26 2013-10-07 주식회사 소프트펍 Method for providing error note
KR20160061753A (en) * 2014-11-24 2016-06-01 오종현 Examination paper recognition and scoring system
CN108053348A (en) * 2017-12-11 2018-05-18 上海启思教育科技服务有限公司 A kind of intelligently reading system for mathematics examination
CN110058824A (en) * 2019-04-18 2019-07-26 江苏曲速教育科技有限公司 Trace of going over examination papers print system and method
KR102473059B1 (en) * 2021-10-28 2022-12-02 주식회사 테스트뱅크 Digitized reference book element extraction system and method the same
WO2023075434A1 (en) * 2021-10-28 2023-05-04 주식회사 테스트뱅크 Machine learning-based digital reference book provision system using bounding boxes
CN114938443A (en) * 2022-05-10 2022-08-23 广州长鹏光电科技有限公司 Real-time scoring method for experimental practice test based on streaming media
CN114938443B (en) * 2022-05-10 2023-05-02 广州长鹏光电科技有限公司 Streaming media-based real-time scoring method for experimental real-time examination

Similar Documents

Publication Publication Date Title
CN111144191B (en) Font identification method, font identification device, electronic equipment and storage medium
US6577846B2 (en) Methods for range finding of open-ended assessments
CN109064814A (en) Examination question reads and makes comments method, examination question reads and makes comments system and computer readable storage medium
US20180124437A1 (en) System and method for video data collection
US8014716B2 (en) Information management server and information distribution system
CN109710750A (en) One kind searching topic method and facility for study
CN109766412A (en) A kind of learning Content acquisition methods and electronic equipment based on image recognition
KR101832791B1 (en) Hybrid computer scoring system and method based on image for increasing reliability and accuracy
JP2010152480A (en) Digital marking system
KR20060041465A (en) On-line grading system by mobile camera phone
CN111126486A (en) Test statistical method, device, equipment and storage medium
KR20090052570A (en) System and method for automatic question framing and assesment via network
CN110852073A (en) Language learning system and learning method for customizing learning content for user
CN110443122B (en) Information processing method and related product
JP2004029107A (en) System for processing marking of answer
CN115050039A (en) Automatic test paper analysis method, system, electronic device and storage medium
CN112164262A (en) Intelligent paper reading tutoring system
JP4807486B2 (en) Teaching material processing apparatus, teaching material processing method, and teaching material processing program
CN113961699A (en) Tourism resource investigation method and system
CN111612659B (en) Automatic scoring system and scoring method for online financial examination
CN113705438A (en) Examination and examination paper marking method and system based on multiple data acquisition modes
CN113903039A (en) Color-based answer area acquisition method for answer sheet
KR101870507B1 (en) Data utilization system that provides the incorrect Notes
JP2021064101A (en) Information processing apparatus, control method, and program
CN116110263B (en) Answering method and system based on electronic student identity card, electronic equipment and storage medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E601 Decision to refuse application