KR20010079317A - 퀴즈 기반 온라인 교육 서비스 제공 방법 - Google Patents

Abstract

본 발명은 완전 학습을 위한 퀴즈 기반 온라인 교육 서비스 제공 방법에 관한 것이다. 본 발명에 따른 온라인 교육 서비스 제공 방법은 로그인한 사용자가 온라인 강좌에 상응하는 퀴즈 풀이를 선택한 경우 선택된 온라인 강좌를 사용자가 수강한 경우에는 온라인 강좌에 상응하여 미리 정해진 복수 유형의 평가 문제 중에서 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하고, 추출된 평가 문제를 사용자에게 전송하고, 사용자의 평가 문제 풀이에 대한 정답률, 심화 학습, 개인 지도 등의 다양한 추가 학습에 대한 평가 결과를 학부모 등에게 이메일 등으로 통보하는 단계를 포함한다. 종래의 온라인 강의의 학습 효율을 높일 수 있고, 온라인 학습 프로그램을 제대로 듣지 않고 형식적으로 테스트를 치르는 것을 차단하고, 이용자들이 반복된 퀴즈 문제 출제로 인해 객관식 정답 번호를 외우는 것을 방지할 수 있다. 또한, 사용자에게 완전학습을 할 수 있는 기반을 제공하고, 사용자의 학습 기록 등을 반영한 평가 결과를 학부모 등에게 제공할 수 있다.

Description

퀴즈 기반 온라인 교육 서비스 제공 방법{ON-LINE LECTURE PROVIDING METHOD BASED ON QUIZ}

본 발명은 퀴즈 기반 온라인 교육 서비스 제공 방법에 관한 것이다.

최근 인터넷을 이용한 원격 교육 서비스를 제공하는 웹사이트가 등장하고 있다. 주로, 원격 교육 서비스를 제공하는 웹사이트 운영자가 게시판에 제시한 다양한 주제에 대해 인터넷을 통하여 이용자들에게 원격 강의를 제공한다.

특히, 초, 중, 고생을 대상으로 하는 원격 학습 프로그램 서비스를 제공하는 웹사이트가 증가하고 있다. 상기 웹사이트에서는 학년별, 교과목별로 수준에 맞는 학습 프로그램을 제공하고, 학습 내용에 대한 온라인 테스트를 실시하고 테스트 결과 등을 이용자인 학생이나 또는 학부모에게 온라인 등으로 통보한다.

그러나, 지금까지의 인터넷 학습 사이트 운영자들은 이용자들이 제대로 학습을 하고 있는지에 대한 사후 관리가 전혀 이루어지지 않고 있었다.

이러한 종래의 원격 학습 프로그램은 초등학생, 중학생 등의 이용자들이 인터넷 학습 프로그램을 통하여, 실질적으로 공부를 하고 있는지에 대한 체계적인 관리자체가 불가능하다. 이용자에 따라서는 강의를 제대로 듣지 않고도 형식적으로 테스트를 치르는 등 이용자들과 그 학부모들에게는 원하는 학습 효과를 달성 할 수 없었다.

따라서, 종래의 인터넷을 이용한 학습 교육 사이트의 원격 교육 방법은 초, 중, 고생 등의 이용자들이 제대로 공부를 하고 있는지 전연 파악할 수가 없어 자녀들을 회원으로 등록한 학부모들이 자녀들의 학습 수준을 높이려는 목적을 달성할 수 없는 문제점이 있었다.

또한, 사이트 운영자들 역시 많은 이용자들을 관리함에 있어서, 동시 다발적으로 수백 수천 명의 이용자들에게 천편일률적인 학습 내용을 제공하고, 이용자들의 강의 내용 파악여부에 대한 단순한 평가를 실시하고 있다. 즉, 기존에는 강좌에 따라 강의 내용에 대한 테스트를 위해 미리 문제를 작성하여 데이터베이스화하고, 이를 단순히 사용자에게 출제하였다.

특히, 강좌에 따라서는 반복 학습이 중요한 경우에도 학습 내용을 고정된 문제 유형을 통하여 테스트를 받을 경우 이용자가 문제와 답을 암기하여 정확히 반복 학습에 대한 학습 성취도를 측정할 수 없었다. 사용자로서는 2번째 이상 반복되는 동일한 문제를 다시 풀 경우 문제에 대한 집중도와 흥미가 떨어져 반복 학습 내용에 대한 효율적인 평가 방법이 되지 못하였다.

또한, 종래의 인터넷을 이용한 학습 교육 사이트의 원격 교육 방법은 이용자의 학습 성취도를 단지 강의 내용에 대한 퀴즈식의 평가만을 이용하여 측정함으로써 이용자의 학습 과정에 대한 피상적인 평가만을 할 수밖에 없는 한계가 있었다.

따라서, 본 발명은 종래 기술의 제반 문제점을 해결하기 위하여 안출한 것으로서, 인터넷을 통한 원격 교육 서비스 제공 웹사이트를 이용하는 초, 중, 고등학생 등의 이용자들이 온라인 강의를 제대로 듣지 않은 경우 온라인 학습 프로그램을 재수강하거나 다시 시험을 보도록 하고, 상기 평가 결과를 이용자 또는 학부모에게 통보하는 인터넷을 통한 온라인 교육 서비스 제공 방법을 제공함에 그 목적이 있다.

또한, 본 발명의 목적은 이용자들이 온라인 학습 프로그램을 듣지 않은 경우에는 객관식 퀴즈 등의 온라인 평가를 받을 수 없도록 하여 온라인 학습 프로그램을 제대로 듣지 않고 형식적으로 테스트를 치르는 것을 차단할 수 있는 인터넷을 통한 온라인 교육 서비스 제공 방법을 제공함에 있다.

또한, 본 발명의 목적은 온라인 학습 프로그램을 이용하는 이용자들이 반복된 퀴즈 문제 출제로 인해 객관식 지문으로 된 정답 번호를 외우는 것을 방지하기 위해 객관식 지문의 순서를 출제시마다 변경하도록 하는 온라인 교육 서비스 제공 방법을 제공함에 있다.

또한, 본 발명의 목적은 이용자가 강의 도중 질문한 빈도, 질문한 내용을 반영하여 점수화하거나, 강의 내용에 대한 심화 학습 여부, 강사로부터의 개인 지도를 통한 학습 여부 등 이용자가 적극적으로 학습한 정도를 소정 기준에 따라 점수화하여 학부모 등에게 그 결과를 통보할 수 있도록 하는 온라인 교육 서비스 제공 방법을 제공함에 있다.

도 1은 본 발명의 바람직한 일 실시예에 따른 온라인 학습 평가시스템의 개략적 구성 블록도.

도 2a 및 도 2b는 본 발명의 바람직한 일 실시예에 따른 온라인 교육 서비스 제공 서버의 평가 문제 데이터베이스의 필드 구성을 나타낸 도면.

도 2c 내지 도 2e는 본 발명의 바람직한 일 실시예에 따른 온라인 교육 서비스 제공 서버의 평가 문제 데이터베이스의 문제 및 정답 필드의 상세 구성을 나타낸 도면.

도 2f는 본 발명의 바람직한 일 실시예에 따른 객관식 평가 문제의 경우 평가 문제 데이터베이스의 필드 구성의 일부를 나타낸 도면.

도 3a 및 도 3b는 본 발명의 바람직한 일 실시예에 따른 온라인 교육 서비스 제공 서버의 사용자 개인 정보 데이터베이스의 필드 구성을 나타낸 도면.

도 4a 및 도 4b는 본 발명의 바람직한 일 실시예에 따른 온라인 학습에 대한 평가 문제의 일예를 나타내는 도면.

도 5a 내지 도 5c는 본 발명의 바람직한 일 실시예에 따른 온라인 학습 평가방법을 설명하는 순서도.

도 6은 본 발명의 바람직한 일 실시예에 따른 사용자가 질문하기를 클릭한 경우 답변 처리 과정을 설명하는 순서도.

도 7은 본 발명의 바람직한 일 실시예에 따른 사용자가 상세보기를 클릭한 경우 상세 보기 학습 과정을 설명하는 순서도.

도 8a 및 도 8b는 본 발명의 바람직한 일 실시예에 따른 온라인 학습 평가방법에 있어서 온라인 강의가 진행 중인 화면예.

<도면의 주요부분에 대한 부호의 설명>

100 : 관리자 서버

110-1,...,110-N : 사용자 단말기

120 : 사용자 개인 정보 DB 130 : 학습 컨텐츠 DB

140 : 평가 문제 DB 150 : 평가 결과 DB

160 : 질문 및 답변 DB

상술한 목적들을 달성하기 위하여 본 발명의 제1 측면에 따르면, 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서, 로그인한 사용자로부터 온라인 강좌를 선택받는 단계, 상기 사용자로부터 상기 온라인 강좌에 상응하는 퀴즈 풀이 선택 신호가 입력된 경우 상기 선택된 온라인 강좌를 상기 사용자가 수강하였는지를 판단하는 단계, 상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강하지 않은 경우에는 상기 사용자에게 소정의 권고 메시지를 전송하고온라인 강의를 계속 진행하거나 재시작 하는 단계, 상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강한 경우에는 상기 온라인 강좌에 상응하여 미리 정해진 복수 유형의 평가 문제 중에서 상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계, 상기 사용자에게 상기 추출한 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계, 상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계, 상기 사용자가 정답 클릭하는데 걸린 시간 및 정답률을 산출하여 전체 평가 결과를 산출하는 단계 및 상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계를 포함하는 퀴즈 기반 온라인 교육 서비스 제공 방법 및 이에 상응하는 시스템 및 이러한 방법을 수행할 수 있는 프로그램이 수록되어 있는 기록 매체가 제공된다.

상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계는 상기 사용자가 풀어본 평가 문제 종류 및 상기 풀어본 평가 문제의 각 문항별 풀어본 회수를 포함하는 평가 문제 관련 정보를 읽어들이는 단계, 상기 풀어본 평가 문제 종류를 참조하여 상기 사용자가 선택한 강좌의 퀴즈 풀이가 이미 풀어본 평가 문제인지를 판단하는 단계, 상기 판단 결과, 이미 풀어본 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 회수가 1이상인 문항을 제외한 문항들로부터 소정 개수의 문항을 선택하여 추출하는 단계 및 상기 판단 결과, 이미 풀어보지 않은 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 추출하는 단계를 포함할 수 있다.

상기 복수 유형의 평가 문제는 상기 평가 문제의 각각의 문항마다 동일한 내용의 질의문에 대하여 질의문 형식을 정오 문제, 객관식 문제, 주관식 문제 및 괄호 넣기 문제 중 적어도 하나로 할 수 있다.

상기 객관식 문제는 동일한 내용의 질의문에 대하여 객관식 지문의 순서를 랜덤하게 변경하여 생성할 수 있다.

상기 소정 개수의 문항을 선택하여 추출하는 단계는 상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 상기 선택된 문항의 순서를 랜덤하게 변경하여 생성한 평가 문제를 추출하는 단계가 될 수 있다.

상기 사용자에게 상기 평가 문제를 전송하는 단계는 상기 추출된 문항 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 횟수가 문항별 권장 풀이 횟수가 되는지 여부를 판단하여, 상기 문항별 권장 풀이 횟수에 미달되는 문항만을 전송하는 단계가 될 수 있다.

상기 문항별 권장 풀이 횟수는 풀어본 평가 문제의 각 문항별 틀린 횟수를 참조하여 틀린 횟수가 증가할 수록 그에 상응하여 증가될 수 있다.

상기 사용자가 정답 클릭하는데 걸린 시간 및 정답률을 산출하여 평가 결과를 산출하는 단계는 각각의 평가 문항별 또는 전체 평가 문항에 대해 정답을 클릭하는데 걸린 시간을 산출하고, 상기 산출된 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴지를 판단하고, 상기 판단 결과, 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 또는 온라인 학습에 대한 재평가를 받도록 하는 메시지를 전송하고, 상기 판단 결과, 소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우에는 상기 사용자의 상기 평가 문제에 대한 정답률을 산출하고, 상기 산출된 정답률을 분석하여 정답률이 소정 임계치 이하인지를 판단하고, 상기 판단 결과, 상기 정답률이 소정 임계치 이하 인 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 온라인 학습에 대한 재평가를 보도록 하는 메시지를 전송하고, 상기 판단 결과, 상기 정답률이 소정 임계치보다 큰 경우에는 상기 정답률을 이용한 전체 평가 결과를 산출하는 단계를 포함할 수 있다.

상기 사용자의 학부모에게의 통보는 이메일을 이용하여 통보할 수 있다.

상기 퀴즈 기반 온라인 교육 서비스 제공 방법은 사용자로부터 질문하기 선택신호를 입력받은 경우에 상기 질문하기 선택신호를 입력한 사용자로부터 질문 내용을 네트워크를 통하여 입력받는 단계 및 상기 입력된 질문 내용에 대한 답변 처리 과정을 수행하는 단계를 더 포함할 수 있다.

상기 답변 처리 과정은 상기 입력된 질문 내용을 상기 온라인 강좌의 강사에게 전송하는 단계, 상기 강사로부터 강좌 진행 중에 답변을 입력받은 경우 상기 질문한 사용자를 포함하는 복수의 사용자에게 상기 답변을 전송하는 단계 및 상기 강사로부터 강좌 종료 후에 답변을 입력받은 경우 상기 질문에 대한 답변을 상기 온라인 강좌가 종료된 후에 상기 복수의 사용자에 제공하는 단계를 포함할 수 있다.

상기 퀴즈 기반 온라인 교육 서비스 제공 방법은 상기 사용자로부터 상세 보기 선택 신호를 입력받은 경우에 상기 사용자에게 상기 온라인 강좌의 심화 학습을위한 컨텐츠를 제공하는 단계 및 상기 사용자가 상기 상세 보기 학습에 머무른 시간을 산출하고, 상기 산출된 머무른 시간에 소정의 가중치를 부여하여 상세 보기 학습에 대한 평가 결과를 산출하여 상기 전체 평가 결과에 반영하는 단계를 포함할 수 있다.

상기 퀴즈 기반 온라인 교육 서비스 제공 방법은 상기 사용자로부터 질문 내용 보기 선택 신호를 입력받은 경우에 상기 사용자에게 상기 온라인 강좌에 대한 질문 내용 및 상기 질문 내용에 상응하는 답변 내용 컨텐츠를 제공하는 단계 및 상기 사용자가 상기 질문 내용 보기 학습에 머무른 시간을 산출하고, 상기 산출된 머무른 시간에 소정의 가중치를 부여하여 질문 내용 보기 학습에 대한 평가 결과를 산출하여 상기 전체 평가 결과에 반영하는 단계를 더 포함할 수 있다.

상기 퀴즈 기반 온라인 교육 서비스 제공 방법은 상기 온라인 강좌에 대한 개인 지도를 받기 위한 개인 지도 선택 신호를 상기 사용자로부터 입력받은 경우에 상기 사용자로부터 적어도 질문 내용 및 개인 지도 요청 부분 중 적어도 하나를 입력받아 소정의 강사에게 이메일로 전송하기 위한 이메일 쓰기 창을 제공하는 단계 및 상기 사용자가 상기 개인 지도를 위한 이메일을 통하여 질문한 횟수, 질문 내용의 길이 및 상기 이메일을 작성하는데 걸린 시간 중 적어도 하나에 가중치를 부여하여 상기 개인 지도를 통한 학습에 대한 평가 결과를 산출하여 상기 전체 평가 결과에 반영하는 단계를 더 포함할 수 있다.

상기 퀴즈 기반 온라인 교육 서비스 제공 방법은 상기 상세 보기 학습에 머무른 시간, 상기 질문 내용 보기 학습에 머무른 시간, 상기 개인 지도를 위한 이메일을 통하여 질문한 횟수, 질문 내용의 길이 및 상기 이메일을 작성하는데 걸린 시간 중 적어도 하나를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계를 더 포함할 수 있다.

본 발명의 다른 실시예에 따르면, 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서, 로그인한 사용자로부터 온라인 강좌를 선택받는 단계, 상기 사용자로부터 상기 온라인 강좌에 상응하는 퀴즈 풀이 선택 신호가 입력된 경우 상기 선택된 온라인 강좌를 상기 사용자가 수강하였는지를 판단하는 단계, 상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강하지 않은 경우에는 상기 사용자에게 소정의 권고 메시지를 전송하고 온라인 강의를 계속 진행하거나 재시작 하는 단계, 상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강한 경우에는 상기 온라인 강좌 및 상기 사용자의 문제 풀이 횟수에 상응하는 미리 정해진 평가 문제를 읽어들이는 단계, 상기 사용자에게 상기 읽어들인 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계, 상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계, 상기 사용자가 정답 클릭하는데 걸린 시간을 산출하여 전체 평가 결과를 산출하는 단계 및 상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계를 포함하는 퀴즈 기반 온라인 교육 서비스 제공 방법 및 이에 상응하는 시스템 및 이러한 방법을 수행할 수 있는 프로그램이 수록되어 있는 기록 매체가 제공된다.

상기 사용자가 정답 클릭하는데 걸린 시간을 산출하여 전체 평가 결과를 산출하는 단계는 각각의 평가 문항별 또는 전체 평가 문항에 대해 정답을 클릭하는데 걸린 시간을 산출하고, 상기 산출된 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴지를 판단하고, 상기 판단 결과, 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 또는 온라인 학습에 대한 재평가를 받도록 하는 메시지를 전송하고, 상기 판단 결과, 소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우에는 상기 산출된 정답 클릭 시간을 이용하여 전체 평가 결과를 산출하는 단계를 포함할 수 있다.

상기 퀴즈 기반 온라인 교육 서비스 제공 방법은 상기 사용자의 상기 평가 문제에 대한 정답률을 산출하는 단계, 상기 산출된 정답률을 분석하여 상기 정답률이 소정 임계치 이하인지를 판단하는 단계, 상기 판단 결과, 상기 정답률이 소정 임계치 이하 인 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 온라인 학습에 대한 재평가를 보도록 하는 메시지를 전송하는 단계 및 상기 판단 결과, 상기 정답률이 소정 임계치보다 큰 경우에는 상기 정답률을 산출하여 전체 평가 결과를 산출하는 단계를 더 포함할 수 있다.

본 발명의 또 다른 실시예에 따르면, 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서, 로그인한 사용자로부터 온라인 강좌를 선택받는 단계, 상기 사용자로부터 상기 온라인 강좌에 상응하는 퀴즈 풀이 선택 신호를 수신하는 단계, 상기 온라인 강좌에 상응하여 미리 정해진 복수 유형의 평가 문제 중에서 상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계, 상기 사용자에게 상기 추출한 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계, 상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계, 상기 사용자가 정답 클릭하는데 걸린 시간 및 정답률을 산출하여 전체 평가 결과를 산출하는 단계 및 상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계를 포함하는 다양한 문제 추출 방식에 기반한 온라인 교육 서비스 제공 방법 및 이에 상응하는 시스템 및 이러한 방법을 수행할 수 있는 프로그램이 수록되어 있는 기록 매체가 제공된다.

상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계는 상기 사용자가 풀어본 평가 문제 종류 및 상기 풀어본 평가 문제의 각 문항별 풀어본 회수를 포함하는 평가 문제 관련 정보를 읽어들이는 단계, 상기 풀어본 평가 문제 종류를 참조하여 상기 사용자가 선택한 강좌의 퀴즈 풀이가 이미 풀어본 평가 문제인지를 판단하는 단계, 상기 판단 결과, 이미 풀어본 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 회수가 1이상인 문항을 제외한 문항들로부터 소정 개수의 문항을 선택하여 추출하는 단계 및 상기 판단 결과, 이미 풀어보지 않은 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 추출하는 단계를 포함할 수 있다.

상기 복수 유형의 평가 문제는 상기 평가 문제의 각각의 문항마다 동일한 내용의 질의문에 대하여 질의문 형식을 정오 문제, 객관식 문제, 주관식 문제 및 괄호 넣기 문제 중 적어도 하나가 될 수 있다.

상기 객관식 문제는 동일한 내용의 질의문에 대하여 객관식 지문의 순서를 랜덤하게 변경하여 생성할 수 있다.

상기 소정 개수의 문항을 선택하여 추출하는 단계는 상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 상기 선택된 문항의 순서를 랜덤하게 변경하여 생성한 평가 문제를 추출하는 단계가 될 수 있다.

상기 사용자에게 상기 평가 문제를 전송하는 단계는 상기 추출된 문항 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 횟수가 문항별 권장 풀이 횟수가 되는지 여부를 판단하여, 상기 문항별 권장 풀이 횟수에 미달되는 문항만을 전송하는 단계가 될 수 있다.

본 발명의 또 다른 실시예에 따르면, 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서, 온라인 강좌에 대한 평가 문제를 추출하는 단계, 상기 사용자에게 상기 추출한 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계, 상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계, 각각의 평가 문항별 또는 전체 평가 문항에 대해 정답을 클릭하는데 걸린 시간을 산출하는 단계, 상기 산출된 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴지를 판단하는 단계, 상기 판단 결과, 소정의 최저 임계 시간보다 짧거나 소정의 최고임계 시간보다 긴 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 또는 온라인 학습에 대한 재평가를 받도록 하는 메시지를 전송하는 단계, 상기 판단 결과, 소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우에는 상기 사용자의 상기 평가 문제에 대한 정답률을 산출하는 단계, 상기 산출된 정답률을 분석하여 정답률이 소정 임계치 이하인지를 판단하는 단계, 상기 판단 결과, 상기 정답률이 소정 임계치 이하 인 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 온라인 학습에 대한 재평가를 보도록 하는 메시지를 전송하는 단계, 상기 판단 결과, 상기 정답률이 소정 임계치보다 큰 경우에는 상기 정답률을 이용한 전체 평가 결과를 산출하는 단계 및 상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계를 포함하는 온라인 학습 평가 방법 및 이에 상응하는 시스템 및 이러한 방법을 수행할 수 있는 프로그램이 수록되어 있는 기록 매체가 제공된다.

이하, 본 발명에 따른 온라인 교육 서비스 제공 방법의 바람직한 실시예를 첨부도면을 참조하여 보다 상세히 설명한다.

도 1은 본 발명의 바람직한 일 실시예에 따른 인터넷을 통한 온라인 학습 평가시스템의 개략적 구성 블록도를 나타낸다.

도 1을 참조하면, 상기 온라인 학습 평가 시스템은 온라인 교육 서비스 제공 서버(100), 상기 온라인 교육 서비스 제공 서버(100)에 연결된 복수의 사용자 컴퓨터 단말기(110-1,...,110-N; 이하 110이라 한다), 상기 서버(100)에 설치된 사용자개인 정보 데이터베이스(120), 평가 문제 데이터베이스(140), 평가 결과 데이터베이스(150), 질문 및 답변 데이터베이스(160)를 포함한다.

사용자(110)가 온라인 학습 평가 서비스를 제공하는 웹사이트로 접속하면, 온라인 교육 서비스 제공 서버(100)에서는 사용자(110)가 회원인지를 인증하여, 회원이면 회원에 맞는 정보를 사용자 개인 정보 데이터베이스(120)에서 가져와 사용자에게 보여준다. 사용자(110)는 초, 중, 고등학생 등의 온라인 학습 평가를 받고자하는 학생이 될 수 있고, 학생의 학부모들이 될 수도 있다.

이하, 온라인 학습 평가 시스템의 전체적인 동작을 설명하고, 온라인 교육 서비스 제공 방법에 대한 자세한 설명은 후술한다.

온라인 학습 평가 서비스를 제공하는 웹사이트에 접속한 사용자(110)는 자신의 학년 및 학과목 또는 관심 분야에 맞는 온라인 강좌를 선택하여 온라인 학습을 할 수 있다.

사용자(110)가 강좌를 선택함과 동시에 온라인 교육 서비스 제공 서버(100)에서는 학습 컨텐츠 데이터베이스(130)에서 선택한 강좌의 학습 컨텐츠를 추출하고, 온라인 학습 평가 솔루션을 가동시켜 상기 컨텐츠와 결합하여 강의를 진행한다.

강의 중에 사용자(110)는 질문을 할 수 있고, 강좌를 다 들으면 사용자(110)는 퀴즈를 통해 수강한 강좌에 대한 학습 평가 문제를 풀 수 있는 권한이 주어진다. 사용자(110)는 퀴즈를 통해 복습 및 자신의 실력을 테스트할 수 있다. 사용자는 심화 학습을 위한 상세 보기 항목, 다른 사람이 질문한 내용과 그에 대한 답변을 볼 수 있는 질문 내용 보기 항목, 강사 등으로부터 개인 지도를 받기 위한 개인 지도 항목을 선택하여 완전 학습이라는 학습 목표를 달성할 수 있다.

테스트가 끝나면 사용자(110)의 성적은 평가 결과 데이터베이스(150)에 저장되거나 또는 사용자 개인 정보 데이터베이스(120)에 저장될 수 있다.

바람직하게는 상기 온라인 학습 평가 솔루션은 별도의 서버에서 처리하도록 하여 온라인 교육 서비스 제공 서버(100)의 부하를 줄일 수 있다.

도 2a 및 도 2b는 본 발명의 바람직한 일 실시예에 따른 온라인 교육 서비스 제공 서버(100)의 평가 문제 데이터베이스(140)의 필드 구성을 나타내고, 도 2c 내지 도 2e는 평가 문제 데이터베이스(140)의 문제 및 정답 필드(240)의 상세 구성을 나타내고, 도 2f는 객관식 평가 문제의 경우 평가 문제 데이터베이스(140)의 필드 구성의 일부를 나타낸다.

도 2a를 참조하면, 평가 문제 데이터베이스(140)는 평가 문항 유형(210), 문항별 권장 풀이 횟수(220), 평가 문항 식별자(230) 및 문제 및 정답(240) 필드를 포함한다.

평가 문항 유형(210)에는 평가 문제의 각각의 문항마다의 문제 유형을 구별하기 위한 식별자가 저장되어 있다. 예를 들어, 정오 문제, 객관식 문제, 주관식 문제, 괄호 넣기 문제 등의 다양한 문제 유형을 식별하기 위한 코드가 저장되어 있다.

문항별 권장 풀이 횟수(220)는 퀴즈 문제 중 특정 문제는 한번 풀어 보는 것으로는 소정의 학습 목표를 달성할 수 없고 일정한 간격을 두고 소정 횟수만큼 반복해서 풀어야만 학습 목표를 달성할 수 있는 경우를 고려한 것이다. 즉, 각각의 평가 문항별로 권장하는 반복 풀이 횟수를 정하여 2번째 퀴즈 문제(평가 문제) 풀이 시에는 평가 문제 데이터베이스(140)의 문항별 권장 풀이 횟수(220) 필드를 참조하여 권장 횟수가 2이상 되는 것만 출력하여 풀 수 있도록 할 수 있다. 또한, 평가 문항마다 사용자가 그 문항을 풀이한 결과 틀린 횟수를 기억해 놓고 틀린 횟수가 증가할 때마다 한 번 더 풀어볼 수 있도록 문항별 권장 풀이 횟수(220)를 증가시킬 수 있다. 다른 실시예에서는, 권장 풀이 횟수를 각각의 문항별로 기록해두지 않고 온라인 강좌에 대한 평가 문제 전부에 대해 권장 풀이 횟수를 기록해 둘 수 있다. 이를 나타낸 것이 도 2의 평가 문제 권장 풀이 횟수(222)이다.

평가 문항 식별자(230)는 평가 문제마다의 고유한 문제 번호를 나타낸다. 평가 문제 데이터베이스(140)에는 온라인 강좌마다 소정 개수의 평가 문제가 저장되어 있으며, 이러한 평가 문제를 구별하기 위한 문제 번호와 같은 식별자가 평가 문항 식별자(230)에 저장된다. 본 발명에서는 동일한 내용의 문제, 즉 동일한 것을 묻고 있는 질의문이라도 다양한 형태의 문제 유형으로 문제를 미리 만들어 평가 문제 데이터베이스(140)에 저장한다. 각각의 다양한 유형의 평가 문제는 평가 문항 유형(210)으로부터 그 주관식 문제인지, 객관식 문제인지 등의 문제 유형을 알 수 있고, 상기 평가 문항 식별자(230)로부터 문제 번호를 알 수 있다.

문제 및 정답(240) 필드에는 각각의 평가 문제마다의 질의문, 그 질의문에 대한 지문(객관식 문제의 경우), 정답 등이 기록된다. 즉, 문제 및 정답(240) 필드는 문제 유형에 따라 그 필드 구성이 달라 질 수 있다.

평가 문제의 유형이 객관식 문제인 경우 문제 및 정답(240) 필드에는 객관식 질의문(241), 객관식 지문 식별자(243), 객관식 지문(245), 지문별 정답 식별자(247)가 포함된다. 객관식 지문 식별자(243)에는 예를 들어, 객관식 지문의 지문 번호가 기록될 수 있다.

평가 문제의 유형이 정오 문제인 경우 문제 및 정답(240) 필드는질의문(242),또는를 구별하기 위한 비트 값을 저장하고 있는 정답 식별자(244)를 포함한다.

평가 문제 유형이 주관식 문제인 경우 문제 및 정답(240) 필드는 주관식 질의문(246) 및 정답을 저장하고 있는 정답 식별자(248)를 포함한다.

도 2f를 참조하면, 객관식 문제의 경우 각각의 문항마다 객관식 지문 각각에 대한 객관식 지문 식별자(210) 및 각각의 평가 문항마다 정답여부를 알려주는 정답 식별자(220)를 포함한다. 도 2f에는 예를 들어 정답인 경우 A, 정답이 아닌 경우에는 N으로 표시하였지만, 바람직하게는 각각의 객관식 지문 식별자마다 1개의 비트를 이용하여 정답인 지문과 정답이 아닌 지문으로 구분하여 나타낼 수 있다.

동일한 문제 및 동일한 순서의 객관식 지문의 반복 출제로 인한 문제를 해결하기 위해 객관식 지문의 순서를 랜덤하게 변경하여 출제한다. 예를 들어, 객관식 지문 식별자(210)에 1에서 4까지 객관식 지문 번호가 1, 2, 3, 4의 순서로 저장되어 있을 경우, 랜덤하게 상기 1에서 4까지의 지문 번호를 예를 들어 2, 4, 3, 1의 순서로 재배열하여 이를 객관식 지문 식별자(210)에 저장한다. 상기 재배열된 객관식 지문 식별자(210) 값의 순서에 따라 각각의 평가 문항의 객관식 지문을 출력한다. 일정한 규칙에 의해 평가 문항의 지문 번호를 재배열할 수 있고, 바람직하게는 불규칙적으로 재배열시키는 것이 바람직하다. 바람직하게는 평가 문항의 문제 번호도 랜덤하게 재배열 할 수 있다.

도 3a 및 도 3b는 본 발명의 바람직한 일 실시예에 따른 온라인 학습 평가 서버의 사용자 개인 정보 데이터베이스(120)의 필드 구성을 나타낸다.

도 3a를 참조하면, 사용자 개인 정보 데이터베이스(120)는 사용자 ID 및 비밀번호(301), 사용자의 이름, 생년월일, 주소, 이메일 등을 포함하는 사용자 신상 정보(303), 사용자가 선택한 강좌를 수강한 후 풀어본 평가 문제 종류(305), 풀어본 평가 문제의 각 문항별 풀어본 횟수(307), 풀어본 평가 문제의 각 문항별 틀린 횟수(309), 평가 결과(313), 질문(315) 및 답변(317)을 포함한다.

완전 학습을 위해서는 수강한 강좌의 내용 즉, 퀴즈의 종류에 따라 한번의 문제 풀이로는 충분치 않은 경우가 많다. 즉, 반복해서 여러 번 풀어야만 사용자의 머리 속에 확실히 기억될 수 있는 경우에는 평가문제(퀴즈) 또는 각각의 평가 문항별로 소정 횟수만큼 반복해서 풀도록 하기 위하여 평가 문제 데이터베이스(140)에 평가 문제 권장 풀이 횟수(222)(도 2b 참조) 또는 문항별 권장 풀이 횟수(220)(도 2a 참조)를 미리 저장해 둔다. 다른 실시예에서는 문항별이 아닌 수강한 온라인 강좌에 해당되는 퀴즈별로 풀어본 횟수를 저장한 각 퀴즈별 풀어본 횟수(311)가 기록될 수 있다(도 3b 참조).

풀어본 평가 문제의 각 문항별 풀어본 횟수(307)를 참조하여 상기 문항별 권장 풀이 횟수(205)가 될 때까지 평가 문제를 반복해서 출제한다. 이때, 동일한 문제가 반복적으로 출제되는 것을 막기 위해 각 문항별 풀어본 횟수(307)를 참조하여 다른 유형의 문제를 출제하도록 한다.

풀어본 퀴즈의 각 문항별 틀린 횟수(309)를 참조하여 틀린 횟수가 증가할수록 그에 상응하여 상기 문항별 권장 풀이 횟수(220)를 증가시킬 수 있다.

평가 결과(313)에는 퀴즈 문제에 대한 점수를 기록한 '퀴즈 풀이' 평가 결과, 심화 학습을 위한 상세 보기 학습에 대한 점수를 기록한 '상세 보기' 평가 결과, 다른 사람의 질문 내용 학습에 대한 점수를 기록한 '질문 내용 보기' 평가 결과 및 개인 지도를 통한 학습에 대한 점수를 기록한 '개인 지도' 평가 결과가 저장된다. '퀴즈 풀이' 평가 결과, '상세 보기' 평가 결과, '질문 내용 보기' 평가 결과 및 '개인 지도' 평가 결과에는 각각의 평가에 따른 점수 등의 값이 기록되어 있다. 또한, 도면에는 도시되지 않았지만, 평가 결과(313)에는 상기 각각의 평가 결과마다 소정의 가중치를 부여하여 이를 합산한 전체 평가 결과가 기록될 수 있다.

즉, 평가 결과(313)는 다양한 기준에 의한 평가 결과를 소정의 가중치를 부여하여 종합한 평가 결과를 저장한다.

사용자가 중학교 1학년 1학기 과목 중 특정 단원에 대한 화학 강좌(이하 A라고한다)을 선택한 경우를 예로 들어 상기 다양한 유형의 평가 문항을 사용자에게 출력하는 과정을 설명한다. 평가 문제 데이터베이스(140)에는 A 강좌에 대한 40개의 문제 및 그 정답이 저장된다. 40개의 문제는 10 문제를문제 10개, 객관식 문제 10개, 주관식 문제 10개, 괄호 넣기 문제 10개로 문제 유형을 달리하여 변형한 것이다. 위 40개의 평가 문제에는 1번부터 40번까지의 번호가 메겨져 평가 문항 식별자(230)에 1 내지 40의 값이 저장된다.

사용자가 이미 A 강좌에 대한 퀴즈를 1번보고 2번째로 퀴즈를 보는 경우를 살펴본다. 사용자의 사용자 개인 정보 데이터베이스(120)의 풀어본 평가 문제 종류(303)에는 A 강좌 코드가 저장되고, 각 평가 문제별 풀어본 횟수(311)에는 상기 A 강좌 코드에 대해 1이 저장된다. 매번 퀴즈를 풀 때마다 상기 각 평가 문제별 풀어본 횟수(311)는 1씩 증가된다.

위 40문제에 대해 사용자가 1번째 퀴즈 풀이에서 10개만 풀이하였고, 이중에서 6개 틀리고 4개를 맞춘 경우를 살펴본다. 위 풀이한 적이 있는 10 문제에 대해서는 풀어본 평가 문제의 각 문항별 풀어본 횟수(307)에 평가 문항 식별자와 함께 1이 저장된다. 틀린 문항에 대해서는 풀어본 평가 문제의 각 문항별 틀린 횟수(309)에 평가 문항 식별자와 함께 1번 틀렸으므로 1이 저장된다.

2번째 퀴즈 풀이가 시작되면, 서버(100)에서는 이미 풀어본 적이 있는 문제를 제외하고 풀어본 적이 없는 문제를 추출하기 위해 각 평가 문제별 풀어본 횟수(311) 값이 0인 것만을 대상으로 최대 10문제 범위 내에서 평가 문제를 추출한다. 이때,문제, 객관식 문제, 주관식 문제, 괄호 넣기 문제 중 랜덤하게 10개를 추출할 수 있다. 특히, 객관식 문제를 추출한 경우는 객관식 지문의 순서를 랜덤하게 재배열하여 재배열된 지문 번호를 객관식 지문 식별자(243)에 저장하고, 상기 갱신된 객관식 지문 식별자(243) 값에 따라 객관식 문제와 지문을 추출한다.

상기 추출된 평가 문제를 사용자에게 전송하여 사용자로부터 입력된 답을 전송받아 정답과 비교하여 정답율을 산출하여 평가 결과 데이터베이스(150)에 저장하고, 상기 사용자에 대한 사용자 개인 정보 데이터베이스(120)의 평가 결과 필드(313)에 저장한다. 서버(100)는 다음에 사용자가 로그인 할때 사용자 개인 정보 데이터베이스(120)의 평가 결과 필드(313)로부터 정답율 등의 평가 결과를 읽어와 사용자에게 출력한다.

도 8은 본 발명의 바람직한 일 실시예에 따른 상기 인터넷을 통한 온라인 강의가 진행 중인 화면예를 나타낸다.

도 8a 및 도 8b는 본 발명의 바람직한 일 실시예에 따른 온라인 학습 평가방법에 있어서 온라인 강의가 진행 중인 화면예를 나타낸다.

도 8a 및 도 8b를 참조하면, 화면의 중에는 칠판 모양의 강의 자료가 있고, 캐릭터화 된 선생님이 온라인 강의를 진행한다. 강의 진행도중 사용자는 질문하기(820)를 클릭하여 강사에게 질문을 할 수 있다. 질문은 온라인 교육 서비스 제공 서버(100)로 전송되어 질문 내용에 대한 답변과 함께 질문 및 답변 데이터베이스(160)에 저장된다. 질문에 대한 답변은 사용자의 사용자 개인 정보 데이터베이스(120)로 전송되어 저장되거나 Q&A 게시판(830)에 올려질 수도 있다. 나중에 사용자가 온라인 학습 평가 서비스를 제공하는 웹사이트에 접속하여 로그온 할 경우 상기 질문 내용과 그에 대한 답변이 사용자에게 출력되도록 할 수 있다.

사용자는 강의가 끝난 후 퀴즈 풀이(810)를 클릭하여 수강한 학습내용에 대해 평가를 받을 수 있다. 강의를 듣지 않고는 퀴즈를 풀 수 없도록 하기 위하여 퀴즈 풀이(810) 버튼을 강좌가 끝나기 전에 누르면 강의를 먼저 수강하라는 등의권고 메시지를 출력하고, 강좌가 끝난 후 누르면 바로 해당 학습에 관한 퀴즈 풀이 화면으로 이동하도록 한다.

사용자는 강의 도중 또는 강의가 끝난 후 강의 내용 중 일부에 대한 심화 학습을 원할 겨우 상세 보기(840)를 클릭하여 심화 학습을 할 수 있다.

또한, 사용자는 다른 사용자가 질문한 내용과 그에 대한 답변 내용을 확인하여 좀더 깊이 있는 공부를 하기 위해 질문 내용 보기(850)를 클릭하여 해당 질문 내용 및 답변을 통해 학습을 할 수 있다.

또한, 사용자는 강의가 끝나 후에 개인 지도(860)를 클릭하여 부족한 부분에 대한 자세한 설명을 요청하거나 상기 퀴즈 풀이에 대한 평가 결과를 강사에게 제공하거나 궁금한 점에 대한 질문을 하는 방법으로 강사의 도움을 받아 자신의 약점을 보완하고 추가 학습을 할 수도 있다. 예를 들어, 사용자가 개인 지도(860)를 클릭하면, 질문 등을 하기 위한 이메일 창이 뜬다. 사용자는 이메일을 통하여 강사로부터 상세한 답변을 받아 자신의 취약점을 보완하여 완전 학습이라는 학습 목표를 달성할 수 있다.

도 4a 및 도 4b는 본 발명의 바람직한 일 실시예에 따른 온라인 학습에 대한 평가 문제의 일예를 나타낸다.

도 4a를 참조하면, 객관식 퀴즈의 형태로 1번 문제(400)와 4개의 지문이 주어지며, 이 경우 답은 2번 지문(401)이다. 2번째 퀴즈 문제 풀이시에는 도 4a의 문제를 문제 번호 및 지문 번호를 랜덤하게 변경하여 재배열한 문제(410)가 추출되어 출제된다(도 4b 참조). 이 경우 정답은 3번(411)으로 재배열되어 있다. 각각의 객관식 지문 식별자(210)에 연결된 정답 식별자(220)를 이용하여 객관식 지문 번호의 순서에 상관없이 정답은 쉽게 파악될 수 있다.

다른 실시예에서는, 2번째 퀴즈 문제 풀이시에는 도 4a의 문제를 변형하여문제로 바꿔 미리 저장하고 있는 평가 문제 데이터베이스(140)로부터 문제를 추출하여 출제할 수도 있다. 예를 들어, "나프탈렌은 물에 녹지 않는 고체 물질이다(문제)"와 같이 출제할 수 있다.

다른 실시예서는, 2번째 퀴즈 문제 풀이시에는 도 4a의 문제를 변형하여 주관식 문제로 바꿔 미리 저장하고 있는 평가 문제 데이터베이스(140)로부터 문제를 추출하여 출제할 수도 있다. 예를 들어, "물에 녹지 않는 고체 물질은?"과 같이 출제할 수 있다.

도 5a 내지 도 5c는 본 발명의 바람직한 일 실시예에 따른 온라인 학습 평가방법을 설명하는 순서도이다. 도 6은 본 발명의 바람직한 일 실시예에 따른 사용자가 질문하기를 클릭한 경우 답변 처리 과정을 설명하는 순서도이고, 도 7은 사용자가 상세 보기를 클릭한 경우 상세 보기 학습 과정을 설명하는 순서도이다.

도 5a 내지 도 5c를 참조하면, 사용자가 강좌를 선택하면 강의가 시작되고(단계 501), 강의 도중 사용자(110)가 질문하기(320)를 클릭하였는지를 판단하여(단계 503), 질문하기를 클릭한 경우에는 강의를 중단하고 질문하기(320)를 클릭한 사용자로부터 질문을 입력받아 서버(100)에서 수신하여 질문에 대한 답변을 처리한다(단계 505). 질문하기를 클릭하지 않은 경우에는 단계 507을 수행한다.

도 6을 참조하여 답변 처리 과정을 설명한다. 먼저, 사용자가 질문하기를클릭하면(601), 강의를 중단하고 사용자에게 질문 양식(form)을 제공한다(단계 603). 사용자로부터 질문 내용을 입력받아 질문 입력이 완료되었음을 나타내는 질문 입력 완료 버튼이 눌리면(단계 605) 강좌를 다시 진행하고(단계 607), 서버(100)에서 질문을 수신하여(단계 609) 강사에게 질문 내용을 전송한다(단계 611). 또는, 질문 내용은 직접 서버(100)에서 수신하여 관리자가 질문 내용에 대한 답변을 입력할 수도 있다.

강좌 진행 도중에 답변을 할 것인지를 판단하고(단계 613), 진행 도중에 답변할 경우에는 강좌 진행 도중에 질문에 대한 답변을 사용자에게 제공하고(단계 615), 강좌 진행 화면으로 복귀한다(단계 617). 강좌 진행 도중에 답변하지 않을 경우에는 강사가 질문을 강좌 끝난 후에 답변하여(단계 619), 강좌 끝난 후에 사용자들이 볼 수 있도록 게시판에 디스플레이 할 수 있다(단계 621).

사용자(110)가 퀴즈 풀이(310) 버튼을 클릭하였는지를 판단하여(단계 507), 퀴즈 풀이(310) 버튼을 클릭하지 않은 경우에는 강의가 끝나면서 종료한다. 사용자(110)가 퀴즈 풀이(310) 버튼을 클릭한 경우에는 사용자(110)가 현재 강좌를 다 들었는지를 확인하여(단계 509), 강의를 아직 다 수강하지 않은 경우에는 온라인 학습 강좌를 재수강 해야만 퀴즈를 풀 수 있다는 권고 메시지를 출력하고 다시 강의로 돌아가도록 한다(단계 511).

상기 판단 결과, 사용자(110)가 강의를 다 수강한 경우에는 사용자가 풀어본 평가 문제 관련 정보를 읽어들인다(단계 513). 평가 문제 관련 정보는 사용자 개인 정보 데이터베이스(120)에 저장된 사용자가 풀어본 평가 문제 종류(305) 및 상기 풀어본 평가 문제의 각 문항별 풀어본 회수(307)를 포함한다.

풀어본 평가 문제 종류(305) 및 상기 풀어본 평가 문제의 각 문항별 풀어본 회수(307)를 참조하여 사용자가 선택한 퀴즈(평가 문제)가 이전에 풀어본 평가 문제인지를 판단한다(단계 515).

상기 판단 결과, 이전에 풀어본 적이 있는 퀴즈이면 아직 풀어 보지 않은 유형의 평가 문제를 선택하여 추출한다. 예를 들어, 객관식 문제의 경우에는 평가 문제의 지문 번호를 랜덤하게 재배열한 변형된 문제를 추출할 수 있다. 또는 평가 문제의 문항 번호도 랜덤하게 재배열하여 출제 될 수도 있다. 상기 판단 결과, 이전에 풀어본 적이 없는 퀴즈이면 바로 단계 519를 수행한다.

단계 519에서는 평가 문제를 읽어들여 평가 문항 및 각각의 평가 문항별 지문을 사용자(110)에게 전송하여 출력한다.

바람직하게는, 퀴즈 문제 전송 시에 온라인 교육 서비스 제공 서버(100)에서 완전 학습을 위해 평가 문제 데이터베이스(140)의 문항별 권장 풀이 횟수(220)가 1보다 큰 경우에는 사용자 개인 정보 데이터베이스(120)의 풀어본 평가 문제의 퀴즈의 각 문항별 풀어본 횟수(307)를 참조하여 각 문항별로 권장 풀이 횟수에 도달하지 않은 문항만을 사용자에게 전송하도록 할 수 있다.

퀴즈 풀이가 진행되면서 사용자로부터 각 문항마다의 정답을 입력받고(단계 521), 각각의 평가 문항 또는 전체 문항에 대해 정답을 클릭하는데 걸린 시간을 산출한다(523). 바람직하게는 퀴즈 풀이와 동시에 사용자(110)에게 문제 풀이 동안에는 집중할 것을 요구하는 메시지를 출력하고, 문제의 난이도에 따라 미리 정해진각각의 문제의 문제 풀이 제한 시간 및 전체 문제 풀이 제한 시간을 출력할 수 있다. 상기 정답을 클릭하는데 걸린 시간, 즉, 문제 푸는데 걸린 시간은 사용자(110)가 퀴즈 문제를 읽어보지도 않고 정답을 무작위로 고른다거나 문제는 풀지 않고 다른 행동을 하는 경우를 방지하기 위해 후술할 정답률 산정에 의한 제한과 함께 사용될 수 있다.

정답 클릭시간은 상기 문제 풀이 제한 시간을 중심으로 정상적인 학생이 문제 푸는데 걸린 시간을 통계적으로 산정하여 확률적으로 구한 최저 임계치와 최고 임계치에 의해 제한된다.

상기 정답 클릭 시간이 소정 시간 범위 내에 들어가는지 판단하여(단계 525), 소정 범위 내에 들어가지 않는 경우- 상기 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴 경우-에는 사용자(110)에게 온라인 학습을 재수강 하거나 또는 퀴즈를 다시 보도록 하는 권고 메시지를 출력한다(단계 527).

상기 판단 결과, 소정 시간 범위 내에 들어가는 경우-소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우-에는 사용자(110)가 입력한 정답을 평가하여 정답률을 포함한 평가 결과를 산출한다(단계 527).

정답률이 임계 정답률보다 작은지를 판단한다(단계 531). 여기서, 임계 정답률이란, 정상적으로 강의를 수강한 학생을 기준으로 퀴즈를 보았을 때 얻을 수 있는 정답률을 확률적으로 미리 정한 것이다.

상기 판단 결과, 정답률이 임계 정답률보다 작은 경우에는 상기 권고 메시지를 출력하고(단계 533) 단계 503으로 되돌아간다.

상기 판단 결과, 정답률이 임계 정답률보다 작지 않은 경우에는 정답률 등의 전체 평가 결과를 학생, 학부모 등의 사용자(110)에게 통보한다(단계 535).

전체 평가 결과는 정답 클릭 시간, 정답률의 점수화를 통해 얻어지며, 상세 보기 평가 결과, 질문 내용 보기 평가 결과 및 개인 지도 평가 결과도 반영할 수 있다.

상기 통보는 인터넷을 통하여 이메일로 전송할 수도 있고, 무선 통신 네트워크를 이용하여 SMS 단문 메시지를 이용하여 이동중인 학부모에게 전송할 수도 있다.

도 7을 참조하면, 사용자가 상세 보기(840)를 클릭하면(단계 701), 사용자에게 상세 보기 학습 컨텐츠를 제공한다(단계 703). 사용자가 상세 보기 학습에 머무른 시간을 산출하여(단계 705), 상기 산출된 머문 시간을 점수화하여 상세 보기에 대한 평가 결과를 산출한 후(단계 707), 강좌 진행 화면으로 복귀한다(단계 709). 상기 상세 보기에 대한 평가 결과는 전체 평가 결과에 반영된다.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

본 발명에 따른 인터넷을 통한 온라인 교육 서비스 제공 방법은 인터넷을 통한 원격 교육 서비스 제공 웹사이트를 이용하는 초, 중, 고등학생 등의 이용자들이 온라인 강의를 제대로 듣지 않은 경우 온라인 학습 프로그램을 재수강하거나 다시 시험을 보도록 함으로써, 종래의 온라인 강의의 학습 효율이 떨어지는 문제점을 개선하여 학습 효율을 높일 수 있는 효과가 있다.

또한, 본 발명은 이용자들이 온라인 학습 프로그램을 듣지 않은 경우에는 객관식 퀴즈 등의 온라인 평가를 받을 수 없도록 하여 온라인 학습 프로그램을 제대로 듣지 않고 형식적으로 테스트를 치르는 것을 차단할 수 있는 효과도 있다.

또한, 본 발명은 온라인 학습에 따른 평가시 객관식 지문의 순서를 출제시마다 변경하도록 함으로써 온라인 학습 프로그램을 이용하는 이용자들이 반복된 퀴즈 문제 출제로 인해 객관식 지문으로 된 정답 번호를 외우는 것을 방지할 수 있는 효과도 있다.

또한, 본 발명은 이용자가 강의 도중 질문을 하거나, 강의 내용에 대한 심화 학습을 하거나, 강사로부터의 궁금한 사항에 대해 개인 지도를 신청함으로써 수강한 강좌에 대한 완전 학습이라는 목표를 달성하기 위한 기반을 제공할 수 있는 효과가 있다.

또한, 본 발명은 이용자가 강의 도중 질문한 빈도, 질문한 내용을 반영하여 점수화하거나, 강의 내용에 대한 심화 학습 여부, 강사로부터의 개인 지도를 통한 학습 여부 등을 소정 기준에 따라 점수화함으로써 이용자가 적극적으로 완전 학습을 위해 노력한 정도를 객관적인 점수화하여 학부모가 자녀의 학습 기록 및 학습 태도를 알 수 있도록 하는 효과가 있다.

Claims (29)

1. 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서,

   로그인한 사용자로부터 온라인 강좌를 선택받는 단계;

   상기 사용자로부터 상기 온라인 강좌에 상응하는 퀴즈 풀이 선택 신호가 입력된 경우 상기 선택된 온라인 강좌를 상기 사용자가 수강하였는지를 판단하는 단계;

   상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강하지 않은 경우에는 상기 사용자에게 소정의 권고 메시지를 전송하고 온라인 강의를 계속 진행하거나 재시작 하는 단계;

   상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강한 경우에는 상기 온라인 강좌에 상응하여 미리 정해진 복수 유형의 평가 문제 중에서 상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계;

   상기 사용자에게 상기 추출한 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계;

   상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계;

   상기 사용자가 정답 클릭하는데 걸린 시간 및 정답률을 산출하여 전체 평가 결과를 산출하는 단계 및

   상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계

   를 포함하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
2. 제1항에 있어서,

   상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계는

   상기 사용자가 풀어본 평가 문제 종류 및 상기 풀어본 평가 문제의 각 문항별 풀어본 회수를 포함하는 평가 문제 관련 정보를 읽어들이는 단계;

   상기 풀어본 평가 문제 종류를 참조하여 상기 사용자가 선택한 강좌의 퀴즈 풀이가 이미 풀어본 평가 문제인지를 판단하는 단계;

   상기 판단 결과, 이미 풀어본 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 회수가 1이상인 문항을 제외한 문항들로부터 소정 개수의 문항을 선택하여 추출하는 단계 및

   상기 판단 결과, 이미 풀어보지 않은 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 추출하는 단계

   를 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
3. 제2항에 있어서,

   상기 복수 유형의 평가 문제는

   상기 평가 문제의 각각의 문항마다 동일한 내용의 질의문에 대하여 질의문 형식을 정오 문제, 객관식 문제, 주관식 문제 및 괄호 넣기 문제 중 적어도 하나로 한 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
4. 제3항에 있어서,

   상기 객관식 문제는

   동일한 내용의 질의문에 대하여 객관식 지문의 순서를 랜덤하게 변경하여 생성한 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
5. 제2항에 있어서,

   상기 소정 개수의 문항을 선택하여 추출하는 단계는

   상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 상기 선택된 문항의 순서를 랜덤하게 변경하여 생성한 평가 문제를 추출하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
6. 제2항에 있어서,

   상기 사용자에게 상기 평가 문제를 전송하는 단계는

   상기 추출된 문항 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 횟수가 문항별 권장 풀이 횟수가 되는지 여부를 판단하여, 상기 문항별 권장 풀이 횟수에 미달되는 문항만을 전송하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
7. 제6항에 있어서,

   상기 문항별 권장 풀이 횟수는

   풀어본 평가 문제의 각 문항별 틀린 횟수를 참조하여 틀린 횟수가 증가할 수록 그에 상응하여 증가되는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
8. 제1항에 있어서,

   상기 사용자가 정답 클릭하는데 걸린 시간 및 정답률을 산출하여 평가 결과를 산출하는 단계는

   각각의 평가 문항별 또는 전체 평가 문항에 대해 정답을 클릭하는데 걸린 시간을 산출하는 단계;

   상기 산출된 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴지를 판단하는 단계;

   상기 판단 결과, 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 또는 온라인 학습에 대한 재평가를 받도록 하는 메시지를 전송하는 단계;

   상기 판단 결과, 소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우에는 상기 사용자의 상기 평가 문제에 대한 정답률을 산출하는 단계;

   상기 산출된 정답률을 분석하여 정답률이 소정 임계치 이하인지를 판단하는 단계;

   상기 판단 결과, 상기 정답률이 소정 임계치 이하 인 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 온라인 학습에 대한 재평가를 보도록 하는 메시지를 전송하는 단계 및

   상기 판단 결과, 상기 정답률이 소정 임계치보다 큰 경우에는 상기 정답률을 이용한 전체 평가 결과를 산출하는 단계

   를 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
9. 제1항에 있어서,

   상기 사용자의 학부모에게의 통보는

   이메일을 이용하여 통보하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
10. 제1항에 있어서,

    상기 퀴즈 기반 온라인 교육 서비스 제공 방법은

    사용자로부터 질문하기 선택신호를 입력받은 경우에 상기 질문하기 선택신호를 입력한 사용자로부터 질문 내용을 네트워크를 통하여 입력받는 단계 및

    상기 입력된 질문 내용에 대한 답변 처리 과정을 수행하는 단계

    를 더 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
11. 제10항에 있어서,

    상기 답변 처리 과정은

    상기 입력된 질문 내용을 상기 온라인 강좌의 강사에게 전송하는 단계;

    상기 강사로부터 강좌 진행 중에 답변을 입력받은 경우 상기 질문한 사용자를 포함하는 복수의 사용자에게 상기 답변을 전송하는 단계 및

    상기 강사로부터 강좌 종료 후에 답변을 입력받은 경우 상기 질문에 대한 답변을 상기 온라인 강좌가 종료된 후에 상기 복수의 사용자에 제공하는 단계

    를 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
12. 제1항에 있어서,

    상기 퀴즈 기반 온라인 교육 서비스 제공 방법은

    상기 사용자로부터 상세 보기 선택 신호를 입력받은 경우에 상기 사용자에게 상기 온라인 강좌의 심화 학습을 위한 컨텐츠를 제공하는 단계 및

    상기 사용자가 상기 상세 보기 학습에 머무른 시간을 산출하고, 상기 산출된 머무른 시간에 소정의 가중치를 부여하여 상세 보기 학습에 대한 평가 결과를 산출하여 상기 전체 평가 결과에 반영하는 단계

    를 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
13. 제1항에 있어서,

    상기 퀴즈 기반 온라인 교육 서비스 제공 방법은

    상기 사용자로부터 질문 내용 보기 선택 신호를 입력받은 경우에 상기 사용자에게 상기 온라인 강좌에 대한 질문 내용 및 상기 질문 내용에 상응하는 답변 내용 컨텐츠를 제공하는 단계 및

    상기 사용자가 상기 질문 내용 보기 학습에 머무른 시간을 산출하고, 상기 산출된 머무른 시간에 소정의 가중치를 부여하여 질문 내용 보기 학습에 대한 평가 결과를 산출하여 상기 전체 평가 결과에 반영하는 단계

    를 더 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
14. 제1항에 있어서,

    상기 퀴즈 기반 온라인 교육 서비스 제공 방법은

    상기 온라인 강좌에 대한 개인 지도를 받기 위한 개인 지도 선택 신호를 상기 사용자로부터 입력받은 경우에 상기 사용자로부터 적어도 질문 내용 및 개인 지도 요청 부분 중 적어도 하나를 입력받아 소정의 강사에게 이메일로 전송하기 위한 이메일 쓰기 창을 제공하는 단계 및

    상기 사용자가 상기 개인 지도를 위한 이메일을 통하여 질문한 횟수, 질문 내용의 길이 및 상기 이메일을 작성하는데 걸린 시간 중 적어도 하나에 가중치를 부여하여 상기 개인 지도를 통한 학습에 대한 평가 결과를 산출하여 상기 전체 평가 결과에 반영하는 단계

    를 더 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
15. 제12항 내지 제14항 중 어느 한 항에 있어서,

    상기 퀴즈 기반 온라인 교육 서비스 제공 방법은

    상기 상세 보기 학습에 머무른 시간, 상기 질문 내용 보기 학습에 머무른 시간, 상기 개인 지도를 위한 이메일을 통하여 질문한 횟수, 질문 내용의 길이 및 상기 이메일을 작성하는데 걸린 시간 중 적어도 하나를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계

    를 더 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
16. 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서,

    로그인한 사용자로부터 온라인 강좌를 선택받는 단계;

    상기 사용자로부터 상기 온라인 강좌에 상응하는 퀴즈 풀이 선택 신호가 입력된 경우 상기 선택된 온라인 강좌를 상기 사용자가 수강하였는지를 판단하는 단계;

    상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강하지 않은 경우에는 상기 사용자에게 소정의 권고 메시지를 전송하고 온라인 강의를 계속 진행하거나 재시작 하는 단계;

    상기 판단 결과, 상기 선택된 온라인 강좌를 상기 사용자가 수강한 경우에는 상기 온라인 강좌 및 상기 사용자의 문제 풀이 횟수에 상응하는 미리 정해진 평가 문제를 읽어들이는 단계;

    상기 사용자에게 상기 읽어들인 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계;

    상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계;

    상기 사용자가 정답 클릭하는데 걸린 시간을 산출하여 전체 평가 결과를 산출하는 단계 및

    상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계

    를 포함하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
17. 제16항에 있어서,

    상기 사용자가 정답 클릭하는데 걸린 시간을 산출하여 전체 평가 결과를 산출하는 단계는

    각각의 평가 문항별 또는 전체 평가 문항에 대해 정답을 클릭하는데 걸린 시간을 산출하는 단계;

    상기 산출된 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴지를 판단하는 단계;

    상기 판단 결과, 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 또는 온라인 학습에 대한 재평가를 받도록 하는 메시지를 전송하는 단계 및

    상기 판단 결과, 소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우에는 상기 산출된 정답 클릭 시간을 이용하여 전체 평가 결과를 산출하는 단계

    를 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
18. 제17항에 있어서,

    상기 퀴즈 기반 온라인 교육 서비스 제공 방법은

    상기 사용자의 상기 평가 문제에 대한 정답률을 산출하는 단계;

    상기 산출된 정답률을 분석하여 상기 정답률이 소정 임계치 이하인지를 판단하는 단계;

    상기 판단 결과, 상기 정답률이 소정 임계치 이하 인 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 온라인 학습에 대한 재평가를 보도록 하는 메시지를 전송하는 단계 및

    상기 판단 결과, 상기 정답률이 소정 임계치보다 큰 경우에는 상기 정답률을 산출하여 전체 평가 결과를 산출하는 단계

    를 더 포함하는 것을 특징으로 하는 퀴즈 기반 온라인 교육 서비스 제공 방법.
19. 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서,

    로그인한 사용자로부터 온라인 강좌를 선택받는 단계;

    상기 사용자로부터 상기 온라인 강좌에 상응하는 퀴즈 풀이 선택 신호를 수신하는 단계;

    상기 온라인 강좌에 상응하여 미리 정해진 복수 유형의 평가 문제 중에서 상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계;

    상기 사용자에게 상기 추출한 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계;

    상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계;

    상기 사용자가 정답 클릭하는데 걸린 시간 및 정답률을 산출하여 전체 평가 결과를 산출하는 단계 및

    상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계

    를 포함하는 다양한 문제 추출 방식에 기반한 온라인 교육 서비스 제공 방법.
20. 제19항에 있어서,

    상기 사용자의 문제 풀이 횟수에 상응하도록 평가 문제를 추출하는 단계는

    상기 사용자가 풀어본 평가 문제 종류 및 상기 풀어본 평가 문제의 각 문항별 풀어본 회수를 포함하는 평가 문제 관련 정보를 읽어들이는 단계;

    상기 풀어본 평가 문제 종류를 참조하여 상기 사용자가 선택한 강좌의 퀴즈 풀이가 이미 풀어본 평가 문제인지를 판단하는 단계;

    상기 판단 결과, 이미 풀어본 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 회수가 1이상인 문항을 제외한 문항들로부터 소정 개수의 문항을 선택하여 추출하는 단계 및

    상기 판단 결과, 이미 풀어보지 않은 평가 문제인 경우 상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 추출하는 단계

    를 포함하는 것을 특징으로 하는 다양한 문제 추출 방식에 기반한 온라인 교육 서비스 제공 방법.
21. 제20항에 있어서,

    상기 복수 유형의 평가 문제는

    상기 평가 문제의 각각의 문항마다 동일한 내용의 질의문에 대하여 질의문 형식을 정오 문제, 객관식 문제, 주관식 문제 및 괄호 넣기 문제 중 적어도 하나인 것을 특징으로 하는 다양한 문제 추출 방식에 기반한 온라인 교육 서비스 제공 방법.
22. 제21항에 있어서,

    상기 객관식 문제는

    동일한 내용의 질의문에 대하여 객관식 지문의 순서를 랜덤하게 변경하여 생성한 것을 특징으로 하는 다양한 문제 추출 방식에 기반한 온라인 교육 서비스 제공 방법.
23. 제20항에 있어서,

    상기 소정 개수의 문항을 선택하여 추출하는 단계는

    상기 복수 유형의 평가 문제 중에서 소정 개수의 문항을 선택하여 상기 선택된 문항의 순서를 랜덤하게 변경하여 생성한 평가 문제를 추출하는 것을 특징으로 하는 다양한 문제 추출 방식에 기반한 온라인 교육 서비스 제공 방법.
24. 제20항에 있어서,

    상기 사용자에게 상기 평가 문제를 전송하는 단계는

    상기 추출된 문항 중에서 상기 풀어본 평가 문제의 각 문항별 풀어본 횟수가 문항별 권장 풀이 횟수가 되는지 여부를 판단하여, 상기 문항별 권장 풀이 횟수에 미달되는 문항만을 전송하는 것을 특징으로 하는 다양한 문제 추출 방식에 기반한 온라인 교육 서비스 제공 방법.
25. 복수의 사용자, 상기 복수의 사용자와 네트워크를 통하여 결합된 온라인 교육 서비스 제공 서버에서 수행되는 온라인 교육 서비스 제공 방법에 있어서,

    온라인 강좌에 대한 평가 문제를 추출하는 단계;

    상기 사용자에게 상기 추출한 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계;

    상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계;

    각각의 평가 문항별 또는 전체 평가 문항에 대해 정답을 클릭하는데 걸린 시간을 산출하는 단계;

    상기 산출된 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴지를 판단하는 단계;

    상기 판단 결과, 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 또는 온라인 학습에 대한 재평가를 받도록 하는 메시지를 전송하는 단계;

    상기 판단 결과, 소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우에는 상기 사용자의 상기 평가 문제에 대한 정답률을 산출하는 단계;

    상기 산출된 정답률을 분석하여 정답률이 소정 임계치 이하인지를 판단하는 단계;

    상기 판단 결과, 상기 정답률이 소정 임계치 이하 인 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 온라인 학습에 대한 재평가를 보도록 하는메시지를 전송하는 단계;

    상기 판단 결과, 상기 정답률이 소정 임계치보다 큰 경우에는 상기 정답률을 이용한 전체 평가 결과를 산출하는 단계 및

    상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계

    를 포함하는 온라인 학습 평가 방법.
26. 온라인 교육 서비스 제공 방법을 수행하기 위하여 디지털 처리 장치에 의해 실행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있으며 디지털 처리장치에 의해 판독될 수 있는 기록 매체에 있어서,

    상기 온라인 교육 서비스 제공 방법이 제1항 내지 제24항에 기재된 온라인 교육 서비스 제공 방법 중 어느 하나를 포함하는 것을 특징으로 하는 기록 매체.
27. 온라인 학습 평가 방법을 수행하기 위하여 디지털 처리 장치에 의해 실행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있으며 디지털 처리장치에 의해 판독될 수 있는 기록 매체에 있어서,

    상기 온라인 학습 평가 방법이,

    온라인 강좌에 대한 평가 문제를 추출하는 단계;

    상기 사용자에게 상기 추출한 평가 문제를 디스플레이하기 위하여 네트워크를 통하여 상기 사용자에게 상기 평가 문제를 전송하는 단계;

    상기 사용자로부터 상기 평가 문제에 대한 사용자의 정답을 수신하는 단계;

    각각의 평가 문항별 또는 전체 평가 문항에 대해 정답을 클릭하는데 걸린 시간을 산출하는 단계;

    상기 산출된 정답 클릭 시간이 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴지를 판단하는 단계;

    상기 판단 결과, 소정의 최저 임계 시간보다 짧거나 소정의 최고 임계 시간보다 긴 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 또는 온라인 학습에 대한 재평가를 받도록 하는 메시지를 전송하는 단계;

    상기 판단 결과, 소정의 최저 임계 시간보다 길고 소정의 최고 임계 시간보다 짧은 경우에는 상기 사용자의 상기 평가 문제에 대한 정답률을 산출하는 단계;

    상기 산출된 정답률을 분석하여 정답률이 소정 임계치 이하인지를 판단하는 단계;

    상기 판단 결과, 상기 정답률이 소정 임계치 이하 인 경우에는 상기 사용자에게 상기 온라인 학습을 재수강 하거나 온라인 학습에 대한 재평가를 보도록 하는 메시지를 전송하는 단계;

    상기 판단 결과, 상기 정답률이 소정 임계치보다 큰 경우에는 상기 정답률을 이용한 전체 평가 결과를 산출하는 단계 및

    상기 전체 평가 결과를 상기 사용자 또는 상기 사용자의 학부모에게 통보하는 단계

    를 포함하는 것을 특징으로 하는 기록 매체.
28. 프로그램이 저장되어있는 메모리;

    상기 메모리에 결합되어 상기 프로그램을 실행하는 프로세서

    를 포함하되,

    상기 프로세서는 상기 프로그램에 의해 제1항 내지 제24항에 기재된 온라인 교육 서비스 제공 방법 중 어느 하나를 실행하는 온라인 교육 서비스 제공 시스템.
29. 프로그램이 저장되어있는 메모리;

    상기 메모리에 결합되어 상기 프로그램을 실행하는 프로세서

    를 포함하되,

    상기 프로세서는 상기 프로그램에 의해 제25항에 기재된 온라인 학습 평가 방법을 실행하는 온라인 학습 평가 시스템.