KR20060007608A - 학습 평가 클리닉 서비스 방법 및 그 시스템 - Google Patents

학습 평가 클리닉 서비스 방법 및 그 시스템 Download PDF

Info

Publication number
KR20060007608A
KR20060007608A KR1020040056451A KR20040056451A KR20060007608A KR 20060007608 A KR20060007608 A KR 20060007608A KR 1020040056451 A KR1020040056451 A KR 1020040056451A KR 20040056451 A KR20040056451 A KR 20040056451A KR 20060007608 A KR20060007608 A KR 20060007608A
Authority
KR
South Korea
Prior art keywords
analysis
area
learning
test
advice
Prior art date
Application number
KR1020040056451A
Other languages
English (en)
Other versions
KR100625120B1 (ko
Inventor
조동기
Original Assignee
조동기
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 조동기 filed Critical 조동기
Priority to KR1020040056451A priority Critical patent/KR100625120B1/ko
Publication of KR20060007608A publication Critical patent/KR20060007608A/ko
Application granted granted Critical
Publication of KR100625120B1 publication Critical patent/KR100625120B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Primary Health Care (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 인터넷을 이용한 학습 평가 클리닉 서비스 방법 및 그 시스템을 제공하기 위한 것으로서, 각 문항별로 그 속성들을 미리 분석하고 분류하여 문제은행 DB를 구축하고, 분류된 속성에 매칭되게 진단 및 조언DB 및 학습자료 DB를 구축하여 두고, 학습자가 온/오프라인을 통해 시험을 보고 그 결과에 대한 답안을 입력하면, 이를 채점하여 분류 영역에 의거하여 종합분석과, 부문별 강약이 나타나도록 결과파일을 분석하며, 취약부문별 분석을 통해서 자동으로 해당학습자의 성적 분석 및 부문별 학습계획과 진단 및 조언 등의 클리닉 정보를 생성하여 제공하도록 온라인 시스템을 구축하여 서비스하도록 구성함에 특징이 있다.
학습, 평가, 클리닉, 인터넷, 언어영역, 분석, 컨설팅, 국어, 진단, 학력평가

Description

학습 평가 클리닉 서비스 방법 및 그 시스템{Service Method and system for studying evaluation and clinic}
도 1은 본 발명에 의한 학습 평가 클리닉 서비스 시스템의 구성도
도 2는 본 발명에 의한 학습 평가 클리닉 서비스 방법을 보인 흐름도
도 3은 본 발명에 의한 시험 답안정보 입력 방법 과정을 설명하기 위한 흐름도
도 4a는 본 발명에 의한 종합분석 과정을 설명하기 위한 설명도.
도 4b는 본 발명에 의한 종합 분석 과정의 상세 흐름도
도 4c 및 도 4d는 본 발명에 의한 종합 분석 결과를 보여주는 리포트 예시도
도 5a는 본 발명에 의한 결과파일 분석과정 설명도
도 5b는 결과파일 분석 리포트 예시도
도 6a는 본 발명에 의한 취약 부문별 분석과정을 설명하기 위한 설명도
도 6b 및 도 6c는 본 발명에 의한 취약부문 제재별 분석 및 학습대책에 대한 클리닉 리포트 예시도
도 6d는 제재와 행동영역 교차분석 리포트의 예시도
도 7은 본 발명에 의한 클리닉 리포트 생성을 설명하기 위한 설명도
<도면의 주요부분에 대한 부호의 설명>
10 : 클라이언트 20 : 인터넷
100 : 웹서비스 서버 210 : 회원 관리부
220 : 시험문제 출제부 230 : 종합 분석부
240 : 결과파일 분석부 250 : 취약부문 분석부
260 : 클리닉 리포트 생성부 310 : 회원 DB
320 : 문제은행 DB 330 : 진단 및 조언 DB
340 : 학습자료 DB
본 발명은 학습 평가 클리닉 서비스 방법 및 그 시스템에 관한 것으로서, 특히, 언어영역에 대한 시험 결과에 대해 영역별 유형별로 분석하여 분석결과와 심화학습을 위한 정보등을 제공하여 개인별 그룹별 클리닉 서비스를 할 수 있도록 한 학습 평가 클리닉 서비스 방법 및 그 시스템에 관한 것이다.
최근 인터넷 사용자 인구의 급속한 증가와 더불어 일선 교육 현장에서도 인터넷을 이용한 새로운 학습 방안들을 제시하고 있으며, 이로 인해 인터넷상에 학습 관련 사이트들이 급성장하고 있는 추세이다.
그러나, 현재 운영중인 인터넷 시험 관련 사이트들은 단순히 시험 문제들을 사용자 PC에 다운로드받아 푼 후, 그 결과를 상기 인터넷 시험 관련 사이트로 전송하고 이를 채점하도록 하는 방식을 채택하고 있으며, 상기 사이트 관리자는 그 채 점 결과에 의해 개인의 성적을 단순 누계하여 제공하고 있다.
그러나, 시험 응시자의 시험 결과에 대하여 응시자 전체의 전반적인 자료를 제공하지 않고, 개인의 성적만을 단순 누계하여 제공하도록 함으로써, 시험 응시자가 자신의 실력에 대한 객관적이고, 포괄적, 심층적, 세부적, 개별화된 평가를 할 수 없다는 단점이 있었다.
또한, 학습자는 자신의 학습달성도를 효율적이면서도 객관적이고, 체계적 및 과학적으로 평가받고자 하는 욕망이 있다. 특별히, 수험생들은 자신이 잘하는 영역과 부족한 영역등을 객관적인 평가와 진단이 필요하고, 이에 의해 심화학습으로 보충할 수 있도록 영역별 분야별 클리닉을 필요로 한다.
그렇지만, 학교나 학원등에서도 학생 개인별로 각각의 영역별 분석이나 평가 및 이에 대한 클리닉등을 제공하기 어렵고, 이를 평가 및 진단하기 위한 수단이 없었다.
본 발명은 상기와 같은 학습평가방법의 문제점을 개선하여, 학습자 개인별 및 그룹별로 시험 결과에 대해 평가를 하고, 각 영역별 분석 및 그 분석결과에 대한 클리닉 정보를 서비스 함으로써 학습 효율을 향상시킬 수 있도록 하는 학습 평가 클리닉 서비스 방법 및 그 시스템을 제공하기 위한 것이다.
본 발명은, 학습자의 시험 채점 결과에 의해 종합 성적표와 등급을 부여하여 객관적인 평가 진단을 하고, 영역별 강약점을 분석하여 학습 대책을 클리닉 정보로 서 서비스 하도록 하기 위한 것이다.
또한, 본 발명은 개인별 학습 평가 정보를 기간별로 비교 분석하여 성적 변화 추이를 제공하고, 학습자 본인과 비교되는 다른 학습자들의 성적 추이를 함께 비교 정보로서 제공하며, 진단 및 조언등을 클리닉 정보로서 제공함으로써 학습자의 학습 의욕을 더욱 높일 수 있도록 하기 위한 것이다.
또한, 본 발명은 학습자의 영역별 오답 노트와 오답 클리닉 서비스를 제공함으로써 유사문제의 학습 효율을 높일 수 있도록 하기 위한 것이다.
또한, 본 발명은 학습자의 평가 분석에 의해 취약분야 및 심화학습 분야에 대한 시험 문제와 학습 정보를 개인별 맞춤 정보로서 서비스를 할 수 있도록 하기 위한 것이다.
또한, 상기한 본 발명은 온라인 서비스와 더불어 리포트를 오프라인으로 함께 제공하여 학습자가 집중적이고 더욱 효과적으로 학습 평가 클리닉을 활용할 수 있도록 하기 위한 것이다.
본 발명은, 각 문항별로 그 속성들을 미리 분석하고 분류하여 문제은행 DB를 구축하고, 분류된 속성에 매칭되게 진단 및 조언DB 및 학습자료 DB를 구축하여 두고, 학습자가 온/오프라인을 통해 시험을 보고 그 결과에 대한 답안을 입력하면, 이를 채점하여 분류 영역에 의거하여 종합분석과, 부문별 강약이 나타나도록 결과파일을 분석하며, 취약부문별 분석을 통해서 자동으로 해당학습자의 성적 분석 및 부문별 학습계획과 진단 및 조언 등의 클리닉 정보를 생성하여 제공하도록 온라인 시스템을 구축하여 서비스하도록 구성함에 특징이 있다.
본 발명은 시험문제를 문제은행 DB에서 임의의 시험 조건에 맞추어서 시험문제를 생성하여 온/오프라인을 통해 제공할 수 있고, 문제은행 DB에 없는 외부 시험에 대해서는 각 문항별로 임의로 정의한 분류 기준에 의거 내용영역 및 평가영역과 교차영역 등에 대해 분류하고, 그 진단및 조언과 학습자료 정보등을 매칭하도록 속성분류를 하여 두고, 시험 채점과 종합,결과파일, 취약부문등의 분석에 의해 클리닉 리포트들 생성하여 제공함에 특징이 있다.
본 발명은 문제은행 DB를 구축함에 있어서, 문제와, 문항별로 평가영역을 분류한 속성과, 학습자료 링크정보와, 문제별 강의 정보와, 문제사용돗수와, 출제정보등을 문항별 정보로서 분류하여 데이터베이스로 관리함에 특징이 있다.
본 발명은, 학습자들을 개인 및 그룹으로 회원가입하여 관리하고 시험문제 출제와 학습자의 답안 입력 및 분석결과에 따른 클리닉 리포트등을 제공하는 웹 서비스 서버와; 시험문제와 각 문항별로 평가영역을 내용영역과 행동영역으로 분류하여 각 분류영역별로 세분화된 소분류를 하고, 문제유형을 분류하여 해당 문항의 속성정보로서 코드화시켜 문제해설 및 유사문제와 난이도 등의 정보를 포함하도록 저장관리하는 문제은행 DB와; 각 문항별 및 분석 결과에 따른 영역별, 강약부문, 문제유형별등에 대해서 각각의 진단 및 조언정보를 미리 데이터베이스로 저장하여 상기 분석결과에 의해 문항속성정보들을 이용해 검색하고 조합하여 자동생성할수 있도록 관리하는 진단 및 조언 DB와; 각 문항별, 분류된 영역별, 학습자들의 학년별등등에 대해서 학습자료와 추천도서 및 강의/강좌, 해설정보등을 데이터 베이스로 관리하여 분석결과에 의해 자동으로 학습자료를 제공할 수 있도록 관리하는 학습 자료 DB와; 상기 웹서비스 서버를 통해 시험문제출제를 하고, 회원들의 답안을 입력받아 채점하여 종합 성적 분석과, 내용영역/행동영역등의 영역별 분석, 영역별 교차분석, 각 분석결과에 따른 취약부문분석등을 하는 분석 시스템과; 상기 분석 시스템에서 각 분석결과에 의해 진단 및 조언DB로부터 각각의 분석 결과와 종합 분석에 대한 진단 및 조언과, 학습 자료 DB로부터 학습자료정보를 자동 추출하여 상기 각 분석 결과별로 표/테이블, 그래프 진단 및 조언 멘트 및 추천 자료등등을 개별 맞춤 리포트로서 생성하여 상기 웹서비스 서버를 통해 제공하는 클리닉 정보 생성수단으로 학습 평가 클리닉 서비스 시스템을 구성함에 특징이 있다.
상기 분석 시스템은, 해당 학습자 또는 그룹의 평가분석정보와 시험 조건에 의거하여 시험문제를 상기 문제은행 DB로부터 추출하여 시험문제를 출제하는 시험문제출제부와; 학습자들의 시험에 대한 답안을 입력받아 상기 문제은행 DB의 정/오답에 의거하여 채점하고, 득점에 대한 종합 성적, 각 문항별로 미리 분류해둔 내용영역별 및 행동영역별 득점과 배점등에 대해 각각 강약점을 분석하는 평가영역별 분석과, 이전성적들과의 비교에 의한 성적누적분석과, 이에따른 진단 및 조언등을 자동으로 생성하여 제공하는 종합 분석부와; 상기 종합 분석부에서 채점된 각 문항별 학습자의 정오답과, 전체응시자의 정답율과, 각 문항의 답지별 반응율등과 해당문항의 평가영역별 분류정보를 제공하여 자가진단 학습계획을 세울수 있도록 정보를 제공하는 결과파일 분석부와; 상기 결과파일 분석 내용에 의거하여 각 문항별로 분류된 내용영역과 행동영역에 대한 평가영역별 및 서로 교차되는 영역을 비교분석 하여 학습자의 득점 및 비율과내점수와 소정범위의 상위득점자 점수 및 동점자의 평균등을 제공하여 학습자의 강약 부문을 확인할수 있도록 하는 취약 부문분석부를 포함하여 구성된다.
또한, 본 발명에 의한 서비스 방법은,
시험 문항별로 분류하여 각 속성 코드값을 미리 저장하여둔 임의의 시험에 대한 학습자의 답안을 입력받아 채점을 하는 채점과정과; 상기 채점 결과에 의거하여 득점한 점수에 대한 종합성적과, 해당 시험문제의 각 문항별로 미리 분류해둔 내용영역별 및 행동영역별 득점과 배점등에 대해 각각 강약점을 분석하는 평가영역별 분석과, 이전성적들과의 비교에 의한 성적누적분석과, 이에따른 진단 및 조언등을 자동으로 생성하여 제공하는 종합 분석과정과; 상기 종합 분석과정에서 각 문항별 학습자의 정오답과, 전체응시자의 정답율과, 각 문항의 답지별 반응율등과 해당문항의 평가영역별 분류정보를 제공하여 자가진단 학습계획을 세울수 있도록 하는 결과파일 분석과정과; 상기 결과파일 분석 내용에 의거하여 평가영역별로 학습자의 득점 및 비율과내점수와 소정범위의 상위득점자 점수 및 동점자의 평균등을 제공하여 학습자의 강약 부문을 확인할수 있도록 하는 취약 부문분석과정과; 상기 결과파일 분석 정보를 이용하여 각 문항별로 분류된 내용영역과 행동영역에 대해 서로 교차되는 영역을 비교분석하여 제공하는 영역별 교차분석과정과; 상기 각 분석과정에서 분석된 정보들을 표와 그래프 형식으로 각각 제공하고, 상기 문항별 속성정보와 연관하여 각 진단 및 조언을 데이터베이스로 관리하는 진단 및 조언 DB로부터 상기 각 분석결과마다 자동으로 진단 및 조언을 결과를 추출하고, 학습자료 DB에서 상기 분석 결과에 따른 취약부문든에 대한 학습 자료를 자동 추출하여 상기 결과분석 정보와 함께 클리닉 리포트를 생성하여 학습자 및 학습그룹별로 제공하는 클리닉 리포트 제공과정을 포함하여 이루어진 것을 특징으로 한다.
이하 본 발명의 실시예를 첨부된 도면을 참조해서 상세히 설명하면 다음과 같다.
도 1은 본 발명에 의한 학습 평가 클리닉 서비스 시스템의 구성도이다.
이에 도시된 바와 같이, 본 발명에 의한 학습 평가 클리닉 서비스 시스템은,
인터넷(20)등을 통해서 개인 및 그룹 회원들의 클라이언트 시스템(10)들과 연결하여 웹서비스를 통해서 시험문제 제공과 회원관리 및 개인별 및 그룹별 학습 클리닉 서비스를 제공하기 위한 웹서비스 서버(100)와; 회원별 시험 관리와 이전시험에 대한 분석정보들과 클리닉 정보를 관리하는 회원 관리부(210)와; 회원들의 정보와 회원들의 이전 시험 결과에 대한 각종 평가 및 클릭닉 정보를 저장관리하는 회원DB(310)와; 문항별로 정/오답 및 평가영역에 대해 대분류, 중분류, 소분류 및 영역별 교차정보와 학습정보등을 미리 분석 및 링크시켜 속성정보로 구축한 문제은행 DB(320)와; 각 문항별 평가 영역에 따른 내용영역, 행동영역 및 종합 성적분석에 대해 진단 및 조언과, 학습계획등에 대한 분석을 하여 상기 문제은행 DB(320)와 코드를 매칭시켜 미리 데이터 베이스로 구축하여둔 진단 및 조언 DB(330)와; 각 문항별 유사문제와 분류영역별 학습자료등을 상기 문제은행DB(320)와, 상기 진단 및 조언 DB(330)와 함께 속성 분류 코드를 매칭시켜 데이터베이스로 구축하여둔 학습자료 DB(340)와; 해당 학습자 또는 그룹의 평가분석정보와 시험 조건에 의거하여 시험문제를 상기 문제은행 DB(320)로부터 추출하여 시험문제를 출제하는 시험문제출제부(220)와; 학습자들의 시험에 대한 답안을 입력받아 상기 문제은행 DB(320)의 정/오답에 의거하여 채점하고, 득점에 대한 종합 성적, 각 문항별로 미리 분류해둔 내용영역별 및 행동영역별 득점과 배점등에 대해 각각 강약점을 분석하는 평가영역별 분석과, 이전성적들과의 비교에 의한 성적누적분석과, 이에따른 진단 및 조언등을 자동으로 생성하여 제공하는 종합 분석부(230)와; 상기 종합 분석부(230)에서 채점된 각 문항별 학습자의 정오답과, 전체응시자의 정답율과, 각 문항의 답지별 반응율등과 해당문항의 평가영역별 분류정보를 제공하여 자가진단 학습계획을 세울수 있도록 정보를 제공하는 결과파일 분석부(240)와; 상기 결과파일 분석 내용에 의거하여 각 문항별로 분류된 내용영역과 행동영역에 대한 평가영역별 및 서로 교차되는 영역을 비교분석하여 학습자의 득점 및 비율과내점수와 소정범위의 상위득점자 점수 및 동점자의 평균등을 제공하여 학습자의 강약 부문을 확인할수 있도록 하는 취약 부문분석부(250)와; 상기 각 부에서 분석된 정보들을 표와 그래프 형식으로 각각 제공하고, 아울러 각 분석결과마다 자동으로 진단 및 조언을 결과를 생성하고, 학습 자료등을 첨부하여 클리닉 리포트를 생성하여 온/오프라인을 통해 해당 학습자 및 학습그룹별로 제공하는 클리닉 리포트 생성부(260)를 포함하여 구성된다.
도 2는 본 발명에 의한 학습 평가 클리닉 서비스 방법을 보인 흐름도이다.
이에 도시된 바와 같이, 임의의 시험에 대한 학습자의 답안을 입력받아 채점을 하는 채점과정(S10)과; 상기 채점 결과에 의거하여 득점한 점수에 대한 종합성 적과, 해당 시험문제의 각 문항별로 미리 분류해둔 내용영역별 및 행동영역별 득점과 배점등에 대해 각각 강약점을 분석하는 평가영역별 분석과, 이전성적들과의 비교에 의한 성적누적분석과, 이에따른 진단 및 조언등을 자동으로 생성하여 제공하는 종합 분석과정(S20)과; 상기 종합 분석과정(S20)에서 각 문항별 학습자의 정오답과, 전체응시자의 정답율과, 각 문항의 답지별 반응율등과 해당문항의 평가영역별 분류정보를 제공하여 자가진단 학습계획을 세울수 있도록 하는 결과파일 분석과정(S30)과; 상기 결과파일 분석 내용에 의거하여 평가영역별로 학습자의 득점 및 비율과내점수와 소정범위의 상위득점자 점수 및 동점자의 평균등을 제공하여 학습자의 강약 부문을 확인할수 있도록 하는 취약 부문분석과정(S40)과; 상기 결과파일 분석 정보를 이용하여 각 문항별로 분류된 내용영역과 행동영역에 대해 서로 교차되는 영역을 비교분석하여 제공하는 영역별 교차분석과정(S50)과; 클라이언트의 요구에 의해 해당되는 학습정보등을 제공하는 클라이언트 요구에따른 맞춤 정보 제공과정(S60) 및 상기 각 분석과정에서 분석된 정보들을 표와 그래프 형식으로 각각 제공하고, 아울러 각 분석결과마다 자동으로 진단 및 조언을 결과를 생성하고, 학습 자료등을 첨부하여 클리닉 리포트를 생성하여 온/오프라인을 통해 해당 학습자 및 학습그룹별로 제공하는 클리닉 리포트 제공과정(S70)을 포함하여 이루어짐을 특징으로 한다.
본 발명의 문제은행 DB(320)에는 시험문제들을 데이터베이스로 저장하여 관리한다. 각 문항들은 문항별로 그 속성값을 부여하여 미리 분류하여 분석을 위한 속성값들을 코드값으로 저장하여 둔다. 문항별 속성값들은, 학년, 학기, 난이도, 출제년도, 객관식/주관식, 수능형/내신형, 문항별 정/오답, 배점, 문제유형, 문항 해설등등의 정보를 속성값으로 분류하여 관리한다.
본 발명의 실시예는 언어영역에 대한 학습 평가 및 진단과 조언을 하는 클리닉 서비스를 실시예로서 설명하는데, 언어영역에서 평가 영역을 내용영역과 행동영역으로 구분하고, 내용영역은 '말하기/듣기, 쓰기, 읽기(문학), 읽기(비문학)'등등으로 제재별로 분류하며, 그 세부적 분류로서 문학인 경우, '현대시, 고전시가, 현대소설, 고전산문, 수필희곡'등으로 분류하고, 비문학인 경우, '인문, 사회, 과학, 기술, 예술, 생활언어'등으로 분류한다.
행동영역은, ' 어휘/어법, 사실적 이해, 추론적 이해, 비판적 이해, 창의적 이해' 등등으로 분류한다. 상기와 같은 분류기준은 지금까지의 시험문제의 출제경향등에 비추어서 평가 기준이 되는 영역을 체계적으로 분류한 것이다.
또한 각 문항별 문제유형은, 내용확인, 내용유추..등등으로 300여가지로 분류하여 문항에서 묻고자하는 것이 어떤 유형인지를 구분하여 둔다.
그리고, 각 문항별로 유사, 심화, 보충 문항에 대한 매칭정보를 저장하는데 이는 수동으로도 코드를 부여할 수 있지만, 다른 문항들과의 연관 관계를 속성값으로 비교하여 영역별 및 문제유형별로 코드값의 비교에 의해 자동으로 생성하여 문항별로 저장관리하게 된다.
한편, 난이도는 초기에 예측 난이도를 문항 분류시에 입력하여 저장하면, 해당 문항의 출제에 따른 응답자 반응 및 응답자 정답률등에 의해 응시자 전체수준등과 비교하여 자동으로 난이도를 조정하여 관리한다.
상기와 같은 문제 은행DB(320)는 본 발명에서 핵심적인 요소로서 적용되는데, 초기에 각 문제에 대해 문항별로 분류하여 속성값들을 부여하면 자동으로 코드가 생성되어 그 코드에 의해 관리되고 그 코드를 이용해 분석과 매칭 진단 및 조언까지를 생성하여 제공하는 것이다.
한편, 진단 및 조언 DB(330)는, 상기 평가 영역별 및 문제유형등과 문항들의 속성값 및 회원의 정도등에 의해 자동으로 진단 및 조언을 생성할 수 있도록 상기 문항 속성 코드들과 매칭하여 진단 및 조언을 미리 데이터 베이스로 저장관리한다. 문항별, 제재별 내용영역과 행동영역, 학습자의 성적(백분율), 동점자들의 평균, 성적의 상승/하향등등을 고려하여 각 진단및 조언을 데이터 베이스로 관리하여 저장한다.
그리고, 학습자료 DB(340)에는, 문항별 분류정보와 회원정보에 의해 자동 생성할 수 있도록 코드를 매칭시켜두고, 각종 학습자료와 강의 추천도서, 교재 , 추천강의파일 등등을 저장관리하며, 사고영역별, 문제유형 및 학습 대책별등등으로 분류하여 저장관리한다.
이와 같이 구성되는 본 발명의 실시예에 대한 설명을 하면 다음과 같다.
도 3은 본 발명에 의한 시험 답안정보 입력 방법 과정을 설명하기 위한 흐름도이다.
먼저, 웹서비스 서버(100)에서 제공하는 웹사이트에 로그인하게 되면, 회원관리부(210)는 회원 DB(310)에서 해당회원의 정보를 읽어오고, 시험을 보기위한 조건을 선택하거나 자동 출제등을 선택하게 되면, 시험문제 출제부(220)에서 해당 회 원의 조건에 맞는 시험문제를 출제한다.
시험 문제 출제부(220)는, 문제은행DB(320)에서 정오답 DB, 문제 DB, 해설 DB등을 매칭시켜 시험문제를 출제하는데, 회원DB(310)의 회원 데이타에 의거하여 해당 회원에게 맞는 시험문제를 출제하게 된다. 여기서 회원은 개인 회원이 될수도 있고 그룹 회원이 될수도 있으며, 시험문제 출제는 회원의 조건입력에 따라 난이도나 문항수 및 범위등을 설정하여 출제할 수도 있고, 회원 DB(310)에 저장되어 있는 이전까지의 평가 정보를 활용하여 자동출제할 수도 있다. 즉, 회원의 학습진도와 취약부문 및 학습계획등에 맞추어서 맞춤형 시험출제를 할 수 있는 것이다.
시험출제는 온라인상으로 시험을 직접 치룰수 있도록 할 수 도 있지만, 그룹등의 시험을 위해 관리자 모드에서 시험문제를 출제하여 이를 오프라인으로 프린팅하여 시험을 치루게 하고, 시험 답안만 입력받도록 할 수 있다. 시험 답안을 입력하는 방법은, 오프라인으로 시험을 치루는 경우, OMR카드를 작성하여 OMR리딩 데이터 처리기를 거쳐 답안 입력을 받을 수 있고, 온라인 시험을 치룬 경우, 인터넷에서 직접 입력하여 웹서비스 서버(100)가 데이터 처리를 하여 회원별 답안 입력 데이터를 저장하여 관리하게 된다.
도 4a는 본 발명에 의한 종합분석 과정을 설명하기 위한 설명도이고, 도 4b는 본 발명에 의한 종합 분석 과정의 상세 흐름도이다. 도 4c 및 도 4d는 본 발명에 의한 종합 분석 결과를 보여주는 리포트 예시도이다.
상기 도 3에서와 같이 회원들의 시험 답안 데이터를 입력 받으면, 종합분석부(230)는 채점 및 종합분석과정을 수행한다.
문제은행 DB(320)의 문항 DB, 문항 해설 DB, 사고영역(즉, 평가영역)분류DB, 문제유형DB등으로부터 시험출제된 각 문항들의 분류 속성값을 입력받아 분석처리하게 된다. 그리고, 학습자료 DB(340)로부터 사고영역별 DB, 문제유형 및 학습 대책 DB, 추천 교재/강좌 DB를 활용하고, 아울러 진단 및 조언 DB(330)를 활용하여 종합 분석을 처리한다.
종합 분석결과 학생별 결과 파일을 생성하고, 학생별 맞춤 평가 클리닉 정보를 제공하며, 그룹 단위의 결과 파일과 그룸별 맞춤 평가 클리닉 정보를 제공한다.
종합 분석 과정(S20)은 도 4b에 도시된 바와같이, 회원별 답안 데이터를 정오답 DB에 의거하여 채점을 하는 채점 단계(S21)를 수행한 후 도 4c의 종합성적표와 같이 채점 결과에 대해 득점과 배점 및 표준점수에 대한 득점 및 배점과 백분위 및 등급을 평가하여 종합 성적표로서 제공하는 종합 성적표 생성단계(S22)를 수행한다.
이어서, 도 4c와 같이 평가 영역별로 분석을 수행하는데, 평가영역중 내용영역별 및 행동영역별로 분석하여 각 영역별로 문항수와 맞은 개수 배점 득점 득점율 응시자 평균(득점/득점률), 상위 4%의 득점을 분석하는 내용영역별 강약점 분석단계(S23)및 행동영역별 강약점 분석단계(S24)를 수행한다. 영역별 분석결과는 각 영역별 분류 및 그에따른 득점과 등급 및 상위 4%의 득점을 표로서 표시하고, 아울러 영역별로 득점률을 내점수, 응시자 평균, 상위 4%에 대해 그래프로 표시하여 한눈에 자신의 강약점을 알수 있도록 분석하여 제공한다.
즉, 종합 성적표로는, - 원점수(배점/득점)와 표준 점수, 백분위, 등급 제시 하며,
평가 영역별 분석표로는
내용 영역별 강약점 분석 : 내용 영역별*로 해당 문항수 및 개인이 취득한 개수/득점/득점률, 응시자 평균, 상위 4% 득점 및 득점률 등 제공(표와 그래프 2가지 방식) * 4가지 대분류(도 4c 리포트예시 참조)
행동 영역별 강약점 분석 : 행동 영역별*로 해당 문항수 및 개인이 취득한 개수/득점/득점률, 응시자 평균, 상위 4% 득점 및 득점률 등 제공(표와 그래프 2가지 방식) * 5가지 대분류(리포트지 참조)
그리고, 도 4d와 같이, 전월 성적과의 비교를 하여 이전 시험들의 원점수, 표준점수, 백분위, 등급에 대해 회차별로 득점된 점수와 전체 회차중 최고/최저 점수등을 비교표로서 생성하고, 횟수별 성적 변화 추이를 그래프로서 표시하며, 전월에 나와 같은 점수를 받은 학생이 이번 시험에서 받은 점수의 평균과, 이번 시험의 응시자 평균을 표와 그래프로서 표시하여 성적 변화와 다른 응시자와 비교할 수 있도록 제공하는 전월 성적과의 비교단계(S25)를 수행한다.
전월 성적과의 비교는, 비교 표 제시로서 횟수별 원점수, 표준 점수(100점 만점, 200점 만점), 백분위, 등급, 최고 점수, 최저 점수를 제공하고, 횟수별 성적 변화 추이를 그래프로 제시하며, 전월에 나와 같은 점수를 받은 학생이 이번 시험에서 받은 점수의 평균으로서, 전월에 내가 받은 점수, 이번에 내가 받은 점수, 이번 시험의 응시자 평균, 전월에 나와 같은 점수를 받은 학생들이 이번 시험에서 받은 점수 평균(표와 그래프 2가지 제공)을 제공한다.
이어서, 진단 및 조언 생성단계(S26)를 수행하는데, 진단 및 조언은, 전월에 배해 성적의 상승/하향을 비교한 결과에 대해 평가하고, 전월에 같은 점수를 받은 학생과 비교했을때의 표준점수의 상승/하향을 평가하고, 위 두가지 결과에 대해 진단 및 조언을 생성하며, 학습 방법에 대한 조언을 생성한다. 이러한 진단 및 조언 생성은, 상기 분석 결과에 의해 항목별로 해당되는 조건을 생성하고 그 조건에 따라 진단 및 조언 DB(330)에서 자동으로 추출하여 개인별 맞춤 진단 및 조언 정보로서 생성한다.
진단 및 조언에 있어서, 전월 성적을 비교할 수 없는 경우(처음 응시자), 진단 및 조언 내용으로서, ① 백분위, ② 나의 표준 점수와 표준 점수 평균 비교, ③ 나의 현재 등급에서 한 등급 더 올릴 때 필요한 점수(* 만점자와 0점자는 달리 하게 되며, 경우의 수 : 6가지가 된다.)
전월 성적이 있는 경우(2회 이상 응시자)는, 진단 및 조언 내용으로서, ① 백분위 변화, ② 전월 동점자 평균(표준 점수 기준)과의 비교, ③ 나의 현재 등급에서 한 등급 더 올릴 때 필요한 점수. (* 만점자와 0점자는 달리 하게 되고, 경우의 수 : 20가지가된다.) * 조언의 실제 가지수 : 26 * 5가지 내외 = 130가지 내외가 도리수 있다.
도 5a는 본 발명에 의한 결과파일 분석과정 설명도이며, 도 5b는 결과파일 분석 리포트 예시도이다.
결과파일 분석은 상기 종합 분석 과정에서 분석된 정보에 의해 개인별 그룹별 결과파일이 생성되면, 그 결과파일을 분석하게 된다.
문제은행DB(320)로부터 정오답DB, 해설 DB, 문항 DB, 문제유형 DB, 사고영역(평가영역)DB를 활용하여 시험 응시자 즉, 회원이 입력한 문항별 답안 데이터를 분석하게 된다.
학생별/그룹별로 취약 유형을 분석하는데, 문항 분석은, 도 5b에 도시된 바와 같이, 문항 번호, 배점, 정답, 채점, 응시자 정답률, 내용영역, 문제유형, 행동영역, 자가진단등을 이용해 분석하고, 제재별 분석은 17개 제재분류에 의해 문항별, 지문별, 배점별, 득점별 분석을 하며, 내용영역과 행동영역의 교차분석을 하고 25개의 제재/행동영역을 교차분류하여 문항별, 배점별, 득점별, 문항 유형별로 분석한다. 여기서, 교차분석은 결과파일 분석에서 함께 수행할 수도 있으며, 독립된 과정으로 내용영역과 행동영역의 교차분석과정(S50)으로 수행할 수 있다. 상세한 설명은 교차분석 과정(S50)의 설명에서 한다.
이와같이 문항분석과 제재별 분석등을 통해서 학생별/그룹별 취약 유형분석을 하고, 추천교재 및 강좌 정보도 함께 제공한다.
그리고, 상기 분석 결과에 의해 학생별/그룹별 맞춤 조언을 제공하는데, 학년별, 등급별, 추천도서 및 교재/강좌 분류와, 제재별, 문제 유형별, 행동 영역별, 출제경향 및 학습대책등에 의거하여 진단 및 조언 DB(330)와, 학습자료 DB(340)에서 진단 및 조언 정보를 자동으로 찾아서 맞춤 조언을 생성하여 제공한다.
결과파일 분석에 의해 언어클리닉 리포트와 오답 클리닉(유사/보충/심화문항)등의 정보를 클리닉 리포트에 포함시켜 제공한다.
그리고 자가진단은, 도 5b에 도시된 바와 같이, 시험을 본 학습자가 각 문항 별로 완전히 이해하고 맞은문항, 맞긴 했으나 헷갈리는 문항, 틀렸지만 답보고 이해한 문항, 몰라서 틀리고 이해 안되는 문항등을 자가진단으로 체크하여 그 체크 결과에 대해 자가 진단 할수 있도록 하는 자가진단 활용법을 조언으로서 제공한다.
도 6a는 본 발명에 의한 취약 부문별 분석과정을 설명하기 위한 설명도이고, 도 6b 및 도 6c는 본 발명에 의한 취약부문 제재별 분석 및 학습대책에 대한 클리닉 리포트 예시도이다. 도 6d는 제재와 행동영역 교차분석 리포트의 예시도이다.
취약부문 분석 과정(S40)은 결과파일 분석과가 종합성적 분석등에 의한 결과를 활용하는데, 제재별 분석을 통해 한눈에 취약부문을 알수 있도록 제공한다.
첫시험 학생인 경우, 종합 성적표, 원점수(배점/득점), 표준점수, 백분위, 등급, 응시자 평균등을 이용하여 분석하고, 학생/그룹별 이전 시험 정보는, 횟수별 원점수 변화 추이, 표준점수 변화 추이, 백준위 변화 추이, 등급변화 추이, 최고점수 변화 추이, 최저 점수 변화 추이, 상위 4% 또는 10% 변화추이, 전월 동점자 변화추이등을 제공한다.
학생/그룹별 내용영역(제재별) 분석은, 내용영역별로, 학생/그룹별 득점/득점률, 응사지 평균, 동점자 평균, 등급별 득점/득점률, 상위 4% 득점/득점률등을 제공한다.
학생/그룹별 행동영역 분석 및 제재/행동 영역 교차 분석은, 행동영역별, 제재/행동영역 교차분석을 하는데, 학생/그룹별 득점/득점률, 응사지 평균, 동점자 평균, 등급별 득점/득점률, 상위 4% 득점/득점률등을 제공한다.
상기와 같이 분석된 결과에 대해 취약 제재 및 행동 영역을 선별하여 해당되 는 진단 및 조언을 생성하여 제공한다.
이와같은 분석에서 개인별 취약 제재 1개를 제시하는 경우, 취약 제재 선별 기준은,
① 나와 동점자들(원점수 기준)의 제재별 득점률과 나의 제재별 득점률을 비교해서 내가 가장 취약한 제재 1가지 선택,
② 득점률이 동점인 제재가 2개 이상일 경우
- 1순위 : 나의 제재별 득점률 중에서 가장 취약한 것을 선택,
- 2순위 : 전체 학생들의 제재별 득점률에서 가장 취약한 것을 선택
- 3순위 : 나보다 한 등급 위인 학생들의 제재별 득점률에서 가장 취약한 을 선택
③ 만점인 경우 : 1등급의 득점률이 가장 낮은 제재
④ 0점자인 경우 : 응시자 전체 득점률이 가장 높은 제재(쉽게 점수를 올릴 수 있도록)
진단 및 조언 내용으로는, ① 선택된 취약 제재 제시, ② 제재의 최근 수능 출제 경향 및 학습 대책, ③ 등급별 학습 방법, ④ 등급 별 필독 도서 추천하게 된다.
즉, 도 6b에 도시된 바와 같이, 지문수, 출제문항수, 맞은 문항수, 배점, 득점, 득점률에 대해 말하기/듣기, 쓰기, 문학, 비문학등으로 분류하여 각 문항수에 대해 맞은 항수와 득점등을 한눈에 볼 수 있도록 표와 그래프로 제공하며, 내점수위 상위 4% 및 동점자 평균을 함께 보여준다. 그리고 이러한 결과에 대해 진단 및 조언을 자동 생성하여 제공한다.
도 6c는 취약 제재 분석 및 학습 대책 결과 리포트의 예시도로서, 상기 분석결과 가장 취약한 부분으로서 어휘.어법이 선별된 경우라면, 그 제재에 대해 출제 문항수, 맞은 문항수, 배점 득점 득점율을 표와 다이어그램으로 표시하고, 다른 영역중 최강영역(예; 말하기/듣기)과 비교하는 그래프를 제시하고, 해당 제재에서 내점수와 상위4% 및 동점자 평균 점수를 그래프로 표시하여 비교할 수 있도록 한다.
그리고 해당 제재에 대한 출제경향이나 예측 정보등을 제공하고, 학습 대책에 대한 추천 교재/강에 대한 정보를 제공한다.
한편, 취약부분에 대해서 하나의 제재에 대해서만 제공하지 않고 2가지 이상의 영역별로도 상기 도 6c와 같은 분석 정보를 제공할 수 있다.
취약 제재/행동영역 제시 방법은,
1. 나와 동점자들(원점수 기준)의 제재/행동 영역별 득점률(25가지)과 나의 제재/행동 영역별 득점률을 비교해서 내가 가장 취약한 부문 1가지 선택,
2. 득점률이 동점인 제재가 2개 이상일 경우
① 1순위 : 나의 제재별 득점률 중에서 가장 취약한 것을 선택
② 2순위 : 전체 학생들의 제재별 득점률에서 가장 취약한 것을 선택
③ 3순위 : 나보다 한 등급 위인 학생들의 제재별 득점률에서 가장 취약한 것을 선택
3. 만점인 경우 : 1등급의 득점률이 가장 낮은 부문 선택
4. 0점자인 경우 : 응시자 전체 득점률이 가장 높은 부문 선택
진단 및 조언 내용은, ① 취약 제재/행동 영역 제시, ② 해당 제재/행동 영역에 해당하는 유형 제시 및 최근 출제 경향 & 유사 발문 유형, ③ 해당 유형에 따른 등급별 학습 방법에 대해 제시한다.
※ 유형 제시 방법은, a. 1개 틀린 경우 : 학생이 실제 틀린 유형 제시, b. 2개 이상 틀린 경우 : 대표 유형 제시, c. 만점자 : 정답률이 가장 낮은 문항 제시, d. 0점자 : 정답률이 가장 높은 문항 제시, e. 유형 : 200가지 이상(내용 영역별, 행동 영역별로 구분됨.)
한편, 상기 취약 제재 분석에 있어서, 내용영역과 행동영역의 교차 분석 과정(S50)은, 문항 유형별로 구분하고, 문항별, 내용영역과 행동영역이 교차되는 유형을 DB화 하여 분석하게 된다. 이는 도 6d에 도시된 바와 같이, 듣기, 쓰기, 읽기등의 내용영역(제재)과, 어휘.어법, 사실적 이해, 추론적 이해등등의 행동영역의 교차되는 정보(중복 분류되는 정보)를 이용해서 이들에 대해 문항수, 배점, 득점률등을 제공하고, 내가 맞은 점수로 본 제재-행동 영역별 강약 부분을 한눈에 볼수 있도록 행동영역(어휘.어법)에 대해 내용영역(듣기,쓰기,읽기)의 득점률을 그래프로 표시하여 제공한다.
아울러 상기 교차분석에 대해 잘하는 부분과 못하는 부분을 득점율에서 검출하여 해당 제재(내용영역) 및 행동영역에 대한 진단 및 조언을 생성하여 제공하고, 아울러 학습 대책과 추천도서, 출제경향정보등을 맞춤정보로서 생성하여 제공한다.
도 7은 본 발명에 의한 클리닉 리포트 생성을 설명하기 위한 설명도이다.
상기 취약부문 분석과정에서 분석된 취약 제재 및 행동영역, 제재/행동영역 교차부문, 문항 유형을 선별하여 선택된 취약부문 제시를 하고, 각각의 맞춤 진단 및 조언을 제공하며, 취약 부문 출제경향 및 학습 대책과 등급별 학습 방법 및 필독 도서와 강좌/교재 추천등을 한다. 이는 각 부문의 분석과정에서 생성되는 결과들을 리포트로서 생성하게 되며, 표/테이블, 그래프 진단 멘트등으로 클리닉 정보를 제공하고, 학습 자료 DB와, 진단 및 조언 DB 및 회원 DB와 문제은행 DB등의 정보를 활용하여 각 분석 결과에 따라 리포트를 자동으로 생성하여 제공하는 것이다.
상기 클리닉 리포트는 온라인 제공과 함께 인쇄하여 오프라인 제공도 겸하도록 한다.
클리닉 리포트에서 오답 노트를 제공하여 자가 진단 및 자가 학습을 위하여 점검하고 학습 할 수 있도록 하는 데 오답 노트는, 시험에서 가장 많이 틀린 문항에 대한 정답률과 가장 많은 학생들이 선택한 오답지 반응률을 제시하고, 해당 문제와 유사문제등을 함께 제공하여 오답 클리닉정보로서 활용하도록 한다. 그리고, 상기 분석 결과에 의해 취약 제재부문등에 대해서 유사문제와 문제해설 및 학습 자료, 심화학습 및 보충 자료등을 함께 제공하여 오답노트로서 관리하고 활용할 수 있도록 제공한다.
본 발명은 학습자들이 온/오프라인상에서 시험을 보고 그 시험 결과를 분석함에 있어서 자동으로 종합분석과 취약부문 분석 및 영역별 교차분석등을 하여 한 눈에 자신의 성적과 동점자들과의 비교등을 할 수 있고, 이전 시험결과와 비교하여 성적 추이를 판단할 수 있는 효과가 있다.
그리고, 각 분석결과에 따른 진단 및 조언과 아울러 학습 자료와 학습 방법등에 대해서도 자동으로 클리닉 리포트가 생성되어 제공되므로 학습 계획과 학습 방법등을 도움 받을 수 있는 효과가 있다.
또한 본 발명은 언어영역의 특수성을 감안하여 제재별 내용영역과, 행동영역을 체계적으로 분류하고 이들을 세부적으로 소분류하여 각각 코드화하고, 그 코드화된 속성정보를 활용하여 문항별 분석과 그 분석 결과에 따라 취약제재등에 대한 진단 및 조언등을 자동으로 생성하고 클리닉 리포트를 자동생성할 수 있는 효과가 있다.

Claims (6)

  1. 인터넷을 활용하는 학습 평가 방법 시스템에 있어서,
    학습자들을 개인 및 그룹으로 회원가입하여 관리하고 시험문제 출제와 학습자의 답안 입력 및 분석결과에 따른 클리닉 리포트등을 제공하는 웹 서비스 서버와;
    시험문제와 각 문항별로 평가영역을 내용영역과 행동영역으로 분류하여 각 분류영역별로 세분화된 소분류를 하고, 문제유형을 분류하여 해당 문항의 속성정보로서 코드화시켜 문제해설 및 유사문제와 난이도 등의 정보를 포함하도록 저장관리하는 문제은행 DB와;
    각 문항별 및 분석 결과에 따른 영역별, 강약부문, 문제유형별등에 대해서 각각의 진단 및 조언정보를 미리 데이터베이스로 저장하여 상기 분석결과에 의해 문항속성정보들을 이용해 검색하고 조합하여 자동생성할수 있도록 관리하는 진단 및 조언 DB와;
    각 문항별, 분류된 영역별, 학습자들의 학년별등등에 대해서 학습자료와 추천도서 및 강의/강좌, 해설정보등을 데이터 베이스로 관리하여 분석결과에 의해 자동으로 학습자료를 제공할 수 있도록 관리하는 학습 자료 DB와;
    상기 웹서비스 서버를 통해 시험문제출제를 하고, 회원들의 답안을 입력받아 채점하여 종합 성적 분석과, 내용영역/행동영역등의 영역별 분석, 영역별 교차분석, 각 분석결과에 따른 취약부문분석등을 하는 분석 시스템과;
    상기 분석 시스템에서 각 분석결과에 의해 진단 및 조언DB로부터 각각의 분석 결과와 종합 분석에 대한 진단 및 조언과, 학습 자료 DB로부터 학습자료정보를 자동 추출하여 상기 각 분석 결과별로 표/테이블, 그래프 진단 및 조언 멘트 및 추천 자료등등을 개별 맞춤 리포트로서 생성하여 상기 웹서비스 서버를 통해 제공하는 클리닉 정보 생성수단을 포함하여 구성됨을 특징으로 하는 학습 평가 클리닉 서비스 시스템.
  2. 제 1 항에 있어서, 상기 분석 시스템은,
    해당 학습자 또는 그룹의 평가분석정보와 시험 조건에 의거하여 시험문제를 상기 문제은행 DB(320)로부터 추출하여 시험문제를 출제하는 시험문제출제부(220)와;
    학습자들의 시험에 대한 답안을 입력받아 상기 문제은행 DB(320)의 정/오답에 의거하여 채점하고, 득점에 대한 종합 성적, 각 문항별로 미리 분류해둔 내용영역별 및 행동영역별 득점과 배점등에 대해 각각 강약점을 분석하는 평가영역별 분석과, 이전성적들과의 비교에 의한 성적누적분석과, 이에따른 진단 및 조언등을 자동으로 생성하여 제공하는 종합 분석부(230)와;
    상기 종합 분석부(230)에서 채점된 각 문항별 학습자의 정오답과, 전체응시자의 정답율과, 각 문항의 답지별 반응율등과 해당문항의 평가영역별 분류정보를 제공하여 자가진단 학습계획을 세울수 있도록 정보를 제공하는 결과파일 분석부(240)와;
    상기 결과파일 분석 내용에 의거하여 각 문항별로 분류된 내용영역과 행동영역에 대한 평가영역별 및 서로 교차되는 영역을 비교분석하여 학습자의 득점 및 비율과내점수와 소정범위의 상위득점자 점수 및 동점자의 평균등을 제공하여 학습자의 강약 부문을 확인할수 있도록 하는 취약 부문분석부(250)를 포함하여 구성된 것을 특징으로 하는 학습 평가 클리닉 서비스 시스템.
  3. 제 1 항에 있어서, 상기 문제은행 DB(320)에는
    각 문항들은 문항별로 그 속성값을 부여하여 미리 분류하여 분석을 위한 속성값들을 코드값으로 저장하되, 진단 및 조언 DB와, 학습 자료 DB와 연계하여 해당 속성코드에 의해 진단 및 조언과 학습자료를 자동 추출할 수 있도록 관리하며,
    문항별 속성값들은, 학년, 학기, 난이도, 출제년도, 객관식/주관식, 수능형/내신형, 문항별 정/오답, 배점, 문제유형, 문항 해설등등의 정보를 속성값으로 분류하여 관리하고,
    언어영역에서 평가 영역을 내용의 분야를 구분하기 위한 내용영역과 해당 문제의 논리적 추이를 구분하기 위한 행동영역으로 구분하고, 각 영역별 세분화된 분류를 하며,
    각 문항별 문제유형은, 내용확인, 내용유추..등등으로 수백가지로 분류하여 문항에서 묻고자하는 것이 어떤 유형인지를 구분하며,
    각 문항별로 유사, 심화, 보충 문항에 대한 매칭정보를, 다른 문항들과의 연관 관계를 속성값으로 비교하여 영역별 및 문제유형별로 코드값의 비교에 의해 자 동으로 생성하여 문항별로 저장관리하고,
    난이도는 초기에 예측 난이도를 문항 분류시에 입력하여 저장하고, 해당 문항의 출제에 따른 응답자 반응 및 응답자 정답률등에 의해 응시자 전체수준등과 비교하여 자동으로 난이도를 조정하여 관리하는 것을 특징으로 하는 학습 평가 클리닉 서비스 시스템.
  4. 인터넷을 이용한 학습 평가 클리닉 서비스 방법에 있어서,
    시험 문항별로 분류하여 각 속성 코드값을 미리 저장하여둔 임의의 시험에 대한 학습자의 답안을 입력받아 채점을 하는 채점과정(S10)과;
    상기 채점 결과에 의거하여 득점한 점수에 대한 종합성적과, 해당 시험문제의 각 문항별로 미리 분류해둔 내용영역별 및 행동영역별 득점과 배점등에 대해 각각 강약점을 분석하는 평가영역별 분석과, 이전성적들과의 비교에 의한 성적누적분석과, 이에따른 진단 및 조언등을 자동으로 생성하여 제공하는 종합 분석과정(S20)과;
    상기 종합 분석과정(S20)에서 각 문항별 학습자의 정오답과, 전체응시자의 정답율과, 각 문항의 답지별 반응율등과 해당문항의 평가영역별 분류정보를 제공하여 자가진단 학습계획을 세울수 있도록 하는 결과파일 분석과정(S30)과;
    상기 결과파일 분석 내용에 의거하여 평가영역별로 학습자의 득점 및 비율과내점수와 소정범위의 상위득점자 점수 및 동점자의 평균등을 제공하여 학습자의 강약 부문을 확인할수 있도록 하는 취약 부문분석과정(S40)과;
    상기 결과파일 분석 정보를 이용하여 각 문항별로 분류된 내용영역과 행동영역에 대해 서로 교차되는 영역을 비교분석하여 제공하는 영역별 교차분석과정(S50)과;
    상기 각 분석과정에서 분석된 정보들을 표와 그래프 형식으로 각각 제공하고, 상기 문항별 속성정보와 연관하여 각 진단 및 조언을 데이터베이스로 관리하는 진단 및 조언 DB로부터 상기 각 분석결과마다 자동으로 진단 및 조언을 결과를 추출하고, 학습자료 DB에서 상기 분석 결과에 따른 취약부문든에 대한 학습 자료를 자동 추출하여 상기 결과분석 정보와 함께 클리닉 리포트를 생성하여 학습자 및 학습그룹별로 제공하는 클리닉 리포트 제공과정(S70)을 포함하여 이루어진 것을 특징으로 하는 학습 평가 클리닉 서비스 방법.
  5. 제 4 항에 있어서, 상기 문항별 속성정보를 분류하여 저장하고 있는 문제은행 DB에서 해당 학습자의 시험 조건과 이전시험들에 대한 정보를 활용하여 시험문제를 자동생성하여 맞춤형 시험문제로서 시험출제를 하는 시험 출제과정을 더 포함하여 이루어진 것을 특징으로 하는 학습 평가 클리닉 서비스 시스템.
  6. 제 4 항에 있어서, 상기 종합 분석 과정(S20)은
    회원별 답안 데이터를 정오답 DB에 의거하여 채점을 하는 채점 단계(S21)와,
    채점 결과에 대해 득점과 배점 및 표준점수에 대한 득점 및 배점과 백분위 및 등급을 평가하여 종합 성적표로서 제공하는 종합 성적표 생성단계(S22)와,
    평가영역중 내용영역별 및 행동영역별로 분석하여 각 영역별로 문항수와 맞은 개수 배점 득점 득점율 응시자 평균(득점/득점률), 상위 4%의 득점을 분석하는 내용영역별 강약점 분석단계(S23) 및 행동영역별 강약점 분석단계(S24)와,
    전월 성적과의 비교를 하여 이전 시험들의 원점수, 표준점수, 백분위, 등급에 대해 회차별로 득점된 점수와 전체 회차중 최고/최저 점수등을 비교표로서 생성하고, 횟수별 성적 변화 추이를 그래프로서 표시하며, 전월에 나와 같은 점수를 받은 학생이 이번 시험에서 받은 점수의 평균과, 이번 시험의 응시자 평균을 표와 그래프로서 표시하여 성적 변화와 다른 응시자와 비교할 수 있도록 제공하는 전월 성적과의 비교단계(S25)와,
    전월에 배해 성적의 상승/하향을 비교한 결과에 대해 평가하고, 전월에 같은 점수를 받은 학생과 비교했을때의 표준점수의 상승/하향을 평가하고, 위 두가지 결과에 대해 진단 및 조언을 생성하며, 학습 방법에 대한 조언을 생성하는 진단 및 조언 생성단계(S26)를 포함하여 이루어진 것을 특징으로 하는 학습 평가 클리닉 서비스 시스템.
KR1020040056451A 2004-07-20 2004-07-20 학습 평가 클리닉 서비스 방법 및 그 시스템 KR100625120B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040056451A KR100625120B1 (ko) 2004-07-20 2004-07-20 학습 평가 클리닉 서비스 방법 및 그 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040056451A KR100625120B1 (ko) 2004-07-20 2004-07-20 학습 평가 클리닉 서비스 방법 및 그 시스템

Publications (2)

Publication Number Publication Date
KR20060007608A true KR20060007608A (ko) 2006-01-26
KR100625120B1 KR100625120B1 (ko) 2006-09-20

Family

ID=37118830

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040056451A KR100625120B1 (ko) 2004-07-20 2004-07-20 학습 평가 클리닉 서비스 방법 및 그 시스템

Country Status (1)

Country Link
KR (1) KR100625120B1 (ko)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100816406B1 (ko) * 2006-05-30 2008-03-26 이신애 웹을 이용한 맞춤 학습 관리 서비스 방법 및 시스템
KR101023540B1 (ko) * 2010-06-21 2011-03-21 (주)오투라인 가변되는 메타정보를 활용한 시험결과 분석평가방법
KR101028511B1 (ko) * 2008-02-14 2011-04-11 주식회사 케이티 정답률 체크를 통한 ｉｐｔｖ 교육방송 서비스를 수행하는방법 및 그를 위한 시스템
WO2011083941A2 (ko) * 2010-01-07 2011-07-14 주식회사 유비온 온라인 테스트 평가 관리 시스템 및 방법
KR101275146B1 (ko) * 2012-06-18 2013-06-17 주식회사 탑스에듀 서술형 답안 평가를 위한 자동 채점 및 첨삭문 생성 방법
KR101333129B1 (ko) * 2013-03-08 2013-11-26 충남대학교산학협력단 기초학력 향상도 평가 시스템
KR20140011384A (ko) * 2011-03-22 2014-01-28 이스트 캐롤라이나 유니버시티 인지적 교육 결과 요소들 및 관련된 대화형 보고 요약의 정규화 및 누적 분석
WO2014088173A1 (ko) * 2012-12-04 2014-06-12 Lee Hae Deok 온라인 학습관리 시스템 및 그 방법
KR101493490B1 (ko) * 2014-05-08 2015-02-24 학교법인 한양학원 문제 출제 방법, 이를 이용하는 장치
WO2016186230A1 (ko) * 2015-05-21 2016-11-24 안명훈 자기 완성형 학습을 위한 개인 맞춤형 스마트 교육 방법
KR20170031110A (ko) * 2017-02-24 2017-03-20 비트루브 주식회사 학습자의 학습 상태를 분석하고 그에 대한 보완 문제를 선정하는 방법 및 시스템
KR20180066705A (ko) * 2016-12-09 2018-06-19 김채연 학습자 취약점 분석 방법 및 장치
KR101895959B1 (ko) * 2017-05-19 2018-09-06 (주)뤼이드 기계학습 프레임워크의 분석 결과를 해석하는 방법, 장치 및 컴퓨터 프로그램
WO2018169115A1 (ko) * 2017-03-13 2018-09-20 비트루브 주식회사 학습을 지원하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
KR20190100538A (ko) * 2018-02-09 2019-08-29 비트루브 주식회사 학습을 지원하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
KR20200072046A (ko) * 2018-12-12 2020-06-22 한종현 학생의 학습능력별 개인 맞춤형 교육 커리큘럼 제공 방법 및 프로그램
KR102173567B1 (ko) * 2020-03-09 2020-11-03 주식회사 엠제이에듀 학습관리 시스템
KR102197752B1 (ko) * 2019-12-20 2021-01-04 주식회사 아이스크림에듀 맞춤형 자동 문항 생성을 통한 인공지능 기반 학습 방법 및 시스템
CN114241835A (zh) * 2021-11-17 2022-03-25 北京执象科技发展有限公司 一种学生口语质量评测方法和设备
KR20230067184A (ko) * 2021-11-09 2023-05-16 주식회사 한글과컴퓨터 시험과 연관된 샘플 문제를 기초로 한 테스트를 통해 시험에 대한 평가 등급을 예측하는 평가 등급 예측 서비스 서버 및 그 동작 방법
KR20230111807A (ko) * 2022-01-19 2023-07-26 이화여자대학교 산학협력단 평가 문항 결정 방법 및 평가 문항 결정 장치

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101049896B1 (ko) * 2009-04-17 2011-07-19 주식회사 창의와 탐구 온/오프라인이 연계된 학습시스템 및 방법
KR102619297B1 (ko) * 2022-10-14 2023-12-29 스톰스터디 주식회사 학습 관리 시스템, 방법 및 프로그램

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000049914A (ko) * 2000-05-06 2000-08-05 최정이 인터넷을 통한 온라인 학습방법 및 시스템
KR20010035285A (ko) * 2001-02-01 2001-05-07 김만석 인공지능 학습을 위한 문제와 풀이답간의 상관관계 분석을통한 학습지도 방법

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100816406B1 (ko) * 2006-05-30 2008-03-26 이신애 웹을 이용한 맞춤 학습 관리 서비스 방법 및 시스템
KR101028511B1 (ko) * 2008-02-14 2011-04-11 주식회사 케이티 정답률 체크를 통한 ｉｐｔｖ 교육방송 서비스를 수행하는방법 및 그를 위한 시스템
WO2011083941A2 (ko) * 2010-01-07 2011-07-14 주식회사 유비온 온라인 테스트 평가 관리 시스템 및 방법
WO2011083941A3 (ko) * 2010-01-07 2011-11-10 주식회사 유비온 온라인 테스트 평가 관리 시스템 및 방법
KR101023540B1 (ko) * 2010-06-21 2011-03-21 (주)오투라인 가변되는 메타정보를 활용한 시험결과 분석평가방법
KR20140011384A (ko) * 2011-03-22 2014-01-28 이스트 캐롤라이나 유니버시티 인지적 교육 결과 요소들 및 관련된 대화형 보고 요약의 정규화 및 누적 분석
KR101275146B1 (ko) * 2012-06-18 2013-06-17 주식회사 탑스에듀 서술형 답안 평가를 위한 자동 채점 및 첨삭문 생성 방법
WO2014088173A1 (ko) * 2012-12-04 2014-06-12 Lee Hae Deok 온라인 학습관리 시스템 및 그 방법
KR101333129B1 (ko) * 2013-03-08 2013-11-26 충남대학교산학협력단 기초학력 향상도 평가 시스템
KR101493490B1 (ko) * 2014-05-08 2015-02-24 학교법인 한양학원 문제 출제 방법, 이를 이용하는 장치
WO2016186230A1 (ko) * 2015-05-21 2016-11-24 안명훈 자기 완성형 학습을 위한 개인 맞춤형 스마트 교육 방법
KR20180066705A (ko) * 2016-12-09 2018-06-19 김채연 학습자 취약점 분석 방법 및 장치
KR20170031110A (ko) * 2017-02-24 2017-03-20 비트루브 주식회사 학습자의 학습 상태를 분석하고 그에 대한 보완 문제를 선정하는 방법 및 시스템
US11600196B2 (en) 2017-03-13 2023-03-07 Vitruv Inc. Method and system for supporting learning, and non-transitory computer-readable recording medium
WO2018169115A1 (ko) * 2017-03-13 2018-09-20 비트루브 주식회사 학습을 지원하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
KR20180104460A (ko) * 2017-03-13 2018-09-21 비트루브 주식회사 학습을 지원하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
CN110366735A (zh) * 2017-05-19 2019-10-22 日益得有限公司 分析数据的方法、设备及计算机程序
WO2018212396A1 (ko) * 2017-05-19 2018-11-22 주식회사 뤼이드 데이터를 분석하는 방법, 장치 및 컴퓨터 프로그램
JP2020510234A (ja) * 2017-05-19 2020-04-02 ルィイド インコーポレイテッド データを分析する方法、装置、及びコンピュータプログラム
KR101895959B1 (ko) * 2017-05-19 2018-09-06 (주)뤼이드 기계학습 프레임워크의 분석 결과를 해석하는 방법, 장치 및 컴퓨터 프로그램
KR20190100538A (ko) * 2018-02-09 2019-08-29 비트루브 주식회사 학습을 지원하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
KR20200072046A (ko) * 2018-12-12 2020-06-22 한종현 학생의 학습능력별 개인 맞춤형 교육 커리큘럼 제공 방법 및 프로그램
KR102197752B1 (ko) * 2019-12-20 2021-01-04 주식회사 아이스크림에듀 맞춤형 자동 문항 생성을 통한 인공지능 기반 학습 방법 및 시스템
KR102173567B1 (ko) * 2020-03-09 2020-11-03 주식회사 엠제이에듀 학습관리 시스템
KR20230067184A (ko) * 2021-11-09 2023-05-16 주식회사 한글과컴퓨터 시험과 연관된 샘플 문제를 기초로 한 테스트를 통해 시험에 대한 평가 등급을 예측하는 평가 등급 예측 서비스 서버 및 그 동작 방법
CN114241835A (zh) * 2021-11-17 2022-03-25 北京执象科技发展有限公司 一种学生口语质量评测方法和设备
KR20230111807A (ko) * 2022-01-19 2023-07-26 이화여자대학교 산학협력단 평가 문항 결정 방법 및 평가 문항 결정 장치

Also Published As

Publication number Publication date
KR100625120B1 (ko) 2006-09-20

Similar Documents

Publication Publication Date Title
KR100625120B1 (ko) 학습 평가 클리닉 서비스 방법 및 그 시스템
Khan et al. Scientific reasoning competencies: A case of preservice teacher education
Schmidt et al. Development of the TIMSS context questionnaires
Potgieter et al. Inaccuracy of self-evaluation as additional variable for prediction of students at risk of failing first-year chemistry
Boone et al. Utilizing multifaceted Rasch measurement through FACETS to evaluate science education data sets composed of judges, respondents, and rating scale items: An exemplar utilizing the elementary science teaching analysis matrix instrument
Frith et al. The national benchmark quantitative literacy test for applicants to South African Higher Education
Smith et al. A validity study of the certification system of the National Board for Professional Teaching Standards
McLarty et al. Assessing Employability Skills: The Work KeysTM System
Phakiti et al. Classroom assessment and validity: Psychometric and edumetric approaches
Özdemir Modeling of the factors affecting science achievement of eighth grade Turkish students based on the third international mathematics and science study-repeat (TIMSS-R) data
Dogutas Teacher Candidates' Perceptions of Standards in an Education Program at a University in Turkey.
Atondo et al. Continuous Assessment as a Predictor of Students' Achievement in Mathematics at the Junior Secondary School Level in Makurdi Local Government Area of Benue State, Nigeria
Curtis et al. The authentic performance based assessment of problem solving
Veronica Santelices et al. Aligning teacher assessments and teacher learning through a teacher learning progression
Green et al. Introductory statistics: Preparing in-service middle-level mathematics teachers for classroom research
KR20220138167A (ko) 학습평가방법의 문제점을 개선한 학습평가 서비스 방법 및 시스템
Brown Design, Development, and Evaluation of Electronic Portfolios for Advanced Degree Programs in Technology and School Media.
Sullano et al. Development and acceptability of standardized e-tool for the department of education’s core values: Maka-diyos, Makakalikasan, Maka-tao at Makabansa
Murukutla The Effects of Background, Classroom Assessment Competence, Self-efficacy, and Self-perceived Assessment Skills on Classroom Assessment Practices of Teachers in India
Suryanto et al. The Students' and the Teachers' Perception of the Washback Effect of the English Progress Test
Tsang Student motivation on a diagnostic and tracking English language test in Hong Kong
Zaney Formative Assessment Practices of English Language Teachers in Senior High Schools
Ashcraft Integrated Concept Mapping as a Method for Democratically Evaluating a Teacher Preparation Program in the Area of Classroom Assessment Proficiency
Dianti Kartika ANALYSIS OF ENGLISH FORMATIVE ASSESSMENT FOR 11TH-GRADE STUDENTS OF SMA N 1 BOBOTSARI BASED ON THE COGNITIVE DIMENSION OF REVISED BLOOM'S TAXONOMY
Kon-Angna Teachers’ Pedagogical Content Knowledge in inclusion of deaf students in regular Basic School

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120629

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20130731

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee