KR102282784B1 - 문제생성장치 및 그 장치의 구동방법 - Google Patents

Abstract

본 발명은 문제생성장치 및 그 장치의 구동방법에 관한 것으로서, 본 발명의 실시예에 따른 문제생성장치는, 강의가 이루어지는 지정 과목과 관련한 문제 데이터를 저장하는 저장부, 및 강의를 수강하는 학생들의 단말장치로부터 각 학생이 제출하는, 지정 과목과 관련한 생성 문제를 수신하고, 수신한 생성 문제와 (기)저장한 문제 데이터를 비교하여 유사성이 기준값 이하인 문제 데이터를 추출하여 강의를 진행하는 교수자의 단말장치로 제공하는 제어부를 포함할 수 있다.

Description

문제생성장치 및 그 장치의 구동방법{Apparatus for Generating Problem and Driving Method Thereof}

본 발명은 문제생성장치 및 그 장치의 구동방법에 관한 것으로서, 더 상세하게는 가령 온라인상으로 진행되는 수업에서 기말고사 등의 평가시 최선의 평가가 진행되도록 하는 문제생성장치 및 그 장치의 구동방법에 관한 것이다.

최근 들어 디지털 또는 사이버 대학교 등의 확대로 인해 학생들은 언제 어디서든 다양한 형태로 학업을 이어나갈 수 있다. 이렇게 네트워크상에서 이루어지는 강의는 대부분이 교습자와 해당 강의가 정해져 있고, 사전에 영상으로 제작되어 주차에 따른 정확한 강의 진도가 진행되는 것이 특징이다. 또한, 각 학기에 치러지는 평가(예: 중간고사, 기말고사 등)도 네트워크를 통해 진행되며, 문제는 통상 문제은행 방식으로 출제되는 경우가 많다.

그런데, 종래의 이러한 문제은행 방식으로 출제되는 평가의 경우 학생의 수업 참여뿐만 아니라 학업 능력을 정확히 평가하는 데에는 그 한계가 있음에도 불구하고 온라인으로 진행되는 수업에서는 최선의 평가처럼 인정되고 있다. 이에 최근에는 학생들의 수업 참여를 좀더 유도하고 동시에 학업 능력의 평가에 있어서도 객관성을 좀더 담보할 수 있는 방법에 대한 필요성이 제기되고 있다.

한국등록특허공보 제10-1851878호(2018.04.18) 한국등록특허공보 제10-1493490호(2015.02.09) 한국공개특허공보 제10-2010-0012943호(2010.02.09)

본 발명의 실시예는 가령 온라인상으로 진행되는 수업에서 기말고사 등의 평가시 최선의 평가가 진행되도록 하는 문제생성장치 및 그 장치의 구동방법을 제공함에 그 목적이 있다.

본 발명의 실시예에 따른 문제생성장치는, 강의가 이루어지는 지정 과목과 관련한 문제 데이터를 저장하는 저장부, 및 상기 강의를 수강하는 학생들의 단말장치로부터 각 학생이 상기 지정 과목과 관련해 작성하여 제출하는 자가 작성 문제를 수신하고, 상기 수신한 자가 작성 문제와 상기 저장한 문제 데이터를 비교하여 유사성이 기준값 이하인 문제 데이터를 추출하여 상기 강의를 진행하는 교수자의 단말장치로 제공해 문제의 난이도에 대한 등급 평가를 요청하는 제어부를 포함한다.

상기 제어부는, 상기 저장한 문제 데이터에서 상기 수신한 자가 작성 문제와 유사성을 비교하여 유사도가 기준값 이상인 문제 데이터를 삭제하여 상기 교수자의 단말장치로 제공한다.

상기 제어부는, 상기 추출한 문제 데이터에 상기 교수자가 지정한 등급 평가 정보를 매칭시켜 상기 저장부에 저장시킬 수 있다.

상기 저장부는 상기 자가 작성 문제와 상기 자가 작성 문제를 제출한 학생의 식별 정보를 매칭시켜 저장하며, 상기 제어부는, 상기 지정 과목의 평가시 상기 추출한 문제 데이터와 상기 자가 작성 문제에 지정된 출제 비율로 문제를 선정해 상기 학생의 단말장치로 전송할 수 있다.

상기 제어부는, 상기 출제 비율로 문제의 선정시 상기 추출한 문제 데이터에 평가된 평가 등급의 출제 비율을 더 고려하여 문제를 선정할 수 있다.

상기 제어부는, 각 학생이 제출되는 상기 자가 작성 문제의 양(volume)에 따라 성과 점수를 다르게 부여할 수 있다.

또한, 본 발명의 실시예에 따른 문제생성장치의 구동방법은, 저장부 및 제어부를 포함하는 문제생성장치의 구동방법으로서, 강의가 이루어지는 지정 과목과 관련한 문제 데이터를 상기 저장부에 저장하는 단계, 및 상기 제어부가, 상기 강의를 수강하는 학생들의 단말장치로부터 각 학생이 상기 지정 과목과 관련해 작성하여 제출하는 자가 작성 문제를 수신하고, 상기 수신한 자가 작성 문제와 상기 저장한 문제 데이터를 비교하여 유사성이 기준값 이하인 문제 데이터를 추출하여 상기 강의를 진행하는 교수자의 단말장치로 제공해 문제의 난이도에 대한 등급 평가를 요청하는 단계를 포함한다.

상기 제어부는, 상기 저장한 문제 데이터에서 상기 수신한 자가 작성 문제와 유사성을 비교하여 유사도가 기준값 이상인 문제 데이터를 삭제하여 상기 교수자의 단말장치로 제공한다.

상기 제어부는, 상기 추출한 문제 데이터에 상기 교수자가 지정한 등급 평가 정보를 매칭시켜 상기 저장부에 저장시킬 수 있다.

상기 저장부는 상기 자가 작성 문제와 상기 자가 작성 문제를 제출한 학생의 식별 정보를 매칭시켜 저장하며, 상기 제어부는, 상기 지정 과목의 평가시 상기 추출한 문제 데이터와 상기 자가 작성 문제에 지정된 출제 비율로 문제를 선정해 상기 학생의 단말장치로 전송할 수 있다.

상기 제어부는, 상기 출제 비율로 문제의 선정시 상기 추출한 문제 데이터에 평가된 평가 등급의 출제 비율을 더 고려하여 문제를 선정할 수 있다.

상기 제어부는, 각 학생이 제출되는 상기 자가 작성 문제의 양에 따라 성과 점수를 다르게 부여할 수 있다.

본 발명의 실시예에 따르면, 온라인상으로 진행되는 수업의 경우 학생들의 최선의 평가를 위하여 데이터베이스에 저장된 문제은행과 학생이 가령 과제물로서 제출한 문제를 비교하여 비교 결과에 따라 학생에게 문제를 제시할 수 있어 학생 수업 참여를 고양하고 아울러 좀더 객관적인 평가가 이루어질 수 있을 것이다.

도 1은 본 발명의 실시예에 따른 문제생성 시스템을 나타내는 도면,
도 2는 도 1의 시스템의 문제생성 과정을 도식화하여 나타낸 도면,
도 3은 도 1의 문제생성장치의 세부구조를 예시한 블록다이어그램, 그리고
도 4는 본 발명의 실시예에 따른 문제생성 과정의 흐름도이다.

이하, 도면을 참조하여 본 발명의 실시예에 대하여 상세히 설명한다.

도 1은 본 발명의 실시예에 따른 문제생성시스템을 나타내는 도면이고, 도 2는 도 1의 시스템의 문제생성 과정을 도식화하여 나타낸 도면이다.

도 1에 도시된 바와 같이, 본 발명의 실시예에 따른 문제생성시스템(90)은 학습자 단말장치(101), 교수자 단말장치(103), 통신망(110) 및 문제생성장치(혹은 학습서비스장치)(120)의 일부 또는 전부를 포함한다.

여기서, "일부 또는 전부를 포함한다"는 것은 통신망(110)과 같은 일부 구성요소가 생략되어 학습자 단말장치(101) 및 교수자 단말장치(103)가 문제생성장치(120)와 다이렉트 통신(예: P2P 통신)을 수행할 수 있는 것 등을 의미하거나, 문제생성장치(120)의 일부 또는 전부가 통신망(110) 내의 네트워크장치(예: 무선교환장치 등)에 통합되어 구성될 수 있는 것 등을 의미하는 것으로서, 발명의 충분한 이해를 돕기 위하여 전부 포함하는 것으로 설명한다.

학습자 단말장치(101)는 가령 문제생성장치(120)에서 제공하는 온라인 수업 등의 서비스를 이용할 수 있는 데스크탑컴퓨터, 랩탑컴퓨터, 태블릿PC, 스마트폰, 스마트TV나 갤럭시*어와 같은 웨어러블장치를 포함할 수 있다. 물론 이의 장치들에 연동하는 주변장치로서 인공지능(AI) 스피커 등을 더 포함할 수 있다. 본 발명의 실시예에서는 온라인상으로 문제생성장치(120)에 접속하여 학습을 수행하고, 가령 과제물로서 자신이 문제를 작성하여 제출할 수 있다면 어떠한 장치여도 무관하다.

학습자 단말장치(101)는 문제생성장치(120)에 접속하여 학습 서비스를 이용한다. 예를 들어, 디지털 또는 사이버 대학교 등에서 제공하는 학습 서비스를 이용할 수 있다. 또한, 학습자 단말장치(101)는 강의 진도가 진행된 이후에, 또는 특정 강의 진도를 지정하여 가령 학습 이후에 문제를 작성하여 제출할 수 있다. 물론 작성되는 문제는 과제물의 형태로 제출될 수 있다. 실제로 학습자는 강의를 미리 예습하거나 강의를 수강한 이후에 그 내용을 이해해야만 문제의 작성이 가능할 수 있기 때문에, 학습 효과를 부여할 수 있을 것이다.

예를 들어, 학습자는 지정 과목의 온라인상의 학습을 통해 학습을 수행한 후, 교재의 특정 내용을 근거로 자신이 직접 문제를 작성할 수 있다. 이러한 문제는 한글워드나 MS워드와 같은 프로그램을 통해 작성된 문제가 제공되도록 할 수 있지만, 문제생성장치(120)의 특정 아이콘이나 버튼 등을 클릭해 이를 통해 문제를 생성해 제출할 수도 있을 것이다. 객관식 형태의 문제이든 주관식 형태의 문제이든 상관없다.

이와 같이, 학습자 단말장치(101)를 통해 제출된 문제가 많으면 그에 비례하여 문제생성장치(120)는 해당 학습자에게 많은 배점을 부여할 수 있다. 가령, 중간고사나 기말고사와 같이 수업에 대한 평가가 있을 때 이에 반영할 수 있다. 또한, 학습자 단말장치(101)는 문제생성장치(120)로부터 자신이 제공한 문제를 근거로 필터링된 DB(120a)상에 저장된 문제와, 또 자신이 제공한 문제를 일정 비율에 따라 선택한 평가 문제를 수신하여 평가를 받을 수 있다. 다시 말해, 자신이 제출한 문제가 가령 50% 정도 포함되어 중간고사나 기말고사 등의 평가시 제공될 수 있다. 물론 이러한 문제는 문제생성장치(120)에서 필터링한 문제를 교수자 단말장치(103)에서 난이도에 따라 등급을 구분하고 구분한 등급을 적절히 포함하여 문제를 생성하며, 해당 생성된 문제를 제공받을 수 있다.

또한, 교수자 단말장치(103)는 학습자 단말장치(101)와 마찬가지로 다양한 장치를 포함한다. 대표적으로 스마트폰이나 태블릿PC 및 랩탑컴퓨터 등을 포함할 수 있다. 교수자 단말장치(103)는 문제생성장치(120)로부터 난이도의 등급을 구분하기 위한 문제 은행 즉 문제 데이터를 수신할 수 있다. 등급을 구분하는 문제 데이터는 학생들이 학습자 단말장치(101)를 통해 제출한 문제를 DB(120a)에 저장된 문제 데이터와 비교하여 유사성이 낮거나 없는 문제들을 제공받을 수 있다.

교수자 단말장치(103)는 본 발명의 실시예에 따라 문제생성장치(120)에서 학습자 단말장치(101)로 과제물로 제시하여 학생 또는 학습자들이 문제(혹은 문항)를 직접 작성하여 제공한 시점에 내부의 DB(120a)에 저장되어 있는 문제들과 비교하여 유사성이 기준값 이하 가령 유사성이 없는 문제들만 추출한 문제들을 제공받아 난이도에 대한 평가를 진행할 수 있을 것이다. 가령, DB(120a)에 총 1000개의 문항이 문제은행으로 저장되어 있고, 학생들이 제공한 문제가 500개이면, 유사도를 비교하여 기준값 이하인 문제들을 선별하여(예: 나머지 500개), 또는 진도에 맞는 문항들을 더 선별하여(예: 나머지 500개 중 진도에 맞는 문항 100개) 교수자 단말장치(103)로 전송할 수 있고, 교수자는 이에 대한 난이도 등급을 입력할 수 있다.

물론 문항은 목록 형태로 제공될 수 있으며, 교수자 단말장치(103)에 표시된 문항을 화면에서 보면서 교수자는 등급을 매기고, 이에 대하여 완료되면 문제생성장치(120)로 전송할 수 있다.

통신망(110)은 유무선 통신망을 모두 포함한다. 가령 통신망(110)으로서 유무선 인터넷망이 이용되거나 연동될 수 있다. 여기서 유선망은 케이블망이나 공중 전화망(PSTN)과 같은 인터넷망을 포함하는 것이고, 무선 통신망은 CDMA, WCDMA, GSM, EPC(Evolved Packet Core), LTE(Long Term Evolution), 와이브로(Wibro) 망 등을 포함하는 의미이다. 물론 본 발명의 실시예에 따른 통신망(110)은 이에 한정되는 것이 아니며, 향후 구현될 차세대 이동통신 시스템의 접속망으로서 가령 클라우드 컴퓨팅 환경하의 클라우드 컴퓨팅망, 5G망 등에 사용될 수 있다. 가령, 통신망(110)이 유선 통신망인 경우 통신망(110) 내의 액세스포인트는 전화국의 교환국 등에 접속할 수 있지만, 무선 통신망인 경우에는 통신사에서 운용하는 SGSN 또는 GGSN(Gateway GPRS Support Node)에 접속하여 데이터를 처리하거나, BTS(Base Station Transmission), NodeB, e-NodeB 등의 다양한 중계기에 접속하여 데이터를 처리할 수 있다.

통신망(110)은 액세스포인트를 포함할 수 있다. 여기서의 액세스포인트는 건물 내에 많이 설치되는 펨토(femto) 또는 피코(pico) 기지국과 같은 소형 기지국을 포함한다. 여기서, 펨토 또는 피코 기지국은 소형 기지국의 분류상 학습자 단말장치(101) 및 교수자 단말장치(103) 등을 최대 몇 대까지 접속할 수 있느냐에 따라 구분된다. 물론 액세스포인트는 학습자 단말장치(101) 및 교수자 단말장치(103) 중 적어도 하나의 장치와 지그비 및 와이파이 등의 근거리 통신을 수행하기 위한 근거리 통신모듈을 포함할 수 있다. 액세스포인트는 무선통신을 위하여 TCP/IP 혹은 RTSP(Real-Time Streaming Protocol)를 이용할 수 있다. 여기서, 근거리 통신은 와이파이 이외에 블루투스, 지그비, 적외선, UHF(Ultra High Frequency) 및 VHF(Very High Frequency)와 같은 RF(Radio Frequency) 및 초광대역 통신(UWB) 등의 다양한 규격으로 수행될 수 있다. 이에 따라 액세스포인트는 데이터 패킷의 위치를 추출하고, 추출된 위치에 대한 최상의 통신 경로를 지정하며, 지정된 통신 경로를 따라 데이터 패킷을 다음 장치, 예컨대 문제생성장치(120)로 전달할 수 있다. 액세스포인트는 일반적인 네트워크 환경에서 여러 회선을 공유할 수 있으며, 예컨대 라우터(router), 리피터(repeater) 및 중계기 등이 포함된다.

문제생성장치(120)는 각 수업시간 마다 과제물로 학생 단말 즉 학습자 단말장치(101)로부터 문제를 작성하여 제출하도록 하고, 메인서버로서 문제생성장치(120)는 각 문제를 서버에 기저장된 문제와 비교하여 유사한 문제를 삭제한 후 유사성이 없는 문제를 교수자 단말장치(103)로 전송한다. 교수자는 메인서버로부터 수신한 문제를 평가하여 난이도를 A/B/C/D 등급 구분하여 메인서버로 다시 전송한다. 그리고 메인서버인 문제생성장치(120)는 교수자 단말장치(103)로부터 수신한 문제를 기저장된 문제와 분리하여 가령 DB(120a)에 저장한다. 이때 저장된 문제의 경우 해당 문제를 생성한 학생의 고유 코드 즉 식별정보를 매칭시켜 저장한다. 그리고 기말고사와 같은 평가시 기저장된 문제 즉 문제은행과 학생이 생성한 문제를 각 50%씩 출제할 수 있다. 그리고 수업 평가시 많은 문제를 생성한 학생에게는 성과점수를 배분하도록 하여 학업 참여도를 높일 수 있을 것이다.

도 2에서 볼 수 있는 바와 같이, 문제생성장치(120)는 문제은행 DB에서 학습자가 제출한 문제와 유사성을 비교한다. 물론 DB(120a)에 저장되는 문항은 수년간의 온라인 수업을 통해 교수자들이 출제한 문제일 수 있고, 외부장치(예: 타대학 등의 서버)에 접속하여 제휴하에 수집한 문제들일 수 있다. 이러한 문제들을 수집하여 문제은행을 생성한 후, 이를 기반으로 학습자 단말장치(101)로부터 수신되는 문제들과 유사성을 비교하여 필터링할 수 있다. 유사성의 비교는 간단하게는 해당 문항을 분석하여 키워드를 추출하고, 해당 키워드를 중심으로 분석할 수 있다. 물론 문제생성장치(120)는 문제은행을 분석하여 분석 결과로서 키워드에 대한 정보를 기저장할 수 있다. 따라서, 해당 키워드들을 서로 비교하여 일치하는 키워드의 개수 등에 따라 유사도를 평가하여 이를 근거로 문제를 필터링해 낼 수 있다.

물론 문제생성장치(120)는 문제은행 즉 DB(120a)에 저장되어 있는, 더 정확하게는 특정 진도 등을 근거로 구분되어 있는 문제 데이터를 불러내어 위에서와 같이 학생들이 제출한 문제들과 유사성을 비교하여 유사성이 기준값 이상인 문제들을 필터링 또는 삭제한다. 그리고, 삭제 이후에 남은 문제들을 교수자 단말장치(103)로 전송하여 난이도에 대한 등급을 입력하도록 요청하는 것이다. 이와 같이 처리되는 문제 데이터들을 DB(120a)상에 카테고리를 구분하여 저장될 수 있다. 예를 들어, 문제은행의 문제 데이터는 A라는 영역에 저장하고, 학생들이 제출한 문제는 B라는 영역에 저장하며, 2개의 데이터를 서로 비교한 후 등급을 입력받은 데이터는 C라는 영역에 저장하는 것이다.

이후, 문제생성장치(120)는 학습자 즉 학생의 기말고사 등의 평가를 위하여 해당 DB(120a)에 접속하여 일정 비율로 문항을 추출하여 학습자 단말장치(101)로 전송할 수 있다. 예를 들어, 학생이 제출한 문제가 저장되어 있는 B 영역에서 50%의 문항을 추출하고, C의 영역에서 50%의 문항을 추출하는 것이다. 물론 C의 영역에서 문항을 추출할 때, 학생의 수준 등을 고려하여 난이도의 등급을 판별해 추출할 수 있으며, 가령 교수자가 출제 등급의 출제 비율을 별도로 지정한 경우에는 이를 근거로 나머지 50%의 문항을 출제할 수 있다. 물론 목적은 온라인 수업의 특성상 학습자들의 학습을 고양하기 위한 것이므로, 모든 학생들에 대하여 맞춤형으로 제공되는 것이 바람직할 수 있다. 예를 들어, 지정 과목의 시험 출제교수가 50% 중 난이도가 높은 D 등급의 비율을 10%로 하고, B 및 C 등급의 비율을 각각 15%, 그리고 A 등급의 비율을 10%로 설정하였다면, 이를 근거로 50%에 대한 문항이 추출되어 학생이 제출했던 50%의 문항과 결합되어 제공되는 것이다. 총 30문항인 경우, 학생이 제출했던 문항이 15문항, 그리고 유사성이 없는 15문항이 위의 배율대로 설별되어 제공된다고 볼 수 있다.

이와 같이, 사이버 대학교 등의 온라인 수업에서 학생들의 수업 참여를 적극적으로 유도할 수 있고, 아울러 최선의 평가를 통해 학습자들의 학업 능력을 고양시킬 수 있을 것이다.

물론 문제생성장치(120)는 인공지능(AI) 프로그램을 이용하여 딥러닝을 수행하는 경우, 좀더 정확도가 높은 문항을 선별하여 평가시 제시할 수도 있을 것이다. 예를 들어, 수년간의 학생들에 대한 수업 패턴을 분석한 결과, 난이도가 높은 문항의 비율을 줄이는 것이 낫다고 판단될 때, 이러한 난이도의 선정 비율을 조정하여 출제할 수 있다. 또한, 학생들의 온라인상의 수업 시간을 분석한 결과, 온라인 수업시간이 많지 않은 경우에는, 물론 모든 학생들에 대한 총 시간의 평균시간일 수 있지만, 이러한 다양한 데이터를 분석하여 적절한 타이밍에 학생들의 행동 패턴을 예측하고 예측 결과를 근거로 문항을 선별하여 학생들에게 제시할 수 있을 것이다.

도 3은 도 1의 문제생성장치의 세부구조를 예시한 블록다이어그램이다.

도 3에 도시된 바와 같이, 본 발명의 실시예에 따른 문제생성장치(120)는 통신 인터페이스부(300), 제어부(310), 문제생성실행부(320) 및 저장부(330)의 일부 또는 전부를 포함한다.

여기서, "일부 또는 전부를 포함한다"는 것은 저장부(330)와 같은 일부 구성요소가 생략되어 구성되거나, 문제생성실행부(320)와 같은 일부 구성요소가 제어부(310)와 같은 다른 구성요소에 통합되어 구성될 수 있는 것 등을 의미하는 것으로서, 발명의 충분한 이해를 돕기 위하여 전부 포함하는 것으로 설명한다.

통신 인터페이스부(300)는 도 1의 통신망(110)을 경유하여 학습자 단말장치(101) 및 교수자 단말장치(103)와 통신을 수행한다. 통신을 수행하는 과정에서 통신 인터페이스부(300)는 변/복조, 코딩/디코딩, 먹싱/디먹싱 및 암호화/복호화 등의 동작을 수행할 수 있다. 이는 당업자에게 자명한 사항이므로 더 이상의 설명은 생략하도록 한다.

통신 인터페이스부(300)는 학습자 단말장치(101)의 요청에 따라 온라인 수업 등이 가능한 학습 서비스를 제공하며, 이의 과정에서 지정 교과목의 교수자로부터 과제물 제출 요청이 있는 경우, 해당 요청에 따른 과제물로서 수강한 강의 진도의 범위에서 자신이 직접 문제를 작성하여, 가령 객관식이든 주관식이든 상관없이 다양한 형태로 문항을 만들어 제출할 수 있다. 물론 제출되는 문항이 많을수록 많은 점수를 받을 수도 있다.

또한, 통신 인터페이스부(300)는 제어부(310)의 제어하에 기저장된 문제은행의 문제 데이터에서 학생들이 제출한 문제들을 뺀 나머지 문제들, 또는 그 나머지 문제들 중 진도의 범위에 부합하는 문제들만 추출하여 교수자 단말장치(103)로 전송할 수 있다. 물론, 여기서 "뺀 나머지 문제들"이라는 것은 전체 문제 데이터에서 학생들이 제출한 문제들을 삭제한 문제들을 의미할 수 있다. 따라서, 삭제한다는 것과 추출한다는 것은 유사한 의미로 해석될 수 있을 것이다.

이에 따라, 통신 인터페이스부(300)는 교수자 단말장치(103)로 제공한 문제들에 대하여 교수자들이 각각 평가한 난이도 등의 등급에 대한 정보를 수신하여 이를 제어부(310)로 전달할 수 있을 것이다.

제어부(310)는 문제생성장치(120)를 구성하는 통신 인터페이스부(300), 문제생성실행부(320) 및 저장부(330)의 전반적인 제어 동작을 담당한다. 통신 인터페이스부(300)를 통해 수신되는 정보나 데이터를 수신하여 저장부(330)에 임시 저장한 후 다시 불러내어 문제생성실행부(320)로 제공할 수 있다. 예를 들어, 통신 인터페이스부(300)를 통해 학생들이 제출하는 문제들과 관련한 데이터가 수신되면 이를 저장부(330)에 임시 저장한 후 불러내어 문제생성실행부(320)로 제공할 수 있다. 여기서, 학생들이 제출하는 문제들과 관련한 데이터는 본 발명의 실시예에 따라 생성 문제 등을 명명될 수도 있을 것이다.

또한, 제어부(310)는 문제생성실행부(320)의 요청에 따라, DB(120a)로부터 지정 과목과 관련한 문제은행의 문제 데이터를 제공할 수 있다. 그리고, 문제은행의 문제 데이터에서 학생들이 제출한 생성 문제를 제외한 나머지 혹은 잔여 문제 데이터를 교수자 단말장치(103)로 제공하도록 통신 인터페이스부(300)를 제어할 수 있다.

이외에도 제어부(310)는 다양한 동작을 수행할 수 있지만, 이는 앞서 도 1의 문제생성장치(120)를 통해 충분히 설명하였으므로 그 내용들로 대신하고자 한다.

한편, 도 3의 문제생성실행부(320)는 학습 서비스를 학습자 단말장치(101)로 제공하기 위한 동작 이외에 문제 생성을 위한 동작을 수행할 수 있다. 여기서, 문제 생성은 MS워드와 같이 문서편집기를 통해 작성된 문제를 문서파일의 형태로 수신하여 이를 분석하거나 프로그램적으로 별도의 UX/UI창 혹은 팝업창을 통해 문항을 작성하게 하고 이를 수신하여 분석하는 것 등의 방법이 가능할 수 있다. 다양한 방법이 가능하므로 본 발명의 실시예에서는 어느 하나의 방식에 특별히 한정하지는 않을 것이다. 또한, 문제생성실행부(320)는 수신된 문제들에 대한 분석을 수행한다. 가장 간단하게는 키워드 중심으로 구분하여 키워드 데이터를 생성할 수 있다.

따라서, 문제생성실행부(320)는 수년간의 학습 서비스를 통해 취득한 문제은행의 문제들을 분석하여 분석 결과로서 저장한 키워드 데이터(혹은 제1 키워드 데이터)와 학생들이 제출하는 문제들을 분석하여 얻은 키워드 데이터(혹은 제2 키워드 데이터)를 서로 비교하여 동일 또는 유사한 단어가 많이 발견되면 유사성이 높다고 판단하고, 유사성을 근거로 문제은행의 문제 데이터에서 해당 문제를 삭제하거나 배제시킨다. 이와 같은 방법으로 기저장하고 있는 문제 데이터에서 학생들이 제출한 데이터를 제외한 나머지의 문제 데이터를 추출하여 교수자 단말장치(103)로 전송한다.

또한, 문제생성실행부(320)는 교수자 단말장치(103)로 제공한 문제 데이터에 대하여 교수자들이 평가하는 평가 등급에 대한 정보가 제공되면 이를 지정 포맷으로 생성하고 생성한 지정 포맷의 데이터를 DB(120a)에 갱신하여 저장시킬 수 있다.

이외에도 문제생성실행부(320)는 학습자들의 기말고사 등의 평가를 위해 가령 교수자가 지정한 비율에 따라 문제를 선별하여 출제할 수 있다. 예를 들어, 학생들이 제출한 문제들과 해당 문제를 제외한 문제은행의 나머지 문제들을 50 대 50의 비율로 결정하여 해당 비율에 맞게 문항을 선별해 출제할 수 있다. 무엇보다 나머지 50%의 비율에 해당 문제는 교수자 단말장치(103)로부터 등급이 지정되었으므로 교수자가 해당 등급의 출제 비율도 지정한 경우, 해당 정보를 근거로 등급에 맞는 문항들을 가령 랜덤하게 선별하여 출제할 수 있다.

나아가, 문제생성실행부(320)는 학습자들의 학습에 대한 평가를 수행할 수 있다. 가령, 과제물로서 문제를 제출하도록 하여 해당 과제물에 점수를 부여할 수 있다. 해당 과제물은 중간고사를 대체할 수 있으므로, 제출된 문항의 개수 등을 고려하여 배점을 하는 것이다. 또한, 기말고사의 경우에는 앞서 가령 50 대 50 비율로 선별하여 출제한 문제들에 대하여 체점을 하여, 체점 결괄로 배점하고, 이를 총 합산 및 평균하여 한학기 동안의 성적을 산출할 수 있을 것이다.

저장부(330)는 제어부(310)의 제어하에 다양한 정보 및 데이터를 임시 저장하고, 제어부(310)의 요청에 따라 출력할 수 있다. 여기서, 정보는 간단한 제어명령 정도가 될 수 있으며, 데이터는 실질적인 데이터가 될 수 있다. 통상 데이터 패킷 또는 패킷 데이터는 제어명령 등의 부가정보 등이 포함되는 헤더부와, 실질 데이터, 가령 문제 데이터가 포함되는 페이로드 데이터부(혹은 제어데이터부)를 포함할 수 있다. 저장부(330)는 데이터 패킷 내의 데이터를 저장할 수 있다.

도 4는 본 발명의 실시예에 따른 문제생성 과정의 흐름도이다.

설명의 편의상 도 4를 도 1과 함께 참조하면, 본 발명의 실시예에 따른 문제생성장치(120)는 강의가 이루어지는 지정 과목과 관련한 문제 데이터를 저장부에 저장할 수 있다(S400). 물론 이외에도 문제생성장치(120)는 문제 데이터와 매칭하여 해당 문제 데이터를 통해 추출된 키워드 데이터를 저장할 수 있다.

또한, 문제생성장치(120)는 강의를 수강하는 학생들의 단말장치 가령 도 1의 학습자 단말장치(101)로부터 각 학생이 제출하는 지정 과목과 관련한 생성 문제를 수신하고, 수신한 생성 문제와 (기)저장한 문제 데이터를 비교하여 유사성이 기준값 이하인 문제 데이터를 추출하여 강의를 진행하는 교수자의 교수자 단말장치(103)로 제공할 수 있다(S410).

물론 위의 동작을 수행하기 위하여 문제생성장치(120)는 학생들이 작성하여 제출하는 생성 문제를 분석하여 키워드를 추출하고 추출한 키워드와 저장부에 기저정한 문제은행의 문제 데이터에 매칭되는 키워드 데이터를 근거로 유사도를 비교하여 유사도가 높으면 해당 문항을 배제시키고 유사도가 낮으면 해당 문항은 교수자 단말장치(103)로 등급을 평가받기 위해 제공될 수 있는 것이다. 예를 들어, 문제은행의 지정 문제 데이터에 총 10개의 키워드가 설정되었다고 가정해 보자. 그리고, 학생이 제출한 생성 문제의 키워드를 추출하여, 물론 그 개수는 다양할 수 있지만, 총 10개의 키워드 중 몇개의 키워드가 일치하는지를 판단해 볼 수 있다. 가령 50%가 넘으면 배제시킬 수 있을 것이다. 여기서, "배제"시킨다는 것은 교수자 단말장치(103)로 등급을 평가받기 위해 제공되지 않을 수 있다는 것이고, 또 기말고사 등의 평가를 위해 학생에게 제출되지 않을 수 있다는 것을 의미한다.

상기한 내용들 이외에 문제생성장치(120)와 관련한 자세한 동작은 앞서 충분히 설명하였으므로, 그 내용들로 대신하고자 한다.

한편, 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합하거나 결합하여 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 그 모든 구성요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다. 이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 비일시적 저장매체(non-transitory computer readable media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시 예를 구현할 수 있다.

여기서 비일시적 판독 가능 기록매체란, 레지스터, 캐시(cache), 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라, 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로, 상술한 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리 카드, ROM 등과 같은 비일시적 판독가능 기록매체에 저장되어 제공될 수 있다.

이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.

101: 학습자 단말장치 103: 교수자 단말장치
110: 통신망 120: 문제생성장치
300: 통신 인터페이스부 310: 제어부
320: 문제생성실행부 330: 저장부

Claims (7)

1. 강의가 이루어지는 지정 과목과 관련한 문제 데이터를 저장하는 저장부; 및
   상기 강의를 수강하는 학생들의 단말장치로부터 각 학생이 상기 지정 과목과 관련해 작성하여 제출하는 자가 작성 문제를 수신하고, 상기 수신한 자가 작성 문제와 상기 저장한 문제 데이터를 비교하여 유사성이 기준값 이하인 문제 데이터를 추출하여 상기 강의를 진행하는 교수자의 단말장치로 제공해 문제의 난이도에 대한 등급 평가를 요청하는 제어부;를 포함하되,
   상기 제어부는, 상기 저장한 문제 데이터에서 상기 수신한 자가 작성 문제와 유사성을 비교하여 유사도가 기준값 이상인 문제 데이터를 삭제하여 상기 기준값 이하의 문제 데이터를 상기 교수자의 단말장치로 제공하고,
   상기 제어부는, 상기 지정 과목의 평가시 상기 추출한 기준값 이하의 문제 데이터와 상기 자가 작성 문제에 지정된 출제 비율로 문제를 선정해 상기 학생의 단말장치로 전송하는 문제생성장치.
2. 삭제
3. 제1항에 있어서,
   상기 제어부는, 상기 추출한 문제 데이터에 상기 교수자가 지정한 등급 평가 정보를 매칭시켜 상기 저장부에 저장시키는 문제생성장치.
4. 제3항에 있어서,
   상기 저장부는 상기 자가 작성 문제와 상기 자가 작성 문제를 제출한 학생의 식별 정보를 매칭시켜 저장하는 문제생성장치.
5. 제4항에 있어서,
   상기 제어부는, 상기 출제 비율로 문제의 선정시 상기 추출한 문제 데이터에 평가된 평가 등급의 출제 비율을 더 고려하여 문제를 선정하는 문제생성장치.
6. 제1항에 있어서,
   상기 제어부는, 각 학생이 제출되는 상기 자가 작성 문제의 양(volume)에 따라 성과 점수를 다르게 부여하는 문제생성장치.
7. 저장부 및 제어부를 포함하는 문제생성장치의 구동방법으로서,
   강의가 이루어지는 지정 과목과 관련한 문제 데이터를 상기 저장부에 저장하는 단계;
   상기 제어부가, 상기 강의를 수강하는 학생들의 단말장치로부터 각 학생이 상기 지정 과목과 관련해 작성하여 제출하는 자가 작성 문제를 수신하고, 상기 수신한 자가 작성 문제와 상기 저장한 문제 데이터를 비교하여 유사성이 기준값 이하인 문제 데이터를 추출하여 상기 강의를 진행하는 교수자의 단말장치로 제공해 문제의 난이도에 대한 등급 평가를 요청하는 단계;
   상기 제어부가, 상기 저장한 문제 데이터에서 상기 수신한 자가 작성 문제와 유사성을 비교하여 유사도가 기준값 이상인 문제 데이터를 삭제하여 상기 기준값 이하의 문제 데이터를 상기 교수자의 단말장치로 제공하는 단계; 및
   상기 제어부는, 상기 지정 과목의 평가시 상기 추출한 기준값 이하의 문제 데이터와 상기 자가 작성 문제에 지정된 출제 비율로 문제를 선정해 상기 학생의 단말장치로 전송하는 단계;를
   포함하는 문제생성장치의 구동방법.

Images