KR20200115966A - A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank - Google Patents
A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank Download PDFInfo
- Publication number
- KR20200115966A KR20200115966A KR1020190037509A KR20190037509A KR20200115966A KR 20200115966 A KR20200115966 A KR 20200115966A KR 1020190037509 A KR1020190037509 A KR 1020190037509A KR 20190037509 A KR20190037509 A KR 20190037509A KR 20200115966 A KR20200115966 A KR 20200115966A
- Authority
- KR
- South Korea
- Prior art keywords
- learner
- learning
- information
- similar
- similarity
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/268—Morphological analysis
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/02—Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
Abstract
Description
본 발명은 문제은행에서 학습자에게 문제를 제공하는 시스템 등에 관한 것으로, 상세하게는, 문제를 풀이한 학습자의 문제 풀이 학습 정보와 문제의 문맥을 고려하여, 학습하려는 자에게 유사한 학습자의 문제, 그리고 그 문제의 문맥을 바탕으로 문제를 추천해주는 시스템 및 방법에 관한 것이다.The present invention relates to a system for providing a problem to a learner in a problem bank, and in detail, in consideration of the problem solving learning information and the context of the problem, the learner's problem similar to the learner, and the It relates to a system and method for recommending problems based on the context of the problem.
시스템상에서 학습자에게 맞춤형으로 문제를 제공하는 시스템의 방법은 단순히 인쇄된 학습지의 고정된 문제 리스트를 학습하는 것과는 다르게, 학습자에게 적합한 문제를 지능적으로 제공하는 함으로써, 학습 효과를 증대할 수 있는 기술이다.The system's method of providing customized problems to learners on the system is a technology that can increase the learning effect by intelligently providing suitable problems to learners, unlike simply learning a fixed list of problems in printed workbooks.
종래기술의 맞춤형 문제 제공 방법 중에는, 학습자의 학습 정보를 반영하는 문제 추천 기술로서 학습자의 학습 정보를 바탕으로 진도 등의 유사도를 파악하여, 학습자와 유사한 타학습자의 학습 문제를 추천하는 방식이 존재하는데, 문제 추천시 학습자의 추가적인 학습 정보를 반영하지 못할 뿐만 아니라 학습 문제의 특성 등을 반영하지 못하여 학습자의 학습 효과 증대에 제한이 있었다.Among the customized problem provision methods of the prior art, there is a method of recommending learning problems of other learners similar to learners by grasping similarity such as progress based on the learner's learning information as a problem recommendation technology that reflects the learner's learning information. In addition, when recommending a problem, not only does not reflect the learner's additional learning information, but also does not reflect the characteristics of the learning problem.
본 발명이 이루고자 하는 기술적 과제는, 학습자의 행동기반 유사도와 학습 문제의 문맥 유사도를 파악하여 문제 추천에 반영함으로써, 학습자는 학습하고자 하는 문제와 유사한 문맥의 문제들을 제공받을 수 있으며, 학습자의 행동기반 유사도를 바탕으로 학습자의 학습 동향을 예측하여 문제를 제공함으로써, 학습의 효과를 증대할 수 있는 맞춤형 학습 제공 장치 및 그 방법을 제공하고자 한다.The technical task to be achieved by the present invention is to identify the learner's behavior-based similarity and the context similarity of the learning problem and reflect it in the recommendation of the problem, so that the learner can receive problems in a context similar to the problem to be learned, and It is intended to provide an apparatus and method for providing customized learning that can increase the effectiveness of learning by predicting the learning trend of learners based on similarity and providing problems.
본 발명이 이루고자 하는 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problem to be achieved by the present invention is not limited to the technical problems mentioned above, and other technical problems that are not mentioned can be clearly understood by those of ordinary skill in the technical field to which the present invention belongs from the following description. There will be.
상기 기술적 과제를 달성하기 위하여, 본 발명의 장치 및 방법은 문제를 보관하는 문제 은행 모듈, 문서의 문맥을 계산하는 문제 문맥 분석 모듈, 사용자의 학습정보를 바탕으로 유사 학습자를 분류하는 학습자 학습 유사 분석 모듈, 학습 정보 모듈, 최종적으로 문제를 큐레이션하는 학습자별 문제 추출 모듈을 포함하고 있다.In order to achieve the above technical problem, the apparatus and method of the present invention include a problem bank module for storing problems, a problem context analysis module for calculating the context of a document, and a learner learning similarity analysis that classifies similar learners based on the user's learning information. It includes a module, a learning information module, and a problem extraction module for each learner that finally curates the problem.
본 발명에 따른 학습 문제 큐레이션 시스템은, 학습 문제를 제공하는 기업, 단체, 개인과 연결하는 시스템과, 상기 명기한 모듈들이 탑재된 서버를 포함하여 운용될 수 있다.The learning problem curation system according to the present invention may be operated by including a system that connects companies, organizations, and individuals providing learning problems, and a server on which the specified modules are mounted.
본 발명에 따른 문제 큐레이션 시스템 장치 및 그 방법은 학습자에게 집중적으로 맞춤형 문제를 제공하는 것이 가능하므로, 학습의 효과를 더욱 향상시킬 수 있는 효과가 있다.The problem curation system apparatus and method according to the present invention can provide a tailored problem intensively to a learner, so that the effect of learning can be further improved.
본 발명의 효과는 상기한 효과로 한정되는 것은 아니며, 본 발명의 상세한 설명 또는 특허청구범위에 기재된 발명의 구성으로부터 추론 가능한 모든 효과를 포함하는 것으로 이해되어야 한다.The effects of the present invention are not limited to the above effects, and should be understood to include all effects that can be inferred from the configuration of the invention described in the detailed description or claims of the present invention.
도1. 본 발명의 시스템 구성하기 위한 개략적인 시스템 구성도.
도2. 문제 은행에 저장된 문제에서 문제별 유사도 산정 절차의 예시.
도3. 학습자별 학습정보를 바탕으로 학습자별 유사도 산정 절차의 예시.
도4. 서버에서 문제 큐레이션으로 추천된 문제의 저장구조.
도5. 웹 또는 모바일 기기에서 문제 큐레이션으로 추천된 문제를 푸는 화면 예시.
도6. 유사 학습자의 선정에서 추가적인 선택성을 부가한 예시.
도7. 유사 학습 문제의 선정에서 추가적인 선택성을 부가한 예시.
도8. 유사 학습자의 선정에 대한 변형 실시예.Fig. 1. A schematic system configuration diagram for configuring the system of the present invention.
Fig. 2. An example of the procedure for calculating the similarity for each question in the question stored in the question bank.
Fig. 3. An example of the procedure for calculating similarity for each learner based on learning information for each learner.
Fig. 4. The storage structure of problems recommended by the server for problem curation.
Fig. 5. An example screen for solving a problem recommended by problem curation on a web or mobile device.
Fig. 6. An example of adding additional selectivity in the selection of similar learners.
Fig. 7. An example of adding additional selectivity in the selection of similar learning problems.
Fig. 8. A variation on the selection of similar learners.
이하에서는 첨부한 도면을 참조하여 본 발명을 설명하기로 한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 따라서 여기에서 설명하는 실시예로 한정되는 것은 아니다.Hereinafter, the present invention will be described with reference to the accompanying drawings. However, the present invention may be implemented in various different forms, and therefore is not limited to the embodiments described herein.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결(접속, 접촉, 결합)"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 부재를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 구비할 수 있다는 것을 의미한다.Throughout the specification, when a part is said to be "connected (connected, contacted, bonded)" with another part, it is not only "directly connected", but also "indirectly connected" with another member in the middle. "Including the case. In addition, when a part "includes" a certain component, this means that other components may be further provided, not excluding other components, unless specifically stated to the contrary.
본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the present specification are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this specification, terms such as "comprise" or "have" are intended to designate the presence of features, numbers, steps, actions, components, parts, or a combination thereof described in the specification, but one or more other features. It is to be understood that the presence or addition of elements or numbers, steps, actions, components, parts, or combinations thereof, does not preclude in advance.
본 발명은 학습자에게 맞춤형 학습 문제를 제공하는 학습자 학습문제 제공 장치 및 그 방법에 관한 것으로서, 학습자 및 학습 문제의 유사도를 산정하여 학습 문제의 문맥 유사도 및 학습자의 학습 정보를 바탕으로 행동기반 유사도를 산정하여 문제를 제공함으로써 학습자에게 선택적인 집중 학습을 제공한다.The present invention relates to an apparatus and method for providing a learner learning problem that provides a customized learning problem to a learner, and calculates the similarity between the learner and the learning problem and calculates the behavior-based similarity based on the context similarity of the learning problem and the learner's learning information. Provides selective intensive learning to learners by providing problems.
이하, 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 당해 분야에 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 설명한다.Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings so that those of ordinary skill in the art can easily implement them.
우선 각 도면을 살펴보면, 도1은 본 발명을 시스템으로 구성하기 위한 개략적인 시스템 구성도로서, 문제 은행 모듈(100)은 문제제공자 단말기(10) 등으로부터 전송된 데이터를 저장하며, 분석 모듈(200)은 문제 은행 모듈(100)로부터 문제 데이터를 가져와 문제의 문맥 유사도를 산정하고 학습 정보 모듈(300)로부터 학습자의 학습 정보를 가져와 학습자의 행동기반 유사도를 산정하여 추출된 데이터인 제공 문제 집합을 제공 문제 처리 모듈(320)에 의해 학습자에게 제공하는 것을 나타낸다. 도2는 분석 모듈(200)에 의해서 문제 은행 모듈(100)에 저장된 문제에 대한 문제별 유사도를 산정하는 예시 절차로서, 문제별 형태소 분석 정보(500)를 기준으로 각 문제별 문맥 유사도를 자카드 유사도(Jaccard Similarity) 또는 코사인 유사도(Cosine Similarity) 방식 등으로 산정하여 각 문제별 유사 문제를 도출하여 리스트화하는 절차를 도시한 것이다.First, referring to each drawing, FIG. 1 is a schematic system configuration diagram for configuring the present invention as a system, wherein the
도3은 학습자별 학습정보를 바탕으로 학습자별 유사도를 산정하는 예시 절차로서, 학습자가 학습한 문제별로 저장된 정오답분포 데이터를 토대로 학습자간 행동기반 유사도를 자카드 유사도(Jaccard Similarity) 또는 코사인 유사도(Cosine Similarity) 방식 등으로 산정하여 각 학습자별 유사 학습자를 도출하여 리스트화하는 절차를 도시한 것이다. 도4는 서버에서 문제 큐레이션 및 문제의 저장구조를 도시한 것으로서, 학습자의 요청에 따라 행동기반 유사도가 높은 특정 학습자의 데이터를 토대로 학습 문제를 추출하여 학습자에게 문제를 제공하는 것을 나타낸다. 도5는 웹 또는 모바일 기기에서 문제 큐레이션으로 추천된 문제를 푸는 화면을 예시적으로 도시한 것으로서, 학습자는 맞출 것 같은 문제, 틀릴 것 같은 문제 등을 선택하여 학습자가 원하는 방향의 집중적인 학습 문제를 효과적으로 제공 받는 구조를 도시한 것이다.3 is an example procedure for calculating the similarity of each learner based on the learning information of each learner, and the behavior-based similarity between learners is determined based on the correct and incorrect answer distribution data stored for each problem learned by the learner, Jaccard Similarity or Cosine Similarity. Similarity) method, etc., to derive and list similar learners for each learner. 4 is a diagram illustrating a problem curation and a storage structure of a problem in a server, and shows that a problem is provided to a learner by extracting a learning problem based on data of a specific learner having a high behavior-based similarity at the request of a learner. 5 is an exemplary view showing a screen for solving a problem recommended by problem curation on a web or mobile device, where the learner selects a problem that is likely to be correct, a problem that is likely to be wrong, etc. It shows a structure that is effectively provided.
도6은 유사 학습자의 선정에서 추가적인 선택성을 부가한 예시로서, 각 학습자의 정오답율을 측정하여 이를 기준으로 유사 학습자를 상향 유사 학습자와 비상향 유사 학습자로 구분하여 도출한 것을 나타낸다. 도7은 유사 학습 문제의 선정에서 추가적인 선택성을 부가한 예시로서, 각 문제에 대한 정오답율을 측정하여 이를 기준으로 유사 학습 문제를 난이도 상향 유사 학습 문제와 난이도 비상향 유사 학습 문제로 구분하여 도출한 것을 나타낸다. 도8은 유사 학습자의 선정에 대한 변형 실시예로서 학습소요시간을 기준으로 유사 학습자를 선정하는 것을 예시적으로 나타낸 것이다.FIG. 6 is an example of adding additional selectivity in the selection of similar learners, and shows the results obtained by measuring the correct and incorrect rate of each learner and dividing similar learners into upward similar learners and non-going similar learners based on this. 7 is an example of adding additional selectivity in the selection of similar learning problems, by measuring the correct and incorrect rate for each problem, and derives similar learning problems by dividing them into difficulty-level upward-similar learning problems and difficulty-level non-oriented similar learning problems. Indicates one thing. FIG. 8 shows an example of selecting a similar learner based on the required learning time as a modified embodiment of the selection of similar learners.
도1에 도시된 바와 같이, 본 발명의 일실시예에 따른 학습자에게 맞춤형 학습 문제를 제공하는 문제은행에서의 문제 큐레이션 시스템 및 방법은, 학습 문제 및 그 관련 정보 등의 데이터를 제공하는 문제 제공자 단말기(10), 상기 데이터가 저장된 문제 은행 모듈(100), 학습 문제의 문맥 유사도와 학습자의 행동기반 유사도를 산정하며 학습자에게 제공할 문제를 추출하는 분석 모듈(200), 학습자가 학습한 문제의 정오답분포 등과 같은 데이터를 저장하며 학습자에게 제공될 문제를 저장하는 학습 정보 모듈(300) 및 학습자의 학습 관련 데이터를 송수신하는 학습자 단말기(400)를 포함한다. 상기 분석 모듈(200)은 문제별 형태소 분석 정보(500)를 기반으로 문제간 유사도를 산정하여 문제별 유사 문제 리스트 정보(530)를 도출하고 학습자별 문제 풀이 정보(600)를 기반으로 학습자별 유사 학습자 리스트 정보(620)를 도출하며 상기 문제별 유사 문제 리스트 정보(530) 및 학습자별 유사 학습자 리스트 정보(620)를 이용하여 학습자별 문제 큐레이션 정보(710)를 각각 리스트 형태로 도출한다. 상기 리스트화된 학습자별 문제 큐레이션 정보를 토대로 해당 학습자가 이미 학습한 문제 등을 선택적으로 처리하고, 상기 리스트화된 학습자데이터를 토대로 학습자의 행동기반 유사도에 의하여 그대로 제공하거나 혹은 맞거나 틀릴 것으로 예상되는 문제를 선택적으로 제공한다.As shown in Fig. 1, the problem curation system and method in a problem bank for providing customized learning problems to learners according to an embodiment of the present invention is a problem provider providing data such as learning problems and related information. The
본 발명의 일실시예에서 문제 은행 모듈(100)은 문제 제공자 단말기(10)로부터 문제데이터를 전달받는다. 문제데이터는 학습자의 학습을 위한 학습 문제 및 그 관련 정보를 포함하는 것으로서, 특정한 유형, 학년, 단원, 난이도, 과목 및 분야, 객관식/주관식, 및 사지선다형 등을 포함할 수 있으며 이에 제한되지 않는다. 또한 문제의 수량도 특정한 개수에 국한되지 않으나, 계산속도, 저장공간 등을 고려하여 소정의 그룹 또는 카테고리로 구분하여 각 그룹 또는 카테고리에 대하여 수행하는 방식 등을 채용할 수도 있다.In an embodiment of the present invention, the
본 발명의 일실시예에서 분석 모듈(200)은 학습 문제와 학습자를 분석 및 처리하며, 더불어, 학습 문제의 문맥 유사도와 학습자의 행동기반 유사도를 산정하여 문제 큐레이션하는 기능을 수행한다.In an embodiment of the present invention, the
먼저, 문제별 문맥 유사도 산정 절차에 대해 설명하면, 문제 문맥 분석 모듈(210)은 문제별 형태소를 분석하여 형태소별 포함여부를 판단한 문제별 형태소 분석 정보(500)를 도출한다. 상기 문제별 형태소 분석 정보를 바탕으로 특정 문제와 타문제를 대상으로 양 학습 문제에서 형태소 출현의 공통, 일방, 타방, 미출현 등을 카운트하여 공통(True/True), 일방(True/False), 타방(False/True), 미출현(False/False) 으로 정리하여 문제간 True/False 산출 정보(510)를 준비한다.First, when a procedure for calculating the context similarity for each problem is described, the problem
다음, 학습자의 행동기반 유사도 산정 절차는 학습자의 학습 정보를 로그 형태로 기록한 학습 정보 저장 모듈(300)에 의해서 학습자 상호간의 유사도를 산정하여 수행한다. 일례로서 특정 학습자와 타학습자 사이에 동일하게 학습한 문제의 정오답 분포를 카운트하며, 상기 오답분포의 카운트는 True/False 테이블로 작성하여 준비한다.Next, the procedure for calculating the similarity based on learners' behavior is performed by calculating the similarity between learners by the learning
도2(a)는 학습 문제 및 문제별로 출현한 형태소(Term)를 행렬형태로 표시하여 문제별 형태소 분석 정보(500)를 도출한 것으로서, 예를 들어, 4개의 형태소(Term)를 기준으로 학습문제 1(problem1) 내지 학습문제 5(problem5)의 형태소 출현 정보를 표시한 것이다. 특정 형태소의 포함 여부는 0과1로 기록되며, 상기 특정 형태소를 구비한 경우는 1로 기록되며, 상기 특정 형태소를 구비하지 않은 경우는 0으로 기록된다. 상기 형태소(Term)는 언어의 단위로서 형태소 이외에도 단어, 숙어, 문장 등을 포함할 수 있으며, 수학식이나 기호 등도 포함할 수 있고 상기 형태소의 개수는 특정 범위로 제한되지는 않는다.Fig. 2(a) shows the learning problem and the morphemes (Terms) appearing for each problem in a matrix form to derive the
도2(b)는 문제간 True/False 산출 정보(510)를 표시한 것으로서, 예시적으로, 학습문제 1(Problem1)과 학습문제 2(Problem2) 사이의 문제간 형태소 출현 양상을 True/False 표로 기록한 것이다. True/True 항목은 양 학습문제에 공통되게 포함된 형태소의 수를 기록한 것이고, True/False 혹은 False/True는 양 학습문제 중 일방 또는 타방에만 포함된 형태소의 수를 각각 기록한 것이고, False/False는 양 학습문제의 어디에도 출현하지 않은 형태소의 수를 기록한 것이다. 예시에서, False/False 항목에는 4개의 형태소를 기준으로 산정하여 영(0)의 값이 기록되었지만 더 많은 형태소를 기준으로 하는 경우에는 임의의 값으로 집계될 수 있다. 구체적으로 살펴보면, False/False 항목에 집계되는 값은 대상 형태소의 전체 수로부터 앞선 True/True 항목, True/False 항목, False/True 항목의 값들을 뺀 값과 일치된다.2(b) shows the
도2(c) 및 2(d)는 문제별 유사도 산정 정보(520)를 예시적으로 표시한 것으로서, 각각 자카드 유사도(Jaccard similarity) 또는 코사인 유사도(Cosine similarity)를 사용하여 유사도를 산정한 일실시예를 도시한 것이다. 이때 자카드 유사도를 산정하는 경우 유사도값은 0~1 사이의 값으로 나타나며, 유사도값이 1인 경우에는 양 학습문제는 동일한 문제이다.2(c) and 2(d) are illustrative representations of
문제간 자카드 유사도는 각 문제 중 어디에든 포함된 형태소의 개수에 대한 양 문제에 공통되게 포함된 형태소의 개수의 비율로 구해지며, 예시에 있어서 양 문제에 공통되게 포함된 형태소는 2개이고 각 문제 중 어디에든 포함된 형태소는 4개이므로 유사도 값은 0.5 이다. 또한, 동일 문제간의 자카드 유사도는 1로 산출될 수밖에 없으므로 해당 유사도 계산은 생략될 수 있으며, 공통되는 형태소가 하나도 없는 경우에 양 문제간의 자카드 유사도는 영(0)이다.Jacquard similarity between problems is obtained as the ratio of the number of morphemes commonly included in both problems to the number of morphemes included in any of the problems, and in the example, there are 2 morphemes commonly included in both problems, and Since there are 4 morphemes included everywhere, the similarity value is 0.5. In addition, since the jacquard similarity between the same problems is inevitably calculated as 1, the calculation of the similarity may be omitted, and when there is no common morpheme, the jacquard similarity between the two problems is zero (0).
문제간 코사인 유사도는 각 문제에서 형태소의 출현을 좌표값 1로 표시한 리스트를 벡터로 간주하여 양 문제의 벡터 내각의 코사인값을 산출하는 것으로 구해질 수 있으며, 양 벡터의 크기를 곱한 값에 대한 양 벡터의 내적값을 비율로 처리하여 계산할 수 있다. 예시에 있어서 문제 1및 2를 각각 벡터 (1,0,1,1), (1,1,1,0)로 간주하고 그 각각의 크기 , 와, 내적값 1X1+0X1+1X1+1X0 = 2를 이용하여 계산하면 코사인 유사도 값은 0.666 이다. 또한, 동일 문제간의 코사인 유사도는 1로 산출될 수밖에 없으므로 해당 유사도 계산은 생략될 수 있으며, 공통되는 형태소가 하나도 없는 경우에 양 문제간의 코사인 유사도는 영(0)이다.The cosine similarity between problems can be obtained by calculating the cosine value of the inner angles of the vectors of both problems by considering the list representing the appearance of the morpheme in each problem as coordinate
한편, 문제간 True/False 산출 정보(510) 또는 문제간 유사도 산정 정보(520)를 산출함에 있어서 형태소 사이의 관계성 등을 반영하여 유사도 산정을 보완할 수 있다. 즉, 형태소 중에서 동의어 및/또는 반의어, 외래어 등의 관계를 가지는 경우에 형태소들을 그룹으로 묶어 그 출현 여부를 산출하여 문제간 True/False 산출 정보(510) 또는 문제간 유사도 산정 정보(520) 등을 산출하는 것이다. 이를 위하여 분석모듈(200)은 관계어 사전 모듈(240)을 추가로 구비할 수 있다. 이러한 관계어 사전 모듈(240)을 구비함으로써 연산량, 저장공간 등에 대한 부담을 줄일 수 있다.Meanwhile, in calculating the true/
상기 관계어 사전 모듈(240)은 문제 문맥 분석 모듈(210)에 대하여 시스템의 설정에 따라 형태소 사이의 관계성 판단을 제공하거나 그에 더하여 관계성 판단에 의한 형태소의 집단화(grouping)정보를 제공한다. 이때 관계성은 시스템의 설정에 따라 단순히 동의어(외래어 포함) 관계로 한정되거나 동의어 관계뿐만 아니라 반의어, 연관어 등의 관계까지로 확장될 수 있으며, 상기 관계어 사전 모듈(240)은 기본적으로 내부에 구비된 언어 사전으로부터 혹은 네트워크로 연결된 언어 사전 등으로부터 상기 동의어 또는 반의어 등을 판단하도록 구성될 수 있으나 이에 한정되지 않는다.The relational
예를 들어, 문제간 코사인 유사도를 산정하기 위한 준비로서 문제간 True/False 산출 정보(510)를 도출할 때 상기 관계어 사전 모듈(240)로부터 제공된 형태소 사이의 동의어 관계성을 고려하는 경우에 문제간 True/False 산출 정보(510)의 각 항목값은 개별적으로 변동된 결과로 나타나며, 이로 인하여 문제간 유사도 산정 정보(520) 및 문제별 유사 문제 리스트 정보(530)도 변동된다.For example, when deriving the True/
여기서, 형태소 사이의 관계성을 반영하는 경우에 동의어 여부 등에 대한 판단 정확도가 확보되지 않으면 유사도 산정에 노이즈가 포함될 수 있으므로 형태소 사이의 관계성을 과도하게 확장하지 않는 것이 바람직하다.Here, in the case of reflecting the relationship between the morphemes, it is preferable not to excessively expand the relationship between the morphemes because noise may be included in the similarity calculation if the determination accuracy of whether or not synonymous is not secured.
도2(e)는 문제별 유사 문제 리스트 정보(530)를 예시적으로 도시한 것으로서, 각 문제별로 가장 유사한 문제부터 나열된 기록 정보를 도시한 것이다. 예시에서, 학습문제 3(Problem3)은 학습문제 5(Problem5)와의 사이에서 문제의 유사도가 높은 것으로 나타난 경우로서, 문제 유사도 등을 고려하여 학습자는 학습효과가 높은 문제들을 제공받아 집중적인 학습을 할 수 있게 된다. 또한, 학습자는 특정 문제와 유사도가 높은 문제들 중에서 원하는 난이도의 문제들을 제공받음으로써 학습효과를 더욱 향상시킬 수 있다. 또한, 학습자가 특정 문제를 어렵다고 느끼거나 오답을 내놓은 문제의 경우, 해당 문제와 유사한 문제들을 제공받아 부족한 유형 및 배양하려는 학습 능력을 집중적으로 학습할 수 있게 된다.FIG. 2(e) shows an example of the similar
도 3은 분석 모듈(200)의 학습자 학습 유사 분석 모듈(220)에 의하여 유사 학습자 리스트를 도출하는 과정을 도시한 것으로서, 학습자의 학습정보를 로그 형태로 기록하는 학습정보 저장 모듈(310)로부터 제공된 학습자별 문제 풀이 정보(600)를 이용하여 학습자간 정오답 분포를 토대로 학습자간 유사도를 산정하여 유사 학습자 리스트를 도출하는 과정을 예시적으로 도시한 것이다.3 shows a process of deriving a similar learner list by the learner learning
도3(a)는 학습자별 문제 풀이 정보(600)를 도시한 것으로서, 학습자별 각 문제에 대한 정오답 또는 미학습 상태를 예시적으로 기록하여 도시한 것이다. ‘T’는 학습자가 해당 문제에 대해 정답(True)을 제출한 기록이고 ‘F’는 학습자가 해당 문제에 대해 오답(False)을 제출한 기록이며, 학습자가 아직 학습하지 않은 경우에는 T 및 F 값이 아닌 임의의 초기값 상태를 유지한다. 예를 들어 학습자가 학습하지 않은 경우로는, 해당 학습 문제를 제공 받지 못한 경우 이외에도 제공 받았더라도 시간이 없어 학습을 중간에 그만두거나 기기 또는 통신망의 오류로 인해 접속이 끊기는 등의 경우도 선택적으로 포함할 수 있다. 또한, 학습자별 문제 풀이 정보(600)에는 정오답 정보와 함께 학습 날짜 등의 추가 정보가 포함되어 문제 큐레이션 과정에서 이용될 수도 있다.3(a) shows the
도3(b)는 상기 학습자별 문제 풀이 정보(600)를 이용하여 학습자 간의 유사도값을 도시한 것으로서, 하나의 학습자와 다른 하나의 학습자 사이의 유사도를 산정하여 학습자간 유사도값을 저장한 학습자간 유사도 산정 정보(610)를 나타낸다. 여기서, 예를 들어, 학습자 1(Student1)은 자기 자신과의 유사값이 1로 도출되어 유사값 표시를 생략하였고, 학습자 1(Student1)에 대한 학습자 2(Student2)의 유사값은 학습자 2(Student2)에 대한 학습자 1(Student1)의 유사값과 동일하므로 마찬가지로 유사값 표시를 생략하였다. 학습자간 유사도 산정은 자카드 유사도(Jaccard similarity) 또는 상기 코사인 유사도(Cosine similarity) 방식 등을 사용하여 구할 수 있다.3(b) shows the similarity value between learners by using the
도3(c)는 앞서 구한 학습자간 유사도 산정 정보(610)를 바탕으로 선정된 학습자별 유사 학습자를 리스트 형태로 도시한 것으로서, 특정 학습자와 유사도가 높은 학습자부터 나열하여 정리된 학습자별 유사 학습자 리스트 정보(620)를 예시적으로 도시한 것이다. 상기 학습자별 유사 학습자 리스트 정보(620)를 이용하여 학습자에게 그와 유사도가 높은 학습자가 푼 문제를 기반으로 문제 큐레이션을 수행할 수 있다. 예시에서, 동일하게 학습한 문제의 정오답 분포를 통해 학습자 1(Student1)은 학습자 23(Student23)과 가장 유사한 것으로 나타났고, 이를 이용하여 학습자 1(Student1)에게 그와 가장 유사한 학습자 23(Student23)이 학습한 문제를 기반으로 문제 큐레이션을 제공할 수 있게 된다. 문제 큐레이션의 세부 과정은 아래에서 설명한다.3(c) is a list of similar learners for each learner selected based on the previously obtained
도 4는 분석 모듈(200)에서 학습자별 문제 추출 모듈(230)에 의해 학습 문제의 유사도 및 학습자간 유사도 등을 반영하여 문제 큐레이션을 수행함으로써 학습자별 문제 큐레이션 정보(710)를 도출하는 과정을 도시한 것이다.4 is a process of deriving
문제 큐레이션의 세부 과정을 설명하기 위하여 도 4의 예시를 이용하여 특정 학습자로서 학습자 1(Student1)에 대한 문제 큐레이션을 수행해보면, 앞서 준비한 학습자별 유사 학습자 리스트 정보(620)를 이용하여 학습자 1은 학습자 23(Student23) 등과 유사한 것으로 파악되고, 학습자 23의 학습 정보는 학습자별 학습 문제 리스트 정보(700)로부터 얻을 수 있으므로 학습자 1에 대하여 학습자 23의 학습 정보를 기반으로 기본적인 문제 큐레이션을 제공할 수 있다. 즉, 예시에서 학습자 23의 학습 정보를 참고하여 학습 문제 36, 및 학습 문제 7, 학습 문제 12 등을 학습자 1에게 제공하는 방식으로 기초적인 문제 큐레이션을 수행할 수 있다. 여기서 학습자별 학습 문제 리스트 정보(700)는 학습자별 문제 풀이 정보(600)를 그대로 이용하거나 정리하여 이용할 수 있다.In order to explain the detailed process of problem curation, if problem curation is performed for learner 1 (Student1) as a specific learner using the example of FIG. 4,
이렇게 유사 학습자의 학습 정보를 이용한 문제 큐레이션을 통하여 학습자는 유사 학습자의 학습 정보에 내재된 유사 학습자의 학습 난이도, 학습 진도 등이 반영된 학습 문제를 제공 받을 수 있게 되어 학습 효과를 현저히 향상시킬 수 있다. 또한, 문제 큐레이션을 소정의 주기별로 수행함으로써 학습자 자신의 학습 이력 변화, 및/또는 타 학습자의 학습 이력 변화 등에 따라 학습자의 유사 학습자는 변동될 수 있으며 이러한 변동에 의해서 학습자에게 학습효과가 우수한 학습문제를 지속적으로 제공하게 된다. 즉, 예를 들어, 학습자의 학습 성취도가 향상될수록 그에 부합되게 유사 학습자가 변경되어 새로운 학습 문제 리스트를 제공하게 된다.Through problem curation using the learning information of similar learners, the learner can receive learning problems reflecting the learning difficulty and progress of similar learners embedded in the learning information of similar learners, and thus the learning effect can be significantly improved. . In addition, by performing problem curation at predetermined periods, the learner's similar learner may change according to the change of the learner's own learning history and/or the change of the learning history of other learners. Will continue to provide. That is, for example, as the learner's learning achievement improves, the similar learner is changed accordingly to provide a new list of learning problems.
한편, 기초적인 문제 큐레이션을 이용하는 경우에는 학습자가 이미 학습한 문제를 반복하여 제공할 수 있고 학습자는 기억한 응답을 그대로 제출하여 학습효과의 증가가 약화될 수 있으므로, 해당 문제를 단순히 제거하기 보다는 학습자를 위하여 더욱 보완된 문제 큐레이션이 필요하다. 도 4의 예시에서, 학습자 1에 대하여 유사 학습자 23의 학습 문제를 제시하는 과정에서 문제 리스트 중에서 학습자가 이미 학습한 문제를 파악하여 보완하는 것을 예시적으로 도시한 것이다. 즉, 문제 리스트의 학습 문제 36(Problem36)은 학습자 1이 이미 학습한 것이므로 학습자별 문제 추출 모듈(230)은 해당 학습문제를 대체하는 대체 학습문제를 도출하여 학습자 1에게 제시할 수 있다. 한편, 학습자별 문제 풀이 정보(600)에 정오답 정보와 함께 학습 날짜 등의 추가 정보가 포함된 경우에는 학습 이력의 경과를 고려하여 이미 학습한 학습 문제 중에서도 다시 제시할 수 있다.On the other hand, in the case of using basic problem curation, the learner can repeatedly provide the problem he has already learned, and the learner submits the memorized response as it is, so the increase in the learning effect may be weakened, so rather than simply removing the problem. Further complementary problem curation is needed for learners. In the example of FIG. 4, in the process of presenting the learning problem of the similar learner 23 to
앞서 준비한 문제별 유사 문제 리스트 정보(530)에 의하면 학습 문제 36(Problem36)과 유사한 문제로서 학습 문제 435(Problem435) 등이 있으므로 이 중에서 하나를 대체 학습문제로 선택하여 학습자 1에게 제시할 수 있다. 이렇게 보완된 문제 큐레이션을 통하여 학습자 1에게 문제 큐레이션된 학습 문제 리스트는 유사 학습자 23의 학습 문제 리스트를 기반으로 하되 일부가 대체되어 구성될 수 있다. 도 4에서 도시된 학습자별 문제 큐레이션 정보(710)는 보완된 문제 큐레이션에 의해서 대체된 학습 문제를 설명의 편의를 위하여 굵은 글씨로 구별되게 표시한 것이다.According to the previously prepared similar
본 발명의 일실시예에 따른 학습 정보 모듈(300)의 제공 문제 처리 모듈(320)은 상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)에 의해서 문제 큐레이션된 학습자별 문제 큐레이션 정보(710)를 학습자 단말(400)에 제공한다. 도 5는 학습자 단말(400)에 표시된 학습자 화면(800)을 예시적으로 도시한 것이다. 여기서 학습자 단말(400)은 문제데이터 등에 대한 학습자의 요청을 서버로 전송할 수 있고, 서버로부터 수신한 문제데이터 등에 대응하여 학습자가 입력한 답안정보, 풀이과정 등을 서버로 송신할 수 있으며, 서버로부터 수신한 문제데이터, 정답정보, 풀이과정 등의 정보를 디스플레이할 수 있도록 구성되는 것이 바람직하다. 따라서 학습자 단말(400)은 PC(Personal Computer), Laptop, PDA(Personal Digital Assistant), 스마트폰, 태블릿 PC 등과 같이 통신이 가능하며, 디스플레이 수단을 구비하는 것이 바람직하다. 또한 통신을 위해 수 내지 수백 메가바이트의 데이터 전송 속도를 지원하는 단말기로 구현되는 것이 바람직하다.The
상기 제공 문제 처리 모듈(320)은 학습자 화면(800)을 구성함에 있어서 학습문제의 제시 전 또는 후에 있어서 학습자가 학습 문제의 종류 등을 선택할 수 있도록 문제 종류 선택 화면을 제시할 수 있다. 도 5의 예시에서는, 문제 큐레이션으로 제시될 전체 학습 문제를 그대로 학습하는 ‘전체’ 선택과, 유사 학습자가 정답을 제시하여 학습자도 정답을 제시할 가능성이 높은 학습 문제를 집중적으로 학습하는 ‘맞출 것으로 예상되는 문제 집중 학습’ 선택, 유사 학습자가 오답을 제시하여 학습자도 오답을 제시할 가능성이 높은 학습 문제를 집중적으로 학습하는 ‘틀릴 것으로 예상되는 문제 집중 학습’ 선택 등을 제시하여 학습자의 학습 선택도를 더욱 향상시킨 구조를 예시적으로 제시한 것이다. 이러한 선택 기능을 통하여 학습자는 단순하지만 누락없이 학습 진도를 꾸준하게 진행하는 학습을 하거나, 이미 확보한 학습 능력을 익숙한 학습 문제를 통하여 선택적으로 다시 확인하거나, 학습 능력이 부족한 부분을 집중적으로 점검하는 등 문제은행의 정보를 더욱 유용하게 이용하여 학습 효과를 향상시킬 수 있게 된다.In configuring the
한편, 본 발명의 일실시예에 따른 학습자에게 맞춤형 학습 문제를 제공하는 문제은행에서의 문제 큐레이션 방법 및 장치는, 학습자의 선택 등에 따라 문제 큐레이션 과정에서 유사 학습자를 상향 혹은 하향 유사 학습자로 변경하여 문제 큐레이션을 수행하거나 문제의 난이도를 고려하여 학습 문제를 대체하여 제시하도록 구성할 수 있다.On the other hand, in the problem curation method and apparatus in a problem bank that provides customized learning problems to learners according to an embodiment of the present invention, a similar learner is changed to an upward or downward similar learner in the problem curation process according to a learner's selection, etc. Therefore, it can be configured to perform problem curation or substitute learning problems in consideration of the difficulty of the problem.
도 6(a)는 학습자별 문제 풀이 정보(600)로부터 학습자별 정답율을 산출한 정보(601)를 예시적으로 표시한 것이고, 도 6(b)는 앞서 설명한 학습자별 유사 학습자 리스트 정보(620)를 학습자별 정답율을 기준으로 학습자 보다 높은 정답율을 보인 상향 유사 학습자와 같거나 낮은 정답율을 보인 비상향 유사 학습자를 구분한 유사 학습자 구분 정보(621)를 표시한 것이다. 학습자의 선택 또는 시스템 등의 기본 설정에 따라 학습자에 대한 유사 학습자는 상향 유사 학습자에서 선정되거나 비상향 유사 학습자에서 선정될 수 있다. 이러한 유사 학습자 구분 정보(621)는 분석 모듈(200)의 학습자별 문제 추출 모듈(230)에서 수행될 수 있다. 학습자의 선택 또는 시스템 등의 기본 설정에 따라 학습자에 대한 유사 학습자를 조정하여, 상향 유사 학습자 또는 비상향 유사 학습자로 조정하여 문제 큐레이션을 수행함으로써 보완된 학습자별 문제 규레이션 정보를 도출할 수 있다.6(a) is an exemplary display of
도 7(a)는 학습자별 문제 풀이 정보(600)로부터 문제별 정답율을 산출한 정보(602)를 예시적으로 표시한 것이고, 도 7(b)는 앞서 설명한 문제별 유사 문제 리스트 정보(530)를 문제별 정답율을 기준으로 해당 문제보다 낮은 정답율을 보인 상향 난이도의 유사 학습 문제와 같거나 높은 정답율을 보인 비상향 난이도의 유사 학습 문제를 구분한 유사 문제 구분 정보(531)를 표시한 것이다. 학습자의 선택 또는 시스템 등의 기본 설정에 따라 학습자에 대한 문제 큐레이션은 유사 학습자의 학습 문제를 기반으로 하되 개별 학습 문제는 상향 난이도의 유사 학습 문제로 대체하거나 비상향 난이도의 유사 학습 문제로 대체함으로써, 보완된 학습자별 문제 큐레이션 정보를 도출할 수 있다.FIG. 7(a) is an exemplary display of
한편, 본 발명의 일실시예에 따른 학습자에게 맞춤형 학습 문제를 제공하는 문제은행에서의 문제 큐레이션 시스템 및 방법은, 학습자 단말(400)로 입력되는 학습자의 답안 입력시간을 측정하여 데이터를 축적함으로써 학습자의 학습 소요시간에 따라 상향 혹은 하향 유사 학습자로 변경하여 문제 큐레이션을 수행하거나 문제의 난이도를 고려하여 학습 문제를 대체하여 제시하도록 구성할 수 있다.On the other hand, the problem curation system and method in a problem bank for providing a customized learning problem to a learner according to an embodiment of the present invention, by measuring the answer input time of the learner input to the
도 8(a)는 학습자별 문제 풀이 정보(600)로부터 각 문제별로 학습자의 답안 입력시간을 통계처리하여 평균소요시간을 산출한 정보(603)를 도시한 것이다. 여기서 입력시간은 모든 학습자의 답안 입력시간을 대상으로 하거나 정답 입력한 학습자의 답안 입력시간만을 대상으로 하는 선택을 할 수 있다. 이렇게 산출된 문제별 평균소요시간을 활용하여 추가적인 정보를 도출할 수 있는데, 예시적으로, 상기 문제별 평균소요시간을 기준으로 학습자의 시간초과율을 산출한 정보(603)를 함께 도시한 것이다. 이러한 시간초과율을 바탕으로 학습자의 학습 능력을 참고할 수 있음을 고려하여 문제 큐레이션에 활용할 수 있으며, 도 8(b)는 앞선 실시예들처럼 학습자의 선택 또는 시스템 등의 기본 설정에 따라 유사 학습자의 선정에서 학습자의 시간초과율과 비교하여 상향 유사 학습자 또는 비상향 유사 학습자를 구분하여 유사 학습자 구분 정보(622)를 도출한 것을 예시적으로 도시한 것이다.FIG. 8(a) shows
한편, 상기 평균소요시간은 학습 문제의 난이도를 반영하는 것으로 이해될 수 있으므로 앞서 도 7에 의하여 설명한 실시예처럼 유사 학습 문제의 선정에 활용될 수 있다.Meanwhile, since the average time required may be understood to reflect the difficulty of the learning problem, it may be used to select a similar learning problem as in the embodiment described above with reference to FIG. 7.
이상에서 설명된 시스템이나 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The system or device described above may be implemented as a hardware component, a software component, and/or a combination of a hardware component and a software component. For example, the devices and components described in the embodiments include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable array (FPA), It can be implemented using one or more general purpose computers or special purpose computers, such as a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications executed on the operating system. In addition, the processing device may access, store, manipulate, process, and generate data in response to the execution of software. For the convenience of understanding, although it is sometimes described that one processing device is used, one of ordinary skill in the art, the processing device is a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that it may include. For example, the processing device may include a plurality of processors or one processor and one controller. In addition, other processing configurations are possible, such as a parallel processor.
또한, 소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.In addition, the software may include a computer program, code, instructions, or a combination of one or more of these, and may configure the processing unit to operate as desired, or independently or collectively. ) You can command the processing unit. Software and/or data may be interpreted by a processing device or to provide instructions or data to a processing device, of any type of machine, component, physical device, virtual equipment, computer storage medium or device. , Or may be permanently or temporarily embodyed in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored on one or more computer-readable recording media.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and usable to those skilled in computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. -A hardware device specially configured to store and execute program instructions such as magneto-optical media, and ROM, RAM, flash memory, and the like. Examples of the program instructions include not only machine language codes such as those produced by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operation of the embodiment, and vice versa.
이 외에도 전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산 또는 분할되어 실시될 수도 있으며, 마찬가지로 분산 또는 분할된 것으로 설명되어 있는 구성 요소들도 통상의 기술자가 이해하는 범위 안에서 결합된 형태로 실시될 수 있다. 또한, 방법의 단계는 단독으로 복수회 실시되거나 혹은 적어도 다른 어느 한 단계와 조합으로 복수회 수행되는 형태로 실시될 수 있다.In addition to this, the above description of the present invention is for illustrative purposes only, and those skilled in the art to which the present invention pertains will understand that it is possible to easily transform it into other specific forms without changing the technical spirit or essential features of the present invention. I will be able to. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not limiting. For example, each component described as a single type may be implemented by being distributed or divided, and similarly, components described as being distributed or divided may also be implemented in a combined form within the scope of the understanding of a person skilled in the art. have. Further, the steps of the method may be performed alone or in a plurality of times in combination with at least one other step.
본 발명의 범위는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is indicated by the claims to be described later, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention.
10 : 문제 제공자 단말기
100 : 문제 은행 모듈
200 : 분석 모듈
210 : 문제 문맥 분석 모듈
220 : 학습자 학습 유사 분석 모듈
230 : 학습자별 문제 추출 모듈
240 : 관계어 사전 모듈
300 : 학습 정보 모듈
310 : 학습 정보 저장 모듈
320 : 제공 문제 처리 모듈
400 : 학습자 단말
500 : 문제별 형태소 분석 정보
510 : 문제간 True/False 산출 정보
520 : 문제간 유사도 산정 정보
530 : 문제별 유사 문제 리스트 정보
531 : 난이도 구분 유사 문제 리스트 정보
600 : 학습자별 문제 풀이 정보
610 : 학습자간 유사도 산정 정보
620 : 학습자별 유사 학습자 리스트 정보
621 : 학습수준 구분 유사 학습자 리스트 정보
700 : 학습자별 학습 문제 리스트 정보
710 : 학습자별 문제 큐레이션 정보
800 : 학습자 화면
810 : 문제 종류 선택 화면10: problem provider terminal
100: question bank module
200: analysis module
210: problem context analysis module
220: learner learning similarity analysis module
230: problem extraction module for each learner
240: relational dictionary module
300: learning information module
310: learning information storage module
320: Provide problem processing module
400: learner terminal
500: Morphological analysis information for each problem
510: True/False calculation information between problems
520: Information on calculating similarity between problems
530: Similar problem list information for each problem
531: Difficulty classification similar problem list information
600: Problem solving information for each learner
610: Information on calculating similarity among learners
620: Similar learner list information for each learner
621: Information on the list of similar learners by learning level
700: learning question list information for each learner
710: Problem curation information for each learner
800: learner screen
810: Problem type selection screen
Claims (6)
적어도 상기 학습 문제의 데이터가 저장된 문제 은행 모듈(100); 및
학습 문제의 문맥 유사도와 학습자의 행동기반 유사도를 산정하여 학습자에게 제공할 문제 리스트를 추출하는 분석 모듈(200);
학습자가 학습한 문제의 정오답 분포를 데이터로 저장하며 학습자에게 상기 학습 문제 리스트를 제공하는 학습 정보 모듈(300);를 포함하여 구성되며,
상기 분석 모듈(200)은,
문제별 형태소를 분석하여 형태소별 포함여부를 기반으로 문제간 유사도를 산출하여 문제별 유사 문제 리스트 정보(530)를 도출하는 문제 문맥 분석 모듈(210); 및
상기 학습 정보 모듈(300)로부터 제공된 학습자별 문제 풀이 정보(600)의 학습자간 정오답 분포를 토대로 학습자간 유사도를 산출하여 학습자별 유사 학습자 리스트 정보(620)를 도출하는 학습자 학습 유사 분석 모듈(220);
각 학습자에 대하여 상기 학습자별 유사 학습자 리스트 정보(620)에 의하여 유사 학습자를 선정하고 상기 학습자별 문제 풀이 정보(600)로부터 상기 유사 학습자의 문제 리스트를 추출하여 학습자별 문제 큐레이션 정보(710)를 도출하는 학습자별 문제 추출 모듈(230);을 포함하여 구성되고,
상기 학습 정보 모듈(300)은 상기 학습자별 문제 큐레이션 정보(710)로부터 해당 학습자에 대한 상기 학습 문제 리스트를 추출하여 학습자 단말기(400)로 제공하는 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
In the learning problem curation system that extracts a part from the learning problem of the problem bank and provides it to the learner using learner learning information and problem context,
A question bank module 100 in which data of at least the learning question is stored; And
An analysis module 200 for extracting a problem list to be provided to the learner by calculating the context similarity of the learning problem and the learner's behavior-based similarity;
And a learning information module 300 that stores the distribution of correct and incorrect answers of the problems learned by the learner as data and provides the learning problem list to the learner,
The analysis module 200,
A problem context analysis module 210 that analyzes morphemes for each problem and calculates similarity between problems based on whether or not each morpheme is included to derive similar problem list information 530 for each problem; And
A learner learning similarity analysis module 220 that calculates the similarity between learners based on the distribution of correct and incorrect answers between learners of the problem solving information 600 for each learner provided from the learning information module 300 to derive similar learner list information 620 for each learner. );
For each learner, similar learners are selected based on the similar learner list information 620 for each learner, and problem curation information 710 for each learner is extracted by extracting the problem list of the similar learners from the problem solving information 600 for each learner. And a problem extraction module 230 for each learner to derive;
The learning information module 300 extracts the learning problem list for a corresponding learner from the problem curation information 710 for each learner and provides it to the learner terminal 400.
상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)은,
상기 학습자별 문제 풀이 정보(600)로부터 상기 유사 학습자의 문제 리스트를 추출하여 학습자별 문제 큐레이션 정보(710)를 도출하는 과정에서 학습자가 이미 학습한 학습 문제는 상기 문제별 유사 문제 리스트 정보(530)를 이용하여 선정된 유사 학습 문제로 대체하는 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 1,
The problem extraction module 230 for each learner of the analysis module 200,
In the process of extracting the problem list of the similar learner from the problem solving information 600 for each learner and deriving the problem curation information 710 for each learner, the learning problem already learned by the learner is the similar problem list information 530 for each problem. ), a learning problem curation system, characterized in that replacing the selected similar learning problem using.
상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)은,
이미 학습한 학문 문제를 유사 학습 문제로 대체함에 있어서 개인의 설정 또는 시스템의 기본 설정에 따라 상향 난이도의 유사 학습 문제를 선정하거나 비상향 난이도의 유사 학습 문제를 선정하여 대체하도록 구성된 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 2,
The problem extraction module 230 for each learner of the analysis module 200,
In replacing an already learned academic problem with a similar learning problem, it is configured to select and replace a similar learning problem of an upward difficulty level or a similar learning problem of a non-reversing difficulty level according to a personal setting or a basic setting of the system, Learning problem curation system.
상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)은,
각 학습자에 대하여 상기 학습자별 유사 학습자 리스트 정보(620)에 의하여 유사 학습자를 선정하는 과정에서 개인의 설정 또는 시스템의 기본 설정에 따라 상향 유사 학습자를 선정하거나 비상향 유사 학습자를 선정하도록 구성된 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 1,
The problem extraction module 230 for each learner of the analysis module 200,
In the process of selecting a similar learner for each learner based on the similar learner list information 620 for each learner, it is configured to select an upstream similar learner or a non-reversing similar learner according to an individual setting or a basic setting of the system. A curation system for learning problems.
상기 학습 정보 모듈(300)은,
상기 학습 문제 리스트를 추출하여 학습자 단말기(400)로 제공함에 있어서 상기 학습 문제 리스트를 그대로 제공 받을 것인지 혹은 그 중에서 맞출 것으로 예상되는 문제만 제공 받을 것인지 혹은 그 중에서 틀릴 것으로 예상되는 문제만 제공 받을 것인지를 학습자가 선택할 수 있는 문제 종류 선택 화면(810)을 제시하여 학습자의 선택을 반영하도록 구성된 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 1,
The learning information module 300,
When extracting the learning problem list and providing it to the learner's terminal 400, whether to receive the learning problem list as it is or only the problems expected to be matched among them, or only problems expected to be incorrect among them The learning problem curation system, characterized in that configured to reflect the learner's selection by presenting a problem type selection screen 810 that the learner can select.
문제별 형태소를 분석하여 형태소별 포함여부를 기반으로 문제간 유사도를 산출하여 문제별 유사 문제 리스트 정보(530)를 도출하는 단계; 및
학습자별 문제 풀이 정보(600)의 학습자간 정오답 분포를 토대로 학습자간 유사도를 산출하여 학습자별 유사 학습자 리스트 정보(620)를 도출하는 단계;
각 학습자에 대하여 상기 학습자별 유사 학습자 리스트 정보(620)에 의하여 유사 학습자를 선정하고 상기 학습자별 문제 풀이 정보(600)로부터 상기 유사 학습자의 문제 리스트를 추출하여 학습자별 문제 큐레이션 정보(710)를 도출하는 단계;
상기 학습자별 문제 큐레이션 정보(710)로부터 해당 학습자에 대한 상기 학습 문제 리스트를 추출하여 학습자 단말기(400)로 제공하는 단계;를 포함하여 구성되며,
상기 문제별 유사 문제 리스트 정보(530)를 도출하는 단계에서 문제간 유사도를 산출함에 있어서 형태소 사이의 관계성을 반영하여 문제간 유사도를 산출하는 것을 특징으로 하는, 학습 문제 큐레이션 방법.In the learning problem curation method of extracting a part from the learning problem of the problem bank and providing it to the learner based on the learner's learning information and the problem context using the learning problem curation system of any one of claims 1 to 5,
Analyzing morphemes for each problem, calculating similarity between problems based on whether or not each morpheme is included, and deriving similar problem list information 530 for each problem; And
Calculating a similarity between learners based on the distribution of correct and incorrect answers between learners of the problem solving information 600 for each learner to derive similar learner list information 620 for each learner;
For each learner, similar learners are selected based on the similar learner list information 620 for each learner, and problem curation information 710 for each learner is extracted by extracting the problem list of the similar learners from the problem solving information 600 for each learner. Deriving;
And extracting the learning problem list for a corresponding learner from the problem curation information 710 for each learner and providing the learning problem list to the learner terminal 400; and
In the step of deriving the similar problem list information 530 for each problem, in calculating the similarity between problems, the similarity between problems is calculated by reflecting the relationship between morphemes.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190037509A KR102176339B1 (en) | 2019-03-29 | 2019-03-29 | A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190037509A KR102176339B1 (en) | 2019-03-29 | 2019-03-29 | A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200115966A true KR20200115966A (en) | 2020-10-08 |
KR102176339B1 KR102176339B1 (en) | 2020-11-10 |
Family
ID=72897293
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190037509A KR102176339B1 (en) | 2019-03-29 | 2019-03-29 | A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102176339B1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102306957B1 (en) * | 2020-11-13 | 2021-09-30 | 홍성현 | Method and device for providing music education contents |
KR20240011843A (en) | 2023-06-08 | 2024-01-26 | 주식회사 화신이앤엘 (E&L) | Apparatus and method for providing customized math problems to learners |
KR102636079B1 (en) | 2023-06-08 | 2024-02-14 | 주식회사 화신이앤엘 (E&L) | Apparatus and method for providing customized math problems to learners |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010108955A (en) * | 2000-06-01 | 2001-12-08 | 박승훈 | Problem bank system and problem registering method therefor using computer network |
KR101229860B1 (en) * | 2011-10-20 | 2013-02-05 | 주식회사 매쓰홀릭 | System and method to support e-learning |
KR20180066705A (en) * | 2016-12-09 | 2018-06-19 | 김채연 | Method and apparatus for analyzing vulnerability of learner |
KR20190028045A (en) * | 2017-09-08 | 2019-03-18 | 주식회사 듀코젠 | A learning system capable of providing a cloud-based digital item authoring solution and distribution service platform, and the control method thereof |
-
2019
- 2019-03-29 KR KR1020190037509A patent/KR102176339B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010108955A (en) * | 2000-06-01 | 2001-12-08 | 박승훈 | Problem bank system and problem registering method therefor using computer network |
KR101229860B1 (en) * | 2011-10-20 | 2013-02-05 | 주식회사 매쓰홀릭 | System and method to support e-learning |
KR20180066705A (en) * | 2016-12-09 | 2018-06-19 | 김채연 | Method and apparatus for analyzing vulnerability of learner |
KR20190028045A (en) * | 2017-09-08 | 2019-03-18 | 주식회사 듀코젠 | A learning system capable of providing a cloud-based digital item authoring solution and distribution service platform, and the control method thereof |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102306957B1 (en) * | 2020-11-13 | 2021-09-30 | 홍성현 | Method and device for providing music education contents |
KR20240011843A (en) | 2023-06-08 | 2024-01-26 | 주식회사 화신이앤엘 (E&L) | Apparatus and method for providing customized math problems to learners |
KR20240011844A (en) | 2023-06-08 | 2024-01-26 | 주식회사 화신이앤엘 (E&L) | Apparatus and method for providing customized math problems to learners |
KR102636079B1 (en) | 2023-06-08 | 2024-02-14 | 주식회사 화신이앤엘 (E&L) | Apparatus and method for providing customized math problems to learners |
Also Published As
Publication number | Publication date |
---|---|
KR102176339B1 (en) | 2020-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Roiger | Data mining: a tutorial-based primer | |
Carter et al. | Correcting for bias in psychology: A comparison of meta-analytic methods | |
KR101853091B1 (en) | Method, apparatus and computer program for providing personalized educational contents through user response prediction framework with machine learning | |
Kaya et al. | Assessing change in latent skills across time with longitudinal cognitive diagnosis modeling: An evaluation of model performance | |
Chen et al. | What may visualization processes optimize? | |
Fraiwan et al. | A review of chatgpt applications in education, marketing, software engineering, and healthcare: Benefits, drawbacks, and research directions | |
US11704578B2 (en) | Machine learning method, apparatus, and computer program for providing personalized educational content based on learning efficiency | |
KR102096301B1 (en) | Method, apparatus and computer program for operating a machine learning framework with active learning techniqe | |
KR102176339B1 (en) | A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank | |
KR101895959B1 (en) | Method, apparatus and computer program for interpreting analysis results of machine learning framework | |
KR102078627B1 (en) | Method and system for providing real-time feedback information associated with user-input contents | |
Adusumalli | Big Data as a Driving Tool of Digital Transformation | |
Weaver et al. | Randomization tests for single case designs with rapidly alternating conditions: An analysis of p-values from published experiments | |
KR102075936B1 (en) | Method, apparatus and computer program for operating a machine learning for providing personalized educational contents based on learning efficiency | |
Joseph et al. | Exploring the effectiveness of learning path recommendation based on Felder-Silverman learning style model: A learning analytics intervention approach | |
Ezzaim et al. | Artificial intelligence in education-State of the art | |
Potter | A review and analysis of patterns of design decisions in recent media effects research | |
Zhao et al. | Computational mechanisms for context-based behavioral interventions: A large-scale analysis | |
KR20190049627A (en) | Method, apparatus and computer program for interpreting analysis results of machine learning framework | |
Mohamed et al. | Artificial Intelligence in Public Relations and Association Rule Mining as a Decision Support Tool | |
Wahlheim et al. | Study preferences for exemplar variability in self-regulated category learning | |
Chen et al. | Predicting Web Survey Breakoffs Using Machine Learning Models | |
EL MEZOUARY et al. | An evaluation of learner clustering based on learning styles in MOOC course | |
Dangeti et al. | Numerical Computing with Python: Harness the power of Python to analyze and find hidden patterns in the data | |
JP5437211B2 (en) | E-learning system with problem extraction function considering question frequency and learner's weakness |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |