KR20200115966A - A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank - Google Patents

A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank Download PDF

Info

Publication number
KR20200115966A
KR20200115966A KR1020190037509A KR20190037509A KR20200115966A KR 20200115966 A KR20200115966 A KR 20200115966A KR 1020190037509 A KR1020190037509 A KR 1020190037509A KR 20190037509 A KR20190037509 A KR 20190037509A KR 20200115966 A KR20200115966 A KR 20200115966A
Authority
KR
South Korea
Prior art keywords
learner
learning
information
similar
similarity
Prior art date
Application number
KR1020190037509A
Other languages
Korean (ko)
Other versions
KR102176339B1 (en
Inventor
민윤정
김영호
강혜령
Original Assignee
주식회사 메이팜소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 메이팜소프트 filed Critical 주식회사 메이팜소프트
Priority to KR1020190037509A priority Critical patent/KR102176339B1/en
Publication of KR20200115966A publication Critical patent/KR20200115966A/en
Application granted granted Critical
Publication of KR102176339B1 publication Critical patent/KR102176339B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • G06Q50/205Education administration or guidance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/268Morphological analysis
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/02Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip

Abstract

The present invention relates to a system or the like for providing a question to a learner in a question bank. More particularly, the present invention relates to a system and a method for recommending a question based on a question of a similar learner and the context of the question to a person to learn in view of the context of the question and the question solving learning information of the learner who has solved the question. The question curation system of the present invention includes: an analysis module (200) extracting a question list to be provided for a learner by calculating the context similarity of a learning question and the behavior-based similarity of the learner; and a learning information module (300) storing the correct/wrong answer distribution of the question learned by the learner as data and providing the learning question list to the learner. The analysis module (200) includes: a question context analysis module (210) analyzing a morpheme by question, calculating inter-question similarity based on morpheme inclusion/non-inclusion, and deriving a similar question list information (530) by question; a learner learning similarity analysis module (220) calculating inter-learner similarity based on the inter-learner correct/wrong answer distribution of a question solving information (600) by learner provided from the learning information module (300) and deriving similar learner list information (620) by learner; and a learner-specific question extraction module (230) selecting a similar learner by the similar learner list information (620) by learner for each learner, extracting a question list of the similar learner from the question solving information (600) by learner, and deriving learner-specific question curation information (710).

Description

문제은행에서의 학습자 학습정보와 문제 컨텍스트의 유사도를 반영한 문제 큐레이션 시스템 및 그 방법{A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank}A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank}

본 발명은 문제은행에서 학습자에게 문제를 제공하는 시스템 등에 관한 것으로, 상세하게는, 문제를 풀이한 학습자의 문제 풀이 학습 정보와 문제의 문맥을 고려하여, 학습하려는 자에게 유사한 학습자의 문제, 그리고 그 문제의 문맥을 바탕으로 문제를 추천해주는 시스템 및 방법에 관한 것이다.The present invention relates to a system for providing a problem to a learner in a problem bank, and in detail, in consideration of the problem solving learning information and the context of the problem, the learner's problem similar to the learner, and the It relates to a system and method for recommending problems based on the context of the problem.

시스템상에서 학습자에게 맞춤형으로 문제를 제공하는 시스템의 방법은 단순히 인쇄된 학습지의 고정된 문제 리스트를 학습하는 것과는 다르게, 학습자에게 적합한 문제를 지능적으로 제공하는 함으로써, 학습 효과를 증대할 수 있는 기술이다.The system's method of providing customized problems to learners on the system is a technology that can increase the learning effect by intelligently providing suitable problems to learners, unlike simply learning a fixed list of problems in printed workbooks.

종래기술의 맞춤형 문제 제공 방법 중에는, 학습자의 학습 정보를 반영하는 문제 추천 기술로서 학습자의 학습 정보를 바탕으로 진도 등의 유사도를 파악하여, 학습자와 유사한 타학습자의 학습 문제를 추천하는 방식이 존재하는데, 문제 추천시 학습자의 추가적인 학습 정보를 반영하지 못할 뿐만 아니라 학습 문제의 특성 등을 반영하지 못하여 학습자의 학습 효과 증대에 제한이 있었다.Among the customized problem provision methods of the prior art, there is a method of recommending learning problems of other learners similar to learners by grasping similarity such as progress based on the learner's learning information as a problem recommendation technology that reflects the learner's learning information. In addition, when recommending a problem, not only does not reflect the learner's additional learning information, but also does not reflect the characteristics of the learning problem.

본 발명이 이루고자 하는 기술적 과제는, 학습자의 행동기반 유사도와 학습 문제의 문맥 유사도를 파악하여 문제 추천에 반영함으로써, 학습자는 학습하고자 하는 문제와 유사한 문맥의 문제들을 제공받을 수 있으며, 학습자의 행동기반 유사도를 바탕으로 학습자의 학습 동향을 예측하여 문제를 제공함으로써, 학습의 효과를 증대할 수 있는 맞춤형 학습 제공 장치 및 그 방법을 제공하고자 한다.The technical task to be achieved by the present invention is to identify the learner's behavior-based similarity and the context similarity of the learning problem and reflect it in the recommendation of the problem, so that the learner can receive problems in a context similar to the problem to be learned, and It is intended to provide an apparatus and method for providing customized learning that can increase the effectiveness of learning by predicting the learning trend of learners based on similarity and providing problems.

본 발명이 이루고자 하는 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problem to be achieved by the present invention is not limited to the technical problems mentioned above, and other technical problems that are not mentioned can be clearly understood by those of ordinary skill in the technical field to which the present invention belongs from the following description. There will be.

상기 기술적 과제를 달성하기 위하여, 본 발명의 장치 및 방법은 문제를 보관하는 문제 은행 모듈, 문서의 문맥을 계산하는 문제 문맥 분석 모듈, 사용자의 학습정보를 바탕으로 유사 학습자를 분류하는 학습자 학습 유사 분석 모듈, 학습 정보 모듈, 최종적으로 문제를 큐레이션하는 학습자별 문제 추출 모듈을 포함하고 있다.In order to achieve the above technical problem, the apparatus and method of the present invention include a problem bank module for storing problems, a problem context analysis module for calculating the context of a document, and a learner learning similarity analysis that classifies similar learners based on the user's learning information. It includes a module, a learning information module, and a problem extraction module for each learner that finally curates the problem.

본 발명에 따른 학습 문제 큐레이션 시스템은, 학습 문제를 제공하는 기업, 단체, 개인과 연결하는 시스템과, 상기 명기한 모듈들이 탑재된 서버를 포함하여 운용될 수 있다.The learning problem curation system according to the present invention may be operated by including a system that connects companies, organizations, and individuals providing learning problems, and a server on which the specified modules are mounted.

본 발명에 따른 문제 큐레이션 시스템 장치 및 그 방법은 학습자에게 집중적으로 맞춤형 문제를 제공하는 것이 가능하므로, 학습의 효과를 더욱 향상시킬 수 있는 효과가 있다.The problem curation system apparatus and method according to the present invention can provide a tailored problem intensively to a learner, so that the effect of learning can be further improved.

본 발명의 효과는 상기한 효과로 한정되는 것은 아니며, 본 발명의 상세한 설명 또는 특허청구범위에 기재된 발명의 구성으로부터 추론 가능한 모든 효과를 포함하는 것으로 이해되어야 한다.The effects of the present invention are not limited to the above effects, and should be understood to include all effects that can be inferred from the configuration of the invention described in the detailed description or claims of the present invention.

도1. 본 발명의 시스템 구성하기 위한 개략적인 시스템 구성도.
도2. 문제 은행에 저장된 문제에서 문제별 유사도 산정 절차의 예시.
도3. 학습자별 학습정보를 바탕으로 학습자별 유사도 산정 절차의 예시.
도4. 서버에서 문제 큐레이션으로 추천된 문제의 저장구조.
도5. 웹 또는 모바일 기기에서 문제 큐레이션으로 추천된 문제를 푸는 화면 예시.
도6. 유사 학습자의 선정에서 추가적인 선택성을 부가한 예시.
도7. 유사 학습 문제의 선정에서 추가적인 선택성을 부가한 예시.
도8. 유사 학습자의 선정에 대한 변형 실시예.
Fig. 1. A schematic system configuration diagram for configuring the system of the present invention.
Fig. 2. An example of the procedure for calculating the similarity for each question in the question stored in the question bank.
Fig. 3. An example of the procedure for calculating similarity for each learner based on learning information for each learner.
Fig. 4. The storage structure of problems recommended by the server for problem curation.
Fig. 5. An example screen for solving a problem recommended by problem curation on a web or mobile device.
Fig. 6. An example of adding additional selectivity in the selection of similar learners.
Fig. 7. An example of adding additional selectivity in the selection of similar learning problems.
Fig. 8. A variation on the selection of similar learners.

이하에서는 첨부한 도면을 참조하여 본 발명을 설명하기로 한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 따라서 여기에서 설명하는 실시예로 한정되는 것은 아니다.Hereinafter, the present invention will be described with reference to the accompanying drawings. However, the present invention may be implemented in various different forms, and therefore is not limited to the embodiments described herein.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결(접속, 접촉, 결합)"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 부재를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 구비할 수 있다는 것을 의미한다.Throughout the specification, when a part is said to be "connected (connected, contacted, bonded)" with another part, it is not only "directly connected", but also "indirectly connected" with another member in the middle. "Including the case. In addition, when a part "includes" a certain component, this means that other components may be further provided, not excluding other components, unless specifically stated to the contrary.

본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the present specification are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this specification, terms such as "comprise" or "have" are intended to designate the presence of features, numbers, steps, actions, components, parts, or a combination thereof described in the specification, but one or more other features. It is to be understood that the presence or addition of elements or numbers, steps, actions, components, parts, or combinations thereof, does not preclude in advance.

본 발명은 학습자에게 맞춤형 학습 문제를 제공하는 학습자 학습문제 제공 장치 및 그 방법에 관한 것으로서, 학습자 및 학습 문제의 유사도를 산정하여 학습 문제의 문맥 유사도 및 학습자의 학습 정보를 바탕으로 행동기반 유사도를 산정하여 문제를 제공함으로써 학습자에게 선택적인 집중 학습을 제공한다.The present invention relates to an apparatus and method for providing a learner learning problem that provides a customized learning problem to a learner, and calculates the similarity between the learner and the learning problem and calculates the behavior-based similarity based on the context similarity of the learning problem and the learner's learning information. Provides selective intensive learning to learners by providing problems.

이하, 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 당해 분야에 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 설명한다.Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings so that those of ordinary skill in the art can easily implement them.

우선 각 도면을 살펴보면, 도1은 본 발명을 시스템으로 구성하기 위한 개략적인 시스템 구성도로서, 문제 은행 모듈(100)은 문제제공자 단말기(10) 등으로부터 전송된 데이터를 저장하며, 분석 모듈(200)은 문제 은행 모듈(100)로부터 문제 데이터를 가져와 문제의 문맥 유사도를 산정하고 학습 정보 모듈(300)로부터 학습자의 학습 정보를 가져와 학습자의 행동기반 유사도를 산정하여 추출된 데이터인 제공 문제 집합을 제공 문제 처리 모듈(320)에 의해 학습자에게 제공하는 것을 나타낸다. 도2는 분석 모듈(200)에 의해서 문제 은행 모듈(100)에 저장된 문제에 대한 문제별 유사도를 산정하는 예시 절차로서, 문제별 형태소 분석 정보(500)를 기준으로 각 문제별 문맥 유사도를 자카드 유사도(Jaccard Similarity) 또는 코사인 유사도(Cosine Similarity) 방식 등으로 산정하여 각 문제별 유사 문제를 도출하여 리스트화하는 절차를 도시한 것이다.First, referring to each drawing, FIG. 1 is a schematic system configuration diagram for configuring the present invention as a system, wherein the question bank module 100 stores data transmitted from the problem provider terminal 10, etc., and the analysis module 200 ) Brings problem data from the problem bank module 100 to calculate the context similarity of the problem, and provides a problem set, which is data extracted by fetching the learner's learning information from the learning information module 300 and calculating the learner's behavior-based similarity. It represents providing to learners by the problem processing module 320. 2 is an exemplary procedure for calculating the similarity for each problem with respect to a problem stored in the problem bank module 100 by the analysis module 200, and the jacquard similarity of the context similarity for each problem based on the morpheme analysis information 500 for each problem It shows a procedure of deriving and listing similar problems for each problem by calculating it using (Jaccard Similarity) or Cosine Similarity method.

도3은 학습자별 학습정보를 바탕으로 학습자별 유사도를 산정하는 예시 절차로서, 학습자가 학습한 문제별로 저장된 정오답분포 데이터를 토대로 학습자간 행동기반 유사도를 자카드 유사도(Jaccard Similarity) 또는 코사인 유사도(Cosine Similarity) 방식 등으로 산정하여 각 학습자별 유사 학습자를 도출하여 리스트화하는 절차를 도시한 것이다. 도4는 서버에서 문제 큐레이션 및 문제의 저장구조를 도시한 것으로서, 학습자의 요청에 따라 행동기반 유사도가 높은 특정 학습자의 데이터를 토대로 학습 문제를 추출하여 학습자에게 문제를 제공하는 것을 나타낸다. 도5는 웹 또는 모바일 기기에서 문제 큐레이션으로 추천된 문제를 푸는 화면을 예시적으로 도시한 것으로서, 학습자는 맞출 것 같은 문제, 틀릴 것 같은 문제 등을 선택하여 학습자가 원하는 방향의 집중적인 학습 문제를 효과적으로 제공 받는 구조를 도시한 것이다.3 is an example procedure for calculating the similarity of each learner based on the learning information of each learner, and the behavior-based similarity between learners is determined based on the correct and incorrect answer distribution data stored for each problem learned by the learner, Jaccard Similarity or Cosine Similarity. Similarity) method, etc., to derive and list similar learners for each learner. 4 is a diagram illustrating a problem curation and a storage structure of a problem in a server, and shows that a problem is provided to a learner by extracting a learning problem based on data of a specific learner having a high behavior-based similarity at the request of a learner. 5 is an exemplary view showing a screen for solving a problem recommended by problem curation on a web or mobile device, where the learner selects a problem that is likely to be correct, a problem that is likely to be wrong, etc. It shows a structure that is effectively provided.

도6은 유사 학습자의 선정에서 추가적인 선택성을 부가한 예시로서, 각 학습자의 정오답율을 측정하여 이를 기준으로 유사 학습자를 상향 유사 학습자와 비상향 유사 학습자로 구분하여 도출한 것을 나타낸다. 도7은 유사 학습 문제의 선정에서 추가적인 선택성을 부가한 예시로서, 각 문제에 대한 정오답율을 측정하여 이를 기준으로 유사 학습 문제를 난이도 상향 유사 학습 문제와 난이도 비상향 유사 학습 문제로 구분하여 도출한 것을 나타낸다. 도8은 유사 학습자의 선정에 대한 변형 실시예로서 학습소요시간을 기준으로 유사 학습자를 선정하는 것을 예시적으로 나타낸 것이다.FIG. 6 is an example of adding additional selectivity in the selection of similar learners, and shows the results obtained by measuring the correct and incorrect rate of each learner and dividing similar learners into upward similar learners and non-going similar learners based on this. 7 is an example of adding additional selectivity in the selection of similar learning problems, by measuring the correct and incorrect rate for each problem, and derives similar learning problems by dividing them into difficulty-level upward-similar learning problems and difficulty-level non-oriented similar learning problems. Indicates one thing. FIG. 8 shows an example of selecting a similar learner based on the required learning time as a modified embodiment of the selection of similar learners.

도1에 도시된 바와 같이, 본 발명의 일실시예에 따른 학습자에게 맞춤형 학습 문제를 제공하는 문제은행에서의 문제 큐레이션 시스템 및 방법은, 학습 문제 및 그 관련 정보 등의 데이터를 제공하는 문제 제공자 단말기(10), 상기 데이터가 저장된 문제 은행 모듈(100), 학습 문제의 문맥 유사도와 학습자의 행동기반 유사도를 산정하며 학습자에게 제공할 문제를 추출하는 분석 모듈(200), 학습자가 학습한 문제의 정오답분포 등과 같은 데이터를 저장하며 학습자에게 제공될 문제를 저장하는 학습 정보 모듈(300) 및 학습자의 학습 관련 데이터를 송수신하는 학습자 단말기(400)를 포함한다. 상기 분석 모듈(200)은 문제별 형태소 분석 정보(500)를 기반으로 문제간 유사도를 산정하여 문제별 유사 문제 리스트 정보(530)를 도출하고 학습자별 문제 풀이 정보(600)를 기반으로 학습자별 유사 학습자 리스트 정보(620)를 도출하며 상기 문제별 유사 문제 리스트 정보(530) 및 학습자별 유사 학습자 리스트 정보(620)를 이용하여 학습자별 문제 큐레이션 정보(710)를 각각 리스트 형태로 도출한다. 상기 리스트화된 학습자별 문제 큐레이션 정보를 토대로 해당 학습자가 이미 학습한 문제 등을 선택적으로 처리하고, 상기 리스트화된 학습자데이터를 토대로 학습자의 행동기반 유사도에 의하여 그대로 제공하거나 혹은 맞거나 틀릴 것으로 예상되는 문제를 선택적으로 제공한다.As shown in Fig. 1, the problem curation system and method in a problem bank for providing customized learning problems to learners according to an embodiment of the present invention is a problem provider providing data such as learning problems and related information. The terminal 10, the question bank module 100 in which the data is stored, the analysis module 200 for calculating the context similarity of the learning problem and the learner's behavior-based similarity and extracting the problem to be provided to the learner, And a learning information module 300 that stores data such as distribution of correct and incorrect answers, and stores problems to be provided to learners, and a learner terminal 400 that transmits and receives data related to learning of the learner. The analysis module 200 calculates the similarity between problems based on the morpheme analysis information 500 for each problem to derive the similar problem list information 530 for each problem, and the similarity for each learner based on the problem solving information 600 for each learner. Learner list information 620 is derived, and problem curation information 710 for each learner is derived in a list form using the similar problem list information 530 for each problem and the similar learner list information 620 for each learner. Based on the listed problem curation information for each learner, the problem that the learner has already learned is selectively processed, and based on the listed learner data, based on the learner's behavior-based similarity, it is expected to be provided or correct or incorrect. Provides an optional problem.

본 발명의 일실시예에서 문제 은행 모듈(100)은 문제 제공자 단말기(10)로부터 문제데이터를 전달받는다. 문제데이터는 학습자의 학습을 위한 학습 문제 및 그 관련 정보를 포함하는 것으로서, 특정한 유형, 학년, 단원, 난이도, 과목 및 분야, 객관식/주관식, 및 사지선다형 등을 포함할 수 있으며 이에 제한되지 않는다. 또한 문제의 수량도 특정한 개수에 국한되지 않으나, 계산속도, 저장공간 등을 고려하여 소정의 그룹 또는 카테고리로 구분하여 각 그룹 또는 카테고리에 대하여 수행하는 방식 등을 채용할 수도 있다.In an embodiment of the present invention, the problem bank module 100 receives problem data from the problem provider terminal 10. The problem data includes learning problems and related information for the learner's learning, and may include, but is not limited to, specific types, grades, units, difficulty levels, subjects and fields, multiple choices/subjects, and multiple choices. In addition, the number of problems is not limited to a specific number, but a method of performing each group or category by dividing into a predetermined group or category in consideration of calculation speed, storage space, etc. may be employed.

본 발명의 일실시예에서 분석 모듈(200)은 학습 문제와 학습자를 분석 및 처리하며, 더불어, 학습 문제의 문맥 유사도와 학습자의 행동기반 유사도를 산정하여 문제 큐레이션하는 기능을 수행한다.In an embodiment of the present invention, the analysis module 200 analyzes and processes a learning problem and a learner, and also performs a function of curating a problem by calculating the context similarity of the learning problem and the behavior-based similarity of the learner.

먼저, 문제별 문맥 유사도 산정 절차에 대해 설명하면, 문제 문맥 분석 모듈(210)은 문제별 형태소를 분석하여 형태소별 포함여부를 판단한 문제별 형태소 분석 정보(500)를 도출한다. 상기 문제별 형태소 분석 정보를 바탕으로 특정 문제와 타문제를 대상으로 양 학습 문제에서 형태소 출현의 공통, 일방, 타방, 미출현 등을 카운트하여 공통(True/True), 일방(True/False), 타방(False/True), 미출현(False/False) 으로 정리하여 문제간 True/False 산출 정보(510)를 준비한다.First, when a procedure for calculating the context similarity for each problem is described, the problem context analysis module 210 analyzes the morphemes for each problem and derives the morpheme analysis information 500 for each problem that determines whether each morpheme is included. Based on the morpheme analysis information for each problem, common (True/True), unilateral (True/False), by counting the common, one-sided, the other, and non-appearance of morphemes in both learning problems targeting specific problems and other problems. The other (False/True) and non-appearance (False/False) are arranged to prepare the True/False calculation information 510 between problems.

다음, 학습자의 행동기반 유사도 산정 절차는 학습자의 학습 정보를 로그 형태로 기록한 학습 정보 저장 모듈(300)에 의해서 학습자 상호간의 유사도를 산정하여 수행한다. 일례로서 특정 학습자와 타학습자 사이에 동일하게 학습한 문제의 정오답 분포를 카운트하며, 상기 오답분포의 카운트는 True/False 테이블로 작성하여 준비한다.Next, the procedure for calculating the similarity based on learners' behavior is performed by calculating the similarity between learners by the learning information storage module 300 recording the learner's learning information in a log format. As an example, the distribution of correct and incorrect answers of a problem that has been learned equally between a specific learner and other learners is counted, and the count of the distribution of incorrect answers is prepared by writing a True/False table.

도2(a)는 학습 문제 및 문제별로 출현한 형태소(Term)를 행렬형태로 표시하여 문제별 형태소 분석 정보(500)를 도출한 것으로서, 예를 들어, 4개의 형태소(Term)를 기준으로 학습문제 1(problem1) 내지 학습문제 5(problem5)의 형태소 출현 정보를 표시한 것이다. 특정 형태소의 포함 여부는 0과1로 기록되며, 상기 특정 형태소를 구비한 경우는 1로 기록되며, 상기 특정 형태소를 구비하지 않은 경우는 0으로 기록된다. 상기 형태소(Term)는 언어의 단위로서 형태소 이외에도 단어, 숙어, 문장 등을 포함할 수 있으며, 수학식이나 기호 등도 포함할 수 있고 상기 형태소의 개수는 특정 범위로 제한되지는 않는다.Fig. 2(a) shows the learning problem and the morphemes (Terms) appearing for each problem in a matrix form to derive the morpheme analysis information 500 for each problem. For example, learning based on four morphemes (Term) The information on the appearance of morphemes of Problem 1 to Problem 5 is displayed. Whether or not the specific morpheme is included is recorded as 0 and 1, when the specific morpheme is provided, it is recorded as 1, and when the specific morpheme is not provided, it is recorded as 0. The morpheme (Term) is a unit of language and may include words, idioms, sentences, etc. in addition to morphemes, and may include mathematical expressions or symbols, and the number of morphemes is not limited to a specific range.

도2(b)는 문제간 True/False 산출 정보(510)를 표시한 것으로서, 예시적으로, 학습문제 1(Problem1)과 학습문제 2(Problem2) 사이의 문제간 형태소 출현 양상을 True/False 표로 기록한 것이다. True/True 항목은 양 학습문제에 공통되게 포함된 형태소의 수를 기록한 것이고, True/False 혹은 False/True는 양 학습문제 중 일방 또는 타방에만 포함된 형태소의 수를 각각 기록한 것이고, False/False는 양 학습문제의 어디에도 출현하지 않은 형태소의 수를 기록한 것이다. 예시에서, False/False 항목에는 4개의 형태소를 기준으로 산정하여 영(0)의 값이 기록되었지만 더 많은 형태소를 기준으로 하는 경우에는 임의의 값으로 집계될 수 있다. 구체적으로 살펴보면, False/False 항목에 집계되는 값은 대상 형태소의 전체 수로부터 앞선 True/True 항목, True/False 항목, False/True 항목의 값들을 뺀 값과 일치된다.2(b) shows the information 510 for calculating True/False between problems, and as an example, the appearance of morphemes between problems between learning problem 1 (Problem1) and learning problem 2 (Problem2) is shown in a True/False table. It was recorded. The True/True item records the number of morphemes commonly included in both learning questions, and True/False or False/True records the number of morphemes included in only one or the other of both learning questions, respectively, and False/False means The number of morphemes that did not appear anywhere in both learning problems was recorded. In the example, in the False/False item, a value of zero (0) is recorded by calculating based on four morphemes, but if more morphemes are used as the reference, it can be counted as an arbitrary value. Specifically, the value aggregated in the False/False item matches the total number of target morphemes minus the values of the preceding True/True items, True/False items, and False/True items.

도2(c) 및 2(d)는 문제별 유사도 산정 정보(520)를 예시적으로 표시한 것으로서, 각각 자카드 유사도(Jaccard similarity) 또는 코사인 유사도(Cosine similarity)를 사용하여 유사도를 산정한 일실시예를 도시한 것이다. 이때 자카드 유사도를 산정하는 경우 유사도값은 0~1 사이의 값으로 나타나며, 유사도값이 1인 경우에는 양 학습문제는 동일한 문제이다.2(c) and 2(d) are illustrative representations of similarity calculation information 520 for each problem, and one implementation of calculating similarity by using Jaccard similarity or Cosine similarity, respectively. It shows an example. In this case, when the jacquard similarity is calculated, the similarity value appears as a value between 0 and 1, and when the similarity value is 1, both learning problems are the same problem.

문제간 자카드 유사도는 각 문제 중 어디에든 포함된 형태소의 개수에 대한 양 문제에 공통되게 포함된 형태소의 개수의 비율로 구해지며, 예시에 있어서 양 문제에 공통되게 포함된 형태소는 2개이고 각 문제 중 어디에든 포함된 형태소는 4개이므로 유사도 값은 0.5 이다. 또한, 동일 문제간의 자카드 유사도는 1로 산출될 수밖에 없으므로 해당 유사도 계산은 생략될 수 있으며, 공통되는 형태소가 하나도 없는 경우에 양 문제간의 자카드 유사도는 영(0)이다.Jacquard similarity between problems is obtained as the ratio of the number of morphemes commonly included in both problems to the number of morphemes included in any of the problems, and in the example, there are 2 morphemes commonly included in both problems, and Since there are 4 morphemes included everywhere, the similarity value is 0.5. In addition, since the jacquard similarity between the same problems is inevitably calculated as 1, the calculation of the similarity may be omitted, and when there is no common morpheme, the jacquard similarity between the two problems is zero (0).

문제간 코사인 유사도는 각 문제에서 형태소의 출현을 좌표값 1로 표시한 리스트를 벡터로 간주하여 양 문제의 벡터 내각의 코사인값을 산출하는 것으로 구해질 수 있으며, 양 벡터의 크기를 곱한 값에 대한 양 벡터의 내적값을 비율로 처리하여 계산할 수 있다. 예시에 있어서 문제 1및 2를 각각 벡터 (1,0,1,1), (1,1,1,0)로 간주하고 그 각각의 크기

Figure pat00001
,
Figure pat00002
와, 내적값 1X1+0X1+1X1+1X0 = 2를 이용하여 계산하면 코사인 유사도 값은 0.666 이다. 또한, 동일 문제간의 코사인 유사도는 1로 산출될 수밖에 없으므로 해당 유사도 계산은 생략될 수 있으며, 공통되는 형태소가 하나도 없는 경우에 양 문제간의 코사인 유사도는 영(0)이다.The cosine similarity between problems can be obtained by calculating the cosine value of the inner angles of the vectors of both problems by considering the list representing the appearance of the morpheme in each problem as coordinate value 1 as a vector. It can be calculated by treating the dot product of both vectors as a ratio. In the example, problems 1 and 2 are regarded as vectors (1,0,1,1) and (1,1,1,0), respectively, and their respective sizes
Figure pat00001
,
Figure pat00002
And, if calculated using the dot product value 1X1+0X1+1X1+1X0 = 2, the cosine similarity value is 0.666. In addition, since the cosine similarity between the same problems is inevitably calculated as 1, the calculation of the similarity may be omitted, and when there is no common morpheme, the cosine similarity between the two problems is zero (0).

한편, 문제간 True/False 산출 정보(510) 또는 문제간 유사도 산정 정보(520)를 산출함에 있어서 형태소 사이의 관계성 등을 반영하여 유사도 산정을 보완할 수 있다. 즉, 형태소 중에서 동의어 및/또는 반의어, 외래어 등의 관계를 가지는 경우에 형태소들을 그룹으로 묶어 그 출현 여부를 산출하여 문제간 True/False 산출 정보(510) 또는 문제간 유사도 산정 정보(520) 등을 산출하는 것이다. 이를 위하여 분석모듈(200)은 관계어 사전 모듈(240)을 추가로 구비할 수 있다. 이러한 관계어 사전 모듈(240)을 구비함으로써 연산량, 저장공간 등에 대한 부담을 줄일 수 있다.Meanwhile, in calculating the true/false calculation information 510 between problems or the similarity calculation information 520 between problems, the similarity calculation may be supplemented by reflecting the relationship between morphemes. That is, in the case of having a relationship such as synonyms and/or antonyms, foreign words among the morphemes, the morphemes are grouped and the appearance of the morphemes is calculated, and the true/false calculation information 510 between problems or the similarity calculation information 520 between problems Is to produce. To this end, the analysis module 200 may additionally include a relational word dictionary module 240. By providing such a relational word dictionary module 240, it is possible to reduce the burden on the amount of calculation and storage space.

상기 관계어 사전 모듈(240)은 문제 문맥 분석 모듈(210)에 대하여 시스템의 설정에 따라 형태소 사이의 관계성 판단을 제공하거나 그에 더하여 관계성 판단에 의한 형태소의 집단화(grouping)정보를 제공한다. 이때 관계성은 시스템의 설정에 따라 단순히 동의어(외래어 포함) 관계로 한정되거나 동의어 관계뿐만 아니라 반의어, 연관어 등의 관계까지로 확장될 수 있으며, 상기 관계어 사전 모듈(240)은 기본적으로 내부에 구비된 언어 사전으로부터 혹은 네트워크로 연결된 언어 사전 등으로부터 상기 동의어 또는 반의어 등을 판단하도록 구성될 수 있으나 이에 한정되지 않는다.The relational word dictionary module 240 provides the problem context analysis module 210 with the determination of the relationship between the morphemes according to the system setting or, in addition, provides grouping information of the morphemes based on the relationship determination. At this time, the relationship may be limited to a simple synonym (including a foreign word) relationship according to the system setting, or may be extended to not only a synonym relationship but also an antonym, a related word, etc., and the related word dictionary module 240 is basically provided inside. It may be configured to determine the synonym or antonym from a language dictionary or a language dictionary connected through a network, but is not limited thereto.

예를 들어, 문제간 코사인 유사도를 산정하기 위한 준비로서 문제간 True/False 산출 정보(510)를 도출할 때 상기 관계어 사전 모듈(240)로부터 제공된 형태소 사이의 동의어 관계성을 고려하는 경우에 문제간 True/False 산출 정보(510)의 각 항목값은 개별적으로 변동된 결과로 나타나며, 이로 인하여 문제간 유사도 산정 정보(520) 및 문제별 유사 문제 리스트 정보(530)도 변동된다.For example, when deriving the True/False calculation information 510 between problems as a preparation for calculating the cosine similarity between problems, when considering the synonym relationship between the morphemes provided from the relational word dictionary module 240 Each item value of the inter-true/false calculation information 510 appears as a result of being individually changed, and thus, the similarity calculation information 520 between problems and the similarity problem list information 530 for each problem are also changed.

여기서, 형태소 사이의 관계성을 반영하는 경우에 동의어 여부 등에 대한 판단 정확도가 확보되지 않으면 유사도 산정에 노이즈가 포함될 수 있으므로 형태소 사이의 관계성을 과도하게 확장하지 않는 것이 바람직하다.Here, in the case of reflecting the relationship between the morphemes, it is preferable not to excessively expand the relationship between the morphemes because noise may be included in the similarity calculation if the determination accuracy of whether or not synonymous is not secured.

도2(e)는 문제별 유사 문제 리스트 정보(530)를 예시적으로 도시한 것으로서, 각 문제별로 가장 유사한 문제부터 나열된 기록 정보를 도시한 것이다. 예시에서, 학습문제 3(Problem3)은 학습문제 5(Problem5)와의 사이에서 문제의 유사도가 높은 것으로 나타난 경우로서, 문제 유사도 등을 고려하여 학습자는 학습효과가 높은 문제들을 제공받아 집중적인 학습을 할 수 있게 된다. 또한, 학습자는 특정 문제와 유사도가 높은 문제들 중에서 원하는 난이도의 문제들을 제공받음으로써 학습효과를 더욱 향상시킬 수 있다. 또한, 학습자가 특정 문제를 어렵다고 느끼거나 오답을 내놓은 문제의 경우, 해당 문제와 유사한 문제들을 제공받아 부족한 유형 및 배양하려는 학습 능력을 집중적으로 학습할 수 있게 된다.FIG. 2(e) shows an example of the similar problem list information 530 for each problem, and shows recorded information listing the most similar problem for each problem. In the example, learning problem 3 (Problem3) is a case in which the similarity of the problem is high between learning problem 5 (Problem5), and in consideration of the similarity of the problem, the learner is provided with problems with high learning effect and intensive learning. You will be able to. In addition, the learner can further improve the learning effect by receiving problems of a desired level of difficulty among problems with high similarity to a specific problem. In addition, in the case of a problem in which a learner feels difficult or gives an incorrect answer to a specific problem, problems similar to the corresponding problem are provided so that they can intensively learn the insufficient type and the learning ability to cultivate.

도 3은 분석 모듈(200)의 학습자 학습 유사 분석 모듈(220)에 의하여 유사 학습자 리스트를 도출하는 과정을 도시한 것으로서, 학습자의 학습정보를 로그 형태로 기록하는 학습정보 저장 모듈(310)로부터 제공된 학습자별 문제 풀이 정보(600)를 이용하여 학습자간 정오답 분포를 토대로 학습자간 유사도를 산정하여 유사 학습자 리스트를 도출하는 과정을 예시적으로 도시한 것이다.3 shows a process of deriving a similar learner list by the learner learning similarity analysis module 220 of the analysis module 200, provided from the learning information storage module 310 that records the learner's learning information in a log format. A process of deriving a list of similar learners by calculating the similarity between learners based on the distribution of correct and incorrect answers among learners using the problem solving information 600 for each learner is illustrated as an example.

도3(a)는 학습자별 문제 풀이 정보(600)를 도시한 것으로서, 학습자별 각 문제에 대한 정오답 또는 미학습 상태를 예시적으로 기록하여 도시한 것이다. ‘T’는 학습자가 해당 문제에 대해 정답(True)을 제출한 기록이고 ‘F’는 학습자가 해당 문제에 대해 오답(False)을 제출한 기록이며, 학습자가 아직 학습하지 않은 경우에는 T 및 F 값이 아닌 임의의 초기값 상태를 유지한다. 예를 들어 학습자가 학습하지 않은 경우로는, 해당 학습 문제를 제공 받지 못한 경우 이외에도 제공 받았더라도 시간이 없어 학습을 중간에 그만두거나 기기 또는 통신망의 오류로 인해 접속이 끊기는 등의 경우도 선택적으로 포함할 수 있다. 또한, 학습자별 문제 풀이 정보(600)에는 정오답 정보와 함께 학습 날짜 등의 추가 정보가 포함되어 문제 큐레이션 과정에서 이용될 수도 있다.3(a) shows the problem solving information 600 for each learner, and shows an example of recording correct and incorrect answers or unlearned states for each question for each learner. 'T' is the record that the learner has submitted a correct answer (True) to the question,'F' is the record that the learner has submitted an incorrect answer (False) to the question, and if the learner has not yet learned, T and F It maintains the state of an arbitrary initial value, not a value. For example, if the learner did not learn, it may optionally include cases where the learning problem was not provided, but also stopped learning due to lack of time, or disconnected due to an error in the device or communication network. can do. In addition, the problem solving information 600 for each learner may include correct and incorrect answer information and additional information such as a learning date, and may be used in a problem curation process.

도3(b)는 상기 학습자별 문제 풀이 정보(600)를 이용하여 학습자 간의 유사도값을 도시한 것으로서, 하나의 학습자와 다른 하나의 학습자 사이의 유사도를 산정하여 학습자간 유사도값을 저장한 학습자간 유사도 산정 정보(610)를 나타낸다. 여기서, 예를 들어, 학습자 1(Student1)은 자기 자신과의 유사값이 1로 도출되어 유사값 표시를 생략하였고, 학습자 1(Student1)에 대한 학습자 2(Student2)의 유사값은 학습자 2(Student2)에 대한 학습자 1(Student1)의 유사값과 동일하므로 마찬가지로 유사값 표시를 생략하였다. 학습자간 유사도 산정은 자카드 유사도(Jaccard similarity) 또는 상기 코사인 유사도(Cosine similarity) 방식 등을 사용하여 구할 수 있다.3(b) shows the similarity value between learners by using the problem solving information 600 for each learner, and between learners storing the similarity value between learners by calculating the similarity between one learner and another learner. The similarity calculation information 610 is shown. Here, for example, the similarity value of learner 1 (Student1) is derived as 1, so the display of the similarity value is omitted, and the similarity value of learner 2 (Student2) to learner 1 (Student1) is learner 2 (Student2). ) Is the same as the similarity value of learner 1 (Student1), so the similarity value display is omitted. The similarity between learners can be calculated using the Jaccard similarity or the cosine similarity method.

도3(c)는 앞서 구한 학습자간 유사도 산정 정보(610)를 바탕으로 선정된 학습자별 유사 학습자를 리스트 형태로 도시한 것으로서, 특정 학습자와 유사도가 높은 학습자부터 나열하여 정리된 학습자별 유사 학습자 리스트 정보(620)를 예시적으로 도시한 것이다. 상기 학습자별 유사 학습자 리스트 정보(620)를 이용하여 학습자에게 그와 유사도가 높은 학습자가 푼 문제를 기반으로 문제 큐레이션을 수행할 수 있다. 예시에서, 동일하게 학습한 문제의 정오답 분포를 통해 학습자 1(Student1)은 학습자 23(Student23)과 가장 유사한 것으로 나타났고, 이를 이용하여 학습자 1(Student1)에게 그와 가장 유사한 학습자 23(Student23)이 학습한 문제를 기반으로 문제 큐레이션을 제공할 수 있게 된다. 문제 큐레이션의 세부 과정은 아래에서 설명한다.3(c) is a list of similar learners for each learner selected based on the previously obtained similarity calculation information 610, and a list of similar learners for each learner organized by listing learners with high similarity to a specific learner. The information 620 is illustrated by way of example. Using the similar learner list information 620 for each learner, problem curation may be performed based on a problem solved by a learner having a high similarity to the learner. In the example, through the distribution of correct and incorrect answers of the same learned problem, it was found that learner 1 (Student1) was most similar to learner 23 (Student23), and using this, learner 23 (Student23) most similar to learner 1 (Student1). It is possible to provide problem curation based on this learned problem. The detailed process of problem curation is described below.

도 4는 분석 모듈(200)에서 학습자별 문제 추출 모듈(230)에 의해 학습 문제의 유사도 및 학습자간 유사도 등을 반영하여 문제 큐레이션을 수행함으로써 학습자별 문제 큐레이션 정보(710)를 도출하는 과정을 도시한 것이다.4 is a process of deriving problem curation information 710 for each learner by performing problem curation by reflecting the similarity of learning problems and similarity between learners by the problem extraction module 230 for each learner in the analysis module 200 Is shown.

문제 큐레이션의 세부 과정을 설명하기 위하여 도 4의 예시를 이용하여 특정 학습자로서 학습자 1(Student1)에 대한 문제 큐레이션을 수행해보면, 앞서 준비한 학습자별 유사 학습자 리스트 정보(620)를 이용하여 학습자 1은 학습자 23(Student23) 등과 유사한 것으로 파악되고, 학습자 23의 학습 정보는 학습자별 학습 문제 리스트 정보(700)로부터 얻을 수 있으므로 학습자 1에 대하여 학습자 23의 학습 정보를 기반으로 기본적인 문제 큐레이션을 제공할 수 있다. 즉, 예시에서 학습자 23의 학습 정보를 참고하여 학습 문제 36, 및 학습 문제 7, 학습 문제 12 등을 학습자 1에게 제공하는 방식으로 기초적인 문제 큐레이션을 수행할 수 있다. 여기서 학습자별 학습 문제 리스트 정보(700)는 학습자별 문제 풀이 정보(600)를 그대로 이용하거나 정리하여 이용할 수 있다.In order to explain the detailed process of problem curation, if problem curation is performed for learner 1 (Student1) as a specific learner using the example of FIG. 4, learner 1 using the previously prepared similar learner list information 620 for each learner. Is identified as similar to learner 23, etc., and since learner 23's learning information can be obtained from learner-specific learning problem list information 700, basic problem curation can be provided for learner 1 based on learner 23's learning information. I can. That is, in an example, basic problem curation may be performed by providing learning problem 36, learning problem 7, learning problem 12, etc. to learner 1 with reference to learning information of learner 23. Here, the learning problem list information 700 for each learner may use the problem solving information 600 for each learner as it is or may be used by organizing it.

이렇게 유사 학습자의 학습 정보를 이용한 문제 큐레이션을 통하여 학습자는 유사 학습자의 학습 정보에 내재된 유사 학습자의 학습 난이도, 학습 진도 등이 반영된 학습 문제를 제공 받을 수 있게 되어 학습 효과를 현저히 향상시킬 수 있다. 또한, 문제 큐레이션을 소정의 주기별로 수행함으로써 학습자 자신의 학습 이력 변화, 및/또는 타 학습자의 학습 이력 변화 등에 따라 학습자의 유사 학습자는 변동될 수 있으며 이러한 변동에 의해서 학습자에게 학습효과가 우수한 학습문제를 지속적으로 제공하게 된다. 즉, 예를 들어, 학습자의 학습 성취도가 향상될수록 그에 부합되게 유사 학습자가 변경되어 새로운 학습 문제 리스트를 제공하게 된다.Through problem curation using the learning information of similar learners, the learner can receive learning problems reflecting the learning difficulty and progress of similar learners embedded in the learning information of similar learners, and thus the learning effect can be significantly improved. . In addition, by performing problem curation at predetermined periods, the learner's similar learner may change according to the change of the learner's own learning history and/or the change of the learning history of other learners. Will continue to provide. That is, for example, as the learner's learning achievement improves, the similar learner is changed accordingly to provide a new list of learning problems.

한편, 기초적인 문제 큐레이션을 이용하는 경우에는 학습자가 이미 학습한 문제를 반복하여 제공할 수 있고 학습자는 기억한 응답을 그대로 제출하여 학습효과의 증가가 약화될 수 있으므로, 해당 문제를 단순히 제거하기 보다는 학습자를 위하여 더욱 보완된 문제 큐레이션이 필요하다. 도 4의 예시에서, 학습자 1에 대하여 유사 학습자 23의 학습 문제를 제시하는 과정에서 문제 리스트 중에서 학습자가 이미 학습한 문제를 파악하여 보완하는 것을 예시적으로 도시한 것이다. 즉, 문제 리스트의 학습 문제 36(Problem36)은 학습자 1이 이미 학습한 것이므로 학습자별 문제 추출 모듈(230)은 해당 학습문제를 대체하는 대체 학습문제를 도출하여 학습자 1에게 제시할 수 있다. 한편, 학습자별 문제 풀이 정보(600)에 정오답 정보와 함께 학습 날짜 등의 추가 정보가 포함된 경우에는 학습 이력의 경과를 고려하여 이미 학습한 학습 문제 중에서도 다시 제시할 수 있다.On the other hand, in the case of using basic problem curation, the learner can repeatedly provide the problem he has already learned, and the learner submits the memorized response as it is, so the increase in the learning effect may be weakened, so rather than simply removing the problem. Further complementary problem curation is needed for learners. In the example of FIG. 4, in the process of presenting the learning problem of the similar learner 23 to learner 1, it is an exemplary diagram that a learner identifies and supplements a problem that has already been learned from a problem list. That is, since learner 1 has already learned the learning problem 36 (Problem36) in the problem list, the problem extraction module 230 for each learner may derive an alternative learning problem that replaces the learning problem and present it to the learner 1. On the other hand, when additional information such as a learning date and the like are included in the problem solving information 600 for each learner, it may be presented again among learning problems already learned in consideration of the progress of the learning history.

앞서 준비한 문제별 유사 문제 리스트 정보(530)에 의하면 학습 문제 36(Problem36)과 유사한 문제로서 학습 문제 435(Problem435) 등이 있으므로 이 중에서 하나를 대체 학습문제로 선택하여 학습자 1에게 제시할 수 있다. 이렇게 보완된 문제 큐레이션을 통하여 학습자 1에게 문제 큐레이션된 학습 문제 리스트는 유사 학습자 23의 학습 문제 리스트를 기반으로 하되 일부가 대체되어 구성될 수 있다. 도 4에서 도시된 학습자별 문제 큐레이션 정보(710)는 보완된 문제 큐레이션에 의해서 대체된 학습 문제를 설명의 편의를 위하여 굵은 글씨로 구별되게 표시한 것이다.According to the previously prepared similar problem list information 530 for each problem, since there is a learning problem 435 (Problem435) as a problem similar to the learning problem 36 (Problem36), one of them can be selected as an alternative learning problem and presented to learner 1. The list of learning problems curated to learner 1 through the supplemented problem curation is based on the list of learning problems of similar learners 23, but some may be replaced. The problem curation information 710 for each learner shown in FIG. 4 shows learning problems replaced by the supplemented problem curation in bold for convenience of explanation.

본 발명의 일실시예에 따른 학습 정보 모듈(300)의 제공 문제 처리 모듈(320)은 상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)에 의해서 문제 큐레이션된 학습자별 문제 큐레이션 정보(710)를 학습자 단말(400)에 제공한다. 도 5는 학습자 단말(400)에 표시된 학습자 화면(800)을 예시적으로 도시한 것이다. 여기서 학습자 단말(400)은 문제데이터 등에 대한 학습자의 요청을 서버로 전송할 수 있고, 서버로부터 수신한 문제데이터 등에 대응하여 학습자가 입력한 답안정보, 풀이과정 등을 서버로 송신할 수 있으며, 서버로부터 수신한 문제데이터, 정답정보, 풀이과정 등의 정보를 디스플레이할 수 있도록 구성되는 것이 바람직하다. 따라서 학습자 단말(400)은 PC(Personal Computer), Laptop, PDA(Personal Digital Assistant), 스마트폰, 태블릿 PC 등과 같이 통신이 가능하며, 디스플레이 수단을 구비하는 것이 바람직하다. 또한 통신을 위해 수 내지 수백 메가바이트의 데이터 전송 속도를 지원하는 단말기로 구현되는 것이 바람직하다.The problem processing module 320 provided by the learning information module 300 according to an embodiment of the present invention includes problem curation information for each learner curated by the problem extraction module 230 for each learner of the analysis module 200 (710) is provided to the learner terminal 400. 5 illustrates an example of a learner screen 800 displayed on the learner terminal 400. Here, the learner terminal 400 may transmit a learner's request for problem data, etc. to the server, and transmit the answer information input by the learner, a solution process, etc. to the server in response to the problem data received from the server, and the like. It is preferable to be configured to display information such as received problem data, correct answer information, and solving process. Therefore, the learner terminal 400 is capable of communication, such as a personal computer (PC), a laptop, a personal digital assistant (PDA), a smart phone, a tablet PC, and the like, and preferably includes a display means. In addition, it is desirable to be implemented as a terminal supporting a data transmission rate of several to hundreds of megabytes for communication.

상기 제공 문제 처리 모듈(320)은 학습자 화면(800)을 구성함에 있어서 학습문제의 제시 전 또는 후에 있어서 학습자가 학습 문제의 종류 등을 선택할 수 있도록 문제 종류 선택 화면을 제시할 수 있다. 도 5의 예시에서는, 문제 큐레이션으로 제시될 전체 학습 문제를 그대로 학습하는 ‘전체’ 선택과, 유사 학습자가 정답을 제시하여 학습자도 정답을 제시할 가능성이 높은 학습 문제를 집중적으로 학습하는 ‘맞출 것으로 예상되는 문제 집중 학습’ 선택, 유사 학습자가 오답을 제시하여 학습자도 오답을 제시할 가능성이 높은 학습 문제를 집중적으로 학습하는 ‘틀릴 것으로 예상되는 문제 집중 학습’ 선택 등을 제시하여 학습자의 학습 선택도를 더욱 향상시킨 구조를 예시적으로 제시한 것이다. 이러한 선택 기능을 통하여 학습자는 단순하지만 누락없이 학습 진도를 꾸준하게 진행하는 학습을 하거나, 이미 확보한 학습 능력을 익숙한 학습 문제를 통하여 선택적으로 다시 확인하거나, 학습 능력이 부족한 부분을 집중적으로 점검하는 등 문제은행의 정보를 더욱 유용하게 이용하여 학습 효과를 향상시킬 수 있게 된다.In configuring the learner screen 800, the provided problem processing module 320 may present a problem type selection screen so that the learner can select the type of the learning problem before or after presentation of the learning problem. In the example of FIG. 5, the selection of'all' in which the entire learning problem to be presented as a problem curation is learned as it is, and the'fit-up' in which a similar learner presents the correct answer and intensively learns the learning problem that is likely to present the correct answer. Learner's choice of learning by presenting the'Expected Problem Intensive Learning' option, and the'Probably Incorrect Problem Focused Learning' option in which similar learners present incorrect answers and learn more intensively learning problems that are likely to present incorrect answers. The structure that further improved the figure is presented as an example. Through this selection function, the learner can learn simple but steadily progressing the learning progress without omission, selectively re-check through familiar learning problems, or intensively check the areas where learning ability is insufficient. The learning effect can be improved by making more useful use of bank information.

한편, 본 발명의 일실시예에 따른 학습자에게 맞춤형 학습 문제를 제공하는 문제은행에서의 문제 큐레이션 방법 및 장치는, 학습자의 선택 등에 따라 문제 큐레이션 과정에서 유사 학습자를 상향 혹은 하향 유사 학습자로 변경하여 문제 큐레이션을 수행하거나 문제의 난이도를 고려하여 학습 문제를 대체하여 제시하도록 구성할 수 있다.On the other hand, in the problem curation method and apparatus in a problem bank that provides customized learning problems to learners according to an embodiment of the present invention, a similar learner is changed to an upward or downward similar learner in the problem curation process according to a learner's selection, etc. Therefore, it can be configured to perform problem curation or substitute learning problems in consideration of the difficulty of the problem.

도 6(a)는 학습자별 문제 풀이 정보(600)로부터 학습자별 정답율을 산출한 정보(601)를 예시적으로 표시한 것이고, 도 6(b)는 앞서 설명한 학습자별 유사 학습자 리스트 정보(620)를 학습자별 정답율을 기준으로 학습자 보다 높은 정답율을 보인 상향 유사 학습자와 같거나 낮은 정답율을 보인 비상향 유사 학습자를 구분한 유사 학습자 구분 정보(621)를 표시한 것이다. 학습자의 선택 또는 시스템 등의 기본 설정에 따라 학습자에 대한 유사 학습자는 상향 유사 학습자에서 선정되거나 비상향 유사 학습자에서 선정될 수 있다. 이러한 유사 학습자 구분 정보(621)는 분석 모듈(200)의 학습자별 문제 추출 모듈(230)에서 수행될 수 있다. 학습자의 선택 또는 시스템 등의 기본 설정에 따라 학습자에 대한 유사 학습자를 조정하여, 상향 유사 학습자 또는 비상향 유사 학습자로 조정하여 문제 큐레이션을 수행함으로써 보완된 학습자별 문제 규레이션 정보를 도출할 수 있다.6(a) is an exemplary display of information 601 obtained by calculating the correct answer rate for each learner from the problem-solving information 600 for each learner, and FIG. 6(b) shows the similar learner list information 620 for each learner described above. Based on the correct answer rate for each learner, similar learner identification information 621 is displayed, which distinguishes between upstream similar learners showing higher correct answer rates than learners and non-disciplinary similar learners showing the same or lower correct answer rate. Depending on the learner's selection or basic settings such as the system, a similar learner for a learner may be selected from an upstream similar learner or a non-oriented similar learner. The similar learner identification information 621 may be performed in the problem extraction module 230 for each learner of the analysis module 200. It is possible to derive supplemented problem discipline information for each learner by performing problem curation by adjusting the similar learner to the learner according to the learner's choice or basic setting such as the system, and by adjusting to an upstream similar learner or a non-going similar learner. .

도 7(a)는 학습자별 문제 풀이 정보(600)로부터 문제별 정답율을 산출한 정보(602)를 예시적으로 표시한 것이고, 도 7(b)는 앞서 설명한 문제별 유사 문제 리스트 정보(530)를 문제별 정답율을 기준으로 해당 문제보다 낮은 정답율을 보인 상향 난이도의 유사 학습 문제와 같거나 높은 정답율을 보인 비상향 난이도의 유사 학습 문제를 구분한 유사 문제 구분 정보(531)를 표시한 것이다. 학습자의 선택 또는 시스템 등의 기본 설정에 따라 학습자에 대한 문제 큐레이션은 유사 학습자의 학습 문제를 기반으로 하되 개별 학습 문제는 상향 난이도의 유사 학습 문제로 대체하거나 비상향 난이도의 유사 학습 문제로 대체함으로써, 보완된 학습자별 문제 큐레이션 정보를 도출할 수 있다.FIG. 7(a) is an exemplary display of information 602 obtained by calculating the correct answer rate for each question from the problem solving information 600 for each learner, and FIG. 7(b) is a similar problem list information 530 for each problem described above. Based on the correct answer rate for each question, similar problem classification information 531 is displayed for classifying similar learning problems with the same or higher level of difficulty with similar learning problems with the same or higher correct answer rate than the corresponding problem. Depending on the learner's choice or basic settings such as the system, the curation of problems for learners is based on the learning problems of similar learners, but individual learning problems are replaced by similar learning problems of upward difficulty or similar learning problems of non-directed difficulty. In addition, it is possible to derive the curation information of problems for each learner that has been supplemented.

한편, 본 발명의 일실시예에 따른 학습자에게 맞춤형 학습 문제를 제공하는 문제은행에서의 문제 큐레이션 시스템 및 방법은, 학습자 단말(400)로 입력되는 학습자의 답안 입력시간을 측정하여 데이터를 축적함으로써 학습자의 학습 소요시간에 따라 상향 혹은 하향 유사 학습자로 변경하여 문제 큐레이션을 수행하거나 문제의 난이도를 고려하여 학습 문제를 대체하여 제시하도록 구성할 수 있다.On the other hand, the problem curation system and method in a problem bank for providing a customized learning problem to a learner according to an embodiment of the present invention, by measuring the answer input time of the learner input to the learner terminal 400 and accumulating data Depending on the learner's learning required time, it can be configured to perform problem curation by changing to an upward or downward similar learner, or to substitute and present a learning problem in consideration of the difficulty of the problem.

도 8(a)는 학습자별 문제 풀이 정보(600)로부터 각 문제별로 학습자의 답안 입력시간을 통계처리하여 평균소요시간을 산출한 정보(603)를 도시한 것이다. 여기서 입력시간은 모든 학습자의 답안 입력시간을 대상으로 하거나 정답 입력한 학습자의 답안 입력시간만을 대상으로 하는 선택을 할 수 있다. 이렇게 산출된 문제별 평균소요시간을 활용하여 추가적인 정보를 도출할 수 있는데, 예시적으로, 상기 문제별 평균소요시간을 기준으로 학습자의 시간초과율을 산출한 정보(603)를 함께 도시한 것이다. 이러한 시간초과율을 바탕으로 학습자의 학습 능력을 참고할 수 있음을 고려하여 문제 큐레이션에 활용할 수 있으며, 도 8(b)는 앞선 실시예들처럼 학습자의 선택 또는 시스템 등의 기본 설정에 따라 유사 학습자의 선정에서 학습자의 시간초과율과 비교하여 상향 유사 학습자 또는 비상향 유사 학습자를 구분하여 유사 학습자 구분 정보(622)를 도출한 것을 예시적으로 도시한 것이다.FIG. 8(a) shows information 603 obtained by statistically processing the learner's answer input time for each question from the problem solving information 600 for each learner to calculate the average time required. Here, the input time may be selected for all learners' answer input time or only the answer input time of learners who entered the correct answer. Additional information can be derived by using the calculated average time required for each problem. For example, the information 603 calculating the learner's time-out rate based on the average time required for each problem is also shown. Considering that the learner's learning ability can be referenced based on this time-out rate, it can be used for problem curation, and FIG. 8(b) shows similar learners according to basic settings such as the learner's choice or system, as in the previous embodiments. In the selection, the similar learner classification information 622 is derived by classifying upward similar learners or non-going similar learners by comparing with the learner's time-out rate.

한편, 상기 평균소요시간은 학습 문제의 난이도를 반영하는 것으로 이해될 수 있으므로 앞서 도 7에 의하여 설명한 실시예처럼 유사 학습 문제의 선정에 활용될 수 있다.Meanwhile, since the average time required may be understood to reflect the difficulty of the learning problem, it may be used to select a similar learning problem as in the embodiment described above with reference to FIG. 7.

이상에서 설명된 시스템이나 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The system or device described above may be implemented as a hardware component, a software component, and/or a combination of a hardware component and a software component. For example, the devices and components described in the embodiments include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable array (FPA), It can be implemented using one or more general purpose computers or special purpose computers, such as a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications executed on the operating system. In addition, the processing device may access, store, manipulate, process, and generate data in response to the execution of software. For the convenience of understanding, although it is sometimes described that one processing device is used, one of ordinary skill in the art, the processing device is a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that it may include. For example, the processing device may include a plurality of processors or one processor and one controller. In addition, other processing configurations are possible, such as a parallel processor.

또한, 소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.In addition, the software may include a computer program, code, instructions, or a combination of one or more of these, and may configure the processing unit to operate as desired, or independently or collectively. ) You can command the processing unit. Software and/or data may be interpreted by a processing device or to provide instructions or data to a processing device, of any type of machine, component, physical device, virtual equipment, computer storage medium or device. , Or may be permanently or temporarily embodyed in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored on one or more computer-readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and usable to those skilled in computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. -A hardware device specially configured to store and execute program instructions such as magneto-optical media, and ROM, RAM, flash memory, and the like. Examples of the program instructions include not only machine language codes such as those produced by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operation of the embodiment, and vice versa.

이 외에도 전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산 또는 분할되어 실시될 수도 있으며, 마찬가지로 분산 또는 분할된 것으로 설명되어 있는 구성 요소들도 통상의 기술자가 이해하는 범위 안에서 결합된 형태로 실시될 수 있다. 또한, 방법의 단계는 단독으로 복수회 실시되거나 혹은 적어도 다른 어느 한 단계와 조합으로 복수회 수행되는 형태로 실시될 수 있다.In addition to this, the above description of the present invention is for illustrative purposes only, and those skilled in the art to which the present invention pertains will understand that it is possible to easily transform it into other specific forms without changing the technical spirit or essential features of the present invention. I will be able to. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not limiting. For example, each component described as a single type may be implemented by being distributed or divided, and similarly, components described as being distributed or divided may also be implemented in a combined form within the scope of the understanding of a person skilled in the art. have. Further, the steps of the method may be performed alone or in a plurality of times in combination with at least one other step.

본 발명의 범위는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is indicated by the claims to be described later, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention.

10 : 문제 제공자 단말기
100 : 문제 은행 모듈
200 : 분석 모듈
210 : 문제 문맥 분석 모듈
220 : 학습자 학습 유사 분석 모듈
230 : 학습자별 문제 추출 모듈
240 : 관계어 사전 모듈
300 : 학습 정보 모듈
310 : 학습 정보 저장 모듈
320 : 제공 문제 처리 모듈
400 : 학습자 단말
500 : 문제별 형태소 분석 정보
510 : 문제간 True/False 산출 정보
520 : 문제간 유사도 산정 정보
530 : 문제별 유사 문제 리스트 정보
531 : 난이도 구분 유사 문제 리스트 정보
600 : 학습자별 문제 풀이 정보
610 : 학습자간 유사도 산정 정보
620 : 학습자별 유사 학습자 리스트 정보
621 : 학습수준 구분 유사 학습자 리스트 정보
700 : 학습자별 학습 문제 리스트 정보
710 : 학습자별 문제 큐레이션 정보
800 : 학습자 화면
810 : 문제 종류 선택 화면
10: problem provider terminal
100: question bank module
200: analysis module
210: problem context analysis module
220: learner learning similarity analysis module
230: problem extraction module for each learner
240: relational dictionary module
300: learning information module
310: learning information storage module
320: Provide problem processing module
400: learner terminal
500: Morphological analysis information for each problem
510: True/False calculation information between problems
520: Information on calculating similarity between problems
530: Similar problem list information for each problem
531: Difficulty classification similar problem list information
600: Problem solving information for each learner
610: Information on calculating similarity among learners
620: Similar learner list information for each learner
621: Information on the list of similar learners by learning level
700: learning question list information for each learner
710: Problem curation information for each learner
800: learner screen
810: Problem type selection screen

Claims (6)

학습자 학습정보와 문제 컨텍스트를 이용하여 문제은행의 학습 문제로부터 일부를 추출하여 학습자에게 제공하는 학습 문제 큐레이션 시스템에 있어서,
적어도 상기 학습 문제의 데이터가 저장된 문제 은행 모듈(100); 및
학습 문제의 문맥 유사도와 학습자의 행동기반 유사도를 산정하여 학습자에게 제공할 문제 리스트를 추출하는 분석 모듈(200);
학습자가 학습한 문제의 정오답 분포를 데이터로 저장하며 학습자에게 상기 학습 문제 리스트를 제공하는 학습 정보 모듈(300);를 포함하여 구성되며,
상기 분석 모듈(200)은,
문제별 형태소를 분석하여 형태소별 포함여부를 기반으로 문제간 유사도를 산출하여 문제별 유사 문제 리스트 정보(530)를 도출하는 문제 문맥 분석 모듈(210); 및
상기 학습 정보 모듈(300)로부터 제공된 학습자별 문제 풀이 정보(600)의 학습자간 정오답 분포를 토대로 학습자간 유사도를 산출하여 학습자별 유사 학습자 리스트 정보(620)를 도출하는 학습자 학습 유사 분석 모듈(220);
각 학습자에 대하여 상기 학습자별 유사 학습자 리스트 정보(620)에 의하여 유사 학습자를 선정하고 상기 학습자별 문제 풀이 정보(600)로부터 상기 유사 학습자의 문제 리스트를 추출하여 학습자별 문제 큐레이션 정보(710)를 도출하는 학습자별 문제 추출 모듈(230);을 포함하여 구성되고,
상기 학습 정보 모듈(300)은 상기 학습자별 문제 큐레이션 정보(710)로부터 해당 학습자에 대한 상기 학습 문제 리스트를 추출하여 학습자 단말기(400)로 제공하는 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
In the learning problem curation system that extracts a part from the learning problem of the problem bank and provides it to the learner using learner learning information and problem context,
A question bank module 100 in which data of at least the learning question is stored; And
An analysis module 200 for extracting a problem list to be provided to the learner by calculating the context similarity of the learning problem and the learner's behavior-based similarity;
And a learning information module 300 that stores the distribution of correct and incorrect answers of the problems learned by the learner as data and provides the learning problem list to the learner,
The analysis module 200,
A problem context analysis module 210 that analyzes morphemes for each problem and calculates similarity between problems based on whether or not each morpheme is included to derive similar problem list information 530 for each problem; And
A learner learning similarity analysis module 220 that calculates the similarity between learners based on the distribution of correct and incorrect answers between learners of the problem solving information 600 for each learner provided from the learning information module 300 to derive similar learner list information 620 for each learner. );
For each learner, similar learners are selected based on the similar learner list information 620 for each learner, and problem curation information 710 for each learner is extracted by extracting the problem list of the similar learners from the problem solving information 600 for each learner. And a problem extraction module 230 for each learner to derive;
The learning information module 300 extracts the learning problem list for a corresponding learner from the problem curation information 710 for each learner and provides it to the learner terminal 400.
제1항에 있어서,
상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)은,
상기 학습자별 문제 풀이 정보(600)로부터 상기 유사 학습자의 문제 리스트를 추출하여 학습자별 문제 큐레이션 정보(710)를 도출하는 과정에서 학습자가 이미 학습한 학습 문제는 상기 문제별 유사 문제 리스트 정보(530)를 이용하여 선정된 유사 학습 문제로 대체하는 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 1,
The problem extraction module 230 for each learner of the analysis module 200,
In the process of extracting the problem list of the similar learner from the problem solving information 600 for each learner and deriving the problem curation information 710 for each learner, the learning problem already learned by the learner is the similar problem list information 530 for each problem. ), a learning problem curation system, characterized in that replacing the selected similar learning problem using.
제2항에 있어서,
상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)은,
이미 학습한 학문 문제를 유사 학습 문제로 대체함에 있어서 개인의 설정 또는 시스템의 기본 설정에 따라 상향 난이도의 유사 학습 문제를 선정하거나 비상향 난이도의 유사 학습 문제를 선정하여 대체하도록 구성된 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 2,
The problem extraction module 230 for each learner of the analysis module 200,
In replacing an already learned academic problem with a similar learning problem, it is configured to select and replace a similar learning problem of an upward difficulty level or a similar learning problem of a non-reversing difficulty level according to a personal setting or a basic setting of the system, Learning problem curation system.
제1항에 있어서,
상기 분석 모듈(200)의 학습자별 문제 추출 모듈(230)은,
각 학습자에 대하여 상기 학습자별 유사 학습자 리스트 정보(620)에 의하여 유사 학습자를 선정하는 과정에서 개인의 설정 또는 시스템의 기본 설정에 따라 상향 유사 학습자를 선정하거나 비상향 유사 학습자를 선정하도록 구성된 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 1,
The problem extraction module 230 for each learner of the analysis module 200,
In the process of selecting a similar learner for each learner based on the similar learner list information 620 for each learner, it is configured to select an upstream similar learner or a non-reversing similar learner according to an individual setting or a basic setting of the system. A curation system for learning problems.
제1항에 있어서,
상기 학습 정보 모듈(300)은,
상기 학습 문제 리스트를 추출하여 학습자 단말기(400)로 제공함에 있어서 상기 학습 문제 리스트를 그대로 제공 받을 것인지 혹은 그 중에서 맞출 것으로 예상되는 문제만 제공 받을 것인지 혹은 그 중에서 틀릴 것으로 예상되는 문제만 제공 받을 것인지를 학습자가 선택할 수 있는 문제 종류 선택 화면(810)을 제시하여 학습자의 선택을 반영하도록 구성된 것을 특징으로 하는, 학습 문제 큐레이션 시스템.
The method of claim 1,
The learning information module 300,
When extracting the learning problem list and providing it to the learner's terminal 400, whether to receive the learning problem list as it is or only the problems expected to be matched among them, or only problems expected to be incorrect among them The learning problem curation system, characterized in that configured to reflect the learner's selection by presenting a problem type selection screen 810 that the learner can select.
제1항 내지 제5항 중 어느 하나의 학습 문제 큐레이션 시스템을 이용하여 학습자 학습정보와 문제 컨텍스트를 기반으로 문제은행의 학습 문제로부터 일부를 추출하여 학습자에게 제공하는 학습 문제 큐레이션 방법에 있어서,
문제별 형태소를 분석하여 형태소별 포함여부를 기반으로 문제간 유사도를 산출하여 문제별 유사 문제 리스트 정보(530)를 도출하는 단계; 및
학습자별 문제 풀이 정보(600)의 학습자간 정오답 분포를 토대로 학습자간 유사도를 산출하여 학습자별 유사 학습자 리스트 정보(620)를 도출하는 단계;
각 학습자에 대하여 상기 학습자별 유사 학습자 리스트 정보(620)에 의하여 유사 학습자를 선정하고 상기 학습자별 문제 풀이 정보(600)로부터 상기 유사 학습자의 문제 리스트를 추출하여 학습자별 문제 큐레이션 정보(710)를 도출하는 단계;
상기 학습자별 문제 큐레이션 정보(710)로부터 해당 학습자에 대한 상기 학습 문제 리스트를 추출하여 학습자 단말기(400)로 제공하는 단계;를 포함하여 구성되며,
상기 문제별 유사 문제 리스트 정보(530)를 도출하는 단계에서 문제간 유사도를 산출함에 있어서 형태소 사이의 관계성을 반영하여 문제간 유사도를 산출하는 것을 특징으로 하는, 학습 문제 큐레이션 방법.
In the learning problem curation method of extracting a part from the learning problem of the problem bank and providing it to the learner based on the learner's learning information and the problem context using the learning problem curation system of any one of claims 1 to 5,
Analyzing morphemes for each problem, calculating similarity between problems based on whether or not each morpheme is included, and deriving similar problem list information 530 for each problem; And
Calculating a similarity between learners based on the distribution of correct and incorrect answers between learners of the problem solving information 600 for each learner to derive similar learner list information 620 for each learner;
For each learner, similar learners are selected based on the similar learner list information 620 for each learner, and problem curation information 710 for each learner is extracted by extracting the problem list of the similar learners from the problem solving information 600 for each learner. Deriving;
And extracting the learning problem list for a corresponding learner from the problem curation information 710 for each learner and providing the learning problem list to the learner terminal 400; and
In the step of deriving the similar problem list information 530 for each problem, in calculating the similarity between problems, the similarity between problems is calculated by reflecting the relationship between morphemes.
KR1020190037509A 2019-03-29 2019-03-29 A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank KR102176339B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190037509A KR102176339B1 (en) 2019-03-29 2019-03-29 A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190037509A KR102176339B1 (en) 2019-03-29 2019-03-29 A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank

Publications (2)

Publication Number Publication Date
KR20200115966A true KR20200115966A (en) 2020-10-08
KR102176339B1 KR102176339B1 (en) 2020-11-10

Family

ID=72897293

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190037509A KR102176339B1 (en) 2019-03-29 2019-03-29 A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank

Country Status (1)

Country Link
KR (1) KR102176339B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102306957B1 (en) * 2020-11-13 2021-09-30 홍성현 Method and device for providing music education contents
KR20240011843A (en) 2023-06-08 2024-01-26 주식회사 화신이앤엘 (E&L) Apparatus and method for providing customized math problems to learners
KR102636079B1 (en) 2023-06-08 2024-02-14 주식회사 화신이앤엘 (E&L) Apparatus and method for providing customized math problems to learners

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010108955A (en) * 2000-06-01 2001-12-08 박승훈 Problem bank system and problem registering method therefor using computer network
KR101229860B1 (en) * 2011-10-20 2013-02-05 주식회사 매쓰홀릭 System and method to support e-learning
KR20180066705A (en) * 2016-12-09 2018-06-19 김채연 Method and apparatus for analyzing vulnerability of learner
KR20190028045A (en) * 2017-09-08 2019-03-18 주식회사 듀코젠 A learning system capable of providing a cloud-based digital item authoring solution and distribution service platform, and the control method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010108955A (en) * 2000-06-01 2001-12-08 박승훈 Problem bank system and problem registering method therefor using computer network
KR101229860B1 (en) * 2011-10-20 2013-02-05 주식회사 매쓰홀릭 System and method to support e-learning
KR20180066705A (en) * 2016-12-09 2018-06-19 김채연 Method and apparatus for analyzing vulnerability of learner
KR20190028045A (en) * 2017-09-08 2019-03-18 주식회사 듀코젠 A learning system capable of providing a cloud-based digital item authoring solution and distribution service platform, and the control method thereof

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102306957B1 (en) * 2020-11-13 2021-09-30 홍성현 Method and device for providing music education contents
KR20240011843A (en) 2023-06-08 2024-01-26 주식회사 화신이앤엘 (E&L) Apparatus and method for providing customized math problems to learners
KR20240011844A (en) 2023-06-08 2024-01-26 주식회사 화신이앤엘 (E&L) Apparatus and method for providing customized math problems to learners
KR102636079B1 (en) 2023-06-08 2024-02-14 주식회사 화신이앤엘 (E&L) Apparatus and method for providing customized math problems to learners

Also Published As

Publication number Publication date
KR102176339B1 (en) 2020-11-10

Similar Documents

Publication Publication Date Title
Roiger Data mining: a tutorial-based primer
Carter et al. Correcting for bias in psychology: A comparison of meta-analytic methods
KR101853091B1 (en) Method, apparatus and computer program for providing personalized educational contents through user response prediction framework with machine learning
Kaya et al. Assessing change in latent skills across time with longitudinal cognitive diagnosis modeling: An evaluation of model performance
Chen et al. What may visualization processes optimize?
Fraiwan et al. A review of chatgpt applications in education, marketing, software engineering, and healthcare: Benefits, drawbacks, and research directions
US11704578B2 (en) Machine learning method, apparatus, and computer program for providing personalized educational content based on learning efficiency
KR102096301B1 (en) Method, apparatus and computer program for operating a machine learning framework with active learning techniqe
KR102176339B1 (en) A problem curation system and method reflecting the similarity of the user learning information and the similarity of the problem context in the question bank
KR101895959B1 (en) Method, apparatus and computer program for interpreting analysis results of machine learning framework
KR102078627B1 (en) Method and system for providing real-time feedback information associated with user-input contents
Adusumalli Big Data as a Driving Tool of Digital Transformation
Weaver et al. Randomization tests for single case designs with rapidly alternating conditions: An analysis of p-values from published experiments
KR102075936B1 (en) Method, apparatus and computer program for operating a machine learning for providing personalized educational contents based on learning efficiency
Joseph et al. Exploring the effectiveness of learning path recommendation based on Felder-Silverman learning style model: A learning analytics intervention approach
Ezzaim et al. Artificial intelligence in education-State of the art
Potter A review and analysis of patterns of design decisions in recent media effects research
Zhao et al. Computational mechanisms for context-based behavioral interventions: A large-scale analysis
KR20190049627A (en) Method, apparatus and computer program for interpreting analysis results of machine learning framework
Mohamed et al. Artificial Intelligence in Public Relations and Association Rule Mining as a Decision Support Tool
Wahlheim et al. Study preferences for exemplar variability in self-regulated category learning
Chen et al. Predicting Web Survey Breakoffs Using Machine Learning Models
EL MEZOUARY et al. An evaluation of learner clustering based on learning styles in MOOC course
Dangeti et al. Numerical Computing with Python: Harness the power of Python to analyze and find hidden patterns in the data
JP5437211B2 (en) E-learning system with problem extraction function considering question frequency and learner's weakness

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant