JP7080759B2 - Predicted score providing device, predicted score providing method and predicted score providing program - Google Patents

Predicted score providing device, predicted score providing method and predicted score providing program Download PDF

Info

Publication number
JP7080759B2
JP7080759B2 JP2018135690A JP2018135690A JP7080759B2 JP 7080759 B2 JP7080759 B2 JP 7080759B2 JP 2018135690 A JP2018135690 A JP 2018135690A JP 2018135690 A JP2018135690 A JP 2018135690A JP 7080759 B2 JP7080759 B2 JP 7080759B2
Authority
JP
Japan
Prior art keywords
objective variable
student
score
grammar
machine learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018135690A
Other languages
Japanese (ja)
Other versions
JP2020013366A (en
Inventor
文四郎 落合
Original Assignee
アルー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アルー株式会社 filed Critical アルー株式会社
Priority to JP2018135690A priority Critical patent/JP7080759B2/en
Publication of JP2020013366A publication Critical patent/JP2020013366A/en
Application granted granted Critical
Publication of JP7080759B2 publication Critical patent/JP7080759B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、予測スコア提供装置、予測スコア提供方法及び予測スコア提供プログラムに関する。 The present invention relates to a predicted score providing device, a predicted score providing method, and a predicted score providing program.

下記特許文献1には、コールセンターに配置されている語学講師用の端末と、ユーザが携帯する携帯電話機との間で、映像信号及び音声信号を双方向に送受信しながら、語学学習を進行する語学習得システムが開示されている。この語学習得システムでは、ユーザが受講したい授業を予約すると、その予約時間に、語学講師用の端末とユーザの携帯電話機とがネットワークサーバーを介して接続され、授業が始まる。 In Patent Document 1 below, a language that advances language learning while bidirectionally transmitting and receiving video and audio signals between a terminal for a language instructor located in a call center and a mobile phone carried by a user. The learning system is disclosed. In this language learning acquisition system, when a user reserves a lesson to be taken, the terminal for a language instructor and the user's mobile phone are connected via a network server at the reserved time, and the lesson starts.

特開2009-272690号公報Japanese Unexamined Patent Publication No. 2009-272690

特許文献1に記載の語学習得システムでは、語学レッスンでの内容や理解度に基づいてアセスメントを行い、そのアセスメントの結果を他の受講生と比較して、受講生の能力が伸びる可能性を予測する仕組みがない。 In the language learning acquisition system described in Patent Document 1, an assessment is performed based on the content and comprehension level of the language lesson, and the result of the assessment is compared with other students to predict the possibility of improving the ability of the student. There is no mechanism to do it.

本発明は、このような事情に鑑みてなされたものであり、受講生の能力の伸びを予測して提供することができる予測スコア提供装置、予測スコア提供方法及び予測スコア提供プログラムを提供することを目的とする。 The present invention has been made in view of such circumstances, and provides a predictive score providing device, a predictive score providing method, and a predicted score providing program capable of predicting and providing an increase in a student's ability. With the goal.

本発明の一態様に係る予測スコア提供装置は、語学レッスンに用いる複数の設問に対する受講生の解答を、前記設問ごとに単語に分解し、当該分解した単語の品詞の組み合わせに基づいて、前記設問に割り当てられた文法の種類を判別する文法判別部と、前記文法判別部により判別された前記文法の種類に基づいて、前記受講生ごとに前記文法の種類別の設問数を集計する集計部と、前記解答ごとに、前記解答の正誤を判定する正誤判定部と、前記語学レッスンを受講した受講生全体における前記文法の種類別の設問数、前記受講生全体における前記解答の正誤、前記受講生全体における前記解答に用いられた単語及び前記受講生全体におけるアセスメントの前回スコアを、それぞれ説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習モデルを構築する機械学習部と、前記構築された前記機械学習モデルの前記説明変数に対し、アセスメントの対象となる対象受講生における前記文法の種類別の設問数、前記対象受講生における前記解答の正誤、前記対象受講生における前記解答に用いられた単語及び前記対象受講生におけるアセスメントの前回スコアを、それぞれ設定し、前記機械学習モデルの前記目的変数を算出する目的変数算出部と、前記目的変数算出部により算出された前記目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する予測スコア提供部と、を備える。 The predictive score providing device according to one aspect of the present invention decomposes the student's answers to a plurality of questions used in the language lesson into words for each question, and the question is based on the combination of the part words of the decomposed words. A grammar discriminator that discriminates the type of grammar assigned to, and a tabulation unit that aggregates the number of questions for each type of grammar for each student based on the type of grammar discriminated by the grammar discriminator. , The correctness judgment unit that determines the correctness of the answer for each answer, the number of questions for each type of the grammar in all the students who took the language lesson, the correctness of the answer in the whole student, the student The machine learning unit that constructs a machine learning model in which the word used in the answer as a whole and the previous score of the assessment in the whole student are used as explanatory variables, and the score fluctuation value of the assessment in the whole student is used as the objective variable. With respect to the explanatory variables of the constructed machine learning model, the number of questions for each type of grammar in the target student to be assessed, the correctness of the answer in the target student, and the correctness of the answer in the target student. The word used in the answer and the previous score of the assessment in the target student are set respectively, and the objective variable calculation unit for calculating the objective variable of the machine learning model and the objective variable calculation unit calculated by the objective variable calculation unit. A predictive score providing unit that provides a predictive score for the assessment in the target student based on the objective variable is provided.

上記態様において、前記機械学習モデルは、少なくとも、線形回帰モデル、ランダムフォレストによる分類モデル及びニューラルネットワークによる分類モデルのうち複数のモデルであり、前記目的変数算出部により算出された複数の前記目的変数に基づいて、前記対象受講生に対応する一つの目的変数を算出する第2の目的変数算出部を、さらに備え、前記予測スコア提供部は、前記第2の目的変数算出部により算出された前記一つの目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供することとしてもよい。 In the above aspect, the machine learning model is at least a plurality of models among a linear regression model, a classification model by a random forest, and a classification model by a neural network, and the plurality of objective variables calculated by the objective variable calculation unit are included in the plurality of objective variables. Based on the above, a second objective variable calculation unit for calculating one objective variable corresponding to the target student is further provided, and the prediction score providing unit is the one calculated by the second objective variable calculation unit. Based on one objective variable, the predicted score of the assessment in the target student may be provided.

上記態様において、前記機械学習部は、前記構築した複数の前記機械学習モデルの前記目的変数を、それぞれ第2の説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を第2の目的変数とする第2の線形回帰モデルを、さらに構築し、前記第2の目的変数算出部は、前記目的変数算出部により算出された複数の前記目的変数を、前記前記第2の線形回帰モデルの前記第2の説明変数にそれぞれ設定し、前記第2の目的変数を算出することで、前記一つの目的変数を算出することとしてもよい。 In the above embodiment, the machine learning unit uses the objective variables of the plurality of constructed machine learning models as the second explanatory variables, and the score fluctuation value of the assessment in the entire student as the second objective variable. The second linear regression model is further constructed, and the second objective variable calculation unit uses the plurality of objective variables calculated by the objective variable calculation unit to obtain the second linear regression model of the second linear regression model. The one objective variable may be calculated by setting each of the explanatory variables of 2 and calculating the second objective variable.

本発明の他の態様に係る予測スコア提供方法は、プロセッサに実行させる予測スコア提供方法であって、語学レッスンに用いる複数の設問に対する受講生の解答を、前記設問ごとに単語に分解し、当該分解した単語の品詞の組み合わせに基づいて、前記設問に割り当てられた文法の種類を判別する文法判別ステップと、前記文法判別ステップにおいて判別された前記文法の種類に基づいて、前記受講生ごとに前記文法の種類別の設問数を集計する集計ステップと、前記解答ごとに、前記解答の正誤を判定する正誤判定ステップと、前記語学レッスンを受講した受講生全体における前記文法の種類別の設問数、前記受講生全体における前記解答の正誤、前記受講生全体における前記解答に用いられた単語及び前記受講生全体におけるアセスメントの前回スコアを、それぞれ説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習モデルを構築する機械学習ステップと、前記構築された前記機械学習モデルの前記説明変数に対し、アセスメントの対象となる対象受講生における前記文法の種類別の設問数、前記対象受講生における前記解答の正誤、前記対象受講生における前記解答に用いられた単語及び前記対象受講生におけるアセスメントの前回スコアを、それぞれ設定し、前記機械学習モデルの前記目的変数を算出する目的変数算出ステップと、前記目的変数算出ステップにおいて算出された前記目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する予測スコア提供ステップと、を含む。 The method for providing a predicted score according to another aspect of the present invention is a method for providing a predicted score to be executed by a processor, in which the student's answers to a plurality of questions used in a language lesson are decomposed into words for each of the questions. Based on the grammar discrimination step that discriminates the type of grammar assigned to the question based on the combination of the part of speech of the decomposed word, and the grammar type discriminated in the grammar discrimination step, the above-mentioned for each student. A tabulation step for totaling the number of questions for each type of grammar, a correct / incorrect judgment step for determining the correctness of the answer for each answer, and the number of questions for each type of grammar among all the students who took the language lesson. The correctness of the answer in the entire student, the word used in the answer in the entire student, and the previous score of the assessment in the entire student are used as explanatory variables, and the score fluctuation value of the assessment in the entire student is used. The number of questions for each type of grammar in the target students to be assessed for the machine learning step for constructing the machine learning model as the objective variable and the explanatory variables of the constructed machine learning model, the target. The correctness of the answer in the student, the word used in the answer in the target student, and the previous score of the assessment in the target student are set respectively, and the objective variable calculation for calculating the objective variable of the machine learning model. Includes a step and a predictive score providing step that provides a predictive score for the assessment in the subject student based on the objective variable calculated in the objective variable calculation step.

本発明の他の態様に係る予測スコア提供プログラムは、コンピュータを、語学レッスンに用いる複数の設問に対する受講生の解答を、前記設問ごとに単語に分解し、当該分解した単語の品詞の組み合わせに基づいて、前記設問に割り当てられた文法の種類を判別する文法判別部、前記文法判別部により判別された前記文法の種類に基づいて、前記受講生ごとに前記文法の種類別の設問数を集計する集計部、前記解答ごとに、前記解答の正誤を判定する正誤判定部、前記語学レッスンを受講した受講生全体における前記文法の種類別の設問数、前記受講生全体における前記解答の正誤、前記受講生全体における前記解答に用いられた単語及び前記受講生全体におけるアセスメントの前回スコアを、それぞれ説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習モデルを構築する機械学習部、前記構築された前記機械学習モデルの前記説明変数に対し、アセスメントの対象となる対象受講生における前記文法の種類別の設問数、前記対象受講生における前記解答の正誤、前記対象受講生における前記解答に用いられた単語及び前記対象受講生におけるアセスメントの前回スコアを、それぞれ設定し、前記機械学習モデルの前記目的変数を算出する目的変数算出部、前記目的変数算出部により算出された前記目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する予測スコア提供部、として機能させる。 In the predictive score providing program according to another aspect of the present invention, the computer decomposes the student's answers to a plurality of questions used in the language lesson into words for each question, and is based on the combination of the part words of the decomposed words. Then, based on the grammar discriminating unit that discriminates the type of grammar assigned to the question and the type of grammar discriminated by the grammar discriminating unit, the number of questions for each type of grammar is totaled for each student. Aggregation unit, correctness judgment unit that judges the correctness of the answer for each answer, the number of questions for each type of grammar in all the students who took the language lesson, the correctness of the answer in the whole student, the attendance Machine learning to build a machine learning model in which the words used in the answer in the whole life and the previous score of the assessment in the whole student are used as explanatory variables, and the score fluctuation value of the assessment in the whole student is used as the objective variable. For the explanatory variables of the constructed machine learning model, the number of questions for each type of grammar in the target student to be assessed, the correctness of the answer in the target student, and the correctness of the answer in the target student. The objective variable calculation unit that sets the word used in the answer and the previous score of the assessment in the target student, and calculates the objective variable of the machine learning model, and the objective calculated by the objective variable calculation unit. Based on the variable, it functions as a predictive score providing unit that provides the predictive score of the assessment in the target student.

本発明によれば、受講生の能力の伸びを予測して提供することができる。 According to the present invention, it is possible to predict and provide an increase in the ability of a student.

実施形態における英語学習システムの実施例の一つを示す図である。It is a figure which shows one of the examples of the English learning system in an embodiment. 図1に示す英語学習システムの機能構成を例示する図である。It is a figure which illustrates the functional structure of the English learning system shown in FIG. 図1に示す英語学習システムで実行される文法判別処理の流れを例示する模式図である。It is a schematic diagram which illustrates the flow of the grammar discrimination processing executed in the English learning system shown in FIG. 図1に示す英語学習システムで実行される正誤判定処理の流れを例示する模式図である。It is a schematic diagram which illustrates the flow of the correctness determination processing executed in the English learning system shown in FIG. 図1に示す英語学習システムで機械学習モデルを構築する際の手順を例示する模式図である。It is a schematic diagram which illustrates the procedure at the time of constructing the machine learning model by the English learning system shown in FIG. 図1に示す英語学習システムで目的変数であるスコアの予測変動値を算出する際の手順を例示する模式図である。FIG. 3 is a schematic diagram illustrating a procedure for calculating a predicted fluctuation value of a score, which is an objective variable, in the English learning system shown in FIG. 1. 予測スコアの変動範囲と信頼度とをグラフ化して提供する際の一例を示す図である。It is a figure which shows an example at the time of providing the fluctuation range and the reliability of a prediction score as a graph.

以下、添付図面を参照して、本発明に係る予測スコア提供装置の機能を含む英語学習システムの好適な実施形態について説明する。実施形態では、例示的に英語を学習する場合について説明するが、学習の対象は英語に限定されず、他の言語の学習にも本発明を適用することができる。 Hereinafter, a preferred embodiment of the English learning system including the function of the predictive score providing device according to the present invention will be described with reference to the accompanying drawings. In the embodiment, the case of learning English by way of example will be described, but the subject of learning is not limited to English, and the present invention can be applied to learning of other languages.

まず、図1を参照して、実施形態における英語学習システムについて説明する。英語学習システム1は、一つ又は複数のサーバ装置やデータベースを用いて構築することができる。英語学習システム1は、通信回線4a、4bを介してそれぞれ接続してきた受講生用端末2と講師用端末3とを電話回線5を利用して接続させる。英語学習システム1は、電話回線5により接続された受講生用端末2と講師用端末3とを利用して受講生と講師とが通話をしながら進める英語レッスンの進行を制御する。 First, the English learning system according to the embodiment will be described with reference to FIG. The English learning system 1 can be constructed by using one or a plurality of server devices and databases. The English learning system 1 connects the student terminal 2 and the instructor terminal 3 which have been connected via the communication lines 4a and 4b, respectively, by using the telephone line 5. The English learning system 1 controls the progress of an English lesson that the student and the instructor proceed while talking by using the student terminal 2 and the instructor terminal 3 connected by the telephone line 5.

受講生用端末2は、受講生が携帯する端末である。受講生用端末2としては、例えばスマートフォンや携帯電話機等の通話機能を有する携帯端末が該当する。講師用端末3は、講師が利用する端末である。講師用端末3としては、例えばパーソナルコンピュータ等の小型端末が該当し、この小型端末には、電話回線を利用する通話機能が組み込まれている。講師用端末3は、例えばコールセンター等の同一施設内に複数台配置されている。講師用端末3を収容する施設は、日本国内に設けられていてもよいし、外国に設けられていてもよい。 The student terminal 2 is a terminal carried by the student. The student terminal 2 corresponds to, for example, a mobile terminal having a call function such as a smartphone or a mobile phone. The instructor terminal 3 is a terminal used by the instructor. The instructor terminal 3 corresponds to, for example, a small terminal such as a personal computer, and the small terminal has a built-in call function using a telephone line. A plurality of instructor terminals 3 are arranged in the same facility such as a call center. The facility for accommodating the instructor terminal 3 may be provided in Japan or in a foreign country.

なお、講師用端末3は、同一の施設内に複数台配置されている小型端末には限定されず、例えば、講師が所持するパーソナルコンピュータや、スマートフォン、携帯端末等であってもよい。 The instructor terminal 3 is not limited to small terminals arranged in the same facility, and may be, for example, a personal computer, a smartphone, a mobile terminal, or the like owned by the instructor.

英語学習システム1は、物理的な構成として、例えば、プロセッサと、記憶装置と、通信インタフェースとを含む。プロセッサは、算術論理演算ユニット及び各種レジスタから構成され、記憶装置に格納されているコンピュータプログラムを実行することで、後述する各種機能を実現する。 The English learning system 1 includes, for example, a processor, a storage device, and a communication interface as physical configurations. The processor is composed of an arithmetic and logical operation unit and various registers, and realizes various functions described later by executing a computer program stored in a storage device.

記憶装置は、例えば、ディスクドライブ又は半導体メモリ等のコンピュータ読み取り可能な記録媒体である。通信インタフェースは、ネットワークに接続し、ネットワーク上の他の端末と通信をするためのハードウェアモジュールである。 The storage device is, for example, a computer-readable recording medium such as a disk drive or a semiconductor memory. A communication interface is a hardware module for connecting to a network and communicating with other terminals on the network.

図2を参照して、英語学習システム1の機能的な構成について説明する。英語学習システム1は、例えば、宿題提供機能を有する。宿題提供機能は、例えば、文法判別部11と、集計部12と、正誤判定部13と、機械学習部14と、目的変数算出部15と、予測スコア提供部16と、を含む。なお、英語学習システム1の機能は、宿題提供機能に限定されず、例えば、レッスン進行機能、アセスメント機能等を有することができる。 The functional configuration of the English learning system 1 will be described with reference to FIG. The English learning system 1 has, for example, a homework providing function. The homework providing function includes, for example, a grammar determination unit 11, a totaling unit 12, a correctness determination unit 13, a machine learning unit 14, an objective variable calculation unit 15, and a prediction score providing unit 16. The function of the English learning system 1 is not limited to the homework providing function, and may have, for example, a lesson progress function, an assessment function, and the like.

英語学習システム1は、記憶装置に構築されるデータベースとして、例えば、受講生情報データベース181、解答履歴情報データベース182及び設問情報データベース183を備える。 The English learning system 1 includes, for example, a student information database 181 and an answer history information database 182 and a question information database 183 as databases constructed in the storage device.

受講生情報データベース181は、受講生に関する受講生情報を格納するデータベースである。受講生情報データベース181は、データ項目として、例えば、受講生ID項目、メールアドレス項目、氏名項目、電話番号項目、進捗状況項目及びグレード項目等を有する。 The student information database 181 is a database for storing student information about students. The student information database 181 has, for example, a student ID item, an e-mail address item, a name item, a telephone number item, a progress status item, a grade item, and the like as data items.

進捗状況項目は、レッスンの進捗状況を格納する。レッスンの進捗状況として、例えば受講生が到達したカリキュラムの最新のモジュール番号を用いることができる。モジュールの詳細については後述する。グレード項目は、例えば受講生の理解力や会話力等の能力のレベルを格納する。この進捗状況項目及びグレード項目は、後述する評価項目ごとに設けられる。 The progress item stores the progress of the lesson. As the progress of the lesson, for example, the latest module number of the curriculum reached by the student can be used. The details of the module will be described later. The grade item stores, for example, the level of ability of the student such as comprehension and conversation ability. This progress item and grade item are provided for each evaluation item described later.

解答履歴情報データベース182は、受講生が受講したレッスンで用いられた設問に対する受講生の解答内容を格納するデータベースである。解答履歴情報データベース182は、例えば、受講生IDごとに、レッスンを受講した日時(時間は時間帯)を記録し、その日時ごとに、解答内容を記録する。 The answer history information database 182 is a database that stores the answers of the students to the questions used in the lessons taken by the students. The answer history information database 182 records, for example, the date and time (time is the time zone) when the lesson was taken for each student ID, and records the answer content for each date and time.

設問情報データベース183は、レッスンで用いる設問の内容を格納するデータベースである。設問は、例えば、レイヤー、評価項目、グレード及びモジュールごとに設けることができる。レイヤーは、レッスンのレベルを示す。レイヤーとして、例えば、初級レベルである(1)“Basic”レイヤー、(2)中級レベルである“Intermediate”レイヤー、(3)上級レベルである“Advanced”レイヤー等を設けることができる。 The question information database 183 is a database that stores the contents of the questions used in the lesson. Questions can be provided, for example, for each layer, evaluation item, grade and module. Layers indicate the level of the lesson. As the layer, for example, a (1) "Basic" layer which is an elementary level, (2) an "Intermediate" layer which is an intermediate level, and (3) an "Advanced" layer which is an advanced level can be provided.

評価項目は、レイヤーごとに設ける評価の内容を示す。例えば、上記3つのレイヤーに対し、それぞれ以下の評価項目を設けることができる。(1)“Basic”レイヤー:“Attitude”、“Speaking”、“Listening”、“Grammar”及び“Vocabulary”の5つの評価項目。(2)“Intermediate”レイヤー:“Logical Speaking”、“Assertiveness”、“Active Listening”及び“Relationship Building”の4つの評価項目。(3)“Advanced”レイヤー:“Management Communication”、“Storytelling”、“Negotiation”及び“Facilitation”の4つの評価項目。 The evaluation items indicate the contents of the evaluation provided for each layer. For example, the following evaluation items can be provided for each of the above three layers. (1) "Basic" layer: Five evaluation items of "Attitude", "Speaking", "Listening", "Grammar" and "Vocabulary". (2) "Intermediate" layer: Four evaluation items: "Logical Speaking", "Assertiveness", "Active Listening" and "Relationship Building". (3) "Advanced" layer: Four evaluation items of "Management Communication", "Storytelling", "Negotiation" and "Facilitation".

グレードは、評価項目ごとの能力レベルを示す。グレードとして、例えば、6段階の能力レベルを設けることができる。その場合、能力レベルの低い方から順に、“E”、“D”、“C”、“B”、“A”、“S”のように、グレードを設定することができる。 Grade indicates the ability level for each evaluation item. As a grade, for example, six ability levels can be provided. In that case, grades can be set in order from the lowest ability level, such as "E", "D", "C", "B", "A", and "S".

モジュールは、カリキュラムを構成する最小単位であり、受講生はモジュール単位にレッスンを受講する。受講生は、現時点のグレードに割り当てられている全てのモジュールをクリアすると、次のグレードに進むことができる。 A module is the smallest unit that makes up the curriculum, and students take lessons in module units. Students can move on to the next grade by clearing all the modules assigned to the current grade.

図2に示す文法判別部11は、対象となる受講生のレッスンに用いる設問に割り当てられた文法の種類を判別する。図3を参照し、文法の種類を判別する文法判別処理について詳細に説明する。 The grammar discriminating unit 11 shown in FIG. 2 discriminates the type of grammar assigned to the question used in the lesson of the target student. With reference to FIG. 3, a grammar discrimination process for discriminating the type of grammar will be described in detail.

最初に、文法判別部11は、対象受講生のレッスンに用いる複数の設問のうち、最初の設問に対する受講生の解答を単語に分解する(ステップS11)。例えば、最初の設問に対する受講生の解答が“I have been to America.”である場合、文法判別部11は、5つの単語“I”、“have”、“been”、“to”、“America”に分解する。 First, the grammar discriminating unit 11 decomposes the student's answer to the first question among the plurality of questions used in the lesson of the target student into words (step S11). For example, if the student's answer to the first question is "I have been to America.", The grammar discriminator 11 will use the five words "I", "have", "been", "to", and "America." Disassemble into ".

続いて、文法判別部11は、上記ステップS11で分解した単語の品詞を判別する(ステップS12)。文法判別部11は、品詞を判別する際に、連続する複数の品詞を一つの品詞に統合できる場合、その連続する複数の品詞を一つの品詞に置き換える。連続する複数の品詞が一つの品詞に統合できるものとして、例えば、“前置詞”の後に“名詞”が続く場合や、“前置詞”の後に“冠詞”、“名詞”が続く場合がある。 Subsequently, the grammar discriminating unit 11 discriminates the part of speech of the word decomposed in step S11 (step S12). When discriminating a part of speech, the grammar discriminating unit 11 replaces the plurality of consecutive parts of speech with one part of speech when a plurality of consecutive parts of speech can be integrated into one part of speech. A plurality of consecutive parts of speech can be integrated into one part of speech, for example, there are cases where a "preposition" is followed by a "noun", and a "preposition" is followed by an "article" and a "noun".

具体的に、“to America”は、“to”が“前置詞”であり、“America”が“名詞”である。この場合、“to”と“America”が統合され、その品詞が“副詞”に置き換えられる。また、“in the park”は、“in”が“前置詞”であり、“the”が冠詞であり、“park”が名詞である。この場合、“in”と“the”と“park”が統合され、その品詞が“副詞”に置き換えられる。 Specifically, in "to America", "to" is a "preposition" and "America" is a "noun". In this case, "to" and "America" are integrated and their part of speech is replaced with "adverb". In "in the park", "in" is a "preposition", "the" is an article, and "park" is a noun. In this case, "in", "the" and "park" are integrated and their part of speech is replaced with "adverb".

続いて、文法判別部11は、上記ステップS12で判別した品詞の組み合わせに基づいて、設問に割り当てられた文法の種類を判別する(ステップS13)。例えば、品詞の組み合わせが、名詞+助動詞(have)+動詞(過去分詞)である場合には、文法の種類が“G1:現在完了”と判別される。同様に、品詞の組み合わせが、名詞+be動詞+動詞(過去分詞)である場合には、文法の種類が“G2:受動態”と判別される。品詞の組み合わせが、名詞+be動詞+動詞(現在分詞)である場合には、文法の種類が“G3:進行形”と判別される。 Subsequently, the grammar determination unit 11 determines the type of grammar assigned to the question based on the combination of part of speech determined in step S12 (step S13). For example, when the combination of part of speech is noun + auxiliary verb (have) + verb (past participle), the type of grammar is determined to be "G1: present perfect". Similarly, when the combination of part of speech is noun + be verb + verb (past participle), the type of grammar is determined to be "G2: passive voice". When the combination of part of speech is noun + be verb + verb (current participle), the type of grammar is determined to be "G3: progressive tense".

続いて、文法判別部11は、対象受講生のレッスンに用いる複数の設問のうち次の設問に対して、上記ステップS11~ステップS13の処理を行う。一方、上記ステップS11~ステップS13の処理が、対象受講生のレッスンに用いる全ての設問に対して終了した場合には、この文法判別処理を終了する。 Subsequently, the grammar discrimination unit 11 performs the processes of steps S11 to S13 for the next question among the plurality of questions used in the lesson of the target student. On the other hand, when the processes of steps S11 to S13 are completed for all the questions used in the lessons of the target students, the grammar discrimination process is terminated.

図2に示す集計部12は、文法判別部11により判別された文法の種類に基づいて、受講生ごとに、文法の種類別の設問数を集計する。例えば、受講生のレッスンに用いる設問が10問であった場合に、現在完了が4問、受動態が4問、進行形が2問のように集計される。 The tabulation unit 12 shown in FIG. 2 totals the number of questions for each type of grammar for each student based on the type of grammar discriminated by the grammar discriminating unit 11. For example, if the number of questions used in a student's lesson is 10, the present perfect is 4 questions, the passive voice is 4 questions, and the progressive tense is 2 questions.

正誤判定部13は、受講生の解答ごとに、解答の正誤を判定する。図4を参照し、解答の正誤を判定する正誤判定処理について詳細に説明する。 The correctness determination unit 13 determines whether the answer is correct or incorrect for each student's answer. With reference to FIG. 4, the correctness determination process for determining the correctness of the answer will be described in detail.

最初に、正誤判定部13は、受講生の解答である“I have been to America.”から助動詞“have”を除外し、動詞“been”を現在形にした“I am to America.”をマトリクス化する(ステップS21)。助動詞を除外して動詞を現在形にすることで、判定対象を単純化することができる。 First, the correctness judgment unit 13 excludes the auxiliary verb "have" from the student's answer "I have been to America." And matrixes "I am to America." With the verb "been" as the present tense. (Step S21). By excluding the auxiliary verb and making the verb the present tense, the judgment target can be simplified.

続いて、正誤判定部13は、be動詞である“am”の前後にあるそれぞれの単語の品詞が名詞であるか形容詞であるかを判定し、2行2列の行列を生成する(ステップS22)。例えば、“am”の前にある“I”は、名詞であるため、行列の1行1列に“1”を設定し、行列の2行1列に“0”を設定する。“am”の後ろにある“to America”は、副詞であるため、行列の1行2列及び2行2列にそれぞれ“0”を設定する。なお、動詞の前後に複数の単語が存在する場合にはそれぞれの判定結果を加算して行列に設定する。 Subsequently, the correctness determination unit 13 determines whether the part of speech of each word before and after the be verb “am” is a noun or an adjective, and generates a 2-by-2 matrix (step S22). ). For example, since "I" before "am" is a noun, "1" is set in 1 row and 1 column of the matrix, and "0" is set in 2 rows and 1 column of the matrix. Since "to America" after "am" is an adverb, "0" is set in 1st row 2nd column and 2nd row 2nd column of the matrix, respectively. If there are multiple words before and after the verb, the judgment results of each are added and set in the matrix.

続いて、正誤判定部13は、上記ステップS22で生成した行列と、予め登録されている正しいパターンの行列とを比較し、生成した行列と一致する正しいパターンの文型及び判定対象の動詞に基づいて、受講生の解答が正しいかどうかを判定する(ステップS23)。例えば、生成した行列と一致した正しいパターンの文型が、第1文型であった場合、判定対象の動詞である“am”は、第1文型の動詞として使用できる動詞である。したがって、受講生の解答は正しいと判定する。動詞ごとに、使用できる文型を定めたテーブルを予め準備しておき、そのテーブルを参照して対象文型に使用できる動詞であるか否かを判定することが好ましい。 Subsequently, the correctness determination unit 13 compares the matrix generated in step S22 with the matrix of the correct pattern registered in advance, and based on the sentence pattern of the correct pattern matching the generated matrix and the verb to be determined. , Determine whether the student's answer is correct (step S23). For example, when the sentence pattern of the correct pattern that matches the generated matrix is the first sentence pattern, the verb "am" to be determined is a verb that can be used as the verb of the first sentence pattern. Therefore, it is judged that the student's answer is correct. It is preferable to prepare in advance a table that defines the sentence patterns that can be used for each verb, and to refer to the table to determine whether or not the verb can be used for the target sentence pattern.

ここで、解答に、複数の動詞が含まれる場合には、それぞれの動詞ごとに、上記ステップS21~ステップS23の処理を行い、全ての動詞で正しいと判定された場合に、受講生の解答が正しいと判定する。一方、いずれかの動詞で誤っていると判定された場合に、受講生の解答は誤りであると判定する。 Here, when the answer includes a plurality of verbs, the processing of steps S21 to S23 is performed for each verb, and when it is determined that all the verbs are correct, the student's answer is given. Judge as correct. On the other hand, if it is determined that one of the verbs is incorrect, the student's answer is determined to be incorrect.

図2に示す機械学習部14は、語学レッスンの内容や受講生の解答を機械学習させることで、機械学習モデルを構築する。本実施形態では、機械学習モデルとして、線形回帰モデル、ランダムフォレストによる分類モデル(以下、「ランダムフォレストモデル」ともいう。)及びニューラルネットワークによる分類モデル(以下、「ニューラルネットワークモデル」ともいう。)を用いる。 The machine learning unit 14 shown in FIG. 2 constructs a machine learning model by machine learning the contents of language lessons and the answers of students. In this embodiment, as a machine learning model, a linear regression model, a classification model by a random forest (hereinafter, also referred to as “random forest model”) and a classification model by a neural network (hereinafter, also referred to as “neural network model”) are used. Use.

具体的に、機械学習部14は、対象となる語学レッスンを受講した受講生全体における文法の種類別の設問数、受講生全体における解答の正誤、受講生全体における解答に用いられた単語及び受講生全体におけるアセスメントの前回スコアを、それぞれ説明変数とし、受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習アルゴリズムを用いて、機械学習させることで、第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルをそれぞれ構築する。 Specifically, the machine learning department 14 includes the number of questions for each type of grammar in all the students who took the target language lesson, the correctness of the answer in the whole student, the words used in the answer in the whole student, and the course. The first linear regression model, Random Forest, is created by machine learning using a machine learning algorithm that uses the previous score of the assessment for the entire life as an explanatory variable and the fluctuation value of the assessment score for the entire student as the objective variable. Build a model and a neural network model respectively.

また、機械学習部14は、上記構築した第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルからの出力(目的変数)を、それぞれ説明変数とし、受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習アルゴリズムを用いて、機械学習させることで、第2の線形回帰モデルを構築する。 Further, the machine learning unit 14 uses the outputs (objective variables) from the first linear regression model, the random forest model, and the neural network model constructed above as explanatory variables, respectively, and aims at the score fluctuation value of the assessment for the entire student. A second linear regression model is constructed by machine learning using a machine learning algorithm as a variable.

図5を参照して、機械学習モデルを構築する際の手順について詳細に説明する。 The procedure for constructing the machine learning model will be described in detail with reference to FIG.

図5のIaは、受講生ごとの入力データであり、具体的には、機械学習する対象レッスンの全てのスクリプト及び連続するアセスメントの結果が含まれる。スクリプトは、例えば一センテンスの英文から構成される。連続するアセスメントの結果は、例えば、前回及び今回のアセスメントの結果である。 Ia in FIG. 5 is input data for each student, and specifically includes all scripts of the subject lessons to be machine-learned and the results of continuous assessment. The script is composed of, for example, one sentence in English. The results of successive assessments are, for example, the results of previous and current assessments.

Taは、集計部12により集計される文法の種類別の設問数を示すテーブルである。Tbは、正誤判定部13により判定される解答の正誤を示すテーブルである。Laは、受講生の解答に用いられた単語に基づいて分析された、解答に用いられた延べの単語、解答に用いられたユニークな単語等を示すリストである。Saは、前回のアセスメントのスコアであり、Sbは、今回のアセスメントのスコアの変動値である。今回のアセスメントのスコアの変動値Sbは、今回のアセスメントのスコアから前回のアセスメントのスコアSaを減算することで算出できる。 Ta is a table showing the number of questions for each type of grammar aggregated by the aggregation unit 12. Tb is a table showing the correctness of the answer determined by the correctness determination unit 13. La is a list showing the total number of words used in the answer, the unique words used in the answer, and the like, which are analyzed based on the words used in the student's answer. Sa is the score of the previous assessment, and Sb is the fluctuation value of the score of the current assessment. The fluctuation value Sb of the score of the current assessment can be calculated by subtracting the score Sa of the previous assessment from the score of the current assessment.

最初に、集計部12及び正誤判定部13が、入力データIaに基づいて、テーブルTa、Tbを生成し、さらに、リストLa、スコアSa及びスコアの変動値Sbを生成する(ステップS31)。 First, the aggregation unit 12 and the correctness determination unit 13 generate the tables Ta and Tb based on the input data Ia, and further generate the list La, the score Sa and the variation value Sb of the score (step S31).

続いて、機械学習部14は、上記ステップS31で生成されたテーブルTa、Tb、リストLa及びスコアSaの各値を、それぞれ説明変数とし、スコアの変動値Sbを目的変数とする機械学習アルゴリズムを用いて、機械学習させることで、第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルをそれぞれ構築する(ステップS32)。 Subsequently, the machine learning unit 14 uses the values of the tables Ta, Tb, the list La, and the score Sa generated in step S31 as explanatory variables, and the machine learning algorithm using the fluctuation value Sb of the score as the objective variable. The first linear regression model, the random forest model, and the neural network model are constructed by machine learning (step S32).

続いて、機械学習部14は、ステップS32で構築する第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルからの出力を、それぞれ説明変数とし、スコアの変動値Sbを目的変数とする機械学習アルゴリズムを用いて、機械学習させることで、第2の線形回帰モデルを構築する(ステップS33)。 Subsequently, the machine learning unit 14 uses the outputs from the first linear regression model, the random forest model, and the neural network model constructed in step S32 as explanatory variables, and the fluctuation value Sb of the score as the objective variable. A second linear regression model is constructed by machine learning using an algorithm (step S33).

図2に示す目的変数算出部15は、アセスメントの対象となる対象受講生のデータを、機械学習モデルの説明変数に設定して、目的変数を算出することで、スコアの予測変動値を算出する。 The objective variable calculation unit 15 shown in FIG. 2 calculates the predicted fluctuation value of the score by setting the data of the target students to be assessed as the explanatory variables of the machine learning model and calculating the objective variable. ..

具体的に、目的変数算出部15は、機械学習部14により構築された第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルの説明変数に対し、対象受講生における文法の種類別の設問数、対象受講生における解答の正誤、対象受講生における解答に用いられた単語及び対象受講生におけるアセスメントの前回スコアを、それぞれ設定し、第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルの目的変数をそれぞれ算出する。 Specifically, the objective variable calculation unit 15 asks the target students the number of questions for each type of grammar for the explanatory variables of the first linear regression model, the random forest model, and the neural network model constructed by the machine learning unit 14. , The correctness of the answer in the target student, the word used in the answer in the target student, and the previous score of the assessment in the target student, respectively, and the purpose of the first linear regression model, random forest model, and neural network model. Calculate each variable.

また、目的変数算出部(第2の目的変数算出部)15は、算出した三つの目的変数を、第2の線形回帰モデルの説明変数にそれぞれ設定し、目的変数を算出することで、対象受講生に対応する一つの目的変数を算出する。 In addition, the objective variable calculation unit (second objective variable calculation unit) 15 sets the three calculated objective variables as explanatory variables of the second linear regression model, respectively, and calculates the objective variable to take the target course. Calculate one objective variable corresponding to raw.

図6を参照して、目的変数であるスコアの予測変動値を算出する際の手順について詳細に説明する。 With reference to FIG. 6, the procedure for calculating the predicted fluctuation value of the score, which is the objective variable, will be described in detail.

図6のIbは、対象受講生の入力データであり、具体的には、対象受講生の対象期間の全てのスクリプト及び前回のアセスメントの結果が含まれる。対象期間は、前回のアセスメントの結果に基づいて、今回のアセスメントのスコアを予測する際に必要となるデータを確保できる期間を考慮して、任意に設定することができる。テーブルTa、Tb、リストLa及びスコアSa、スコアの変動値Sbは、図5と同様であるため、説明を省略する。 Ib in FIG. 6 is input data of the target student, and specifically, includes all scripts of the target period of the target student and the result of the previous assessment. The target period can be arbitrarily set in consideration of the period during which the data required for predicting the score of this assessment can be secured based on the result of the previous assessment. Since the table Ta, Tb, the list La, the score Sa, and the fluctuation value Sb of the score are the same as those in FIG. 5, the description thereof will be omitted.

最初に、集計部12及び正誤判定部13が、入力データIbに基づいて、テーブルTa、Tbを生成し、さらに、リストLa及びスコアSaを生成する(ステップS41)。 First, the aggregation unit 12 and the correctness determination unit 13 generate the tables Ta and Tb based on the input data Ib, and further generate the list La and the score Sa (step S41).

続いて、目的変数算出部15は、上記ステップS41で生成されたテーブルTa、Tb、リストLa及びスコアSaの各値を、第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルの説明変数にそれぞれ設定し、三つの目的変数を算出する(ステップS42)。 Subsequently, the objective variable calculation unit 15 uses the values of the tables Ta, Tb, list La, and score Sa generated in step S41 as explanatory variables of the first linear regression model, random forest model, and neural network model. Each is set and three objective variables are calculated (step S42).

続いて、目的変数算出部15は、ステップS42で算出した三つの目的変数を、第2の線形回帰モデルの説明変数にそれぞれ設定し、一つの目的変数を算出する(ステップS43)。この一つの目的変数が、対象受講生のスコアの予測変動値となる。 Subsequently, the objective variable calculation unit 15 sets the three objective variables calculated in step S42 as explanatory variables of the second linear regression model, and calculates one objective variable (step S43). This one objective variable is the predicted fluctuation value of the score of the target student.

図2に示す予測スコア提供部16は、目的変数算出部15により算出された一つの目的変数に基づいて、対象受講生におけるアセスメントの予測スコアを提供する。具体的に、予測スコア提供部16は、一つの目的変数として算出されたスコアの予測変動値を、前回のアセスメントのスコアSaに加算することで、予測スコアを算出する。 The prediction score providing unit 16 shown in FIG. 2 provides the prediction score of the assessment in the target student based on one objective variable calculated by the objective variable calculation unit 15. Specifically, the predicted score providing unit 16 calculates the predicted score by adding the predicted fluctuation value of the score calculated as one objective variable to the score Sa of the previous assessment.

予測スコア提供部16は、予測スコアを提供する際に、予測スコアの変動範囲と信頼度とを提供することとしてもよい。例えば、予測スコア提供部16は、予測スコアが“280点”である場合に、“280点±30点(信頼度70%)”、“280点±50点(信頼度90%)”等の情報を提供することとしてもよい。予測スコアの変動範囲と信頼度とを提供する際に、上記のように文字情報として提供してもよいし、図7に例示するようにグラフ化して提供することとしてもよい。図7のGaは、予測スコア(280点)を示すグラフであり、Gbは、予測スコア(280点)±30点(信頼度70%)の範囲を示す指標であり、Gcは、予測スコア(280点)±50点(信頼度90%)の範囲を示す指標である。 When providing the predicted score, the predicted score providing unit 16 may provide the fluctuation range and the reliability of the predicted score. For example, when the predicted score is "280 points", the predicted score providing unit 16 may have "280 points ± 30 points (reliability 70%)", "280 points ± 50 points (reliability 90%)", or the like. It may be to provide information. When providing the fluctuation range and the reliability of the predicted score, it may be provided as character information as described above, or may be provided as a graph as illustrated in FIG. 7. Ga in FIG. 7 is a graph showing a predicted score (280 points), Gb is an index showing a range of predicted score (280 points) ± 30 points (reliability 70%), and Gc is a predicted score (reliability 70%). It is an index showing the range of 280 points) ± 50 points (reliability 90%).

上述したように、実施形態における英語学習システム1によれば、アセスメントの対象となる対象受講生の解答に含まれる単語の品詞の組み合わせから判明する文法の種類に従って、対象受講生が解いた文法の種類別の設問数及び各設問に対する解答の正誤を求めることができるため、対象受講生のレッスンの理解度や語学の能力を文法の種類ごとに把握することが可能となる。 As described above, according to the English learning system 1 in the embodiment, the grammar solved by the target student according to the type of grammar found from the combination of the part of speech of the word included in the answer of the target student to be assessed. Since it is possible to determine the number of questions for each type and the correctness of the answer to each question, it is possible to grasp the degree of understanding of the lessons and the language ability of the target students for each type of grammar.

また、英語学習システム1によれば、受講生全体のデータを用いて機械学習させた第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルの説明変数に対し、対象受講生における文法の種類別の設問数、解答の正誤、解答に用いられた単語及びアセスメントの前回スコアを、それぞれ設定して三つの目的変数を算出するとともに、第1の線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルからの出力データを用いて機械学習させた第2の線形回帰モデルの説明変数に対し、三つの目的変数をそれぞれ設定してスコアの予測変動値である目的変数を算出することができる。したがって、受講生全体のスコアの変動傾向を理解度や能力と組み合わせて分析し、その分析結果に対象受講生のデータを当てはめて、対象受講生のスコアの予測変動値を算出することが可能となる。 In addition, according to the English learning system 1, the explanatory variables of the first linear regression model, the random forest model, and the neural network model, which were machine-learned using the data of all the students, were classified according to the type of grammar in the target students. The number of questions, the correctness of the answer, the word used for the answer, and the previous score of the assessment are set respectively to calculate the three objective variables, and from the first linear regression model, random forest model, and neural network model. Three objective variables can be set for the explanatory variables of the second linear regression model machine-learned using the output data, and the objective variable, which is the predicted fluctuation value of the score, can be calculated. Therefore, it is possible to analyze the fluctuation tendency of the score of the entire student in combination with the degree of understanding and ability, apply the data of the target student to the analysis result, and calculate the predicted fluctuation value of the score of the target student. Become.

さらに、英語学習システム1によれば、対象受講生のスコアの予測変動値に基づいて、対象受講生のアセスメントの予測スコアを算出して提供することができる。 Further, according to the English learning system 1, it is possible to calculate and provide the predicted score of the assessment of the target student based on the predicted fluctuation value of the score of the target student.

それゆえ、実施形態における英語学習システム1によれば、受講生の能力の伸びを予測して提供することができる。 Therefore, according to the English learning system 1 in the embodiment, it is possible to predict and provide the growth of the student's ability.

[変形例]
なお、本発明は、上述した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内において、他の様々な形で実施することができる。このため、上記実施形態はあらゆる点で単なる例示にすぎず、限定的に解釈されるものではない。例えば、上述した各処理ステップは処理内容に矛盾を生じない範囲で任意に順番を変更し、又は並列に実行することができる。
[Modification example]
The present invention is not limited to the above-described embodiment, and can be implemented in various other forms without departing from the gist of the present invention. For this reason, the above embodiments are merely exemplary in all respects and are not to be construed in a limited manner. For example, the above-mentioned processing steps can be arbitrarily changed in order or executed in parallel within a range that does not cause a contradiction in the processing contents.

上述した実施形態では、機械学習モデルとして、線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルを用いて機械学習しているが、これに限定されない。例えば、線形回帰モデル、ランダムフォレストモデル及びニューラルネットワークモデルのうち、いずれか一つ又は二つの機械学習モデルを用いて機械学習することとしてもよい。機械学習モデルが一つである場合には、複数の目的変数を一つにまとめる第2の線形回帰モデルを省略することができる。 In the above-described embodiment, machine learning is performed using a linear regression model, a random forest model, and a neural network model as the machine learning model, but the present invention is not limited thereto. For example, machine learning may be performed using any one or two machine learning models of the linear regression model, the random forest model, and the neural network model. When there is only one machine learning model, the second linear regression model that combines a plurality of objective variables into one can be omitted.

また、上述した実施形態では、受講生用端末2と講師用端末3とが電話回線5を介して接続しているが、この構成には限定されない。例えば、受講生用端末2と講師用端末3とが、電話回線5を利用せずに、通信回線を介して接続することとしてもよい。通信回線としては、例えば、Skype(登録商標)を含むVoIP(Voice over Internet Protocol)技術を適用した通信回線が該当する。この場合、VoIPのアカウントとして受講生用端末2に割り当てられる識別IDを、受講生情報の受講生IDとして用いることができる。 Further, in the above-described embodiment, the student terminal 2 and the instructor terminal 3 are connected via the telephone line 5, but the configuration is not limited to this. For example, the student terminal 2 and the instructor terminal 3 may be connected via a communication line without using the telephone line 5. The communication line corresponds to, for example, a communication line to which VoIP (Voice over Internet Protocol) technology including Skype (registered trademark) is applied. In this case, the identification ID assigned to the student terminal 2 as a VoIP account can be used as the student ID of the student information.

1…英語学習システム、2…受講生用端末、3…講師用端末、4a、4b…通信回線、5…電話回線、11…文法判別部、12…集計部、13…正誤判定部、14…機械学習部、15…目的変数算出部、16…予測スコア提供部、181…受講生情報データベース、182…解答履歴情報データベース、183…設問情報データベース 1 ... English learning system, 2 ... Student terminal, 3 ... Instructor terminal, 4a, 4b ... Communication line, 5 ... Telephone line, 11 ... Grammar discrimination unit, 12 ... Aggregation department, 13 ... Correctness judgment unit, 14 ... Machine learning department, 15 ... Objective variable calculation department, 16 ... Prediction score providing department, 181 ... Student information database, 182 ... Answer history information database, 183 ... Question information database

Claims (9)

語学レッスンに用いる複数の設問に対する受講生の解答を、前記設問ごとに単語に分解し、当該分解した単語の品詞の組み合わせに基づいて、前記設問に割り当てられた文法の種類を判別する文法判別部と、
前記文法判別部により判別された前記文法の種類に基づいて、前記受講生ごとに前記文法の種類別の設問数を集計する集計部と、
前記解答ごとに、前記解答の正誤を判定する正誤判定部と、
前記語学レッスンを受講した受講生全体における前記文法の種類別の設問数、前記受講生全体における前記解答の正誤、前記受講生全体における前記解答に用いられた単語及び前記受講生全体におけるアセスメントの前回スコアを、それぞれ説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習モデルを構築する機械学習部と、
前記構築された前記機械学習モデルの前記説明変数に対し、アセスメントの対象となる対象受講生における前記文法の種類別の設問数、前記対象受講生における前記解答の正誤、前記対象受講生における前記解答に用いられた単語及び前記対象受講生におけるアセスメントの前回スコアを、それぞれ設定し、前記機械学習モデルの前記目的変数を算出する目的変数算出部と、
前記目的変数算出部により算出された前記目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する予測スコア提供部と、
を備える予測スコア提供装置。
A grammar discriminator that decomposes students' answers to multiple questions used in language lessons into words for each question, and determines the type of grammar assigned to the question based on the combination of part of speech of the decomposed words. When,
Based on the type of grammar determined by the grammar discrimination unit, a tabulation unit that aggregates the number of questions for each type of grammar for each student, and a tabulation unit.
For each of the answers, a correctness determination unit that determines the correctness of the answer, and
The number of questions for each type of grammar in all the students who took the language lesson, the correctness of the answer in the whole student, the words used in the answer in the whole student, and the previous assessment in the whole student The machine learning department that builds a machine learning model that uses the score as an explanatory variable and the score fluctuation value of the assessment for the entire student as the objective variable.
For the explanatory variables of the constructed machine learning model, the number of questions for each type of grammar in the target student to be assessed, the correctness of the answer in the target student, and the answer in the target student. The objective variable calculation unit for calculating the objective variable of the machine learning model by setting the words used in the above and the previous score of the assessment in the target student, respectively.
Based on the objective variable calculated by the objective variable calculation unit, the predictive score providing unit that provides the predicted score of the assessment in the target student, and the predictive score providing unit.
Predictive score providing device.
前記機械学習モデルは、少なくとも、線形回帰モデル、ランダムフォレストによる分類モデル及びニューラルネットワークによる分類モデルのうち複数のモデルであり、
前記目的変数算出部により算出された複数の前記目的変数に基づいて、前記対象受講生に対応する一つの目的変数を算出する第2の目的変数算出部を、さらに備え、
前記予測スコア提供部は、前記第2の目的変数算出部により算出された前記一つの目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する、
請求項1記載の予測スコア提供装置。
The machine learning model is at least a plurality of models among a linear regression model, a classification model by a random forest, and a classification model by a neural network.
A second objective variable calculation unit for calculating one objective variable corresponding to the target student based on the plurality of objective variables calculated by the objective variable calculation unit is further provided.
The prediction score providing unit provides a prediction score for assessment in the target student based on the one objective variable calculated by the second objective variable calculation unit.
The predictive score providing device according to claim 1.
前記機械学習部は、前記構築した複数の前記機械学習モデルの前記目的変数を、それぞれ第2の説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を第2の目的変数とする第2の線形回帰モデルを、さらに構築し、
前記第2の目的変数算出部は、前記目的変数算出部により算出された複数の前記目的変数を、前記前記第2の線形回帰モデルの前記第2の説明変数にそれぞれ設定し、前記第2の目的変数を算出することで、前記一つの目的変数を算出する、
請求項2記載の予測スコア提供装置。
The machine learning unit uses the objective variables of the plurality of constructed machine learning models as the second explanatory variables, and the score fluctuation value of the assessment in the entire student as the second objective variable. Further build a linear regression model,
The second objective variable calculation unit sets a plurality of the objective variables calculated by the objective variable calculation unit as the second explanatory variables of the second linear regression model, respectively, and the second objective variable calculation unit. By calculating the objective variable, the one objective variable is calculated.
The predictive score providing device according to claim 2.
プロセッサに実行させる予測スコア提供方法であって、
語学レッスンに用いる複数の設問に対する受講生の解答を、前記設問ごとに単語に分解し、当該分解した単語の品詞の組み合わせに基づいて、前記設問に割り当てられた文法の種類を判別する文法判別ステップと、
前記文法判別ステップにおいて判別された前記文法の種類に基づいて、前記受講生ごとに前記文法の種類別の設問数を集計する集計ステップと、
前記解答ごとに、前記解答の正誤を判定する正誤判定ステップと、
前記語学レッスンを受講した受講生全体における前記文法の種類別の設問数、前記受講生全体における前記解答の正誤、前記受講生全体における前記解答に用いられた単語及び前記受講生全体におけるアセスメントの前回スコアを、それぞれ説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習モデルを構築する機械学習ステップと、
前記構築された前記機械学習モデルの前記説明変数に対し、アセスメントの対象となる対象受講生における前記文法の種類別の設問数、前記対象受講生における前記解答の正誤、前記対象受講生における前記解答に用いられた単語及び前記対象受講生におけるアセスメントの前回スコアを、それぞれ設定し、前記機械学習モデルの前記目的変数を算出する目的変数算出ステップと、
前記目的変数算出ステップにおいて算出された前記目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する予測スコア提供ステップと、
を含む予測スコア提供方法。
It is a method of providing a predicted score that is executed by the processor.
A grammar discrimination step that decomposes the student's answers to multiple questions used in a language lesson into words for each question, and determines the type of grammar assigned to the question based on the combination of the part of speech of the decomposed word. When,
Based on the type of grammar determined in the grammar determination step, a tabulation step for totaling the number of questions for each type of grammar for each student, and an aggregation step.
For each of the answers, a correct / incorrect judgment step for determining the correctness of the answer, and
The number of questions for each type of grammar in all the students who took the language lesson, the correctness of the answer in the whole student, the words used in the answer in the whole student, and the previous assessment in the whole student A machine learning step for constructing a machine learning model in which the score is used as an explanatory variable and the score fluctuation value of the assessment for the entire student is used as the objective variable.
For the explanatory variables of the constructed machine learning model, the number of questions for each type of grammar in the target student to be assessed, the correctness of the answer in the target student, and the answer in the target student. The objective variable calculation step for calculating the objective variable of the machine learning model by setting the words used in the above and the previous score of the assessment in the target student, respectively.
A predictive score providing step that provides a predictive score for an assessment in the target student based on the objective variable calculated in the objective variable calculation step, and a predictive score providing step.
Predictive score providing method including.
前記機械学習モデルは、少なくとも、線形回帰モデル、ランダムフォレストによる分類モデル及びニューラルネットワークによる分類モデルのうち複数のモデルであり、
前記目的変数算出ステップにおいて算出された複数の前記目的変数に基づいて、前記対象受講生に対応する一つの目的変数を算出する第2の目的変数算出ステップを、さらに含み、
前記予測スコア提供ステップは、前記第2の目的変数算出ステップにおいて算出された前記一つの目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する、
請求項4記載の予測スコア提供方法。
The machine learning model is at least a plurality of models among a linear regression model, a classification model by a random forest, and a classification model by a neural network.
A second objective variable calculation step for calculating one objective variable corresponding to the target student based on the plurality of objective variables calculated in the objective variable calculation step is further included.
The predicted score providing step provides a predicted score for assessment in the target student based on the one objective variable calculated in the second objective variable calculation step.
The method for providing a predicted score according to claim 4.
前記機械学習ステップは、前記構築した複数の前記機械学習モデルの前記目的変数を、それぞれ第2の説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を第2の目的変数とする第2の線形回帰モデルを、さらに構築し、
前記第2の目的変数算出ステップは、前記目的変数算出ステップにおいて算出された複数の前記目的変数を、前記前記第2の線形回帰モデルの前記第2の説明変数にそれぞれ設定し、前記第2の目的変数を算出することで、前記一つの目的変数を算出する、
請求項5記載の予測スコア提供方法。
In the machine learning step, the objective variable of the plurality of constructed machine learning models is used as the second explanatory variable, and the score fluctuation value of the assessment in the entire student is used as the second objective variable. Further build a linear regression model,
In the second objective variable calculation step, the plurality of objective variables calculated in the objective variable calculation step are set as the second explanatory variables of the second linear regression model, respectively, and the second objective variable is set. By calculating the objective variable, the one objective variable is calculated.
The method for providing a predicted score according to claim 5.
コンピュータを、
語学レッスンに用いる複数の設問に対する受講生の解答を、前記設問ごとに単語に分解し、当該分解した単語の品詞の組み合わせに基づいて、前記設問に割り当てられた文法の種類を判別する文法判別部、
前記文法判別部により判別された前記文法の種類に基づいて、前記受講生ごとに前記文法の種類別の設問数を集計する集計部、
前記解答ごとに、前記解答の正誤を判定する正誤判定部、
前記語学レッスンを受講した受講生全体における前記文法の種類別の設問数、前記受講生全体における前記解答の正誤、前記受講生全体における前記解答に用いられた単語及び前記受講生全体におけるアセスメントの前回スコアを、それぞれ説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を目的変数とする機械学習モデルを構築する機械学習部、
前記構築された前記機械学習モデルの前記説明変数に対し、アセスメントの対象となる対象受講生における前記文法の種類別の設問数、前記対象受講生における前記解答の正誤、前記対象受講生における前記解答に用いられた単語及び前記対象受講生におけるアセスメントの前回スコアを、それぞれ設定し、前記機械学習モデルの前記目的変数を算出する目的変数算出部、
前記目的変数算出部により算出された前記目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する予測スコア提供部、
として機能させる予測スコア提供プログラム。
Computer,
A grammar discriminator that decomposes students' answers to multiple questions used in language lessons into words for each question, and determines the type of grammar assigned to the question based on the combination of part of speech of the decomposed words. ,
A tabulation unit that aggregates the number of questions for each type of grammar for each student based on the type of grammar determined by the grammar discrimination unit.
A correct / incorrect judgment unit that determines the correctness of the answer for each answer.
The number of questions for each type of grammar in all the students who took the language lesson, the correctness of the answer in the whole student, the words used in the answer in the whole student, and the previous assessment in the whole student The machine learning department that builds a machine learning model with the score as the explanatory variable and the score fluctuation value of the assessment for the entire student as the objective variable.
For the explanatory variables of the constructed machine learning model, the number of questions for each type of grammar in the target student to be assessed, the correctness of the answer in the target student, and the answer in the target student. The objective variable calculation unit, which sets the previous score of the assessment in the target student and the word used in the above, and calculates the objective variable of the machine learning model.
A predictive score providing unit that provides a predicted score for an assessment in the target student based on the objective variable calculated by the objective variable calculation unit.
A predictive score providing program that functions as.
前記機械学習モデルは、少なくとも、線形回帰モデル、ランダムフォレストによる分類モデル及びニューラルネットワークによる分類モデルのうち複数のモデルであり、
前記目的変数算出部により算出された複数の前記目的変数に基づいて、前記対象受講生に対応する一つの目的変数を算出する第2の目的変数算出部としてコンピュータをさらに機能させ、
前記予測スコア提供部は、前記第2の目的変数算出部により算出された前記一つの目的変数に基づいて、前記対象受講生におけるアセスメントの予測スコアを提供する、
請求項7記載の予測スコア提供プログラム。
The machine learning model is at least a plurality of models among a linear regression model, a classification model by a random forest, and a classification model by a neural network.
The computer is further made to function as a second objective variable calculation unit that calculates one objective variable corresponding to the target student based on the plurality of objective variables calculated by the objective variable calculation unit.
The prediction score providing unit provides a prediction score for assessment in the target student based on the one objective variable calculated by the second objective variable calculation unit.
The predictive score providing program according to claim 7.
前記機械学習部は、前記構築した複数の前記機械学習モデルの前記目的変数を、それぞれ第2の説明変数とし、前記受講生全体におけるアセスメントのスコア変動値を第2の目的変数とする第2の線形回帰モデルを、さらに構築し、
前記第2の目的変数算出部は、前記目的変数算出部により算出された複数の前記目的変数を、前記前記第2の線形回帰モデルの前記第2の説明変数にそれぞれ設定し、前記第2の目的変数を算出することで、前記一つの目的変数を算出する、
請求項8記載の予測スコア提供プログラム。
The machine learning unit uses the objective variables of the plurality of constructed machine learning models as the second explanatory variables, and the score fluctuation value of the assessment in the entire student as the second objective variable. Further build a linear regression model,
The second objective variable calculation unit sets a plurality of the objective variables calculated by the objective variable calculation unit as the second explanatory variables of the second linear regression model, respectively, and the second objective variable calculation unit. By calculating the objective variable, the one objective variable is calculated.
The predictive score providing program according to claim 8.
JP2018135690A 2018-07-19 2018-07-19 Predicted score providing device, predicted score providing method and predicted score providing program Active JP7080759B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018135690A JP7080759B2 (en) 2018-07-19 2018-07-19 Predicted score providing device, predicted score providing method and predicted score providing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018135690A JP7080759B2 (en) 2018-07-19 2018-07-19 Predicted score providing device, predicted score providing method and predicted score providing program

Publications (2)

Publication Number Publication Date
JP2020013366A JP2020013366A (en) 2020-01-23
JP7080759B2 true JP7080759B2 (en) 2022-06-06

Family

ID=69169885

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018135690A Active JP7080759B2 (en) 2018-07-19 2018-07-19 Predicted score providing device, predicted score providing method and predicted score providing program

Country Status (1)

Country Link
JP (1) JP7080759B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009288486A (en) 2008-05-29 2009-12-10 Nippon Telegr & Teleph Corp <Ntt> Teaching material presentation device, teaching material presentation method, teaching material presentation program, and recording medium recording the program
US20150093737A1 (en) 2012-10-31 2015-04-02 Sk Telecom Co., Ltd. Apparatus and method for automatic scoring
JP2016091306A (en) 2014-11-05 2016-05-23 株式会社東芝 Prediction model generation method
JP2017003673A (en) 2015-06-06 2017-01-05 和彦 木戸 Learning support device
JP2018031828A (en) 2016-08-23 2018-03-01 Kddi株式会社 Program, device, and method automatically grading according to learner's speech sound

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2789466B2 (en) * 1988-01-26 1998-08-20 ブラザー工業株式会社 Electronic learning machine

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009288486A (en) 2008-05-29 2009-12-10 Nippon Telegr & Teleph Corp <Ntt> Teaching material presentation device, teaching material presentation method, teaching material presentation program, and recording medium recording the program
US20150093737A1 (en) 2012-10-31 2015-04-02 Sk Telecom Co., Ltd. Apparatus and method for automatic scoring
JP2016091306A (en) 2014-11-05 2016-05-23 株式会社東芝 Prediction model generation method
JP2017003673A (en) 2015-06-06 2017-01-05 和彦 木戸 Learning support device
JP2018031828A (en) 2016-08-23 2018-03-01 Kddi株式会社 Program, device, and method automatically grading according to learner's speech sound

Also Published As

Publication number Publication date
JP2020013366A (en) 2020-01-23

Similar Documents

Publication Publication Date Title
CN110188331B (en) Model training method, dialogue system evaluation method, device, equipment and storage medium
US10191901B2 (en) Enrollment pairing analytics system and methods
Dennis et al. Understanding fit and appropriation effects in group support systems via meta-analysis
US20200051450A1 (en) Audio-visual teaching platform and recommendation subsystem, analysis subsystem, recommendation method, analysis method thereof
US10395646B2 (en) Two-stage training of a spoken dialogue system
CN112818025B (en) Test question generation method, device and system, computer storage medium and program product
CN110473435B (en) Word auxiliary learning system and method with quantification of learning period
US10929781B1 (en) Systems and methods for determining training parameters for dialog generation
CN112740132A (en) Scoring prediction for short answer questions
CN113590762B (en) Method and device for recommending test question information, electronic equipment and computer readable medium
CN114493944A (en) Method, device and equipment for determining learning path and storage medium
JP2010129033A (en) Interactive mental state learning device and method thereof, interactive control device and method thereof, program and recording medium
JP7080759B2 (en) Predicted score providing device, predicted score providing method and predicted score providing program
US11055329B2 (en) Query and information meter for query session
Rose et al. Generation and Classification of Motivational-Interviewing-Style Reflections for Smoking Behaviour Change Using Few-Shot Learning with Transformers
KR102385073B1 (en) Learning problem recommendation system that recommends evaluable problems through unification of the score probability distribution form and operation thereof
US20210150595A1 (en) Experience Sensing Engine
JP7181021B2 (en) Grammar score calculation device, grammar score calculation method, and grammar score calculation program
KR102168556B1 (en) System of training assessment
JP7181017B2 (en) Homework providing device, homework providing method, and homework providing program
Tavabi et al. Therapist empathy assessment in motivational interviews
KR20210105272A (en) Pre-training modeling system and method for predicting educational factors
US10878339B2 (en) Leveraging machine learning to predict user generated content
Costaguta et al. Group and students profiles to support collaborative learning in a multiagent model
KR102601362B1 (en) Method, apparatus and system for evaluating language ability and suggesting learning contents based on vocabulary usage habits

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210621

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220516

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220525

R150 Certificate of patent or registration of utility model

Ref document number: 7080759

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150