JP2019200233A

JP2019200233A - Lesson support system, information processing device, lesson support method, and program

Info

Publication number: JP2019200233A
Application number: JP2018092977A
Authority: JP
Inventors: 寿忠坂和; Toshitada Sakawa
Original assignee: Sakawa Co Ltd
Current assignee: Sakawa Co Ltd
Priority date: 2018-05-14
Filing date: 2018-05-14
Publication date: 2019-11-21

Abstract

To provide a lesson support system capable of improving learning efficiency of students while achieving burden reduction of a teacher.SOLUTION: A lesson support system for supporting a lesson performed by a teacher includes, in a control part 430 of a lesson support server 400: a word extraction unit 432 for extracting a word from voice data obtained by collecting voices of lesson participants during a lesson or text data obtained by converting the voice data; a related information acquisition unit 437 for acquiring related information including at least one of a related word and a related image related to the word extracted by the word extraction unit 432 from a database; and a related information presentation processing unit 438 for performing processing for presenting the word extracted by the word extraction unit 432 and the related information acquired by the related information acquisition unit 437 to students.SELECTED DRAWING: Figure 2

Description

本発明は、教員により行われる授業を支援する授業支援システム、情報処理装置、授業支援方法、及びプログラムに関する。 The present invention relates to a lesson support system, an information processing apparatus, a lesson support method, and a program that support lessons conducted by a teacher.

従来、学校教育に関し、教員により行われる授業を情報技術（ＩＴ）により支援するシステムとして様々なシステムが提案されている。 Conventionally, regarding school education, various systems have been proposed as systems that support classes conducted by teachers using information technology (IT).

特許文献１には、書き消し可能な筆記用ボード（黒板等）と、筆記用ボードに向けて投影するプロジェクタと、タッチ操作可能な端末装置とを含み、端末装置の表示部上でタッチ操作して選択した画面がプロジェクタから筆記用ボード上にミラーリング投影される電子黒板システムが記載されている。 Patent Document 1 includes a writing board (such as a blackboard) that can be erased, a projector that projects toward the writing board, and a terminal device that can be touch-operated, and is touch-operated on the display unit of the terminal device. An electronic blackboard system in which a screen selected in this manner is mirrored and projected from a projector onto a writing board is described.

特許文献２には、郊外学習において教員と生徒との間の情報交換を円滑に行うために、教員及び生徒のそれぞれがモバイルホワイトボードを所持し、郊外学習における会話内容をマイクにより集音して音声認識によりテキストデータに変換し、このテキストデータを各モバイルホワイトボードに表示させる無線会議学習システムが記載されている。 In Patent Document 2, in order to facilitate information exchange between teachers and students in suburban learning, each teacher and student possesses a mobile whiteboard, and the conversation content in suburban learning is collected by a microphone. A wireless conference learning system that converts text data by voice recognition and displays the text data on each mobile whiteboard is described.

特開２０１６−２１８１７５号公報JP, 2006-218175, A 特開２００２−４４２８４号公報JP 2002-44284 A

しかしながら、従来提案されているシステムには、次のような問題がある。 However, the conventionally proposed system has the following problems.

特許文献１に記載のシステムは、既存の筆記用ボードに電子黒板の機能を付加できるものの、筆記用ボード上に表示するべきコンテンツを教員が授業前に予め作成して準備する必要があるため、コンテンツの作成に伴う教員の負担が大きくなり得る。 Although the system described in Patent Document 1 can add the function of an electronic blackboard to an existing writing board, it is necessary for the teacher to prepare and prepare the content to be displayed on the writing board before class. The burden on teachers accompanying the creation of content can increase.

特許文献２に記載のシステムは、単に郊外学習における会話内容をテキスト化して表示するものであるため、表示されるテキストから会話内容を超える情報を生徒が知得できない。また、会話内容すべてをテキスト化して表示する場合、重要な情報とそうではない情報とが区別されず、重要な情報が埋もれてしまう。よって、特許文献２に記載のシステムは、授業における生徒の学習効率を向上させる点において改善の余地がある。 Since the system described in Patent Document 2 simply displays the conversation content in suburban learning as text, the student cannot obtain information beyond the conversation content from the displayed text. In addition, when all conversation contents are displayed as text, important information and information that is not so are not distinguished, and important information is buried. Therefore, the system described in Patent Document 2 has room for improvement in terms of improving the learning efficiency of students in the class.

そこで、本発明は、教員の負担軽減を実現しつつ、生徒の学習効率を向上させることが可能な授業支援システム、情報処理装置、授業支援方法、及びプログラムを提供することを目的とする。 Then, an object of this invention is to provide the lesson support system, information processing apparatus, lesson support method, and program which can improve the learning efficiency of a student, implement | achieving the burden reduction of a teacher.

第１の特徴に係る授業支援システムは、教員により行われる授業を支援する授業支援システムであって、前記授業中における授業参加者の音声を集音して得られた音声データ又は前記音声データを変換して得られたテキストデータから単語を抽出する単語抽出部と、前記単語抽出部により抽出された前記単語に関連する関連語及び関連画像の少なくとも一方を含む関連情報をデータベースから取得する関連情報取得部と、前記単語抽出部により抽出された前記単語及び前記関連情報取得部により取得された前記関連情報を生徒に提示する処理を行う関連情報提示処理部と、を備えることを要旨とする。 A class support system according to a first feature is a class support system that supports classes conducted by a teacher, and includes voice data obtained by collecting voices of class participants in the class or the voice data. Related information for acquiring related information including at least one of a related word and a related image related to the word extracted from the word extracting unit that extracts the word from the text data obtained by the conversion and the word extracting unit from the database The gist includes an acquisition unit, and a related information presentation processing unit that performs processing of presenting the word extracted by the word extraction unit and the related information acquired by the related information acquisition unit to a student.

かかる授業支援システムによれば、例えば教員が発した音声中の単語が抽出されて生徒に提示されるため、教員が板書を行う負担を軽減できる。また、抽出した単語の関連情報をデータベースから取得し、関連情報を単語と共に提示することにより、関連情報により生徒の学習効率を向上させることができる。さらに、授業前において教員が事前準備を行う負担を軽減できる。 According to such a class support system, for example, the words in the voice uttered by the teacher are extracted and presented to the student, so that the burden of the teacher writing on the board can be reduced. Moreover, the related information of the extracted word is acquired from the database, and the related information is presented together with the word, whereby the learning efficiency of the student can be improved by the related information. In addition, the burden on teachers to make preparations before class can be reduced.

なお、授業は、講義、演習、実験、実習、及び実技も含む概念である。教員は、教師及び講師を含む概念である。授業参加者は、教員及び生徒を含む概念である。 Note that lessons are a concept that includes lectures, exercises, experiments, practical training, and practical skills. Teacher is a concept that includes teachers and lecturers. The class participant is a concept including teachers and students.

第１の特徴に係る授業支援システムにおいて、前記関連情報提示処理部は、前記授業に用いる表示装置によって、前記単語抽出部により抽出された前記単語及び前記関連情報取得部により取得された前記関連情報を表示することにより前記生徒に対する提示を行う。ここで、前記表示装置は、前記授業に用いる筆記用ボードに対して投影するプロジェクタ装置、又は前記授業に用いる電子黒板であることが好ましい。 In the lesson support system according to the first feature, the related information presentation processing unit is configured to display the word extracted by the word extraction unit and the related information acquired by the related information acquisition unit by a display device used for the class. Is displayed to the student. Here, it is preferable that the display device is a projector device that projects onto a writing board used for the class, or an electronic blackboard used for the class.

かかる授業支援システムによれば、筆記用ボード又は電子黒板は書き消し可能であるため、表示させた単語や関連情報について教員が筆記用ボード又は電子黒板上で書き込みをすることができる。 According to such a class support system, the writing board or the electronic blackboard can be erased, so that the teacher can write the displayed word and related information on the writing board or the electronic blackboard.

第１の特徴に係る授業支援システムにおいて、前記関連情報取得部は、前記関連情報に関連する関連語及び関連画像のうち少なくとも１つを含む派生関連情報をさらに取得する。前記関連情報提示処理部は、前記関連情報取得部により取得された前記関連情報及び前記派生関連情報を前記生徒に提示する処理を行う。 In the lesson support system according to the first feature, the related information acquisition unit further acquires derivative related information including at least one of related words and related images related to the related information. The related information presentation processing unit performs a process of presenting the related information and the derived related information acquired by the related information acquisition unit to the student.

かかる授業支援システムによれば、抽出された単語の関連情報に関連する派生関連情報も提示することにより、１つの単語をもとに、授業に有用な様々な情報を提示できる。 According to such a lesson support system, various information useful for lessons can be presented based on one word by presenting derived related information related to extracted word related information.

第１の特徴に係る授業支援システムは、前記単語抽出部により抽出された複数の単語を含む単語グループを生成する単語グループ生成部と、前記単語グループ生成部により生成された前記単語グループを前記生徒に提示する処理を行う単語グループ提示処理部と、前記単語グループ提示処理部により提示された前記単語グループ中の特定の単語が前記教員により選択された場合に、前記特定の単語を前記単語グループとは別に前記生徒に提示する処理を行う単語提示処理部と、をさらに備える。 A class support system according to a first feature includes: a word group generation unit that generates a word group including a plurality of words extracted by the word extraction unit; and the word group generated by the word group generation unit as the student. A word group presentation processing unit that performs a process of presenting to the word group, and when a specific word in the word group presented by the word group presentation processing unit is selected by the teacher, the specific word as the word group And a word presentation processing unit for performing processing to present to the student.

かかる授業支援システムによれば、音声中の各単語から単語グループを表示し、単語グループ中の特定の単語が選択された場合にその単語を単語グループとは別に提示するため、教員は、板書を行うことなく特定の単語を生徒に提示できる。特に、特定の単語を筆記用ボード上に表示する場合には、教員は、特定の単語に対する解説等を筆記用ボード上に加筆できる。 According to such a class support system, a teacher displays a word group from each word in the voice and presents the word separately from the word group when a specific word in the word group is selected. Present specific words to students without doing it. In particular, when a specific word is displayed on the writing board, the teacher can add a comment or the like for the specific word on the writing board.

第１の特徴に係る授業支援システムにおいて、前記関連情報提示処理部は、前記単語提示処理部により提示された前記特定の単語が前記教員により選択された場合に、前記特定の単語に対応する前記関連情報を前記生徒に提示する処理を行う。 In the lesson support system according to the first feature, the related information presentation processing unit corresponds to the specific word when the specific word presented by the word presentation processing unit is selected by the teacher. A process of presenting relevant information to the student is performed.

かかる授業支援システムによれば、教員が所望のタイミングで関連情報を提示できる。 According to such a class support system, a teacher can present related information at a desired timing.

第１の特徴に係る授業支援システムにおいて、前記単語グループ生成部は、前記単語抽出部により抽出された単語を新しい順に所定数選出して前記単語グループを生成する。 In the lesson support system according to the first feature, the word group generation unit generates a word group by selecting a predetermined number of words extracted by the word extraction unit in order from the newest.

かかる授業支援システムによれば、教員が発した音声中の単語が新しい順に選出して単語グループが生成されるため、授業中における直近の単語を教員が選択しやすくすることができる。 According to such a lesson support system, since the words in the voice uttered by the teacher are selected in order from the newest word group, the teacher can easily select the most recent word in the lesson.

第１の特徴に係る授業支援システムにおいて、前記単語グループ生成部は、前記単語抽出部により抽出された単語を少なくとも出現頻度に基づいて重み付けし、重みの大きい順に所定数の単語を選出して前記単語グループを生成する。 In the lesson support system according to the first feature, the word group generation unit weights the words extracted by the word extraction unit based on at least the appearance frequency, selects a predetermined number of words in descending order of weight, and Generate word groups.

かかる授業支援システムによれば、抽出された単語を少なくとも出現頻度に基づいて重み付けし、重みの大きい順に所定数の単語を選出して単語グループを生成することにより、授業中における重要度の高い単語を教員が選択しやすくすることができる。 According to such a lesson support system, the extracted words are weighted based on at least the appearance frequency, and a predetermined number of words are selected in descending order of weight to generate a word group. Can be easily selected by teachers.

第１の特徴に係る授業支援システムにおいて、前記単語グループ生成部は、前記単語抽出部により抽出された単語を少なくとも出願頻度に基づいて重み付けし、重みが閾値を超えた単語、又は前記単語提示処理部により提示された前記特定の単語を選出して前記単語グループを生成する。 In the lesson support system according to the first feature, the word group generation unit weights the words extracted by the word extraction unit based on at least the application frequency, and the word whose weight exceeds a threshold or the word presentation processing The specific word presented by the section is selected to generate the word group.

かかる授業支援システムによれば、重みが閾値を超えた単語、及び単語提示処理部により提示された特定の単語を選出して単語グループを生成することにより、授業中における重要度が非常に高い単語を残すことができる。 According to such a lesson support system, a word having a very high importance in a lesson is generated by selecting a word whose weight exceeds a threshold and a specific word presented by the word presentation processing unit and generating a word group. Can leave.

第１の特徴に係る授業支援システムは、前記音声データを変換して得られたテキストデータを取得するテキストデータ取得部と、前記教員からの操作に基づいて、前記教員から指定された期間における前記テキストデータを前記生徒に提示する処理を行うテキスト提示処理部と、をさらに備える。 A class support system according to a first feature includes a text data acquisition unit that acquires text data obtained by converting the voice data, and the period of time specified by the teacher based on an operation from the teacher A text presentation processing unit that performs processing of presenting text data to the student.

かかる授業支援システムによれば、声データを変換して得たテキストデータを、教員から指定された期間に限定して生徒に提示することにより、授業中における重要な情報のみをテキスト化して表示できるため、生徒の学習効率を向上させることができる。 According to such a class support system, text data obtained by converting voice data is presented to students only during a period designated by the teacher, so that only important information during the class can be displayed as text. Therefore, the student's learning efficiency can be improved.

第１の特徴に係る授業支援システムは、前記音声データを変換して得られたテキストデータを蓄積するテキストデータ蓄積部と、前記テキストデータ蓄積部により蓄積された前記テキストデータの中から、所定の単語に関連するテキスト区間を抽出するテキスト抽出部と、前記テキスト抽出部により抽出された前記テキスト区間を前記所定の単語の説明として含む印刷用データを生成する印刷用データ生成部と、をさらに備える。 A class support system according to a first feature includes: a text data storage unit that stores text data obtained by converting the voice data; and a predetermined data among the text data stored by the text data storage unit. A text extraction unit that extracts a text section related to a word; and a print data generation unit that generates print data including the text section extracted by the text extraction unit as an explanation of the predetermined word. .

かかる授業支援システムによれば、テキスト抽出部により抽出されたテキスト区間を所定の単語の説明として含む印刷用データを生成することにより、授業の結果を、授業のまとめプリント、テスト、又は教材等のような形式で活用できる。 According to such a lesson support system, by generating print data including the text section extracted by the text extraction unit as an explanation of a predetermined word, the lesson result can be obtained as a lesson summary print, test, teaching material, etc. It can be used in such a form.

第１の特徴に係る授業支援システムは、前記生徒に対する提示を禁止する単語からなるリストを保持するリスト保持部と、前記単語抽出部により抽出された単語が前記リスト中の単語に合致する場合に、当該単語を前記生徒への提示対象から除外する提示除外部と、をさらに備える。 The lesson support system according to the first feature includes a list holding unit that holds a list of words prohibited from being presented to the student, and a case where the words extracted by the word extracting unit match words in the list And a presentation exclusion unit that excludes the word from the subject to be presented to the student.

かかる授業支援システムによれば、教育的に相応しくない単語等を生徒に提示しないように制御できる。 According to such a lesson support system, it is possible to control so that words that are not educationally appropriate are not presented to the students.

第２の特徴に係る情報処理装置は、教員により行われる授業を支援する授業支援システムに用いる情報処理装置であって、前記授業中における授業参加者の音声を集音して得られた音声データ又は前記音声データを変換して得られたテキストデータから単語を抽出する単語抽出部と、前記単語抽出部により抽出された前記単語に関連する関連語及び関連画像の少なくとも一方を含む関連情報をデータベースから取得する関連情報取得部と、前記単語抽出部により抽出された前記単語及び前記関連情報取得部により取得された前記関連情報を生徒に提示する処理を行う関連情報提示処理部と、を備えることを要旨とする。 The information processing apparatus according to the second feature is an information processing apparatus used in a class support system that supports classes conducted by a teacher, and is voice data obtained by collecting voices of class participants during the class Alternatively, a database that stores at least one of a word extraction unit that extracts a word from text data obtained by converting the voice data, and a related word and a related image that are extracted by the word extraction unit. A related information acquisition unit that acquires the word extracted by the word extraction unit and the related information acquired by the related information acquisition unit to a student. Is the gist.

なお、情報処理装置は、サーバ装置であってもよいし、端末装置であってもよい。 Note that the information processing apparatus may be a server apparatus or a terminal apparatus.

第３の特徴に係る授業支援方法は、教員により行われる授業を支援する授業支援方法であって、前記授業中における授業参加者の音声を集音して得られた音声データ又は前記音声データを変換して得られたテキストデータから単語を抽出する単語抽出ステップと、前記単語抽出ステップにより抽出された前記単語に関連する関連語及び関連画像の少なくとも一方を含む関連情報をデータベースから取得する関連情報取得ステップと、前記単語抽出ステップにより抽出された前記単語及び前記関連情報取得ステップにより取得された前記関連情報を生徒に提示する処理を行う関連情報提示ステップと、を備えることを要旨とする。 A class support method according to a third feature is a class support method for supporting a class conducted by a teacher, wherein voice data obtained by collecting voices of class participants during the class or the voice data Related information for acquiring, from a database, related information including at least one of a word extraction step for extracting a word from text data obtained by conversion and a related word and a related image related to the word extracted by the word extraction step The gist includes an acquisition step, and a related information presentation step for performing processing of presenting the word extracted in the word extraction step and the related information acquired in the related information acquisition step to a student.

第４の特徴に係るプログラムは、教員により行われる授業を支援する授業支援システムに用いるプログラムであって、情報処理装置に、前記授業中における授業参加者の音声を集音して得られた音声データ又は前記音声データを変換して得られたテキストデータから単語を抽出する単語抽出ステップと、前記単語抽出ステップにより抽出された前記単語に関連する関連語及び関連画像の少なくとも一方を含む関連情報をデータベースから取得する関連情報取得ステップと、前記単語抽出ステップにより抽出された前記単語及び前記関連情報取得ステップにより取得された前記関連情報を生徒に提示する処理を行う関連情報提示ステップと、を実行させることを要旨とする。 The program according to the fourth feature is a program used in a class support system that supports classes conducted by a teacher, and is obtained by collecting voices of class participants during the class on an information processing apparatus. A word extraction step for extracting a word from data or text data obtained by converting the voice data, and related information including at least one of a related word and a related image related to the word extracted by the word extraction step. A related information acquiring step acquired from a database; and a related information presenting step for performing processing for presenting the word extracted in the word extracting step and the related information acquired in the related information acquiring step to a student. This is the gist.

本発明によれば、教員の負担軽減を実現しつつ、生徒の学習効率を向上させることが可能な授業支援システム、情報処理装置、授業支援方法、及びプログラムを提供できる。 ADVANTAGE OF THE INVENTION According to this invention, the lesson support system, information processing apparatus, lesson support method, and program which can improve a student's learning efficiency, implement | achieving the burden reduction of a teacher can be provided.

実施形態に係る授業支援システムの構成を示す図である。It is a figure which shows the structure of the lesson support system which concerns on embodiment. 実施形態に係る授業支援サーバの構成を示す図である。It is a figure which shows the structure of the lesson support server which concerns on embodiment. 実施形態に係る授業支援システムにおける動作シーケンスの一例を示すシーケンス図である（その１）。It is a sequence diagram which shows an example of the operation | movement sequence in the lesson support system which concerns on embodiment (the 1). 実施形態に係る授業支援システムにおける動作シーケンスの一例を示すシーケンス図である（その２）。It is a sequence diagram which shows an example of the operation | movement sequence in the lesson assistance system which concerns on embodiment (the 2). 単語グループから特定の単語が選択された場合の表示画面例を示す図である。It is a figure which shows the example of a display screen when a specific word is selected from a word group. テキストボックス追加ボタンが選択された場合の画面表示例を示す図である。It is a figure which shows the example of a screen display when a text box addition button is selected. 単語グループ３用の表示切替ボタンが選択された場合の画面表示例を示す図である。It is a figure which shows the example of a screen display when the display switch button for word groups 3 is selected. 板書用表示領域中の特定の単語（葉緑体）が選択された場合の画面表示例を示す図である。It is a figure which shows the example of a screen display when the specific word (chloroplast) in the display area for board writings is selected. 図８に示す画面において関連語Ｗが選択された場合の画面表示例を示す図である。It is a figure which shows the example of a screen display when the related word W is selected on the screen shown in FIG. 印刷用データを生成する際の画面表示例を示す図である。It is a figure which shows the example of a screen display at the time of producing | generating the data for printing.

一実施形態に係る授業支援システムについて図面を参照しながら説明する。以下の図面の記載において、同一又は類似の部分には、同一又は類似の符号を付している。 A lesson support system according to an embodiment will be described with reference to the drawings. In the following description of the drawings, the same or similar parts are denoted by the same or similar reference numerals.

＜１．授業支援システムの構成＞
本実施形態に係る授業支援システム１の構成について説明する。図１は、本実施形態に係る授業支援システム１の構成を示す図である。 <1. Structure of lesson support system>
A configuration of the lesson support system 1 according to the present embodiment will be described. FIG. 1 is a diagram illustrating a configuration of a lesson support system 1 according to the present embodiment.

図１に示すように、授業支援システム１は、端末装置１００と、表示装置２００と、音声認識サーバ３００と、授業支援サーバ４００と、関連情報データベース５００とを備える。端末装置１００、音声認識サーバ３００、授業支援サーバ４００、及び関連情報データベース５００は、通信ネットワーク１０を介して互いに通信を行う。端末装置１００及び表示装置２００は、授業が行われる教室内に存在する。端末装置１００及び表示装置２００は、有線又は無線により互いに接続される。 As shown in FIG. 1, the class support system 1 includes a terminal device 100, a display device 200, a voice recognition server 300, a class support server 400, and a related information database 500. The terminal device 100, the voice recognition server 300, the class support server 400, and the related information database 500 communicate with each other via the communication network 10. The terminal device 100 and the display device 200 exist in a classroom where classes are held. The terminal device 100 and the display device 200 are connected to each other by wire or wireless.

端末装置１００は、ユーザインターフェイスを提供する装置である。端末装置１００は、例えば、ノートＰＣ、デスクトップＰＣ、タブレット端末、又はスマートフォン等である。端末装置１００は、操作入力を受け付ける操作部１０１と、映像を表示する表示部１０２と、音声を集音するマイク１０３とを有する。本実施形態において、操作部１０１は授業中において教員からの操作入力を受け付け、マイク１０３は授業中における教員の音声を集音する。なお、マイク１０３は、端末装置１００とは別に設けられ、端末装置１００と無線又は有線で接続されていてもよい。 The terminal device 100 is a device that provides a user interface. The terminal device 100 is, for example, a notebook PC, a desktop PC, a tablet terminal, or a smartphone. The terminal device 100 includes an operation unit 101 that receives an operation input, a display unit 102 that displays an image, and a microphone 103 that collects sound. In the present embodiment, the operation unit 101 receives an operation input from a teacher during a class, and the microphone 103 collects the voice of the teacher during the class. Note that the microphone 103 may be provided separately from the terminal device 100 and may be connected to the terminal device 100 wirelessly or by wire.

端末装置１００は、音声認識サーバ３００との通信を行って、マイク１０３により得られた音声データをテキストデータに変換し、変換して得られたテキストデータを授業支援サーバ４００に送信する。また、端末装置１００は、教員による操作内容を示す操作情報を授業支援サーバ４００に送信する。さらに、端末装置１００は、授業支援サーバ４００から映像データを取得し、取得した映像データを表示装置２００に出力するとともに、取得した映像データに基づく映像を表示部１０２に表示させる。 The terminal device 100 communicates with the voice recognition server 300, converts voice data obtained by the microphone 103 into text data, and transmits the text data obtained by the conversion to the class support server 400. Further, the terminal device 100 transmits operation information indicating the operation content of the teacher to the lesson support server 400. Furthermore, the terminal device 100 acquires video data from the class support server 400, outputs the acquired video data to the display device 200, and causes the display unit 102 to display a video based on the acquired video data.

表示装置２００は、端末装置１００から入力される映像データに基づいて映像を表示する装置である。表示装置２００は、授業に用いる筆記用ボードに対して投影するプロジェクタ装置、又は、授業に用いる電子黒板である。筆記用ボードは、黒板又はホワイトボードである。電子黒板は、大型のタッチパネルを用いて構成され、ペン入力に対応した表示装置である。 The display device 200 is a device that displays video based on video data input from the terminal device 100. The display device 200 is a projector device that projects onto a writing board used in a class, or an electronic blackboard used in a class. The writing board is a blackboard or a white board. The electronic blackboard is a display device that is configured using a large touch panel and supports pen input.

音声認識サーバ３００は、音声認識を行うサーバ装置である。音声認識サーバ３００は、端末装置１００から音声データを受信し、音声認識により音声データをテキストデータに変換し、テキストデータを端末装置１００に送信する。 The speech recognition server 300 is a server device that performs speech recognition. The voice recognition server 300 receives voice data from the terminal device 100, converts the voice data into text data by voice recognition, and transmits the text data to the terminal device 100.

但し、音声認識サーバ３００の機能（音声認識機能）が端末装置１００又は授業支援サーバ４００に含まれていてもよい。かかる場合、音声認識サーバ３００は不要である。 However, the function (voice recognition function) of the voice recognition server 300 may be included in the terminal device 100 or the class support server 400. In such a case, the voice recognition server 300 is not necessary.

授業支援サーバ４００は、授業を支援するためのサーバ装置である。授業支援サーバ４００は、テキストデータ及び操作情報を端末装置１００から受信する。授業支援サーバ４００は、受信したテキストデータ及び操作情報に基づいて、端末装置１００及び表示装置２００に表示させる映像データを生成し、生成した映像データを端末装置１００に送信する。 The class support server 400 is a server device for supporting classes. The class support server 400 receives text data and operation information from the terminal device 100. The class support server 400 generates video data to be displayed on the terminal device 100 and the display device 200 based on the received text data and operation information, and transmits the generated video data to the terminal device 100.

また、授業支援サーバ４００は、受信したテキストデータから単語を抽出し、操作情報に基づいて、この単語に関連する関連情報を関連情報データベース５００から取得する。関連情報は、単語に関連する関連語及び関連画像の少なくとも一方を含む。関連語は、ある単語に関連する別の単語である。関連画像は、ある単語に関連する静止画像であるが、動画像であってもよい。また、１つの単語に複数の関連語が対応付けられていてもよいし、１つの単語に複数の関連画像が関連付けられていてもよい。授業支援サーバ４００は、関連情報データベース５００から取得した関連情報を端末装置１００に送信し、関連情報を端末装置１００に表示させる。 The class support server 400 extracts a word from the received text data, and acquires related information related to the word from the related information database 500 based on the operation information. The related information includes at least one of related words and related images related to the word. A related word is another word related to a certain word. The related image is a still image related to a certain word, but may be a moving image. A plurality of related words may be associated with one word, or a plurality of related images may be associated with one word. The class support server 400 transmits the related information acquired from the related information database 500 to the terminal device 100 and causes the terminal device 100 to display the related information.

関連情報データベース５００は、単語ごとに、その単語に関連する関連語及び関連画像を記憶するデータベースである。関連語を記憶するデータベースと関連画像を記憶するデータベースとが別々に設けられてもよい。関連情報データベース５００は、授業支援サーバ４００から単語を受信し、受信した単語に対応付けられた関連情報を読み出し、読み出した関連情報を授業支援サーバ４００に送信する。 The related information database 500 is a database that stores, for each word, related words and related images related to the word. A database for storing related words and a database for storing related images may be provided separately. The related information database 500 receives words from the class support server 400, reads related information associated with the received words, and transmits the read related information to the class support server 400.

なお、本実施形態においては、関連情報データベース５００が授業支援サーバ４００とは別に設けられる一例を説明するが、関連情報データベース５００が授業支援サーバ４００に組み込まれていてもよい。 In this embodiment, an example in which the related information database 500 is provided separately from the class support server 400 will be described. However, the related information database 500 may be incorporated in the class support server 400.

＜２．授業支援サーバの構成＞
本実施形態に係る授業支援サーバ４００の構成について説明する。図２は、本実施形態に係る授業支援サーバ４００の構成を示す図である。なお、授業支援サーバ４００の各機能ブロックは、物理的に離間して設けられた複数のサーバに分散して設けられてもよい。すなわち、授業支援サーバ４００は、複数のサーバを含むサーバシステムとみなすことできる。 <2. Structure of class support server>
A configuration of the class support server 400 according to the present embodiment will be described. FIG. 2 is a diagram showing the configuration of the lesson support server 400 according to the present embodiment. In addition, each functional block of the lesson support server 400 may be distributed and provided in a plurality of servers that are physically separated. That is, the class support server 400 can be regarded as a server system including a plurality of servers.

図２に示すように、授業支援サーバ４００は、通信部４１０と、記憶部４２０と、制御部４３０とを備える。通信部４１０は、通信ネットワーク１０を介して端末装置１００及び関連情報データベース５００との通信を行う。記憶部４２０は、ＲＡＭ、ＲＯＭ、及び補助記憶装置を含んで構成され、各種の情報及びデータを記憶する。制御部４３０は、ＣＰＵを含んで構成され、授業支援サーバ４００の動作を制御する。 As shown in FIG. 2, the class support server 400 includes a communication unit 410, a storage unit 420, and a control unit 430. The communication unit 410 communicates with the terminal device 100 and the related information database 500 via the communication network 10. The storage unit 420 includes a RAM, a ROM, and an auxiliary storage device, and stores various types of information and data. The control unit 430 includes a CPU and controls the operation of the class support server 400.

制御部４３０は、テキストデータ取得部４３１と、単語抽出部４３２と、提示除外部４３３と、単語グループ生成部４３４と、単語グループ提示処理部４３５と、単語提示処理部４３６と、関連情報取得部４３７と、関連情報提示処理部４３８と、テキスト提示処理部４３９と、テキスト抽出部４４０と、印刷用データ生成部４４１とを備える。 The control unit 430 includes a text data acquisition unit 431, a word extraction unit 432, a presentation exclusion unit 433, a word group generation unit 434, a word group presentation processing unit 435, a word presentation processing unit 436, and a related information acquisition unit. 437, a related information presentation processing unit 438, a text presentation processing unit 439, a text extraction unit 440, and a print data generation unit 441.

テキストデータ取得部４３１は、通信部４１０を介して、端末装置１００から送信されたテキストデータを取得し、取得したテキストデータを単語抽出部４３２に提供するとともに、取得したテキストデータを記憶部４２０のテキストデータ蓄積部４２１に蓄積させる。 The text data acquisition unit 431 acquires the text data transmitted from the terminal device 100 via the communication unit 410, provides the acquired text data to the word extraction unit 432, and stores the acquired text data in the storage unit 420. The data is stored in the text data storage unit 421.

単語抽出部４３２は、テキストデータ取得部４３１により取得されたテキストデータに対して形態素解析等を行うことにより、このテキストデータから単語（キーワード）を抽出し、抽出した単語を提示除外部４３３に提供する。抽出される単語には、連語が含まれていてもよい。連語とは、複数の単語からなるが、まとまった形で単語と同様に用いられる言語表現をいう。また、抽出される単語には、記号が含まれていてもよい。 The word extraction unit 432 extracts a word (keyword) from the text data by performing morphological analysis on the text data acquired by the text data acquisition unit 431, and provides the extracted word to the presentation exclusion unit 433. To do. The extracted word may include a collocation. A collocation is a linguistic expression that consists of a plurality of words but is used in the same way as words. The extracted word may include a symbol.

提示除外部４３３は、単語抽出部４３２により抽出された単語が、記憶部４２０のリスト保持部４２２が保持するリスト中の単語に合致する場合に、当該単語を生徒への提示対象から除外する。「合致する場合」とは、完全一致だけではなく、実質的に一致する場合も含む概念である。なお、リスト保持部４２２は、生徒に対する提示を禁止する単語（すなわち、教育的に相応しくない単語）からなるリストを予め保持している。提示除外部４３３は、単語抽出部４３２により抽出された単語が、リスト保持部４２２が保持するリスト中の単語に合致しない場合に、単語抽出部４３２により抽出された単語を単語グループ生成部４３４に提供する。 When the word extracted by the word extraction unit 432 matches the word in the list held by the list holding unit 422 of the storage unit 420, the presentation exclusion unit 433 excludes the word from the subject to be presented to the student. The “matching” is a concept that includes not only perfect matching but also substantial matching. The list holding unit 422 holds in advance a list of words that are prohibited from being presented to the students (that is, words that are not educationally appropriate). When the word extracted by the word extraction unit 432 does not match the word in the list held by the list holding unit 422, the presentation exclusion unit 433 sends the word extracted by the word extraction unit 432 to the word group generation unit 434. provide.

単語グループ生成部４３４は、単語抽出部４３２により抽出された複数の単語を含む単語グループを生成し、生成した単語グループを単語グループ提示処理部４３５に提供する。単語グループ生成部４３４は、単語抽出部４３２により単語が抽出されるたびに単語グループを更新する。 The word group generation unit 434 generates a word group including a plurality of words extracted by the word extraction unit 432, and provides the generated word group to the word group presentation processing unit 435. The word group generation unit 434 updates the word group every time a word is extracted by the word extraction unit 432.

本実施形態において、単語グループ生成部４３４は、下記の１）〜３）のそれぞれの方法で単語グループを生成する。 In the present embodiment, the word group generation unit 434 generates word groups by the following methods 1) to 3).

１）単語グループ生成部４３４は、単語抽出部４３２により抽出された単語を新しい順に所定数選出して単語グループ１を生成する。すなわち、教員が発した音声中の単語が新しい順に選出して単語グループが生成される。 1) The word group generation unit 434 generates a word group 1 by selecting a predetermined number of words extracted by the word extraction unit 432 in order from the newest. That is, a word group is generated by selecting the words in the speech uttered by the teacher in order from the newest.

２）単語グループ生成部４３４は、単語抽出部４３２により抽出された単語を少なくとも出現頻度に基づいて重み付けし、重みの大きい順に所定数の単語を選出して単語グループ２を生成する。重み付けには、単語の出現頻度に加えて、外部のデータベースを参照して得られる単語の重要度を用いてもよい。 2) The word group generation unit 434 generates a word group 2 by weighting the words extracted by the word extraction unit 432 based on at least the appearance frequency, and selecting a predetermined number of words in descending order of weight. For weighting, in addition to the appearance frequency of words, the importance of words obtained by referring to an external database may be used.

３）単語グループ生成部４３４は、単語抽出部４３２により抽出された単語を少なくとも出願頻度に基づいて重み付けし、重みが閾値を超えた単語、又は単語提示処理部４３６により提示された特定の単語を選出して単語グループ３を生成する。単語提示処理部４３６により提示された特定の単語とは、単語グループ１又は単語グループ２の中から教員により選択された単語である。単語グループ３は、授業中における重要度が非常に高い単語からなる。 3) The word group generation unit 434 weights the words extracted by the word extraction unit 432 based on at least the application frequency, and selects a word whose weight exceeds a threshold value or a specific word presented by the word presentation processing unit 436. A word group 3 is generated by selection. The specific word presented by the word presentation processing unit 436 is a word selected by the teacher from the word group 1 or the word group 2. The word group 3 is composed of words that are very important during the class.

単語グループ提示処理部４３５は、単語グループ生成部４３４により生成された単語グループ１〜３を生徒に提示する処理を行う。本実施形態において、単語グループ提示処理部４３５は、単語グループ１〜３のうち教員により選択された単語グループをリスト状に表示させる処理を行う。 The word group presentation processing unit 435 performs processing for presenting the word groups 1 to 3 generated by the word group generation unit 434 to the students. In this embodiment, the word group presentation process part 435 performs the process which displays the word group selected by the teacher among the word groups 1-3 in a list form.

単語提示処理部４３６は、単語グループ提示処理部４３５により提示された単語グループ中の特定の単語が教員により選択された場合に、この特定の単語を単語グループとは別に生徒に提示する処理を行う。具体的には、表示装置２００（及び端末装置１００の表示部１０２）の表示領域には、いずれかの単語グループが表示される単語表示領域と、この単語表示領域とは別の板書領域とが含まれる。例えば、単語提示処理部４３６は、単語表示領域中の特定の単語を、ドラッグ操作に応じて板書領域にコピーする。板書領域にコピーされた特定の単語は、授業中において教員により板書と共に解説（説明）がなされることになる。 When a specific word in the word group presented by the word group presentation processing unit 435 is selected by the teacher, the word presentation processing unit 436 performs processing for presenting the specific word to the student separately from the word group. . Specifically, the display area of the display device 200 (and the display unit 102 of the terminal device 100) includes a word display area in which any word group is displayed and a board writing area different from the word display area. included. For example, the word presentation processing unit 436 copies a specific word in the word display area to the board writing area according to the drag operation. The specific words copied to the board writing area are explained (explained) together with the board writing by the teacher during the lesson.

関連情報取得部４３７は、単語提示処理部４３６により提示された特定の単語（すなわち、板書用表示領域にコピーされた単語）が教員により選択された場合に、この特定の単語に関連する関連語及び関連画像の少なくとも一方を含む関連情報を関連情報データベース５００から取得し、取得した関連情報を関連情報提示処理部４３８に提供する。例えば、関連情報取得部４３７は、板書用表示領域にコピーされた単語に対するタップ操作又はクリック操作に応じて、この単語の関連情報を関連情報データベース５００から取得する。 When the teacher selects a specific word presented by the word presentation processing unit 436 (that is, a word copied to the display area for board writing), the related information acquisition unit 437 is related to the specific word. And related information including at least one of the related images is acquired from the related information database 500, and the acquired related information is provided to the related information presentation processing unit 438. For example, the related information acquisition unit 437 acquires the related information of this word from the related information database 500 in response to a tap operation or a click operation on the word copied to the display area for board writing.

関連情報提示処理部４３８は、単語提示処理部４３６により提示された特定の単語（すなわち、板書用表示領域にコピーされた単語）と共に、この特定の単語の関連情報（関連語及び関連画像）を生徒に提示する処理を行う。具体的には、関連情報提示処理部４３８は、特定の単語に対してその関連情報を対応付けて表示させる処理を行う。関連情報提示処理部４３８は、特定の単語の関連情報に複数の関連語が含まれる場合に、各関連語を特定の単語に対応付けて表示させる処理を行う。 The related information presentation processing unit 438 displays the specific information presented by the word presentation processing unit 436 (that is, the word copied to the display area for board writing) and related information (related words and related images) of the specific word. Process to present to students. Specifically, the related information presentation processing unit 438 performs a process of displaying the related information in association with a specific word. The related information presentation processing unit 438 performs a process of displaying each related word in association with the specific word when the related information of the specific word includes a plurality of related words.

表示された関連情報が選択（タップ操作又はクリック操作）された場合、関連情報取得部４３７は、選択された関連情報に関連する関連語及び関連画像のうち少なくとも１つを含む派生関連情報を関連情報データベース５００から取得する。かかる場合、関連情報提示処理部４３８は、関連情報取得部４３７により取得された派生関連情報を関連情報と対応付けて表示させる処理を行う。 When the displayed related information is selected (tap operation or click operation), the related information acquisition unit 437 relates the derived related information including at least one of related words and related images related to the selected related information. Obtained from the information database 500. In this case, the related information presentation processing unit 438 performs processing for displaying the derived related information acquired by the related information acquisition unit 437 in association with the related information.

テキスト提示処理部４３９は、教員からの操作に基づいて、テキストデータ取得部４３１により取得されたテキストデータのうち、教員から指定された期間におけるテキストデータを生徒に提示する処理を行う。例えば、テキスト提示処理部４３９は、教員からの開始操作に応じて、この開始操作のタイミング以降のテキストデータを板書用表示領域に表示させる処理を行う。また、テキスト提示処理部４３９は、教員からの終了操作に応じて、この終了操作のタイミング以降のテキストデータを板書用表示領域に表示させないよう処理する。なお、テキスト提示処理部４３９は、授業支援サーバ４００ではなく端末装置１００に設けてもよい。 The text presentation processing unit 439 performs processing for presenting text data in a period designated by the teacher to the student among the text data acquired by the text data acquisition unit 431 based on an operation from the teacher. For example, the text presentation processing unit 439 performs processing for displaying text data after the timing of the start operation in the display area for board writing in response to the start operation from the teacher. Further, the text presentation processing unit 439 performs processing so that text data after the timing of the end operation is not displayed in the display area for the board writing in accordance with the end operation from the teacher. Note that the text presentation processing unit 439 may be provided in the terminal device 100 instead of the lesson support server 400.

以上の授業支援サーバ４００の各動作は、授業中において行われる。一方、テキスト抽出部４４０及び印刷用データ生成部４４１の各動作は、主として授業終了後において行われる。 Each operation of the class support server 400 described above is performed during a class. On the other hand, the operations of the text extraction unit 440 and the print data generation unit 441 are mainly performed after the class ends.

テキスト抽出部４４０は、テキストデータ蓄積部４２１により蓄積されたテキストデータの中から、所定の単語に関連するテキスト区間を抽出する。例えば、所定の単語は、上述した単語グループ３に含まれる単語である。所定の単語に関連するテキスト区間とは、例えば、この所定の単語を含む句（すなわち、この所定の単語を含む文であって句点（。）までの区間）をいう。 The text extraction unit 440 extracts a text section related to a predetermined word from the text data stored by the text data storage unit 421. For example, the predetermined word is a word included in the word group 3 described above. The text section related to a predetermined word refers to, for example, a phrase including the predetermined word (that is, a section including the predetermined word up to a punctuation point (.)).

印刷用データ生成部４４１は、テキスト抽出部４４０により抽出されたテキスト区間を所定の単語の説明として含む印刷用データを生成する。印刷用データとは、授業のまとめプリント、テスト、又は教材等のような形式のデータである。印刷用データは、図示を省略する印刷装置により紙に印刷されてもよいし、通信ネットワーク１０を介して生徒の端末に送信されてもよい。 The print data generation unit 441 generates print data that includes the text section extracted by the text extraction unit 440 as an explanation of a predetermined word. The data for printing is data in a format such as a class summary print, a test, or a teaching material. The printing data may be printed on paper by a printing device (not shown) or may be transmitted to the student's terminal via the communication network 10.

＜３．授業支援システムにおける動作シーケンスの一例＞
本実施形態に係る授業支援システム１における動作シーケンスの一例について説明する。図３及び図４は、授業支援システム１における動作シーケンスの一例を示すシーケンス図である。 <3. Example of action sequence in lesson support system>
An example of an operation sequence in the lesson support system 1 according to the present embodiment will be described. 3 and 4 are sequence diagrams illustrating an example of an operation sequence in the lesson support system 1.

図３に示すように、ステップＳ１０１において、授業支援サーバ４００は、授業支援システム１における初期画面用の映像データを端末装置１００に送信する。端末装置１００は、授業支援サーバ４００からの映像データに基づいて初期画面を表示するとともに、この映像データを表示装置２００に出力する（ステップＳ１０２）。表示装置２００は、端末装置１００からの映像データに基づいて初期画面を表示する。 As shown in FIG. 3, in step S 101, the class support server 400 transmits video data for an initial screen in the class support system 1 to the terminal device 100. The terminal device 100 displays an initial screen based on the video data from the class support server 400 and outputs this video data to the display device 200 (step S102). The display device 200 displays an initial screen based on the video data from the terminal device 100.

ステップＳ１０３において、端末装置１００は、授業中における教員からの音声入力を受け付け、音声データを生成する。 In step S103, the terminal device 100 receives voice input from a teacher during a lesson and generates voice data.

ステップＳ１０４において、端末装置１００は、生成した音声データを音声認識サーバ３００に送信する。音声認識サーバ３００は、端末装置１００からの音声データをテキストデータに変換し、このテキストデータを端末装置１００に送信する（ステップＳ１０５）。 In step S 104, the terminal device 100 transmits the generated voice data to the voice recognition server 300. The voice recognition server 300 converts voice data from the terminal device 100 into text data, and transmits this text data to the terminal device 100 (step S105).

ステップＳ１０６において、端末装置１００は、音声認識サーバ３００からのテキストデータを授業支援サーバ４００に送信する。端末装置１００は、音声認識サーバ３００からのテキストデータに基づくテキストを表示画面の一部において表示してもよい。 In step S 106, the terminal device 100 transmits text data from the voice recognition server 300 to the class support server 400. The terminal device 100 may display text based on text data from the voice recognition server 300 on a part of the display screen.

ステップＳ１０７において、授業支援サーバ４００は、端末装置１００からのテキストデータに含まれる単語を抽出すると共に、端末装置１００からのテキストデータを蓄積する。 In step S 107, the lesson support server 400 extracts words included in the text data from the terminal device 100 and accumulates the text data from the terminal device 100.

ステップＳ１０８において、授業支援サーバ４００は、ステップＳ１０７においてテキストデータから抽出した単語に基づいて単語グループを生成（又は更新）し、単語グループを含む映像データを端末装置１００に送信する（ステップＳ１０９）。端末装置１００は、授業支援サーバ４００からの映像データに基づいて単語グループを含む画面を表示するとともに、この映像データを表示装置２００に出力する（ステップＳ１１０）。表示装置２００は、端末装置１００からの映像データに基づいて単語グループを含む画面を表示する。単語グループは、表示画面中の単語表示領域に表示される。 In step S108, the class support server 400 generates (or updates) a word group based on the word extracted from the text data in step S107, and transmits video data including the word group to the terminal device 100 (step S109). The terminal device 100 displays a screen including a word group based on the video data from the class support server 400 and outputs this video data to the display device 200 (step S110). The display device 200 displays a screen including a word group based on the video data from the terminal device 100. The word group is displayed in the word display area in the display screen.

図４に示すように、ステップＳ１１１において、端末装置１００は、単語グループ中の特定の単語を選択する操作（例えばドラッグ操作）を教員から受け付ける。端末装置１００は、かかる操作を示す操作情報を授業支援サーバ４００に送信する（ステップＳ１１２）。授業支援サーバ４００は、この操作情報に基づいて、単語表示領域の中から選択された特定の単語を板書用表示領域に移動させる映像データを端末装置１００に送信する（ステップＳ１１３）。端末装置１００は、授業支援サーバ４００からの映像データに基づく画面を表示するとともに、この映像データを表示装置２００に出力する（ステップＳ１１４）。表示装置２００は、端末装置１００からの映像データに基づく画面を表示する。その結果、かかる特定の単語は板書用表示領域に移動する。 As illustrated in FIG. 4, in step S 111, the terminal device 100 receives an operation (for example, a drag operation) for selecting a specific word in a word group from a teacher. The terminal device 100 transmits operation information indicating such an operation to the lesson support server 400 (step S112). Based on this operation information, the class support server 400 transmits video data for moving a specific word selected from the word display area to the board writing display area to the terminal device 100 (step S113). The terminal device 100 displays a screen based on the video data from the class support server 400 and outputs the video data to the display device 200 (step S114). The display device 200 displays a screen based on the video data from the terminal device 100. As a result, the specific word moves to the board writing display area.

ステップＳ１１５において、端末装置１００は、板書用表示領域中の特定の単語を選択する操作（例えばタップ操作又はクリック操作）を教員から受け付ける。端末装置１００は、かかる操作を示す操作情報を授業支援サーバ４００に送信する（ステップＳ１１６）。 In step S 115, the terminal device 100 receives an operation (for example, a tap operation or a click operation) for selecting a specific word in the board writing display area from the teacher. The terminal device 100 transmits operation information indicating such an operation to the class support server 400 (step S116).

ステップＳ１１７において、授業支援サーバ４００は、端末装置１００からの操作情報に基づいて、特定の単語を関連情報データベース５００に送信する。関連情報データベース５００は、この特定の単語の関連情報を読み出し、読み出した関連情報を授業支援サーバ４００に送信する（ステップＳ１１８）。 In step S 117, the class support server 400 transmits a specific word to the related information database 500 based on the operation information from the terminal device 100. The related information database 500 reads the related information of the specific word, and transmits the read related information to the class support server 400 (step S118).

ステップＳ１１９において、授業支援サーバ４００は、関連情報データベース５００からの関連情報を特定の単語と対応付けて表示する映像データを生成し、生成した映像データを端末装置１００に送信する。端末装置１００は、授業支援サーバ４００からの映像データに基づいて関連情報を含む画面を表示するとともに、この映像データを表示装置２００に出力する（ステップＳ１２０）。表示装置２００は、端末装置１００からの映像データに基づいて関連情報を含む画面を表示する。 In step S 119, the class support server 400 generates video data that displays related information from the related information database 500 in association with a specific word, and transmits the generated video data to the terminal device 100. The terminal device 100 displays a screen including related information based on the video data from the class support server 400 and outputs this video data to the display device 200 (step S120). The display device 200 displays a screen including related information based on the video data from the terminal device 100.

＜４．画面表示例＞
本実施形態に係る端末装置１００及び表示装置２００における画面表示例について説明する。なお、以下の図面の記載において、白地に黒の文字が表示される一例を示しているが、プロジェクタ装置によって黒板に対して投影する場合には、白黒を反転させて黒地に白の文字が表示されるようにしてもよい。 <4. Screen display example>
A screen display example in the terminal device 100 and the display device 200 according to this embodiment will be described. In the following description of the drawings, an example is shown in which black characters are displayed on a white background, but when projecting onto a blackboard by a projector device, white characters are displayed on a black background by inverting black and white. You may be made to do.

図５は、単語グループから特定の単語が選択された場合の表示画面例を示す図である。 FIG. 5 is a diagram illustrating an example of a display screen when a specific word is selected from a word group.

図５に示す画面は、その右端部分に単語表示領域Ａ１を有する。単語表示領域Ａ１の左側の領域が板書用表示領域である。単語表示領域Ａ１には、単語グループ生成部４３４により生成された単語グループが表示される。図５の例では、単語表示領域Ａ１には、上述した単語グループ１が表示されており、上側が新しい単語であり、下側が古い単語である。新しい単語が抽出されるたびに、その単語が最も上に追加されるとともに、最も下にあった単語が削除されるように更新される。新しい単語が古い単語よりも強調されるようにグラデーションが施されていてもよい。 The screen shown in FIG. 5 has a word display area A1 at the right end portion thereof. The area on the left side of the word display area A1 is a board writing display area. In the word display area A1, the word group generated by the word group generation unit 434 is displayed. In the example of FIG. 5, the word group 1 described above is displayed in the word display area A1, and the upper side is a new word and the lower side is an old word. Each time a new word is extracted, it is updated so that it is added at the top and the word at the bottom is deleted. A gradation may be given so that a new word is emphasized more than an old word.

また、図５に示す画面は、音声入力のオン／オフボタンＢ１と、テキストボックス追加ボタンＢ２と、単語グループ１用の表示切替ボタンＢ３と、単語グループ２用の表示切替ボタンＢ４と、単語グループ３用の表示切替ボタンＢ５とを有する。端末装置１００は、音声入力のオン／オフボタンＢ１がオンである間は音声からテキストへの変換処理を行う。 The screen shown in FIG. 5 includes a voice input on / off button B1, a text box addition button B2, a display switching button B3 for word group 1, a display switching button B4 for word group 2, and a word group. 3 display switching button B5. The terminal device 100 performs a voice-to-text conversion process while the voice input on / off button B1 is on.

テキストボックス追加ボタンＢ２が選択されると、授業支援サーバ４００（又は端末装置１００）のテキスト提示処理部４３９は、板書用表示領域にテキストボックスを表示する。図６は、テキストボックス追加ボタンＢ２が選択された場合の画面表示例を示す図である。図６に示すように、テキスト提示処理部４３９は、テキストボックス追加ボタンＢ２が選択されると、そのタイミング以降のテキストデータをテキストボックスＴに表示させる処理を行う。テキストボックス追加ボタンＢ２が再び選択されると、そのタイミング以降のテキストデータをテキストボックスＴに表示させない。 When the text box addition button B2 is selected, the text presentation processing unit 439 of the lesson support server 400 (or the terminal device 100) displays a text box in the display area for board writing. FIG. 6 is a diagram showing a screen display example when the text box addition button B2 is selected. As shown in FIG. 6, when the text box addition button B2 is selected, the text presentation processing unit 439 performs processing for displaying text data after that timing in the text box T. When the text box addition button B2 is selected again, the text data after that timing is not displayed in the text box T.

また、図５に示す画面において、単語グループ２用の表示切替ボタンＢ４が選択されると、単語グループ提示処理部４３５は、単語表示領域Ａ１中の単語グループを単語グループ１から単語グループ２に切り替える。一方、単語グループ３用の表示切替ボタンＢ５が選択されると、単語グループ提示処理部４３５は、単語表示領域Ａ１中の単語グループを単語グループ３に切り替える。図７は、単語グループ３用の表示切替ボタンＢ５が選択された場合の画面表示例を示す図である。図７の例では、単語グループ３は、重要度の高い２０個の単語を含む。各単語には、その重みが横方向の棒グラフにより表示されている。 When the display switching button B4 for the word group 2 is selected on the screen shown in FIG. 5, the word group presentation processing unit 435 switches the word group in the word display area A1 from the word group 1 to the word group 2. . On the other hand, when the display switching button B5 for the word group 3 is selected, the word group presentation processing unit 435 switches the word group in the word display area A1 to the word group 3. FIG. 7 is a diagram illustrating a screen display example when the display switching button B5 for the word group 3 is selected. In the example of FIG. 7, the word group 3 includes 20 words having high importance. Each word has its weight displayed by a horizontal bar graph.

また、図５に示す画面において、板書用表示領域中の特定の単語（図５の例では「葉緑体」）が選択されると、関連情報取得部４３７は「葉緑体」の関連語及び関連画像を関連情報データベース５００から取得し、関連情報提示処理部４３８は、「葉緑体」の関連語及び関連画像を表示する処理を行う。図８は、板書用表示領域中の特定の単語（葉緑体）が選択された場合の画面表示例を示す図である。図８の例では、「葉緑体」を親として、５つの関連語（子）と、関連画像ボタンＰと、プルダウン表示ボタンＬとが表示されている。関連画像ボタンＰは関連画像を表示するためのボタンである。関連画像が既に授業支援サーバ４００においてキャッシュされている場合、この関連画像のサムネイルが関連画像ボタンＰの代わりに表示される。各関連語は、親である「葉緑体」と直線で結ばれている。プルダウン表示ボタンＬは、表示中の５つの関連語以外の関連語をプルダウン形式で表示するためのボタンである。なお、表示中の５つの関連語は、プルダウン形式で表示される関連語に比べて重要度が高いと判断された関連語であってもよい。また、関連語（子）がドラッグ操作により親から離れる方向に移動されると、親子関係が解消される。同様にして、関連画像のサムネイルも親子関係を解消することが可能であり、親子関係の解消によりこの関連画像を拡大して表示できるようになる。関連画像を最初から拡大するのではなく先ずサムネイルを表示するのは、拡大表示しても問題無いかを事前確認できるようにするためである。 When a specific word (“chloroplast” in the example of FIG. 5) in the display area for board writing is selected on the screen shown in FIG. 5, the related information acquisition unit 437 associates the related word “chloroplast”. And the related image are acquired from the related information database 500, and the related information presentation processing unit 438 performs processing for displaying the related word and the related image of “chloroplast”. FIG. 8 is a diagram showing a screen display example when a specific word (chloroplast) in the board writing display area is selected. In the example of FIG. 8, five related words (children), a related image button P, and a pull-down display button L are displayed with “chloroplast” as a parent. The related image button P is a button for displaying a related image. When the related image is already cached in the class support server 400, the thumbnail of the related image is displayed instead of the related image button P. Each related word is connected to the parent “chloroplast” in a straight line. The pull-down display button L is a button for displaying related words other than the five related words being displayed in a pull-down format. Note that the five related words being displayed may be related words that are determined to have a higher importance level than the related words displayed in the pull-down format. Further, when the related word (child) is moved in a direction away from the parent by a drag operation, the parent-child relationship is canceled. Similarly, the thumbnail of the related image can also cancel the parent-child relationship, and the related image can be enlarged and displayed by the cancellation of the parent-child relationship. The reason why the thumbnails are displayed first, instead of enlarging the related images from the beginning, is to make it possible to confirm in advance whether there is no problem even if the enlarged images are displayed.

図８に示す画面において、１つの関連語Ｗが選択されると、関連情報取得部４３７は関連語Ｗの関連語及び関連画像（派生関連情報）を関連情報データベース５００から取得し、関連情報提示処理部４３８は、取得された関連語Ｗの関連語及び関連画像を表示する処理を行う。図９は、図８に示す画面において関連語Ｗが選択された場合の画面表示例を示す図である。図９の例では、関連語Ｗを親として、４つの関連語（子）と、関連画像ボタンＰと、プルダウン表示ボタンＬとが表示されている。また、削除ボタンＤが表示されており、この削除ボタンＤが選択されると、関連語Ｗ及びその関連情報が表示されなくなる。一方、図９において関連語Ｗが選択されると、関連語Ｗの表示は維持されつつその関連情報（子）が表示されなくなる。また、関連情報（子）が選択されると、この関連情報を親とする派生関連情報がさらに表示される。 When one related word W is selected on the screen shown in FIG. 8, the related information acquisition unit 437 acquires the related word and related image (derived related information) of the related word W from the related information database 500 and presents the related information. The processing unit 438 performs processing for displaying the related word and the related image of the acquired related word W. FIG. 9 is a diagram showing a screen display example when the related word W is selected on the screen shown in FIG. In the example of FIG. 9, with the related word W as a parent, four related words (children), a related image button P, and a pull-down display button L are displayed. Also, a delete button D is displayed. When this delete button D is selected, the related word W and its related information are not displayed. On the other hand, when the related word W is selected in FIG. 9, the related information (child) is not displayed while the display of the related word W is maintained. When related information (child) is selected, derived related information having the related information as a parent is further displayed.

なお、板書用表示領域は仮想的な広い領域の一部のみを表示するように構成されており、板書用表示領域全体をドラッグ操作することにより、板書用表示領域が、何も表示されていない領域に遷移する。 The board display area is configured to display only a part of a virtual wide area. By dragging the entire board display area, nothing is displayed on the board display area. Transition to a region.

図１０は、印刷用データ生成部４４１により印刷用データを生成する際の画面表示例を示す図である。図１０の左側に示すように、複数の単語が表示されており、これらの単語のうち選択された単語について、テキスト抽出部４４０により抽出されたテキスト区間が右端の印刷用データに表示されている。印刷用データは、授業のまとめプリント、テスト、又は教材等のような形式のデータである。テキスト抽出部４４０により抽出されたテキスト区間は、印刷用データにおいて、単語に対する説明文として記述される。なお、説明文のみを表示して単語を表示しないことにより、単語を生徒に記入させるテストを作成可能としてもよい。 FIG. 10 is a diagram illustrating a screen display example when the print data generation unit 441 generates print data. As shown on the left side of FIG. 10, a plurality of words are displayed, and the text section extracted by the text extraction unit 440 for the selected word among these words is displayed in the rightmost print data. . The data for printing is data in a form such as a class summary print, a test, a teaching material, or the like. The text section extracted by the text extraction unit 440 is described as an explanatory text for the word in the print data. Note that it is possible to create a test that allows a student to enter a word by displaying only the explanatory text and not displaying the word.

＜５．その他の実施形態＞
以上、一実施形態について記載したが、この開示の一部をなす論述及び図面はこの発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなる。 <5. Other Embodiments>
Although one embodiment has been described above, it should not be understood that the description and drawings constituting a part of this disclosure limit the present invention. From this disclosure, various alternative embodiments, examples and operational techniques will be apparent to those skilled in the art.

表示装置２００として電子黒板を用いる場合であって、電子黒板がネットワーク通信機能を有する場合、授業支援サーバ４００と電子黒板（表示装置２００）とが端末装置１００を介さずに互いに通信を行ってもよい。かかる場合、端末装置１００は不要である。 When an electronic blackboard is used as the display device 200 and the electronic blackboard has a network communication function, the lesson support server 400 and the electronic blackboard (display device 200) may communicate with each other without using the terminal device 100. Good. In such a case, the terminal device 100 is unnecessary.

上述した実施形態において、生徒に対する提示として表示装置２００を用いた表示を行う一例について説明した。しかしながら、生徒に対する提示は、スピーカを用いて音声により行われてもよい。 In the embodiment described above, an example of performing display using the display device 200 as a presentation to a student has been described. However, the presentation to the student may be performed by voice using a speaker.

上述した実施形態において、音声データをテキストデータに変換し、テキストデータを授業支援サーバ４００が取り扱う一例について説明した。しかしながら、授業支援サーバ４００が音声データを取り扱う構成であってもよい。かかる場合、授業支援サーバ４００は、テキストデータはなく音声データを収集して処理及び蓄積する。 In the embodiment described above, an example in which voice data is converted into text data and the text data is handled by the class support server 400 has been described. However, the lesson support server 400 may be configured to handle audio data. In such a case, the class support server 400 collects voice data, not text data, and processes and stores it.

上述した実施形態において、授業支援サーバ４００の機能のうち少なくとも一部を端末装置１００に移行してもよい。具体的には、図２に示す各機能ブロックのうち少なくとも１つを、授業支援サーバ４００ではなく端末装置１００に設けてもよい。 In the above-described embodiment, at least some of the functions of the class support server 400 may be transferred to the terminal device 100. Specifically, at least one of the functional blocks shown in FIG. 2 may be provided in the terminal device 100 instead of the class support server 400.

授業支援システム１における各処理を情報処理装置（コンピュータ）に実行させるプログラムが提供されてもよい。また、プログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、コンピュータにプログラムをインストールすることが可能である。ここで、プログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等の記録媒体であってもよい。 A program that causes an information processing apparatus (computer) to execute each process in the lesson support system 1 may be provided. The program may be recorded on a computer readable medium. If a computer-readable medium is used, a program can be installed in the computer. Here, the computer-readable medium on which the program is recorded may be a non-transitory recording medium. The non-transitory recording medium is not particularly limited, but may be a recording medium such as a CD-ROM or a DVD-ROM.

１：授業支援システム
２：単語グループ
３：単語グループ
１０：通信ネットワーク
１００：端末装置
１０１：操作部
１０２：表示部
１０３：マイク
２００：表示装置
３００：音声認識サーバ
４００：授業支援サーバ
４１０：通信部
４２０：記憶部
４２１：テキストデータ蓄積部
４２２：リスト保持部
４３０：制御部
４３１：テキストデータ取得部
４３２：単語抽出部
４３３：提示除外部
４３４：単語グループ生成部
４３５：単語グループ提示処理部
４３６：単語提示処理部
４３７：関連情報取得部
４３８：関連情報提示処理部
４３９：テキスト提示処理部
４４０：テキスト抽出部
４４１：印刷用データ生成部
５００：関連情報データベース 1: Class support system 2: Word group 3: Word group 10: Communication network 100: Terminal device 101: Operation unit 102: Display unit 103: Microphone 200: Display device 300: Voice recognition server 400: Class support server 410: Communication unit 420: Storage unit 421: Text data storage unit 422: List holding unit 430: Control unit 431: Text data acquisition unit 432: Word extraction unit 433: Presentation exclusion unit 434: Word group generation unit 435: Word group presentation processing unit 436: Word presentation processing unit 437: related information acquisition unit 438: related information presentation processing unit 439: text presentation processing unit 440: text extraction unit 441: print data generation unit 500: related information database

Claims

A class support system for supporting classes conducted by teachers,
A word extraction unit that extracts words from voice data obtained by collecting voices of class participants in the class or text data obtained by converting the voice data;
A related information acquisition unit that acquires related information including at least one of related words and related images related to the word extracted by the word extraction unit from a database;
A class support system comprising: a related information presentation processing unit that performs a process of presenting the word extracted by the word extraction unit and the related information acquired by the related information acquisition unit to a student.

The related information presentation processing unit presents the student by displaying the word extracted by the word extracting unit and the related information acquired by the related information acquiring unit by a display device used for the lesson. The class support system according to claim 1, wherein:

The class support system according to claim 2, wherein the display device is a projector device that projects onto a writing board used for the class, or an electronic blackboard used for the class.

The related information acquisition unit further acquires derived related information including at least one of related words and related images related to the related information,
The said related information presentation process part performs the process which presents the said relevant information acquired by the said relevant information acquisition part and the said derived relevant information to the said student, The Claim 1 characterized by the above-mentioned. The class support system described.

A word group generation unit that generates a word group including a plurality of words extracted by the word extraction unit;
A word group presentation processing unit for performing processing of presenting the word group generated by the word group generation unit to the student;
A word presentation process for performing a process of presenting the specific word to the student separately from the word group when a specific word in the word group presented by the word group presentation processing unit is selected by the teacher The lesson support system according to claim 1, further comprising: a section.

The related information presentation processing unit performs a process of presenting the related information corresponding to the specific word to the student when the specific word presented by the word presentation processing unit is selected by the teacher. The class support system according to claim 5, wherein:

The class support system according to claim 5 or 6, wherein the word group generation unit generates the word group by selecting a predetermined number of words extracted by the word extraction unit in order from the newest.

The word group generation unit weights the words extracted by the word extraction unit based on at least the appearance frequency, and selects the predetermined number of words in descending order of weight to generate the word group. Item 7. The class support system according to Item 5 or 6.

The word group generation unit weights the word extracted by the word extraction unit based on at least the application frequency, and selects a word whose weight exceeds a threshold value or the specific word presented by the word presentation processing unit The class support system according to claim 5 or 6, wherein the word group is generated.

A text data acquisition unit that acquires text data obtained by converting the voice data;
The text presentation processing unit that performs processing for presenting the text data to the student during a period designated by the teacher based on an operation from the teacher. The class support system according to item 1.

A text data storage unit for storing text data obtained by converting the voice data;
A text extraction unit that extracts a text section related to a predetermined word from the text data stored by the text data storage unit;
The print data generation unit that generates print data that includes the text section extracted by the text extraction unit as an explanation of the predetermined word. The class support system described in the section.

A list holding unit for holding a list of words prohibited from being presented to the student;
The present invention further comprises a presentation excluding unit that excludes the word extracted from the object to be presented to the student when the word extracted by the word extracting unit matches the word in the list. The lesson support system according to any one of 11 above.

An information processing apparatus used in a class support system that supports classes conducted by a teacher,
A word extraction unit that extracts words from voice data obtained by collecting voices of class participants in the class or text data obtained by converting the voice data;
A related information acquisition unit that acquires related information including at least one of related words and related images related to the word extracted by the word extraction unit from a database;
An information processing apparatus comprising: a related information presentation processing unit that performs a process of presenting the word extracted by the word extraction unit and the related information acquired by the related information acquisition unit to a student.

A class support method for supporting classes conducted by a teacher,
A word extraction step of extracting words from voice data obtained by collecting voices of class participants in the class or text data obtained by converting the voice data;
A related information acquisition step of acquiring related information including at least one of a related word and a related image related to the word extracted by the word extraction step from a database;
A class support method, comprising: a related information presentation step for performing a process of presenting the word extracted in the word extraction step and the related information acquired in the related information acquisition step to a student.

A program used in a class support system that supports classes conducted by teachers,
In the information processing device,
A word extraction step of extracting words from voice data obtained by collecting voices of class participants in the class or text data obtained by converting the voice data;
A related information acquisition step of acquiring related information including at least one of a related word and a related image related to the word extracted by the word extraction step from a database;
A related information presenting step for performing a process of presenting the student extracted the word extracted in the word extracting step and the related information acquired in the related information acquiring step to a student.