JP2001034151A - Language learning teaching material preparing device and language learning system - Google Patents

Language learning teaching material preparing device and language learning system

Info

Publication number
JP2001034151A
JP2001034151A JP11209806A JP20980699A JP2001034151A JP 2001034151 A JP2001034151 A JP 2001034151A JP 11209806 A JP11209806 A JP 11209806A JP 20980699 A JP20980699 A JP 20980699A JP 2001034151 A JP2001034151 A JP 2001034151A
Authority
JP
Japan
Prior art keywords
teaching material
data
character string
language learning
sentence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP11209806A
Other languages
Japanese (ja)
Inventor
Kenji Yamamura
賢治 山村
Suenori Onoe
末則 尾上
Yasuo Yomogida
康雄 蓬田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP11209806A priority Critical patent/JP2001034151A/en
Publication of JP2001034151A publication Critical patent/JP2001034151A/en
Pending legal-status Critical Current

Links

Landscapes

  • Electrically Operated Instructional Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a language learning teaching material preparing device preparing language learning materials from voices, videos and captions recorded on a video tape. SOLUTION: This teaching material preparing device 80 is provided with a caption character string obtaining means 2 taking out caption character strings from the reproduced video signal of the video tape, a silence detecting means 3 detecting silent sections of a fixed time from the voice signal of the video tape, a sentence dividing means 4 performing sentence divisions of the voice by storing times of silent sections, a management data generating means 5 generating teaching management data in which chaption character strings are related with the divided sentences, a voice coding means 6 converting voice signals of the video tape into coded voice data, a teaching data storage means 7 which combines the teaching management data with the coded voice data and stores them as teaching material data and a teaching data output means 8 outputting the teaching material data. Thus, the device 80 can prepares teaching materials displaying voices of sentence units and the caption character strings by synchronizing them.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、語学学習の教材を
作成する作成装置と、その教材を用いて語学学習を行う
システムに関し、特に、ビデオテープに記録された音
声、映像及びキャプション(字幕)を利用して語学学習
教材を作成し、効果的な語学学習が実行できるようにし
たものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an apparatus for preparing teaching materials for language learning and a system for performing language learning using the teaching materials, and more particularly to audio, video and captions (captions) recorded on a videotape. Is used to create language learning materials so that effective language learning can be performed.

【0002】[0002]

【従来の技術】従来の語学学習システムでは、映像とキ
ャプション文字列とをビデオテープに重畳して記録し、
その再生映像をテレビモニター等の表示装置に表示し
て、学習者に提示している。
2. Description of the Related Art In a conventional language learning system, a video and a caption character string are superimposed and recorded on a video tape.
The reproduced video is displayed on a display device such as a television monitor and presented to the learner.

【0003】また、映像信号に記録されたキャプション
文字列をテキストデータとして出力する機能を有するキ
ャプション復号化装置を使用して、キャプション文字列
をコンピュータに取り込み、画面に表示したり、または
印刷して、語学学習に活用することも行われている。
Further, using a caption decoding device having a function of outputting a caption character string recorded in a video signal as text data, the caption character string is taken into a computer and displayed on a screen or printed. It is also used for language learning.

【0004】また、ビデオテープに記録された映像と音
声とを符号化手段で符号化データに変換し、コンピュー
タで再生するシステムも知られている。
There is also known a system in which video and audio recorded on a video tape are converted into encoded data by encoding means and reproduced by a computer.

【0005】[0005]

【発明が解決しようとする課題】しかし、従来の語学学
習システムでは、音声、映像及びキャプションが記録さ
れたビデオテープそのものを教材に使用することは行わ
れているが、ビデオテープに記録された音声、映像及び
キャプションを利用して効果的な語学学習教材を作成す
ることは行われていない。
However, in a conventional language learning system, a videotape on which audio, video, and captions are recorded is used as a teaching material, but the audiotape recorded on a videotape is used. No effective language learning materials have been created using video, video, and captions.

【0006】また、キャプション復号化装置を使って映
像信号に記録されたキャプション文字列をテキストデー
タとして分離した場合でも、分離したキャプション文字
列を表示するだけでは、効果的な語学学習教材とはなり
得ない。
Further, even when a caption character string recorded in a video signal is separated as text data using a caption decoding device, simply displaying the separated caption character string is an effective language learning teaching material. I can't get it.

【0007】本発明は、こうした従来の問題点を解決す
るものであり、ビデオテープに記録された音声、映像及
びキャプションから、学習成果の向上が期待できる語学
学習教材を作成する語学学習教材作成装置を提供し、ま
た、作成された教材を用いて語学学習を実行する語学学
習システムを提供することを目的としている。
SUMMARY OF THE INVENTION The present invention solves such a conventional problem. A language learning teaching material creating apparatus for creating a language learning teaching material from which audio, video, and captions recorded on a video tape can improve learning results. It is also an object of the present invention to provide a language learning system that executes language learning using created teaching materials.

【0008】[0008]

【課題を解決するための手段】そこで、本発明では、再
生されたビデオテープの映像信号からキャプション文字
列を取り出すキャプション文字列取得手段と、ビデオテ
ープの音声信号から一定時間の無音区間を検出する無音
検出手段と、無音区間の時刻を記憶することにより音声
のセンテンス分割を行うセンテンス分割手段と、分割さ
れたセンテンスにキャプション文字列を関連付けた教材
管理データを生成する管理データ生成手段と、ビデオテ
ープの音声信号を符号化音声データに変換する音声符号
化手段と、教材管理データと符号化音声データとを組み
合わせて教材データとして記録する教材データ蓄積手段
と、教材データを出力する教材データ出力手段とにより
語学学習教材作成装置を構成している。
Therefore, according to the present invention, there is provided a caption character string acquiring means for extracting a caption character string from a video signal of a reproduced video tape, and detecting a silent section for a predetermined time from an audio signal of the video tape. A silence detecting means, a sentence dividing means for dividing a sentence of a voice by storing a time of a silence section, a management data generating means for generating teaching material management data in which a caption character string is associated with the divided sentences, and a video tape Audio encoding means for converting the audio signal into encoded audio data, teaching material data storage means for recording the teaching material data by combining the teaching material management data and the encoded audio data, and teaching material data output means for outputting the teaching material data. Constitutes a language learning teaching material creation device.

【0009】また、この語学学習教材作成装置に、ビデ
オテープの映像信号を符号化映像データに変換する映像
符号化手段を追加し、教材データ蓄積手段に、教材管理
データと符号化音声データと符号化映像データとを組み
合わせた教材データを記録するように構成している。
Further, a video encoding means for converting a video signal of a video tape into encoded video data is added to the language learning teaching material creating apparatus, and the teaching material management data, the encoded audio data and the encoding are added to the teaching material data storage means. It is configured to record teaching material data combined with coded video data.

【0010】また、この語学学習教材作成装置と、語学
学習教材作成装置で作成された教材データを用いて語学
学習を実行する教材実行装置とで語学学習システムを構
成し、この教材実行装置には、語学学習教材作成装置か
ら教材データを入力する教材データ入力手段と、教材デ
ータの再生を実行する教材実行手段と、教材を表示する
表示手段とを設けている。
[0010] Further, a language learning system is constituted by the language learning teaching material creating device and a teaching material executing device that executes language learning using the teaching material data created by the language learning teaching material creating device. There are provided teaching material data input means for inputting teaching material data from the language learning teaching material creating device, teaching material executing means for executing playback of the teaching material data, and display means for displaying the teaching material.

【0011】そのため、語学学習教材作成装置では、ビ
デオテープに記録された情報から、センテンス単位の音
声と映像とキャプション文字列とを同期して表示する語
学学習教材を作成することができ、また、語学学習シス
テムでは、作成された教材を用いて効果的な語学学習を
実行することができる。
Therefore, the language learning teaching material creating apparatus can create a language learning teaching material for synchronizing and displaying the audio, video, and caption character strings in sentence units from the information recorded on the video tape. In the language learning system, effective language learning can be performed using the created teaching materials.

【0012】[0012]

【発明の実施の形態】本発明の請求項1に記載の発明
は、再生されたビデオテープの映像信号からキャプショ
ン文字列を取り出すキャプション文字列取得手段と、ビ
デオテープの音声信号から一定時間の無音区間を検出す
る無音検出手段と、無音区間の時刻を記憶することによ
り音声のセンテンス分割を行うセンテンス分割手段と、
分割されたセンテンスにキャプション文字列を関連付け
た教材管理データを生成する管理データ生成手段と、ビ
デオテープの音声信号を符号化音声データに変換する音
声符号化手段と、教材管理データと符号化音声データと
を組み合わせて教材データとして記録する教材データ蓄
積手段と、教材データを出力する教材データ出力手段と
を設け、センテンスに同期して音声及びキャプション文
字列を表示する語学学習教材を作成するようにした語学
学習教材作成装置であり、ビデオテープに記録された情
報から、センテンス単位の音声とキャプション文字列と
を同期して表示する教材を作成することができる。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS The invention according to claim 1 of the present invention comprises a caption character string acquiring means for extracting a caption character string from a video signal of a reproduced video tape, and silence for a predetermined time from an audio signal of the video tape. A silence detecting means for detecting a section, and a sentence dividing means for dividing a sentence of a voice by storing the time of the silence section,
Management data generating means for generating teaching material management data in which a caption character string is associated with a divided sentence; voice coding means for converting a video tape voice signal into coded voice data; learning material management data and coded voice data And a teaching material data output means for outputting the teaching material data in combination with the teaching material data, so that a language learning teaching material for displaying a voice and a caption character string in synchronization with a sentence is prepared. This is a language learning teaching material creating apparatus, which can create a teaching material for synchronizing and displaying a sentence unit voice and a caption character string from information recorded on a video tape.

【0013】請求項2に記載の発明は、再生されたビデ
オテープの映像信号からキャプション文字列を取り出す
キャプション文字列取得手段と、ビデオテープの音声信
号から一定時間の無音区間を検出する無音検出手段と、
無音区間の時刻を記憶することにより音声のセンテンス
分割を行うセンテンス分割手段と、分割されたセンテン
スにキャプション文字列を関連付けた教材管理データを
生成する管理データ生成手段と、ビデオテープの音声信
号を符号化音声データに変換する音声符号化手段と、ビ
デオテープの映像信号を符号化映像データに変換する映
像符号化手段と、教材管理データと符号化音声データと
符号化映像データとを組み合わせて教材データとして記
録する教材データ蓄積手段と、教材データを出力する教
材データ出力手段とを設け、センテンスに同期して、音
声、映像及びキャプション文字列を表示する語学学習教
材を作成するようにした語学学習教材作成装置であり、
ビデオテープに記録された情報から、センテンス単位の
音声と映像とキャプション文字列とを同期して表示する
教材を作成することができる。
According to a second aspect of the present invention, there is provided a caption character string acquiring means for extracting a caption character string from a reproduced video tape video signal, and a silence detecting means for detecting a silence section for a predetermined time from an audio signal of the video tape. When,
Sentence dividing means for dividing a sentence of a voice by storing the time of a silent section; management data generating means for generating teaching material management data in which a caption character string is associated with the divided sentence; Audio encoding means for converting the video signal of the video tape into encoded video data; and teaching material data by combining the teaching material management data, the encoded audio data, and the encoded video data. A language learning teaching material provided with teaching material data storage means for recording as a text and teaching material data output means for outputting the teaching material data, and creating a language learning teaching material for displaying audio, video and caption character strings in synchronization with a sentence. Creating device,
From the information recorded on the video tape, it is possible to create a teaching material for displaying the audio, video, and caption character strings in sentence units in synchronization.

【0014】請求項3に記載の発明は、ビデオテープを
再生するビデオテープ再生装置からタイムコードを取得
するタイムコード取得手段を設け、管理データ生成手段
内で、センテンスの先頭時刻とキャプション文字列の発
生時刻とを比較し、さらにセンテンス長とキャプション
文字数とを比較することにより、教材管理データにおけ
るセンテンスとキャプション文字列との関連付けの精度
を向上させたものであり、教材におけるセンテンス単位
の音声とキャプション文字列との関係を正確に同期させ
ることができる。
According to a third aspect of the present invention, there is provided a time code obtaining means for obtaining a time code from a video tape reproducing apparatus for reproducing a video tape, and the management data generating means includes a head time of a sentence and a caption character string. By comparing the occurrence time with the sentence length and the number of caption characters, the accuracy of the association between the sentence and the caption character string in the teaching material management data has been improved. The relationship with the character string can be accurately synchronized.

【0015】請求項4に記載の発明は、ビデオテープの
再生音声を文字列に変換する音声認識手段を設け、管理
データ生成手段内でキャプション文字列と音声認識手段
から入力される文字列とを照合することにより、教材管
理データにおけるセンテンスとキャプション文字列との
関連付けの精度を向上させたものであり、教材における
センテンス単位の音声とキャプション文字列との関係を
正確に同期させることができる。
According to a fourth aspect of the present invention, there is provided a voice recognition means for converting a reproduced voice of a video tape into a character string, and a caption character string and a character string inputted from the voice recognition means are stored in the management data generating means. By performing the collation, the accuracy of the association between the sentence in the teaching material management data and the caption character string is improved, and the relationship between the sentence-based speech in the teaching material and the caption character string can be accurately synchronized.

【0016】請求項5に記載の発明は、付加静止画デー
タ、付加文字列データまたは付加音声データを入力する
付加データ入力手段を設け、管理データ生成手段を経由
して、教材蓄積手段内にこれらの付加データを蓄積し、
キャプション文字列の表示に併せて、付加された静止
画、文字列または音声を表示する語学学習教材を作成す
るようにしたものであり、ビデオテープに記録された情
報以外の情報を教材に取り込むことができる。
According to a fifth aspect of the present invention, additional data input means for inputting additional still image data, additional character string data, or additional audio data is provided, and these are stored in the teaching material storage means via the management data generation means. Accumulate additional data of
This is to create a language learning teaching material that displays the added still image, character string, or audio along with the display of the caption character string, and incorporates information other than the information recorded on the videotape into the teaching material. Can be.

【0017】請求項6に記載の発明は、教材管理データ
に含まれるキャプション文字列の一部の単語に不可視属
性を設定するキャプション文字列編集手段を設け、不可
視属性が設定された単語の文字列を表示しない音声聞き
取り練習用の問題を作成するようにしたものであり、単
語のスペルは表示せずに、発音だけ聞かせて単語を当て
させる問題を作成することができる。
According to a sixth aspect of the present invention, there is provided a caption character string editing means for setting an invisible attribute to some words of the caption character string included in the teaching material management data, wherein the character string of the word for which the invisible attribute is set is provided. This is to create a question for voice listening practice that does not display a spelling. It is possible to create a question in which only the pronunciation is heard and the word is applied without displaying the spelling of the word.

【0018】請求項7に記載の発明は、請求項1乃至6
のいずれかに記載の語学学習教材作成装置と、この語学
学習教材作成装置で作成された教材データを用いて語学
学習を実行する教材実行装置とを備え、この教材実行装
置に、語学学習教材作成装置から教材データを入力する
教材データ入力手段と、教材データの再生を実行する教
材実行手段と、教材を表示する表示手段とを設けた語学
学習システムであり、作成された教材を用いて効果的な
語学学習を実行することができる。
The invention according to claim 7 is the invention according to claims 1 to 6
And a teaching material execution device that executes language learning using the teaching material data created by the language learning material creation device. The teaching material execution device includes a language learning teaching material creation device. A language learning system provided with teaching material data input means for inputting teaching material data from the device, teaching material executing means for executing playback of the teaching material data, and display means for displaying the teaching material. Language learning can be performed.

【0019】請求項8に記載の発明は、請求項6に記載
の語学学習教材作成装置と、この語学学習教材作成装置
で作成された教材データを用いて語学学習を実行する教
材実行装置とを備え、この教材実行装置に、語学学習教
材作成装置から教材データを入力する教材データ入力手
段と、教材データの再生を実行する教材実行手段と、教
材を表示する表示手段と、学習者が回答を入力するため
の回答入力手段と、学習者が入力した回答と不可視属性
の設定されたキャプション文字列とを照合する回答照合
手段とを設け、学習者が音声を聞き取りながら、音声聞
き取り練習用問題の回答を入力することができ、その正
誤判定結果及び正答を表示できるようにしたものであ
り、音声聞き取り練習用の問題を用いて効果的に音声聞
き取り練習を行うことができる。
According to an eighth aspect of the present invention, there is provided a language learning teaching material creating device according to the sixth aspect, and a teaching material executing device that executes language learning using the teaching material data created by the language learning teaching material creating device. The teaching material execution device includes teaching material data input means for inputting teaching material data from the language learning teaching material creating device, teaching material executing means for executing the playing of the teaching material data, display means for displaying the teaching material, and An answer input means for inputting, and an answer matching means for matching the answer input by the learner with the caption character string set with the invisible attribute are provided. Answers can be entered, and the result of correct / incorrect judgment and correct answer can be displayed. It is possible to practice voice listening practice effectively using the questions for voice listening practice. Can.

【0020】請求項9に記載の発明は、教材実行装置
に、回答入力手段から入力された回答を語学学習教材作
成装置に出力する回答データ出力手段を設け、語学学習
教材作成装置に、複数台の教材実行装置に接続して、そ
れぞれの教材実行装置から出力された回答データを収集
する回答データ収集手段を設けたものであり、各学習者
の回答及び正誤判定結果を収集し、学習履歴として保存
することができる。
According to a ninth aspect of the present invention, the teaching material execution device is provided with answer data output means for outputting the answer inputted from the answer input means to the language learning teaching material creating device. Connected to the teaching material execution device, and provided with answer data collecting means for collecting the answer data output from each teaching material execution device.The answer and the judgment result of each learner are collected and the learning history is collected. Can be saved.

【0021】以下、本発明の実施の形態について、図面
を用いて説明する。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.

【0022】(第1の実施形態)第1の実施形態の語学
学習システムは、ビデオテープに記録された音声及びキ
ャプション文字列を用いて、センテンス単位で音声とキ
ャプション文字列とを表示することが可能な語学学習教
材を作成する。
(First Embodiment) The language learning system according to the first embodiment can display a voice and a caption character string in sentence units using a voice and a caption character string recorded on a video tape. Create possible language learning materials.

【0023】第1の実施形態における語学学習システム
は、図1に示すように、映像、音声が記録されたビデオ
テープを再生するビデオテープ再生装置1と、ビデオテ
ープに記録された映像及び音声を用いて教材を作成する
教材作成装置80と、作成された教材を表示して語学学習
を実行する教材実行装置90とを備えている。
As shown in FIG. 1, the language learning system according to the first embodiment includes a video tape reproducing apparatus 1 for reproducing a video tape on which video and audio are recorded, and a video and audio recorded on the video tape. A teaching material creation device 80 for creating teaching materials by using the teaching materials, and a teaching material execution device 90 for displaying the created teaching materials and executing language learning.

【0024】教材作成装置80は、ビデオテープの映像信
号からキャプション文字列を取り出すキャプション文字
列取得手段2と、ビデオテープの音声信号から一定時間
の無音区間を検出する無音検出手段3と、無音区間の時
刻を記憶することにより音声のセンテンス分割を行うセ
ンテンス分割手段4と、分割されたセンテンスにキャプ
ション文字列を関連付けた教材管理データを生成する管
理データ生成手段5と、ビデオテープの音声信号を符号
化音声データに変換する音声符号化手段6と、教材管理
データと符号化音声データとを組み合わせて教材データ
として記録する教材データ蓄積手段7と、教材データを
出力する教材データ出力手段8とを具備している。
The teaching material creating device 80 includes a caption character string acquiring means 2 for extracting a caption character string from a video tape video signal, a silence detecting means 3 for detecting a silence period for a predetermined time from a video tape audio signal, and a silence section. , A sentence dividing unit 4 for dividing the sentence of the voice by storing the time, a management data generating unit 5 for generating teaching material management data in which a caption character string is associated with the divided sentence, and encoding the audio signal of the video tape. Audio data converting means 6 for converting the audio data into coded audio data; teaching material data storage means 7 for recording the educational material data by combining the educational material management data and the encoded audio data; and teaching material data output means 8 for outputting the educational material data. are doing.

【0025】また、教材実行装置90は、教材作成装置80
で作成された教材データを入力する教材データ入力手段
9と、教材データを再生して語学学習を実行する教材実
行手段10と、教材を表示する表示手段11とを具備してい
る。
The teaching material execution device 90 includes a teaching material creating device 80.
The teaching material data input means 9 for inputting the teaching material data created in the above, a teaching material executing means 10 for reproducing the teaching material data and executing the language learning, and a display means 11 for displaying the teaching material.

【0026】以下、その動作について説明する。Hereinafter, the operation will be described.

【0027】キャプション文字列取得手段2は、ビデオ
テープ再生装置1から出力された映像信号よりキャプシ
ョン文字列を取り出し、センテンス単位で管理データ生
成手段5に送る。
The caption character string obtaining means 2 extracts a caption character string from the video signal output from the video tape reproducing device 1 and sends it to the management data generating means 5 in sentence units.

【0028】音声符号化手段6は、ビデオデータ再生装
置1から出力された音声信号を符号化し、符号化音声デ
ータを教材データ蓄積手段7に蓄積する。
The audio encoding means 6 encodes the audio signal output from the video data reproducing apparatus 1 and stores the encoded audio data in the teaching material data storage means 7.

【0029】無音検出手段3は、ビデオテープ再生装置
1から出力された音声信号から一定時間の無音区間を検
出し、検出した瞬間にセンテンス分割手段4に通知を送
る。センテンス分割手段4は、無音検出手段3から無音
検出の通知を受ける度に音声の先頭からの時刻を測定す
ることによってセンテンスの先頭時刻を管理データ生成
手段5に送る。
The silence detecting means 3 detects a silence section for a predetermined time from the audio signal output from the video tape reproducing apparatus 1, and sends a notice to the sentence dividing means 4 at the moment of detection. The sentence dividing means 4 sends the head time of the sentence to the management data generating means 5 by measuring the time from the head of the voice each time a notification of silence detection is received from the silence detecting means 3.

【0030】管理データ生成手段5は、センテンスの先
頭時刻を列記したセンテンス先頭時刻リストを生成す
る。センテンス先頭時刻リストを生成することは、擬似
的に符号化音声データをセンテンス分割したことにな
る。
The management data generating means 5 generates a sentence start time list in which the start times of the sentences are listed. Generating the sentence start time list means that the encoded audio data is sentence-divided in a pseudo manner.

【0031】さらに管理データ生成手段5は、キャプシ
ョン文字列取得手段2で生成されたキャプション文字列
をセンテンス先頭時刻リストに記述されている各時刻に
割り当てることにより、センテンスとキャプション文字
列との関連付けを記述した教材管理データを生成し、教
材データ蓄積手段7に蓄積する。
Further, the management data generation means 5 assigns the caption character string generated by the caption character string acquisition means 2 to each time described in the sentence start time list, thereby associating the sentence with the caption character string. The described teaching material management data is generated and stored in the teaching material data storage unit 7.

【0032】教材データ出力手段8は、教材データ蓄積
手段7より、符号化音声データ及び教材管理データを読
み出し、教材実行装置90の教材データ入力手段9に送
る。教材実行手段10では、教材管理データに基づき、セ
ンテンスごとに符号化音声データの再生とキャプション
文字列の表示とを行うことにより、教材を用いた語学学
習を実行する。
The teaching material data output means 8 reads the encoded voice data and the teaching material management data from the teaching material data storage means 7 and sends them to the teaching material data input means 9 of the teaching material execution device 90. The teaching material executing means 10 executes language learning using the teaching material by reproducing encoded voice data and displaying a caption character string for each sentence based on the teaching material management data.

【0033】このように、このシステムでは、ビデオテ
ープ再生装置1から出力されるキャプション文字列をセ
ンテンスに自動的に関連付けることができ、また、セン
テンス単位で音声とキャプション文字列とを同期して再
生することが可能な教材を作成することができる。
As described above, in this system, the caption character string output from the video tape reproducing device 1 can be automatically associated with the sentence, and the voice and the caption character string can be synchronized and reproduced in sentence units. You can create teaching materials that can be used.

【0034】また、語学学習を実行する教材実行装置で
は、センテンス単位で音声とキャプション文字列とを再
生表示することができ、また、必要に応じて、教材管理
データに基づいて、同じセンテンスを繰り返し表示した
り、不要なセンテンスを飛ばして、必要なセンテンスか
ら表示を開始するなど、効率的な語学学習を実行するこ
とができる。
Further, the teaching material execution device for executing language learning can reproduce and display a voice and a caption character string in sentence units, and repeat the same sentence as necessary based on the teaching material management data. Efficient language learning can be performed, such as displaying a message or skipping an unnecessary sentence and starting a display from a necessary sentence.

【0035】(第2の実施形態)第2の実施形態の語学
学習システムでは、ビデオテープに記録された映像、音
声及びキャプション文字列を用いて、センテンス単位で
映像、音声及びキャプション文字列を表示することが可
能な語学学習教材を作成する。
(Second Embodiment) In a language learning system according to a second embodiment, video, audio, and caption character strings are displayed in units of sentences using video, audio, and caption character strings recorded on a video tape. Create language learning materials that can be used.

【0036】このシステムでは、図2に示すように、教
材作成装置80が、ビデオテープの映像信号を符号化映像
データに変換する映像符号化手段12を備えており、映像
符号化手段12で符号化された符号化映像データが、符号
化音声データ及び教材管理データとともに教材データ蓄
積手段7に蓄積される。その他の構成は第1の実施形態
(図1)と変わりがない。
In this system, as shown in FIG. 2, the teaching material creating device 80 includes a video encoding unit 12 for converting a video signal of a video tape into encoded video data. The coded video data is stored in the teaching material data storage means 7 together with the coded audio data and the teaching material management data. Other configurations are the same as those of the first embodiment (FIG. 1).

【0037】以下、その動作について説明する。Hereinafter, the operation will be described.

【0038】キャプション文字列取得手段2、管理デー
タ生成手段5、音声符号化手段6、無音検出手段3及び
センテンス分割手段4の動作は、第1の実施形態と同じ
である。
The operations of the caption character string obtaining means 2, the management data generating means 5, the voice coding means 6, the silence detecting means 3 and the sentence dividing means 4 are the same as in the first embodiment.

【0039】映像符号化手段12は、ビデオテープ再生装
置1から出力された映像を符号化し、符号化映像データ
を教材データ蓄積手段7に蓄積する。教材データ蓄積手
段7には、また、音声符号化手段6から出力された符号
化音声データ及び管理データ生成手段5から出力された
教材管理データが蓄積される。
The video encoding means 12 encodes the video output from the video tape reproducing apparatus 1 and stores the encoded video data in the teaching material data storage means 7. The teaching material data storage unit 7 also stores the coded voice data output from the voice coding unit 6 and the learning material management data output from the management data generation unit 5.

【0040】教材データ出力手段8は、教材データ蓄積
手段7より、符号化音声データ、符号化映像データ及び
教材管理データを読み出し、教材実行装置90の教材デー
タ入力手段9に送る。教材実行手段9では、教材管理デ
ータに基づきセンテンスごとに符号化映像データ及び符
号化音声データの再生とキャプション文字列の表示とを
行うことにより、教材を用いた語学学習を実行する。
The teaching material data output means 8 reads the encoded audio data, the encoded video data and the teaching material management data from the teaching material data storage means 7 and sends them to the teaching material data input means 9 of the teaching material execution device 90. The teaching material executing means 9 executes language learning using the teaching material by reproducing encoded video data and encoded audio data and displaying caption character strings for each sentence based on the teaching material management data.

【0041】このように、このシステムでは、映像、音
声及びキャプション文字列を記録したビデオテープか
ら、センテンス単位で映像、音声及びキャプション文字
列を同期して再生することが可能な教材を作成すること
ができる。
As described above, in this system, from the video tape on which the video, audio, and caption character strings are recorded, it is possible to create a teaching material capable of synchronously reproducing the video, audio, and caption character strings in sentence units. Can be.

【0042】(第3の実施形態)第3の実施形態の語学
学習システムでは、センテンスとキャプション文字列と
を高精度に関連付けた語学学習教材を作成する。
(Third Embodiment) In the language learning system according to the third embodiment, a language learning teaching material in which sentences and caption character strings are associated with high accuracy is created.

【0043】このシステムでは、図3に示すように、教
材作成装置80が、ビデオ再生装置1からタイムコードを
受信するタイムコード取得手段13を具備している。タイ
ムコード取得手段13は、受信したタイムコードを管理デ
ータ生成手段5に出力し、管理データ生成手段5は、こ
のタイムコードを用いて教材管理データを作成する。そ
の他の構成は第2の実施形態(図2)と変わりがない。
In this system, as shown in FIG. 3, the teaching material creating device 80 includes a time code acquisition unit 13 that receives a time code from the video reproducing device 1. The time code acquisition unit 13 outputs the received time code to the management data generation unit 5, and the management data generation unit 5 creates teaching material management data using the time code. Other configurations are the same as those of the second embodiment (FIG. 2).

【0044】以下、その動作について説明する。The operation will be described below.

【0045】基本的な動作は第2の実施形態と同じであ
り、キャプション文字列取得手段2は、ビデオテープ再
生装置1から出力された映像信号よりキャプション文字
列を取り出し、センテンス単位で管理データ生成手段5
に送る。
The basic operation is the same as that of the second embodiment. Caption character string acquiring means 2 extracts a caption character string from a video signal output from video tape reproducing apparatus 1 and generates management data in units of sentences. Means 5
Send to

【0046】音声符号化手段6は、ビデオデータ再生装
置1から出力された音声信号を符号化し、符号化音声デ
ータを教材データ蓄積手段7に蓄積する。また映像符号
化手段12は、ビデオテープ再生装置1から出力された映
像を符号化し、符号化映像データを教材データ蓄積手段
7に蓄積する。
The audio encoding means 6 encodes the audio signal output from the video data reproducing apparatus 1 and stores the encoded audio data in the teaching material data storage means 7. The video encoding unit 12 encodes the video output from the video tape playback device 1 and stores the encoded video data in the teaching material data storage unit 7.

【0047】無音検出手段3は、ビデオテープ再生装置
1から出力された音声信号から一定時間の無音区間を検
出し、検出した瞬間にセンテンス分割手段4に通知を送
る。センテンス分割手段4は、無音検出手段3から無音
検出の通知を受ける度に音声の先頭からの時刻を測定す
ることによってセンテンスの先頭時刻を管理データ生成
手段5に送る。
The silence detecting means 3 detects a silence section for a predetermined time from the audio signal output from the video tape reproducing apparatus 1, and sends a notice to the sentence dividing means 4 at the moment of detection. The sentence dividing means 4 sends the head time of the sentence to the management data generating means 5 by measuring the time from the head of the voice each time a notification of silence detection is received from the silence detecting means 3.

【0048】タイムコード生成手段13は、ビデオテープ
再生装置1から出力されるタイムコードを受け取り、管
理データ生成手段5に送る。
The time code generating means 13 receives the time code output from the video tape reproducing device 1 and sends it to the management data generating means 5.

【0049】管理データ生成手段5は、キャプション文
字列取得手段2からキャプション文字列を受け取ったと
きに、タイムコード取得手段13の出力するタイムコード
を記憶し、タイムコードとキャプション文字列とを記述
したキャプション文字列リストを生成する。さらにセン
テンス分割手段4からセンテンスの先頭時刻を受け取っ
たときに、タイムコード取得手段13の出力するタイムコ
ードを記憶し、タイムコードとセンテンスの先頭時刻と
を記述したセンテンス先頭時刻リストを生成する。
When receiving the caption character string from the caption character string obtaining means 2, the management data generating means 5 stores the time code output by the time code obtaining means 13, and describes the time code and the caption character string. Generate a caption string list. Further, when the head time of the sentence is received from the sentence dividing means 4, the time code output by the time code acquisition means 13 is stored, and a sentence head time list describing the time code and the head time of the sentence is generated.

【0050】さらに管理データ生成手段5は、センテン
ス先頭時刻リストの1番目のタイムコードを基準とし、
一定の時間差に入るキャプション文字列リストのタイム
コードを抽出し、候補リストを生成する。次いでセンテ
ンス先頭時刻リストの1番目のタイムコードと2番目の
タイムコードとの差分時間と、候補リスト内のn番目の
タイムコードとn+1番目のタイムコードとの差分時間
を比較し、最も近い候補を抽出することで、センテンス
先頭時刻リストのタイムコードとキャプション文字列リ
ストのタイムコードとが一致したとみなす。これは、キ
ャプション文字数に応じてセンテンスの時間長さが変化
することを利用して、センテンスとキャプション文字列
との関連を確認するものであり、疑似的に、センテンス
長とキャプション文字数とを比較していることになる。
この結果により、センテンス先頭時刻へのキャプション
文字列の関連付けの精度を向上することができる。
Further, the management data generating means 5 uses the first time code in the sentence start time list as a reference,
The time code of the caption character string list that falls within a certain time difference is extracted, and a candidate list is generated. Next, the difference time between the first time code and the second time code in the sentence start time list is compared with the difference time between the n-th time code and the (n + 1) -th time code in the candidate list. By extracting, it is considered that the time code of the sentence start time list matches the time code of the caption character string list. This uses the fact that the time length of a sentence changes according to the number of caption characters, and confirms the association between the sentence and the caption character string, and compares the sentence length and the number of caption characters in a simulated manner. Will be.
As a result, the accuracy of associating the caption character string with the sentence head time can be improved.

【0051】センテンスの先頭時刻のリストのm(2
〜)番目のタイムコードについても同様な処理を繰り返
し、キャプション文字列取得手段2で生成されたキャプ
ション文字列をセンテンス先頭時刻リストに記述されて
いる各時刻に割り当てることにより、センテンスとキャ
プション文字列との関連付けを記述した教材管理データ
を生成し、教材データ蓄積手段7に蓄積する。
M (2) in the list of the head time of the sentence
~) -Th time code, the same processing is repeated, and the caption character string generated by the caption character string obtaining means 2 is assigned to each time described in the sentence start time list, so that the sentence and the caption character string The learning material management data describing the association of the learning materials is generated and stored in the learning material data storage unit 7.

【0052】教材データ出力手段8は、教材データ蓄積
手段7より、符号化音声データ、符号化映像データ及び
教材管理データを読み出し、教材実行装置の教材データ
入力手段9に送る。教材実行手段10では、教材管理デー
タに基づき、センテンスごとに符号化音声データ及び符
号化映像データの再生とキャプション文字列の表示とを
行うことにより、教材を用いた語学学習を実行する。
The teaching material data output means 8 reads the encoded audio data, the encoded video data and the teaching material management data from the teaching material data storage means 7 and sends them to the teaching material data input means 9 of the teaching material execution device. The teaching material executing means 10 executes language learning using the teaching material by reproducing encoded audio data and encoded video data and displaying caption character strings for each sentence based on the educational material management data.

【0053】このように、このシステムでは、ビデオテ
ープ再生装置1から出力されるタイムコードを仲介とし
て、センテンス先頭時刻とキャプション文字列の発生時
刻とを比較し、さらに、センテンス長とキャプション文
字数とを比較することで、センテンスとキャプション文
字列との関連付けの精度を向上することができる。
As described above, in this system, the start time of the sentence is compared with the occurrence time of the caption character string, using the time code output from the video tape playback device 1 as an intermediary, and the sentence length and the number of caption characters are further compared. By performing the comparison, the accuracy of the association between the sentence and the caption character string can be improved.

【0054】(第4の実施形態)第4の実施形態の語学
学習システムでは、音声認識によってキャプション文字
列を生成し、この音声認識結果を利用して、センテンス
とキャプション文字列とを高精度に関連付けた語学学習
教材を作成する。
(Fourth Embodiment) In a language learning system according to a fourth embodiment, a caption character string is generated by voice recognition, and a sentence and a caption character string are accurately determined by using the voice recognition result. Create associated language learning materials.

【0055】このシステムでは、図4に示すように、教
材作成装置80が、ビデオテープ再生装置1から出力され
る音声信号を文字列に変換する音声認識手段14を具備し
ている。音声認識手段14によって変換された文字列は管
理データ生成手段5に出力される。その他の構成は第3
の実施形態(図3)と変わりがない。
In this system, as shown in FIG. 4, the teaching material producing device 80 includes the voice recognition means 14 for converting a voice signal output from the video tape reproducing device 1 into a character string. The character string converted by the voice recognition unit 14 is output to the management data generation unit 5. Other configurations are 3rd
There is no difference from the embodiment (FIG. 3).

【0056】以下、その動作について説明する。The operation will be described below.

【0057】基本的な動作は第3の実施形態と同じであ
り、キャプション文字列取得手段2は、ビデオテープ再
生装置1から出力された映像信号よりキャプション文字
列を取り出し、センテンス単位で管理データ生成手段5
に送る。また、音声符号化手段6、映像符号化手段12、
無音検出手段3、センテンス分割手段4及びタイムコー
ド取得手段13は、第3の実施形態と同じように動作す
る。
The basic operation is the same as that of the third embodiment. The caption character string acquiring means 2 extracts the caption character string from the video signal output from the video tape reproducing device 1 and generates management data in sentence units. Means 5
Send to In addition, audio encoding means 6, video encoding means 12,
The silence detecting means 3, sentence dividing means 4, and time code acquiring means 13 operate in the same manner as in the third embodiment.

【0058】音声認識手段14は、ビデオテープ再生装置
1から出力される音声について、音声認識により音声認
識文字列を生成し、管理データ生成手段5に送る。
The voice recognition means 14 generates a voice recognition character string by voice recognition for the voice output from the video tape reproducing apparatus 1 and sends it to the management data generation means 5.

【0059】管理データ生成手段5は、キャプション文
字列取得手段2からキャプション文字列を受け取ったと
きに、キャプション文字列を記述したキャプション文字
列リストを生成する。さらにセンテンス分割手段4から
センテンス先頭時刻を受け取った後、引き続き音声認識
手段14から送られて来る音声認識文字列を記憶し、セン
テンス先頭時刻と音声認識文字列とを記述した音声認識
文字列リストを生成する。
When receiving the caption character string from the caption character string acquiring means 2, the management data generating means 5 generates a caption character string list describing the caption character string. Further, after receiving the sentence head time from the sentence dividing means 4, the voice recognition character string continuously sent from the voice recognition means 14 is stored, and a voice recognition character string list describing the sentence head time and the voice recognition character string is stored. Generate.

【0060】次いで管理データ生成手段5は、音声認識
文字列リストの1番目の音声認識文字列とキャプション
文字列リストのキャプション文字列とを順次照合し、最
も一致した文字数の多いキャプション文字列を抽出する
ことで、音声認識文字列リストの1番目の音声認識文字
列に対応するキャプション文字列を決定する。この結果
により、センテンス先頭時刻へのキャプション文字列の
関連付けの精度を向上することができる。
Next, the management data generating means 5 sequentially compares the first speech recognition character string in the speech recognition character string list with the caption character string in the caption character string list, and extracts the caption character string having the largest number of matching characters. By doing so, a caption character string corresponding to the first voice recognition character string in the voice recognition character string list is determined. As a result, the accuracy of associating the caption character string with the sentence head time can be improved.

【0061】音声認識文字列とキャプション文字列とを
照合するとき、第3の実施形態のようにタイムコードを
使用してキャプション文字列の検索範囲を限定すること
で、照合の効率を高めても良い。
When collating the voice recognition character string with the caption character string, the search range of the caption character string is limited using the time code as in the third embodiment, so that the collation efficiency can be improved. good.

【0062】音声認識文字列リストのm(2〜)番目の
タイムコードについても同様な処理を繰り返し、キャプ
ション文字列取得手段2で生成されたキャプション文字
列を音声認識文字列リストに記述されている各時刻に割
り当てることにより、センテンスとキャプション文字列
との関連付けを記述した教材管理データを生成し、教材
データ蓄積手段7に蓄積する。
The same processing is repeated for the m (2) -th time code in the voice recognition character string list, and the caption character string generated by the caption character string obtaining means 2 is described in the voice recognition character string list. By assigning to each time, teaching material management data describing the association between a sentence and a caption character string is generated and stored in the teaching material data storage means 7.

【0063】教材データ出力手段8は、教材データ蓄積
手段7より、符号化音声データ、符号化映像データ及び
教材管理データを読み出し、教材実行装置10の教材デー
タ入力手段9に送る。教材実行手段10の動作は、第3の
実施形態と同じである。
The teaching material data output means 8 reads out the encoded audio data, the encoded video data and the teaching material management data from the teaching material data storage means 7 and sends them to the teaching material data input means 9 of the teaching material execution device 10. The operation of the teaching material executing means 10 is the same as that of the third embodiment.

【0064】このように、このシステムでは、音声認識
により生成した文字列とキャプション文字列とを照合す
ることにより、センテンスとキャプション文字列との関
連付けの精度を向上することができる。
As described above, in this system, the accuracy of the association between the sentence and the caption character string can be improved by collating the character string generated by the speech recognition with the caption character string.

【0065】(第5の実施形態)第5の実施形態の語学
学習システムでは、センテンスに同期して静止画、付加
文字列、付加音声などが表示される語学学習教材を作成
する。
(Fifth Embodiment) In the language learning system according to the fifth embodiment, a language learning teaching material in which a still image, an additional character string, an additional voice, and the like are displayed in synchronization with a sentence is created.

【0066】このシステムでは、図5に示すように、教
材作成装置80が、静止画データ、付加文字列データまた
は付加音声データを管理データ生成手段5に入力する付
加データ入力手段15を具備している。その他の構成は第
2の実施形態(図2)と変わりがない。
In this system, as shown in FIG. 5, the teaching material creating device 80 includes an additional data input unit 15 for inputting still image data, additional character string data, or additional audio data to the management data generating unit 5. I have. Other configurations are the same as those of the second embodiment (FIG. 2).

【0067】以下、その動作について説明する。Hereinafter, the operation will be described.

【0068】基本的な動作は第2の実施形態と同じであ
り、キャプション文字列取得手段2、音声符号化手段
6、映像符号化手段12、無音検出手段3及びセンテンス
分割手段4は、第2の実施形態と同じように動作する。
The basic operation is the same as that of the second embodiment. The caption character string acquiring means 2, the audio encoding means 6, the video encoding means 12, the silence detecting means 3, and the sentence dividing means 4 The operation is the same as that of the first embodiment.

【0069】管理データ生成手段5は、第2の実施形態
と同様に、センテンスとキャプション文字列との関連付
けを記述した教材管理データを生成する。
As in the second embodiment, the management data generating means 5 generates teaching material management data describing the association between sentences and caption character strings.

【0070】また、管理データ生成手段5は、付加デー
タ入力手段15により入力された静止画データ、付加文字
列データまたは付加音声データをセンテンスと関連付け
るため、これらのデータのファイル名などの情報を教材
管理データに追加する。
The management data generating means 5 associates the still image data, the additional character string data or the additional audio data inputted by the additional data input means 15 with the sentence. Add to management data.

【0071】管理データ生成手段5は、生成した教材管
理データを教材データ蓄積手段7に蓄積する。
The management data generating means 5 stores the generated teaching material management data in the teaching material data storage means 7.

【0072】教材データ出力手段8は、教材データ蓄積
手段7より、符号化音声データ、符号化映像データ、静
止画データ、付加文字列データ、付加音声データ及び管
理データを読み出し、教材実行装置の教材データ入力手
段9に送る。教材実行手段10では、教材管理データに基
づきセンテンスごとに符号化音声データ、符号化映像デ
ータ、付加音声データの再生とキャプション文字列、静
止画データ、付加文字列データの表示とを行うことによ
り、教材を用いた語学学習を実行する。
The teaching material data output means 8 reads the coded audio data, coded video data, still image data, additional character string data, additional audio data and management data from the teaching material data storage means 7, and outputs the teaching material of the teaching material execution device. Send to data input means 9. In the teaching material executing means 10, by playing the encoded audio data, encoded video data, additional audio data and displaying the caption character string, still image data, and additional character string data for each sentence based on the educational material management data, Perform language learning using teaching materials.

【0073】なお、第3の実施形態または第4の実施形
態のシステムの教材生成装置に付加データ入力手段15を
追加しても良い。
The additional data input means 15 may be added to the teaching material generating device of the system according to the third or fourth embodiment.

【0074】このように、このシステムでは、センテン
スに静止画データ、付加文字列データ、付加音声データ
を付加して、センテンスに同期して映像、音声、キャプ
ション文字列、静止画、付加文字列、付加音声を表示ま
たは再生する教材を作成することができ、また、その教
材を用いて語学学習を実行することができる。
As described above, in this system, the still image data, the additional character string data, and the additional audio data are added to the sentence, and the video, audio, caption character string, still image, additional character string, A teaching material for displaying or reproducing the additional voice can be created, and language learning can be performed using the teaching material.

【0075】(第6の実施形態)第6の実施形態の語学
学習システムでは、音声聞き取り練習のための語学学習
教材を生成する。
(Sixth Embodiment) In the language learning system according to the sixth embodiment, a language learning material for voice listening practice is generated.

【0076】このシステムでは、図6に示すように、教
材作成装置80が、キャプション文字列の一部の単語に不
可視属性を設定するキャプション文字列編集手段16を具
備している。キャプション文字列編集手段16で設定され
た不可視属性は管理データ生成手段5に送られて、教材
管理データに反映される。その他の構成は、第2の実施
形態(図2)と変わりがない。
In this system, as shown in FIG. 6, the teaching material creating device 80 includes a caption character string editing means 16 for setting an invisible attribute to some words of the caption character string. The invisible attribute set by the caption character string editing unit 16 is sent to the management data generation unit 5 and reflected on the teaching material management data. Other configurations are the same as those of the second embodiment (FIG. 2).

【0077】以下、その動作について説明する。Hereinafter, the operation will be described.

【0078】基本的な動作は第2の実施形態と同じであ
り、キャプション文字列取得手段2、音声符号化手段
6、映像符号化手段12、無音検出手段3及びセンテンス
分割手段4は、第2の実施形態と同じように動作する。
The basic operation is the same as that of the second embodiment. The caption character string obtaining means 2, the audio coding means 6, the video coding means 12, the silence detecting means 3, and the sentence dividing means 4 The operation is the same as that of the first embodiment.

【0079】管理データ生成手段5は、第2の実施形態
と同様に、センテンスとキャプション文字列との関連付
けを記述した教材管理データを生成する。
As in the second embodiment, the management data generating means 5 generates teaching material management data describing the association between sentences and caption character strings.

【0080】また、管理データ生成手段5は、キャプシ
ョン文字列編集手段16からの指示により、キャプション
文字列の一部の文字列に不可視属性を設定する。
Further, the management data generating means 5 sets an invisible attribute to a part of the caption character string in accordance with an instruction from the caption character string editing means 16.

【0081】管理データ生成手段5は、こうして生成し
た教材管理データを教材データ蓄積手段7に蓄積する。
The management data generation means 5 accumulates the teaching material management data thus generated in the teaching material data storage means 7.

【0082】教材データ出力手段8は、教材データ蓄積
手段7より、符号化音声データ、符号化映像データ及び
教材管理データを読み出し、教材実行装置の教材データ
入力手段9に送る。教材実行手段10では、教材管理デー
タに基づきセンテンスごとに符号化音声データの再生と
キャプション文字列の表示とを行うことにより、教材を
用いた語学学習を実行する。このとき不可視属性が設定
された文字列を表示しないことにより、音声聞き取り練
習のための穴埋め問題の実行ができる。
The teaching material data output means 8 reads the coded audio data, the coded video data and the teaching material management data from the teaching material data storage means 7 and sends them to the teaching material data input means 9 of the teaching material execution device. The teaching material executing means 10 executes language learning using the teaching material by reproducing encoded voice data and displaying a caption character string for each sentence based on the teaching material management data. At this time, by not displaying the character string to which the invisible attribute is set, it is possible to execute a fill-in-the-blank question for voice listening practice.

【0083】なお、第3、第4または第5の実施形態の
システムの教材作成装置にキャプション文字列編集手段
16を追加してもよい。
The caption character string editing means is provided in the teaching material creating device of the system according to the third, fourth or fifth embodiment.
16 may be added.

【0084】このように、このシステムでは、キャプシ
ョン文字列に対して簡単な編集操作を行うだけで、音声
聞き取り練習のための穴埋め問題を生成することがで
き、また、その教材を用いて音声聞き取り学習を実行す
ることができる。
As described above, in this system, it is possible to generate a fill-in-the-blank exercise for voice listening practice only by performing a simple editing operation on a caption character string. Learning can be performed.

【0085】(第7の実施形態)第7の実施形態の語学
学習システムでは、音声聞き取り練習用の教材を用いて
効果的な語学学習を実行することができる。
(Seventh Embodiment) In the language learning system according to the seventh embodiment, an effective language learning can be performed by using a teaching material for voice listening practice.

【0086】このシステムでは、図7に示すように、教
材実行装置90が、穴埋め問題の回答を入力する回答入力
手段17と、入力された回答と正解とを照合する回答照合
手段18とを具備している。その他の構成は第6の実施形
態(図6)と変わりがない。以下、その動作について説
明する。
In this system, as shown in FIG. 7, the teaching material executor 90 includes an answer input unit 17 for inputting an answer to a fill-in-the-blank question, and an answer matching unit 18 for checking the input answer for a correct answer. are doing. Other configurations are the same as in the sixth embodiment (FIG. 6). Hereinafter, the operation will be described.

【0087】教材作成装置80の動作は、第6の実施形態
と同じであり、教材データ蓄積手段7に、符号化音声デ
ータと、符号化映像データと、一部の文字列に不可視属
性が設定された教材管理データとが蓄積される。
The operation of the teaching material creating device 80 is the same as that of the sixth embodiment, and the invisible attribute is set in the teaching material data storage means 7 for coded audio data, coded video data, and some character strings. The learned teaching material management data is accumulated.

【0088】教材データ出力手段8は、教材データ蓄積
手段7より、符号化音声データ、符号化映像データ及び
教材管理データを読み出し、教材実行装置90の教材デー
タ入力手段9に送る。
The teaching material data output means 8 reads the encoded audio data, the encoded video data and the teaching material management data from the teaching material data storage means 7 and sends them to the teaching material data input means 9 of the teaching material execution device 90.

【0089】教材実行手段10では、教材管理データに基
づきセンテンスごとに符号化音声データの再生とキャプ
ション文字列の表示とを行うことにより、教材を用いた
語学学習を実行する。このとき不可視属性が設定された
文字列を表示しないことにより、音声聞き取り練習のた
めの穴埋め問題の実行ができる。
The teaching material executing means 10 executes language learning using the teaching material by reproducing encoded voice data and displaying a caption character string for each sentence based on the teaching material management data. At this time, by not displaying the character string to which the invisible attribute is set, it is possible to execute a fill-in-the-blank question for voice listening practice.

【0090】一方、学習者は、回答入力手段17により、
問題の回答を入力する。回答照合手段18は、入力された
回答とキャプション文字列内の不可視属性の設定されて
いる文字列とを照合し、正答または誤答の判定をし、表
示手段11は、正誤判定結果と正答である不可視属性の設
定されている文字列を表示する。
On the other hand, the learner uses the answer input means 17 to
Enter the answer to the question. The answer matching means 18 compares the input answer with the character string set with the invisible attribute in the caption character string to determine whether the answer is correct or incorrect, and the display means 11 determines whether the answer is correct or incorrect. Displays a character string with a certain invisible attribute set.

【0091】このように、このシステムでは、学習者が
センテンスを繰り返し聞きながら、音声聞き取り練習の
ための穴埋め問題の回答入力ができ、その正誤判定結果
及び正答を表示できる。
As described above, in this system, the learner can repeatedly input the answer of the filling-in-the-blank question for the voice listening practice while repeatedly listening to the sentence, and can display the correct / incorrect judgment result and the correct answer.

【0092】(第8の実施形態)第8の実施形態の語学
学習システムでは、学習者の回答及び正誤判定結果の収
集が可能である。
(Eighth Embodiment) In the language learning system according to the eighth embodiment, it is possible to collect the learner's answer and the correctness / incorrectness determination result.

【0093】このシステムでは、図8に示すように、教
材実行装置90が、学習者の回答及び正誤判定結果を送出
する回答データ出力手段19を具備し、また、教材作成装
置80が、各教材実行装置90から送られた回答データを収
集する回答データ収集手段20を具備している。その他の
構成は第7の実施形態(図7)と変わりがない。
In this system, as shown in FIG. 8, the teaching material execution device 90 includes an answer data output unit 19 for sending a learner's answer and the result of correct / incorrect judgment. An answer data collecting means 20 for collecting answer data sent from the execution device 90 is provided. Other configurations are the same as those of the seventh embodiment (FIG. 7).

【0094】以下、その動作について説明する。Hereinafter, the operation will be described.

【0095】基本的な動作は第7の実施形態と同じであ
り、教材作成装置80は、音声聞き取り練習用の穴埋め問
題を作成し、教材実行装置90では、この教材を用いて語
学学習が実行され、学習者が回答入力手段17から回答を
入力すると、回答照合手段18が、入力された回答とキャ
プション文字列内の不可視属性の設定されている文字列
とを照合し、正答または誤答の判定をし、表示手段11
に、正誤判定結果と正答である不可視属性の設定されて
いる文字列とが表示される。
The basic operation is the same as that of the seventh embodiment. The teaching material creating device 80 creates a filling-in-the-blank question for voice listening practice, and the teaching material executing device 90 executes language learning using this teaching material. When the learner inputs an answer from the answer input means 17, the answer matching means 18 compares the input answer with the character string set to the invisible attribute in the caption character string, and determines whether the answer is correct or incorrect. Make a judgment and display means 11
In addition, a correct / incorrect judgment result and a character string having an invisible attribute as a correct answer are displayed.

【0096】回答データ出力手段19は、回答入力手段17
より送られてきた回答と、回答照合手段18の生成した正
誤判定結果とを教材作成装置80内の回答データ収集手段
20に送る。回答データ収集手段20は、複数の教材実行装
置90から送られてきた回答と正誤判定結果のリストを作
成する。
The answer data output means 19 is
The response data sent from the response data collection unit 80 in the teaching material creating device
Send to 20. The answer data collecting means 20 creates a list of the answers sent from the plurality of teaching material execution devices 90 and the results of the right / wrong determination.

【0097】このように、このシステムでは、音声聞き
取り練習のための穴埋め問題の回答及び正誤判定結果を
収集し、学習履歴データを生成することができる。
As described above, in this system, learning history data can be generated by collecting answers to hole-filling questions for voice listening practice and correct / incorrect judgment results.

【0098】[0098]

【発明の効果】以上の説明から明らかなように、本発明
の語学学習教材作成装置は、映像、音声及びキャプショ
ンが記録されたビデオテープから、センテンスに同期し
て、音声や映像とキャプション文字列とを表示する教材
を作成することができる。
As is apparent from the above description, the language learning teaching material creating apparatus of the present invention is capable of synchronizing with a sentence a voice, a video and a caption character string from a video tape on which a video, a voice and a caption are recorded. The teaching material which displays and can be created.

【0099】また、付加データ入力手段を設けた装置で
は、ビデオテープに記録された情報以外に、静止画、付
加文字列、付加音声を教材に加えることができる。
Further, in the apparatus provided with the additional data input means, a still image, an additional character string, and an additional audio can be added to the teaching material in addition to the information recorded on the video tape.

【0100】また、キャプション文字列編集手段を設け
た装置では、キャプション文字列の一部の単語に不可視
属性を設定して、音声聞き取り練習用の問題を作成する
ことができる。
In the apparatus provided with the caption character string editing means, it is possible to set an invisible attribute to some words of the caption character string, thereby creating a practice for voice listening practice.

【0101】また、本発明の語学学習システムでは、教
材実行装置において、語学学習教材作成装置で作成され
た教材を用いて効果的な語学学習を実行することができ
る。教材実行装置に回答入力手段及び回答照合手段を設
けたシステムでは、学習者がセンテンスを繰り返し聞き
ながら、音声聞き取り問題の回答入力ができ、その正誤
判定結果及び正答を表示できるという効果を有する。
Further, in the language learning system of the present invention, an effective language learning can be executed in the teaching material execution device by using the teaching material created by the language learning teaching material creating device. The system in which the teaching material execution device is provided with the answer input means and the answer collation means has an effect that the learner can input the answer of the voice listening problem while repeatedly listening to the sentence, and can display the correctness judgment result and the correct answer.

【0102】さらに、それぞれの教材実行装置内に回答
データ出力手段を設け、教材作成装置内に回答データ収
集手段を設けたシステムでは、複数台の教材実行装置で
入力された学習者の回答及び正誤判定結果の収集ができ
るという効果を有する。
Further, in a system in which answer data output means is provided in each teaching material execution device and answer data collecting means is provided in the teaching material creating device, the learner's answer and correct / incorrect information input by a plurality of teaching material execution devices are provided. This has the effect that the judgment results can be collected.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の第1の実施形態における語学学習シス
テムの構成を示すブロック図、
FIG. 1 is a block diagram showing a configuration of a language learning system according to a first embodiment of the present invention;

【図2】本発明の第2の実施形態における語学学習シス
テムの構成を示すブロック図、
FIG. 2 is a block diagram showing a configuration of a language learning system according to a second embodiment of the present invention;

【図3】本発明の第3の実施形態における語学学習シス
テムの構成を示すブロック図、
FIG. 3 is a block diagram showing a configuration of a language learning system according to a third embodiment of the present invention;

【図4】本発明の第4の実施形態における語学学習シス
テムの構成を示すブロック図、
FIG. 4 is a block diagram showing a configuration of a language learning system according to a fourth embodiment of the present invention;

【図5】本発明の第5の実施形態における語学学習シス
テムの構成を示すブロック図、
FIG. 5 is a block diagram showing a configuration of a language learning system according to a fifth embodiment of the present invention;

【図6】本発明の第6の実施形態における語学学習シス
テムの構成を示すブロック図、
FIG. 6 is a block diagram showing a configuration of a language learning system according to a sixth embodiment of the present invention;

【図7】本発明の第7の実施形態における語学学習シス
テムの構成を示すブロック図、
FIG. 7 is a block diagram showing a configuration of a language learning system according to a seventh embodiment of the present invention;

【図8】本発明の第8の実施形態における語学学習シス
テムの構成を示すブロック図である。
FIG. 8 is a block diagram showing a configuration of a language learning system according to an eighth embodiment of the present invention.

【符号の説明】[Explanation of symbols]

1 ビデオテープ再生装置 2 キャプション文字列取得手段 3 無音検出手段 4 センテンス分割手段 5 管理データ生成手段 6 音声符号化手段 7 教材データ蓄積手段 8 教材データ出力手段 9 教材データ入力手段 10 教材実行手段 11 表示手段 12 映像符号化手段 13 タイムコード取得手段 14 音声認識手段 15 付加データ入力手段 16 キャプション文字列編集手段 17 回答入力手段 18 回答照合手段 19 回答データ出力手段 20 回答データ収集手段 80 教材作成装置 90 教材実行装置 DESCRIPTION OF SYMBOLS 1 Video tape reproducing device 2 Caption character string acquisition means 3 Silence detection means 4 Sentence division means 5 Management data generation means 6 Voice encoding means 7 Teaching material data storage means 8 Teaching material data output means 9 Teaching material data input means 10 Teaching material execution means 11 Display Means 12 Video encoding means 13 Time code acquisition means 14 Voice recognition means 15 Additional data input means 16 Caption character string editing means 17 Reply input means 18 Reply collation means 19 Reply data output means 20 Reply data collection means 80 Teaching material creation device 90 Teaching materials Execution device

───────────────────────────────────────────────────── フロントページの続き (72)発明者 蓬田 康雄 神奈川県横浜市港北区綱島東四丁目3番1 号 松下通信工業株式会社内 Fターム(参考) 2C028 AA03 BA05 BB04 BB06 BC01 BC02 BD02 CA08 CB13 DA04 ────────────────────────────────────────────────── ─── Continuing on the front page (72) Yasuo Yokota 3-1-4 Tsunashimahigashi, Kohoku-ku, Yokohama-shi, Kanagawa Prefecture F-term (reference) 2C028 AA03 BA05 BB04 BB06 BC01 BC02 BD02 CA08 CB13 DA04

Claims (9)

【特許請求の範囲】[Claims] 【請求項1】 再生されたビデオテープの映像信号から
キャプション文字列を取り出すキャプション文字列取得
手段と、前記ビデオテープの音声信号から一定時間の無
音区間を検出する無音検出手段と、前記無音区間の時刻
を記憶することにより音声のセンテンス分割を行うセン
テンス分割手段と、分割されたセンテンスにキャプショ
ン文字列を関連付けた教材管理データを生成する管理デ
ータ生成手段と、前記ビデオテープの音声信号を符号化
音声データに変換する音声符号化手段と、前記教材管理
データと前記符号化音声データとを組み合わせて教材デ
ータとして記録する教材データ蓄積手段と、前記教材デ
ータを出力する教材データ出力手段とを備え、センテン
スに同期して音声及びキャプション文字列を表示する語
学学習教材を作成することを特徴とする語学学習教材作
成装置。
1. A caption character string acquiring means for extracting a caption character string from a video signal of a reproduced video tape, a silence detecting means for detecting a silence section for a predetermined time from an audio signal of the video tape, Sentence dividing means for performing a sentence division of an audio by storing time, management data generating means for generating a teaching material management data in which a caption character string is associated with the divided sentence, and encoding the audio signal of the video tape into an encoded audio. A speech encoding means for converting the data into data, a teaching material data storage means for recording the teaching material data by combining the teaching material management data and the encoded speech data, and a teaching material data output means for outputting the teaching material data; Create language learning materials that display voice and caption strings in synchronization with A language learning material creation device characterized by the following.
【請求項2】 再生されたビデオテープの映像信号から
キャプション文字列を取り出すキャプション文字列取得
手段と、前記ビデオテープの音声信号から一定時間の無
音区間を検出する無音検出手段と、前記無音区間の時刻
を記憶することにより音声のセンテンス分割を行うセン
テンス分割手段と、分割されたセンテンスにキャプショ
ン文字列を関連付けた教材管理データを生成する管理デ
ータ生成手段と、前記ビデオテープの音声信号を符号化
音声データに変換する音声符号化手段と、前記ビデオテ
ープの映像信号を符号化映像データに変換する映像符号
化手段と、前記教材管理データと前記符号化音声データ
と前記符号化映像データとを組み合わせて教材データと
して記録する教材データ蓄積手段と、前記教材データを
出力する教材データ出力手段とを備え、センテンスに同
期して、音声、映像及びキャプション文字列を表示する
語学学習教材を作成することを特徴とする語学学習教材
作成装置。
2. A caption character string acquiring means for extracting a caption character string from a video signal of a reproduced video tape, a silence detecting means for detecting a silence section for a predetermined time from an audio signal of the video tape, Sentence dividing means for performing a sentence division of an audio by storing time, management data generating means for generating a teaching material management data in which a caption character string is associated with the divided sentence, and encoding the audio signal of the video tape into an encoded audio. Audio encoding means for converting to data, video encoding means for converting the video signal of the video tape to encoded video data, and combining the teaching material management data, the encoded audio data, and the encoded video data. Teaching material data storage means for recording as teaching material data, and teaching material data for outputting the teaching material data A language learning teaching material creating device that includes an output unit and creates a language learning teaching material that displays a voice, a video, and a caption character string in synchronization with a sentence.
【請求項3】 前記ビデオテープを再生するビデオテー
プ再生装置からタイムコードを取得するタイムコード取
得手段を具備し、前記管理データ生成手段内で、センテ
ンスの先頭時刻とキャプション文字列の発生時刻とを比
較し、さらにセンテンス長とキャプション文字数とを比
較することにより、前記教材管理データにおけるセンテ
ンスとキャプション文字列との関連付けの精度を向上さ
せたことを特徴とする請求項1または2に記載の語学学
習教材作成装置。
3. A time code acquiring means for acquiring a time code from a video tape reproducing device for reproducing the video tape, wherein a start time of a sentence and a generation time of a caption character string are determined in the management data generating means. 3. The language learning according to claim 1, wherein the accuracy of the association between the sentence and the caption character string in the teaching material management data is improved by comparing the sentence length and the number of caption characters. Teaching material creation device.
【請求項4】 前記ビデオテープの再生音声を文字列に
変換する音声認識手段を具備し、前記管理データ生成手
段内でキャプション文字列と前記音声認識手段から入力
される文字列とを照合することにより、前記教材管理デ
ータにおけるセンテンスとキャプション文字列との関連
付けの精度を向上させたことを特徴とする請求項1、2
または3に記載の語学学習教材作成装置。
4. A voice recognition unit for converting a reproduced voice of the video tape into a character string, wherein the management data generation unit compares a caption character string with a character string input from the voice recognition unit. The accuracy of associating a sentence and a caption character string in the learning material management data is improved.
Or the language learning teaching material preparation device according to 3.
【請求項5】 付加静止画データ、付加文字列データま
たは付加音声データを入力する付加データ入力手段を具
備し、前記管理データ生成手段を経由して、前記教材蓄
積手段内にこれらの付加データを蓄積し、キャプション
文字列の表示に併せて、付加された静止画、文字列また
は音声を表示する語学学習教材を作成することを特徴と
する請求項1または2に記載の語学学習教材作成装置。
5. An additional data input unit for inputting additional still image data, additional character string data, or additional audio data, and stores the additional data in the teaching material storage unit via the management data generation unit. 3. The language learning teaching material creating apparatus according to claim 1, wherein the language learning teaching material is stored and displayed, along with the display of the caption character string, to display the added still image, character string, or voice.
【請求項6】 前記教材管理データに含まれるキャプシ
ョン文字列の一部の単語に不可視属性を設定するキャプ
ション文字列編集手段を具備し、不可視属性が設定され
た単語の文字列を表示しない音声聞き取り練習用の問題
を作成することを特徴とする請求項1または2に記載の
語学学習教材作成装置。
6. A voice listening device comprising caption character string editing means for setting an invisible attribute to a part of words of a caption character string included in the teaching material management data, wherein the character string of the word for which the invisible attribute is set is not displayed. 3. The language learning teaching material creation device according to claim 1, wherein a practice exercise is created.
【請求項7】 請求項1乃至6のいずれかに記載の語学
学習教材作成装置と、前記語学学習教材作成装置で作成
された教材データを用いて語学学習を実行する教材実行
装置とを備え、前記教材実行装置が、前記語学学習教材
作成装置から教材データを入力する教材データ入力手段
と、前記教材データの再生を実行する教材実行手段と、
教材を表示する表示手段とを具備することを特徴とする
語学学習システム。
7. A language learning material creating device according to claim 1, comprising: a language material learning device for performing language learning using the learning material data created by the language learning material creating device. A teaching material data input unit configured to input the teaching material data from the language learning teaching material creating device, and a teaching material executing unit configured to execute the reproduction of the teaching material data;
A language learning system, comprising: display means for displaying teaching materials.
【請求項8】 請求項6に記載の語学学習教材作成装置
と、前記語学学習教材作成装置で作成された教材データ
を用いて語学学習を実行する教材実行装置とを備え、前
記教材実行装置が、前記語学学習教材作成装置から教材
データを入力する教材データ入力手段と、前記教材デー
タの再生を実行する教材実行手段と、教材を表示する表
示手段と、学習者が回答を入力するための回答入力手段
と、学習者が入力した回答と不可視属性の設定されたキ
ャプション文字列とを照合する回答照合手段とを具備
し、学習者が音声を聞き取りながら、音声聞き取り練習
用問題の回答を入力することができ、その正誤判定結果
及び正答を表示できることを特徴とする語学学習システ
ム。
8. A language learning teaching material creating device according to claim 6, and a teaching material executing device that executes language learning using the teaching material data created by the language learning teaching material creating device. A teaching material data input unit for inputting teaching material data from the language learning teaching material creating device; a teaching material executing unit for executing the reproduction of the teaching material data; a display unit for displaying the teaching material; and an answer for the learner to input an answer. Input means and answer collation means for collating the answer inputted by the learner with the caption character string set with the invisible attribute are provided, and the learner listens to the speech, and inputs the answer to the voice listening practice problem. A language learning system characterized by being able to display the correctness judgment result and the correct answer.
【請求項9】 前記教材実行装置が、前記回答入力手段
から入力された回答を前記語学学習教材作成装置に出力
する回答データ出力手段を具備し、前記語学学習教材作
成装置が、複数台の前記教材実行装置に接続して、それ
ぞれの教材実行装置から出力された回答データを収集す
る回答データ収集手段を具備することを特徴とする請求
項8に記載の語学学習システム。
9. The learning material execution device includes answer data output means for outputting the answer input from the answer input means to the language learning material creation device, and the language learning material creation device includes a plurality of the learning device. 9. The language learning system according to claim 8, further comprising answer data collecting means connected to the teaching material execution device and collecting answer data output from each of the teaching material execution devices.
JP11209806A 1999-07-23 1999-07-23 Language learning teaching material preparing device and language learning system Pending JP2001034151A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP11209806A JP2001034151A (en) 1999-07-23 1999-07-23 Language learning teaching material preparing device and language learning system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP11209806A JP2001034151A (en) 1999-07-23 1999-07-23 Language learning teaching material preparing device and language learning system

Publications (1)

Publication Number Publication Date
JP2001034151A true JP2001034151A (en) 2001-02-09

Family

ID=16578921

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11209806A Pending JP2001034151A (en) 1999-07-23 1999-07-23 Language learning teaching material preparing device and language learning system

Country Status (1)

Country Link
JP (1) JP2001034151A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003056405A2 (en) * 2001-12-08 2003-07-10 Korea Media Co., Ltd. Portable cd player displaying caption data and audio cd having caption index data and system for providing caption data
WO2007069512A1 (en) * 2005-12-15 2007-06-21 Sharp Kabushiki Kaisha Information processing device, and program
EP2263984A2 (en) 2001-05-28 2010-12-22 Nippon Shokubai Co., Ltd. Cement admixture and cement composition
CN107396192A (en) * 2017-07-28 2017-11-24 苏州蓝越软件有限公司 A kind of multimedia video data quickly selects play system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2263984A2 (en) 2001-05-28 2010-12-22 Nippon Shokubai Co., Ltd. Cement admixture and cement composition
WO2003056405A2 (en) * 2001-12-08 2003-07-10 Korea Media Co., Ltd. Portable cd player displaying caption data and audio cd having caption index data and system for providing caption data
WO2003056405A3 (en) * 2001-12-08 2003-10-09 Korea Media Co Ltd Portable cd player displaying caption data and audio cd having caption index data and system for providing caption data
WO2007069512A1 (en) * 2005-12-15 2007-06-21 Sharp Kabushiki Kaisha Information processing device, and program
CN107396192A (en) * 2017-07-28 2017-11-24 苏州蓝越软件有限公司 A kind of multimedia video data quickly selects play system

Similar Documents

Publication Publication Date Title
US20200286396A1 (en) Following teaching system having voice evaluation function
CN109275046B (en) Teaching data labeling method based on double video acquisition
US9812028B1 (en) Automated generation and presentation of lessons via digital media content extraction
US20180061256A1 (en) Automated digital media content extraction for digital lesson generation
CN111538851B (en) Method, system, equipment and storage medium for automatically generating demonstration video
WO2018227761A1 (en) Correction device for recorded and broadcasted data for teaching
JP6172769B2 (en) Understanding support system, understanding support server, understanding support method, and program
CN104408983A (en) Recording and broadcasting equipment-based intelligent teaching information processing device and method
CN111986656B (en) Teaching video automatic caption processing method and system
CN111711834B (en) Recorded broadcast interactive course generation method and device, storage medium and terminal
CN111522970A (en) Exercise recommendation method, exercise recommendation device, exercise recommendation equipment and storage medium
WO2019019406A1 (en) Teaching recording data updating device
Che et al. Automatic online lecture highlighting based on multimedia analysis
CN111966839B (en) Data processing method, device, electronic equipment and computer storage medium
JP4651981B2 (en) Education information management server
KR102185387B1 (en) Sound recognition subtitle production system and control method thereof
JP2016224283A (en) Conversation training system for foreign language
JP2001034151A (en) Language learning teaching material preparing device and language learning system
JP4085015B2 (en) STREAM DATA GENERATION DEVICE, STREAM DATA GENERATION SYSTEM, STREAM DATA GENERATION METHOD, AND PROGRAM
CN112102670B (en) Teaching auxiliary system based on voice control and working method thereof
CN114944089A (en) Remote education training system and method based on user behavior analysis
JP2000206987A (en) Voice recognition device
CN113099312A (en) Teaching video playing system
KR101934393B1 (en) System for Instructional visual content using Automatically convert images from electronic documents
TW202103119A (en) Knowledge point mark generation system and method thereof