KR20140074459A - Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data - Google Patents

Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data

Info

Publication number
KR20140074459A
KR20140074459A KR1020120142426A KR20120142426A KR20140074459A KR 20140074459 A KR20140074459 A KR 20140074459A KR 1020120142426 A KR1020120142426 A KR 1020120142426A KR 20120142426 A KR20120142426 A KR 20120142426A KR 20140074459 A KR20140074459 A KR 20140074459A
Authority
KR
South Korea
Prior art keywords
word
pronunciation
data
learner
words
Prior art date
Application number
KR1020120142426A
Other languages
Korean (ko)
Inventor
주홍찬
Original Assignee
주홍찬
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주홍찬 filed Critical 주홍찬
Priority to KR1020120142426A priority Critical patent/KR20140074459A/en
Publication of KR20140074459A publication Critical patent/KR20140074459A/en

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/06—Foreign languages

Abstract

The present invention relates to an apparatus and a method for learning words using images, syllables of words, and native speaker′s pronunciation data. Provided is the apparatus for learning words using images, syllables of words and native speaker′s pronunciation data, comprising a storage unit for storing word data, image data of words, native speaker′s pronunciation images and pronunciation waveform data, and pronunciation differentiation sound source data; an input unit for selecting words and inputting words; a display unit for displaying words whose syllables are differentiated if learning of a word selected by a learner starts, and for displaying image data and word data of the word displayed; an audio processing unit for inputting the learner′s voice if the learner pronounces the word displayed in the process of learning words; a voice analysis module unit and a voice waveform processing unit for analyzing the voice inputted through the audio processing unit and transforming the voice into a waveform, and conducting comparative analysis of similarity between the voice inputted and the waveform of the native speaker′s pronunciation data; a camera unit for collecting images of lip shapes when the learner pronounces words; an image processing unit for standardizing the focus and the size of images of lip shapes inputted from the camera unit; and a control unit for displaying images by comparing the standardized images of lip shapes when the learner pronounces the words from the image processing unit with images when the native speaker pronounces the words stored in the storage unit, and for displaying waveform processed through the voice analysis module unit and the voice waveform processing unit and the waveform of the native speaker′s pronunciation and comparing their similarity so as to control to display a phrase, good, if the similarity is at least 50% and a phrase, bad, if the similarity is less than 50%.

Description

단어의 음절와 이미지 데이터 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법 {Apparatus and method for learning word by using native speaker’s pronunciation data and syllable of a word and image data}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a word learning apparatus and method using word syllables, image data, and pronunciation data of a native speaker,

본 발명은 단어의 음절과 이미지 데이터 및 원어민의 "단어 발음 시 얼굴 영상, 단어 발음 시 음성, 단어 발음에 따른 음성 파형, 단어 발음 시 얼굴 근육 변화 및 입술의 모양”(이하 “발음 데이터”라고 함)을 이용한 단어 학습장치 및 방법에 관한 것으로, 보다 상세하게는 학습하고자 하는 단어가 음절이 구분되어 표시되고, “단어와 관련된 액센트, 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻”(이하 “단어 데이터”)이 표시되고, 해당 단어를 연상시킬 수 있는 “이미지 또는 애니메이션 또는 영상”(이하 “이미지 데이터”라고 함)을 함께 제공하며, 음절로 구분되어 표시된 단어에 대한 원어민의 발음 시 영상이 재생되도록 하고, 원어민 발음 영상이 재생될 때 음절마다 다른 색깔을 표시하고, “전자음이나 박수소리 같은 음절을 구분하기 위한 표시 음원”(“이하 “음절구분 음원데이터“)이 출력되며, 학습자의 단어 발음에 따른 음성과 영상을 입력받아 원어민 발음의 입술 모양 재생 및 학습자 발음의 입술 모양 재생 화면을 표시하고, 음성 파형 비교 화면을 표시하여 효과적인 단어 학습을 하기 위한, 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습 장치 및 방법에 관한 것이다.The present invention relates to a syllable and image data of a word and a word of the native speaker, such as a face image, a voice in word pronunciation, a voice waveform in word pronunciation, a facial muscle change in word pronunciation, and a lip shape The present invention relates to a word learning apparatus and method using a word, and more specifically, a word to be learned is syllabically divided and displayed as " meaning interpreted in a language of a country learning accents, pronunciation symbols, (Hereinafter referred to as " image data ") that can be associated with the word, and a pronunciation of a native speaker The syllable is reproduced, and when the native pronunciation image is reproduced, a different color is displayed for each syllable, and " syllable such as electronic tone or applause (Hereinafter referred to as " syllable-segmented sound source data ") is output, a voice and a video according to a learner's pronunciation of a word are input and a lip shape reproduction of a native speaker's pronunciation and a lip shape reproduction screen of a learner's pronunciation are displayed, To a word learning apparatus and method using syllable of an image and a word, and pronunciation data of a native speaker for displaying an audio waveform comparison screen and performing effective word learning.

최근 국제화의 추세에 따라 어학을 효율적으로 학습하기 위한 다양한 장치들이 개발되고 있는데, 일반적으로 카세트 플레이어나 MP3, PMP 등과 같은 휴대용 단말기를 이용한 학습방법이 주로 이용되고 있다.
Recently, various devices for learning language efficiently have been developed according to the tendency of internationalization. In general, learning methods using portable terminals such as cassette players, MP3, and PMP are mainly used.

한편, 외국어 단어 학습 교재는 외국어를 공부하고자 하는 사람들이 사전을 찾는 불편을 겪지 않도록 하기 위하여 빈번하게 사용되는 중요한 외국어 단어를 정리한 것을 말한다. 종래의 외국어 단어 학습 교재는 외국어 단어와 발음기호 및 그 뜻이 기록되는 구조로 되어 있다.
On the other hand, the foreign language vocabulary learning material refers to an important foreign language vocabulary which is frequently used in order to prevent people who want to study a foreign language from experiencing the inconvenience of finding a dictionary. Conventional foreign language vocabulary learning materials are structured such that foreign words, pronunciation symbols and their meanings are recorded.

따라서, 학습자가 외국어 단어를 암기하려고 할 때는 가장 일반적으로 백지 또는 연습장에다 해당 단어를 10회 내지 20회 정도 연속 필사하거나 눈으로 수십 차례 읽는 등의 방법을 이용한다. 그런데, 상기 방법은 외국어 단어를 공부할 때 동일 단어를 기계적으로 반복해서 쓰고 수십 차례 다시 읽고 암기해야 하는 인내와 노력이 요구된다.
Therefore, when a learner tries to memorize a foreign language word, the most commonly used method is to write the word in blank paper or a driving range continuously 10 to 20 times or read it dozens of times with eyes. However, the above method requires patience and effort to memorize and read the same word repeated mechanically repeatedly several times when studying a foreign language word.

이에 따라, 외국어 단어를 접두사나 접미사 등으로 어휘 분석을 하거나 그 단어의 동의어와 반의어 혹은 파생어 등을 제시하여 암기하도록 하는 교재, 또는 단어의 발음을 청취하면서 공부할 수 있도록 하는 외국어 단어 녹음 테이프 및 교재도 시판되고 있다.
Accordingly, a textbook that analyzes a foreign language word by prefix or suffix, or suggests synonyms, antonyms, or derivatives of the word to memorize the word, or a foreign language word recording tape and textbook And is commercially available.

그러나, 상기 외국어 단어 학습 교재는 단어를 암기할 때 종이에 10회 내지 20회 반복해서 쓰는 지루함 등으로 인해 학습 능률이 저하되며 단순한 반복과정을 통해 암기된 단어는 일정기간이 지나면 망각되기 때문에 이를 다시 암기해야 하는 단점이 있다.
However, in the foreign language word learning material, when learning memorizing words, the learning efficiency is lowered due to the boredom which is repeated 10 to 20 times on the paper, etc., and the memorized words are simply forgotten after a certain period of time There is a disadvantage to memorize.

또한, 상기 어휘 분석에 의한 외국어 단어 학습 교재는 분석된 접두사나 접미사 등을 제외하면 단순히 나열된 알파벳을 기계적으로 암기해야 되므로 효과가 미미하고, 녹음 테이프 등에 의한 학습 방법은 청각적인 수단을 통해 외국어 단어를 학습한다는 것에 의미를 둘 수 있다 하더라도, 그 학습 효과가 크지 않아 반복 과정이 또다시 요구되므로 상기한 방법과 큰 차이 없는 인내와 노력을 들여야 하는 단점이 있다.In addition, the foreign language word learning material by the above lexical analysis has a small effect because it is necessary to memorize the alphabetically listed simply except for the analyzed prefix or suffix, Even if it can be meaningful to learn, there is a disadvantage that patience and effort must be paid without much difference from the above-mentioned method because the learning effect is not great and the repetition process is required again.

따라서, 상기한 문제점을 해결하기 위한 본 발명의 목적은, 단어를 음절로 구분하여 표시하도록하여 단어의 음절을 정확히 구별하는 효과적인 단어 학습이 가능하도록 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.
SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to solve the above-mentioned problems, and an object of the present invention is to provide a speech recognition apparatus and a speech recognition method using syllable words and syllable- And a word learning apparatus and method.

또한 본 발명의 목적은, 제공된 단어를 연상시킬 수 있는 이미지 데이터와 직관적으로 학습할 수 있는 단어 데이터를 함께 제공하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.
It is also an object of the present invention to provide a word learning apparatus and method using image data, word syllables, and pronunciation data of native speakers together with image data that can remind the provided word and word data that can be intuitively learned .

또한 본 발명의 목적은, 원어민의 발음 데이터가 재생될 때 음절마다 다른 색깔을 표시하고, 음절구분 음원데이터를 출력하여 음절을 정확히 구별하는 학습이 가능한, 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.
It is also an object of the present invention to provide a method and apparatus for displaying syllable words and syllable words and pronunciation data of a native speaker in which different colors are displayed for each syllable when pronunciation data of a native speaker is reproduced and a syllable- And a word learning apparatus and method using the same.

또한 본 발명의 목적은, 원어민의 발음 데이터와 학습자의 발음 데이터의 비교를 통해 학습자가 단어를 발음함에 있어 원어민의 발음과 유사해지도록 교정이 가능한, 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.
It is another object of the present invention to provide a speech recognition apparatus and a speech recognition method using the pronunciation data of a word and a syllable of a word and a native speaker in which a learner pronounces words by comparing the pronunciation data of a native speaker with the pronunciation data of a learner, And a word learning apparatus and method.

또한 본 발명의 목적은, 음성 파형의 비교를 통해 발음의 세기 및 강세의 위치를 세밀하게 체크할 수 있도록 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.
It is also an object of the present invention to provide a word learning apparatus and method using an image, a syllable of a word, and pronunciation data of a native speaker so that the strength of a pronunciation and the position of a strongness can be finely checked through comparison of a sound waveform.

또한 본 발명의 목적은, 원어민의 발음 데이터를 여성, 남성, 미국식 발음, 영국식 발음, 호주식 발음 등 여러가지 종류로 제공하여 폭 넓게 언어 학습을 하도록 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.It is another object of the present invention to provide a method and apparatus for providing pronunciation data of a native speaker in various types such as female, male, American, English, and phonetic pronunciation, And a word learning apparatus and method.

본 발명에 의한 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치는 단어 데이터, 단어의 이미지 데이터, 원어민 발음 음원, 영상 및 파형 데이터, 음절구분 음원데이터가 저장된 저장부;
A word learning apparatus using syllable of an image and a word and pronunciation data of a native speaker according to the present invention includes a storage unit storing word data, word image data, native speaker sound source, image and waveform data, and syllable classification sound source data;

단어 선택 및 단어 입력을 위한 입력부;
An input unit for word selection and word input;

선정된 단어의 학습이 시작되면 음절이 구분된 단어가 표시되고, 표시된 단어의 이미지 데이터와 단어 데이터가 표시되는 표시부;
A display unit displaying syllable-separated words when the learning of the selected word starts, and displaying image data and word data of the displayed words;

학습자가 단어 학습 시 표시된 단어를 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부;
An audio processing unit for receiving a learner's voice when a learner pronounces a word displayed at the time of word learning;

상기 오디오 처리부를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 발음 데이터의 파형과 유사도를 비교 분석하기 위한 하기 위한 음성 분석 모듈부 및 음성 파형 처리부;
A voice analysis module and a voice waveform processor for analyzing the voice input through the audio processor and converting the voice into a waveform and comparing and analyzing the waveform of the native pronunciation data with respect to the inputted voice;

학습자의 단어 발음 시 입 모양 영상을 수집하기 위한 카메라부;
A camera unit for collecting a mouth shape image when a learner pronounces a word;

상기 카메라부로부터 입력된 학습자의 단어 발음 시 입 모양 영상 데이터의 포커스와 사이즈를 규격화하기 위한 영상 처리부; 및
An image processing unit for normalizing a focus and a size of the mouth shape image data when the learner inputs words from the camera unit; And

상기 영상 처리부를 통해 규격화된 학습자의 단어 발음 시 입 모양 영상과 상기 저장부에 저장된 원어민의 단어 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부와 음성 파형 처리부를 통해 처리된 파형과 저장된 원어민의 발음 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 “good”, 50% 미만 유사 시 ”bad”를 표시하도록 제어하는 제어부를 포함하는 것을 특징으로 할 수 있다.
And a display unit for displaying a waveform of the waveform processed through the speech analysis module and the speech waveform processor and a stored speech signal of the native speaker stored in the storage unit, And a control unit for controlling the display unit to display a pronunciation waveform of the speech signal and to display "good" if the similarity is 50% or more and "bad" if the similarity is less than 50%.

또한, 상기 제어부가 인터넷 웹 브라우저의 표시되는 단어 중 상기 저장부에 저장된 단어와 일치하는 단어를 음절이 분리된 형태로 표시할 수 있도록 하는 유무선 네트워크부를 더 포함하는 것을 특징으로 할 수 있다.
The control unit may further include a wired / wireless network unit for displaying words in the storage unit of the internet web browser that are displayed in the storage unit in a form in which syllables are separated.

또한, 상기 제어부가 DMB 영어방송에서 나오는 단어 중 상기 저장부에 저장된 단어와 일치하는 단어를 음절이 분리된 형태로 표시할 수 있도록 하는 DMB 모듈부를 더 포함하는 것을 특징으로 할 수 있다.
The control unit may further include a DMB module for displaying a word corresponding to a word stored in the storage unit among the words included in the DMB English broadcast, in a syllable-separated form.

또한 상기 표시부의 레이어(layer)는 Home, Dic 및 Option 텝으로 구분되는 것을 특징으로 할 수 있다.
In addition, the layer of the display unit may be divided into Home, Dic, and Option tabs.

또한, 상기 Home 텝에는 학습자가 선택한 단어가 순차적으로 표시되며, 표시된 단어 관련 단어 데이터, 이미지 데이터, 원어민의 단어 발음 시 얼굴, 음절이 분리된 단어, 원어민의 단어 발음 시 입모양, 학습자의 단어 발음 시 얼굴 또는 입모양, 원어민의 음성 파형 및 학습자의 음성 파형, 음절구분 음원데이터 중 적어도 어느 하나를 표시하는 것을 특징으로 할 수 있다.
In addition, the Home tab displays the words selected by the learner in sequence, and displays word data related to the displayed words, image data, faces when the words of the native speaker are pronounced, words separated by syllables, At least one of a face or mouth shape, a voice waveform of a native speaker, a voice waveform of a learner, and syllable classification sound source data.

또한 상기 Option 텝은 단어의 이미지 데이터 표시 여부 선택과, 선택 음절 분리 재생 및 정상 재생 여부와 횟수 선택과, 음절단위 색깔표시 여부 선택과, 음절구분 음원데이터 재생 여부 선택과, 원어민의 단어 발음 시 영상 및 음성 재생과 학습자의 단어 발음 시 영상 및 음성 재생의 여부와 횟수 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 중 적어도 어느 하나를 포함하는 것을 특징으로 할 수 있다.
In addition, the Option tab is used to select whether to display image data of a word, select syllable separation playback and normal playback, select a number of syllables, select whether a syllable unit color is displayed, select whether syllable- Selection of accent marking, selection of pronunciation symbol selection, selection of gender of voice output, selection of pronunciation output of each country, pronunciation correction, and pronunciation correction. And a selection of a test mode.

또한 상기 제어부는 단어 암기 테스트에서 한글 텍스트, 영문 텍스트, 한글 음성 출력 및 영문 음성 출력 중 어느 하나로 문제를 제시하고 객관식으로 답을 선택할 수 있도록 표시하도록 제어하는 것을 특징으로 할 수 있다.
In addition, the controller may display a problem in any one of Hangul text, English text, Korean speech output, and English speech output in a word memorization test, and display the answer in a selective manner.

또한 상기 제어부는 단어 암기 테스트에서 원어민의 발음으로 문제를 제시하고 학습자가 해당 단어를 입력하도록 하여 정답을 확인하는 것을 특징으로 할 수 있다.
In addition, the controller may present a problem by pronunciation of a native speaker in a word memorization test, and allow the learner to input the word to confirm the correct answer.

본 발명에 의한 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습방법은 학습자로부터 학습할 단어의 선택 명령이 입력되는 단계;
A word learning method using syllable of an image and a word and pronunciation data of a native speaker according to the present invention includes inputting a selection command of a word to be learned from a learner;

상기 선택된 단어가 음절이 구분되어 표시되고, 표시된 단어와 관련된 단어 데이터, 이미지 데이터가 표시되는 단계;
Displaying the word data and the image data associated with the displayed word, wherein the selected word is displayed in a syllable-separated manner;

상기 선택된 단어의 원어민 발음 시 영상이 표시되는 단계;
Displaying an image in native pronunciation of the selected word;

상기 선택된 단어의 원어민 발음 시 음절마다 다른 색깔을 표시하고, 음절구분 음원데이터가 출력되는 단계;
Displaying different colors for each syllable at the time of native pronunciation of the selected word and outputting syllable classification sound source data;

상기 표시된 단어에 따른 학습자의 단어 발음 시 음성 및 영상이 입력되는 단계;
A step of inputting a voice and an image when a learner's word is pronounced according to the displayed word;

원어민의 단어 발음 시 영상 및 학습자의 단어 발음 시 영상이 표시되어 재생되는 단계;
A step of displaying a video when a word is pronounced by a native speaker and an image when a learner pronounces a word;

원어민 음성 파형과 학습자 음성 파형의 비교 화면이 표시되는 단계; 및
A step of displaying a comparison screen of a native speech waveform and a learner speech waveform; And

원어민 음성 파형과 학습자 음성 파형의 비교 유사도가 50% 이상이면 “good” 50% 미만이면 “bad”를 표시하는 단계를 포함하는 것을 특징으로 할 수 있다.And displaying "bad" if the similarity degree between the native speech waveform and the learner speech waveform is "good" if the similarity is 50% or more and "bad" if the similarity is less than 50%.

본 발명의 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습 방법에 의하면, 음절로 구분된 단어를 표시하여 효과적인 단어 학습이 가능하고, 표시된 단어에 따른 이미지 데이터와 단어 데이터를 표시하여 현장감있는 언어학습이 가능하며, 원어민의 발음 데이터가 재생될 때 음절마다 다른 색깔을 표시하고, 음절구분 음원 데이터를 출력하여 음절을 정확히 구별하는 학습이 가능하고, 원어민의 발음 데이터와 학습자의 발음 데이터의 비교를 통해 학습자가 단어를 발음함에 있어 원어민의 발음과 유사해지도록 교정이 가능하며, 음성 파형의 비교를 통해 발음의 세기 및 강세의 위치를 세밀하게 체크할 수 있고, 원어민의 발음 데이터를 여성, 남성, 미국식 발음, 영국식 발음, 호주식 발음 등 여러가지 종류로 제공하여 폭 넓게 언어 학습을 하도록 하는 효과가 있다.According to the word learning method using the syllable of the image and the word and the pronunciation data of the native speaker of the present invention, effective word learning is possible by displaying syllable-separated words, and image data and word data corresponding to the displayed word are displayed, It is possible to learn a language, display different colors for each syllable when pronunciation data of a native speaker is reproduced, output syllable classification sound source data to accurately distinguish syllables, and compare pronunciation data of a native speaker with pronunciation data of a learner The learner can correct the pronunciation of the word to be similar to the pronunciation of the native speaker, and the intensity of the pronunciation and the position of the loudness can be checked in detail through comparison of the voice waveforms. , American-style pronunciation, English-language pronunciation, It has the effect that the s.

도 1은 본 발명의 실시예에 따른 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치의 구성을 나타낸 블록도.
도 2는 본 발명의 실시예에 따른 학습하고자 하는 단어 선택의 예를 나타낸 도면.
도 3은 본 발명의 실시예에 따른 단어의 학습 화면의 예를 나타낸 도면.
도 4는 본 발명의 실시예에 따른 Dic 텝에서의 단어의 사전 정보를 표시한 예를 나타낸 도면.
도 5는 본 발명의 실시예에 따른 Option 텝에서의 단어학습 옵션 선택목록의 예를 나타낸 도면.
도 6은 본 발명의 실시예에 따른 객관식 형태의 단어 암기 방식의 예를 나타낸 도면.
도 7은 본 발명의 실시예에 따른 원어민의 발음을 듣고 단어를 입력하는 방식의 단어 암기 방식의 예를 나타낸 도면.
도 8은 본 발명의 실시예에 따른 객관식 문제 및 원어민의 발음을 듣고 단어를 입력하는 문제에서 학습자가 맞추지 못한 단어가 체크되어 리스트로 표시되는
예를 나타낸 도면.
도 9는 본 발명의 실시예에 따른 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습방법의 흐름도.1 is a block diagram showing a configuration of a word learning apparatus using syllables of images and words and pronunciation data of native speakers according to an embodiment of the present invention;
2 is a diagram showing an example of word selection to be learned according to an embodiment of the present invention;
3 is a diagram showing an example of a word learning screen according to an embodiment of the present invention.
4 is a diagram showing an example of displaying dictionary information of a word in a Dic tab according to an embodiment of the present invention;
5 is a diagram illustrating an example of a word learning option selection list in Option tab according to an embodiment of the present invention.
6 is a diagram illustrating an example of a word memorizing method of a multiple choice type according to an embodiment of the present invention.
7 is a view showing an example of a word memorizing method of a method of inputting a word by listening to a pronunciation of a native speaker according to an embodiment of the present invention.
FIG. 8 is a flowchart illustrating a method of selecting a word according to an embodiment of the present invention.
Fig.
9 is a flowchart of a word learning method using syllables of images and words and pronunciation data of native speakers according to an embodiment of the present invention.

이하 첨부된 도면을 참조하여 본 발명의 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치 및 방법에 대해 설명하도록 한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a word learning apparatus and method using syllables of an image and words of the present invention and pronunciation data of native speakers will be described with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치의 구성을 나타낸 블록도이다.
1 is a block diagram showing a configuration of a word learning apparatus using syllables of images and words and pronunciation data of native speakers according to an embodiment of the present invention.

도 1을 참조하면, 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습 장치(100)는 단어 데이터, 원어민의 발음 영상 및 음성 파형 데이터가 저장된 저장부(104)와, 단어 선택 및 단어 입력을 위한 입력부(102)와, 학습자가 선택한 단어의 학습이 시작되면 음절이 구분된 단어가 표시되고, 표시된 단어의 이미지 데이터와 단어 데이터가 표시되는 표시부(114)와, 학습자가 단어 학습 시 표시된 단어를 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부(106)와, 상기 오디오 처리부(106)를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 발음 데이터의 파형과 유사도를 비교 분석하기 위한 음성 분석 모듈부(108) 및 음성 파형 처리부(110)와, 학습자의 단어 발음 시 입 모양 영상을 수집하기 위한 카메라부(112)와, 상기 카메라부(112)로부터 입력된 입 모양 영상의 포커스와 사이즈를 규격화하기 위한 영상 처리부(116)와, 상기 영상 처리부(116)를 통해 규격화된 학습자의 단어 발음 시 입 모양 영상과 상기 저장부(104)에 저장된 원어민의 단어 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부(108) 와 음성 파형 처리부(110)를 통해 처리된 파형과 저장된 원어민의 발음 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 “good”, 50% 미만 유사 시 ”bad”를 표시하도록 제어하는 제어부(122)와, 상기 제어부(122)가 인터넷 웹 브라우저의 화면에 표시되는 단어 중 상기 저장부(104)에 저장된 단어와 일치하는 단어를 음절이 분리된 형태로 표시할 수 있도록 하는 유무선 네트워크부(118)와, 상기 제어부(122)가 DMB 영어 방송에서 나오는 단어 중 상기 저장부(104)에 저장된 단어와 일치하는 단어를 음절이 분리된 형태로 표시할 수 있도록 하는 DMB 모듈부(120)로 구성된다.
Referring to FIG. 1, a word learning apparatus 100 using syllables of images and words and native pronunciation data of a native speaker includes a storage unit 104 storing word data, pronunciations of native speakers, and speech waveform data, A display unit 114 for displaying word data in which syllable words are displayed when learning of a word selected by a learner is displayed and image data and word data of the displayed word are displayed; An audio processing unit 106 for receiving a learner's voice when pronunciating the learner's voice, a sound analyzing unit 106 for analyzing and converting the sound inputted through the audio processing unit 106 into a waveform, A voice analysis module 108 and a voice waveform processor 110 for comparing and analyzing the degree of similarity, a camera unit 112 for collecting mouth-shaped images when a learner's word is pronounced, An image processing unit 116 for normalizing the focus and size of the mouth-shaped image input from the camera unit 112, a mouth shape image for word learner's normalized through the image processing unit 116, And displays the waveforms processed by the speech analysis module 108 and the sound waveform processor 110 and the pronunciation waveforms of the native speakers stored in the speech analysis module 108 and the similarity degree The controller 122 controls the display unit 122 to display "good" when it is 50% or more and "bad" when it is less than 50% A wire / wireless network unit 118 for displaying a word corresponding to a word stored in the storage unit 104 in a form of separated syllables; And a DMB module 120 for displaying words in the form of syllables separated from each other.

도시되진 않았지만, 상기 표시부(114)의 화면을 좌/우로 구분하여 좌측에 인터넷 웹 브라우저의 화면 또는 DMB 방송 영상을 표시하고, 우측에 상기 저장부(104)에 저장된 단어와 일치하는 단어를 표시하여 학습자가 학습을 원하는 단어를 선택하면 상기 저장부(104)에 저장된 단어 데이터, 이미지 데이터, 원어민 발음 시 영상이 재생되도록 하는 것이 바람직하다.
Although not shown, the screen of the display unit 114 is divided into left and right to display a screen of the Internet web browser or a DMB broadcast image on the left side, and a word matching the word stored in the storage unit 104 is displayed on the right side When the learner selects a word to be learned, it is preferable that the word data, the image data, and the native pronunciation sound image stored in the storage unit 104 are reproduced.

이는, 학습자가 인터넷 웹 브라우저의 화면 또는 DMB 영어 방송을 통해 단어의 학습 상태를 확인해볼 수 있으며, 알아듣지 못했던 단어를 체크하고 복습할 수 있는 효과가 있다.
This has the effect that the learner can check the learning status of the word through the screen of the Internet web browser or the DMB English broadcast, and can check and review the word which has not been heard.

단어 학습 장치(100)는 컴퓨터 단말기, 테블릿 PC, 어학기 및 스마트폰을 포함하며, 상기 입력부(102)는 상기 단어 학습장치(100)의 키 패드 또는 터치 스크린 모듈 및 터치 팬을 포함한다.
The word learning apparatus 100 includes a computer terminal, a tablet PC, a language school, and a smart phone. The input unit 102 includes a key pad or a touch screen module and a touch pan of the word learning apparatus 100.

상기 오디오 처리부(106)는 음성 입력 및 출력과 미디어 출력이 가능하도록 마이크(microphone)와 스피커를 포함한다.
The audio processing unit 106 includes a microphone and a speaker to enable audio input, output, and media output.

도 2는 본 발명의 실시예에 따른 학습하고자 하는 단어 선택의 예를 나타낸 도면이고, 도 3은 본 발명의 실시예에 따른 단어의 학습 화면의 예를 나타낸 도면이다.
FIG. 2 is a diagram illustrating an example of word selection to be learned according to an embodiment of the present invention, and FIG. 3 is a diagram illustrating an example of a word learning screen according to an embodiment of the present invention.

도 2 및 도 3에 도시된 바와 같이, 학습자는 먼저 학습하고자 하는 단어를 선택한다.
As shown in FIGS. 2 and 3, the learner first selects a word to be learned.

학습자의 단어 선택방식은 도 2에서와 같이 원하는 단어를 체크하거나 정해진 레벨에 따른 단어를 선택하는 것이 가능하며, 그 방식을 제한하는 것은 아니다.
As shown in FIG. 2, the learner's word selection method can check a desired word or select a word according to a predetermined level, and does not limit the method.

학습자가 학습하고자 하는 단어의 선택이 완료되고 학습이 시작되면, 도 3에서와 같이, Home 텝(10)에 단어에 관련된 이미지 데이터(11), 원어민의 단어 발음 시 얼굴(12), 음절이 분리된 단어와 단어 데이터(13), 원어민의 단어 발음 시 입모양(14), 학습자의 단어 발음 시 얼굴 또는 입모양(15), 원어민의 음성 파형(16) 및 학습자의 음성 파형(17)이 표시되고 하단에 Next, Repeat, Slow 버튼과 녹음 및 재생 버튼이 표시된다.
When the learner selects the word to be learned and the learning starts, the image data 11 related to the word, the face 12 in the word pronunciation of the native speaker, and the syllable are separated The speech waveform 16 of the native speaker and the speech waveform 17 of the learner are displayed when the learner's word is pronounced in face or mouth shape 15, Next, Repeat, Slow buttons and Record and Play buttons are displayed at the bottom.

우선, 음절이 분리된 단어와 관련된 이미지 데이터, 단어 데이터와 함께 표시됨과 동시에 해당 단어를 발음하는 원어민의 단어 발음 시 동영상이 재생된다.
First, a syllable is displayed together with image data and word data related to the separated word, and at the same time, a moving picture is reproduced when a word of a native speaker who pronounces the word is pronounced.

이후, 표시되진 않았지만 학습자의 음성을 입력받을 수 있도록 팝업메뉴를 띄워 단어 학습장치(100)에 구비된 카메라를 바라보며 해당 단어를 발음하도록 한다.
Thereafter, a pop-up menu is displayed so that a learner's voice can be input even though it is not displayed, so that the user looks at the camera provided in the word learning apparatus 100 and sounds the corresponding word.

음성 녹음 및 영상 촬영이 완료되면, 해당 단어에 대한 원어민의 단어 발음 시 입 부분이 확대된 발음 동영상과 학습자의 녹화된 발음 동영상이 재생 되도록 한다.
When the voice recording and the video image capture are completed, the pronunciation video in which the mouth part of the native word of the native word is enlarged and the pronunciation video of the learner are reproduced.

영상 처리부(116)는 해당 화면의 프레임에 입 모양이 표시될 수 있도록 영상을 가공하여 규격화할 수 있는 프로그램이 탑재되는 것이 바람직하며, 녹화된 영상이 데이터로 활용될 수 없는 경우 재녹화될 수 있도록 학습자에게 요구사항을 팝업메뉴 형태로 표시하는 것이 바람직하다.
Preferably, the image processing unit 116 includes a program that can process and standardize an image so that a mouth shape can be displayed on a frame of the corresponding screen. If the recorded image can not be utilized as data, It is desirable to display the requirements to the learner in the form of a pop-up menu.

또한, 학습자의 발음 영상 재생은 녹화방식이 아닌 현재 학습자의 입모양이 카메라를 통해 실시간으로 입력되어 표시되도록 함으로써, 학습자가 자기의 입모양을 직접 화면을 통해 확인하면서 원어민의 입 모양과 같아지도록 연습할 수 있도록 하는 것이 바람직하다.
In addition, the pronunciation of the learner can be displayed by inputting the current learner's mouth shape through the camera in real time, not by the recording method, so that the learner can check his or her mouth shape directly on the screen, It is desirable to make it possible.

이때, 음성 분석 모듈부(108)에서 학습자의 음성을 분석하고, 분석된 데이터를 토대로 음성 파형 처리부(110)를 통해 파형으로 변환시켜 원어민 음성 파형과 비교할 수 있도록 표시한다.
At this time, the voice analysis module 108 analyzes the learner's voice and converts the learner's voice to a waveform through the voice waveform processor 110 based on the analyzed data, so that the voice waveform can be compared with the native voice waveform.

도 4는 본 발명의 실시예에 따른 Dic 텝에서의 단어의 사전 상 정보를 표시한 예를 나타낸 도면이다.
4 is a diagram showing an example of displaying dictionary information of a word in a Dic tab according to an embodiment of the present invention.

도 4에 도시된 바와 같이, 단어가 재생되고 있을 때, Dic 텝(20)을 클릭하면 해당 단어의 사전적 의미와 예문 등을 확인할 수 있다.
As shown in FIG. 4, when the word is being reproduced, clicking on the Dic tab 20 allows confirmation of the dictionary meaning and example sentence of the word.

도 5는 본 발명의 실시예에 따른 Option 텝에서의 단어학습 옵션 선택목록의 예를 나타낸 도면이다.
5 is a diagram illustrating an example of a word learning option selection list in the Option tab according to an embodiment of the present invention.

도 5에 도시된 바와 같이, 상기 Option 텝(30)은 단어의 이미지 데이터 표시 여부 선택과, 선택 음절 분리 재생 및 정상 재생 여부와 횟수 선택과, 음절단위 색깔표시 여부 선택과, 음절구분 음원데이터 재생 여부 선택과, 원어민의 단어 발음 시 영상 및 음성 재생과 학습자의 단어 발음 시 영상 및 음성 재생의 여부와 횟수 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 메뉴로 구성되며 표시되는 방식을 학습자가 선택할 수 있도록 하여 학습자가 자신에게 가장 적합한 방식으로 조절할 수 있도록 한다.
As shown in FIG. 5, the Option tab 30 is used to select whether to display image data of a word, select syllables separated and reproduced and whether to reproduce normally, select a number of syllables, select whether syllable unit color is displayed, The selection of whether or not to reproduce video and audio when the learner pronounces the word, the selection of the accent representation, the selection of the pronunciation symbol, the selection of the gender of the voice output, The user can select a method of displaying the speech sound output selection by country and a pronunciation correction test mode selection menu, so that the learner can select a display mode so that the learner can adjust it in the most suitable manner.

도 6은 본 발명의 실시예에 따른 객관식 형태의 단어 암기 방식의 예를 나타낸 도면이고, 도 7은 본 발명의 실시예에 따른 원어민의 발음을 듣고 단어를 입력하는 방식의 단어 암기 방식의 예를 나타낸 도면이다.
FIG. 6 illustrates an example of a word memorizing method of a multiple choice type according to an embodiment of the present invention. FIG. 7 illustrates an example of a word memorizing method of inputting a word by listening to a native speaker according to an embodiment of the present invention. Fig.

도 6 내지 도 7에 도시된 바와 같이, 단어 암기 방식은 한글 텍스트, 영문 텍스트, 한글 음성 출력 및 영문 음성 출력 중 어느 하나로 문제를 제시하고 객관식으로 답을 선택할 수 있도록 표시하거나, 원어민의 발음으로 문제를 제시하고 학습자가 해당 단어를 입력하도록 하여 정답을 확인하는 방식을 사용할 수 있다.
As shown in FIGS. 6 to 7, the word memorizing method can present a problem with either Korean text, English text, Korean speech output, or English speech output, and can display the answer in a multiple choice manner, And a learner can input the word to confirm the correct answer.

학습자가 단어를 입력하는 방식은 객관식인 경우 손가락이나 터치펜으로 번호를 선택하거나 키패드로 번호를 입력할 수 있으며, 단어를 직접 입력하는 경우에는 손가락 또는 터치펜으로 직접 단어를 적거나 키패드로 단어를 입력할 수 있다.
When the word is entered by the learner, the number can be selected by the finger or the touch pen or the number can be inputted by the keypad. If the word is inputted directly, the word can be directly written with the finger or the touch pen, Can be input.

도 8은 본 발명의 실시예에 따른 객관식 문제 및 원어민의 발음을 듣고 단어를 입력하는 문제에서 학습자가 맞추지 못한 단어가 체크되어 리스트로 표시되는 예를 나타낸 도면이다.
8 is a diagram illustrating an example of a multiple choice question according to an embodiment of the present invention and a case in which words that are not matched by a learner are checked and displayed as a list in a problem of receiving a word by listening to a native speaker's pronunciation.

도 8에 도시된 바와 같이, 객관식 문제 및 원어민의 발음을 듣고 단어를 입력하는 문제에서 학습자가 맞추지 못한 단어에 대해서는 저장부(104)에 저장하여 다시 학습할 수 있도록 리스트에 체크하고, 다시 학습하거나 종료할 수 있도록 한다.
As shown in FIG. 8, in a problem of receiving a multiple choice question and a pronunciation of a native speaker and inputting a word, words not fit to the learner are stored in the storage unit 104 and checked in a list so that they can be learned again, So that it can be terminated.

도 9는 본 발명의 실시예에 따른 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습방법의 흐름도이다.
9 is a flowchart of a word learning method using syllables of images and words and pronunciation data of native speakers according to an embodiment of the present invention.

도 9를 참조하면, 먼저 입력부(102)를 통해 학습자는 학습하고자 하는 단어를 선택한다(S200).
Referring to FIG. 9, a learner selects words to be learned through an input unit 102 (S200).

상기 입력부(102)를 통한 학습 단어의 선택이 완료되면, 표시부(114)의 Home(10)에 선택된 단어의 음절이 구분되어 표시되고, 이미지 데이터, 단어 데이터, 해당 단어의 원어민 발음 시 영상이 표시 및 재생된다(S202).
When the selection of the learning word through the input unit 102 is completed, the syllable of the selected word is displayed on the Home 10 of the display unit 114, and image data, word data, And reproduced (S202).

이후, 오디오 처리부(106)를 통해 학습자의 단어 발음 시 음성을 입력받고, 카메라부(112)를 통해 학습자의 발음 시 얼굴 영상을 취득한다(S204).
Then, the learner's voice is input through the audio processing unit 106, and the face image is acquired through the camera unit 112 (S204).

저장부(104)에 저장된 원어민의 발음 시 영상이 재생되고, 영상 처리부(116)를 통해 포커스와 사이즈가 규격화된 학습자의 발음 시 영상이 재생되도록 한다(S206).
(Step S206). In this way, the learner's pronunciated image of the learner, whose focus and size are standardized, is reproduced through the image processing unit 116 (S206).

학습자의 발음 시 영상에 있어서는 학습자마다 단어를 발음할 때 카메라와의 거리, 학습자마다 영상에서 차지하는 얼굴 사이즈 등이 달라지게 되는 것이 일반적이다.
In the case of the learner's pronunciations, the distance from the camera to the learner, the size of the face occupied by the learner for each learner, and the like are generally changed.

따라서, 상기 영상 처리부(116)는 학습자의 얼굴 형태를 인식하고 프레임에서 얼굴 형태가 차지하는 사이즈로 확대 또는 축소하여 규격화된 포커스와 사이즈로 학습자의 발음 시 영상이 보여질 수 있도록 하는 것이 바람직하다.
Accordingly, the image processing unit 116 preferably recognizes the learner's face shape and enlarges or reduces the size of the learner's face in the frame so that the learner's pronunciation image can be displayed with the normalized focus and size.

이때, 학습자의 발음 시 영상 재생은 녹화 재생 또는 실시간 재생 방식을 적용할 수 있다.
At this time, the learner can apply the recording reproduction or the real time reproduction method to the image reproduction upon pronunciation.

그리고, 상기 오디오 처리부(106)를 통해 입력된 학습자의 음성 데이터를 음성 분석 모듈부(108)에서 분석하여 음성 파형 처리부(100)를 통해 파형으로 변환하여 표시될 수 있도록 한다(S208).
The learner's voice data input through the audio processor 106 is analyzed by the voice analysis module 108 and converted into a waveform through the voice waveform processor 100 so as to be displayed (S208).

학습자의 음성 파형은 저장부(104)에 저장된 원어민의 음성 파형과 비교될 수 있도록 나란히 표시하고, 원어민이 어느 음절에서 강하게 발음하는지를 학습자가 확인할 수 있도록 한다.
The learner's voice waveform is displayed side by side so as to be compared with the voice waveform of the native speaker stored in the storage unit 104 so that the learner can confirm which syllable is strong in the syllable.

파형은 음의 진동 모양을 시간 차이로 나누어 표시할 때 생기는 파장의 형태로써, 음성 파형은 단어를 발음할 때의 액센트와 리듬을 확인할 수 있는 중요한 요소가 된다.
A waveform is a type of wavelength that occurs when the waveform of a sound is divided by time difference. The waveform is an important factor for confirming the accent and rhythm when pronouncing a word.

영어단어 발음 시 어느 음절에서 강하게 발음하느냐에 따라 그 뜻이 달라지기도 하기 때문에 학습자가 원어민의 단어 발음을 익힘에 있어서 필수적으로 체크해야하는 부분이다.
It is an essential part of the learner's ability to learn the pronunciation of a native speaker's vocabulary.

상기와 같이, 학습자가 원하는 학습을 원하는 단어를 선택하여 학습을 시작하면, 해당 단어의 단어 데이터, 이미지 데이터가 표시되고, 해당 단어가 음절이 분리되어 표시되며, 원어민의 발음 시 동영상이 표시되고, 학습자의 단어 발음 시 음성과 영상을 입력받아 원어민의 발음 시 영상과 비교할 수 있도록 하며, 원어민의 음성 파형과 학습자의 음성 파형을 비교할 수 있도록 하여 단어의 음절에 따른 정확한 발음 교정 및 정확한 액센트를 익힐 수 있는 효과가 있다.
As described above, when the learner selects a desired word for learning and starts learning, the word data and image data of the word are displayed, the syllable is separated and displayed, the moving picture is displayed upon pronunciation of the native speaker, The learner's pronunciation can be compared with the pronunciation of the native speaker. The learner's voice waveform can be compared with the learner's voice waveform. There is an effect.

이상에서는 학습자가 학습하는 언어가 영어인 경우를 예로 들어 설명하였으나 영어 외에 중국어, 일본어, 독일어, 불어 등의 다른 외국어에도 본 발명이 적용될 수 있음은 물론이다.In the above, the case where the learner learns English is described as an example, but it goes without saying that the present invention can also be applied to other languages such as Chinese, Japanese, German, French and so on.

100 : 언어 학습 장치 102 : 입력부
104 : 저장부 106 : 오디오 처리부
108 : 음성 분석 모듈부 110 : 음성 파형 처리부
112 : 카메라부 114 :표시부
116 : 영상 처리부 118 : 유무선 네트워크부
120 : DMB 모듈부 122 : 제어부100: language learning apparatus 102: input unit
104: storage unit 106: audio processing unit
108: Voice analysis module 110: Voice waveform processor
112: camera section 114: display section
116: image processing unit 118: wired / wireless network unit
120: DMB module unit 122:

Claims (9)

이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습 장치에 있어서, 단어 데이터, 단어의 이미지 데이터, 원어민 발음 영상 및 파형 데이터, 음절구분 음원데이터가 저장된 저장부; 단어 선택 및 단어 입력을 위한 입력부; 선정된 단어의 학습이 시작되면 음절이 구분된 단어가 표시되고, 표시된 단어의 이미지 데이터와 단어 데이터가 표시되는 표시부; 학습자가 단어 학습 시 표시된 단어를 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부; 상기 오디오 처리부를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 발음 데이터의 파형과 유사도를 비교 분석하기 위한 위한 음성 분석 모듈부 및 음성 파형 처리부; 학습자의 단어 발음 시 입 모양 영상을 수집하기 위한 카메라부; 상기 카메라부로부터 입력된 학습자의 단어 발음 시 입 모양 영상 데이터의
포커스와 사이즈를 규격화하기 위한 영상 처리부; 및 상기 영상 처리부를 통해 규격화된 학습자의 단어 발음 시 입 모양 영상과 상기 저장부에 저장된 원어민의 단어 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부와 음성 파형 처리부를 통해 처리된 파형과 저장된 원어민의 발음 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 “good”, 50% 미만 유사 시 ”bad”를 표시하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.
A word learning apparatus using syllable of an image and a word and pronunciation data of a native speaker, the word learning apparatus comprising: a storage unit storing word data, word image data, native speech image and waveform data, and syllable classification sound source data; An input unit for word selection and word input; A display unit displaying syllable-separated words when the learning of the selected word starts, and displaying image data and word data of the displayed words; An audio processing unit for receiving a learner's voice when a learner pronounces a word displayed at the time of word learning; A voice analysis module for analyzing and converting the voice input through the audio processor into a waveform and comparing and analyzing the waveform of the native pronunciation data with respect to the input voice; A camera unit for collecting a mouth shape image when a learner pronounces a word; And the learner's pronunciation of the input image data
An image processing unit for normalizing the focus and size; And a display unit for comparing and displaying a mouth shape image of a learner who has been normalized through the image processing unit and a word sound image of a native speaker stored in the storage unit and displaying the waveform and the waveform processed through the sound analysis module unit and the sound waveform processor, And a controller for displaying the pronunciation waveform of the native speaker and comparing the similarities to display "good" when the similarity is 50% or more and "bad" when the similarity is less than 50%. A word learning apparatus using pronunciation data.
제 1항에 있어서, 상기 제어부가 인터넷 웹 브라우저의 표시되는 단어 중 상기 저장부에 저장된 단어와 일치하는 단어를 음절이 분리된 형태로 표시할 수 있도록 하는 유무선 네트워크부를 더 포함하는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.The mobile communication terminal according to claim 1, wherein the control unit further comprises a wired / wireless network unit for displaying words in the storage unit of the internet web browser that are identical to the words stored in the storage unit, And a word learning apparatus using syllable of words and pronunciation data of native speakers. 제 1항에 있어서, 상기 제어부가 DMB 영어방송에서 나오는 단어 중 상기 저장부에 저장된 단어와 일치하는 단어를 음절이 분리된 형태로 표시할 수 있도록 하는 DMB 모듈부를 더 포함하는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.The apparatus according to claim 1, further comprising a DMB module unit for allowing the control unit to display, in a form of separated syllables, words corresponding to words stored in the storage unit, A word learning apparatus using syllable of word and pronunciation data of native speaker. 제 1항에 있어서, 상기 표시부의 레이어(layer)는 Home, Dic 및 Option 텝으로 구분되는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.The word learning apparatus according to claim 1, wherein a layer of the display unit is divided into Home, Dic and Option tabs. 제 4항에 있어서, 상기 Home 텝에는 학습자가 선택한 단어가 순차적으로 표시되고, 표시된 단어의 이미지 데이터와 단어 데이터가 표시되며, 원어민의 단어 발음 시 얼굴, 음절이 분리된 단어, 원어민의 단어 발음 시 입모양, 학습자의 단어 발음 시 얼굴 또는 입모양, 원어민의 음성 파형 및 학습자의 음성 파형, 음절구분 음원데이터 중 적어도 어느 하나를 표시하는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.5. The method according to claim 4, wherein the Home tab displays the words selected by the learner in sequence, image data of the displayed word and word data are displayed, and when the word is pronounced by the native speaker, Wherein the display means displays at least one of a mouth shape, a face or a mouth shape of a learner's voice, a voice waveform of a native speaker, a learner's voice waveform, and syllable-segmented sound source data. Word learning device. 제 4항에 있어서, 상기 Option 텝은 단어의 이미지 데이터 표시 여부 선택과, 선택 음절 분리 재생 및 정상 재생 여부와 횟수 선택과, 음절단위 색깔표시 여부 선택과, 음절구분 음원데이터 재생 여부 선택과, 원어민의 단어 발음 시 영상 및 음성 재생과 학습자의 단어 발음 시 영상 및 음성 재생의 여부와 횟수 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.The method according to claim 4, wherein the Option step comprises selecting whether or not to display image data of a word, selecting whether syllables are separated and reproduced, selecting whether to reproduce normally, selecting the number of syllables, displaying syllable- The selection of the accent representation, the selection of the pronunciation symbol, the selection of the gender of the voice output, and the pronunciation voice output of each country And a pronunciation correction test mode. The word learning apparatus according to claim 1, wherein the pronunciation data includes at least one of a syllable of an image and a word, and a pronunciation of a native speaker. 제 1항에 있어서, 상기 제어부는 단어 암기 테스트에서 한글 텍스트, 영문 텍스트, 한글 음성 출력 및 영문 음성 출력 중 어느 하나로 문제를 제시하고 객관식으로 답을 선택할 수 있도록 표시하도록 제어하는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.2. The method according to claim 1, wherein the control unit controls the word memorization test to display a problem in any one of Hangul text, English text, Hangul voice output, A word learning apparatus using syllable of word and pronunciation data of native speaker. 제 1항에 있어서, 상기 제어부는 단어 암기 테스트에서 원어민의 발음으로 문제를 제시하고 학습자가 해당 단어를 입력하도록 하여 정답을 확인하는 것을 특징으로 하는 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습장치.2. The method according to claim 1, wherein the control unit confirms a correct answer by presenting a problem by pronunciation of a native speaker in a word memorization test and allowing a learner to input the corresponding word. Learning device. 이미지와 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습 방법에 있어서, 학습자로부터 학습할 단어의 선택 명령이 입력되는 단계; 상기 선택된 단어가 음절이 구분되어 표시되고, 상기 표시된 단어에 이미지 데이터와 단어 데이터가 표시되는 단계; 상기 표시된 단어의 원어민 발음 시 영상이 표시되는 단계; 상기 선택된 단어의 원어민 발음 시 음절마다 다른 색깔을 표시하고, 음절구분 음원데이터가 출력되는 단계; 상기 표시된 단어에 따른 학습자의 단어 발음 시 음성 및 영상이 입력되는 단계; 원어민의 단어 발음 시 영상 및 학습자의 단어 발음 시 영상이 표시되어 재생되는 단계; 및 원어민 음성 파형과 학습자 음성 파형의 비교 화면이 표시되는 단계; 원어민 음성 파형과 학습자 음성 파형의 비교 유사도가 50% 이상이면 “good” 50% 미만이면 “bad”를 표시하는 단계를 포함하는 것을 특징으로 하는 단어의 음절 및 원어민의 발음 데이터를 이용한 단어 학습방법.
A word learning method using syllable of an image and a word and pronunciation data of a native speaker, the method comprising: inputting a selection command of a word to be learned from a learner; Wherein the selected word is displayed in a syllable-separated manner, and image data and word data are displayed on the displayed word; Displaying an image in native pronunciation of the displayed word; Displaying different colors for each syllable at the time of native pronunciation of the selected word and outputting syllable classification sound source data; A step of inputting a voice and an image when a learner's word is pronounced according to the displayed word; A step of displaying a video when a word is pronounced by a native speaker and an image when a learner pronounces a word; And displaying a comparison screen of the native speech waveform and the learner speech waveform; And displaying the word " bad " if the comparison degree of the native speech waveform and the learner speech waveform is " good " if the similarity degree is 50% or more and less than 50%, respectively.
KR1020120142426A 2012-12-10 2012-12-10 Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data KR20140074459A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120142426A KR20140074459A (en) 2012-12-10 2012-12-10 Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120142426A KR20140074459A (en) 2012-12-10 2012-12-10 Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data

Publications (1)

Publication Number Publication Date
KR20140074459A true KR20140074459A (en) 2014-06-18

Family

ID=51127542

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120142426A KR20140074459A (en) 2012-12-10 2012-12-10 Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data

Country Status (1)

Country Link
KR (1) KR20140074459A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113421467A (en) * 2021-06-15 2021-09-21 读书郎教育科技有限公司 System and method for assisting in learning pinyin spelling and reading
CN116206496A (en) * 2023-01-30 2023-06-02 齐齐哈尔大学 Oral english practice analysis compares system based on artificial intelligence

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113421467A (en) * 2021-06-15 2021-09-21 读书郎教育科技有限公司 System and method for assisting in learning pinyin spelling and reading
CN116206496A (en) * 2023-01-30 2023-06-02 齐齐哈尔大学 Oral english practice analysis compares system based on artificial intelligence
CN116206496B (en) * 2023-01-30 2023-08-18 齐齐哈尔大学 Oral english practice analysis compares system based on artificial intelligence

Similar Documents

Publication Publication Date Title
KR100900085B1 (en) Language learning control method
Hannah et al. Cross-modal association between auditory and visuospatial information in Mandarin tone perception in noise by native and non-native perceivers
KR100900081B1 (en) Language learning control method
Stemberger et al. Phonetic transcription for speech-language pathology in the 21st century
Henrichsen An illustrated taxonomy of online CAPT resources
KR20140087956A (en) Apparatus and method for learning phonics by using native speaker's pronunciation data and word and sentence and image data
KR20140078810A (en) Apparatus and method for learning rhythm pattern by using native speaker's pronunciation data and language data.
JP6166831B1 (en) Word learning support device, word learning support program, and word learning support method
JP7376071B2 (en) Computer program, pronunciation learning support method, and pronunciation learning support device
KR20140107067A (en) Apparatus and method for learning word by using native speakerpronunciation data and image data
KR20140028527A (en) Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word
KR20140075994A (en) Apparatus and method for language education by using native speaker's pronunciation data and thought unit
KR20140074459A (en) Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data
KR20140079677A (en) Apparatus and method for learning sound connection by using native speaker's pronunciation data and language data.
KR20140087951A (en) Apparatus and method for learning english grammar by using native speaker's pronunciation data and image data.
KR101080092B1 (en) Method for studying foreign language word and installation using thereof
KR20140082127A (en) Apparatus and method for learning word by using native speaker's pronunciation data and origin of a word
KR20140087950A (en) Apparatus and method for learning rhythm pattern by using native speaker's pronunciation data and language data.
KR20140079245A (en) Apparatus and method for learning rhythm pattern by using native speaker's pronunciation data and language data.
KR20140073768A (en) Apparatus and method for language education by using native speaker's pronunciation data and thoughtunit
KR20140078080A (en) Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data
KR20140087959A (en) Apparatus and method for learning word by using native speaker's pronunciation data and syllable of a word and image data
KR20140087953A (en) Apparatus and method for language education by using native speaker's pronunciation data and thoughtunit
KR20140075145A (en) Apparatus and method for learning phonics by using native speaker's pronunciation data and word and sentence and image data
KR20140074457A (en) Apparatus and method for language education by using native speaker's pronunciation data and thoughtunit and image data

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination