KR20110064964A - The intelligent language system which has a improve on pronunciation - Google Patents
The intelligent language system which has a improve on pronunciation Download PDFInfo
- Publication number
- KR20110064964A KR20110064964A KR1020090121766A KR20090121766A KR20110064964A KR 20110064964 A KR20110064964 A KR 20110064964A KR 1020090121766 A KR1020090121766 A KR 1020090121766A KR 20090121766 A KR20090121766 A KR 20090121766A KR 20110064964 A KR20110064964 A KR 20110064964A
- Authority
- KR
- South Korea
- Prior art keywords
- pronunciation
- word
- learning
- words
- game
- Prior art date
Links
- 238000012937 correction Methods 0.000 claims abstract description 30
- 238000000034 method Methods 0.000 claims abstract description 10
- 238000011156 evaluation Methods 0.000 claims description 15
- 238000007726 management method Methods 0.000 claims description 6
- 238000005516 engineering process Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 claims description 4
- 238000012217 deletion Methods 0.000 claims description 3
- 230000037430 deletion Effects 0.000 claims description 3
- 230000006870 function Effects 0.000 claims description 2
- 238000013024 troubleshooting Methods 0.000 claims description 2
- 238000009434 installation Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B17/00—Teaching reading
- G09B17/003—Teaching reading electrically operated apparatus or devices
- G09B17/006—Teaching reading electrically operated apparatus or devices with audible presentation of the material to be studied
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
- G09B19/06—Foreign languages
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Entrepreneurship & Innovation (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
Description
기존 학습 및 발음 교정 시스템은 실제 원어민 튜터에 의해 오프라인을 통한 1:1 발음교정이 있으며 이는 시간 및 공간적 제약으로 다수의 학습자에게 전달되기 어렵고, 경제적인 면에서 상당히 불리한 제약이 있다.The existing learning and pronunciation correction system has 1: 1 pronunciation correction through off-line native speaker tutors, which is difficult to deliver to many learners due to time and space constraints, and has a disadvantage in terms of economics.
이동성을 위해 테이프나 콤팩트디스크(CD), 디지털버서틀디스크(DVD) 등을 통하여 시청각적인 반복 학습은 비록 경제적이고 공간적 제약이 없으나, 교정에 대한 부분이 취약할 뿐만 아니라, 전체적인 학습과정에 대한 분석과 통계가 곤란한 문제가 있다.Audio-visual repetitive learning through tape, compact disc (CD), digital shuttle disc (DVD), etc. for mobility is not only economical and space-constrained, but also weak in correction, and analyzes the entire learning process. There are problems with statistics.
따라서 근래의 언어 학습을 위한 체계는 대부분 별도의 애플리케이션에 의해 제공되고 있으며, 이와 같은 애플리케이션은 발음을 미리 듣고 따라 하는 수동적인 발음교정에 의하여 진행되어 오고 있다.Therefore, in recent years, the system for language learning is provided by a separate application, and such an application has been progressed by manual pronunciation correction by listening to and following pronunciation in advance.
영어 학습 및 발음 교정의 형태는 다양하다.There are many forms of English learning and pronunciation correction.
학교수업이나 학원 등을 통한 선택적 수강 및 개인별 과외 등 실질적인 사람 대 사람으로 하는 학습 형태가 있는 반면, 테이프나 CD, 그리고 온라인 동영상 등 미리 제작된 콘텐츠 등을 통해 수동적으로 따라 하는 학습 형태들이 있다.There are some forms of learning, such as selective classes through school classes or private institutes and individual tutoring, while there are forms of learning that are manually followed through pre-produced contents such as tapes, CDs, and online videos.
앞 서 지적한 사람 대 사람으로 하는 학습은 분명히 높은 학습 및 교정 효과를 가질 수 있지만, 그에 따른 높은 비용과 시간적 그리고 공간상의 제약이 불가피 하다.While man-to-person learning, as noted above, can clearly have high learning and proofing effects, high cost, time, and space constraints are inevitable.
그 반면 음향기기 등으로 따라 하는 테이프 등의 콘텐츠들은 사용자가 적은 비용으로 시간 제약 없이 공부를 할 수 있지만, 그에 대한 피드백이 없기 때문에 학습 및 교정 효과가 상당히 분명히 떨어지는 문제가 있다.On the other hand, contents such as tapes that are accompanied by acoustic devices can be studied without time constraints by the user at a low cost, but there is a problem in that the learning and correction effects are considerably inferior because there is no feedback thereto.
따라서 어학을 공부하는 학습자는 자신의 어학 수준의 향상도가 객관적으로 평가될 수 있기를 희망하며, 특히 발음에 대한 평가의 필요성과 언어라는 단조롭고 어려운 분야에 흥미를 가지면서 학습할 수 있기를 바라게 된다.Therefore, the learner who wants to study the language hopes that the improvement of his or her language level can be assessed objectively, especially the necessity of evaluating pronunciation and the interest in the monotonous and difficult field of language. do.
본 발명은 게임을 통한 발음 교정을 애플리케이션을 제공함으로서, 기존 게임들이 제공하는 단어들의 의미 및 단어 스펠링 체크의 한계를 극복하고자 한다.The present invention seeks to overcome the limitations of word spelling and the meaning of words provided by existing games by providing an application for pronunciation correction through games.
또한, 본 발명은 사용자가 적은 비용으로 원하는 시간에 영어 학습 및 발음 교정을 능동적으로 할 수 있게 해준다.In addition, the present invention allows the user to actively perform English learning and pronunciation correction at a desired time at low cost.
즉, 사용자가 발음을 할 경우 그 발음에 대해 평가를 한 다음, 결과를 보여 줌으로써 사용자에 대한 피드백을 주게 된다.That is, when the user pronounces the pronunciation, the pronunciation is evaluated, and then the feedback is given to the user by showing the result.
이에 따라 사용자는 자신의 발음이 어느 부분에서 부족한지 알게 되고 보완을 할 기회를 갖게 된다.Accordingly, the user knows where his pronunciation is lacking and has an opportunity to compensate.
또한 게임에서도 발음 교정 알고리즘을 적용함으로써 기존 게임에는 부족했던 학습적이고 교육적인 부분들을 특화 하였다.In addition, the pronunciation correction algorithm was applied to the game to specialize the educational and educational parts that were lacking in the existing game.
본 발명은 음성인식 애플리케이션을 게임과 발음 평가에 도입하여 개인별 성향 분석 및 통계가 가능하도록 하는 지능형 다국어 학습 발음교정 시스템을 제공함에 목적이 있다.An object of the present invention is to provide an intelligent multi-language learning pronunciation correction system that enables the analysis and statistics of individual propensities by introducing voice recognition applications into games and pronunciation evaluation.
이는 부위적으로 게임을 통한 발음 교정이 가능하도록 특화하는 것이 목적에 포함되어 있는 것이다.This is partly aimed at enabling pronunciation correction through games.
또한 학습자의 발음에 대한 평가를 그래픽이나 소리 성분분석을 통한 일치도 를 수치화하여 피드백(feedback)하여줌으로써 직관적으로 자신에 대한 평가와 점진적인 교정이 가능하도록 하고, 영어 등의 언어에 국한되지 않고 다국어를 지원할 수 있도록 언어 모듈 등을 탑재하여 학습자가 필요에 의해 다양한 언어의 학습과 발음 교정이 가능하도록 하는 지능형 다국어 학습 발음교정 시스템을 제공함에 목적이 있다.In addition, by evaluating the pronunciation of the learner's pronunciation and feedback by numerically matching the graphic or sound component analysis, it is possible to intuitively evaluate and gradually correct the self and to support multilingualism without being limited to languages such as English. It is an object of the present invention to provide an intelligent multilingual learning pronunciation correction system that allows a learner to learn and correct pronunciation of various languages by mounting a language module.
본 발명은 영어 등 학습에 음성인식 기술을 도입하여 사용자에게 발성한 발음에 대하여 평가해주는 독립된 발음 평가 알고리즘을 이용함으로써 사용자가 마이크로 단어를 발성했을 때, 그에 대한 단계별 평가와 그 평가를 사용자가 보고 더 나은 단계를 위해서 발음을 계속 반복해서 연습할 수 있는 것이다. The present invention uses a separate pronunciation evaluation algorithm that evaluates the pronunciation of the pronunciation of the user by introducing a speech recognition technology in learning such as English, when the user speaks a micro word, the user sees the step-by-step evaluation and its evaluation You can practice your pronunciation over and over for better steps.
언어 학습에 있어, 발음 교정은 매우 중요하게 인식되는 부분으로 특히 초등학교부터 대학교까지도 꾸준히 영어 수업이 있을 정도로 영어 학습의 필요성은 중요하다고 볼 수 있다.In language learning, pronunciation correction is a very important part. Especially, the necessity of English learning is so important that there is a constant English class from elementary school to university.
또한 요즘에는 외국인과 대화를 할 수 있는 능력, 즉 스피킹(speaking)의 중요성이 높아지기 때문에, 발음 교정 역시 필수적인 요소라고 볼 수 있다.In addition, the ability to talk with foreigners these days, that is, the importance of speaking (speaking), the pronunciation correction is also an essential element.
본 발명을 통하여 영어 학습과 발음 교정을 할 수 있다.Through the present invention can learn English and pronunciation correction.
또한 다양한 외국어들을 이용해서 학습이 가능하다.You can also learn using a variety of foreign languages.
즉, 하나의 어플리케이션으로 다양한 외국어에 대한 학습과 발음 교정을 할 수 있다.That is, a single application can learn and correct pronunciation of various foreign languages.
기존 발음 교정 형태는 비용이나 시간적으로, 그리고 비효과적인 제약을 가지고 있었다. The existing pronunciation correction forms have limitations of cost, time, and ineffectiveness.
본 발명을 통해서 사용자들이 자신의 발음에 대한 피드백을 받고 능동적으로 학습을 할 수 있다는 것에 커다란 의의를 가진다. The present invention has great significance that users can receive feedback on their pronunciation and actively learn.
사용자들을 본 어플리케이션을 이용함으로써, 단지 영어뿐만 아니라, 다양한 외국어에 대한 발음 교정 효과를 볼 수 있을 것이다. By using this application, users will be able to see pronunciation corrections not only in English but also in various foreign languages.
또한 이러한 발음 평가 알고리즘이 다른 프로젝트들이나 연구 분야에도 사용이 될 수 있을 것이라고 생각된다. It is also thought that this pronunciation evaluation algorithm could be used in other projects and research fields.
본 발명은 사용자들에게 저렴한 가격으로 시간 제약 없이 사용하게 함으로써 경제적, 학업성취도를 높일 수 있다. The present invention can increase the economic and academic achievement by allowing users to use without time constraints at a low price.
이처럼 학습형 애플리케이션뿐만 아니라, 간단한 게임에도 발음 교정 알고리즘을 줌으로써, 기존의 낮말 맞추기처럼 단어의 뜻을 공부하는 데에서 그치는 것이 아니라, 그 단어에 대한 발음 교정을 해준다. By giving pronunciation correction algorithms to simple games as well as learning-type applications like this, it does not just study the meaning of words like conventional daytime matching, but also corrects the pronunciation of words.
이는 사용자의 추가적인 학습을 유발하고 지루해지지 않게 해주는 부가적인 효과를 가지게 된다.This has the additional effect of causing additional learning of the user and not getting bored.
상기와 같은 목적과 효과를 달성하기 위해 마련된 본 발명에 의한 지능형 다국어 학습 발음교정 시스템의 바람직한 실시 예와 상세한 구성을 첨부된 도면을 참고하여 기술하기로 한다.Preferred embodiments and detailed configurations of the intelligent multilingual learning pronunciation correction system according to the present invention prepared to achieve the above objects and effects will be described with reference to the accompanying drawings.
도 1 은 지능형 언어 학습 시스템의 전체 순서도로서, 본 발명에 의한 애플리케이션을 실행하는 시작단계(S1)는, 사전 애플리케이션 설치단계가 선행되어야 하는 것으로, 도 3a 내지 도 4b에서와 같이 주의사항이 표시된 설치화면을 통하여 해당 애플리케이션이 설치될 폴더를 선택한 후 설치시작 버튼을 클릭하면 설치가 진행되고, 설치가 완료되면 확인 버튼을 통하여 설치를 종료하게 된다.1 is an overall flow chart of an intelligent language learning system, the start step (S1) of executing an application according to the present invention, the pre-application installation step is to be preceded, the installation is indicated as shown in Figure 3a to 4b If you select the folder where the application will be installed through the screen and click the Start Installation button, the installation will proceed. When the installation is complete, the installation will be terminated with the OK button.
시작단계(S1)가 수행되면 모니터 등 화면에 도 5a와 같은 애플리케이션이 활성화되고, 이후 도 5b 예시의 인증단계(S2)를 거치게 된다.When the start step S1 is performed, the application as shown in FIG. 5A is activated on a screen such as a monitor, and then the authentication step S2 of the example of FIG. 5B is performed.
상기 인증단계(S2)는 각 애플리케이션마다 부여되는 고유의 시리얼키(serial key)를 입력하여야 하며, 인증을 통과하지 못한 경우(NO), 회원가입단계(S4)를 통하여 애플리케이션 구매 웹사이트에 접속하여 구매절차를 수행하고, 이메일(E-MAIL)이나 무선이동통신단말기 등을 통하여 단문문자메시지(SMS)로 해당 시리얼키를 송신 받아 인증단계(S2)를 진행할 수 있다.The authentication step (S2) is to enter a unique serial key (serial key) assigned to each application, if the authentication does not pass (NO), access to the application purchase website through the membership registration step (S4) The purchase procedure may be performed, and the authentication step S2 may be performed by receiving the corresponding serial key through a short text message (SMS) through an e-mail or a wireless mobile communication terminal.
상기 인증단계(S2)는 인증이 성공적으로 수행되면, 애플리케이션이 설치된 해당 개인용 컴퓨터(PC)에 인증키를 복사하여 향후 본 발명에 의한 애플리케이션이 재실행될 경우 인증단계(S2)를 생략하도록 한다.In the authentication step (S2), if the authentication is successfully performed, the authentication key is copied to the corresponding personal computer (PC) in which the application is installed so that the authentication step (S2) may be omitted when the application according to the present invention is re-executed in the future.
인증단계(S2)를 통하여 인증된 경우(YES), 도 6 예시의 메인메뉴단계(S3)가 활성화된다.If authentication is performed through the authentication step S2 (YES), the main menu step S3 of FIG. 6 is activated.
이하, 바람직한 실시 예를 기술하기로 한다.Hereinafter, preferred embodiments will be described.
본 발명에 의한 음성인식기술을 통하여 제공되는 발음교정 및 언어 학습 시스템의 메인메뉴단계 구성은, 음성인식기능을 적용하여 출력되는 단어마다 발음패 턴을 가지며 마이크나 헤드셋으로 사용자에 의해 발성되어 발음패턴이 일치하는 경우 해당 단어가 제거되는 게임단계(S5)와; 수준 및 분야별로 분류되는 단원을 선택하여 해당 단어에 대한 미리듣기와 말하기, 녹음듣기를 수행하여 단어의 발음을 교정하고 말하기를 시도하는 경우 실시간으로 화면에 수치로서 발음 일치여부가 표시되며, 학습한 단어에 대한 발음상 취약점과 학습 성취도를 통계하기 위하여 학습한 단어가 별도의 테이블을 생성하여 데이터베이스에 독립적으로 마련되는 학습단계(S9)와; 자신이 학습하고자 희망하는 단어 군이나 분류를 선정하여 폴더를 생성한 후, 해당 폴더에 단어를 추가하거나 삭제, 수정하고 데이터베이스와 연동하여 관리할 수 있는 단어장처리단계(S6)와; 사용방법이나 활용법 및 문제해결을 위한 매뉴얼을 제공하는 도움말 제공단계(S7)와; 학습능력과 일정에 대한 통계보기단계(S8)로 이루어지는 것을 특징으로 하는 것이다.The main menu step configuration of the pronunciation correction and language learning system provided through the voice recognition technology according to the present invention has a pronunciation pattern for each word output by applying the voice recognition function, and is pronounced by the user with a microphone or a headset and pronounced by the user. If the match is the game step (S5) and the word is removed; If you try to correct the pronunciation of a word by performing the pre-listening, speaking, and recording of the word by selecting a unit classified by level and field, the pronunciation match is displayed as a numerical value on the screen in real time. A learning step (S9) in which a trained word is separately prepared in a database by generating a separate table in order to statistics pronunciation vulnerabilities and learning achievements for words; A wordbook processing step (S6) of selecting a word group or classification desired to be learned and creating a folder, and then adding, deleting, or modifying words in the corresponding folder and managing the database in association with the database; Help providing step (S7) for providing a manual for how to use or use and troubleshooting; It is characterized by consisting of a statistical view step (S8) for learning ability and schedule.
또한, 메인메뉴단계(3)에서 학습단계(S9)는, 수준별로 단계를 선택하는 단계(S19)와; 수준별 단계 내에서 분야별 단어를 선택하는 단계(S20)와; 새로운 단어를 추가/수정/삭제 하는 단계(S29)와; 선택된 단어의 원어민 발음을 듣기위한 미리듣기 단계(S21)와; 원어민 발음을 흉내내기 위해 화면에 생성된 버튼을 클릭하고 마이크를 통하여 발성하는 말하기 단계(S22)와; 발성한 음성이 녹음되어 학습자에 의해 확인될 수 있는 녹음듣기단계(S30)와; 발성한 음성과 저장된 원어민 발음의 패턴을 비교하여 유사정도를 수치로 출력하는 수치평가단계(S31)와; 학습한 평가기록이 저장되는 결과 저장단계(S23)로 이루어지는 것이다.In addition, the learning step (S9) in the main menu step (3), step (S19) for selecting a step for each level; Selecting a word for each field within the level step (S20); Adding / modifying / deleting a new word (S29); A pre-hearing step (S21) for listening to a native speaker's pronunciation of the selected word; A speaking step (S22) of clicking on a button generated on a screen to utter a native speaker's pronunciation and speaking through a microphone; A recording listening step (S30) in which the spoken voice can be recorded and confirmed by the learner; A numerical evaluation step (S31) of comparing the uttered voices with the stored patterns of native speakers and outputting the similarity numerically; The result of the learning evaluation record is stored in the step (S23).
또한, 수치평가단계(S31)는, 말하기 단계를 통하여 입력된 학습자의 발음과 원어민 단어에 음성패턴을 비교하여 일치하는 정도를 수치화 한 것으로, 이와 같은 수치를 산정함에 있어서는 단순히 단어의 전체적인 음성 패턴의 일치여부를 계량적으로만 비교하지 않고, 각 단어가 가지는 악센트와 중요 부분에 미리 가중치를 두어, 가중치 부분에서의 학습자의 발음과 저장된 원어민 음성패턴의 일치여부를 가중치로 수치산정하여 출력함으로서, 학습자는 반복적인 발성을 통해 보다 정확한 원어민 발음에 근접될 수 있다.In addition, the numerical evaluation step (S31) is to quantify the degree of correspondence by comparing the pronunciation pattern of the learner's pronunciation and the native speaker's words input through the speaking step. Instead of comparing quantitatively only by quantitative comparison, weights are pre-weighted on accents and important parts of each word, and the learners are outputted by numerically calculating the weights of the learner's pronunciation and the stored native speaker's speech pattern by weight. Can be approximated with a more accurate native speaker's pronunciation through repeated speech.
뿐만 아니라 메인메뉴단계(3)에서 게임단계(S5)는, 학습단계(S9)에서의 결과를 데이터베이스에 저장하는 단계(S23) 및 단어장관리단계(S6)에서의 추가/수정/삭제단계(S25)를 통하여 저장된 단어리스트가 호출되는 단계(S10)와;As well as the game step (S5) in the main menu step (3), the step of storing the result of the learning step (S9) in the database (S23) and the addition / correction / deletion step in the wordbook management step (S6) (S25) Calling the stored word list through step S10;
게임화면에 난이도에 따라 순차적으로 호출된 단어들이 출력되는 단계와;Outputting words sequentially called according to a difficulty level on a game screen;
위에서 떨어지기 시작한 단어가 바닥에 닿기 전까지 마이크를 통한 발성을 해서 없애는 단계와;Uttering words through the microphone until the words that start to fall from the floor reach the floor;
발음 성공 횟수가 일정횟수 이상 올라가면 레벨증가단계(S15)를 수행하여 단계별출력단계(S12)의 난이도를 상향조정하게 되고, 반대로 사용자의 실패 횟수가 일정횟수 이상 올라가면 레벨감소단계(S14)를 수행하여 단계별출력단계(S12)의 난이도를 하향조정하는 수치체크단계(S14)와;If the number of successful pronunciations increases more than a certain number of times, the level increase step (S15) is performed to increase the difficulty of the step-by-step output step (S12). On the contrary, if the number of failures of the user increases more than a certain number of times, the level decrease step (S14) is performed. A numerical check step (S14) of adjusting the difficulty of the step-by-step output step (S12);
게임을 종료를 위해 나가기 버튼을 선택하는 경우, 게임성적과 취약단어에 대한 정보가 데이터베이스에 반영되는 것을 특징으로 하는 것이다.When the exit button is selected to end the game, the game score and information about the vulnerable words are reflected in the database.
따라서 저장된 단어리스트가 호출되는 단계(S10)는, 선택된 단원의 단어 목록에서 랜덤하게 선택되거나, 개인별 학습 성과를 기초로 데이터베이스에서 취약한 부분을 중점적으로 출력되도록 할 수 있다.Therefore, the stored word list is called (S10), it is possible to randomly selected from the word list of the selected unit, or to focus on the vulnerable portion of the database based on the individual learning outcomes.
각 단계별로 본 발명의 구성과 동작 단계를 상세 보충하면 하기로 한다.Each step will be described in detail the configuration and operation of the present invention in detail.
상기 메인메뉴단계(S3)에서의 메인메뉴는 크게 게임단계(S5)와 학습단계(S9) 및 단어장처리단계(S6)로 구성되어 있으며, 부가적으로 본 발명 사용방법이나 활용법 및 문제해결을 위한 도움말 제공단계(S7)와 학습능력과 일정에 대한 통계보기단계(S8)를 추가로 구성한다.The main menu in the main menu step (S3) is largely composed of a game step (S5), a learning step (S9) and a wordbook processing step (S6). It further comprises a help providing step (S7) and the statistical view step (S8) for learning ability and schedule.
먼저 학습단계(S9)는 도 7 예시와 같이 학년별 대분류와 단원별 소분류로 구성되는 단계선택단계(S19)를 가지고 있다.First, the learning step (S9) has a step selection step (S19) consisting of a large classification by grade and a small classification by unit as shown in FIG.
따라서 학습자는 먼저 대분류를 통하여 자신의 실력에 맞춰 수준에 맞는 학년을 선택하게 되고, 선택된 학년에서 하위 메뉴로 마련되는 다양한 분야가 소개되는 단원을 결정한 후 시작 버튼을 클릭함으로서 단계선택이 완료된다.Therefore, the learner first selects a grade that is suitable for his or her level through a major classification, and selects a unit in which various fields are provided as submenus in the selected grade, and then selects a stage by clicking a start button.
단계선택단계(S19)가 완료되면 단어선택단계(S20)가 수행되며, 도 7 예시와 같이 단원별로 데이터베이스에 저장되어 있는 단어군의 리스트가 출력된다.When the step selection step S19 is completed, the word selection step S20 is performed, and a list of word groups stored in the database for each unit is output as shown in FIG. 7.
단어선택단계(S20)에서는 새로운 단어를 추가(S29)할 수 있으며 단어를 추가하고자 하는 경우(YES) 단어장관리(S6)가 수행되어 추가하려는 단어뿐만 아니라 기존에 입력된 단어에 대한 수정(편집)이나 삭제가 가능하도록 하는 단계(S25)가 수행되어 도 12 및 도 13 예시와 같은 화면으로 출력된다.In the word selection step (S20) it is possible to add a new word (S29), and if you want to add the word (YES) wordbook management (S6) is performed to modify (edit) not only the word to be added but also the previously entered word. In addition, the step S25 of enabling the deletion may be performed and output to a screen as illustrated in FIGS. 12 and 13.
도 12에서와 같이 단어의 추가/수정/삭제 단계(S25)는 복수의 단어장을 관리할 수 있도록 단어장 그룹(폴더)명을 생성하는 단계가 마려되고 이미 생성한 단어장 그룹(폴더)명의 리스트가 출력되어지는 것으로, 기존 생성된 그룹명을 선택하면 추가한 단어의 리스트가 보이며, 이를 통하여 해당 그룹위치에 단어를 추가/수정/삭제 하는 것이 가능해진다.As shown in FIG. 12, in the step S25 of adding / modifying / deleting a word, a step of generating a wordbook group (folder) name is completed to manage a plurality of wordbooks, and a list of wordbook group (folder) names already generated is output. If you select the existing group name, you can see the list of added words, and through this, you can add / modify / delete the words in the corresponding group location.
도 13에서와 같이 추가/수정/삭제는 별도의 버튼을 마련하고 단어의 의미와 관련문장 등의 정보를 입력할 수 있는 테스트에이리어(TextArea)를 마련한다.As illustrated in FIG. 13, the add / modify / delete provides a separate button and prepares a test area (TextArea) for inputting information such as meaning of words and related sentences.
단어선택단계(S20)에서는 새로운 단어를 추가(S29)하지 않는 경우(NO) 하나의 단어를 클릭하여 미리듣기단계(S21)를 수행할 수 있으며, 선택된 단어에 대해서 TTS(Text-To-Speech) 기술 기반의 단어 발음이 시스템 설정에 따라 스피커나 헤드폰을 통하여 출력된다.If the word selection step (S20) does not add a new word (S29) (NO) can be performed by clicking a word to perform the pre-listening step (S21), TTS (Text-To-Speech) for the selected word Technology-based word pronunciation is output through speakers or headphones, depending on system settings.
이후 말하기 단계(S22)에서는 말하기 버튼을 클릭한 후 마이크 등을 통하여 미리듣기단계(S21)에서 청취한 단어를 발성하며, 상기 발성한 내용은 메모리에 저장되고, 실시간으로 미리듣기단계(S21)에서 송출된 단어와 범용 음성인식 툴에 의해 비교되어 단계(Excellent, Great, So-so, Bad, Poor의 5단계)나 수치(0~100점) 등으로 피드백(feedback)된다.Subsequently, in the speaking step (S22), after clicking the speak button, the speaker listens to the word heard in the pre-listening step (S21) through a microphone, etc., the spoken contents are stored in the memory, and in the pre-hearing step (S21) in real time. The sent word is compared with the general voice recognition tool and fed back in steps (5 steps of Excell, Great, So-so, Bad, Poor) or numerical values (0 to 100 points).
상기 단계와 수치로 변환되는 방식은 양 단어의 음성인식 일치도에 따른 것으로, 음성인식 툴의 그래프 일치여부를 계량적으로만 산정하지 않고, 단어의 중요한 악센트 부분에 가중치를 주어 일치여부에 따른 단계와 수치산정에 반영하도록 미리 설정되는 것이 바람직하다.The method of converting the step and the numerical value is based on the degree of speech recognition matching of both words, and does not calculate only the graph matching of the speech recognition tool quantitatively, but weights the important accent parts of the word and It is preferable to set in advance to reflect the numerical calculation.
말하기 단계(S22)가 수행되면 학습자는 메모리에 저장된 자신의 음성을 직접 청취할 수 있도록 녹음듣기단계(S30)를 선택할 수 있으며 이는 별도의 버튼으로 구성하여 마우스 클릭 시에 이벤트(Mouse_Event)가 발생하여 학습자가 발음한 내용을 송출한다. 이는 바람직하게는 별도의 메모리를 누적시키지 않고, 스택(stack)의 가장 상위에 있는 마지막 입력 자료를 불러와 스피커를 통하여 송출함으로서, 메모리 공간 할당의 효율성을 제공하거나 가비지(Garbage)가 누적되는 것을 해결할 수 있을 것이다.When the speaking step S22 is performed, the learner may select the recording listening step S30 to directly listen to his / her voice stored in the memory, which is configured as a separate button to generate an event (Mouse_Event) when the mouse is clicked. Send the pronunciation of the learner. This preferably provides the efficiency of memory space allocation or solves the accumulation of garbage by loading the last input data at the top of the stack and sending it through the speaker, without accumulating extra memory. Could be.
녹음듣기단계(S30)는 필수항목이 아니므로, 생략이 가능하며, 수치평가단계(S31)는 말하기 단계(S22)를 통하여 미리듣기단계(S21) 예문과의 음성데이터의 일치여부에 대하여 수치 값으로 화면에 디스플레이하는 단계로 이후 수치 값이 해당 단어가 저장되어 있는 데이터베이스 테이블과 학습평가 테이블에 갱신 및 반영된다.Recording listening step (S30) is not a necessary item, it can be omitted, numerical evaluation step (S31) is a numerical value for whether or not the voice data and the pre-listening step (S21) and the example sentences through the speaking step (S22) After that, the numerical value is updated and reflected in the database table and the learning evaluation table where the word is stored.
나가기 단계(S24)는 학습자가 나가기를 선택하는 경우(YES), 메인메뉴단계 (S3)로 분기하고, 나가기를 선택하지 않는 경우(NO), 단어선택단계(20)로 분기한다.The exit step S24 branches to the main menu step S3 when the learner selects to leave (YES), and branches to the word select step 20 when not to leave (NO).
단어장관리단계(S6)는 학습단계(S9)의 추가단계(S29)에서 분기하여 설명되었음으로, 생략하기로 한다.Wordbook management step (S6) has been described by branching in the additional step (S29) of the learning step (S9), it will be omitted.
하나의 단어에 대한 미리듣기단계(21)와 수치평가단계(S31)에서의 일련의 작업을 요약하면 다음과 같다.A summary of a series of operations in the pre-listening step 21 and the numerical evaluation step (S31) for one word is as follows.
사용자가 학습하고자 하는 단어를 선택해서 그 단어의 뜻과 의미, 관련문장 그리고 간단한 그림을 보고 공부한 다음, 미리 듣기를 눌러서 그 단어에 대한 발음을 들은 후, 말하기 버튼을 눌러서 그 단어에 대한 발성을 하게 되면 그 음성 데이터는 잡음처리 후 음성인식 엔진으로 전송되며 음성인식 엔진에서는 넘어온 데이터 를 가지고 후보군 리스트를 반환하며, 후보군 리스트를 가지고 평가 알고리즘에서 현재 선택된 단어와 비교해서 체크하고, 이처럼 후보군 리스트에서 단어가 존재하면 그 단어에 대한 스코어를 매기게 되고 사용자에게 피드백을 주게 되는 것이다.Select a word you want to learn to see and study the meaning and meaning of the word, related sentences, and a simple picture, and then press Preview to hear the pronunciation of the word, then press the Speak button to speak the word. The voice data is transmitted to the voice recognition engine after noise processing, and the voice recognition engine returns the candidate group list with the data passed over, and the candidate group list is checked against the currently selected word in the evaluation algorithm. Is present, it scores the word and gives feedback to the user.
메인메뉴단계(3)에서 게임단계(S5)를 선택하면, DB불러오기 단계(S10)가 수행된다.If the game step (S5) is selected in the main menu step (3), DB loading step (S10) is performed.
상기 DB불러오기 단계(S10)는 해당 학습자에 대한 학습단계(S9)에서의 결과DB저장단계(S23) 및 단어장관리단계(S6)에서의 추가/수정/삭제 단계(S25)를 통하여 저장된 개인별 취약점과 학습필요사항에 대한 단어리스트가 데이터베이스로부터 호출한다.The DB loading step (S10) is the individual vulnerabilities stored through the result DB storage step (S23) and the add / modify / delete step (S25) in the wordbook management step (S6) in the learning step (S9) for the learner A list of words for learning and learning needs is called from the database.
이후 게임화면에 난이도에 따라 순차적으로 호출된 단어 군이 출력되며, 도 9 예시와 같이, 게임은 위에서 단어가 바닥에 떨어지기 전까지 발성을 해서 없애는 방식으로, 선택된 단원의 단어 목록에서 랜덤하게 선택되거나, 개인별 학습 성과를 기초로 데이터베이스에서 취약한 부분을 중점적으로 출력되도록 할 수 있는 것이 바람직하다.After that, the word group is sequentially called out according to the difficulty level on the game screen. As shown in FIG. 9, the game is randomly selected from the word list of the selected unit in a manner in which the word is uttered until the word falls on the floor. For example, it is desirable to be able to focus on the weak parts of the database based on individual learning outcomes.
동작방식은 시작 버튼을 눌러서 게임을 시작한 다음, 말하기 버튼을 눌러서 화면에 표시된 단어들 중 하나를 발성하게 되면 발음체크단계(S13)를 통하여 학습자 발음과 표준발음을 비교하여 설정 값 이상의 수치가 나오면 그 단어는 사라지게 되며, 게임 스코어링은 성공/실패로 나누어 관리되며, 성공/실패 횟수가 수치체크단계(S14)를 통하여 사용자에게 보이게 된다.The operation method is to start the game by pressing the start button, and then to speak one of the words displayed on the screen by pressing the speaking button through the pronunciation check step (S13) to compare the learner pronunciation and standard pronunciation when the value is higher than the set value The word disappears, and game scoring is managed by success / failure, and the number of success / failure is shown to the user through the numerical check step S14.
또한 랜덤으로 단어들이 표시될 수 있기 때문에, 학습자 입장에서는 빠르고 정확하게 발음을 연습할 수 있고, 랜덤으로 선택된 단어들이 나오기 때문에 한 번에 동일한 단어가 두 번 이상 나올 경우 표시된 단어 중에서 더 밑에 있는 단어가 먼저 없어지도록 설정하는 것이 바람직하다.In addition, since words can be displayed randomly, learners can practice pronunciation quickly and accurately, and since randomly selected words appear, if the same word appears more than once at a time, the lower word among the displayed words comes first. It is preferable to set so that it disappears.
상기 수치체크단계(S14)를 통하여 사용자의 성공 횟수가 일정횟수 이상 올라가면 레벨증가단계(S15)를 수행하여 단계별출력단계(S12)의 난이도를 상향조정하게 되고, 반대로 사용자의 실패 횟수가 일정횟수 이상 올라가면 레벨감소단계(S14)를 수행하여 단계별출력단계(S12)의 난이도를 하향조정하게 된다.If the number of successes of the user goes up by a certain number of times through the numerical check step (S14), the level increase step (S15) is performed to increase the difficulty of the step-by-step output step (S12). Ascending the level decrease step (S14) to adjust the difficulty of the step-by-step output step (S12).
학습자는 게임단계(S5)에서 언제나 나가기 단계(S11)를 선택할 수 있고 나가기를 선택한 경우(YES), 게임결과(레벨)가 데이터베이스에 반영된다.The learner can select the exit step (S11) at any time in the game step (S5), and if you choose to exit (YES), the game result (level) is reflected in the database.
본 발명에 의한 지능형 언어 학습 및 발음교정 시스템은, 학습단계(S9)에서 한 단원에 있는 모든 단어들을 통과(음성인식 결과 설정 수치이상)하면, 문장학습 버튼이 생성되도록 하는 것이 바람직하다.In the intelligent language learning and pronunciation correction system according to the present invention, when all the words in a unit pass through the learning step (S9 or more), it is preferable to generate a sentence learning button.
이와 같은 문장학습버튼을 누르면 도 10 예시와 같은 문장학습 화면으로 이동하여, 각 문장 앞에 있는 스피커 아이콘을 클릭하여 문장을 미리 듣기 하고, 버튼 하단의 말하기 버튼을 이용해서 발성하고, 멈추기 버튼을 눌러 녹음을 중지한다.If you press the sentence learning button, go to the sentence learning screen as shown in Figure 10, by clicking the speaker icon in front of each sentence to listen to the sentences in advance, using the talk button at the bottom of the button to speak, and press the stop button to record Stop.
중지 버튼을 푸시하고 녹음듣기 버튼을 눌러 현재 발성된 음성 녹음을 반복 청취할 수 있으며, 단어학습 버튼을 누르면 기존의 학습단계(S9) 화면으로 분기한다.Push the stop button and press the record listening button to repeatedly hear the current voice recording, press the word learning button branches to the existing learning step (S9) screen.
도 1 은 본 발명에 의한 지능형 언어 학습 시스템의 전체 순서도.1 is an overall flowchart of an intelligent language learning system according to the present invention.
도 2 는 본 발명에 의한 지능형 언어 학습 시스템의 개략 블록도.2 is a schematic block diagram of an intelligent language learning system according to the present invention;
도 3a는 본 발명에 의한 지능형 언어 학습 시스템의 설치화면 이미지.Figure 3a is an installation screen image of the intelligent language learning system according to the present invention.
도 3b는 본 발명에 의한 지능형 언어 학습 시스템의 폴더선택화면 이미지.Figure 3b is a folder selection screen image of the intelligent language learning system according to the present invention.
도 4a는 본 발명에 의한 지능형 언어 학습 시스템의 설치진행화면 이미지.Figure 4a is an installation progress screen image of the intelligent language learning system according to the present invention.
도 4b는 본 발명에 의한 지능형 언어 학습 시스템의 설치완료화면 이미지.Figure 4b is the installation complete screen image of the intelligent language learning system according to the present invention.
도 5a는 본 발명에 의한 지능형 언어 학습 시스템의 초기실행화면 이미지.Figure 5a is an initial execution screen image of the intelligent language learning system according to the present invention.
도 5b는 본 발명에 의한 지능형 언어 학습 시스템의 인증요청화면 이미지.Figure 5b is an authentication request screen image of the intelligent language learning system according to the present invention.
도 6 은 본 발명에 의한 지능형 언어 학습 시스템의 메인화면화면 이미지.6 is a main screen image of the intelligent language learning system according to the present invention.
도 7 은 본 발명에 의한 지능형 언어 학습 시스템의 단계선택화면 이미지.7 is a step selection screen image of the intelligent language learning system according to the present invention.
도 8 은 본 발명에 의한 지능형 언어 학습 시스템의 단어선택화면 이미지.8 is a word selection screen image of the intelligent language learning system according to the present invention.
도 9 는 본 발명에 의한 지능형 언어 학습 시스템의 게임선택화면 이미지.9 is a game selection screen image of the intelligent language learning system according to the present invention.
도 10은 본 발명에 의한 지능형 언어 학습 시스템의 문장복습화면 이미지.10 is a sentence review screen image of the intelligent language learning system according to the present invention.
도 11은 본 발명에 의한 지능형 언어 학습 시스템의 단어관리화면 이미지.11 is a word management screen image of the intelligent language learning system according to the present invention.
도 12는 본 발명에 의한 지능형 언어 학습 시스템의 도 11 세부화면 이미지.12 is a detailed screen image of FIG. 11 of an intelligent language learning system according to the present invention; FIG.
도 13은 본 발명에 의한 지능형 언어 학습 시스템의 도 12 세부화면 이미지.Figure 13 is a detailed screen image of Figure 12 of the intelligent language learning system according to the present invention.
도 14는 본 발명에 의한 지능형 언어 학습 시스템의 통계선택화면 이미지.14 is a statistical selection screen image of the intelligent language learning system according to the present invention.
Claims (5)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090121766A KR20110064964A (en) | 2009-12-09 | 2009-12-09 | The intelligent language system which has a improve on pronunciation |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090121766A KR20110064964A (en) | 2009-12-09 | 2009-12-09 | The intelligent language system which has a improve on pronunciation |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20110064964A true KR20110064964A (en) | 2011-06-15 |
Family
ID=44398311
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090121766A KR20110064964A (en) | 2009-12-09 | 2009-12-09 | The intelligent language system which has a improve on pronunciation |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20110064964A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220022763A (en) * | 2020-08-19 | 2022-02-28 | 주식회사 오투오 | Method and recording medium storing program for the same |
KR20220085992A (en) * | 2020-12-16 | 2022-06-23 | 주식회사 투파이브듀 | System and method for providing personalized game service combined to dynamic learning contents |
KR20230109897A (en) * | 2022-01-14 | 2023-07-21 | 한림대학교 산학협력단 | Device, control method, and program for performing visualization and rehabilitation of deep learning-based speech disorder |
-
2009
- 2009-12-09 KR KR1020090121766A patent/KR20110064964A/en not_active Application Discontinuation
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220022763A (en) * | 2020-08-19 | 2022-02-28 | 주식회사 오투오 | Method and recording medium storing program for the same |
KR20220085992A (en) * | 2020-12-16 | 2022-06-23 | 주식회사 투파이브듀 | System and method for providing personalized game service combined to dynamic learning contents |
KR20230109897A (en) * | 2022-01-14 | 2023-07-21 | 한림대학교 산학협력단 | Device, control method, and program for performing visualization and rehabilitation of deep learning-based speech disorder |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11069336B2 (en) | Systems and methods for name pronunciation | |
JP6588637B2 (en) | Learning personalized entity pronunciation | |
KR102302137B1 (en) | Apparatus for studying foreign language and method for providing foreign language study service by using the same | |
US8812314B2 (en) | Method of and system for improving accuracy in a speech recognition system | |
WO2014136534A1 (en) | Comprehension assistance system, comprehension assistance server, comprehension assistance method, and computer-readable recording medium | |
KR101819459B1 (en) | Voice recognition system and apparatus supporting voice recognition error correction | |
KR101004913B1 (en) | An apparatus and method for evaluating spoken ability by speech recognition through computer-lead interaction and thereof | |
Székely et al. | Evaluating expressive speech synthesis from audiobooks in conversational phrases | |
US20220093086A1 (en) | Method and a system for capturing conversations | |
US9881611B2 (en) | System and method for providing voice communication from textual and pre-recorded responses | |
KR20110064964A (en) | The intelligent language system which has a improve on pronunciation | |
JP2014123813A (en) | Automatic scoring device for dialog between operator and customer, and operation method for the same | |
KR20080097619A (en) | Learning system and method by interactive conversation | |
JP2020071312A (en) | Method and system for evaluating linguistic ability | |
KR102272567B1 (en) | Speech recognition correction system | |
KR20190070682A (en) | System and method for constructing and providing lecture contents | |
KR100593590B1 (en) | Automatic Content Generation Method and Language Learning Method | |
KR20140075994A (en) | Apparatus and method for language education by using native speaker's pronunciation data and thought unit | |
JP2005031207A (en) | Pronunciation practice support system, pronunciation practice support method, pronunciation practice support program, and computer readable recording medium with the program recorded thereon | |
Deshpande et al. | Speech Coach: A framework to evaluate and improve speech delivery | |
McCrocklin et al. | Salukispeech: integrating a new ASR tool into students’ English pronunciation practice | |
KR102526391B1 (en) | System for providing interpretation services based on distribution model | |
JP2005241767A (en) | Speech recognition device | |
KR20140073768A (en) | Apparatus and method for language education by using native speaker's pronunciation data and thoughtunit | |
KR102568994B1 (en) | Apparatus and method for providing feedback for improving a user's speech ability |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |