KR102101817B1 - Language study supporting apparatus using video publicated on the internet - Google Patents

Language study supporting apparatus using video publicated on the internet Download PDF

Info

Publication number
KR102101817B1
KR102101817B1 KR1020180070165A KR20180070165A KR102101817B1 KR 102101817 B1 KR102101817 B1 KR 102101817B1 KR 1020180070165 A KR1020180070165 A KR 1020180070165A KR 20180070165 A KR20180070165 A KR 20180070165A KR 102101817 B1 KR102101817 B1 KR 102101817B1
Authority
KR
South Korea
Prior art keywords
learner
language learning
video content
content
terminal
Prior art date
Application number
KR1020180070165A
Other languages
Korean (ko)
Other versions
KR20190142907A (en
Inventor
신정훈
Original Assignee
주식회사 에듀템
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에듀템 filed Critical 주식회사 에듀템
Priority to KR1020180070165A priority Critical patent/KR102101817B1/en
Publication of KR20190142907A publication Critical patent/KR20190142907A/en
Application granted granted Critical
Publication of KR102101817B1 publication Critical patent/KR102101817B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • G06Q50/205Education administration or guidance
    • G06Q50/2057Career enhancement or continuing education service
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/06Foreign languages

Abstract

본 발명은 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 관한 것이다.
본 발명은 관리자가 관리자 단말을 통해 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학 학습을 지원하는 어학학습지원 콘텐츠를 입력하고, 상기 관리자에 의해 입력된 어학학습지원 콘텐츠를 상기 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 관리하도록 지원하는 관리자 지원 모듈 및 학습자가 학습자 단말을 통해 상기 관리자 지원 모듈에 의해 상호 연계되어 관리되는 상기 공개 동영상 콘텐츠, 상기 동영상 콘텐츠의 재생시간 정보 및 상기 어학학습지원 콘텐츠를 이용하여 어학 학습을 수행하도록 지원하는 학습자 지원 모듈을 포함한다.
본 발명에 따르면, 강사 등과 같은 관리자가 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학학습 콘텐츠를 편리하게 등록 및 관리할 수 있고, 학습자가 시간 및 공간의 제약 조건에 벗어나 언제 어디서나 체계적이고 효과적인 어학학습을 수행할 수 있고, 학습자의 발음에 인공지능 음성인식 기술을 적용하여 발음의 적정성을 평가하고 그 결과를 학습자에 피드백함으로써, 학습자의 발음을 효과적으로 교정할 수 있다.
The present invention relates to a language learning support apparatus using a video published on the Internet.
In the present invention, the administrator inputs language learning support content supporting language learning associated with public video content on the Internet through the manager terminal, and the language learning support content input by the manager is added to the play time information of the public video content. A manager support module that supports matching and management, and learns a language using the public video content, play time information of the video content, and the language learning support content managed and interconnected by the manager support module through a learner terminal. Includes a learner support module that supports to perform the.
According to the present invention, an administrator, such as an instructor, can conveniently register and manage language learning content linked to public video content on the Internet, and learners can perform systematic and effective language learning anytime, anywhere, outside the constraints of time and space It is possible to effectively correct the pronunciation of the learner by applying artificial intelligence speech recognition technology to the learner's pronunciation and evaluating the appropriateness of the pronunciation and feeding the result back to the learner.

Description

인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치{LANGUAGE STUDY SUPPORTING APPARATUS USING VIDEO PUBLICATED ON THE INTERNET}LANGUAGE STUDY SUPPORTING APPARATUS USING VIDEO PUBLICATED ON THE INTERNET}

본 발명은 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 관한 것이다. 보다 구체적으로, 본 발명은 강사 등과 같은 관리자가 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학학습 콘텐츠를 편리하게 등록 및 관리할 수 있고, 학습자가 시간 및 공간의 제약 조건에 벗어나 언제 어디서나 체계적이고 효과적인 어학학습을 수행할 수 있고, 학습자의 발음에 인공지능 음성인식 기술을 적용하여 발음의 적정성을 평가하고 그 결과를 학습자에 피드백함으로써, 학습자의 발음을 효과적으로 교정할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 관한 것이다.The present invention relates to a language learning support apparatus using a video published on the Internet. More specifically, the present invention allows administrators such as lecturers, etc. to conveniently register and manage language learning contents linked with public video content on the Internet, and learners can systematically and effectively learn languages anytime and anywhere outside the constraints of time and space. Using the video released on the Internet to effectively correct the pronunciation of the learner by performing artificial intelligence speech recognition technology to the learner's pronunciation and evaluating the adequacy of the pronunciation and feeding the result back to the learner. It relates to a language learning support device.

현재 PC, 모바일 단말 등을 통한 외국어 학습 서비스를 제공하는 기술들이 알려져 있다.Currently, technologies for providing a foreign language learning service through a PC, a mobile terminal, and the like are known.

예를 들어, 모바일 단말은 기본적으로 이동하면서 통신하기 위한 것이고, 통신은 언제 어디서나 발생할 수 있으므로 필요한 경우에 즉시 통신하기 위하여 항상 휴대하지만 실제로 통신에 사용하는 시간 및 이용 횟수는 매우 적은 것이 일반적이다.For example, the mobile terminal is basically to communicate while moving, and since communication can occur anytime and anywhere, it is common to always carry it to communicate immediately when necessary, but in practice, the time and number of times used for communication are very small.

스마트폰(smart-phone)은 이동통신용 모바일 단말에 태블릿 컴퓨터(table PC) 또는 소형 컴퓨터의 기능을 부가한 것으로 보급 및 사용이 보편화되는 추세이고, 스마트폰(이하, ‘모바일 단말’이라 한다.)에서 운용되는 다양한 응용(app; application, 앱) 프로그램은 모바일 단말 제조사와 응용 프로그램 전문 제작업체 등으로부터 각각 개발되어 제공되고 있다.Smartphones (smart-phone) is a mobile terminal for mobile communication as a tablet computer (table PC) or a small computer as a function of dissemination and use is becoming common, and smart phones (hereinafter referred to as 'mobile terminals'). Various application programs (apps) that are operated on are being developed and provided by mobile terminal manufacturers and application program manufacturers.

이와 같이 다양하게 개발된 앱 프로그램은 인터넷의 해당 사이트 또는 앱 스토어를 통하여 검색하고 선택하여 실시간으로 이용할 수 있게 제공되고 있다.The variously developed app programs are provided so that they can be searched and selected through the corresponding site or app store on the Internet and used in real time.

한편, 최근의 사회생활은 점차 국제화되고, 외국과의 거래도 많아지며 유익한 정보가 외국으로부터 대량 유입 되고 외국은 필요한 시기에 언제든지 자유롭게 여행할 수 있게 되면서 외국어 학습의 필요성이 점차 증가하게 되었고, 항상 휴대하는 모바일 단말을 이용하여 필요한 외국어 학습을 진행할 필요성이 증가하고 있다.On the other hand, the recent social life has gradually become internationalized, transactions with foreign countries have increased, and useful information flows from foreign countries, and foreign countries can travel freely at any time they need, and the need for foreign language learning has gradually increased. There is an increasing need to conduct necessary foreign language learning using a mobile terminal.

모바일 단말을 외국어 학습에 활용하는 필요성을 충족하기 위하여 어학학습용으로 다양한 앱(app) 프로그램이 개발되고 인터넷의 해당 사이트 또는 앱 스토어 등으로부터 다양한 콘텐츠의 앱을 확보할 수 있게 되었다.In order to meet the necessity of using a mobile terminal for learning a foreign language, various app programs have been developed for language learning, and it is possible to secure apps of various contents from corresponding sites or app stores on the Internet.

한편, 인터넷에는 유튜브(U-tube) 등의 사이트를 통하여 세계 각국으로부터 해당국의 언어가 포함되는 다양한 동영상이 제작되어 무상으로 제공되고 있으며, 이러한 동영상은 무상으로 이용할 수 있으므로 어학에 활용하는 경우 살아있는 어학학습용 콘텐츠 교재로 실시간 활용할 수 있는 장점이 있다.On the other hand, on the Internet, various videos containing the language of the corresponding country are produced and provided free of charge from sites around the world through sites such as U-tube. There is an advantage that can be used in real time as a textbook for language learning.

종래 기술에 의하여 제공되는 어학용 앱 프로그램의 콘텐츠는 많은 제작비용을 투입하여 원어민의 표준발음을 이용하고 표준문법에 적합하게 작성되어 제공되는 장점이 있으나 실사용 언어와는 다소 차이가 있을 수 있으며, 어학용 콘텐츠 제작에 많은 비용이 소요되므로 공급되는 콘텐츠의 숫자가 비교적 작아 어학 학습에 많은 불편함이 있고 또한, 콘텐츠의 저작권을 보호하여야 하므로 사용이 제한되거나 비용을 지불하여야 하는 등의 문제가 있었다.The content of the language app program provided by the prior art has the advantage of using standard pronunciation of a native speaker by injecting a large amount of production cost, and is prepared and provided in accordance with the standard grammar, but may differ somewhat from the actual language. There is a problem in that the number of supplied contents is relatively small, so there is a lot of inconvenience in language learning because the production of contents is expensive, and the copyright of the contents needs to be protected.

즉, 종래 기술은 모바일 단말로 외국어를 학습하기 위한 다양한 콘텐츠를 제공받지 못하고 특히, 살아있는 현지 언어를 이용한 실시간 학습이 어려운 문제가 있었다.That is, the prior art is not provided with various contents for learning a foreign language with a mobile terminal, and in particular, there is a problem that real-time learning using a living local language is difficult.

또한, 종래 기술에 의하여 제공되는 외국어 학습용 콘텐츠는 원어민의 발음에 대응하는 자막, 번역문, 숙어, 단어 등을 공부하도록 하는 부가정보를 함께 제공하지 못하므로 단순한 듣기학습(리스닝)에 한정되고 단어 학습을 위하여 별도의 시간과 노력을 많이 소모하여야 하는 불편함이 여전히 남아 있었다.In addition, the content for foreign language learning provided by the prior art is limited to simple listening learning (listening) because it does not provide additional information to study subtitles, translations, idioms, words, etc. corresponding to the pronunciation of native speakers. To this end, the inconvenience of spending a lot of time and effort still remained.

따라서 종래 기술에 의하여 모바일 단말로 외국어를 학습하는 앱 콘텐츠는 현지의 살아있는 생활 외국어로 실시간 학습하기 위한 다양한 콘텐츠를 효과적으로 제공하지 못하는 문제가 있다.Therefore, the app content for learning a foreign language with a mobile terminal according to the prior art has a problem in that it cannot effectively provide various contents for real-time learning in a foreign language living in the local.

대한민국 등록특허공보 제10-0954498호(등록일자: 2010년 04월 15일, 명칭: 휴대용 단말기를 이용한 외국어 학습방법)Republic of Korea Registered Patent Publication No. 10-0954498 (Registration Date: April 15, 2010, Name: Foreign language learning method using a portable terminal) 대한민국 공개특허공보 특2002-0061239호(공개일자: 2002년 07월 24일, 명칭: 인터넷을 통한 영어학습시스템 및 방법)Republic of Korea Patent Publication No. 2002-0061239 (published date: July 24, 2002, name: English learning system and method through the Internet)

본 발명은 어학학습과 관련하여 강사 등과 같은 관리자가 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학학습 콘텐츠를 편리하게 등록 및 관리할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치를 제공하는 것을 기술적 과제로 한다.The present invention is to provide a language learning support device using a video published on the Internet so that a manager, such as an instructor and the like, can conveniently register and manage language learning content associated with public video content on the Internet in relation to language learning. This is a technical task.

또한, 어학학습과 관련하여 학습자가 시간 및 공간의 제약 조건에 벗어나 언제 어디서나 체계적이고 효과적인 어학학습을 수행할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치를 제공하는 것을 기술적 과제로 한다.In addition, it is a technical task to provide a language learning support device using a video published on the Internet that enables learners to perform systematic and effective language learning anytime, anywhere, regardless of time and space constraints in relation to language learning. .

또한, 본 발명은 학습자의 발음에 인공지능 음성인식 기술을 적용하여 발음의 적정성을 평가하고 그 결과를 학습자에 피드백함으로써, 학습자의 발음을 효과적으로 교정할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치를 제공하는 것을 기술적 과제로 한다.In addition, the present invention evaluates the adequacy of pronunciation by applying artificial intelligence speech recognition technology to the learner's pronunciation and feeds the result back to the learner, thereby using the language published on the Internet to effectively correct the learner's pronunciation. The technical task is to provide a learning support device.

이러한 기술적 과제를 해결하기 위한 본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치는 관리자가 관리자 단말을 통해 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학 학습을 지원하는 어학학습지원 콘텐츠를 입력하고, 상기 관리자에 의해 입력된 어학학습지원 콘텐츠를 상기 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 관리하도록 지원하는 관리자 지원 모듈 및 학습자가 학습자 단말을 통해 상기 관리자 지원 모듈에 의해 상호 연계되어 관리되는 상기 공개 동영상 콘텐츠, 상기 동영상 콘텐츠의 재생시간 정보 및 상기 어학학습지원 콘텐츠를 이용하여 어학 학습을 수행하도록 지원하는 학습자 지원 모듈을 포함한다.In order to solve this technical problem, the language learning support apparatus using the video published on the Internet according to the present invention inputs the language learning support content through which the administrator supports the language learning linked to the public video content on the Internet through the administrator terminal. , The manager support module that supports matching and managing the language learning support content inputted by the manager to the play time information of the public video content, and the disclosure in which learners are interconnected and managed by the manager support module through a learner terminal. And a learner support module that supports language learning using video content, duration information of the video content, and the language learning support content.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 관리자 지원 모듈은, 상기 관리자 단말로부터 상기 공개 동영상 콘텐츠의 URL을 전달받아 관리하는 URL 관리부, 상기 URL에 해당하는 공개 동영상 콘텐츠가 표시되는 관리자 단말에 상기 관리자가 상기 어학학습지원 콘텐츠를 상기 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 입력하기 위한 관리자 인터페이스 화면을 제공하는 관리자 인터페이스 제공부 및 상기 공개 동영상 콘텐츠의 URL, 상기 관리자 인터페이스 화면을 통해 입력된 상기 공개 동영상 콘텐츠의 재생시간 정보 및 상기 재생시간 정보에 매칭된 어학학습지원 콘텐츠를 관리자 데이터베이스에 저장하고 관리하는 어학학습지원 콘텐츠 관리부를 포함하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, the manager support module is a URL management unit that receives and manages the URL of the public video content from the manager terminal, and the public video corresponding to the URL The administrator interface providing unit for providing the administrator interface screen for the administrator to match and input the language learning support content to the play time information of the public video content on the manager terminal where the content is displayed, the URL of the public video content, and the manager And a language learning support content management unit that stores and manages the play time information of the public video content input through the interface screen and the language learning support content matching the play time information in an administrator database.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 재생시간 정보는 상기 공개 동영상 콘텐츠의 전체 콘텐츠 재생구간에 포함된 부분 재생구간들의 시점과 종점을 포함하고, 상기 어학학습지원 콘텐츠는 상기 부분 재생구간들의 시점과 종점에 매칭된 원문 자막 정보, 원문 발음 정보, 번역문 자막 정보, 어휘 정보를 포함하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, the play time information includes the start and end points of the partial play sections included in the entire content play section of the public video content, and the language learning The supporting content is characterized by including original subtitle information, original pronunciation information, translated subtitle information, and vocabulary information matching the start and end points of the partial reproduction sections.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 학습자 지원 모듈은, 상기 학습자 단말에 어학학습 리스트가 제공되도록 관리하는 어학학습 리스트 관리부 및 상기 학습자 단말을 통해 상기 어학학습 리스트 중에서 특정 항목이 선택되는 경우, 선택된 항목에 해당하는 공개 동영상 콘텐츠의 URL과 어학학습지원 콘텐츠가 상기 학습자 단말로 제공되도록 관리하는 어학학습 관리부를 포함하고, 상기 학습자 단말로 제공되는 어학학습지원 콘텐츠는 상기 공개 동영상 콘텐츠의 재생시간 정보에 매칭되어 있는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, the learner support module, the language learning list management unit and the language learning through the learner terminal to manage the language learning list to be provided to the learner terminal When a specific item is selected from the list, the URL of the public video content corresponding to the selected item and a language learning management unit that manages the language learning support content to be provided to the learner terminal, and the language learning support content provided to the learner terminal Is characterized in that it matches the play time information of the public video content.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 공개 동영상 콘텐츠는 인터넷 상의 동영상 소스(source)로부터 상기 학습자 단말로 스트리밍(streaming) 또는 다운로드 방식으로 직접 전송되는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, the public video content is transmitted directly from the video source (source) on the Internet to the learner terminal by streaming (streaming) or download method do.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 어학학습 관리부는, 상기 학습자가 상기 학습자 단말을 통해 시청 모드와 어학 모드를 선택할 수 있도록 지원하고, 상기 학습자가 상기 학습자 단말을 통해 상기 어학 모드중의 듣기 모드를 선택한 경우, 상기 학습자 단말에 제공되는 학습자 인터페이스 화면에 상기 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 번역문 자막 정보, 어휘 정보를 포함하는 어학학습지원 콘텐츠가 상기 공개 동영상 콘텐츠와 구분되어 표시되도록 지원하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, the language learning management unit supports the learner to select a viewing mode and a language mode through the learner terminal, and the learner is the learner When the listening mode of the language mode is selected through the terminal, language learning support content including original subtitle information, original pronunciation information, translated subtitle information, and vocabulary information of the public video content on a learner interface screen provided to the learner terminal It characterized in that it supports to be displayed separately from the public video content.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 어학학습 관리부는, 상기 학습자가 상기 학습자 단말을 통해 시청 모드와 어학 모드를 선택할 수 있도록 지원하고, 상기 학습자가 상기 학습자 단말을 통해 상기 어학 모드중의 말하기 모드를 선택한 경우, 상기 학습자 단말에 제공되는 학습자 인터페이스 화면에 상기 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 상기 공개 동영상 콘텐츠의 재생을 선택하는 재생 버튼 및 상기 학습자의 발음 따라하기를 선택하는 말하기 버튼이 상기 공개 동영상 콘텐츠와 구분되어 표시되도록 지원하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, the language learning management unit supports the learner to select a viewing mode and a language mode through the learner terminal, and the learner is the learner When the speaking mode of the language mode is selected through the terminal, the original subtitle information, the original pronunciation information of the public video content, and a play button for selecting the playback of the public video content on the learner interface screen provided to the learner terminal and the It is characterized in that the speaking button for selecting the learner's pronunciation is supported to be displayed separately from the public video content.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 학습자에 의해 상기 말하기 모드의 말하기 버튼이 선택된 경우, 상기 어학학습 관리부는, 상기 학습자 단말로부터 상기 공개 동영상 콘텐츠에 대한 학습자 발음 정보를 수신하고, 상기 공개 동영상 콘텐츠의 원문 자막 정보 및 상기 학습자 발음 정보에 인공지능 음성인식 기술을 적용하여 학습자 발음 점수를 산출하고, 산출된 학습자 발음 점수를 상기 학습자 단말로 제공하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, when the speaking button of the speaking mode is selected by the learner, the language learning management unit, a learner for the public video content from the learner terminal Receiving pronunciation information, applying an artificial intelligence speech recognition technology to the original subtitle information of the public video content and the learner pronunciation information to calculate a learner pronunciation score, and providing the calculated learner pronunciation score to the learner terminal do.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 어학학습 관리부는, 상기 원문 자막 정보 및 상기 학습자 발음 정보를 인공지능 음성인식을 지원하는 외부 서버에 전송하고, 상기 외부 서버로부터 전송받은 인공지능 음성인식 결과정보를 미리 정해진 점수 변환 알고리즘에 적용하여 상기 학습자 발음 점수를 산출하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, the language learning management unit transmits the original text subtitle information and the learner pronunciation information to an external server supporting artificial intelligence voice recognition, and the external It is characterized in that the learner's pronunciation score is calculated by applying artificial intelligence voice recognition result information transmitted from a server to a predetermined score conversion algorithm.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 학습자가 상기 학습자 단말을 통해 인공지능 대화 모드를 선택한 경우, 상기 어학학습 관리부는, 상기 학습자 단말을 통해 질문 텍스트 및 상기 질문 텍스트를 TTS(Text To Speech) 변환한 기계어 질문 음성을 제공하고, 상기 학습자 단말을 통해 입력받은 학습자 음성을 STT(Speech To Text) 변환한 기계어 답변 텍스트를 제공하는 것을 특징으로 한다.In a language learning support apparatus using a video published on the Internet according to the present invention, when the learner selects an AI conversation mode through the learner terminal, the language learning management unit may display a question text and the question through the learner terminal. Characterized in that it provides a machine-language question voice converted from text to speech (TTS) to a question text, and machine-to-answer text converted from speech to text (STT) of a learner voice received through the learner terminal.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 학습자가 상기 학습자 단말을 통해 상황별 인공지능 대화 모드를 선택한 경우, 상기 어학학습 관리부는, 상기 학습자 단말을 통해 상기 학습자로부터 설정상황정보를 입력받고, 상기 학습자 단말을 통해 상기 상황설정정보에 기계학습 알고리즘을 적용하여 획득된 상황별 질문 텍스트 및 상기 상황별 질문 텍스트를 TTS 변환한 상황별 기계어 질문 음성을 제공하고, 상기 학습자 단말을 통해 입력받은 학습자 음성을 STT 변환한 기계어 답변 텍스트를 제공하고, 상기 상황별 질문 텍스트 및 상기 학습자 음성에 기계학습 알고리즘을 적용하여 상기 학습자 음성을 상기 상황별 질문 텍스트에 매칭되도록 유도하는 첨삭지도 텍스트 및 상기 첨삭지도 텍스트를 TTS 변환한 기계어 첨삭지도 음성을 상기 학습자 단말을 통해 제공하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, when the learner selects the artificial intelligence conversation mode for each situation through the learner terminal, the language learning management unit, the learner through the learner terminal Provides context information from the context, provides context-specific question text obtained by applying a machine learning algorithm to the context-setting information through the learner terminal, and provides context-specific machine-language question voice obtained by TTS-converting the context-specific question text. Providing machine-language answer text by STT-converting the learner's voice input through the learner's terminal, and applying machine learning algorithm to the contextual question text and the learner's voice to derive the learner's voice to match the contextual question text TTS conversion of map text and above-mentioned corrected map text The machine cheomsak guidance voice is characterized in that provided over said learner terminal.

본 발명에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치에 있어서, 상기 학습자가 상기 학습자 단말을 통해 인공지능 평가 모드를 선택한 경우, 상기 어학학습 관리부는, 상기 학습자 단말을 통해 상기 학습자의 수준을 평가하기 위한 평가용 질문 텍스트 및 상기 평가용 질문 텍스트를 TTS 변환한 평가용 기계어 질문 음성을 제공하고, 상기 학습자 단말을 통해 입력받은 학습자 음성을 STT(Speech To Text) 변환한 기계어 답변 텍스트를 제공하는 과정을 반복하여 상기 학습자의 수준을 평가하기 위한 정보를 수집하고, 수집된 정보에 따라 상기 학습자의 수준을 평가항목별로 구분하여 상기 학습자에게 제공하는 것을 특징으로 한다.In the language learning support apparatus using a video published on the Internet according to the present invention, when the learner selects an artificial intelligence evaluation mode through the learner terminal, the language learning management unit, the learner level through the learner terminal Provides the evaluation question text for evaluating and the evaluation question text for TTS conversion of the evaluation question text, and provides the machine speech answer text of STT (Speech To Text) conversion of the learner's voice received through the learner terminal. It is characterized by repeating the above process to collect information for evaluating the learner's level, and classifying the learner's level for each evaluation item according to the collected information to provide the learner.

본 발명에 따르면, 어학학습과 관련하여 강사 등과 같은 관리자가 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학학습 콘텐츠를 편리하게 등록 및 관리할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치가 제공되는 효과가 있다.According to the present invention, in connection with language learning, a language learning support apparatus using a video published on the Internet is provided so that an administrator, such as an instructor, can conveniently register and manage language learning content associated with public video content on the Internet. It has an effect.

또한, 어학학습과 관련하여 학습자가 시간 및 공간의 제약 조건에 벗어나 언제 어디서나 체계적이고 효과적인 어학학습을 수행할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치가 제공되는 효과가 있다.In addition, in relation to language learning, there is an effect of providing a language learning support device using a video published on the Internet that enables a learner to perform systematic and effective language learning anytime, anywhere, outside the constraints of time and space.

또한, 학습자의 발음에 인공지능 음성인식 기술을 적용하여 발음의 적정성을 평가하고 그 결과를 학습자에 피드백함으로써, 학습자의 발음을 효과적으로 교정할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치가 제공되는 효과가 있다.In addition, by applying artificial intelligence speech recognition technology to learner's pronunciation, evaluating the appropriateness of pronunciation and feeding the result back to the learner, a language learning support device using a video published on the Internet to effectively correct the learner's pronunciation Has the effect provided.

또한, 인터넷상의 다양한 동영상 자료를 활용하여, 동일한 문장이라도 각양각색의 다양한 사람의 발음을 들어볼 수 있고, 다양한 장소에서 다양한 의미로 사용됨을 배울 수 있는 효과가 있다.In addition, by utilizing various video materials on the Internet, even if the same sentence can hear the pronunciation of a variety of different people, there is an effect that can be used in a variety of places to learn the meaning.

도 1은 본 발명의 일 실시 예에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치를 나타낸 도면이고,
도 2는 본 발명의 일 실시 예에 있어서, 관리자 지원 과정의 동작을 예시적으로 설명하기 위한 도면이고,
도 3은 본 발명의 일 실시 예에 있어서, 관리자 지원 모듈이 어학학습지원 콘텐츠 등록을 위해 제공하는 인터페이스 화면을 예시적으로 나타낸 도면이고,
도 4는 본 발명의 일 실시 예 있어서, 학습자 지원 과정의 동작을 예시적으로 설명하기 위한 도면이고,
도 5는 본 발명의 일 실시 예 있어서, 시청 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고,
도 6은 본 발명의 일 실시 예 있어서, 어학 모드 중에서 듣기 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고,
도 7은 본 발명의 일 실시 예 있어서, 어학 모드 중에서 말하기 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고,
도 8은 본 발명의 일 실시 예 있어서, 어학 모드 중에서 게임(퀴즈) 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고,
도 9는 본 발명의 일 실시 예 있어서, 인공지능 대화 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고,
도 10은 본 발명의 일 실시 예 있어서, 상황별 인공지능 대화 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고,
도 11은 본 발명의 일 실시 예 있어서, 인공지능 평가 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고,
도 12는 본 발명의 일 실시 예 있어서, 인공지능 평가 모드에 의해 학습자에게 제공되는 예시적인 평가정보 화면 구성을 나타내는 도면이다.
1 is a view showing a language learning support apparatus using a video published on the Internet according to an embodiment of the present invention,
2 is a view for explaining the operation of the administrator support process in an embodiment of the present invention by way of example,
3 is an exemplary view showing an interface screen provided by an administrator support module for registering language learning support content in an embodiment of the present invention;
4 is a view for illustratively explaining the operation of the learner support process in an embodiment of the present invention,
5 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when a viewing mode is selected in one embodiment of the present invention;
6 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when a listening mode is selected among language modes in an embodiment of the present invention;
7 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when a speaking mode is selected among language modes in an embodiment of the present invention;
8 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when a game (quiz) mode is selected among language modes in one embodiment of the present invention;
9 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when an AI conversation mode is selected in one embodiment of the present invention;
10 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when an AI conversation mode for each context is selected in one embodiment of the present invention;
11 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when an AI evaluation mode is selected in one embodiment of the present invention;
12 is a diagram illustrating an exemplary evaluation information screen configuration provided to a learner by an artificial intelligence evaluation mode in an embodiment of the present invention.

본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태들로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.Specific structural or functional descriptions of the embodiments according to the concept of the present invention disclosed in this specification are exemplified only for the purpose of explaining the embodiments according to the concept of the present invention, and the embodiments according to the concept of the present invention It can be implemented in various forms and is not limited to the embodiments described herein.

본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시 예들을 도면에 예시하고 본 명세서에서 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예들을 특정한 개시 형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.Embodiments according to the concept of the present invention can be applied to various changes and can have various forms, so the embodiments will be illustrated in the drawings and described in detail herein. However, this is not intended to limit the embodiments according to the concept of the present invention to specific disclosure forms, and includes all changes, equivalents, or substitutes included in the spirit and scope of the present invention.

이하에서는, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시 예에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치를 나타낸 도면이다.1 is a diagram illustrating a language learning support apparatus using a video published on the Internet according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시 예에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치(40)는 관리자 지원 모듈(50) 및 학습자 지원 모듈(60)을 포함한다.Referring to FIG. 1, a language learning support apparatus 40 using a video published on the Internet according to an embodiment of the present invention includes an administrator support module 50 and a learner support module 60.

이하의 설명에서, 동영상 소스(source)(10)는 동영상을 인터넷 상에 무료로 공개하는 유튜브(YOUTUBE) 등과 같은 주체가 운영하는 서버일 수 있으나, 이에 한정되지는 않는다.In the following description, the video source 10 may be a server operated by a subject, such as YouTube (YOUTUBE), which freely releases videos on the Internet, but is not limited thereto.

또한, 관리자 단말(20)은 학습자에게 어학학습관련 서비스를 제공하는 관리자가 본 발명의 일 실시 예에 따른 어학 학습 지원 장치(40)에 접속하기 위한 수단으로서 스마트폰 등과 같은 모바일 단말, 일반적인 PC, 노트북 등일 수 있으나, 이에 한정되지는 않고 소정의 연산 기능과 통신 기능을 구비한 임의의 장치일 수 있다.In addition, the manager terminal 20 is a mobile terminal such as a smart phone, a general PC, as a means for a manager providing a language learning related service to a learner to access the language learning support device 40 according to an embodiment of the present invention, It may be a laptop or the like, but is not limited thereto, and may be any device having a predetermined calculation function and communication function.

또한, 관리자는 단일 사업주체 또는 복수의 사업주체일 수 있다. 관리자가 복수의 사업주체일 경우, 각 관리자는 본 발명의 일 실시 예에 따른 어학 학습 지원 장치(40)에 접속하여 회원 가입 등의 주체 등록 과정을 수행한 이후, 어학 학습 지원 장치(40)를 통해 학습자에게 자신의 어학학습관련 서비스를 제공할 수 있다.Further, the manager may be a single business entity or a plurality of business entities. When the manager is a plurality of business entities, each manager accesses the language learning support apparatus 40 according to an embodiment of the present invention and performs a subject registration process such as membership registration, and then the language learning support apparatus 40 Through this, students can provide their own language learning related services.

또한, 학습자 단말(30)은 관리자로부터 어학학습관련 서비스를 제공받는 학습자가 본 발명의 일 실시 예에 따른 어학 학습 지원 장치(40)에 접속하기 위한 수단으로서 스마트폰 등과 같은 모바일 단말, 일반적인 PC, 노트북 등일 수 있으나, 이에 한정되지는 않고 소정의 연산 기능과 통신 기능을 구비한 임의의 장치일 수 있다. 다만, 시간과 공간의 제약없이 언제 어디서든지 어학학습관련 서비스를 제공받을 수 있다는 측면에서, 학습자 단말(30)은 스마트폰 등과 같은 모바일 단말이 적합하며, 이 경우, 학습자 단말(30)에는 학습자가 어학학습관련 서비스를 제공받을 수 있도록 하는 전용 어플리케이션이 설치되어 실행될 수 있다.In addition, the learner terminal 30 is a mobile terminal, a general PC, such as a smartphone, as a means for a learner receiving a language learning related service from an administrator to access the language learning support device 40 according to an embodiment of the present invention, It may be a laptop or the like, but is not limited thereto, and may be any device having a predetermined calculation function and communication function. However, in terms of being able to receive language learning-related services anytime and anywhere without time and space limitations, the learner terminal 30 is suitable for a mobile terminal such as a smart phone, and in this case, the learner terminal 30 has a learner A dedicated application to be provided with language learning related services may be installed and executed.

관리자 지원 모듈(50)은 관리자가 관리자 단말(20)을 통해 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학 학습을 지원하는 어학학습지원 콘텐츠를 입력하고, 관리자에 의해 입력된 어학학습지원 콘텐츠를 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 관리하도록 지원한다.In the manager support module 50, the administrator inputs language learning support content supporting language learning linked to the public video content on the Internet through the manager terminal 20, and displays the language learning support content input by the manager as public video content. It supports to manage by matching the play time information of.

예를 들어, 관리자 지원 모듈(50)은 URL 관리부(510), 관리자 인터페이스 제공부(520) 및 어학학습지원 콘텐츠 관리부(530)를 포함하여 구성될 수 있다.For example, the manager support module 50 may include a URL management unit 510, an administrator interface providing unit 520, and a language learning support content management unit 530.

URL 관리부(510)는 관리자 단말(20)로부터 상기 공개 동영상 콘텐츠의 URL(Uniform Resource Locator)을 전달받아 관리자 데이터베이스(540)에 등록하고 관리하는 기능을 수행한다.The URL manager 510 receives a Uniform Resource Locator (URL) of the public video content from the manager terminal 20 and registers and manages the URL in the manager database 540.

관리자 인터페이스 제공부(520)는 관리자가 등록한 URL에 해당하는 공개 동영상 콘텐츠가 표시되는 관리자 단말(20)에 관리자가 자신의 어학학습지원 콘텐츠를 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 입력하기 위한 관리자 인터페이스 화면을 제공하는 기능을 수행한다.The administrator interface providing unit 520 is an administrator for matching and inputting his / her language learning support content into the play time information of the public video content on the manager terminal 20 where the public video content corresponding to the URL registered by the manager is displayed. It performs the function of providing an interface screen.

예를 들어, 관리자 지원 모듈(50)에 구비된 관리자 인터페이스 제공부(520)가 어학학습지원 콘텐츠 등록을 위해 제공하는 인터페이스 화면을 예시적으로 나타낸 도 3에 예시된 바와 같이, 재생시간 정보는 공개 동영상 콘텐츠의 전체 콘텐츠 재생구간에 포함된 부분 재생구간들의 시점과 종점을 포함하고, 어학학습지원 콘텐츠는 부분 재생구간들의 시점과 종점에 매칭된 원문 자막 정보, 원문 발음 정보, 번역문 자막 정보, 어휘 정보를 포함하도록 구성될 수 있다. 도 3의 "전체 INTO" 항목과 "전체 OUTTO" 항목이 관리자가 어학학습지원 콘텐츠를 생성하는 대상이 되는 전체 콘텐츠 재생구간의 시점과 종점이고, 각 문장의 "INTO" 항목이 해당 문장에 대응하는 부분 재생구간들의 시점이고, "OUTTO" 항목이 해당 문장에 대응하는 부분 재생구간들의 종점이며, 도 3에는 4개의 부분 재생구간 및 이 구간들에 해당하는 원문인 중국어 자막 정보, 중국어 발음 정보, 번역문인 한국어 자막 정보가 편집 가능하게 예시되어 있다. 예를 들어, 어휘 정보는 인터넷 상에서 어학사전 서비스와 연계되어 제공되는 단어의 뜻과 발음을 포함하는 정보일 수 있다. 다시 말해, 기술적으로 모든 동영상의 재생 타임은 00:00:00.0 부터 시작하지만, 도 3에서 본 발명의 콘텐츠 생성을 위해 관리자에 의해 사용되는 타임 구간 즉, 전체 콘텐츠 재생 구간은 00:18:57.0 부터 00:21:29.0 사이이고, 해당 콘텐츠 재생 구간에 속하는 각 문장에 대해 부분 재생구간이 설정된다는 의미이다.For example, as illustrated in FIG. 3, which exemplarily shows an interface screen provided by the administrator interface providing unit 520 provided in the administrator support module 50 for registering language learning support content, the play time information is disclosed. Original content subtitle information, original pronunciation information, translation subtitle information, and vocabulary information that include the start and end points of the partial playback sections included in the entire content playback section of the video content, and the language learning support content matches the starting and end points of the partial playback sections. It may be configured to include. The "all INTO" and "all OUTTO" items in FIG. 3 are the start and end points of the entire content reproduction section where the administrator creates language learning support content, and the "INTO" item of each sentence corresponds to the corresponding sentence. It is the starting point of the partial playback sections, and the "OUTTO" item is the end point of the partial playback sections corresponding to the sentence. In FIG. 3, four partial playback sections and the original Chinese subtitle information, Chinese pronunciation information, and translation text corresponding to these sections In Korean subtitle information is illustrated to be editable. For example, the vocabulary information may be information including the meaning and pronunciation of words provided in connection with a language dictionary service on the Internet. In other words, technically, the playback time of all videos starts from 00: 00: 00.0, but in FIG. 3, the time interval used by the administrator for creating the content of the present invention, that is, the entire content playback section starts from 00: 18: 57.0. It means that between 00: 21: 29.0, a partial playback section is set for each sentence belonging to the content playback section.

어학학습지원 콘텐츠 관리부(530)는 공개 동영상 콘텐츠의 URL, 관리자 인터페이스 화면을 통해 입력된 공개 동영상 콘텐츠의 재생시간 정보 및 재생시간 정보에 매칭된 어학학습지원 콘텐츠를 관리자 데이터베이스(540)에 저장하고 관리하는 기능을 수행한다.The language learning support content management unit 530 stores and manages the language learning support content matching the play time information and the play time information of the public video content input through the URL of the public video content and the administrator interface screen in the manager database 540 To perform the function.

예를 들어, 관리자 데이터베이스(540)는 어학 학습 지원 장치(40)의 내부 구성요소로 구현되거나, 어학 학습 지원 장치(40)와 물리적으로 독립되어 인터넷 등의 통신망으로 연결된 네트워크 스토리지의 형태로 구성될 수도 있다.For example, the manager database 540 may be implemented as an internal component of the language learning support device 40 or may be physically independent of the language learning support device 40 and configured in the form of network storage connected to a communication network such as the Internet. It might be.

학습자 지원 모듈(60)은 학습자가 학습자 단말(30)을 통해 관리자 지원 모듈(50)에 의해 상호 연계되어 관리되는 공개 동영상 콘텐츠, 동영상 콘텐츠의 재생시간 정보 및 어학학습지원 콘텐츠를 이용하여 어학 학습을 수행하도록 지원하는 기능을 수행한다.The learner support module 60 uses the learner terminal 30 to learn the language by using the public video content, the play time information of the video content, and the language learning support content, which are managed and interconnected by the manager support module 50 through the learner terminal 30. Performs functions that support it.

예를 들어, 학습자 지원 모듈(60)은 어학학습 리스트 관리부(610) 및 어학학습 관리부(620)를 포함하여 구성될 수 있다.For example, the learner support module 60 may include a language learning list management unit 610 and a language learning management unit 620.

어학학습 리스트 관리부(610)는 학습자 단말(30)에 어학학습 리스트가 제공되도록 관리하는 기능을 수행한다.The language learning list management unit 610 performs a function of managing the language learning list to be provided to the learner terminal 30.

어학학습 관리부(620)는 학습자 단말(30)을 통해 어학학습 리스트 중에서 특정 항목이 학습자에 의해 선택되는 경우, 선택된 항목에 해당하는 공개 동영상 콘텐츠의 URL과 어학학습지원 콘텐츠가 학습자 단말(30)로 제공되도록 관리하는 기능을 수행하며, 학습자 단말(30)로 제공되는 어학학습지원 콘텐츠는 공개 동영상 콘텐츠의 재생시간 정보에 매칭되어 있다.The language learning management unit 620, when a specific item is selected by the learner from the language learning list through the learner terminal 30, the URL of the public video content corresponding to the selected item and the language learning support content to the learner terminal 30 It performs the management function to be provided, and the language learning support content provided to the learner terminal 30 is matched with the play time information of the public video content.

예를 들어, 어학학습 관리부(620)는 어학학습 리스트 중에서 특정 항목이 학습자에 의해 선택되는 경우, 관리자 데이터베이스(540)에 저장된 URL 정보를 참조하여 선택된 항목에 해당하는 공개 동영상 콘텐츠가 학습자 단말(30)로 전송되도록 동영상 소스(10)에 요청하도록 구성될 수 있으며, 이러한 구성에 따르면, 공개 동영상 콘텐츠는 인터넷 상의 동영상 소스(10)로부터 상기 학습자 단말(30)로 스트리밍(streaming) 또는 다운로드 방식으로 직접 전송되기 때문에, 어학 학습 지원 장치(40)의 부하를 줄일 수 있다. 즉, 데이터 전송 과정에서 대용량의 동영상 데이터가 어학 학습 지원 장치(40)를 경유하지 않고, 동영상 소스(10)에서 학습자 단말(30)로 직접 전송되기 때문에, 불필요한 데이터 전송량 및 그에 따른 네트워크 부하를 크게 줄일 수 있다.For example, when a specific item is selected from a language learning list by a learner, the language learning management unit 620 may refer to URL information stored in the manager database 540 to have the public video content corresponding to the selected item learner terminal 30 ) May be configured to request the video source 10 to be transmitted, and according to this configuration, the public video content is directly streamed or downloaded from the video source 10 on the Internet to the learner terminal 30. Since it is transmitted, the load on the language learning support device 40 can be reduced. That is, since a large amount of video data is transmitted directly from the video source 10 to the learner terminal 30 without passing through the language learning support device 40 in the data transmission process, unnecessary data transmission amount and network load accordingly are greatly increased. Can be reduced.

하나의 예로, 어학학습 관리부(620)는, 학습자가 학습자 단말(30)을 통해 시청 모드와 어학 모드를 선택할 수 있도록 지원하고, 학습자가 학습자 단말(30)을 통해 어학 모드중의 듣기 모드를 선택한 경우, 학습자 단말(30)에 제공되는 학습자 인터페이스 화면에 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 번역문 자막 정보, 어휘 정보를 포함하는 어학학습지원 콘텐츠가 공개 동영상 콘텐츠와 구분되어 표시되도록 지원할 수 있다. 도 5에 시청 모드가 선택된 경우 학습자 단말(30)에 제공되는 예시적인 화면 구성이 개시되어 있고, 도 6에 어학 모드 중에서 듣기 모드가 선택된 경우 학습자 단말(30)에 제공되는 예시적인 화면 구성이 개시되어 있다.As one example, the language learning management unit 620 supports a learner to select a viewing mode and a language mode through the learner terminal 30, and the learner selects a listening mode among the language modes through the learner terminal 30. In the case, the language learning support content including the original subtitle information, the original pronunciation information, the translation subtitle information, and the vocabulary information of the public video content on the learner interface screen provided to the learner terminal 30 can be supported to be displayed separately from the public video content. have. 5 illustrates an exemplary screen configuration provided to the learner terminal 30 when the viewing mode is selected, and FIG. 6 discloses an exemplary screen configuration provided to the learner terminal 30 when the listening mode is selected among the language modes. It is done.

다른 예로, 어학 모드 중에서 말하기 모드가 선택된 경우 학습자 단말(30)에 제공되는 예시적인 화면 구성을 나타내는 도 7을 추가로 참조하면, 어학학습 관리부(620)는, 학습자가 학습자 단말(30)을 통해 어학 모드중의 말하기 모드를 선택한 경우, 학습자 단말(30)에 제공되는 학습자 인터페이스 화면에 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 공개 동영상 콘텐츠의 재생을 선택하는 재생 버튼 및 학습자의 발음 따라하기를 선택하는 말하기 버튼이 공개 동영상 콘텐츠와 구분되어 표시되도록 지원할 수 있다.As another example, referring to FIG. 7 showing an exemplary screen configuration provided to the learner terminal 30 when the speaking mode is selected from the language modes, the language learning management unit 620 may learners through the learner terminal 30. When the speaking mode of the language mode is selected, the learner's pronunciation is displayed on the learner interface screen provided to the learner terminal 30, the play button for selecting the original subtitle information, the original pronunciation information, and the playback of the public video content and the learner's pronunciation The speaking button for selecting can be supported to be displayed separately from the public video content.

예를 들어, 학습자에 의해 말하기 모드의 말하기 버튼이 선택된 경우, 어학학습 관리부(620)는, 학습자 단말(30)로부터 공개 동영상 콘텐츠에 대한 학습자 발음 정보를 수신하고, 공개 동영상 콘텐츠의 원문 자막 정보 및 학습자 발음 정보에 인공지능 음성인식 기술을 적용하여 학습자 발음 점수를 산출하고, 산출된 학습자 발음 점수를 학습자 단말(30)로 제공하도록 구성될 수 있다. 여기서, 예를 들어, 어학학습 관리부(620)는, 원문 자막 정보 및 학습자 발음 정보를 인공지능 음성인식을 지원하는 외부 서버(70)에 전송하고, 외부 서버(70)로부터 전송받은 인공지능 음성인식 결과정보를 미리 정해진 점수변환 알고리즘에 적용하여 학습자 발음 점수를 산출하도록 구성될 수 있다. 예를 들어, 외부 서버(70)는 구글 등과 같이 인터넷에 접속한 무수히 많은 사용자들의 요청에 응답하여 기계학습을 통한 인공지능 음성인식 결과를 사용자들에게 무료로 제공하는 주체가 운영하는 서버일 수 있다.For example, when the speaking button of the speaking mode is selected by the learner, the language learning management unit 620 receives learner pronunciation information about the public video content from the learner terminal 30, and the original subtitle information of the public video content and It may be configured to calculate a learner pronunciation score by applying artificial intelligence speech recognition technology to learner pronunciation information, and provide the calculated learner pronunciation score to the learner terminal 30. Here, for example, the language learning management unit 620 transmits the original text subtitle information and the learner's pronunciation information to the external server 70 supporting artificial intelligence speech recognition, and the artificial intelligence speech recognition received from the external server 70. It may be configured to calculate the learner pronunciation score by applying the result information to a predetermined score conversion algorithm. For example, the external server 70 may be a server operated by a subject that provides artificial intelligence voice recognition results through machine learning to users free of charge in response to requests from countless users who have access to the Internet, such as Google. .

이하에서는 본 발명의 일 실시 예에 따른 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치(40)의 구체적이고 예시적인 동작을 관리자 지원 과정과 학습자 지원 과정으로 구분하여 설명한다.Hereinafter, a specific and exemplary operation of the language learning support apparatus 40 using a video published on the Internet according to an embodiment of the present invention will be described as being divided into a manager support process and a learner support process.

도 2는 본 발명의 일 실시 예에 있어서, 관리자 지원 과정의 동작을 예시적으로 설명하기 위한 도면이다.2 is a view for explaining the operation of the administrator support process in an embodiment of the present invention by way of example.

도 2를 추가로 참조하면, 단계 S100에서는, 관리자가 관리자 단말(20)을 통해 동영상 소스(10)에 접속하여 공개 동영상 콘텐츠를 요청하는 과정이 수행된다.Referring to FIG. 2 further, in step S100, a process in which the administrator accesses the video source 10 through the manager terminal 20 and requests public video content is performed.

단계 S110에서는, 동영상 소스(10)가 관리자 단말(20)의 요청에 응답하여 동영상 콘텐츠를 스트리밍 또는 다운로딩하는 과정이 수행되며, 관리자는 이 동영상 콘텐츠를 검토하고 어학학습자료로 활용할지를 결정한다.In step S110, a process of streaming or downloading video content is performed by the video source 10 in response to a request from the manager terminal 20, and the manager reviews the video content and determines whether to use it as language learning material.

단계 S120에서는, 관리자 관리자 단말(20)을 통해 어학 학습 지원 장치(40)의 관리자 지원 모듈(50)에 접속하여 공개 동영상 콘텐츠의 URL을 등록하는 과정이 수행된다.In step S120, a process of registering the URL of the public video content by accessing the manager support module 50 of the language learning support device 40 through the manager manager terminal 20 is performed.

단계 S130에서는, 관리자 지원 모듈(50)이 관리자 단말(20)로 관리자가 어학학습지원 콘텐츠를 등록하기 위한 관리자 인터페이스 화면을 제공하는 과정이 수행된다.In step S130, a process in which the manager support module 50 provides the manager interface screen for the manager to register the language learning support content to the manager terminal 20 is performed.

단계 S140에서는, 관리자 지원 모듈(50)이 동영상 소스(10)에 공개 동영상 콘텐츠를 관리자 단말(20)로 스트리밍할 것을 요청하는 과정이 수행된다. 단계 S130과 단계 S140은 동시 또는 미세한 시차를 두고 순차적으로 수행될 수 있다.In step S140, a process in which the manager support module 50 requests the video source 10 to stream the public video content to the manager terminal 20 is performed. Step S130 and step S140 may be performed sequentially or at a slight time difference.

단계 S150에서는, 동영상 소스(10)가 관리자 지원 모듈(50)의 요청에 응답하여 공개 동영상 콘텐츠를 관리자 단말(20)로 스트리밍 또는 다운로딩하는 과정이 수행된다.In step S150, a process of streaming or downloading the public video content to the manager terminal 20 is performed by the video source 10 in response to the request of the manager support module 50.

단계 S160에서는, 관리자가 관리자 단말(20)에 표시되는 관리자 인터페이스 화면을 통해 어학학습지원 콘텐츠를 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 입력하는 과정이 수행된다.In step S160, a process in which the administrator matches and inputs the language learning support content to the play time information of the public video content through the manager interface screen displayed on the manager terminal 20 is performed.

단계 S170에서는, 관리자 단말(20)이 공개 동영상 콘텐츠의 재생시간 정보에 매칭된 어학학습지원 콘텐츠를 관리자 지원 모듈(50)로 전송하는 과정이 수행된다.In step S170, a process in which the manager terminal 20 transmits the language learning support content matched with the play time information of the public video content to the manager support module 50 is performed.

단계 S180에서는, 관리자 지원 모듈(50)의 어학학습지원 콘텐츠 관리부(530)가 재생시간 정보에 매칭된 어학학습지원 콘텐츠를 관리자 데이터베이스(540)에 저장하고 관리하는 과정이 수행된다.In step S180, the language learning support content management unit 530 of the manager support module 50 stores and manages the language learning support content matched with the play time information in the manager database 540.

도 4는 본 발명의 일 실시 예 있어서, 학습자 지원 과정의 동작을 예시적으로 설명하기 위한 도면이다.4 is a diagram for illustratively explaining an operation of a learner support process in an embodiment of the present invention.

도 4를 추가로 참조하면, 단계 S400에서는, 학습자가 학습자 단말(30)을 통해 학습자 지원 모듈(60)에 접속하여 어학학습 리스트 관리부(610)가 초기화면으로 표시되는 어학학습 리스트 중에서 자신이 원하는 항목을 선택하는 과정이 수행된다.Referring to FIG. 4 further, in step S400, the learner accesses the learner support module 60 through the learner terminal 30 and the language learning list management unit 610 wants himself from among the language learning lists displayed on the initial screen. The process of selecting an item is performed.

단계 S410에서는, 학습자 지원 모듈(60)의 어학학습 관리부(620)가 학습자 단말(30)로 선택된 항목에 해당하는 학습자 인터페이스 화면을 제공하는 과정이 수행된다.In step S410, a process in which the language learning management unit 620 of the learner support module 60 provides a learner interface screen corresponding to the item selected as the learner terminal 30 is performed.

단계 S420에서는, 학습자가 학습자 단말(30)에 표시되는 학습자 인터페이스 화면을 통해 시청 모드를 선택하는 과정이 수행된다.In step S420, a process in which the learner selects the viewing mode through the learner interface screen displayed on the learner terminal 30 is performed.

단계 S430에서는, 학습자 지원 모듈(60)의 어학학습 관리부(620)가 학습자 단말(30)로 시청모드 인터페이스 화면을 제공하는 과정이 수행된다.In step S430, the process of providing the viewing mode interface screen to the learner terminal 30 by the language learning management unit 620 of the learner support module 60 is performed.

단계 S440에서는, 어학학습 관리부(620)가 동영상 소스(10)에 공개 동영상 콘텐츠를 학습자 단말(30)로 스트리밍 또는 다운로딩할 것을 요청하는 과정이 수행된다. 단계 S430과 단계 S440은 동시 또는 미세한 시차를 두고 순차적으로 수행될 수 있다.In step S440, a process of requesting the language learning management unit 620 to stream or download the public video content to the learner terminal 30 is performed to the video source 10. Step S430 and step S440 may be performed sequentially or at a slight time difference.

단계 S450에서는, 동영상 소스(10)가 어학학습 관리부(620)의 요청에 응답하여 공개 동영상 콘텐츠를 학습자 단말(30)로 스트리밍 또는 다운로딩하는 과정이 수행되며, 학습자는 학습자 단말(30)에 표시되는 시청모드 인터페이스 화면을 통해 공개 동영상 콘텐츠를 시청할 수 있다.In step S450, a process of streaming or downloading the public video content to the learner terminal 30 is performed by the video source 10 in response to a request from the language learning management unit 620, and the learner is displayed on the learner terminal 30 You can watch public video content through the viewing mode interface screen.

단계 S460에서는, 학습자가 학습자 단말(30)에 표시되는 학습자 인터페이스 화면을 통해 듣기 모드를 선택하는 과정이 수행된다.In step S460, a process in which the learner selects a listening mode through a learner interface screen displayed on the learner terminal 30 is performed.

단계 S470에서는, 어학학습 관리부(620)가 학습자 단말(30)로 듣기모드 인터페이스 화면을 제공하는 과정이 수행된다.In step S470, a process in which the language learning management unit 620 provides the listening mode interface screen to the learner terminal 30 is performed.

단계 S480에서는, 어학학습 관리부(620)가 동영상 소스(10)에 공개 동영상 콘텐츠를 학습자 단말(30)로 스트리밍 또는 다운로딩할 것을 요청하는 과정이 수행된다. 단계 S470과 단계 S480은 동시 또는 미세한 시차를 두고 순차적으로 수행될 수 있다.In step S480, a process of requesting the language learning management unit 620 to stream or download the public video content to the learner terminal 30 to the video source 10 is performed. Step S470 and step S480 may be performed sequentially or with a small time difference.

단계 S490에서는, 동영상 소스(10)가 어학학습 관리부(620)의 요청에 응답하여 공개 동영상 콘텐츠를 학습자 단말(30)로 스트리밍 또는 다운로딩하는 과정이 수행되며, 학습자는 학습자 단말(30)에 표시되는 듣기모드 인터페이스 화면을 통해 재생되는 공개 동영상 콘텐츠에 대한 듣기 훈련을 수행할 수 있으며, 이 과정에서 도 6에 예시된 바와 같이, 듣기모드 인터페이스 화면에는 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 번역문 자막 정보, 어휘 정보를 포함하는 어학학습지원 콘텐츠가 공개 동영상 콘텐츠와 구분되어 표시될 수 있다.In step S490, a process of streaming or downloading the public video content to the learner terminal 30 is performed by the video source 10 in response to a request from the language learning management unit 620, and the learner displays the learner terminal 30 Listening training may be performed on the public video content played through the listening mode interface screen. As illustrated in FIG. 6 in this process, the listening mode interface screen includes original subtitle information, original pronunciation information of the public video content, Language learning support content including translation subtitle information and vocabulary information may be displayed separately from public video content.

단계 S500에서는, 학습자가 학습자 단말(30)에 표시되는 학습자 인터페이스 화면을 통해 말하기 모드를 선택하는 과정이 수행된다.In step S500, a process in which the learner selects a speaking mode through a learner interface screen displayed on the learner terminal 30 is performed.

단계 S510에서는, 어학학습 관리부(620)가 학습자 단말(30)로 말하기모드 인터페이스 화면을 제공하는 과정이 수행된다.In step S510, a process in which the language learning management unit 620 provides the speaking mode interface screen to the learner terminal 30 is performed.

단계 S520에서는, 어학학습 관리부(620)가 동영상 소스(10)에 공개 동영상 콘텐츠를 학습자 단말(30)로 스트리밍 또는 다운로딩할 것을 요청하는 과정이 수행된다. 단계 S510과 단계 S520은 동시 또는 미세한 시차를 두고 순차적으로 수행될 수 있다.In step S520, a process in which the language learning management unit 620 requests the video source 10 to stream or download the public video content to the learner terminal 30 is performed. Step S510 and step S520 may be performed sequentially or with a small time difference.

단계 S530에서는, 동영상 소스(10)가 어학학습 관리부(620)의 요청에 응답하여 공개 동영상 콘텐츠를 학습자 단말(30)로 스트리밍 또는 다운로딩하는 과정이 수행되며, 학습자는 학습자 단말(30)에 표시되는 말하기모드 인터페이스 화면을 통해 재생되는 공개 동영상 콘텐츠에 대한 말하기 훈련을 수행할 수 있다. 이 과정에서 도 7에 예시된 바와 같이, 학습자 단말(30)에 표시되는 말하기모드 인터페이스 화면에는 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 공개 동영상 콘텐츠의 재생을 선택하는 재생 버튼 및 학습자의 발음 따라하기를 선택하는 말하기 버튼이 공개 동영상 콘텐츠와 구분되어 표시될 수 있다.In step S530, the video source 10 is streamed or downloaded to the learner terminal 30 in response to a request from the language learning management unit 620, and the learner is displayed on the learner terminal 30 It is possible to perform speaking training on the public video content played through the speaking mode interface screen. In this process, as illustrated in FIG. 7, the speaking mode interface screen displayed on the learner terminal 30 includes an original subtitle information of the public video content, original pronunciation information, a play button for selecting playback of the public video content, and a learner's pronunciation A speaking button for selecting to follow may be displayed separately from the public video content.

단계 S540에서는, 학습자가 말하기모드 인터페이스 화면에 표시되는 발음 따라하기를 선택한 후 발음하는 과정이 수행된다.In step S540, the learner selects the pronunciation to be displayed on the speaking mode interface screen and then pronounces the pronunciation.

단계 S550에서는, 학습자의 발음 정보가 학습자 단말(30)로부터 어학학습 관리부(620)로 전송되는 과정이 수행된다.In step S550, a process in which the learner's pronunciation information is transmitted from the learner terminal 30 to the language learning management unit 620 is performed.

단계 S560에서는, 어학학습 관리부(620)가 인공지능 음성인식을 지원하는 외부 서버(70)로 AI 음성분석을 요청하는 과정이 수행된다. 예를 들어, 이 과정에서, 어학학습 관리부(620)는 원문 자막 정보 및 학습자 발음 정보를 외부 서버(70)에 전송할 수 있다.In step S560, the process of requesting the AI speech analysis is performed by the language learning management unit 620 to the external server 70 supporting artificial intelligence speech recognition. For example, in this process, the language learning management unit 620 may transmit original subtitle information and learner pronunciation information to the external server 70.

단계 S570에서는, 어학학습 관리부(620)가 외부 서버(70)로부터 인공지능 음성인식 결과정보를 전송받는 과정이 수행된다.In step S570, a process in which the language learning management unit 620 receives artificial intelligence voice recognition result information from the external server 70 is performed.

단계 S580에서는, 어학학습 관리부(620)가 외부 서버(70)로부터 전송받은 인공지능 음성인식 결과정보를 미리 정해진 점수변환 알고리즘에 적용하여 학습자 발음 점수를 산출하고, 이를 학습자 데이터베이스(630)에 저장/관리하는 과정이 수행된다.In step S580, the language learning management unit 620 applies the artificial intelligence speech recognition result information transmitted from the external server 70 to a predetermined score conversion algorithm to calculate the learner pronunciation score, and stores it in the learner database 630 / The management process is performed.

단계 S590에서는, 어학학습 관리부(620)가 학습자 단말(30)로 학습자 발음 점수를 포함하는 평가 정보를 피드백하여 학습자의 어학학습을 지원하는 과정이 수행된다.In step S590, the process of supporting the learner's language learning is performed by the language learning management unit 620 feeding back the evaluation information including the learner's pronunciation score to the learner terminal 30.

예를 들어, 어학 모드 중에서 게임(퀴즈) 모드가 선택된 경우 학습자 단말(30)에 제공되는 예시적인 화면 구성을 나타내는 도 8에 개시된 바와 같이, 어학학습 관리부(620)는 문장 완성하기를 지원할 수도 있다.For example, as illustrated in FIG. 8 showing an exemplary screen configuration provided to the learner terminal 30 when the game (quiz) mode is selected among the language modes, the language learning management unit 620 may support completing sentences. .

도 9는 본 발명의 일 실시 예 있어서, 인공지능 대화 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이다.9 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when an AI conversation mode is selected in one embodiment of the present invention.

도 9를 추가로 참조하면, 학습자가 학습자 단말(30)을 통해 인공지능 대화 모드를 선택한 경우, 어학학습 관리부(620)는, 학습자 단말(30)을 통해 질문 텍스트 및 상기 질문 텍스트를 TTS(Text To Speech) 변환한 기계어 질문 음성을 제공하고, 학습자 단말(30)을 통해 입력받은 학습자 음성을 STT(Speech To Text) 변환한 기계어 답변 텍스트를 제공하도록 구성될 수 있다. 이러한 구성을 통해 학습자는 사람이 아닌 로봇과 회화를 진행함으로 부담감이 없고 전화 영어와 달리 학습을 위한 시간적 제약을 해소할 수 있다.Referring to FIG. 9 further, when the learner selects the AI conversation mode through the learner terminal 30, the language learning management unit 620 may display the question text and the question text through the learner terminal 30 (TTS) To Speech) may be configured to provide a machine-language question voice converted, and a machine-to-answer text converted to STT (Speech To Text) of a learner voice received through the learner terminal 30. Through this configuration, the learner can talk with the robot, not the person, so there is no burden and unlike the telephone English, the time constraint for learning can be resolved.

도 10은 본 발명의 일 실시 예 있어서, 상황별 인공지능 대화 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이다.FIG. 10 is a diagram for an exemplary screen configuration provided to a learner terminal when a situation-specific AI conversation mode is selected.

도 10을 추가로 참조하면, 학습자가 학습자 단말(30)을 통해 상황별 인공지능 대화 모드를 선택한 경우, 어학학습 관리부(620)는, 학습자 단말(30)을 통해 학습자로부터 설정상황정보를 입력받고, 학습자 단말(30)을 통해 상황설정정보에 기계학습 알고리즘을 적용하여 획득된 상황별 질문 텍스트 및 상황별 질문 텍스트를 TTS 변환한 상황별 기계어 질문 음성을 제공하고, 학습자 단말(30)을 통해 입력받은 학습자 음성을 STT 변환한 기계어 답변 텍스트를 제공하고, 상황별 질문 텍스트 및 학습자 음성에 기계학습 알고리즘을 적용하여 학습자 음성을 상황별 질문 텍스트에 매칭되도록 유도하는 첨삭지도 텍스트 및 첨삭지도 텍스트를 TTS 변환한 기계어 첨삭지도 음성을 학습자 단말(30)을 통해 제공하도록 구성될 수 있다.Referring to FIG. 10 further, when the learner selects the AI communication mode for each situation through the learner terminal 30, the language learning management unit 620 receives setting status information from the learner through the learner terminal 30. , Provides the contextual question text and contextual question text obtained by applying the machine learning algorithm to the context setting information through the learner terminal 30, and provides the contextual machine language question voice, and inputs through the learner terminal 30 Provides machine-language answer text that is STT-converted to the received learner's voice, and applies machine learning algorithm to the contextual question text and learner's voice to convert TTS to the corrected text and corrected text to induce the learner's voice to match the contextual question One machine language correction can also be configured to provide the voice through the learner terminal 30.

도 11은 본 발명의 일 실시 예 있어서, 인공지능 평가 모드가 선택된 경우 학습자 단말에 제공되는 예시적인 화면 구성을 나타내는 도면이고, 도 12는 인공지능 평가 모드에 의해 학습자에게 제공되는 예시적인 평가정보 화면 구성을 나타내는 도면이다.11 is a diagram illustrating an exemplary screen configuration provided to a learner terminal when an AI evaluation mode is selected, and FIG. 12 is an exemplary evaluation information screen provided to a learner by the AI evaluation mode. It is a diagram showing the configuration.

도 11 및 도 12를 추가로 참조하면, 학습자가 학습자 단말(30)을 통해 인공지능 평가 모드를 선택한 경우, 어학학습 관리부(620)는, 학습자 단말(30)을 통해 학습자의 수준을 평가하기 위한 평가용 질문 텍스트 및 평가용 질문 텍스트를 TTS 변환한 평가용 기계어 질문 음성을 제공하고, 학습자 단말(30)을 통해 입력받은 학습자 음성을 STT(Speech To Text) 변환한 기계어 답변 텍스트를 제공하는 과정을 반복하여 학습자의 수준을 평가하기 위한 정보를 수집하고, 수집된 정보에 따라 학습자의 수준을 평가항목별로 구분하여 학습자에게 제공하도록 구성될 수 있다.11 and 12, when the learner selects the AI evaluation mode through the learner terminal 30, the language learning management unit 620 is configured to evaluate the learner's level through the learner terminal 30. The process of providing the evaluation question text and the evaluation question text TTS-converted machine-language question voice, and providing the machine-language answer text of the learner's voice input through the learner terminal 30 to STT (Speech To Text) conversion. It may be configured to repeatedly collect information for evaluating a learner's level and classify the learner's level for each evaluation item according to the collected information.

이상에서 상세히 설명한 바와 같이 본 발명에 따르면, 어학학습과 관련하여 강사 등과 같은 관리자가 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학학습 콘텐츠를 편리하게 등록 및 관리할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치가 제공되는 효과가 있다.As described in detail above, according to the present invention, in connection with language learning, an administrator, such as an instructor, can use a video published on the Internet to conveniently register and manage language learning content associated with public video content on the Internet. There is an effect that a language learning support device is provided.

또한, 어학학습과 관련하여 학습자가 시간 및 공간의 제약 조건에 벗어나 언제 어디서나 체계적이고 효과적인 어학학습을 수행할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치가 제공되는 효과가 있다.In addition, in relation to language learning, there is an effect of providing a language learning support device using a video published on the Internet that enables a learner to perform systematic and effective language learning anytime, anywhere, outside the constraints of time and space.

또한, 본 발명은 학습자의 발음에 인공지능 음성인식 기술을 적용하여 발음의 적정성을 평가하고 그 결과를 학습자에 피드백함으로써, 학습자의 발음을 효과적으로 교정할 수 있도록 하는 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치가 제공되는 효과가 있다.In addition, the present invention evaluates the adequacy of pronunciation by applying artificial intelligence speech recognition technology to the learner's pronunciation and feeds the result back to the learner, thereby using the language published on the Internet to effectively correct the learner's pronunciation. There is an effect that a learning support device is provided.

10: 동영상 소스
20: 관리자 단말
30: 학습자 단말
40: 어학 학습 지원 장치
50: 관리자 지원 모듈
60: 학습자 지원 모듈
70: 외부 서버
510: URL 관리부
520: 관리자 인터페이스 제공부
530: 어학학습지원 콘텐츠 관리부
540: 관리자 데이터베이스
610: 어학학습 리스트 관리부
620: 어학학습 관리부
630: 학습자 데이터베이스
10: video source
20: administrator terminal
30: learner terminal
40: language learning support device
50: Administrator support module
60: learner support module
70: external server
510: URL management unit
520: administrator interface providing unit
530: Language learning support content management department
540: administrator database
610: Language learning list management department
620: Language Learning Management Department
630: learner database

Claims (12)

인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치로서,
관리자가 관리자 단말을 통해 인터넷 상의 공개 동영상 콘텐츠와 연계된 어학 학습을 지원하는 어학학습지원 콘텐츠를 입력하고, 상기 관리자에 의해 입력된 어학학습지원 콘텐츠를 상기 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 관리하도록 지원하는 관리자 지원 모듈; 및
학습자가 학습자 단말을 통해 상기 관리자 지원 모듈에 의해 상호 연계되어 관리되는 상기 공개 동영상 콘텐츠, 상기 동영상 콘텐츠의 재생시간 정보 및 상기 어학학습지원 콘텐츠를 이용하여 어학 학습을 수행하도록 지원하는 학습자 지원 모듈을 포함하고,
상기 학습자 지원 모듈은,
상기 학습자 단말에 어학학습 리스트가 제공되도록 관리하는 어학학습 리스트 관리부; 및
상기 학습자 단말을 통해 상기 어학학습 리스트 중에서 특정 항목이 선택되는 경우, 선택된 항목에 해당하는 공개 동영상 콘텐츠의 URL과 어학학습지원 콘텐츠가 상기 학습자 단말로 제공되도록 관리하는 어학학습 관리부를 포함하고,
상기 학습자 단말로 제공되는 어학학습지원 콘텐츠는 상기 공개 동영상 콘텐츠의 재생시간 정보에 매칭되어 있고,
상기 관리자 지원 모듈은,
상기 관리자 단말로부터 상기 공개 동영상 콘텐츠의 URL을 전달받아 관리하는 URL 관리부;
상기 URL에 해당하는 공개 동영상 콘텐츠가 표시되는 관리자 단말에 상기 관리자가 상기 어학학습지원 콘텐츠를 상기 공개 동영상 콘텐츠의 재생시간 정보에 매칭시켜 입력하기 위한 관리자 인터페이스 화면을 제공하는 관리자 인터페이스 제공부; 및
상기 공개 동영상 콘텐츠의 URL, 상기 관리자 인터페이스 화면을 통해 입력된 상기 공개 동영상 콘텐츠의 재생시간 정보 및 상기 재생시간 정보에 매칭된 어학학습지원 콘텐츠를 관리자 데이터베이스에 저장하고 관리하는 어학학습지원 콘텐츠 관리부를 포함하고,
상기 재생시간 정보는 상기 공개 동영상 콘텐츠의 전체 콘텐츠 재생구간에 포함된 부분 재생구간들의 시점과 종점을 포함하고,
상기 어학학습지원 콘텐츠는 상기 부분 재생구간들의 시점과 종점에 매칭된 원문 자막 정보, 원문 발음 정보, 번역문 자막 정보, 어휘 정보를 포함하는 것을 특징으로 하는, 어학 학습 지원 장치.
As a language learning support device using a video published on the Internet,
The administrator inputs language learning support content supporting language learning linked to the public video content on the Internet through the manager terminal, and matches the language learning support content input by the manager to play time information of the public video content and manages it Administrator support module to support; And
Includes a learner support module that assists learners to perform language learning using the public video content, play time information of the video content, and the language learning support content, which are mutually linked and managed by the manager support module through a learner terminal. and,
The learner support module,
A language learning list management unit managing to provide a language learning list to the learner terminal; And
When a specific item is selected from the list of language learning through the learner terminal, and includes a language learning management unit to manage the URL of the public video content corresponding to the selected item and the language learning support content to be provided to the learner terminal,
The language learning support content provided to the learner terminal is matched with the play time information of the public video content,
The manager support module,
A URL management unit receiving and managing the URL of the public video content from the administrator terminal;
An administrator interface providing unit for providing an administrator interface screen for the administrator to match and input the language learning support content to the play time information of the public video content to the manager terminal where the public video content corresponding to the URL is displayed; And
Includes the language learning support content management unit that stores and manages the URL of the public video content, the play time information of the public video content input through the administrator interface screen, and the language learning support content matching the play time information in the manager database. and,
The play time information includes the start and end points of the partial play sections included in the entire content play section of the public video content,
The language learning support content includes original subtitle information, original pronunciation information, translated subtitle information, and vocabulary information matching the start and end points of the partial reproduction sections.
삭제delete 삭제delete 삭제delete 제1항에 있어서,
상기 공개 동영상 콘텐츠는 인터넷 상의 동영상 소스(source)로부터 상기 학습자 단말로 스트리밍(streaming) 또는 다운로드 방식으로 직접 전송되는 것을 특징으로 하는, 어학 학습 지원 장치.
According to claim 1,
The public video content is transmitted directly from the video source (source) on the Internet to the learner terminal by streaming (streaming) or download method, language learning support device.
제1항에 있어서,
상기 어학학습 관리부는,
상기 학습자가 상기 학습자 단말을 통해 시청 모드와 어학 모드를 선택할 수 있도록 지원하고,
상기 학습자가 상기 학습자 단말을 통해 상기 어학 모드중의 듣기 모드를 선택한 경우,
상기 학습자 단말에 제공되는 학습자 인터페이스 화면에 상기 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 번역문 자막 정보, 어휘 정보를 포함하는 어학학습지원 콘텐츠가 상기 공개 동영상 콘텐츠와 구분되어 표시되도록 지원하는 것을 특징으로 하는, 어학 학습 지원 장치.
According to claim 1,
The language learning management unit,
Supports the learner to select a viewing mode and a language mode through the learner terminal,
When the learner selects the listening mode of the language mode through the learner terminal,
It is characterized in that the language learning support content including the original subtitle information, the original pronunciation information, the translation subtitle information, and the vocabulary information of the public video content is displayed separately from the public video content on the learner interface screen provided to the learner terminal. It is a language learning support device.
제1항에 있어서,
상기 어학학습 관리부는,
상기 학습자가 상기 학습자 단말을 통해 시청 모드와 어학 모드를 선택할 수 있도록 지원하고,
상기 학습자가 상기 학습자 단말을 통해 상기 어학 모드중의 말하기 모드를 선택한 경우,
상기 학습자 단말에 제공되는 학습자 인터페이스 화면에 상기 공개 동영상 콘텐츠의 원문 자막 정보, 원문 발음 정보, 상기 공개 동영상 콘텐츠의 재생을 선택하는 재생 버튼 및 상기 학습자의 발음 따라하기를 선택하는 말하기 버튼이 상기 공개 동영상 콘텐츠와 구분되어 표시되도록 지원하는 것을 특징으로 하는, 어학 학습 지원 장치.
According to claim 1,
The language learning management unit,
Supports the learner to select a viewing mode and a language mode through the learner terminal,
When the learner selects a speaking mode among the language modes through the learner terminal,
On the learner interface screen provided to the learner terminal, the original video subtitle information, the original pronunciation information of the public video content, a play button for selecting playback of the public video content, and a speaking button for selecting the learner's pronunciation are the public video. A language learning support device, characterized in that it is supported to be displayed separately from the content.
제7항에 있어서,
상기 학습자에 의해 상기 말하기 모드의 말하기 버튼이 선택된 경우,
상기 어학학습 관리부는,
상기 학습자 단말로부터 상기 공개 동영상 콘텐츠에 대한 학습자 발음 정보를 수신하고,
상기 공개 동영상 콘텐츠의 원문 자막 정보 및 상기 학습자 발음 정보에 인공지능 음성인식 기술을 적용하여 학습자 발음 점수를 산출하고, 산출된 학습자 발음 점수를 상기 학습자 단말로 제공하는 것을 특징으로 하는, 어학 학습 지원 장치.
The method of claim 7,
When the speaking button of the speaking mode is selected by the learner,
The language learning management unit,
Receiving learner pronunciation information for the public video content from the learner terminal,
A language learning support device characterized by calculating a learner pronunciation score by applying artificial intelligence voice recognition technology to the original subtitle information of the public video content and the learner pronunciation information, and providing the calculated learner pronunciation score to the learner terminal .
제8항에 있어서,
상기 어학학습 관리부는,
상기 원문 자막 정보 및 상기 학습자 발음 정보를 인공지능 음성인식을 지원하는 외부 서버에 전송하고, 상기 외부 서버로부터 전송받은 인공지능 음성인식 결과정보를 미리 정해진 점수변환 알고리즘에 적용하여 상기 학습자 발음 점수를 산출하는 것을 특징으로 하는, 어학 학습 지원 장치.
The method of claim 8,
The language learning management unit,
Transmit the original text caption information and the learner pronunciation information to an external server that supports AI speech recognition, and apply the AI speech recognition result information received from the external server to a predetermined score conversion algorithm to calculate the learner pronunciation score Characterized in that, the language learning support device.
제1항에 있어서,
상기 학습자가 상기 학습자 단말을 통해 인공지능 대화 모드를 선택한 경우,
상기 어학학습 관리부는,
상기 학습자 단말을 통해 질문 텍스트 및 상기 질문 텍스트를 TTS(Text To Speech) 변환한 기계어 질문 음성을 제공하고,
상기 학습자 단말을 통해 입력받은 학습자 음성을 STT(Speech To Text) 변환한 기계어 답변 텍스트를 제공하는 것을 특징으로 하는, 어학 학습 지원 장치.
According to claim 1,
When the learner selects an AI conversation mode through the learner terminal,
The language learning management unit,
Providing a question text and a machine-language question voice that converts the question text and text to speech (TTS) through the learner terminal,
Language learning support device, characterized in that for providing the machine text response text to STT (Speech To Text) converted to the learner's voice input through the learner terminal.
삭제delete 제1항에 있어서,
상기 학습자가 상기 학습자 단말을 통해 인공지능 평가 모드를 선택한 경우,
상기 어학학습 관리부는,
상기 학습자 단말을 통해 상기 학습자의 수준을 평가하기 위한 평가용 질문 텍스트 및 상기 평가용 질문 텍스트를 TTS 변환한 평가용 기계어 질문 음성을 제공하고, 상기 학습자 단말을 통해 입력받은 학습자 음성을 STT(Speech To Text) 변환한 기계어 답변 텍스트를 제공하는 과정을 반복하여 상기 학습자의 수준을 평가하기 위한 정보를 수집하고, 수집된 정보에 따라 상기 학습자의 수준을 평가항목별로 구분하여 상기 학습자에게 제공하는 것을 특징으로 하는, 어학 학습 지원 장치.
According to claim 1,
When the learner selects an artificial intelligence evaluation mode through the learner terminal,
The language learning management unit,
Provides an evaluation question text for evaluating the learner's level through the learner terminal and an evaluation machine text voice for TTS conversion of the evaluation question text, and the learner voice input through the learner terminal is STT (Speech To) Text) Iteratively collects information for evaluating the learner's level by repeating the process of providing the converted machine language answer text, and classifies the learner's level for each evaluation item according to the collected information and provides it to the learner. A language learning support device.
KR1020180070165A 2018-06-19 2018-06-19 Language study supporting apparatus using video publicated on the internet KR102101817B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180070165A KR102101817B1 (en) 2018-06-19 2018-06-19 Language study supporting apparatus using video publicated on the internet

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180070165A KR102101817B1 (en) 2018-06-19 2018-06-19 Language study supporting apparatus using video publicated on the internet

Publications (2)

Publication Number Publication Date
KR20190142907A KR20190142907A (en) 2019-12-30
KR102101817B1 true KR102101817B1 (en) 2020-04-17

Family

ID=69103118

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180070165A KR102101817B1 (en) 2018-06-19 2018-06-19 Language study supporting apparatus using video publicated on the internet

Country Status (1)

Country Link
KR (1) KR102101817B1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102321141B1 (en) * 2020-01-03 2021-11-03 주식회사 셀바스에이아이 Apparatus and method for user interface for pronunciation assessment
KR102225435B1 (en) * 2020-08-13 2021-03-08 이창영 Language learning-training system based on speech to text technology
KR102528293B1 (en) * 2020-09-29 2023-05-03 주식회사 에듀템 Integration System for supporting foreign language Teaching and Learning using Artificial Intelligence Technology and method thereof

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006227587A (en) * 2005-01-20 2006-08-31 Advanced Telecommunication Research Institute International Pronunciation evaluating device and program

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100418410B1 (en) * 2000-10-27 2004-02-11 이용권 Foreign language studying method used moving picture at the internet
KR100438347B1 (en) * 2000-12-11 2004-07-02 김부식 System, method and medium for language study
KR20020061239A (en) 2001-01-15 2002-07-24 (주)패러드림 System and method for studying English using internet
KR20090075051A (en) * 2008-01-03 2009-07-08 황인도 Multimedia contents supply method for english studying
KR100954498B1 (en) 2009-09-23 2010-04-22 이창근 A foreign language learning method using a portable device
KR101916174B1 (en) * 2016-08-22 2018-11-07 최준영 Method and apparatus for processing language based on machine learning

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006227587A (en) * 2005-01-20 2006-08-31 Advanced Telecommunication Research Institute International Pronunciation evaluating device and program

Also Published As

Publication number Publication date
KR20190142907A (en) 2019-12-30

Similar Documents

Publication Publication Date Title
CN110033659B (en) Remote teaching interaction method, server, terminal and system
WO2022089192A1 (en) Interaction processing method and apparatus, electronic device, and storage medium
US20110208508A1 (en) Interactive Language Training System
KR102101817B1 (en) Language study supporting apparatus using video publicated on the internet
Chang et al. Performance, cognitive load, and behaviour of technology‐assisted English listening learning: From CALL to MALL
KR101630607B1 (en) Method for providing education service using smart-phone application
WO2015022992A1 (en) Information processing device, control method therefor, and computer program
KR20040082298A (en) Distance Education System
JP2015200890A (en) Distance education method and distance education providing server device
KR20120042298A (en) Language estimation system and estimating method thereof
KR102534275B1 (en) Teminal for learning language, system and method for learning language using the same
US9881611B2 (en) System and method for providing voice communication from textual and pre-recorded responses
JP2016040591A (en) Learning ability development system using smart phone
KR20180093385A (en) Method for providing education service using application
KR20150117985A (en) A method to learn and teach simultaneous interpretation using multimedia equipments
Jati Perspective on ICT in teaching and learning listening & speaking in the 21st century: beyond classroom wall
JP6656529B2 (en) Foreign language conversation training system
KR101681673B1 (en) English trainning method and system based on sound classification in internet
KR102098377B1 (en) Method for providing foreign language education service learning grammar using puzzle game
KR101011773B1 (en) An education management system by ability using education-content development and classification and a method thereof
KR20120027647A (en) Learning contents generating system and method thereof
CN107154173B (en) Language learning method and system
KR100891386B1 (en) System And Method For Learning Foreign Languages Conversation Of Reverse Academy
JP5833280B1 (en) Learning support device, learning support system, and learning support method
KR20030079807A (en) Method and system for providing language education contents using a mobile communication terminal and a service method thereby

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right