KR102337644B1 - 어휘 확장을 이용한 외국어 학습 장치 - Google Patents

어휘 확장을 이용한 외국어 학습 장치 Download PDF

Info

Publication number
KR102337644B1
KR102337644B1 KR1020200110914A KR20200110914A KR102337644B1 KR 102337644 B1 KR102337644 B1 KR 102337644B1 KR 1020200110914 A KR1020200110914 A KR 1020200110914A KR 20200110914 A KR20200110914 A KR 20200110914A KR 102337644 B1 KR102337644 B1 KR 102337644B1
Authority
KR
South Korea
Prior art keywords
learning
sentence
foreign language
word
user
Prior art date
Application number
KR1020200110914A
Other languages
English (en)
Inventor
김서하
Original Assignee
김서하
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김서하 filed Critical 김서하
Priority to KR1020200110914A priority Critical patent/KR102337644B1/ko
Application granted granted Critical
Publication of KR102337644B1 publication Critical patent/KR102337644B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/06—Foreign languages
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
    • G09B7/04—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student characterised by modifying the teaching programme in response to a wrong answer, e.g. repeating the question, supplying a further explanation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

본 발명은 어휘 확장을 이용한 외국어 학습 장치가 개시된다. 본 발명의 외국어 학습 장치는 외국어에 대한 단어 학습, 제1 문장 학습, 제2 문장 학습, 문단 학습, 테마 학습 및 피드백 학습을 유도하는 제어부를 포함한다.

Description

어휘 확장을 이용한 외국어 학습 장치{Foreign language learning device using vocabulary expansion}
본 발명은 외국어 학습 장치에 관한 것으로, 더욱 상세하게는 인공지능 기술을 기반으로 어휘를 확장하면서 외국어 학습을 지원하는 어휘 확장을 이용한 외국어 학습 장치에 관한 것이다.
일반적으로 외국어는 모국어와 다른 어문 구조를 갖는다. 따라서 외국어의 정확한 문장 구조 분석 및 어순 구조의 이해 과정 없이 전체 문장, 또는 단어(word)나 절(clause), 구(phrase)만으로 내용을 이해하고 문장을 만들어내는 데에는 많은 어려움과 한계점이 있다.
즉 외국어 문장의 구성요소에 대한 이해와 어문 구조에 대한 체계가 정립되지 않은 상태에서는 긴 단문이나 중문, 복합문 등의 복잡한 문장을 듣거나 읽었을 때 이를 다시 모국어로 바꾸어 이해하는데 긴 시간이 소비되고, 내용 이해의 오류 가능성이 높아질 수 있다.
현재의 외국어 학습 방법은 학습자가 단순히 전체 문장을 암기하여 말하고 쓰는 방법에 국한되어 있다. 문장의 기본 구조에 대한 이해와 체득없이 단순히 전체 문장을 암기하고 말하고 쓰는 학습법은 학습자가 단어나 구를 알고 있다 하더라도 이를 문장으로 완성할 수 없는 결과를 초래한다. 또한 문장으로 완성했다 하더라도 문법적인 오류가 발생할 수 있으며, 상황에 맞게 문장을 응용하여 생성하는 능력을 길러주는데 한계가 있다.
한국공개특허공보 제10-2018-0083481호(2018.07.23.)
본 발명이 이루고자 하는 기술적 과제는 인공지능 기술을 기반으로 어휘를 점진적으로 확장하면서 외국어 말하기 능력이 향상되도록 도와주는 어휘 확장을 이용한 외국어 학습 장치를 제공하는데 목적이 있다.
본 발명이 이루고자 하는 다른 기술적 과제는 사용자의 학습상태를 기반으로 피드백 학습을 지원하는 어휘 확장을 이용한 외국어 학습 장치를 제공하는데 목적이 있다.
상기 목적을 달성하기 위해 본 발명의 어휘 확장을 이용한 외국어 학습 장치는 사용자 입력을 입력받는 입력부, 사용자의 음성을 입력받는 마이크, 외국어 학습과 관련된 정보를 출력하는 출력부 및 상기 사용자 입력에 따라 복수의 제1 외국어 단어를 출력시켜 상기 제1 외국어 단어에 대한 말하기 학습인 단어 학습을 유도하고, 상기 단어 학습이 완료되면 상기 제1 외국어 단어로 이루어진 제1 문장을 출력시켜 상기 제1 문장에 대한 말하기 학습인 제1 문장 학습을 유도하며, 상기 제1 문장 학습이 완료되면 상기 제1 외국어 단어와 다른 단어인 제2 외국어 단어로 이루어진 제2 문장을 출력시켜 상기 제2 문장에 대한 말하기 학습인 제2 문장 학습을 유도하고, 상기 제2 문장 학습이 완료되면 상기 제1 문장, 상기 제2 문장 및 상기 제1 외국어 단어와 상기 제2 외국어 단어가 조합되어 이루어진 제3 문장 중 적어도 하나가 포함되도록 이루어진 문단을 출력시켜 상기 문단에 대한 말하기 학습인 문단 학습을 유도하며, 상기 문단 학습이 완료되면 상기 문단과 관련된 테마 주제에 대한 영상정보를 출력시켜 상기 테마에 대한 말하기 학습인 테마 학습을 유도하고, 상기 테마 학습이 완료되면 사용자 정보, 학습 시간 및 학습 레벨 중 적어도 하나를 이용하여 사용자의 학습 숙련도를 산출하고, 상기 산출된 학습 숙련도를 기초로 인공지능 기술을 통해 상기 단어 학습, 상기 제1 문장 학습, 상기 제2 문장 학습, 상기 문단 학습 및 상기 테마 학습 중 적어도 하나를 선택하며, 상기 선택된 학습에 대한 말하기 학습인 피드백 학습을 유도하는 제어부를 포함한다.
또한 상기 제어부는 상기 테마 학습에서 상기 테마 주제가 복수개인 경우, 인공지능 기술을 통해 사용자가 가장 관심있는 테마 주제를 선택하고, 선택된 테마 주제와 관련된 영상정보를 출력하는 것을 특징으로 한다.
또한 상기 제어부는 상기 테마 학습 및 상기 피드백 학습 사이에, 가상의 원어민과 상기 테마 주제에 대한 자유 토론 방식으로 진행되는 가상 대화 학습을 유도하는 것을 특징으로 한다.
또한 상기 사용자의 안면을 촬영하여 안면 영상정보를 생성하는 카메라부를 더 포함하고, 상기 제어부는 상기 피드백 학습에서 상기 안면 영상정보를 분석하여 사용자의 표정을 추정하고, 상기 추정된 표정을 더 이용하여 상기 학습 숙련도를 산출하는 것을 특징으로 한다.
또한 상기 제어부는 상기 피드백 학습에서 가상의 원어민 음성 및 혀 위치 영상을 제공하고, 상기 제공된 정보에 대한 사용자의 응답 음성을 분석하며, 상기 분석된 결과에 발음, 연음 및 단어 표현 중 적어도 하나에 대한 오류가 존재하면 오류에 대한 보정이 이루어지도록 지원하는 것을 특징으로 한다.
본 발명의 어휘 확장을 이용한 외국어 학습 장치는 인공지능 기술을 기반으로 어휘를 점진적으로 확장하면서 외국어 말하기 능력이 향상되도록 도와줌으로써, 사용자에게 외국어에 대한 거부감을 최소화시킬 수 있다.
또한 사용자의 학습상태를 기반으로 피드백 학습을 지원하여 사용자에게 부족한 부분을 보완해주는 사용자 맞춤형 학습을 제공할 수 있다.
도 1은 본 발명의 실시예에 따른 외국어 학습 장치를 설명하기 위한 블록도이다.
도 2는 본 발명의 실시예에 따른 단어 학습을 설명하기 위한 도면이다.
도 3은 본 발명의 실시예에 따른 제1 문장 학습을 설명하기 위한 도면이다.
도 4는 본 발명의 실시예에 따른 제2 문장 학습을 설명하기 위한 도면이다.
도 5는 본 발명의 실시예에 따른 문단 학습을 설명하기 위한 도면이다.
도 6은 본 발명의 실시예에 따른 테마 학습을 설명하기 위한 도면이다.
도 7은 본 발명의 실시예에 따른 외국어 학습 방법을 설명하기 위한 순서도이다.
이하 본 발명의 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의한다. 또한 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 당업자에게 자명하거나 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
도 1은 본 발명의 실시예에 따른 외국어 학습 장치를 설명하기 위한 블록도이다.
도 1를 참조하면, 외국어 학습 장치(100)는 인공지능 기술을 기반으로 어휘를 점진적으로 확장하면서 외국어 말하기 능력이 향상되도록 도와준다. 외국어 학습 장치(100)는 사용자의 학습상태를 기반으로 피드백 학습을 지원한다. 여기서 외국어 학습 장치(100)는 스마트폰, 데스크톱, 랩톱, 태블릿 PC, 핸드헬드 PC 등과 같은 개인용 컴퓨팅 시스템일 수 있다. 외국어 학습 장치(100)는 입력부(10), 마이크(20), 제어부(40) 및 출력부(50)를 포함하고, 카메라부(30) 및 저장부(60)를 더 포함할 수 있다.
입력부(10)는 사용자가 입력한 사용자 입력을 입력받는다. 사용자 입력은 학습 선택 입력, 학습 완료 입력, 설정 입력 등을 포함할 수 있다. 입력부(10)는 키보드, 마우스, 터치스크린 등을 포함할 수 있다.
마이크(20)는 사용자가 발화하는 사용자의 음성을 입력받는다. 사용자의 음성은 사용자가 외국어 학습을 하면서 발화하는 소리를 의미한다.
카메라부(30)는 사용자의 안면을 촬영하여 안면 영상정보를 생성한다. 카메라부(30)는 적어도 하나의 소형 카메라를 포함하고, 소형 카메라의 방향은 사용자의 안면을 향한다. 여기서 카메라부(30)가 복수의 소형 카메라를 포함하는 경우, 카메라부(30)는 다양한 방향에서의 사용자 안면을 촬영할 수 있다.
제어부(40)는 사용자 입력에 따라 단어 학습, 제1 문장 학습, 제2 문장 학습, 문단 학습, 테마 학습, 가상 대화 학습 및 피드백 학습을 순차적 또는 개별적으로 유도한다. 이를 통해 제어부(40)는 사용자에게 맞춤형 외국어 학습을 지원한다.
상세하게는 제어부(40)는 복수의 제1 외국어 단어를 출력시켜 제1 외국어 단어에 대한 말하기 학습인 단어 학습을 유도한다. 여기서 제1 외국어 단어는 임의의 외국어 단어에 해당한다. 제어부(40)는 단어 학습이 완료되면 제1 외국어 단어로 이루어진 제1 문장을 출력시켜 제1 문장에 대한 말하기 학습인 제1 문장 학습을 유도한다. 제어부(40)는 제1 문장 학습이 완료되면 제1 외국어 단어와 다른 단어인 제2 외국어 단어로 이루어진 제2 문장을 출력시켜 제2 문장에 대한 말하기 학습인 제2 문장 학습을 유도한다. 즉 제2 문장 학습은 제1 문장 학습에서 학습되지 않은 단어를 학습하는 과정이라고 할 수 있다. 제어부(40)는 제2 문장 학습이 완료되면 제1 문장, 제2 문장 및 제1 외국어 단어와 제2 외국어 단어가 조합되어 이루어진 제3 문장 중 적어도 하나가 포함되도록 이루어진 문단을 출력시켜 문단에 대한 말하기 학습인 문단 학습을 유도한다. 제어부(40)는 문단 학습이 완료되면 문단과 관련된 테마 주제에 대한 영상정보를 출력시켜 테마에 대한 말하기 학습인 테마 학습을 유도한다. 이때 문단에 포함된 테마 주제가 복수개인 경우, 제어부(40)는 인공신경망(ANN), 기계학습(machine learning), 딥러닝(deep learning) 등과 같은 인공지능 기술을 통해 사용자가 가장 관심있는 테마 주제를 선택하거나, 사용자 입력에 따라 테마 주제를 선택하고, 선택된 테마 주제와 관련된 이미지 또는 동영상에 대한 영상정보를 출력할 수 있다. 제어부(40)는 테마 학습이 완료되면 사용자 정보, 학습 시간, 학습 레벨 및 안면 영상정보 중 적어도 하나를 이용하여 사용자의 학습 숙련도를 산출한다. 여기서 제어부(40)가 안면 영상정보를 이용하여 학습 숙련도를 산출하는 경우, 제어부(40)는 안면 영상정보로부터 기쁨, 놀람, 즐김, 불안, 두려움 등과 같은 표정을 추정하고, 추정된 표정을 기반으로 학습 숙련도를 산출할 수 있다. 예를 들어 제어부(40)는 안면 영상정보로부터 즐김에 대한 표정을 추정하면 사용자의 감정이 자신감이 넘친다고 판단하여 학습 숙련도를 높게 평가하고, 안면 영상정보로부터 불안에 대한 표정을 추정하면 사용자의 감정이 겁먹은 상태라고 판단하여 학습 숙련도를 낮게 평가한 후, 해당 평가를 수치화하여 학습 숙련도를 산출할 수 있다. 제어부(40)는 산출된 학습 숙련도를 기초로 인공지능 기술을 통해 단어 학습, 제1 문장 학습, 제2 문장 학습, 문단 학습 및 테마 학습 중 적어도 하나를 선택하고, 선택된 학습에 대한 말하기 학습인 피드백 학습을 유도한다. 제어부(40)는 가상의 원어민 음성 및 혀 위치 영상을 제공할 수 있고, 제공된 정보에 대한 사용자의 응답 음성을 분석하며, 분석된 결과에 발음, 연음 및 단어 표현 중 적어도 하나에 대한 오류가 존재하면 오류에 대한 보정이 이루어지도록 지원한다. 즉 제어부(40)는 오류가 존재하는 부분에 대한 올바른 발음, 연음 및 단어 표현을 출력시켜 사용자로 하여금 확인할 수 있도록 한다. 바람직하게는 제어부(40)는 오류가 존재하는 부분과 올바른 표현을 연속적으로 출력시켜 사용자가 자신에게 어떤 부분이 잘못되었는지 직관적으로 알 수 있도록 할 수 있다. 한편 제어부(40)는 테마 학습 및 피드백 학습 사이에 가상의 원어민과 테마 주제에 대한 자유 토론 방식으로 진행되는 가상 대화 학습을 유도할 수 있다. 이때 제어부(40)는 사용자 입력에 따라 가상의 원어민을 선택할 수 있다. 예를 들어 제어부(40)는 사용자 입력에 의해 나라별 발음, 지역별 발음, 인종별 발음 등 다양한 옵션을 선택하여 가상의 원어민을 생성한 후, 생성된 가상의 원어민을 통해 가상 대화 학습을 진행할 수 있다.
출력부(50)는 외국어 학습과 관련된 정보를 출력한다. 출력부(50)는 시각 및 청각적인 형태로 해당 정보를 출력한다. 이를 위해 출력부(50)는 디스플레이 및 스피커를 포함한다. 디스플레이는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
저장부(60)는 외국어 학습 장치(100)를 동작시키기 위한 어플리케이션 또는 프로그램이 저장된다. 저장부(60)는 입력부(10)로부터 입력된 사용자 입력이 저장되고, 마이크(20)로부터 입력된 사용자의 음성이 저장되며, 카메라부(30)로부터 촬영된 영상정보가 저장된다. 또한 저장부(60)는 제어부(40)로부터 학습된 정보 및 외국어 학습에 필요한 단어, 문장, 문단 등이 저장된다. 저장부(60)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기메모리, 자기 디스크 및 광디스크 중 적어도 하나의 저장매체를 포함할 수 있다.
도 2는 본 발명의 실시예에 따른 단어 학습을 설명하기 위한 도면이고, 도 3은 본 발명의 실시예에 따른 제1 문장 학습을 설명하기 위한 도면이며, 도 4는 본 발명의 실시예에 따른 제2 문장 학습을 설명하기 위한 도면이고, 도 5는 본 발명의 실시예에 따른 문단 학습을 설명하기 위한 도면이며, 도 6은 본 발명의 실시예에 따른 테마 학습을 설명하기 위한 도면이다.
도 1 내지 도 6을 참조하면, 외국어 학습 장치(100)는 사용자에게 단어 학습, 제1 문장 학습, 제2 문장 학습, 문단 학습, 테마 학습 및 피드백 학습을 할 수 있도록 유도한다.
외국어 학습 장치(100)는 단어A, 단어B, 단어C, 단어D, 단어E, 단어F 등과 같은 복수의 제1 외국어 단어를 출력하여 사용자가 단어 학습을 할 수 있도록 유도한다. 이때 각 단어들은 임의의 단어일 수 있고, 일정한 간격으로 이격되어 나열되는 형태로 출력될 수 있다.
외국어 학습 장치(100)는 단어 학습을 통해 학습된 복수의 제1 외국어 단어로 이루어진 제1 문장을 출력하여 사용자가 제1 문장 학습을 할 수 있도록 유도한다. 여기서 제1 문장은 문장A, 문장B 및 문장C를 포함할 수 있으며, 문장A는 단어A + 단어D 등이 결합되어 이루어지고, 문장B는 단어B + 단어E 등이 결합되어 이루어지며, 문장C는 단어C + 단어F 등이 결합되어 이루어질 수 있다.
외국어 학습 장치(100)는 단어 학습을 통해 학습된 복수의 제1 외국어 단어와 다른 단어인 제2 외국어 단어로 이루어진 제2 문장을 출력하여 사용자가 제2 문장 학습을 할 수 있도록 유도한다. 여기서 제2 문장은 문장A‘, 문장B’ 및 문장C’를 포함할 수 있으며, 문장A’는 단어A‘ + 단어D’ 등이 결합되어 이루어지고, 문장B‘는 단어B’ + 단어E‘ 등이 결합되어 이루어지며, 문장C’는 단어C‘ + 단어F’ 등이 결합되어 이루어질 수 있다.
외국어 학습 장치(100)는 제1 문장, 제2 문장 및 제1 외국어 단어와 제2 외국어 단어가 조합되어 이루어진 제3 문장 중 적어도 하나가 포함되도록 이루어진 문단을 출력하여 사용자가 문단 학습을 할 수 있도록 유도한다. 여기서 문단은 문단A, 문단B 및 문단C를 포함할 수 있으며, 문단A는 문장A + 문장B + 문장C 등이 결합되어 이루어지고, 문단B는 문장A’ + 문장B + 문장C’ 등이 결합되어 이루어지며, 문장C는 문장A + 문장B’ + 문장C’ 등이 결합되어 이루어질 수 있다.
외국어 학습 장치(100)는 문단과 관련된 테마 주제에 대한 영상정보(200)를 출력하여 사용자가 테마 학습을 할 수 있도록 유도한다. 여기서 테마는 문단에 포함된 다양한 주제일 수 있다. 예를 들어 테마가 택시에서 발생된 이벤트인 경우, 외국어 학습 장치(100)는 손님(210)과 택시운전사(220) 사이에 발생되는 대화를 이미지, 음성 및 문장으로 제공할 수 있으며, 그 대화는 다음과 같을 수 있다.
손님(210): Could you drop me off at the subway station(230)?
택시운전사(220): Are you talking over there?
손님(210): Yes, that’s right.
이때 외국어 학습 장치(100)는 문장을 출력을 대화하는 음성에 대응되도록 순차적으로 출력할 수 있거나, 전체 문장을 출력한 후 출력을 대화하는 음성에 대응되도록 별도의 표시(색깔, 밑줄 등)를 할 수 있다.
외국어 학습 장치(100)는 사용자 정보, 학습 시간 및 안면 영상정보 중 적어도 하나를 이용하여 이전 수행된 학습 중 적어도 하나를 선택하여 사용자가 선택된 학습에 대한 피드백 학습을 할 수 있도록 유도한다. 즉 외국어 학습 장치(100)는 가상의 원어민 음성(이상적인 음성)과 사용자의 학습된 음성을 비교하면서 피드백 학습을 수행할 수 있다.
도 7은 본 발명의 실시예에 따른 외국어 학습 방법을 설명하기 위한 순서도이다.
도 1 및 도 7을 참조하면, 외국어 학습 방법은 인공지능 기술을 기반으로 어휘를 점진적으로 확장하면서 외국어 말하기 능력이 향상되도록 도와줌으로써, 사용자에게 외국어에 대한 거부감을 최소화시킬 수 있다. 외국어 학습 방법은 사용자의 학습상태를 기반으로 피드백 학습을 지원하여 사용자에게 부족한 부분을 보완해주는 사용자 맞춤형 학습을 제공할 수 있다.
S110 단계에서, 외국어 학습 장치(100)는 사용자가 단어 학습을 할 수 있도록 유도한다. 외국어 학습 장치(100)는 복수의 제1 외국어 단어를 출력시켜 제1 외국어 단어에 대한 말하기 학습인 단어 학습을 유도한다. 여기서 제1 외국어 단어는 임의의 외국어 단어에 해당한다.
S120 단계에서, 외국어 학습 장치(100)는 사용자가 제1 문장 학습을 할 수 있도록 유도한다. 여기서 제1 문장은 제1 외국어 단어로 이루어진 문장을 의미한다.
S130 단계에서, 외국어 학습 장치(100)는 사용자가 제2 문장 학습을 할 수 있도록 유도한다. 여기서 제2 문장은 제1 외국어 단어와 다른 단어인 제2 외국어 단어로 이루어진 문장을 의미한다. 즉 제2 문장 학습은 제1 문장 학습에서 학습되지 않은 단어를 학습하는 과정일 수 있다.
S140 단계에서, 외국어 학습 장치(100)는 사용자가 문단 학습을 할 수 있도록 유도한다. 여기서 문단은 제1 문장, 제2 문장 및 제1 외국어 단어와 제2 외국어 단어가 조합되어 이루어진 제3 문장 중 적어도 하나가 포함되도록 이루어진 복수의 문장을 의미한다.
S150 단계에서, 외국어 학습 장치(100)는 사용자가 테마 학습을 할 수 있도록 유도한다. 여기서 테마는 문단과 관련된 테마 주제를 의미한다. 특히 외국어 학습 장치(100)는 문단에 포함된 테마 주제가 복수개인 경우, 제어부(40)는 인공신경망(ANN), 기계학습(machine learning), 딥러닝(deep learning) 등과 같은 인공지능 기술을 통해 사용자가 가장 관심있는 테마 주제를 선택하거나, 사용자 입력에 따라 테마 주제를 선택하고, 선택된 테마 주제와 관련된 이미지 또는 동영상에 대한 영상정보를 출력시켜 사용자가 테마 학습을 할 수 있도록 유도할 수 있다.
S160 단계에서, 외국어 학습 장치(100)는 사용자가 피드백 학습을 할 수 있도록 유도한다. 외국어 학습 장치(100)는 사용자 정보, 학습 시간, 학습 레벨 및 안면 영상정보 중 적어도 하나를 이용하여 사용자의 학습 숙련도를 산출하고, 산출된 학습 숙련도를 기초로 인공지능 기술을 통해 단어 학습, 제1 문장 학습, 제2 문장 학습, 문단 학습 및 테마 학습 중 적어도 하나를 선택하며, 선택된 학습에 대한 피드백을 한다. 이때 외국어 학습 장치(100)는 가상의 원어민 음성 및 혀 위치 영상을 제공할 수 있고, 제공된 정보에 대한 사용자의 응답 음성을 분석하며, 분석된 결과에 발음, 연음 및 단어 표현 중 적어도 하나에 대한 오류가 존재하면 오류에 대한 보정이 이루어지도록 지원한다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 장치에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 하드디스크, ROM, RAM, CD-ROM, 하드 디스크, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
이상에서 본 발명의 바람직한 실시예에 대해 도시하고 설명하였으나, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.
10: 입력부
20: 마이크
30: 카메라부
40: 제어부
50: 출력부
60: 저장부

Claims (5)

  1. 사용자 입력을 입력받는 입력부;
    사용자의 음성을 입력받는 마이크;
    외국어 학습과 관련된 정보를 출력하는 출력부; 및
    상기 사용자 입력에 따라 복수의 제1 외국어 단어를 출력시켜 상기 제1 외국어 단어에 대한 말하기 학습인 단어 학습을 유도하고,
    상기 단어 학습이 완료되면 상기 제1 외국어 단어로 이루어진 제1 문장을 출력시켜 상기 제1 문장에 대한 말하기 학습인 제1 문장 학습을 유도하며,
    상기 제1 문장 학습이 완료되면 상기 제1 외국어 단어와 다른 단어인 제2 외국어 단어로 이루어진 제2 문장을 출력시켜 상기 제2 문장에 대한 말하기 학습인 제2 문장 학습을 유도하고,
    상기 제2 문장 학습이 완료되면 상기 제1 문장, 상기 제2 문장 및 상기 제1 외국어 단어와 상기 제2 외국어 단어가 조합되어 이루어진 제3 문장 중 적어도 하나가 포함되도록 이루어진 문단을 출력시켜 상기 문단에 대한 말하기 학습인 문단 학습을 유도하며,
    상기 문단 학습이 완료되면 상기 문단과 관련된 테마 주제에 대한 영상정보를 출력시켜 상기 테마에 대한 말하기 학습인 테마 학습을 유도하고,
    상기 테마 학습이 완료되면 사용자 정보, 학습 시간 및 학습 레벨 중 적어도 하나를 이용하여 사용자의 학습 숙련도를 산출하고, 상기 산출된 학습 숙련도를 기초로 인공지능 기술을 통해 상기 단어 학습, 상기 제1 문장 학습, 상기 제2 문장 학습, 상기 문단 학습 및 상기 테마 학습 중 적어도 하나를 선택하며, 상기 선택된 학습에 대한 말하기 학습인 피드백 학습을 유도하는 제어부;
    를 포함하는 어휘 확장을 이용한 외국어 학습 장치.
  2. 제 1항에 있어서,
    상기 제어부는
    상기 테마 학습에서 상기 테마 주제가 복수개인 경우, 인공지능 기술을 통해 사용자가 가장 관심있는 테마 주제를 선택하고, 선택된 테마 주제와 관련된 영상정보를 출력하는 것을 특징으로 하는 어휘 확장을 이용한 외국어 학습 장치.
  3. 제 1항에 있어서,
    상기 제어부는
    상기 테마 학습 및 상기 피드백 학습 사이에, 가상의 원어민과 상기 테마 주제에 대한 자유 토론 방식으로 진행되는 가상 대화 학습을 유도하는 것을 특징으로 하는 어휘 확장을 이용한 외국어 학습 장치.
  4. 제 1항에 있어서,
    상기 사용자의 안면을 촬영하여 안면 영상정보를 생성하는 카메라부;를 더 포함하고,
    상기 제어부는
    상기 피드백 학습에서 상기 안면 영상정보를 분석하여 사용자의 표정을 추정하고, 상기 추정된 표정을 더 이용하여 상기 학습 숙련도를 산출하는 것을 특징으로 하는 어휘 확장을 이용한 외국어 학습 장치.
  5. 제 1항에 있어서,
    상기 제어부는
    상기 피드백 학습에서 가상의 원어민 음성 및 혀 위치 영상을 제공하고, 상기 제공된 정보에 대한 사용자의 응답 음성을 분석하며, 상기 분석된 결과에 발음, 연음 및 단어 표현 중 적어도 하나에 대한 오류가 존재하면 오류에 대한 보정이 이루어지도록 지원하는 것을 특징으로 하는 어휘 확장을 이용한 외국어 학습 장치.
KR1020200110914A 2020-09-01 2020-09-01 어휘 확장을 이용한 외국어 학습 장치 KR102337644B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200110914A KR102337644B1 (ko) 2020-09-01 2020-09-01 어휘 확장을 이용한 외국어 학습 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200110914A KR102337644B1 (ko) 2020-09-01 2020-09-01 어휘 확장을 이용한 외국어 학습 장치

Publications (1)

Publication Number Publication Date
KR102337644B1 true KR102337644B1 (ko) 2021-12-09

Family

ID=78866079

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200110914A KR102337644B1 (ko) 2020-09-01 2020-09-01 어휘 확장을 이용한 외국어 학습 장치

Country Status (1)

Country Link
KR (1) KR102337644B1 (ko)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090009626U (ko) * 2008-03-20 2009-09-24 박준혁 말하기, 듣기, 읽기, 쓰기 4대 요소를 이용한 영어학습프로그램
KR20140140930A (ko) * 2013-05-30 2014-12-10 임광식 외국어 표현 학습 시스템 및 방법
KR20160111335A (ko) * 2015-03-16 2016-09-26 최병선 외국어 학습 시스템 및 외국어 학습 방법
KR20170069778A (ko) * 2015-12-11 2017-06-21 주식회사 미티영 외국어 학습을 위한 단말장치와 그의 외국어 학습 화면 출력방법, 기록매체, 프로그램
KR101854379B1 (ko) * 2015-04-14 2018-05-04 (주)극한스피킹 무의식적 절차 기억 강화를 통한 영어 학습 방법
KR20180083481A (ko) 2017-01-13 2018-07-23 (주)스콜라 영어 학습교재

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090009626U (ko) * 2008-03-20 2009-09-24 박준혁 말하기, 듣기, 읽기, 쓰기 4대 요소를 이용한 영어학습프로그램
KR20140140930A (ko) * 2013-05-30 2014-12-10 임광식 외국어 표현 학습 시스템 및 방법
KR20160111335A (ko) * 2015-03-16 2016-09-26 최병선 외국어 학습 시스템 및 외국어 학습 방법
KR101854379B1 (ko) * 2015-04-14 2018-05-04 (주)극한스피킹 무의식적 절차 기억 강화를 통한 영어 학습 방법
KR20170069778A (ko) * 2015-12-11 2017-06-21 주식회사 미티영 외국어 학습을 위한 단말장치와 그의 외국어 학습 화면 출력방법, 기록매체, 프로그램
KR20180083481A (ko) 2017-01-13 2018-07-23 (주)스콜라 영어 학습교재

Similar Documents

Publication Publication Date Title
US20190385480A1 (en) System to evaluate dimensions of pronunciation quality
CN105792752B (zh) 用于诊断和治疗语言相关障碍的计算技术
US9478143B1 (en) Providing assistance to read electronic books
US10672293B2 (en) Computer system methods for generating combined language content
US11605384B1 (en) Duplex communications for conversational AI by dynamically responsive interrupting content
KR102043419B1 (ko) 아동언어학습을 위한 음성인식 기반 학습 시스템 및 학습방법
US11210964B2 (en) Learning tool and method
Kushalnagar et al. Tracked speech-to-text display: Enhancing accessibility and readability of real-time speech-to-text
CN109389873B (zh) 计算机系统和由计算机实现的训练系统
Matzinger et al. Non-native speaker pause patterns closely correspond to those of native speakers at different speech rates
Ai Automatic pronunciation error detection and feedback generation for call applications
Gottardi et al. Automatic speech recognition and text-to-speech technologies for L2 pronunciation improvement: reflections on their affordances
KR102389153B1 (ko) 음성 반응형 전자책 제공 방법 및 디바이스
Bashori et al. I Can Speak: Improving English pronunciation through automatic speech recognition-based language learning systems
CN111723606A (zh) 一种数据处理方法、装置和用于数据处理的装置
Skidmore Incremental disfluency detection for spoken learner english
US11587460B2 (en) Method and system for adaptive language learning
KR102395702B1 (ko) 문장을 이루는 단위를 단계별 확장하여 스텝화한 영어 교육 서비스 제공 방법
KR102337644B1 (ko) 어휘 확장을 이용한 외국어 학습 장치
RU2344492C2 (ru) Динамическая поддержка произношения для обучения распознаванию японской и китайской речи
Kobylyanskaya Speech and eye tracking features for L2 acquisition: a multimodal experiment
KR20140087956A (ko) 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법
JP2007148170A (ja) 外国語学習支援システム
Viebahn et al. Where is the disadvantage for reduced pronunciation variants in spoken-word recognition? On the neglected role of the decision stage in the processing of word-form variation
Jones et al. Kia tangata whenua: Artificial intelligence that grows from the land and people

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant