KR101025665B1 - 음악기반 언어 학습방법과 이를 활용한 학습장치 - Google Patents

Abstract

본 발명은 음악기반 언어 학습방법과 이를 활용한 학습장치에 관한 것으로, 특히, 가사와 반주로 이루어지는 노래를 중심으로 하는 음악과 텍스트와 발음으로 구성되는 언어를 유관된 이미지 또는 동영상과 매칭시킨 사용자 맞춤학습 멀티미디어 콘텐츠를 생성하고, 이를 재생하여 보고 듣는 시청각적 언어 학습방법과 이를 활용한 학습장치에 관한 것이다.
본 발명에 따른 음악기반 언어 학습방법은 언어 학습장치의 입력부에 의해 기저장된 단어/어휘나 문장과 반주음악이 지정되는 단계;
맞춤학습생성부에서 입력부에 의해 지정된 단어/어휘나 문장 및 반주를 텍스트와 유관 이미지나 동영상 및 원어민의 발음과 함께 매칭시켜 음악 기반의 맞춤학습 콘텐츠를 생성하고 저장하는 단계; 및
제어부에서 상기 맞춤학습 콘텐츠를 재생하되, 표시부를 통해 텍스트와 유관 이미지나 동영상을 출력하고, 스피커를 통해 원어민의 발음과 반주를 출력하는 단계를 포함하여 구성된다.

Description

음악기반 언어 학습방법과 이를 활용한 학습장치 {Method and Device for Music-based Language Training}

본 발명은 음악기반 언어 학습방법과 이를 활용한 학습장치에 관한 것으로, 특히, 가사와 반주로 이루어지는 노래를 중심으로 하는 음악과, 텍스트와 발음으로 구성되는 언어를 유관된 이미지 또는 동영상과 매칭시킨 사용자 맞춤학습 멀티미디어 콘텐츠를 생성하고, 이를 재생하여 보고 듣는 시청각적 언어 학습방법과 이를 활용한 학습장치에 관한 것이다.

현대 사회가 글로벌화되어 가면서 영어, 일본어, 한자 등 외국어가 사회생활에서 매우 중요한 위치를 차지하게 되었다.

이에 따라 언어교육이 조기에 실시되고 있으며, 효과적으로 언어학습을 하기 위한 다양한 방법이 개발되고 있다.

예를 들어 외국어를 학습하는데 있어서, 외국어 학원에 직접 등록 및 출석하여 강사의 강의를 듣는 방법이 일반적이나 이는 비싼 비용과 시간적 제한이 있다.

또한, 인터넷을 통한 온라인 외국어 학습방법은 강사의 강의를 녹화하고, 녹화된 내용을 인터넷을 통해 제공하는 것이나, 학습자가 일방적으로 녹화된 내용을 제공받게 되어 있어 학습의 효율이 떨어진다.

최근에는 글로벌 시대의 조류에 발맞춰 외국어 교육의 중요성이 부각됨에 따라 다양한 외국어 교육법이 시도되고 있으나, 언어 습득의 기본이 되는 어휘 능력 개발은 개인의 노력에 의존하는 경향이 지배적이어서 단어나 숙어의 학습에 대한 효과는 미미하였다.

또한, 기존의 언어 학습 방법은 원어민의 발음을 녹음한 음성 파일로 제공하거나, 학습 과정을 동영상으로 제공하는 오프라인의 학습형태를 벗어나지 못하고 있으며, 기제공되는 학습 콘텐츠를 통해 반복학습을 지향하는 콘텐츠 주도적인 학습 방법으로, 원하는 학습콘텐츠를 사용자가 재구성할 수 있도록 하여, 언제 어디서나 학습자를 위한 맞춤형 학습 콘텐츠로 학습하기를 선호하는 학습자의 요구를 만족시키기에 부족한 점이 많았다.

그리고 일부 맞춤형 학습 콘텐츠를 지향하는 학습방법의 경우 기존의 콘텐츠 주도적 학습 방법으로 설계된 학습 콘텐츠를 재배열하는 형태로, 사용자가 참여하여 직접 자신의 학습 콘텐츠를 생성하는 사용자 주도형 학습 콘텐츠로 보기 어려우며, 학습자에게 널리 활용되지 못하고 있다.

본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 가사와 반주로 구성되는 음악과 문자 즉, 텍스트와 발음으로 구성되는 언어를, 연관된 이미지 또는 동영상을 매칭시킨 맞춤학습 콘텐츠를 생성하고, 이를 재생하여 보고 듣는 시청각적 음악기반 언어 학습방법과 이를 활용한 학습장치를 제공하는데 그 목적이 있다.

또한, 본 발명의 다른 목적은 언어 학습에 반복적 시청으로 리듬을 통해 부지불식간에 체득하는 음악의 특성을 접목하고, 유관된 이미지와 동영상을 병합하여 제공함으로써 언어 학습에 대한 지속적인 흥미를 유발시키고, 하나의 노래와 같이 연결시켜서 지루함을 주지 않게 하여 언어 습득의 기본이 되는 어휘 능력을 향상시킬 수 있는 음악기반 언어 학습방법과 이를 활용한 학습장치를 제공하는데 있다.

상술한 목적을 달성하기 위한 본 발명의 실시예에 따른 음악기반 언어 학습방법은 언어 학습장치의 입력부에 의해 기저장된 단어/어휘나 문장과 반주음악이 지정되는 단계;

맞춤학습생성부에서 입력부에 의해 지정된 단어/어휘나 문장 및 반주를 텍스트와 유관 이미지나 동영상 및 원어민의 발음과 함께 매칭시켜 음악 기반의 맞춤학습 콘텐츠를 생성하고 저장하는 단계; 및

제어부에서 상기 맞춤학습 콘텐츠를 재생하되, 표시부를 통해 텍스트와 유관 이미지나 동영상을 출력하고, 스피커를 통해 원어민의 발음과 반주를 출력하는 단계를 포함하여 구성된다.

또한 본 발명에 따른 음악기반 언어 학습방법은 언어 학습장치의 입력부에 의해 학습 수준이 선택되는 경우 제어부에서 그 학습 수준에 맞는 품사 또는 의미 단위로 조합한 다수의 단어/어휘를 반주와 함께 노래로 만든 학습용 음악 콘텐츠로 구성되는 콘텐츠의 목록이 출력되는 단계;

입력부에 의해 콘텐츠 목록 중 어느 하나의 콘텐츠가 선택되는 경우에 제어부에 의해 그 콘텐츠의 학습 기능 목록이 출력되는 단계; 및

입력부에 의해 학습 기능 목록 중 어느 하나의 학습 기능이 선택되는 경우에 제어부에 의해 콘텐츠의 내용을 학습 기능별로 다르게 재생하되, 표시부를 통해 텍스트와 유관 이미지나 동영상을 출력하고, 스피커를 통해 원어민의 발음과 반주를 출력하는 단계를 포함하여 구성된다.

그리고 본 발명에 따른 음악기반 언어 학습장치는 입력부, 표시부, 스피커, 메모리부 및 제어부로 구성된 언어 학습장치에 있어서;

상기 메모리부에는 다수의 단어/어휘와 뜻에 대한 텍스트 및 발음, 반주와 유관 이미지나 동영상을 저장하고,

상기 입력부에 의해 선택된 메모리부의 단어/어휘와 반주를 이미지나 동영상과 매칭시켜 음악 기반의 단어/어휘 맞춤학습 콘텐츠를 생성하고 메모리부에 저장하는 맞춤학습생성부가 더 구비되되,

상기 제어부는 메모리부에 저장된 단어/어휘 맞춤학습 콘텐츠를 재생하여 스피커를 통해 단어/어휘 맞춤학습 콘텐츠의 발음과 반주를 소리로 출력하고, 표시부를 통해 텍스트와 이미지나 동영상을 출력하는 것을 특징으로 한다.

상술한 과제의 해결 수단에 의하면, 학습자가 음악과 단어/어휘를 선택하는 경우에 그 음악과 단어/어휘 또는 유관 이미지를 매칭시킨 맞춤학습 콘텐츠를 생성하고, 이를 이용하여 발음을 연습하고, 음악과 게임을 통해 단어/어휘를 암기하며 학습자가 지정한 단어/어휘를 모아서 반주(배경음악)에 맞추어 언어를, 학습자가 스스로 지정하는 단어/어휘를 활용하여 작사한 하나의 노래를 부르는 것과 같은 방법으로 학습할 수 있다.

또한, 언어 학습에 음악 또는 유관된 이미지와 동영상을 병합하여 제공함으로써 언어 학습에 대한 지속적인 흥미를 유발시키고, 하나의 노래와 같이 연결되어 지루함을 주지 않게 하여 언어 습득의 기본이 되는 단어/어휘 능력을 향상시킬 수 있다.

도 1은 본 발명의 실시예에 따른 언어 학습장치의 구성도,
도 2는 도 1에 나타낸 메모리부의 학습정보 저장영역에 저장되는 학습정보의 구성도,
도 3은 본 발명의 제1실시예에 따른 언어 학습방법의 순서도,
도 4는 본 발명의 제2실시예에 따른 언어 학습방법의 순서도,
도 5a와 도 5b는 본 발명에 적용되는 음정추출 프로그램에 의한 곡선그래프,
도 6a 내지 도 6c는 도 3의 재생 단계에서 표시부에 출력되는 예시 화면,
도 7a 내지 도 7j는 도 4의 각 단계별 표시부에 출력되는 예시 화면.

이하 본 발명의 실시예에 대하여 첨부된 도면을 참고로 그 구성 및 작용을 설명하기로 한다.

도 1은 본 발명의 제1실시예에 따른 언어 학습장치의 구성도이다.

도시된 바와 같이 언어 학습장치(10)는 제어부(11), 입력부(12), 표시부(13), 음성처리부(14), 통신부(15), 메모리부(16), 맞춤학습생성부(17) 및 평가부(18)를 포함하여 구성된다.

제어부(11)는 본 발명에 따른 언어 학습을 수행하기 위한 전반적인 동작을 제어한다.

메모리부(16)는 어학 학습을 수행하기 위한 프로그램을 저장하는 프로그램 저장영역과, 상기 프로그램 수행 중에 발생하는 데이터들을 일시 저장하기 위한 임시 저장영역과, 상기 언어 학습에 필요한 학습정보를 저장하는 학습정보 저장영역으로 구성된다.

또한, 메모리부(16)에 저장되는 학습 콘텐츠 데이터는 학습장치가 독립적으로 운영되어 콘텐츠 데이터베이스의 확장이 비동기적으로 변경되는 경우(콘텐츠 데이터베이스가 학습장치에 구성되며, 이를 변경시 학습자가 콘텐츠 데이터베이스를 업그레이드하거나, 업데이트함)와, 콘텐츠 데이터베이스 서버를 두어 통신 가능한 환경에서 동기적으로 콘텐츠 데이터베이스가 확장될 수 있는 경우(콘텐츠 데이터 베이스가 서버로 구성되어, 통신 환경하에서 실시간으로 콘텐츠 데이터베이스를 구성하여 활용 가능한 콘텐츠들만 학습장치에 다운로드)로 나뉠 수 있으며, 이는 언어 학습을 제공하는 방법에 따라 그 구성을 달리할 수 있다.

상기 메모리부(16)의 프로그램 저장영역에는 음정추출 프로그램이 저장되어 원어민이나 학습자의 발음에 따른 음정(피치)을 추출하여 곡선 그래프로 표시한다.

도 5a와 도 5b는 예를 들어 영어 단어인 polite, current, severe, remote를 발음한 경우 서로 다른 음정추출 프로그램으로 추출한 곡선그래프로서 두 개의 서로 다른 음정추출 프로그램이 동일한 곡선그래프를 그리고 있음을 알 수 있다.

평가부(18)는 음정추출 프로그램에 의해 그려진 원어민과 학습자의 곡선그래프를 서로 비교하여 그 유사도에 따라 점수를 채점한다.

즉, 학습자가 스피커(SP)로 출력되는 원어민의 발음(메모리부에서 제공하는 음성 데이터)을 소정간격을 두고 따라하고 이를 녹음하여 저장하는 경우, 상기 음정추출 프로그램에서 이 저장된 학습자 발음의 음정, 음량, 재생시간 정보를 추출하여 발화 곡선그래프를 생성하되, 음정은 발화 곡선그래프에서 높낮이를, 음량은 두께를, 재생시간은 길이를 나타내도록 하여 원어민과 학습자의 발음 차이를 시각적으로 비교할 수 있도록 하며, 평가부(18)는 두 발화 곡선그래프의 유사도를 평가하여 점수를 산출한다.

또한 상기 평가부(18)는 콘텐츠에 포함된 단어를 학습하고 그 학습한 단어에 관련된 테스트 게임을 수행하는 경우 그 테스트 게임의 결과, 오답과 정답의 수에 따라 점수를 산출한다.

입력부(12)는 언어 학습장치(10)의 동작을 제어하기 위한 입력수단으로서 다수의 키나 마우스 또는 터치인터페이스를 지원하는 스크린을 통한 가상키 입력 시스템을 구비하고, 학습자에 의해 눌려진 키나 마우스 또는 터치인터페이스로 조작된 데이터를 제어부(11)로 출력한다.

표시부(13)는 액정표시장치(LCD)이나 터치인터페이스를 지원하는 스크린 또는 CRT 모니터로서, 제어부(11)의 제어를 받아 다양한 언어 학습 정보들을 텍스트, 이미지 및 동영상으로 표시한다.

음성처리부(14)는 마이크(MIC) 및 스피커(SP)와 연결되고, 마이크(MIC)를 통해 입력하는 아날로그 음성을 PCM, EVRC 또는 MP3 포맷으로 음성처리하여 제어부(11)로 출력하며, 제어부(11)는 이를 메모리부(16)의 녹음정보(16e)에 저장한다.

또한, 음성처리부(14)는 메모리부(16)에 저장된 음성 데이터(발음)나 노래파일을 변환하여 스피커(SP)를 통해 소리로 출력한다.

통신부(15)는 제어부(11)의 제어를 받아 인터넷망에 접속하여 미도시된 학습정보서버에 제공하는 학습정보 예를 들어 도 2의 단어 e사전(16a), 문장 e사전16b), 콘텐츠기능정보(16c) 등에 관한 데이터를 다운로드받아 업데이트한다.

맞춤학습생성부(17)는 학습자가 선택한 음악과 단어/어휘를 유관된 이미지 또는 동영상과 매칭하여 음악 기반의 맞춤학습 콘텐츠를 생성하고, 이를 메모리부(16)의 맞춤학습 콘텐츠정보(16d)에 저장한다.

이때, 사용자가 지정하는 단어/어휘에 대한 음성 데이터는 단어/어휘에 따른 음성의 길이(한 박자, 두 박자 타입 등) 및 음정 유형(기본형, 변화형a, 변화형b 등)에 따라 다양한 학습자 조합이 이루어질 수 있으며, 이로 인해 동일한 반주이더라도, 가사(단어/어휘)에 따라서 서로 다른 음악 기반의 맞춤학습 콘텐츠로 생성된다.

상기 언어 학습장치(10)는 학습대상별 전용단말의 형태로 구현할 수도 있고 개인이 소유하고 있는 단말(스마트폰을 포함하는 핸드폰, 음성과 동영상을 지원하는 다양한 휴대장치 등)로 구현할 수도 있으며, 표시부(13)는 그 표시부(13)가 입력부(12)의 기능을 겸하도록 터치인터페이스를 지원하는 스크린으로 구성되는 것이 바람직하다.

상기한 언어 학습장치(10)는 메인메뉴인 사용자 학습모드와 퀵메뉴인 추천 학습모드로 구분하여 실행되는데, 사용자 학습모드에서는 학습자가 단어/어휘와 반주를 선택해서 선택된 단어/어휘와 반주를 유관 이미지 또는 동영상과 매칭하여 신규로 생성한 음악 기반의 맞춤학습 콘텐츠로 언어를 학습할 수 있고, 추천 학습모드에서는 언어 학습장치(10)에 기저장되어 있는 콘텐츠정보(학습정보 제공업체에서 제공하는 완성된 학습콘텐츠, 또는 학습자가 사용자 학습모드를 통해 기생성하여 저장한 맞춤학습 콘텐츠)를 학습 기능별로 다르게 출력하여 언어를 학습할 수 있다.

도 2는 도 1에 나타낸 메모리부의 학습정보 저장영역에 저장되는 학습정보의 구성도이다.

도시된 바와 같이, 메모리부(16)의 학습정보 저장영역에는 단어 e사전(16a)과 문장 e사전(16b), 콘텐츠기능정보(16c), 맞춤학습 콘텐츠정보(16d), 녹음정보(16e) 등이 저장된다.

상기 단어 e사전(16a)은 언어 학습장치(10)의 전용사전으로서, 이 단어 e사전(16a)을 통해 단어를 검색할 수 있으며, 검색한 단어는 히스토리에 저장된다.

상기 단어 e사전(16a)에는 다수의 단어와 단어의 멀티미디어 파일, 그리고 이러한 파일과 매칭시키기 위해 마련한 다양한 장르의 반주음악이 저장된다.

더 구체적으로 상기 단어 e사전(16a)은 음악정보(16aa), 텍스트정보(16ab), 음성정보(16ac), 이미지정보(16ad) 등을 포함한다.

음악정보(16aa)는 반주(배경음악)나 멜로디(이하에서 반주로 통일함)로 이루어진 다수의 곡(曲)에 관한 정보로서 재생시, 일반적인 음악 사용자에게 익숙한 음악 길이인, 한 곡당 대략 3분 정도의 재생 길이를 갖도록 구성된다.

텍스트정보(16ab)에는 단어와 그 뜻이 포함되고, 이미지정보(16ac)는 상기 단어의 뜻이나 의미를 나타내는 그림 파일을 포함하며 상기 텍스트정보(16ab)의 단어와 대응되게 저장된다.

음성정보(16ad)는 상기 단어와 그 뜻에 해당하는 발음 등의 음성파일을 포함하고, 상기 텍스트정보(16ab)의 단어와 대응되게 저장된다.

상기 문장 e사전(16b)은 문장을 검색하여 목록을 만들 수 있고, 숙어, 속담, 회화로 범주화된 다수의 문장과 문장의 멀티미디어 파일, 그리고 이러한 파일과 매칭시키기 위해 마련한 다양한 장르의 반주음악이 저장된다.

더 구체적으로 문장 e사전(16b)은 음악정보(16ba), 텍스트정보(16bb), 음성정보(16bc), 이미지정보(16bd) 등을 포함한다.

음악정보(16ba)는 반주로 이루어진 다수의 곡(曲)에 관한 정보로서 재생시, 일반적인 음악 사용자에게 익숙한 음악 길이인, 한 곡당 대략 3분 정도의 재생 길이를 갖도록 구성된다.

텍스트정보(16bb)에는 문장(숙어, 속담, 회화)과 그 번역문이 포함되고, 이미지정보(16bc)는 상기 문장의 뜻이나 의미를 나타내는 그림 파일을 포함하며 상기 텍스트정보(16bb)의 문장과 대응되게 저장된다.

음성정보(16bd)는 상기 문장과 그 뜻에 해당하는 발음 등의 음성파일을 포함하고, 상기 텍스트정보(16bb)의 문장과 대응되게 저장된다.

추천 학습모드에서 학습자가 선택하여 언어를 학습하는 콘텐츠기능정보(16c)는 기저장되어 있는 것으로, 학습 수준별로 저장되며, 동영상기능(16ca), 구간연습기능(16cb), 발음연습기능(16cc), 멀티미디어북기능(16cd), 단어장기능(16ce), 예문기능(16cf), 게임기능(16cg)을 포함한다.

여기서 콘텐츠는 품사 또는 의미 단위로 조합한 다수의 단어/어휘를 반주와 함께 노래로 만든 학습용 음악 콘텐츠로 구성되는 것으로, 노래의 기본적인 형식은 단어/어휘와 뜻을 번갈아 부르는 방식이며, 단어/어휘와 뜻 사이에 출력되는 시간 간격은 0.5~0.7초이다.

상기 동영상기능(16ca)은 콘텐츠에 포함된 각 단어를 의미하는 이미지와 타이포그라피(시각적 효과를 준 텍스트 이미지)를 매칭시킨 동영상 파일를 출력하는 기능이다.

구간연습기능(16cb)은 상기 콘텐츠를 소정의 구간(예를 들어 8구간)으로 나누어 사전에 녹음된 원어민의 노래(콘텐츠 테이터베이스로 구성된 음성데이터)를 출력하는 기능으로서, 이 기능을 통해 학습자가 지정된 소정의 구간을 따라 부를 수 있도록 하여 약 3분으로 구성되는 하나의 노래를 작은 단위로 나누어 배울 수 있다.

발음연습기능(16cc)은 상기 콘텐츠에 포함된 단어/어휘를 소정의 단어/어휘로 나눈 다음 원어민의 발음(메모리부에서 제공하는 음성데이터), 이미지와 함께 출력하는 기능으로서, 학습자는 원어민의 발음을 따라하되, 리듬에 맞추어서 따라 하기 때문에 단어의 강세를 포함한 원어민의 어조를 모방하기가 용이하고, 표시부(13)에 나타나는 단어/어휘의 뜻을 담은 이미지를 통하여 시각적인 즐거움을 느끼게 되며, 집중력과 흥미를 가지고 짧은 시간에 많은 단어를 학습할 수 있다.

멀티미디어북기능(16cd)은 콘텐츠에 포함된 단어/어휘와 유관된 이미지가 음성파일과 함께 표시부의 화면에 한 커트씩 출력되도록 하는 기능으로서, 언어 학습장치(10)는 스크린을 터치할 때마다 음성이 출력되거나 화면이 전환되는 방식으로 반응한다.

단어장기능(16ce)은 콘텐츠에 포함된 단어/어휘의 표제어와 그에 해당하는 정보(어원, 파생어, 동의어, 반의어, 숙어 등)를 e-book과 같은 형태로 볼 수 있도록 하는 기능이다.

예문기능(16cf)은 콘텐츠에 포함된 단어/어휘의 표제어로 만든 문장을 출력하는 기능으로, 반주와 원어민의 발음(메모리부에서 제공하는 음성데이터)을 매칭시켜서 학습할 수 있으며, 문장만 모아서 학습할 수 있다.

게임콘텐츠(16cg)는 콘텐츠에 포함된 언어의 정답과 오답이 표시부에 동시에 출력하고 학습자가 그중 하나를 선택하도록 하는 기능으로서, 평가부(18)는 오답과 정답의 수에 따라 점수를 산출한다.

맞춤학습 콘텐츠정보(16d)에는 맞춤학습생성부(17)에서 학습자가 지정한 단어/어휘나 문장과 반주를 유관된 이미지와 매칭시켜 생성한 음악 기반의 맞춤학습 콘텐츠가 멀티미디어 콘텐츠로 저장된다.

녹음정보(16e)에는 학습자가 생성한 맞춤학습 콘텐츠나 기제공된 학습 콘텐츠를 재생하고 이를 학습자가 따라하는 경우에 학습자의 발음이 음성데이터 형태로 저장된다.

도 3은 본 발명의 제1실시예에 따른 언어 학습방법의 순서도이다.

도시된 바와 같이, 언어 학습장치(10)를 실행한 후 표시부(13)에 출력되는 모드 선택창에서 입력부(12)를 통해 학습하고자 하는 모드를 선택한다(S302).

예를 들어 학습자가 단어/어휘와 반주를 지정하여 학습을 하고자 하는 경우에는 사용자 학습모드를 선택하고, 기저장되어 있는 콘텐츠(학습정보 제공업체에서 제공하는 완성된 학습콘텐츠, 또는 학습자가 사용자 학습모드를 통해 기생성하여 저장한 맞춤학습 콘텐츠)를 이용하여 학습을 하고자 하는 경우에는 추천 학습모드를 선택한다.

사용자 학습모드를 선택한 경우에는 단어/어휘나 문장을 지정하는 바, 첫째 단어/어휘나 문장의 텍스트가 표시부(13)에 출력되는 경우에 학습자가 입력부(12)를 통해 원하는 단어/어휘나 문장을 선택하여 목록을 생성하고, 목록의 명칭을 정하여 단어나 문장을 지정할 수도 있고, 둘째 단어 e사전(16a)이나 문장 e사전(16b)에서 단어나 문장을 검색하여 목록을 생성하고 목록의 명칭을 정하여 단어/어휘나 문장을 지정할 수도 있다(S304).

다음 입력부(12)는 단어/어휘나 문장이 지정된 후 노래에 사용될 반주음악을 지정한다(S306).

이때 맞춤학습생성부(17)는 학습자가 단어 옵션을 선택한 경우에 지정된 반주와 단어를 발음 및 이미지와 매칭하여 음악 기반의 맞춤학습 콘텐츠를 생성하고, 학습자가 단어+뜻 옵션을 선택한 경우에 지정된 반주와 단어에 뜻과 발음 및 이미지와 매칭하여 음악 기반의 맞춤학습 콘텐츠를 생성하여 상기 목록의 명칭으로 메모리부(16)의 맞춤학습 콘텐츠정보(16d)에 저장한다(S308).

또한 맞춤학습생성부(17)는 학습자가 문장 옵션을 선택한 경우에 지정된 반주와 문장을 발음 및 이미지와 매칭하여 음악 기반의 맞춤학습 콘텐츠를 생성하고, 학습자가 문장+번역 옵션을 선택한 경우에 지정된 반주와 문장에 번역과 발음 및 이미지와 매칭하여 음악 기반의 맞춤학습 콘텐츠를 생성하여 상기 목록의 명칭으로 메모리부(16)의 맞춤학습 콘텐츠정보(16d)에 저장한다.

다음 입력부(12)를 통해 맞춤학습 콘텐츠의 실행을 선택하면 제어부(11)의 제어에 의해 스피커(SP)와 표시부(13)를 통해 음악 기반의 맞춤학습 콘텐츠가 재생된다(S310).

이때 단어 옵션의 선택으로 생성된 맞춤학습 콘텐츠가 재생되는 경우에 표시부(13)에는 해당하는 단어의 이미지가 텍스트와 함께 예를 들어 1.2초 또는 2.4초 간격(단어의 길이가 한 박자인지 두 박자인지에 따라서)으로 출력되면서(도 6a 내지 도 6c 참조), 스피커(SP)를 통해서는 단어의 발음이 상기 지정한 반주에 맞추어 예를 들어 1.2초 또는 2.4초 간격으로 출력된다.

또한 단어+뜻 옵션의 선택으로 생성된 맞춤학습 콘텐츠가 출력되는 경우에 표시부(13)에는 해당하는 단어의 이미지가 텍스트와 함께 예를 들어 1.2초 또는 2.4초 간격(단어의 길이가 한 박자인지 두 박자인지에 따라서)으로 출력되면서, 스피커(SP)를 통해서는 단어의 발음과 뜻 음성이 상기 지정한 반주에 맞추어 예를 들어 0.6초 또는 1.2초 간격으로 출력된다.

또한 문장 옵션의 선택으로 생성된 맞춤학습 콘텐츠가 출력되는 경우에 표시부(13)에는 해당하는 문장의 이미지가 텍스트와 함께 출력되면서, 스피커(SP)를 통해서는 문장의 발음이 상기 지정한 반주에 맞추어 출력된다.

이때 특정 문장과 다음 문장 사이의 출력 간격은 특정 문장의 길이(시간)에예를 들어 2초를 더한다.

상기 문장에 타이포그라피(시각적 효과를 준 텍스트 이미지) 기능을 적용할 수 있는 바, 문장의 발음에서 음정정보와 음량정보를 추출하고 추출된 정보를 텍스트에 반영하여 음정의 높이에 따라서 텍스트의 높이를 다르게 하여 텍스트에 곡선을 생성하고, 음량의 정도에 따라 텍스트의 두께를 다르게 하여 표시부(13)에 출력할 수도 있다.

또한 문장+번역 옵션의 선택으로 생성된 맞춤학습 콘텐츠가 출력되는 경우에 표시부(13)에는 해당하는 문장의 이미지가 텍스트와 함께 출력되면서, 스피커(SP)를 통해서는 문장의 발음과 번역 음성이 상기 지정한 반주에 맞추어 출력된다.

이를 통해 학습자는 원어민의 발음이나 뜻(번역)을 반주와 함께 귀로 듣고, 텍스트와 유관 이미지를 눈으로 보면서, 입을 통해 따라하면서 3가지 감각기관을 통한 3-Tier(세 가지 차원 또는 세 가지 방식)의 입체적 학습을 체험한다.

즉, 노래를 하듯이 자연스럽게 자발적이고 자기주도적인 언어를 학습하게 된다.

이때 학습자의 발음은 마이크(MIC)를 통해 입력되어 음성처리부(14)를 거쳐 메모리부(16)의 녹음정보(16e)에 녹음, 음성데이터로 저장된다(S312).

상기 제어부(11)는 녹음 저장된 학습자의 발음을 원어민의 발음과 함께 스피커(SP)를 통해 출력하여, 발음 차이를 청각적으로 비교할 수 있다(S314).

단어나 문장의 발음이 저장된 경우에 음정추출 프로그램에서 원어민과 학습자 발음의 음정, 음량, 재생시간 정보를 추출하여 발화 곡선그래프를 생성하되, 음정은 발화 곡선그래프에서 높낮이를, 음량은 두께를, 재생시간은 길이를 나타내도록 하여 표시부(13)에 출력함으로써 원어민과 학습자의 발음 차이를 시각적으로 비교할 수 있도록 한다(S316).

평가부(18)는 원어민과 학습자의 발화 곡선그래프의 유사도를 서로 비교하여 점수를 산출한다.

이상과 같은 제1실시예에 따른 언어 학습방법에 의하면, 학습자가 지정한 단어/어휘와 반주를 이미지와 매칭시킨 음악 기반의 맞춤학습 콘텐츠를 생성하여 학습자의 지정에 의해 단어와 뜻을 노래처럼 학습(암기)할 수 있다.

도 4는 본 발명의 제2실시예에 따른 언어 학습방법의 순서도이다.

상기 S302단계에서 추천 학습모드가 선택된 경우에 표시부(13)에는 학습수준 선택창이 출력되고(도 7a 참조) 학습자가 입력부(12)를 통해 자신의 학습 수준을 선택한다(S402)

여기서 학습수준은 콘텐츠 데이터베이스의 구성을 결정하면, 학습대상(초등학생, 중학생, 고등학생, 토익/토플) 또는 학습의 정도(초급, 중급, 고급)에 따라 구분할 수 있다.

표시부(18)에는 선택된 학습수준에 해당하는 다수의 콘텐츠 목록이 출력되고, 학습자는 입력부(12)를 통해 하나의 콘텐츠를 선택한다(S404).

이 콘텐츠는 품사 또는 의미 단위로 조합한 다수의 단어/어휘를 반주와 함께 노래로 만든 멀티미디어 콘텐츠로 구성되는 것으로, 노래의 기본적인 형식은 단어/어휘와 뜻을 번갈아 부르는 방식이며, 단어/어휘와 뜻 사이에 출력되는 시간 간격은 0.5~0.7초이다.

상기 콘텐츠가 선택된 후 표시부(13)에는 그 콘텐츠에 해당하는 학습 기능 목록이 출력되고(도 7b 참조), 학습자는 입력부(12)를 통해 선택한 콘텐츠를 학습할 기능을 선택한다(S406).

여기서 상기 콘텐츠를 학습할 기능으로는 동영상, 구간연습, 발음연습, 멀티미디어북, 단어장, 예문, 게임이 포함된다.

상기한 콘텐츠의 학습 기능 중 어느 하나를 선택하면 상기 선택된 학습 기능 콘텐츠가 학습 기능별로 다르게 스피커(SP)와 표시부(13)를 통해 재생된다(S408).

상기 동영상기능(16ca)을 선택한 경우에 콘텐츠에 각 단어/어휘를 의미하는 이미지 또는 타이포그라피를 매칭시킨 동영상 파일이 출력된다(도 7c 참조).

구간연습기능(16cb)을 선택한 경우에는 상기 콘텐츠를 소정의 구간(예를 들어 8구간)으로 나누어 사전에 녹음된 원어민의 노래(콘텐츠 데이터베이스로 구성된 음성데이터)가 반주와 함께 스피커(SP)로 출력되고, 각 단어를 의미하는 이미지와 텍스트가 표시부(13)에 출력된다(도 7d 참조).

이때 학습자는 원어민의 노래를 듣고 따라 부르며 학습을 하되, 학습에 혼란이 생기지 않도록 노래를 시작하기 전과 원어민이 노래 부를 때와 사용자가 노래를 따라 부를 때에 표시부(13)에 출력되는 텍스트의 컬러를 다르게 한다.

발음연습기능(16cc)을 선택한 경우에 상기 콘텐츠를 소정의 단위로 나누어 원어민의 발음(메모리부에서 제공하는 음성데이터)을 출력하되, 단어, 단어+뜻, 무반주, 화면 꺼짐 등의 옵션을 선택할 수 있다.

상기 단어/어휘를 선택한 경우 표시부(13)에는 단어/어휘의 유관 이미지가 텍스트와 함께 소정간격(예를 들어 2.4초)으로 출력되고, 스피커(SP)에는 반주와 원어민의 발음이 소정간격(예를 들어 2.4초)으로 출력된다.

상기 단어/어휘+뜻을 선택한 경우 표시부(13)에는 단어/어휘의 유관 이미지가 텍스트와 함께 소정간격(예를 들어 2.4초)으로 출력되고(도 7e 참조), 스피커(SP)에는 원어민의 발음과 뜻 음성파일이 반주에 맞추어 소정간격(예를 들어 1.2초)으로 출력된다.

이때 학습자는 원어민의 발음과 뜻 음성파일을 반주에 맞추어 따라함으로써 단어와 뜻을 학습(암기)하게 된다.

상기 무반주를 선택한 경우 반주없이 음성파일이 스피커(SP)로 출력되고, 표시부(13)에는 이미지와 텍스트가 출력된다.

상기 화면 꺼짐을 선택한 경우 스피커(SP)를 통해 음성파일과 반주만 출력된다.

상기 멀티미디어북기능(16cd)을 선택한 경우 콘텐츠에 포함된 단어/어휘의 유관 이미지가 표시부(13)에 한 커트씩 출력되고, 거기에 맞게 스피커(SP)에는 원어민 발음이 출력된다.

이때 학습자의 선택에 의해 단어가 한 커트씩 출력되기도 하고, 같은 단어가 반복하여 출력하기도 한다.

상기 멀티미디어북기능(16cd)의 옵션으로는 원어민발음, 노래, 묵음, 정보, 전체보기가 구성된다.

원어민발음을 선택하는 경우에는 학습자가 한 커트씩 넘길 때마다 해당하는 단어의 원어민 발음이 스피커(SP)를 통해 출력된다.

상기 노래를 선택하는 경우에는 표시부의 화면을 한 커트씩 넘길 때마다 해당하는 단어/어휘의 노래가 스피커(SP)를 통해 출력된다.

상기 묵음을 선택하면 학습자가 표시부(13)의 화면을 터치해도 소리가 출력되지 않는다.

정보를 선택하면 해당하는 단어/어휘의 정보창(어원, 파생어, 동의어, 반의어, 숙어 등)이 표시부(13)에 출력된다(도 7f,g 참조).

전체보기를 선택하면 한 콘텐츠를 구성하는 단어/어휘에 해당하는 스크린샷이 표시부에 출력된다(도 7h 참조).

이 전체보기를 선택하면 화면을 스크롤하여 빠르게 원하는 단어/어휘를 찾을 수 있다.

상기 단어장기능(16ce)을 선택하면 선택한 콘텐츠에 담긴 단어/어휘의 표제어와 그에 해당하는 정보(어원, 파생어, 동의어, 반의어, 숙어 등)가 표시부(13)와 스피커(SP)를 통해 출력된다(도 7i 참조).

이때 학습자는 모르는 단어/어휘만 체크하여, 체크된 단어/어휘의 표제어와 그에 해당하는 정보만 표시부(13)와 스피커(SP)를 통해 출력할 수도 있다.

예문기능(16cf)을 선택한 경우 선택한 콘텐츠에 포함된 단어/어휘의 표제어로 만든 문장이 표시부(13)와 스피커(SP)를 통해 출력된다.

이때 학습자는 학습하고자 하는 문장만 체크하여 체크된 문장과 그 번역만 표시부(13)와 스피커(SP)를 통해 출력할 수도 있다.

상기 예문기능(16cf)을 통해 반주와 원어민의 발음(메모리부에서 제공하는 음성데이터)을 매칭시켜서 학습할 수 있으며, 문장만 모아서 학습할 수도 있다.

게임기능(16cg)을 선택한 경우에 콘텐츠에 포함된 언어의 정답과 오답이 표시부(13)에 동시에 출력된다(도 7j 참조).

이때 학습자는 박자에 맞추어 정답이라고 생각하는 것을 클릭하게 되는 데, 게임이 끝난 후 평가부(18)는 오답과 정답의 수에 따라 점수를 산출한다.

다음 학습자는 선택된 학습 기능에 따라 원어민의 발음을 따라하고 이때 학습자의 발음이나 뜻(번역)은 마이크(MIC)를 통해 입력되어 음성처리부(14)를 거쳐 메모리부(16)의 녹음정보(16e)에 녹음, 음성데이터로 저장된다.(S410).

발음연습기능(16cc)에서 단어/어휘를 옵션으로 선택하면 스피커(SP)를 통해 반주와 원어민의 발음이 소정간격(예를 들어 2.4초)으로 출력되는 데, 이때 학습자가 원어민의 발음과 소정 시간차(예를 들어 1.2초)를 두고 발음을 따라하고 이는 마이크(MIC)를 통해 입력되어 저장부(16)의 녹음정보(16e)에 저장된다.

상기 제어부(11)는 녹음 저장된 학습자의 발음을 원어민의 발음과 함께 스피커(SP)를 통해 출력하여, 발음 차이를 청각적으로 비교할 수 있도록 한다(S412).

음정추출 프로그램에서 원어민과 학습자 발음의 음정, 음량, 재생시간 정보를 추출하여 발화 곡선그래프를 생성하되, 음정은 발화 곡선그래프에서 높낮이를, 음량은 두께를, 재생시간은 길이를 나타내도록 하여 표시부(13)에 출력함으로써 원어민과 학습자의 발음 차이를 시각적으로 비교할 수 있도록 한다(S414).

그리고 평가부(18)는 원어민과 학습자의 발화 곡선그래프의 유사도를 서로 비교하여 점수를 산출한다(S416).

이상과 같은 제2실시예에 따른 언어 학습방법에 의하면, 언어 학습장치(10)에 저장된 품사 또는 의미 단위로 조합한 다수의 단어/어휘를 반주와 함께 노래로 만든 학습용 음악 콘텐츠로 구성되는 콘텐츠를 다양한 학습 기능으로 활용하여 단어/어휘와 문장의 발음과 의미(뜻이나 번역)을 노래처럼 학습(암기)할 수 있다.

이상과 같은 본 발명에 의하면 학습자가 음악과 단어/어휘를 선택하는 경우에 그 음악과 단어/어휘, 유관 이미지를 매칭시킨 맞춤학습콘텐츠를 생성하게 되는데, 이 맞춤학습콘텐츠는 학습자가 지정한 음악이 반주가 되고, 학습자가 지정한 단어/어휘가 가사가 되며, 유관 이미지는 동영상으로 변환되어 하나의 뮤직비디오와 같은 멀티미디어 콘텐츠를 생성하는 것으로, 학습자는 이를 이용하여 발음을 연습하고, 음악과 게임을 통해 단어/어휘를 암기(학습)하며, 스스로 작사한 하나의 노래를 즐기는 것과 동일한 방법으로 언어 학습에 대한 지속적인 흥미를 유발시키고, 지루함을 주지 않게 하여 언어 습득의 기본이 되는 단어/어휘 능력을 향상시킬 수 있는 것이다.

10: 언어 학습장치 11: 제어부
12: 입력부 13: 표시부
14: 음성처리부 15: 통신부
16: 메모리부 17: 맞춤학습생성부
18: 평가부 MIC: 마이크
SP: 스피커

Claims (15)

1. 언어 학습장치의 입력부에 의해 기저장된 단어/어휘나 문장과 반주음악이 지정되는 단계;
   맞춤학습생성부에서 입력부에 의해 지정된 단어/어휘나 문장 및 반주를 텍스트와 유관 이미지나 동영상 및 원어민의 발음과 함께 매칭시켜 음악 기반의 맞춤학습 콘텐츠를 생성하고 저장하는 단계; 및
   제어부에서 상기 맞춤학습 콘텐츠를 재생하되, 표시부를 통해 텍스트와 유관 이미지나 동영상을 출력하고, 스피커를 통해 원어민의 발음과 반주를 출력하는 단계를 포함하는 음악기반의 언어 학습방법.
2. 제 1 항에 있어서,
   상기 표시부에 문장의 텍스트가 출력되는 경우 제어부에서 문장에 타이포그라피(typography)를 적용하여 음량의 정도에 따라 텍스트를 굵게 또는 얇게 하고, 음정의 높낮이에 따라 텍스트의 높낮이를 크게 또는 낮게 하여 문장에 생동감을 주도록 하는 것을 특징으로 하는 음악기반의 언어 학습방법.
3. 삭제
4. 삭제
5. 제 1 항에 있어서,
   학습자가 발음을 따라하는 경우에 상기 학습자의 발음을 메모리부에 저장하는 단계와,
   상기 저장된 학습자의 발음을 스피커를 통해 원어민의 발음과 함께 출력하는 단계를 더 수행하는 것을 특징으로 하는 음악기반의 언어 학습방법.
6. 제 5 항에 있어서,
   상기 제어부에서 원어민과 학습자의 발음에 따른 음정과 음량 및 재생시간 정보를 추출하여 곡선그래프로 표시부에 출력하는 것을 특징으로 하는 음악기반의 언어 학습방법.
7. 제 6 항에 있어서,
   상기 제어부에서 음정은 발화 곡선그래프에서 높낮이를, 음량은 두께를, 재생시간은 길이를 나타내도록 하여 원어민과 학습자의 곡선그래프를 표시부에 출력하는 것을 특징으로 하는 음악기반의 언어 학습방법.
8. 제 7 항에 있어서,
   평가부에서 상기 원어민과 학습자의 곡선그래프를 서로 비교하여 그 유사도에 따라 점수를 산출하는 것을 특징으로 하는 음악기반의 언어 학습방법.
9. 제 1 항에 있어서,
   상기 단어와 문장의 발음이 스피커를 통해 출력된 후, 0.5~0.7초 이후에 그 뜻이 스피커를 통해 출력되는 것을 특징으로 하는 음악기반의 언어 학습방법.
10. 입력부, 표시부, 스피커, 메모리부 및 제어부로 구성된 언어 학습장치에 있어서;
    상기 메모리부에는 다수의 단어/어휘와 뜻에 대한 텍스트 및 발음, 반주와 유관 이미지나 동영상을 저장하고,
    상기 입력부에 의해 선택된 메모리부의 단어/어휘와 반주를 이미지나 동영상과 매칭시켜 음악 기반의 단어/어휘 맞춤학습 콘텐츠를 생성하고 메모리부에 저장하는 맞춤학습생성부가 더 구비되되,
    상기 제어부는 메모리부에 저장된 단어/어휘 맞춤학습 콘텐츠를 재생하여 스피커를 통해 단어/어휘 맞춤학습 콘텐츠의 발음과 반주를 소리로 출력하고, 표시부를 통해 텍스트와 이미지나 동영상을 출력하는 것을 특징으로 하는 음악기반의 언어 학습방법을 활용한 학습장치.
11. 제 10 항에 있어서,
    상기 메모리부에는 다수의 문장과 번역에 대한 텍스트 및 발음, 반주와 유관이미지나 동영상을 더 저장하며, 상기 맞춤학습생성부는 입력부에 의해 선택된 메모리부의 문장과 반주를 이미지나 동영상과 매칭시켜 음악 기반의 문장 맞춤학습 콘텐츠를 생성하고 메모리부에 저장하되,
    상기 제어부는 메모리부에 저장된 문장 맞춤학습 콘텐츠를 재생하여 스피커를 통해 문장 맞춤학습 콘텐츠의 발음과 반주를 소리로 출력하고, 표시부를 통해 텍스트와 이미지나 동영상을 출력하는 것을 특징으로 하는 음악기반의 언어 학습방법을 활용한 학습장치.
12. 제 11 항에 있어서,
    상기 메모리부에는 품사 또는 의미 단위로 조합한 다수의 단어/어휘를 반주와 함께 노래로 만든 학습용 음악 콘텐츠로 구성되는 콘텐츠가 학습수준별로 더 저장되고, 상기 제어부는 콘텐츠의 내용을 학습 기능별로 다르게 표시부와 스피커에 출력하는 것을 특징으로 하는 음악기반의 언어 학습방법을 활용한 학습장치.
13. 제 10 항 내지 제 12 항 중 어느 한 항에 있어서,
    상기 메모리부에는 원어민과 학습자 발음의 음정과 음량 및 재생시간 정보를 추출하여 곡선그래프로 표시부에 출력하는 음정추출 프로그램이 더 저장되고,
    상기 원어민과 학습자의 곡선그래프를 서로 비교하여 그 유사도에 따라 점수를 평가하는 평가부가 더 구비되는 것을 특징으로 하는 음악기반의 언어 학습방법을 활용한 학습장치.
14. 제 13 항에 있어서,
    상기 제어부는 음정은 발화 곡선그래프에서 높낮이를, 음량은 두께를, 재생시간은 길이를 나타내도록 하여 표시부에 출력하는 것을 특징으로 하는 음악기반의 언어 학습방법을 활용한 학습장치.
15. 제 10 항에 있어서,
    상기 표시부는 입력부의 기능을 겸하도록 터치인터페이스를 지원하는 스크린으로 구성되고, 언어 학습장치는 학습대상별 전용 단말인 것을 특징으로 하는 음악기반의 언어 학습방법을 활용한 학습장치.

Images