KR20190046312A - 영어 능력 개선 장치 및 방법 - Google Patents

Abstract

본 발명의 일 양상에 따른 영어 능력 개선 방법은 연주될 곡을 결정하는 단계, 결정된 곡에 대응하여 출력될 영어 문서를 결정하는 단계, 연주될 곡의 음표에 영어 문서의 영문 1음절을 할당하는 단계, 음표에 할당된 영문 1음절과 음표를 포함하는 악보를 표시하는 단계 및 표시된 악보의 연주에 따라 대응하는 오디오 신호를 출력하는 단계를 포함한다.

Description

영어 능력 개선 장치 및 방법{APPARATUS AND METHOD TO IMPROVE ENGLISH SKILLS}

본 발명은 영어 능력 개선 장치 및 방법에 관한 것으로서, 구체적으로는 멜로디 음표 각각에 영어 음절 각각을 할당하여 표시하고 노래를 반복하는 훈련을 통해 잘못된 영어 발음을 교정하며 외국인과의 대화를 쉽게 이해할 수 있도록 하는, 영어 능력 개선 장치 및 방법에 관한 것이다.

정보통신의 발달, 교통수단의 발달, 국가간 기술, 문화, 경제 교류가 활발해 짐에 따라 외국어, 특히 국제 공용어인 영어의 중요성이 갈수록 커지고 있다. 그에 따라 한국인은 심지어 유아 시기부터 많은 시간과 비용을 영어학습에 투자하고 있다.

하지만, 투자한 만큼의 영어 실력이 늘지 않고 있다는 것도 이미 잘 알려진 사실이다. 그 이유는 여러 가지가 있을 수 있지만, 대표적으로 한국인의 영어 읽기 속도가 매우 느리다는 점이다. 읽기 속도가 느리면 듣는 속도 또한 느리고 읽기 속도와 듣기 속도는 서로 비례한다.

읽는 속도를 나타내는 단위인 WPM(Word Per Minute, 분당 읽는 단어수)를 기준으로 미국인과 한국인을 비교하면 미국 일반 성인들은 적어도 100 WPM 이상의 속도를 가지는 반면 한국 대학생들은 평균 100 WPM 이하이다. 일상 회화가 구어체로 쓰여진 것을 읽는 것으로 볼 수 있기에 현재 한국인의 WPM 읽기 실력으로 미국인들의 대화를 들을 수 없다는 것은 당연한 현상이다. 또한, 이 어려움에 더해 영어에서 발생하는 연음 현상으로 인해 더욱더 일상 회화를 어렵게 하고 있다.

한국인의 영어 읽기 속도가 느린 이유는 여러 가지가 있지만, 대표적으로 한국인의 잘못된 영어 발음 때문이다. 예를 들어, 영어 단어 Take는 1음절 단어이나 대다수의 한국인은 이것을 "테이크" 3음절로 발음한다. Look도 1음절이나 많은 한국인들은 "루크" 2음절로 발음하고, "Like", "Love" 등도 1음절이나 "라이크" 3음절, "러브" 2음절로 각각 발음하고 있다.

미국인들의 일상대화에서 사용하는 단어는 대부분 1음절 단어이나 한국인들은 그 단어를 2음절이나 3음절로 발음한다. 음절이 많을수록 발음하는 데 걸리는 시간이 늘어날 수밖에 없는 실정이다. 즉, 말하는 속도나 읽는 속도가 느려질 수밖에 없다. 이것은 또한 영어의 연음법칙도 적용되지 않게 막는다. 연음법칙의 한가지 예는 앞 단어의 자음이 모음으로 시작하는 뒷 단어에 연결되어 발음되는 것이다. 예를 들어, 'Take'의 마지막 음이 [k] 자음임에도 불구하고 한국인들은 이 [k]에 한국모음 [으]를 붙여 [k]가 다음 단어와 연결되는 것을 막고 있다.

이와 같은, 한국인의 근본 문제에 의해 외국인의 읽는 속도와 말하기 속도를 따라잡을 수 없어 영어를 통한 대화나 정보 획득을 어렵게 한다.

본 발명과 관련된 일부 선행문헌([특허문헌] 참조)들이 개시되어 있으나 선행문헌들 역시 앞서 언급한 한국인의 발음 문제점과 연음 문제점을 해결하지 못하고 있다.

이상으로 살펴본 바와 같이, 한국인의 발음을 교정하여 영어 능력을 향상시킬 수 있는 영어 능력 개선 장치 및 방법이 필요하다.

10-1112422(B1), 2012년02월27일 10-1581700(B1), 2015년12월31일 20-0371390(Y1), 2004년12월31일

본 발명은, 상술한 문제점을 해결하기 위해서 안출한 것으로서, 음악을 활용하여 영어 읽기 능력을 개선할 수 있도록 하는 영어 능력 개선 장치 및 방법을 제공하는 데 그 목적이 있다.

또한, 본 발명은 멜로디의 각 음표에 영어 음절을 할당하고 음표에 할당된 영어 음절을 대상으로 한 노래 부르기를 통해 자연스럽게 영어 읽기 속도를 개선할 수 있도록 하는 영어 능력 개선 장치 및 방법을 제공하는 데 그 목적이 있다.

또한, 본 발명은 노래 부르기를 통한 연음 훈련으로 영어의 듣기 능력 및 말하기 능력을 개선할 수 있도록 하는 영어 능력 개선 장치 및 방법을 제공하는 데 그 목적이 있다.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

본 발명의 일 양상에 따른 영어 능력 개선 방법은 (a) 영어 능력 개선 장치가 연주될 곡을 결정하는 단계; (b) 상기 장치가 결정된 곡에 대응하여 출력될 영어 문서를 결정하는 단계; (c) 상기 장치가 연주될 곡의 음표에 상기 영어 문서의 영문 1음절을 할당하는 단계; (d) 상기 장치가 상기 음표에 할당된 영문 1음절과 상기 음표를 포함하는 악보를 표시하는 단계; 및 (e) 상기 장치가 표시된 악보의 연주에 따라 대응하는 오디오 신호를 출력하는 단계;를 포함한다.

상기한 영어 능력 개선 방법에 있어서, 복수 회 반복 수행되는 상기 단계 (c)는, 연주될 곡의 각각의 일련의 음표에 영어 문서의 랜덤 위치에서 시작하는 일련의 영문 1음절을 각각 할당하여 복수의 수행 중 제1 수행에서의 상기 곡의 특정 음표에 할당하는 영문 1음절과 복수의 수행 중 제2 수행에서의 상기 곡의 상기 특정 음표에서 할당하는 영문 1음절을 서로 상이하도록 구성한다.

상기한 영어 능력 개선 방법에 있어서, 복수 회 반복 수행되는 상기 단계 (e)는, 복수의 수행 중 제1 수행에서의 악보 연주 속도와 복수의 수행 중 제2 수행에서의 악보 연주 속도를 서로 상이하도록 구성한다.

상기한 영어 능력 개선 방법에 있어서, 상기 단계 (d)는 연주될 곡의 각각의 음표에 할당된 각각의 영문 1음절을 악보에 표시하거나 연주될 곡의 음표들 중 지정된 음표에 할당된 영문 1음절을 악보에 표시한다.

상기한 영어 능력 개선 방법에 있어서, 상기 단계 (c) 이후에, 상기 장치가 곡의 음표 각각에 할당된 영문 1음절들을 TTS 음성으로 출력하기 위한 태그 데이터들을 생성하는 단계; 및 상기 장치가 상기 태그 데이터들에 따라 상기 음표에 따른 높이와 길이를 가지고 대응하는 영문 1음절들을 영문 음성으로 표현하는 일련의 음성신호를 TTS 엔진을 이용하여 생성하는 단계;를 더 포함한다.

상기한 영어 능력 개선 방법에 있어서, 상기 단계 (e)는 TTS 엔진을 이용하여 생성되고 영문 1음절들 사이의 연음 특성을 반영한 상기 음성신호와 표시된 악보의 연주신호를 합성한 오디오 신호를 출력한다.

상기한 영어 능력 개선 방법에 있어서, 상기 장치가 상기 표시된 악보의 연주를 완료함에 따라 상기 악보 연주 속도에 따라 분당 단어 수를 산출하고 산출된 분당 단어 수를 출력하는 단계;를 더 포함한다.

본 발명의 일 양상에 따른 영어 능력 개선 장치는 이미지를 출력하는 디스플레이부; 오디오를 출력하는 오디오신호 출력부; 복수의 곡, 복수의 영어 문서 및 프로그램을 저장하는 저장부; 및 상기 프로그램을 통해 사용자의 영어 능력을 개선하는 제어부;를 포함하며, 상기 프로그램을 로딩하여 수행하는 상기 제어부는, 상기 프로그램을 통해, 상기 복수의 곡 및 상기 복수의 영어 문서를 이용하여 연주될 곡과 출력될 영어 문서를 결정하고, 연주될 곡의 음표에 영어 문서의 영문 1음절을 할당하고 음표에 할당된 영문 1음절과 대응 음표를 포함하는 악보 이미지를 구성하여 상기 디스플레이부로 출력하며 상기 디스플레이부에 표시된 악보의 연주에 따라 대응하는 오디오 신호를 오디오신호 출력부로 출력한다.

상기한 영어 능력 개선 장치에 있어서, 동일한 곡과 대응 영문 문서에 대해 반복 연주하는 상기 제어부는, 연주될 곡의 각각의 일련의 음표에 영어 문서의 랜덤 위치에서 시작하는 일련의 영문 1음절을 각각 할당하여 복수의 반복 연주 중 제1 연주에서의 상기 곡의 특정 음표에 할당하는 영문 1음절과 복수의 반복 연주 중 제2 연주에서의 상기 곡의 상기 특정 음표에서 할당하는 영문 1음절을 서로 상이하도록 구성한다.

상기한 영어 능력 개선 장치에 있어서, 동일한 곡과 대응 영문 문서에 대해 반복 연주하는 상기 제어부는, 복수의 반복 연주 중 제1 연주에서의 악보 연주 속도와 복수의 반복 연주 중 제2 연주에서의 악보 연주 속도를 서로 상이하도록 구성한다.

상기한 영어 능력 개선 장치에 있어서, 상기 제어부는 곡의 음표 각각에 할당된 영문 1음절들을 TTS 음성으로 출력하기 위한 태그 데이터들을 생성하고 상기 태그 데이터들에 따라 상기 음표에 따른 높이와 길이를 가지고 대응하는 영문 1음절들을 영문 음성으로 표현하는 일련의 음성신호를 TTS 엔진을 이용하여 생성한다.

상기한 영어 능력 개선 장치에 있어서, 상기 제어부는 TTS 엔진을 이용하여 생성되고 영문 1음절들 사이의 연음 특성을 반영한 상기 음성신호와 표시된 악보의 연주신호를 합성한 오디오 신호를 상기 오디오신호 출력부로 출력한다.

상기와 같은 본 발명에 따른 영어 능력 개선 장치 및 방법은 음악을 활용하여 영어 읽기 능력을 개선할 수 있도록 하는 효과가 있다.

또한, 상기와 같은 본 발명에 따른 영어 능력 개선 장치 및 방법은 멜로디의 각 음표에 영어 음절을 할당하고 음표에 할당된 영어 음절을 대상으로 한 노래 부르기를 통해 자연스럽게 영어 읽기 속도를 개선할 수 있도록 하는 효과가 있다.

또한, 상기와 같은 본 발명에 따른 영어 능력 개선 장치 및 방법은 노래 부르기를 통한 연음 훈련으로 영어의 듣기 능력 및 말하기 능력을 개선할 수 있도록 하는 효과가 있다.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

도 1은 본 발명에 따른 영어 능력 개선을 위한 장치의 예시적인 블록도를 도시한 도면이다.
도 2는 본 발명에 따라 영어 능력 개선을 위한 예시적인 제어 흐름을 도시한 도면이다.
도 3은 연주될 곡과 출력될 영어 문서의 예를 도시하고 있다.
도 4는 연주될 곡의 일련의 음표에 일련의 영문 1음절이 할당되어 표시되는 악보 이미지의 예를 도시한 도면이다.
도 5는 연주될 곡의 일련의 음표에 일련의 영문 1음절이 할당되어 표시되는 악보 이미지의 다른 예를 도시한 도면이다.
도 6은 학습자 모드가 고급자 모드인 경우에 디스플레이부로 출력되는 학습 이미지의 예를 도시한 도면이다.
도 7은 학습자 모드가 고급자 모드인 경우에 디스플레이부로 출력되는 악보 이미지의 예를 도시한 도면이다.

상술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술 되어 있는 상세한 설명을 통하여 더욱 명확해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하기로 한다.

도 1은 본 발명에 따른 영어 능력 개선을 위한 장치의 예시적인 블록도를 도시한 도면이다.

도 1에 따르면 영어 능력 개선 장치(100)는 입력부(101), 통신부(103), 디스플레이부(105), 오디오신호 출력부(107), 저장부(109) 및 제어부(111)를 포함한다. 도 1의 영어 능력 개선 장치(100)는 예를 들어 스마트폰, 태블릿 PC, PDA, 노트북, 개인용 PC 등일 수 있다. 설계 예에 따라 도 1의 구성요소가 생략될 수 있고 도 1에 개시되지 않은 다른 구성요소가 영어 능력 개선 장치(100)에 더 포함될 수도 있다.

도 1을 통해 영어 능력 개선 장치(100)를 살펴보면, 입력부(101)는 사용자 입력을 수신한다. 입력부(101)는 키보드, 마우스, 터치 패널, 버튼 등을 구비하여 각종 사용자 입력을 수신하고 입력 신호를 제어부(111)로 전송할 수 있다. 입력부(101)를 통해 사용자는 영어 능력 개선을 위한 프로그램을 구동할 수 있고 이용 가능한 여러 곡 중에서 특정 곡을 선택하고 이용 가능한 여러 영어 문서 중에서 특정 영어 문서를 선택할 수 있다.

통신부(103)는 데이터 통신을 수행한다. 통신부(103)는 이동통신망, 이더넷, 와이파이, 블루투스 등과 같이 다른 기기와 유무선 통신을 위한 통신 칩셋을 구비하여 유선 또는 무선의 통신 패킷을 송수신한다. 예를 들어 통신부(103)는 원격의 서버로부터 영어 능력 개선을 위한 프로그램을 다운로드 받고 이를 제어부(111)에 전송하고 이후 저장부(109)에 저장할 수 있다.

디스플레이부(105)는 제어부(111)로부터 이미지를 수신하고 이를 출력한다. 디스플레이부(105)는 LCD 디스플레이 모듈, OLED 디스플레이 모듈을 포함하거나 구비하고 제어부(111)로부터 출력되는 일련의 이미지 신호를 수신하여 사용자가 시각적으로 인식 가능하도록 출력한다.

예를 들어, 디스플레이부(105)는 제어부(111)로부터 일련의 픽셀 데이터로 구성되어 표현되는 악보 이미지를 나타내는 이미지 신호를 수신하고 이를 출력한다.

오디오신호 출력부(107)는 오디오를 출력한다. 오디오신호 출력부(107)는 오디오 코덱과 스피커나 이어폰 잭 등을 구비하여 제어부(111)로부터의 일련의 오디오 신호를 진동 신호로 변환하여 스피커 및/또는 이어폰 등을 통해 출력한다.

오디오신호 출력부(107)는 제어부(111)로부터 디스플레이된 악보의 연주에 따라 생성되는 오디오 신호를 수신하고 이를 진동 신호로 변환하여 출력할 수 있다.

저장부(109)는 휘발성 메모리, 비휘발성 메모리 및/또는 하드디스크 등의 대용량 저장 매체를 포함하여 각종 데이터와 프로그램을 저장한다. 저장부(109)는 오디오신호 출력부(107)로 출력될 수 있는 다수의 곡 정보와 영어 학습에 이용되는 다수의 영어 문서 정보를 저장하고 곡 정보와 대응하는 영어 문서 정보를 이용하여 영어 능력을 향상시킬 수 있는 프로그램(영어능력개선 프로그램)을 적어도 저장한다.

각각의 곡 정보는 곡명, 작곡가 명칭, 작사가 명칭, 악보 데이터 및 멜로디 데이터를 포함한다. 악보 데이터는 일련의 음표 데이터를 포함하고 음표 데이터는 음의 높이와 음의 길이 데이터를 포함한다. 멜로디 데이터는 악보 데이터에 대응하여 연주시 출력될 수 있는 연주신호를 생성할 수 있도록 하는 데이터이다. 멜로디 데이터는 예를 들어 압축 오디오 데이터이거나 미디(MIDI) 데이터일 수 있다. 악보 데이터 및 멜로디 데이터는 미디 데이터로 표현될 수 있다.

각각의 영어 문서 정보는 제목, 출처와 텍스트 데이터를 포함하고 대응 음절 분리 데이터를 더 포함할 수 있다. 텍스트 데이터는 일련의 영어 문장을 표현하는 데이터로서 예를 들어 아스키 코드나 유니코드 등으로 구성된 텍스트 파일일 수 있다. 음절 분리 데이터는 텍스트 데이터를 1음절 별로 분리시켜 놓은 데이터이다. 예를 들어, 음절 분리 데이터는 텍스트 데이터의 각 단어들을 영어 발음에 따라 1음절 단위로 분리하여 저장되어 있는 데이터이다. 음절 분리 데이터는 발음 사전 등을 통해 자동으로 구성될 수도 있으나 관리자 등에 의해서 감수되고 수정될 수 있다.

텍스트 데이터는 디스플레이부(105)로 출력될 수 있고 음절 분리 데이터도 디스플레이부(105)로 출력될 수 있다. 특히, 음절 분리 데이터의 각각의 영문 1음절들은 악보 데이터의 음표와 1대 1로 맵핑되어 악보에 표시될 수 있다. 사용자는 음표에 맵핑되어 있는 영문 1음절을 보면서 해당 영문 문서를 노래를 부르듯이 발음 연습을 할 수 있다.

제어부(111)는 프로그램을 수행할 수 있는 실행 유닛(Execution Unit)을 구비하여 프로그램을 이용하여 영어 능력 개선 장치(100)를 제어한다. 제어부(111)는 예를 들어 CPU, MPU, 중앙 처리 장치 등을 나타내거나 지칭될 수 있다.

제어부(111)는 저장부(109)에 저장되어 있는 프로그램을 로딩하여 사용자 영어 능력을 개선할 수 있다.

영어 능력 개선과 관련된 제어부(111)의 몇몇 제어를 살펴보면, 저장부(109)에 저장되어 있는 프로그램(영어능력개선 프로그램)을 수행하는 제어부(111)는 저장부(109)에 저장되어 있는 복수의 곡 및 복수의 영어 문서를 이용하여 연주될 곡과 출력될 영어 문서를 결정한다.

예를 들어, 제어부(111)는 복수의 곡 중 특정 하나의 곡을 연주될 곡으로 자동 결정할 수 있다. 또는 제어부(111)는 디스플레이부(105)를 통해 연주 가능한 곡 정보 리스트를 구성하여 출력하고 입력부(101)를 통해 특정 하나의 곡 정보의 선택 입력을 수신하여 연주될 곡을 결정할 수 있다.

예를 들어, 제어부(111)는 복수의 영어 문서 중 특정 하나의 영어 문서를 연주될 곡에 맵핑되어 출력될 영어 문서로 자동 결정할 수 있다. 또는 제어부(111)는 디스플레이부(105)를 통해 출력 가능한 영어 문서 정보 리스트를 구성하여 출력(제목, 출처 등)하고 입력부(101)를 통해 특정 하나의 영어 문서의 선택 입력을 수신하여 영어 문서를 결정할 수도 있다.

제어부(111)는 연주될 곡의 음표에 선택된 영어 문서의 영문 1음절을 할당한다.

구체적으로 살펴보면, 제어부(111)는 선택된 영어 문서의 텍스트 데이터로부터 대응하는 음절 분리 데이터를 결정한다. 음절 분리 데이터는 미리 구성되어 저장되거나 영어 문서의 선택에 따라 실시간으로 구성될 수도 있다. 실시간으로 구성되는 경우 발음 사전 등을 이용하여 텍스트 데이터가 1음절씩 분리되어 음절 분리 데이터로 구성된다.

제어부(111)는 영어 문서의 음절 분리 데이터의 일련의 영문 1음절 각각을 연주될 곡의 일련의 음표 각각에 순차적으로 할당한다. 제어부(111)는 동일한 곡과 동일한 대응 영문 문서에 대해 반복하여 연주할 수 있다. 이 경우, 제어부(111)는 각 반복 연주에서 음절 분리 데이터에서 영문 1음절을 할당 시작할 시작 위치를 랜덤하게 결정하고 랜덤 시작 위치로부터 일련의 영문 1음절들을 연주될 곡의 시작 음표에서 시작하여 일련의 음표들에 할당한다. 또는 입력부(101)를 통한 사용자 입력에 따라 영문 1음절을 할당 시작할 시작 위치를 시프트할 수 있다.

이와 같은 구성을 통해, 제어부(111)는 여러 반복 연주 중 한 연주에서의 곡의 특정 음표에 할당하는 영문 1음절과 여러 반복 연주 중 다른 연주에서의 동일한 곡의 특정 음표에 할당하는 영문 1음절이 서로 상이하도록 구성할 수 있다. 그에 따라, 제어부(111)는 동일한 곡에 대해서도 다른 순서의 영문 1음절들을 맵핑하여 효율적으로 영어 말하기 능력과 말하기 속도를 향상시킬 수 있다.

음표에 영문 1음절을 할당한 후에, 제어부(111)는 연주될 곡의 악보 데이터를 이용하여 연주될 곡의 일련의 음표들과 대응하는 영문 1음절을 포함하는 악보 이미지를 구성하고 디스플레이부(105)로 출력한다. 예를 들어 제어부(111)는 연주될 곡의 모든 음표들에 각각 대응하는 영문 1음절을 표시하는 악보 이미지를 구성하여 출력할 수 있다. 또는 제어부(111)는 여러 음표들 중 지정된 음표(예를 들어 일련의 8소절 중 마지막 소절의 마지막 음표)에 대응하는 영문 1음절만을 표시하는 악보 이미지를 구성하여 출력할 수 있다.

제어부(111)는 연주될 곡의 멜로디 데이터를 이용하여 지정된 연주 속도에 따라 표시된 악보를 연주하고 연주에 대응하는 오디오 신호를 오디오신호 출력부(107)로 출력한다.

제어부(111)는 동일한 곡과 대응 영문 문서에 대해 반복하여 연주할 수 있다. 이 경우, 제어부(111)는 여러 번의 반복 연주 중 한 연주에서의 악보 연주 속도와 여러 번의 반복 연주 중 다른 연주에서의 악보 연주 속도를 서로 상이하도록 구성할 수 있다. 예를 들어, 제어부(111)는 반복 횟수에 따라 자동으로 악보 연주 속도를 빠르게 하거나 입력부(101)를 통한 사용자 입력에 따라 악보 연주 속도를 가감할 수 있다.

한편, 제어부(111)는 입력부(101)로부터의 사용자 입력을 통한 설정에 따라 연주될 곡에 맵핑된 영문 음절들을 음성 신호로 출력하여 영어 학습자(사용자)를 가이드할 수 있다.

예를 들어, 제어부(111)는 연주될 곡의 음표 각각에 할당된 영문 1음절들을 TTS(Text to Speech) 음성으로 출력하기 위한 태그 데이터들을 생성한다. 태그 데이터는 음표의 음높이(pitch)와 길이(speed)를 표현하도록 구성되고 영문 1음절의 발음(음성)을 포함할 수 있다.

제어부(111)는 저장부(109)에 더 저장되어 있는 TTS 엔진( 프로그램)을 로딩하여 태그 데이터들을 이용하여 대응하는 음표에 따른 음높이와 길이를 가지는 영문 1음절들의 영문 음성을 표현하는 일련의 음성신호를 생성한다.

제어부(111)는 영문 1음절들 사이의 연음 특성을 반영하여 음성신호를 생성하고 악보의 연주신호와 합성하여 오디오 신호를 오디오신호 출력부(107)로 출력한다.

영어 능력 개선 장치(100)에서 이루어지는 주요한 제어 흐름은 도 2와 예시적인 도면을 통해 좀 더 상세히 살펴보도록 한다.

도 2는 본 발명에 따라 영어 능력 개선을 위한 예시적인 제어 흐름을 도시한 도면이다.

도 2의 제어 흐름은 영어 능력 개선 장치(100)에 의해서 수행되고 바람직하게는 제어부(111)가 영어능력개선 프로그램과 나아가 TTS 엔진 프로그램을 수행하여 영어 능력 개선 장치(100) 내의 다른 블록들을 제어함으로써 이루어진다. 이미 도 1을 통해서 살펴본 내용은 간단히 살펴보도록 한다.

도 2의 제어 흐름은 사용자 입력에 따라 영어능력개선 프로그램이 제어부(111)에 로딩되어 해당 프로그램을 제어부(111)가 구동함으로써 시작(S100)한다.

연주 곡과 영어 문서 결정에 앞서, 제어부(111)는 각종 셋팅을 설정하거나 기존 셋팅을 로딩할 수 있다. 예를 들어, 제어부(111)는 기준 악보 연주 속도, 악보 속도 변경 모드, TTS 음성신호 출력 모드, 학습 모드 등을 설정하고 이를 저장부(109) 등에 저장할 수 있다.

기준 악보 연주 속도는 곡이 결정됨에 따라 최초(첫번째) 연주시에 기준 연주 속도를 나타내며 상대적인 값(예를 들어, 보통, 조금 빠르게, 빠르게, 조금 느리게, 느리게, 등)으로 표현 가능하다. 악보 속도 변경 모드는 후속 연주시에 악보 연주 속도의 변경을 설정한다. 예를 들어 악보 속도 변경 모드는 고정(변경 없음), 약간씩 빠르게, 좀 더 빠르게 등과 같이 다음 후속 연주시에 동일 연주 곡과 동일 영문 문서에 대한 연주 속도를 변경 설정할 수 있다.

TTS 음성신호 출력 모드는 TTS 엔진을 통해 음성신호를 출력할 것인지를 설정한다. 이 모드가 설정되면 영문 문서(의 영문 1음절들)가 음성신호로 변환되어 연주신호와 함께 합성되어 출력될 수 있다. 학습 모드는 초급자 모드나 고급자 모드 등으로 설정될 수 있다. 초급자 모드에서는 학습자가 용이하게 노래를 불러 영문 말하기 훈련이 가능하게 하는 반면, 고급자 모드에서는 학습자가 좀 더 난이도가 있는 상태에서 영문 말하기 훈련이 가능하다.

제어부(111)는 연주될 곡을 결정(S101)한다. 예를 들어, 제어부(111)는 이전에 설정되어 연주되었던 곡을 연주될 곡으로 결정하거나 저장부(109)에 저장되어 있는 복수의 곡을 나타내는 곡 정보 리스트를 구성하여 디스플레이부(105)로 출력하고 입력부(101)를 통한 곡 정보의 선택 입력을 수신하여 연주될 곡을 결정할 수도 있다. 곡 정보 리스트는 곡명, 작곡가, 작사가 등의 정보를 포함할 수 있다.

또한, 제어부(111)는 출력될 영어 문서를 결정(S103)한다. 예를 들어, 제어부(111)는 이전에 설정되어 출력되었던 영어 문서를 현재 출력될 영어 문서로 결정할 수 있다. 또는 제어부(111)는 저장부(109)의 영어 문서 정보들을 이용하여 제목, 출처 등을 각각 포함하는 영어 문서 정보 리스트를 구성하여 디스플레이부(105)로 출력하고 입력부(101)를 통한 선택 입력으로 특정 영어 문서를 결정할 수 있다.

도 3은 연주될 곡과 출력될 영어 문서의 예를 도시하고 있다. 도 3의 (a)는 예시적으로 연주될 곡으로서 "작은 별"이라는 동요를 나타내고, 도 3의 (b)는 예시적으로 출력될 영어 문서를 나타낸다.

출력될 영어 문서와 연주될 곡이 결정됨에 따라, 제어부(111)는 연주될 곡의 음표에 영문 1음절을 할당(S105)한다.

구체적으로 살펴보면, 제어부(111)는 결정된 영어 문서의 텍스트 데이터로부터 음절 분리 데이터를 결정한다. 음절 분리 데이터는 발음에 따라 텍스트 데이터를 1음절씩 분리하여 구성된다. 음절 분리 데이터는 발음 사전 등을 이용하여 미리 구성되거나 텍스트 데이터(영어 문서)가 결정됨에 따라 실시간으로 구성될 수도 있다. 음절 분리 데이터에는 'take', 'look', 'like', 'love' 등이 영문 1음절로 설정된다.

제어부(111)는 결정된 영어 문서의 음절 분리 데이터의 일련의 영문 1음절들 각각을 연주될 곡의 일련의 음표 각각에 순차적으로 할당한다. 제어부(111)는 동일 곡과 동일 영어 문서에 대해 복수회 연주를 실시(S121의 'Yes' 참조)할 수 있다.

제어부(111)는 각 반복 연주에서 각각의 음표에 할당되는 영문 1음절을 서로 다르도록 구성할 수도 있다. 예를 들어, 제어부(111)는 연주될 곡의 첫 번째 음표에 할당될 영문 1음절을 사용자의 명령에 따라 시프트하거나, 랜덤하게 선택되도록 랜덤 숫자를 생성하고 랜덤 숫자에 있는 영문 1음절을 첫 번째 음표에 할당하고 이후의 음표에 이후의 영문 1음절을 할당한다.

도 4는 한 연주에서 랜덤 시작 위치가 0으로 설정되어 영문 문서의 첫번째 영문 1음절인 "To"가 연주될 곡의 첫 번째 음표에 할당(ⓐ 참조)되어 악보가 디스플레이된 예를 나타내고, 도 5는 다른 연주에서 랜덤 시작 위치가 3으로 설정되어 네번째 영문 1음절인 "be"가 연주될 곡의 첫 번째 음표에 할당(ⓐ 참조)되어 악보가 디스플레이된 예를 나타낸다.

도 4의 예와 도 5의 예에서 알 수 있는 바와 같이, 제어부(111)는 연주될 곡의 악보에서 임의 또는 시프트된 위치에서 시작하는 일련의 영문 1음절을 각각 할당하여 여러 연주 수행 중 하나의 연주에서 연주될 곡의 특정 음표에 할당하는 영문 1음절과 여러 연주 수행 중 다른 연주에서의 연주될 곡의 동일 특정 음표에서 할당하는 영문 1음절을 서로 상이하도록 구성할 수 있다.

그에 따라 다양한 음표의 길이에 다양한 영문 1음절을 배치하여 고효율의 영어 말하기 학습 효과를 제공할 수 있다.

제어부(111)는 연주될 음표와 할당된 영문 1음절을 포함하는 악보 이미지를 구성하고 이를 디스플레이부(105)를 통해 표시(S107)한다.

제어부(111)는 설정된 학습 모드에 따라 달리 악보 이미지를 구성하여 디스플레이부(105)로 출력한다.

도 4와 도 5는 설정된 학습 모드가 초급자 모드일 경우에 구성되는 악보 이미지의 예를 도시하고 있다. 초급자 모드에서 제어부(111)는 모든 일련의 음표들에 대응하는 영문 1음절들 각각을 악보에 표시한다. 그에 따라 학습자는 각 음표에 대응하는 영문 1음절을 용이하게 확인하고 노래를 통한 말하기 학습을 쉽게 할 수 있다.

도 6 및 도 7은 설정된 학습자 모드가 고급자 모드일 경우에 구성되는 악보 이미지의 예를 도시하고 있다. 도 6은 디스플레이부(105)에 출력되는 전체 학습 이미지를 나타내고 도 7은 그 중 확대된 악보 이미지를 나타낸다.

도 6에서 알 수 있는 바와 같이, 제어부(111)는 악보 이미지(ⓑ 참조)와 함께 영문 문서의 텍스트 이미지(ⓐ 참조)를 합성하여 디스플레이부(105)로 출력한다. 도 7에서 알 수 있는 바와 같이, 제어부(111)는 연주될 곡의 음표들 중에서 지정된 음표(예를 들어 각각의 8마디(소절) 중에서 마지막 마디의 마지막 음표)에 할당된 영문 1음절(만)을 악보에 표시한다. 그에 따라 고급 학습자는 전체 텍스트와 일부 표시된 영문 1음절을 확인하면서 노래 부르기를 통해 말하기 학습이 가능하다.

또한, 제어부(111)는 연주될 곡의 악보 연주 속도를 결정(S109)한다. 첫 번째 연주의 경우 이 악보 연주 속도는 기준 악보 연주 속도일 수 있다. 첫 번째 연주 이후, 악보 연주 속도는 기준 악보 연주 속도와 다르게 설정될 수 있다. 예를 들어, 제어부(111)는 악보 속도 변경 모드에 따라 동일한 악보 연주 속도로 결정하거나 상대적인 값에 따라 연주의 기준이 되는 속도를 더 빠르게 설정할 수 있다. 악보 연주 속도는 연주 곡의 박자의 기준이 되는 속도(Speed)로서 예를 들어 탬포값 등일 수 있다.

이와 같이, 제어부(111)는 여러 연주 수행 중에서 하나의 연주 수행에서의 악보 연주 속도와 다른 연주 수행에서의 악보 연주 속도를 서로 다르게(바람직하게는 더 빠르게)하여 동일 문서와 동일 곡에서 좀 더 효과적으로 영어 말하기 학습이 가능하도록 한다.

참고로, 악보 연주 속도의 결정 과정은 단계 S105나 단계 S107 이전에 수행될 수도 있다.

이후, 제어부(111)는 디스플레이부(105)에 표시된 악보를 연주하고 대응하는 오디오 신호를 출력(S111 내지 S117 참조)한다.

구체적으로 살펴보면, 먼저 제어부(111)는 TTS 음성신호 출력 모드로 설정되어 있는 지를 판단(S111)한다. 만일 TTS 음성신호 출력 모드로 설정되지 않은 경우 제어부(111)는 TTS 엔진에 따른 음성신호의 생성 과정(S113, S115)을 생략한다.

만일, TTS 음성신호 출력 모드로 설정되어 있는 경우, TTS 엔진 프로그램을 구동하는 제어부(111)는 악보의 일련의 음표에 할당되어 있는 일련의 영문 1음절들을 TTS 음성으로 출력하기 위한 태그 데이터들을 생성(S113)한다.

예를 들어, 제어부(111)는 각각의 음표에 각각 할당되어 있는 각각의 영문 1음절의 문자열, 대응 음표의 음높이(pitch), 음표에 따른 길이(Speed)를 포함하는 일련의 태그 데이터를 생성한다.

음높이와 길이를 표현하는 태그 데이터는 예를 들어 <vtml_pitch value=" 95"><vtml_speed=" 50">To</vtml_pitch></vtml_speed> 등의 표준화된 태그 포맷으로 표현될 수 있다.

제어부(111)는 일련의 태그 데이터들에 따라 각 영문 1음절들을 음표에 따른 음높이와 길이로 표현된 영문 음성의 일련의 음성신호를 TTS 엔진을 이용하여 생성(S115)한다.

음성신호의 생성 과정에서 제어부(111)는 일련의 영문 1음절들 사이의 연음 특성을 반영하는 음성신호를 생성한다. 예를 들어 일련의 영문 1음절들이 "Take a look"인 경우에 각각을 음절 분리하지 않고 [ta],[ka],[look]으로 발음되도록 음성신호를 생성한다.

TTS 엔진을 통해 연주 곡의 멜로디에 대응하는 음성신호를 출력함으로써 초급 학습자 등은 어떻게 노래를 불러야 하는지를 알 수 있고 자신이 부르는 것이 맞는지를 확인할 수 있다.

이후, 제어부(111)는 악보 연주 속도에 따라 연주될 곡의 멜로디 데이터로부터 연주신호를 생성하고 이를 오디오 신호로 구성하여 오디오신호 출력부(107)로 출력(S117)한다.

TTS 엔진에 의해 음성신호가 생성된 경우, 제어부(111)는 음성신호와 연주신호를 합성하여 오디오 신호로 구성하고 이를 오디오신호 출력부(107)로 출력한다.

오디오 신호가 출력되는 동안에, 학습자는 영어 능력 개선 장치(100)에 구비된 마이크(도면 미도시) 등을 통해 멜로디에 맵핑되어 있는 영어 문서를 확인하면서 노래를 부를 수 있다.

한 번의 연주가 완료됨에 따라, 제어부(111)는 현재 연주에 따라 분당 단어 수(WPM)를 산출하고 산출된 분당 단어 수를 출력(S119)할 수 있다. 예를 들어, 제어부(111)는 현재 악보 연주 속도에 대응하는 분당 단어 수 또는 현재 악보 연주 속도에서의 말한 단어 수와 연주 시간을 이용하여 분당 단어 수를 산출할 수 있다.

이후, 제어부(111)는 반복 수행 여부(S121)에 따라 단계 S105 내지 단계 S119를 반복 수행(연주)한다.

예를 들어, 반복 연주 입력을 제어부(111)가 사용자 입력을 통해 수신하거나 자동으로 반복 연주 횟수가 미리 설정된 경우에 그 입력과 횟수에 따라 복수 회 반복하여 동일 연주 곡에 대해 동일 영어 문서로 악보 이미지를 출력하고 연주할 수 있다.

제어부(111)는 사용자로부터 입력부(101)를 통해 종료 입력을 수신한 경우 로딩된 영어능력개선 프로그램을 종료(S200)할 수있다.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니다.

100 : 영어 능력 개선 장치
101 : 입력부 103 : 통신부
105 : 디스플레이부 107 : 오디오신호 출력부
109 : 저장부 111 : 제어부

Claims (12)

1. (a) 영어 능력 개선 장치가 연주될 곡을 결정하는 단계;
   (b) 상기 장치가 결정된 곡에 대응하여 출력될 영어 문서를 결정하는 단계;
   (c) 상기 장치가 연주될 곡의 음표에 상기 영어 문서의 영문 1음절을 할당하는 단계;
   (d) 상기 장치가 상기 음표에 할당된 영문 1음절과 상기 음표를 포함하는 악보를 표시하는 단계; 및
   (e) 상기 장치가 표시된 악보의 연주에 따라 대응하는 오디오 신호를 출력하는 단계;를 포함하는,
   영어 능력 개선 방법.
2. 제1항에 있어서,
   복수 회 반복 수행되는 상기 단계 (c)는, 연주될 곡의 각각의 일련의 음표에 영어 문서의 랜덤 위치에서 시작하는 일련의 영문 1음절을 각각 할당하여 복수의 수행 중 제1 수행에서의 상기 곡의 특정 음표에 할당하는 영문 1음절과 복수의 수행 중 제2 수행에서의 상기 곡의 상기 특정 음표에서 할당하는 영문 1음절을 서로 상이하도록 구성하는,
   영어 능력 개선 방법.
3. 제1항에 있어서,
   복수 회 반복 수행되는 상기 단계 (e)는, 복수의 수행 중 제1 수행에서의 악보 연주 속도와 복수의 수행 중 제2 수행에서의 악보 연주 속도를 서로 상이하도록 구성하는,
   영어 능력 개선 방법.
4. 제1항에 있어서,
   상기 단계 (d)는 연주될 곡의 각각의 음표에 할당된 각각의 영문 1음절을 악보에 표시하거나 연주될 곡의 음표들 중 지정된 음표에 할당된 영문 1음절을 악보에 표시하는,
   영어 능력 개선 방법.
5. 제1항에 있어서,
   상기 단계 (c) 이후에, 상기 장치가 곡의 음표 각각에 할당된 영문 1음절들을 TTS 음성으로 출력하기 위한 태그 데이터들을 생성하는 단계; 및
   상기 장치가 상기 태그 데이터들에 따라 상기 음표에 따른 높이와 길이를 가지고 대응하는 영문 1음절들을 영문 음성으로 표현하는 일련의 음성신호를 TTS 엔진을 이용하여 생성하는 단계;를 더 포함하는,
   영어 능력 개선 방법.
6. 제5항에 있어서,
   상기 단계 (e)는 TTS 엔진을 이용하여 생성되고 영문 1음절들 사이의 연음 특성을 반영한 상기 음성신호와 표시된 악보의 연주신호를 합성한 오디오 신호를 출력하는,
   영어 능력 개선 방법.
7. 제3항에 있어서,
   상기 장치가 상기 표시된 악보의 연주를 완료함에 따라 상기 악보 연주 속도에 따라 분당 단어 수를 산출하고 산출된 분당 단어 수를 출력하는 단계;를 더 포함하는,
   영어 능력 개선 방법.
8. 이미지를 출력하는 디스플레이부;
   오디오를 출력하는 오디오신호 출력부;
   복수의 곡, 복수의 영어 문서 및 프로그램을 저장하는 저장부; 및
   상기 프로그램을 통해 사용자의 영어 능력을 개선하는 제어부;를 포함하며,
   상기 프로그램을 로딩하여 수행하는 상기 제어부는, 상기 프로그램을 통해, 상기 복수의 곡 및 상기 복수의 영어 문서를 이용하여 연주될 곡과 출력될 영어 문서를 결정하고, 연주될 곡의 음표에 영어 문서의 영문 1음절을 할당하고 음표에 할당된 영문 1음절과 대응 음표를 포함하는 악보 이미지를 구성하여 상기 디스플레이부로 출력하며 상기 디스플레이부에 표시된 악보의 연주에 따라 대응하는 오디오 신호를 오디오신호 출력부로 출력하는,
   영어 능력 개선 장치.
9. 제8항에 있어서,
   동일한 곡과 대응 영문 문서에 대해 반복 연주하는 상기 제어부는, 연주될 곡의 각각의 일련의 음표에 영어 문서의 랜덤 위치에서 시작하는 일련의 영문 1음절을 각각 할당하여 복수의 반복 연주 중 제1 연주에서의 상기 곡의 특정 음표에 할당하는 영문 1음절과 복수의 반복 연주 중 제2 연주에서의 상기 곡의 상기 특정 음표에서 할당하는 영문 1음절을 서로 상이하도록 구성하는,
   영어 능력 개선 장치.
10. 제9항에 있어서,
    동일한 곡과 대응 영문 문서에 대해 반복 연주하는 상기 제어부는, 복수의 반복 연주 중 제1 연주에서의 악보 연주 속도와 복수의 반복 연주 중 제2 연주에서의 악보 연주 속도를 서로 상이하도록 구성하는,
    영어 능력 개선 장치.
11. 제8항에 있어서,
    상기 제어부는 곡의 음표 각각에 할당된 영문 1음절들을 TTS 음성으로 출력하기 위한 태그 데이터들을 생성하고 상기 태그 데이터들에 따라 상기 음표에 따른 높이와 길이를 가지고 대응하는 영문 1음절들을 영문 음성으로 표현하는 일련의 음성신호를 TTS 엔진을 이용하여 생성하는,
    영어 능력 개선 장치.
12. 제11항에 있어서,
    상기 제어부는 TTS 엔진을 이용하여 생성되고 영문 1음절들 사이의 연음 특성을 반영한 상기 음성신호와 표시된 악보의 연주신호를 합성한 오디오 신호를 상기 오디오신호 출력부로 출력하는,
    영어 능력 개선 장치.

Images