KR20140107067A

KR20140107067A - 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법

Info

Publication number: KR20140107067A
Application number: KR1020130021611A
Authority: KR
Inventors: 주홍철
Original assignee: 주홍철
Priority date: 2013-02-27
Filing date: 2013-02-27
Publication date: 2014-09-04

Abstract

본 발명은 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법에 관한 것으로서 단어 데이터, 단어를 연상시킬 수 있는 이미지 데이터, 원어민의 발음 영상 및 음성 파형 데이터가 저장된 저장부; 단어 선택 및 단어 입력을 위한 입력부; 학습자가 선택한 단어의 학습이 시작되면 선택한 단어를 포함하는 단어 데이터가 표시되고, 표시된 단어와 관련된 이미지 데이터가 표시되는 표시부; 학습자가 단어 학습 시 표시된 단어를 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부; 상기 오디오 처리부를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 음성의 파형과 유사도를 비교 분석하기 위한 음성 분석 모듈부 및 음성 파형 처리부; 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상을 수집하기 위한 카메라부; 상기 카메라부로부터 입력된 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상의 포커스와 사이즈를 규격화하기 위한 영상 처리부; 상기 영상 처리부를 통해 규격화된 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상과 상기 저장부에 저장된 원어민의 단어 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부와 음성 파형 처리부를 통해 처리된 파형과 저장된 원어민의 음성 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 , 50% 미만 유사 시 를 표시하도록 제어하는 제어하는 제어부를 포함하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치를 제공한다.

Description

이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법{Apparatus and method for learning word by using native speakerpronunciation data and image data}

본 발명은 단어와 단어를 연상시킬 수 있는 이미지 데이터와 원어민의 "단어 발음 시 얼굴 정면과 측면 영상, 단어 발음 시 음성, 단어 발음에 따른 음성 파형, 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 모양(이하 발음 데이터라고 함)을 이용한 단어 학습장치 및 방법에 관한 것으로, 보다 상세하게는 학습하고자 선택한 단어, 단어와 관련된 액센트, 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻(이하 단어 데이터라고 함)이 표시되고, 해당 단어를 연상시킬 수 있는 이미지 또는 애니메이션 또는 영상(이하 이미지 데이터라고 함)을 함께 제공하며, 표시된 단어에 대한 원어민의 발음 영상이 재생되도록 하고, 학습자의 단어 발음에 따른 음성과 영상을 입력받아 원어민 발음의 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 재생 및 학습자 발음의 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 재생 화면을 표시하고, 음성 파형 비교 화면을 표시하고, 원어민 발음과 학습자의 발음의 유사도를 비교하여 발음교정을 돕는 효과적인 단어 학습을 하기 위한, 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법에 관한 것이다.

외국어를 학습할 때 의미의 기본이 되는 단어에 대한 학습은 매우 중요하다.

따라서 외국어 단어 학습 시 사용도가 높은 중요한 외국어 단어들을 정리하여 발음기호와 단어의 뜻을 함께 기록한 외국어 단어 학습 장치들이 제작되고 있다.

학습자가 외국어 문장을 구성하려면, 의미의 기본이 되는 외국어 단어를 많이 암기하여 하는데 기존 외국어 단어 학습 장치는 단어와 발음기호, 단어의 뜻만 나열하다 보니 실제 상황에 대한 이미지화가 부족하고, 기계적으로 반복 필기하며 암기하다 보니 지루함이 생겨 학습의 흥미를 떨어트린다.

또한, 기존 외국어 단어 학습장치는 외국어 단어 암기 시 학습자가 어떠한 단어를 잘 못 외우고 있는지 알 수가 없으며, 잘 잊어버리는 단어를 집중적으로 학습 시키는 프로그램을 제공하지 못하였다.

또한, 기존 외국어 단어 학습장치는 발음 교정에 도움이 될 수 있는 프로그램을 제공하지 못하여 외국어 읽기는 가능한데 외국어 말하기는 잘 되지 못하는 현상이 일어나고 있다.

따라서, 상기한 문제점을 해결하기 위한 본 발명의 목적은, 학습하고자 하는 단어 데이터를 표시하고, 표시된 단어를 연상시킬 수 있는 이미지 데이터를 함께 제공하여 시각적인 정보를 통해 단어가 더욱 더 이해하기 쉽도록 도움을 주는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.

또한 본 발명의 목적은, 원어민의 발음 데이터와 학습자의 발음 데이터의 비교를 통해 학습자가 단어를 발음함에 있어 원어민의 발음과 유사해지도록 교정이 가능한, 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.

또한 본 발명의 목적은, 음성 파형의 비교를 통해 발음의 세기 및 강세의 위치를 세밀하게 체크할 수 있도록 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.

또한 본 발명의 목적은, 원어민의 발음 데이터를 여성, 남성, 미국식 발음, 영국식 발음, 호주식 발음 등 여러가지 종류로 제공하여 폭 넓게 언어 학습을 하도록 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법을 제공함에 있다.

본 발명에 의한 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치는 단어 데이터, 단어를 연상시킬 수 있는 이미지 데이터, 원어민 발음 영상 및 음성 파형 데이터가 저장된 저장부;

단어 선택 및 단어 입력을 위한 입력부;

선정된 단어의 학습이 시작되면 단어 데이터가 표시되고, 표시된 단어를 연상시킬 수 있는 이미지 데이터가 표시되는 표시부;

학습자가 단어 학습 시 표시된 단어를 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부;

상기 오디오 처리부를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 음성의 파형과 유사도를 비교 분석하기 위한 하기 위한 음성 분석 모듈부 및 음성 파형 처리부;

학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상을 수집하기 위한 카메라부;

상기 카메라부로부터 입력된 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상 데이터의 포커스와 사이즈를 규격화하기 위한 영상 처리부; 및

상기 영상 처리부를 통해 규격화된 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상과 상기 저장부에 저장된 원어민의 단어 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부와 음성 파형 처리부를 통해 처리된 파형과 저장된 원어민의 음성 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 , 50% 미만 유사 시 를 표시하도록 제어하는 제어부를 포함하는 것을 특징으로 할 수 있다.

또한, 상기 제어부가 인터넷 웹 브라우저의 표시되는 단어 중 상기 저장부에 저장된 단어와 일치하고 관련된 단어 데이터, 이미지 데이터, 원어민의 발음 데이터를 표시할 수 있도록 하는 유무선 네트워크부를 더 포함하는 것을 특징으로 할 수 있다.

또한, 상기 제어부가 DMB 영어방송에서 나오는 단어 중 상기 저장부에 저장된 단어와 일치하고 관련된 단어 데이터, 이미지 데이터, 원어민의 발음 데이터를 표시할 수 있도록 하는 DMB 모듈부를 더 포함하는 것을 특징으로 할 수 있다.

또한 상기 표시부의 레이어(layer)는 Home, Dic 및 Option 텝으로 구분되는 것을 특징으로 할 수 있다.

또한, 상기 Home 텝에는 학습자가 선택한 단어가 순차적으로 표시되며, 표시된 단어를 포함하는 단어 데이터, 표시된 단어와 관련된 이미지 데이터, 원어민의 단어 발음 시 얼굴, 단어, 원어민의 단어 발음 시 입술의 모양 그리고 치아와 혀의 위치 모양, 학습자의 단어 발음 시 얼굴 또는 입술의 모양 그리고 치아와 혀의 위치 모양, 원어민의 음성 파형 및 학습자의 음성 파형 중 적어도 어느 하나를 표시하는 것을 특징으로 할 수 있다.

또한 상기 Option 텝은 단어를 연상시킬 수 있는 이미지 데이터 표시 여부 선택과, 단어 1회 출력 시간 선택과, 원어민의 단어 발음 시 영상 및 음성 재생과 학습자의 단어 발음 시 영상 및 음성 재생의 여부 및 횟수 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 중 적어도 어느 하나를 포함하는 것을 특징으로 할 수 있다.

또한 상기 제어부는 단어 암기 테스트에서 한글 텍스트, 영문 텍스트, 한글 음성 출력 및 영문 음성 출력 중 어느 하나로 문제를 제시하고 객관식으로 답을 선택할 수 있도록 표시하도록 제어하는 것을 특징으로 할 수 있다.

또한 상기 제어부는 단어 암기 테스트에서 원어민의 발음으로 문제를 제시하고 학습자가 해당 단어를 입력하도록 하여 정답을 확인하는 것을 특징으로 할 수 있다.

본 발명에 의한 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습방법은 학습자로부터 학습할 단어의 선택 명령이 입력되는 단계;

상기 선택된 단어 표시된 단어를 포함하는 단어 데이터, 선택된 단어를 연상시킬 수 있는 이미지 데이터가 표시되는 단계;

상기 선택된 단어의 원어민 발음 시 영상이 표시되는 단계;

상기 표시된 단어에 따른 학습자의 단어 발음 시 음성 및 영상이 입력되는 단계;

원어민의 단어 발음 시 영상 및 학습자의 단어 발음 시 영상이 표시되어 재생되는 단계;

원어민 음성 파형과 학습자 음성 파형의 비교 화면이 표시되는 단계; 및

원어민 음성 파형과 학습자 음성 파형의 비교 유사도가 50% 이상이면 50% 미만이면 를 표시하는 단계를 포함하는 것을 특징으로 할 수 있다.

본 발명의 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습방법에 의하면, 단어 데이터와 표시된 단어를 연상시킬 수 있는 이미지 데이터를 함께 제공하여 시각적인 정보를 통해 단어가 더욱 더 쉽게 이해하기가 가능하며, 원어민의 발음 데이터와 학습자의 발음 데이터의 비교를 통해 학습자가 단어를 발음함에 있어 원어민의 발음과 유사해지도록 교정이 가능하며, 음성 파형의 비교를 통해 발음의 세기 및 강세의 위치를 세밀하게 체크할 수 있고, 원어민의 발음 데이터를 여성, 남성, 미국식 발음, 영국식 발음, 호주식 발음 등 여러가지 종류로 제공하여 폭 넓게 언어 학습을 하도록 하는 효과가 있다.

도 1은 본 발명의 실시예에 따른 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치의 구성을 나타낸 블록도.
도 2는 본 발명의 실시예에 따른 학습하고자 하는 단어 선택의 예를 나타낸 도면.
도 3은 본 발명의 실시예에 따른 단어의 학습 화면의 예를 나타낸 도면.
도 4는 본 발명의 실시예에 따른 Dic 텝에서의 단어의 사전 정보를 표시한 예를 나타낸 도면.
도 5는 본 발명의 실시예에 따른 Option 텝에서의 단어학습 옵션 선택목록의 예를 나타낸 도면.
도 6은 본 발명의 실시예에 따른 객관식 형태의 단어 암기 방식의 예를 나타낸 도면.
도 7은 본 발명의 실시예에 따른 원어민의 발음을 듣고 단어를 입력하는 방식의 단어 암기 방식의 예를 나타낸 도면.
도 8은 본 발명의 실시예에 따른 객관식 문제 및 원어민의 발음을 듣고 단어를 입력하는 문제에서 학습자가 맞추지 못한 단어가 체크되어 리스트로 표시되는 예를 나타낸 도면.
도 9는 본 발명의 실시예에 따른 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습방법의 흐름도.

이하 첨부된 도면을 참조하여 본 발명의 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법에 대해 설명하도록 한다.

도 1은 본 발명의 실시예에 따른 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치의 구성을 나타낸 블록도이다.

도 1을 참조하면, 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치(100)는 단어 데이터, 단어를 연상시킬 수 있는 이미지 데이터, 원어민의 발음 영상 및 음성 파형 데이터가 저장된 저장부(104)와, 단어 선택 및 단어 입력을 위한 입력부(102)와, 학습자가 선택한 단어의 학습이 시작되면 단어 데이터가 표시되고, 표시된 단어를 연상시킬 수 있는 이미지 데이터가 표시되는 표시부(114)와, 학습자가 단어 학습 시 표시된 단어를 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부(106)와, 상기 오디오 처리부(106)를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 음성의 파형과 유사도를 비교 분석하기 위한 음성 분석 모듈부(108) 및 음성 파형 처리부(110)와, 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상을 수집하기 위한 카메라부(112)와, 상기 카메라부(112)로부터 입력된 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상의 포커스와 사이즈를 규격화하기 위한 영상 처리부(116)와, 상기 영상 처리부(116)를 통해 규격화된 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상과 상기 저장부(104)에 저장된 원어민의 단어 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부(108) 와 음성 파형 처리부(110)를 통해 처리된 파형과 저장된 원어민의 음성 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 , 50% 미만 유사 시 를 표시하도록 제어하는 제어부(122)와, 상기 제어부(122)가 인터넷 웹 브라우저의 화면에 표시되는 단어 중 상기 저장부(104)에 저장된 단어와 일치하는 단어와 일치하고 관련된 단어 데이터, 이미지 데이터, 원어민의 발음 데이터를 표시할 수 있도록 하는 유무선 네트워크부(118)와, 상기 제어부(122)가 DMB 영어 방송에서 나오는 단어 중 상기 저장부(104)에 저장된 단어와 일치하고 관련된 단어 데이터, 이미지 데이터, 원어민의 발음 데이터를 표시할 수 있도록 하는 DMB 모듈부(120)로 구성된다.

도시되진 않았지만, 상기 표시부(114)의 화면을 좌/우로 구분하여 좌측에 인터넷 웹 브라우저의 화면 또는 DMB 방송 영상을 표시하고, 우측에 상기 저장부(104)에 저장된 단어와 일치하는 단어를 표시하여 학습자가 학습을 원하는 단어를 선택하면 상기 저장부(104)에 저장된 단어 데이터, 이미지 데이터, 원어민 발음 시 영상이 재생되도록 하는 것이 바람직하다.

이는, 학습자가 인터넷 웹 브라우저의 화면 또는 DMB 영어 방송을 통해 단어의 학습 상태를 확인해볼 수 있으며, 알아듣지 못했던 단어를 체크하고 복습할 수 있는 효과가 있다.

도시되진 않았지만, 외국어 학습서적 또는 컴퓨터, 스마트폰, 테블릿pc, pmp 등 디스플레이를 통해 출력되는 외국어 학습프로그램에 증강 현실을 구현하기 위한 마커를 표기하고, 상기 카메라부(112)를 통해 해당 마커를 수집하여, 저장부(104)에 저장된 단어 데이터, 단어를 연상시킬 수 있는 이미지 데이터, 원어민의 발음 영상 및 음성 파형 데이터 중 해당 마커와 관련된 각각의 데이터가 화면을 통해 재생되도록 하는 것이 바람직하다.

이는, 학습자가 학습 시 즉각적으로 학습과 관련된 데이터를 제공받고, 발음학습에도 도움이 되는 효과가 있다.

단어 학습 장치(100)는 컴퓨터 단말기, 테블릿 PC, 어학기 및 스마트폰을 포함하며, 상기 입력부(102)는 상기 단어 학습장치(100)의 키 패드 또는 터치 스크린 모듈 및 터치 팬을 포함한다.

상기 오디오 처리부(106)는 음성 입력 및 출력과 미디어 출력이 가능하도록 마이크(microphone)와 스피커를 포함한다.

도 2는 본 발명의 실시예에 따른 학습하고자 하는 단어 선택의 예를 나타낸 도면이고, 도 3은 본 발명의 실시예에 따른 단어의 학습 화면의 예를 나타낸 도면이다.

도 2 및 도 3에 도시된 바와 같이, 학습자는 먼저 학습하고자 하는 단어를 선택한다.

학습자의 단어 선택방식은 도 2에서와 같이 원하는 단어를 체크하거 나 정해진 레벨에 따른 단어를 선택하는 것이 가능하며, 그 방식을 제한하는 것은 아니다.

학습자가 학습하고자 하는 단어의 선택이 완료되고 학습이 시작되면, 도 3에서와 같이, Home 텝(10)에 단어를 연상시킬 수 있는 이미지 데이터(11), 원어민의 단어 발음 시 얼굴(12), 단어 데이터(13), 원어민의 단어 발음 시 입술의 모양 그리고 치아와 혀의 위치 모양(14), 학습자의 단어 발음 시 얼굴 또는 입술의 모양 그리고 치아와 혀의 위치 모양(15), 원어민의 음성 파형(16) 및 학습자의 음성 파형(17)이 표시되고 하단에 Next, Repeat, Slow 버튼과 녹음 및 재생 버튼이 표시된다.

우선, 단어 데이터와 단어를 연상시킬 수 있는 이미지 데이터가 함께 표시됨과 동시에 해당 단어를 발음하는 원어민의 단어 발음 시 동영상이 재생된다.

이후, 표시되진 않았지만 학습자의 음성을 입력받을 수 있도록 팝업 메뉴를 띄워 단어 학습장치(100)에 구비된 카메라를 바라보며 해당 단어를 발음하도록 한다.

음성 녹음 및 영상 촬영이 완료되면, 해당 단어에 대한 원어민의 단어 발음 시 입 부분이 확대된 발음 동영상과 학습자의 녹화된 발음 동영상이 재생 되도록 한다.

영상 처리부(116)는 해당 화면의 프레임에 입 모양이 표시될 수 있도록 영상을 가공하여 규격화할 수 있는 프로그램이 탑재되는 것이 바람직하며, 녹화된 영상이 데이터로 활용될 수 없는 경우 재녹화될 수 있도록 학습자에게 요구사항을 팝업메뉴 형태로 표시하는 것이 바람직하다.

또한, 학습자의 발음 영상 재생은 녹화방식이 아닌 현재 학습자의 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치가 카메라를 통해 실시간으로 입력되어 표시되도록 함으로써, 학습자가 본인의 발음 모양을 직접 화면을 통해 확인하면서 원어민의 발음 모양과 같아지도록 연습할 수 있도록 하는 것이 바람직하다.

이때, 음성 분석 모듈부(108)에서 학습자의 음성을 분석하고, 분석된 데이터를 토대로 음성 파형 처리부(110)를 통해 파형으로 변환시켜 원어민 음성 파형과 비교할 수 있도록 표시한다.

도 4는 본 발명의 실시예에 따른 Dic 텝에서의 단어의 사전 상 정보를 표시한 예를 나타낸 도면이다.

도 4에 도시된 바와 같이, 단어가 재생되고 있을 때, Dic 텝(20)을 선택하면 해당 단어의 사전적 의미와 예문 등을 확인할 수 있다.

도 5는 본 발명의 실시예에 따른 Option 텝에서의 단어학습 옵션 선택목록의 예를 나타낸 도면이다.

도 5에 도시된 바와 같이, 상기 Option 텝(30)은 단어를 연상시킬 수 있는 이미지 데이터 표시 여부 선택과, 단어 1회 출력 시간 선택과, 원어민의 단어 발음 시 영상 및 음성 재생과 학습자의 단어 발음 시 영상 및 음성 재생의 여부 및 횟수 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 메뉴로 구성되며 표시되는 방식을 학습자가 선택할 수 있도록 하여 학습자가 자신에게 가장 적합한 방식으로 조절할 수 있도록 한다.

도 6은 본 발명의 실시예에 따른 객관식 형태의 단어 암기 방식의 예를 나타낸 도면이고, 도 7은 본 발명의 실시예에 따른 원어민의 발음을 듣고 단어를 입력하는 방식의 단어 암기 방식의 예를 나타낸 도면이다.

도 6 내지 도 7에 도시된 바와 같이, 단어 암기 방식은 한글 텍스트, 영문 텍스트, 한글 음성 출력 및 영문 음성 출력 중 어느 하나로 문제를 제시하고 객관식으로 답을 선택할 수 있도록 표시하거나, 원어민의 발음으로 문제를 제시하고 학습자가 해당 단어를 입력하도록 하여 정답을 확인하는 방식을 사용할 수 있다.

학습자가 단어를 입력하는 방식은 객관식인 경우 손가락이나 터치펜으로 번호를 선택하거나 키패드로 번호를 입력할 수 있으며, 단어를 직접 입력하는 경우에는 손가락 또는 터치펜으로 직접 단어를 적거나 키패드로 단어를 입력할 수 있다.

도 8은 본 발명의 실시예에 따른 객관식 문제 및 원어민의 발음을 듣고 단어를 입력하는 문제에서 학습자가 맞추지 못한 단어가 체크되어 리스트로 표시되는 예를 나타낸 도면이다.

도 8에 도시된 바와 같이, 객관식 문제 및 원어민의 발음을 듣고 단어를 입력하는 문제에서 학습자가 맞추지 못한 단어에 대해서는 저장부(104)에 저장하여 다시 학습할 수 있도록 리스트에 체크하고, 다시 학습하거나 종료할 수 있도록 한다.

도 9는 본 발명의 실시예에 따른 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습방법의 흐름도이다.

도 9를 참조하면, 먼저 입력부(102)를 통해 학습자는 학습하고자 하는 단어를 선택한다(S200).

상기 입력부(102)를 통한 학습 단어의 선택이 완료되면, 표시부(114)의 Home(10)에 선택된 단어를 포함하는 단어 데이터, 표시된 단어와 관련된 이미지 데이터가 표시되고, 해당 단어의 원어민 발음 시 영상이 표시 및 재생된다(S202).

이후, 오디오 처리부(106)를 통해 학습자의 단어 발음 시 음성을 입력받고, 카메라부(112)를 통해 학습자의 발음 시 얼굴 영상을 취득한다(S204).

저장부(104)에 저장된 원어민의 발음 시 영상이 재생되고, 영상 처리부(116)를 통해 포커스와 사이즈가 규격화된 학습자의 발음 시 영상이 재생되도록 한다(S206).

학습자의 발음 시 영상에 있어서는 학습자마다 단어를 발음할 때 카메라와의 거리, 학습자마다 영상에서 차지하는 얼굴 사이즈 등이 달라지게 되는 것이 일반적이다.

따라서, 상기 영상 처리부(116)는 학습자의 얼굴 형태를 인식하고 프레임에서 얼굴 형태가 차지하는 사이즈로 확대 또는 축소하여 규격화된 포커스와 사이즈로 학습자의 발음 시 영상이 보여질 수 있도록 하는 것이 바람직하다.

이때, 학습자의 발음 시 영상 재생은 녹화 재생 또는 실시간 재생 방식을 적용할 수 있다.

그리고, 상기 오디오 처리부(106)를 통해 입력된 학습자의 음성 데이터를 음성 분석 모듈부(108)에서 분석하여 음성 파형 처리부(100)를 통해 파형으로 변환하여 표시될 수 있도록 한다(S208).

학습자의 음성 파형은 저장부(104)에 저장된 원어민의 음성 파형과 비교될 수 있도록 나란히 표시하고, 원어민이 어느 부분에서 강하게 발음하는지를 학습자가 확인할 수 있도록 한다.

파형은 음의 진동 모양을 시간 차이로 나누어 표시할 때 생기는 파장의 형태로써, 음성 파형은 단어를 발음할 때의 액센트와 리듬을 확인할 수 있는 중요한 요소가 된다.

영어단어 발음 시 어느 부분을 강하게 발음하느냐에 따라 그 뜻이 달라지기도 하기 때문에 학습자가 원어민의 단어 발음을 익힘에 있어서 필수적으로 체크해야하는 부분이다.

상기와 같이, 학습자가 원하는 학습을 원하는 단어를 선택하여 학습을 시작하면, 단어 데이터와 단어를 연상시킬 수 있는 이미지 데이터가 표시되고, 원어민의 발음 시 동영상이 표시되며, 학습자의 단어 발음 시 음성과 영상을 입력받아 원어민의 발음 시 영상과 비교할 수 있도록 하고, 원어민의 음성 파형과 학습자의 음성 파형을 비교할 수 있도록 하여 단어의 정확한 발음 교정 및 정확한 액센트를 익힐 수 있는 효과가 있다.

이상에서는 학습자가 학습하는 언어가 영어인 경우를 예로 들어 설명하였으나 영어 외에 중국어, 일본어, 독일어, 불어 등의 다른 외국어에도 본 발명이 적용될 수 있음은 물론이다.

100 : 언어 학습 장치 102 : 입력부
104 : 저장부 106 : 오디오 처리부
108 : 음성 분석 모듈부 110 : 음성 파형 처리부
112 : 카메라부 114 :표시부
116 : 영상 처리부 118 : 유무선 네트워크부
120 : DMB 모듈부 122 : 제어부

Claims

이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치에 있어서, 단어, 단어와 관련된 액센트, 단어와 관련된 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻, 단어를 연상 시킬 수 있는 이미지 또는 애니메이션 또는 영상, 원어민 발음 영상 및 음성 파형 데이터가 저장된 저장부;
단어 선택 및 단어 입력을 위한 입력부;
선정된 단어의 학습이 시작되면 선정된 단어와 관련된 액센트, 단어와 관련된 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻, 선정된 단어를 연상시킬 수 있는 이미지 또는 애니메이션 또는 영상이 표시되는 표시부;
학습자가 단어 학습 시 표시된 단어를 발음할 경우에 학습자의 음성을 입력
받기 위한 오디오 처리부;
상기 오디오 처리부를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 음성의 파형과 유사도를 비교 분석하기 위한 위
한 음성 분석 모듈부 및 음성 파형 처리부;
학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상을 수집하기 위한 카메라부;
상기 카메라부로부터 입력된 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상 데이터의 포커스와 사이즈를 규격화하기 위한 영상 처리부; 및
상기 영상 처리부를 통해 규격화된 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상과 상기 저장부에 저장된 원어민의 단어 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부와 음성 파형 처리부를 통해 처리된 파형과 저장된 원어민의 음성 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 , 50% 미만 유사 시 를 표시하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
제 1항에 있어서,
상기 제어부가 인터넷 웹 브라우저의 표시되는 단어 중 상기 저장부에 저장된 단어와 일치하고 단어와 관련된 액센트, 단어와 관련된 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻, 선정된 단어를 연상시킬 수 있는 이미지 또는 애니메이션 또는 영상, 원어민의 단어 발음 시 얼굴 정면과 측면 영상, 원어민의 단어 발음 시 음성, 원어민의 단어 발음에 따른 음성 파형, 원어민의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 모양을 표시할 수 있도록 하는 유무선 네트워크부를 더 포함하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
제 1항에 있어서,
상기 제어부가 DMB 영어방송에서 나오는 단어 중 상기 저장부에 저장된 단어와 일치하고 단어와 관련된 액센트, 단어와 관련된 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻, 선정된 단어를 연상시킬 수 있는 이미지 또는 애니메이션 또는 영상과 원어민의 원어민의 단어 발음 시 얼굴 정면과 측면 영상, 원어민의 단어 발음 시 음성, 원어민의 단어 발음에 따른 음성 파형, 원어민의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 모양을 표시할 수 있도록 하는 DMB 모듈부를 더 포함하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
제 1항에 있어서,
상기 표시부의 레이어(layer)는 Home, Dic 및 Option 텝으로 구분되는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
제 4항에 있어서,
상기 Home 텝에는 학습자가 선택한 단어가 순차적으로 표시되고, 선택된 단어와 관련된 액센트, 단어와 관련된 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻, 선정된 단어를 연상시킬 수 있는 이미지 또는 애니메이션 또는 영상이 표시되며, 원어민의 단어 발음 시 얼굴, 단어, 원어민의 단어 발음 시 입술의 모양 그리고 치아와 혀의 위치 모양, 학습자의 단어 발음 시 얼굴 또는 입술의 모양 그리고 치아와 혀의 위치 모양, 원어민의 음성 파형 및 학습자의 음성 파형 중 적어도 어느 하나를 표시하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
제 4항에 있어서,
상기 Option 텝은 단어를 연상시킬 수 있는 이미지 데이터 표시 여부 선택과, 단어 1회 출력 시간 선택과, 원어민의 단어 발음 시 영상 및 음성 재생과 학습자의 단어 발음 시 영상 및 음성 재생의 여부 및 횟수 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
제 1항에 있어서,
상기 제어부는 단어 암기 테스트에서 한글 텍스트, 영문 텍스트, 한글 음성 출력 및 영문 음성 출력 중 어느 하나로 문제를 제시하고 객관식으로 답을 선택할 수 있도록 표시하도록 제어하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
제 1항에 있어서,
상기 제어부는 단어 암기 테스트에서 원어민의 발음으로 문제를 제시하고 학습자가 해당 단어를 입력하도록 하여 정답을 확인하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치.
이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습 방법에 있어서, 학습자로부터 학습할 단어의 선택 명령이 입력되는 단계;
상기 선택된 단어와 관련된 액센트, 단어와 관련된 발음기호, 단어에 대하여 학습하는 국가의 언어로 해석된 뜻, 선정된 단어를 연상시킬 수 있는 이미지 또는 애니메이션 또는 영상이 표시되는 단계; 상기 표시된 단어의 원어민 발음 시 영상이 표시되는 단계; 상기 표시된 단어에 따른 학습자의 단어 발음 시 음성 및 영상이 입력되는 단계; 원어민의 단어 발음 시 영상 및 학습자의 단어 발음 시 영상이 표시되어 재생되는 단계; 및 원어민 음성 파형과 학습자 음성 파형의 비교 화면이 표시되는 단계; 원어민 음성 파형과 학습자 음성 파형의 비교 유사도가 50% 이상이면 50% 미만이면 를 표시하는 단계를 포함하는 것을 특징으로 하는 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습방법.