KR20190057509A - 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체 - Google Patents

순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체 Download PDF

Info

Publication number
KR20190057509A
KR20190057509A KR1020170154496A KR20170154496A KR20190057509A KR 20190057509 A KR20190057509 A KR 20190057509A KR 1020170154496 A KR1020170154496 A KR 1020170154496A KR 20170154496 A KR20170154496 A KR 20170154496A KR 20190057509 A KR20190057509 A KR 20190057509A
Authority
KR
South Korea
Prior art keywords
interpretation
text
learner
time
response information
Prior art date
Application number
KR1020170154496A
Other languages
English (en)
Other versions
KR102060229B1 (ko
Inventor
이주리애
박혜경
박성주
상우연
Original Assignee
이화여자대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이화여자대학교 산학협력단 filed Critical 이화여자대학교 산학협력단
Priority to KR1020170154496A priority Critical patent/KR102060229B1/ko
Publication of KR20190057509A publication Critical patent/KR20190057509A/ko
Application granted granted Critical
Publication of KR102060229B1 publication Critical patent/KR102060229B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • G06Q50/205Education administration or guidance
    • G06Q50/2057Career enhancement or continuing education service
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/93Discriminating between voiced and unvoiced parts of speech signals

Abstract

순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체가 개시된다. 본 발명에 따른 순차통역 자습 보조 방법은, 학습자가 소지하는 학습자 단말기를 이용한 순차통역 자습 보조 방법에 있어서, 순차통역 자습을 위한 원문 파일을 입력 받는 단계, 미리 정해진 재생시간 동안 상기 원문 파일을 음성으로 출력하고, 상기 재생시간이 경과하면 미리 정해진 녹음시간 동안 상기 학습자에 의해 수행되는 순차통역 과정에서 발생되는 응답정보를 음성으로 입력받는 단계, 상기 응답정보를 문자화한 통역 텍스트를 생성하고, 상기 응답정보를 분석하여 상기 학습자의 통역특성을 나타내는 통역 지연 구간이 발생하는 것으로 확인되면, 침묵구간, 통역개시 지연구간 및 특정음절 지속구간 중 적어도 하나의 구간을 상기 통역 텍스트 상에 표시하는 단계 및 상기 통역 텍스트를 분석하여 상기 학습자에 의해 수행된 순차통역 결과를 자체 평가하기 위한 평가데이터를 생성하는 단계를 포함한다.

Description

순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체 {METHOD FOR ASSISTING CONSECUTIVE INTERPRETATION SELF STUDY AND COMPUTER READABLE MEDIUM FOR PERFORMING THE METHOD}
본 발명은 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체에 관한 것으로서, 더욱 상세하게는 순차통역 연습을 위한 자습용 파일 업로드 및 순차통역 자습 결과물을 자동으로 평가하는 기능을 제공하는 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체에 관한 것이다.
스마트폰 및 무선 인터넷과 관련된 기술의 발달이 고도화됨에 따라, 시간과 장소에 구애받지 않는 온라인 기반의 학습 프로그램이 등장하고 있다. 특히, 외국어 학습에 있어서 온라인 기반 학습은 비교적 저렴한 비용으로 학습자의 수준에 따른 교육을 제공받을 수 있어 매우 각광받고 있다.
한편, 통역 학습에 있어서는 끊임없는 반복 훈련과 적절한 피드백이 중요하다. 이에 시간 및 장소에 구애받지 않고 스스로 학습할 수 있는 온라인 기반의 프로그램들이 출시되었다. 그러나, 현재 출시된 프로그램들을 이용하더라도 음성 녹음된 통역 결과물을 문자화하여 원문과 비교하는 데에는 어려움이 있다.
한국등록특허 제10-1438087호 한국공개특허 제10-2005-0119808호
본 발명의 일측면은 학습자가 순차통역 훈련을 위한 원문 파일을 직접 업로드하고, 원문 파일에 대한 순차통역 학습 결과물을 분석하여 순차통역 과정에서 발생되는 학습자의 통역 특징을 쉽게 확인하거나 자체적으로 평가하기 위한 정보들을 제공하는 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체를 제공한다.
본 발명의 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따른 순차통역 자습 보조 방법은, 학습자가 소지하는 학습자 단말기를 이용한 순차통역 자습 보조 방법에 있어서, 순차통역 자습을 위한 원문 파일을 입력 받는 단계, 미리 정해진 재생시간 동안 상기 원문 파일을 음성으로 출력하고, 상기 재생시간이 경과하면 미리 정해진 녹음시간 동안 상기 학습자에 의해 수행되는 순차통역 과정에서 발생되는 응답정보를 음성으로 입력받는 단계, 상기 응답정보를 문자화한 통역 텍스트를 생성하고, 상기 응답정보를 분석하여 상기 학습자의 통역특성을 나타내는 통역 지연 구간이 발생하는 것으로 확인되면, 침묵구간, 통역개시 지연구간 및 특정음절 지속구간 중 적어도 하나의 구간을 상기 통역 텍스트 상에 표시하는 단계 및 상기 통역 텍스트를 분석하여 상기 학습자에 의해 수행된 순차통역 결과를 자체 평가하기 위한 평가데이터를 생성하는 단계를 포함한다.
상기 학습자의 통역특성을 나타내는 침묵구간을 상기 통역 텍스트 상에 표시하는 단계는, 상기 응답정보를 문자 텍스트로 변환하는 단계, 상기 응답정보를 기초로 침묵 시간이 미리 정해진 기준시간 이상 지속되는 구간을 감지하는 단계, 상기 구간에 대응되는 침묵기호를 생성하는 단계 및 상기 문자 텍스트 사이에 상기 침묵기호가 반영된 상기 통역 텍스트를 생성하는 단계를 포함할 수 있다.
상기 평가데이터는, 상기 침묵기호가 상기 통역 텍스트에 삽입된 횟수, 문장별 평균 침묵기호의 출현 횟수에 대한 정보를 포함할 수 있다.
상기 학습자의 통역특성을 나타내는 특정음절 지속구간을 상기 통역 텍스트 상에 표시하는 단계는, 상기 응답정보를 문자 텍스트로 변환하는 단계, 상기 응답정보를 분석하여 특정 음절이 미리 정해진 기준시간 이상 지속되는 구간을 감지하는 단계, 상기 구간에 대응되는 특정음절 지속기호를 생성하는 단계 및 상기 문자 텍스트 사이에 상기 특정음절 지속기호가 반영된 상기 통역 텍스트를 생성하는 단계를 포함할 수 있다.
상기 평가데이터는, 상기 특정음절 지속기호가 상기 통역 텍스트에 삽입된 횟수, 문장별 평균 특정음절 지속기호의 출현 횟수에 대한 정보를 포함할 수 있다.
상기 학습자의 통역특성을 나타내는 통역개시 지연구간을 상기 통역 텍스트 상에 표시하는 단계는, 상기 원문 파일의 출력 종료시간과 상기 응답정보의 입력 시작시간을 확인하는 단계, 상기 출력 종료시간과 상기 입력 시작시간의 시간 간격을 나타내는 통역개시 지연기호를 생성하는 단계 및 상기 통역개시 지연기호가 반영된 상기 통역 텍스트를 생성하는 단계를 포함할 수 있다.
상기 통역개시 지연기호를 생성하는 것은, 상기 출력 종료시간과 상기 입력 시작시간의 시간 간격이 미리 정해진 임계시간을 초과하는 것으로 확인되는 경우 생성되며, 상기 통역개시 지연 기호는 상기 통역 텍스트의 앞단에 표시되는 것을 특징으로 할 수 있다.
상기 평가데이터는, 상기 통역개시 지연기호가 상기 통역 텍스트에 삽입된 횟수에 대한 정보와, 상기 출력 종료시간과 상기 입력 시작시간의 시간 간격의 길이를 나타내는 정보를 포함할 수 있다.
상기 평가데이터는 누락률 및 추가율에 대한 정보 또는 누락 개수 및 추가 개수에 대한 정보 중 적어도 하나의 정보를 포함하고, 상기 평가데이터를 생성하는 것은, 상기 원문 파일을 원문 텍스트로 변환하고, 상기 원문 텍스트와 상기 통역 텍스트를 비교한 결과에 따라 상기 누락률 및 추가율에 대한 정보 또는 상기 누락 개수 및 추가 개수에 대한 정보를 산출하는 것을 특징으로 할 수 있다.
상기 원문 파일을 음성으로 출력하는 것은, 상기 누락률 및 추가율에 대한 정보 또는 상기 누락 개수 및 상기 추가 개수에 대한 정보 중 적어도 하나의 정보의 히스토리를 분석하여, 상기 미리 정해진 녹음시간이 경과한 후, 다음 차례에 출력되는 원문 파일의 음성 재생 속도를 가변시키는 것을 특징으로 할 수 있다.
상기 학습자 단말기는, 상기 원문 텍스트를 화면에 표시하고, 상기 통역 텍스트를 상기 원문 텍스트의 하단에 표시하되, 상기 미리 정해진 재생시간 동안 상기 원문 파일의 출력이 종료된 시점으로부터 상기 응답정보가 개시되기까지 소요된 시간을 상기 원문 텍스트와 상기 통역 텍스트 사이에 표시하는 것을 특징으로 할 수 있다.
상기 미리 정해진 재생시간 동안 원문 파일을 음성으로 출력하는 것은, 상기 학습자 단말기가 미리 정해진 재생시간 동안 상기 원문 파일을 재생하도록, 상기 학습자에 의해 설정되는 재생시간을 기초로 상기 원문 파일을 적어도 하나의 문장으로 구성된 복수의 서브 그룹으로 분할하고, 상기 재생시간 동안 어느 하나의 서브 그룹에 포함된 모든 문장들을 음성으로 출력하고, 상기 재생시간이 경과하면 미리 정해진 녹음시간 동안 상기 학습자로부터 입력되는 음성을 녹음하여 서브 그룹별 응답정보를 생성할 수 있다.
상기 학습자 단말기는, 상기 미리 정해진 녹음시간이 경과하면 다음 차례의 서브 그룹에 포함된 모든 문장들을 음성으로 출력한 후 상기 학습자로부터 입력되는 음성을 녹음하는 과정을 반복하여, 상기 원문 파일을 구성하는 각각의 서브 그룹별 응답정보 및 모든 서브 그룹별 응답정보가 통합된 전체응답정보를 생성하며, 상기 응답정보는 상기 서브 그룹별 응답정보 및 상기 전체응답정보 중 적어도 하나를 포함할 수 있다.
또한, 본 발명에 따른 순차통역 자습 보조 방법을 수행하기 위한, 컴퓨터 프로그램이 기록된 컴퓨터로 판독 가능한 기록매체일 수 있다.
상술한 본 발명의 일측면에 따르면, 학습자는 원문 분할기능을 통해 통역 학습 수행 중에 기계를 조작할 필요가 없고, 시간과 장소에 구애받지 않고 순차통역 훈련을 수행할 수 있으며, 학습자의 통역특성이 반영된 결과물을 이용하여 신뢰성 있는 자체평가를 수행할 수 있다.
도 1은 본 발명의 일 실시예에 따른 순차통역 자습 보조 시스템을 제공하는 학습자 단말기의 구성이 도시된 도면이다.
도 2 내지 도 5는 도 1의 학습자 단말기에서 출력하는 화면들의 실시예들이 도시된 도면이다.
도 6은 본 발명의 일 실시예에 따른 순차통역 자습 보조 방법의 개략적인 흐름이 도시된 순서도이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하, 도면들을 참조하여 본 발명의 바람직한 실시예들을 보다 상세하게 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 순차통역 자습 보조 시스템을 제공하기 위한 학습자 단말기의 구성이 도시된 블록도이다.
학습자 단말기(100)는 통신이 가능하고 정보의 입출력이 가능한 장치로, 예를 들어 PC, 스마트폰, 태블릿 PC 등으로 구현될 수 있으며, 본 발명에 따른 순차통역 자습 보조 방법을 제공하는 소프트웨어(애플리케이션)가 설치되어 실행될 수 있다.
학습자 단말기(100)는 순차통역 훈련을 위한 원문 파일을 등록하고, 원문 파일을 미리 정해진 재생시간 동안 분할하여 재생한 후 미리 정해진 녹음시간 동안 입력되는 학습자의 음성을 녹음하여 응답정보를 생성할 수 있으며, 응답정보를 분석하여 자체 평가를 위한 정보들을 생성할 수 있다.
구체적으로, 본 발명의 일 실시예에 따른 순차통역 자습 보조 시스템을 제공하기 위한 학습자 단말기(100)는, 통신부(110), 입력부(120), 출력부(130) 및 제어부(140)를 포함할 수 있다.
학습자 단말기(100)는 도 1에 도시된 구성요소보다 많은 구성요소에 의해 구현될 수 있고, 그보다 적은 구성요소에 의해 구현될 수 있다. 예를 들어, 학습자 단말기(100)는 수신되거나 생성된 데이터를 저장하는 메모리부(미도시) 및 학습자 단말기(100)에 전원을 공급하는 배터리부(미도시)와 같은 구성요소들이 더 포함될 수 있다. 또는, 학습자 단말기(100)는 통신부(110), 입력부(120), 출력부(130) 및 제어부(140) 중 적어도 두 개의 구성요소가 하나의 구성요소로 통합되어 하나의 구성요소가 복합적인 기능을 수행할 수도 있다. 이하, 상술한 구성요소들에 대해 구체적으로 설명하기로 한다.
통신부(110)는 학습자 단말기(100)의 유선 또는 무선 통신을 가능하게 하며, 이를 위해 유선 또는 무선 통신을 수행하게 하는 하나 이상의 구성요소를 포함하여 구현될 수 있다. 예를 들면, 통신부(110)는 블루투스, 3G, 4G, 5G, 적외선 및 무선 LAN 통신 중 어느 하나의 통신을 가능하게 하는 구성요소를 포함하여 구현될 수 있다.
입력부(120)는 학습자에 의한 입력 데이터를 생성시킬 수 있다. 이를 위해, 입력부(120)는 키 패드, 돔 스위치, 터치 패드, 마이크 등으로 구성될 수 있는데, 특히, 학습자의 조작에 따라 원문 파일을 등록받기 위한 터치 스크린과, 학습자의 음성 녹음을 위한 마이크를 포함하여 구성되는 것이 바람직하다.
출력부(130)는 오디오 신호 또는 비디오 신호의 출력을 위해 마련된 구성으로, 이를 위해, 디스플레이, 스피커 등을 포함하여 구성될 수 있다. 예를 들면, 출력부(130)는 순차통역 자습 보조 방법을 제공하는 소프트웨어(애플리케이션)에 의해 실행되는 UI(User Interface)또는 GUI(Graphic User Interface)를 출력할 수 있다. 또는, 출력부(130)는 순차통역 훈련을 위한 음성 형태의 원문 파일과, 원문 파일에 대응되는 응답정보 및 통역 텍스트 등을 출력할 수 있다.
이를 위해, 출력부(130)는 원문 파일 및 응답정보를 음성으로 출력하는 음성 출력부(131)와, 원문 파일이 문자화된 원문 텍스트 및 응답정보가 문자화된 통역 텍스트를 표시하는 화상 출력부(132)를 포함할 수 있다.
제어부(140)는 학습자 단말기(100)의 전반적인 동작을 제어할 수 있다. 특히, 제어부(140)는 입력부(120)를 통해 순차통역 훈련을 위한 원문 파일을 등록받도록 제어하고, 등록된 원문 파일에 대한 순차통역 자습 보조 방법을 학습자에게 제공하기 위하여, 원문 파일의 재생시간 및 녹음시간을 설정할 수 있다. 이후, 제어부(140)는 녹음시간 동안 입력되는 학습자의 음성을 인식하여 응답정보를 생성하고, 학습자에 의해 수행된 통역 결과물을 평가할 수 있도록, 응답정보를 분석하여 학습자의 통역특성이 반영된 통역 텍스트를 생성할 수 있다. 이를 위해, 제어부(140)는 원문 파일 등록부(141), 응답정보 생성부(142), 통역 텍스트 생성부(143) 및 평가데이터 생성부(144)를 포함할 수 있다.
원문 파일 등록부(141)는 입력부(120)를 통해 학습자로부터 순차통역 자습을 위한 원문 파일을 입력 받도록 제어할 수 있다. 이와 관련하여, 도 2를 함께 참조하여 설명하기로 한다.
도 2는 학습자 단말기(100)에서 출력되는 화면의 일 예이다.
도시된 바와 같이, 학습자 단말기(100)는 미리 설치된 순차통역 자습 보조 방법을 제공하는 소프트웨어(애플리케이션)를 통해 학습자로부터 순차통역 훈련을 위한 원문 파일을 등록 받기 위한 UI를 제공할 수 있다. 즉, 원문 파일 등록부(141)는 이러한 UI를 조작하는 학습자로부터 순차통역 훈련을 위한 원문 파일을 입력받을 수 있다.
원문 파일 등록부(141)는 다양한 방식으로 원문 파일을 입력 받을 수 있다. 구체적으로, 원문 파일 등록부(141)는 미리 저장된 파일 찾기, URL 연결 또는 직접 녹음 중 어느 하나의 방법에 따라 순차통역 훈련을 위한 음성 형태의 원문 파일을 입력 받을 수 있다.
여기에서, 원문 파일 등록부(141)는 미리 저장된 파일 찾기의 방법으로 원문 파일을 입력 받는 경우, 검색어 입력에 따른 파일찾기 기능을 제공할 수 있다. 또한, 원문 파일 등록부(141)는 URL 연결의 방법으로 원문 파일을 입력 받는 경우, 통신부(110)를 통해 해당 사이트에 접속하여 원문 파일을 획득할 수 있다. 또한, 원문 파일 등록부(141)는 입력부(120)를 통해 학습자가 발성하는 음성을 녹음하는 방식으로 원문 파일을 입력 받을 수 있다.
이 과정에서, 원문 파일 등록부(141)는 미리 저장된 파일 찾기, URL 연결 또는 직접 녹음 중 어느 하나의 방법에 따라 음성 형태의 원문 파일을 입력 받으면, 해당 원문 파일의 전체 길이를 산출하고, 원문 파일의 전체 길이에 따른 파일명을 부여할 수 있다. 또는, 원문 파일 등록부(141)는 원문 파일 등록일, 학습자식별정보 및 학습자가 직접 기입하는 정보 중 학습자의 UI 조작에 따라 선택된 적어도 하나의 정보가 파일명으로 설정되도록 제어할 수 있다. 아울러, 원문 파일 등록부(141)는 원문 파일 또는 원문 파일을 문자화한 원문 텍스트에 대한 편집 기능을 제공할 수 있다. 이를 위해, 원문 파일 등록부(141)는 음성 형태의 원문 파일뿐만 아니라, 원문 파일을 문자화한 원문 텍스트를 입력 받을 수 있다. 이때, 원문 파일 등록부(141)는 파일찾기를 통해 미리 저장된 원문 텍스트를 획득하거나, 공지된 음성 문자화 기술을 적용하여 원문 파일로부터 원문 텍스트를 획득할 수 있다.
한편, 원문 파일 등록부(141)는 음성 형태의 원문 파일을 입력 받게 되면, 학습자가 순차통역 방식으로 통역을 수행하도록, 학습자가 설정한 재생시간에 따라 자동으로 원문 파일을 복수의 서브 그룹으로 분할할 수 있다.
순차통역은 통역용 문장이 완전히 출력된 후 통역을 실시하는 통역 방법이다. 즉, 학습자 단말기(100)에서 출력되는 원문 파일은, 미리 정해진 재생시간 동안 학습용 문장이 출력된 후 재생이 일시정지 될 수 있다. 그리고, 미리 정해진 녹음시간 동안 학습자 단말기(100)의 녹음기능이 활성화된 상태에서 응답정보를 입력받을 수 있다. 이후, 다시 재생이 시작되면 다음 차례의 학습용 문장이 음성으로 출력될 수 있다. 따라서, 원문 파일 등록부(141)는 한번의 재생시간 동안 학습자가 다양한 길이의 원문을 실습해 볼 수 있도록, 원문 파일을 그룹 단위로 구분할 수 있다.
다시 말해, 원문 파일 등록부(141)는 입력받은 원문 파일을 복수의 서브 그룹으로 분할할 수 있다. 각각의 서브 그룹은 적어도 하나의 문장을 포함할 수 있으며, 예를 들어, 원문 파일에 10개의 문장이 포함되어 있는 경우, 원문 파일 등록부(141)는 학습자의 UI 조작에 따라 원문 파일을 5개의 서브 그룹으로 분할할 수 있다. 그리고, 원문 파일 등록부(141)는 각각의 서브 그룹에 두 개의 문장이 포함되도록 원문 파일을 분할 수 있다. 다른 예로, 원문 파일 등록부(141)는 각각의 서브 그룹에 포함되는 문장의 개수를 서로 상이하게 설정할 수 있으며, 이를 위해 학습자는 각각의 서브 그룹의 재생시간을 설정할 수 있다. 이때, 재생시간은 학습자가 학습자 단말기(100)를 통해 원문 파일을 선택하는 경우, 어느 하나의 서브 그룹에 포함된 문장들이 모두 음성으로 출력되는 시간으로 결정될 수 있다. 즉, 학습자 단말기(100)는 원문 파일 등록부(141)에 의해 설정된 서브 그룹별 재생시간만큼 원문이 분할되어 재생되고, 재생시간이 종료되면 미리 정해진 시간 구간 동안 녹음 기능이 활성화되어 학습자의 음성을 녹음할 수 있다.
몇몇 다른 실시예에서, 원문 파일 등록부(141)는 학습자로부터 입력받은 분할 시간에 따라 원문 파일을 복수의 서브 그룹으로 분할할 수 있다. 일 예로, 원문 파일 등록부(141)는 학습자가 설정한 분할 시간(일 예로, 3분)에 관한 정보를 기초로 원문 파일을 3분 단위로 분할할 수 있다. 이때, 원문 파일 등록부(141)는 3분 단위로 분할되는 각각의 서브 그룹에 포함되는 문장이 완전한 문장으로 출력되도록 재생시간을 설정할 수 있다. 즉, 원문 파일 등록부(141)는 학습자에 의해 설정된 분할 시간을 기준으로 어느 하나의 서브 그룹의 문장들의 재생이 완전한 문장으로 종결되는 구간까지를 최종적인 재생시간으로 결정할 수 있다.
이에 따라, 학습자 단말기(100)는 원문 파일 등록부(141)에 의해 분할된 어느 하나의 서브 그룹에 포함된 문장들을 음성으로 출력할 수 있다. 이때, 제어부(140)는 미리 정해진 재생시간이 경과하면, 미리 정해진 녹음시간 동안 학습자의 음성을 입력받도록 입력부(120)를 제어할 수 있다. 이에 따라, 학습자는 원문 파일을 구성하는 어느 하나의 서브 그룹에 포함된 모든 문장들이 음성으로 출력된 이후에 통역을 수행하는 순차통역 자습 보조 방법을 제공받을 수 있다.
응답정보 생성부(142)는 원문 파일 또는 서브 그룹에 포함된 문장들에 대한 응답정보를 생성할 수 있다. 이와 관련하여, 도 3을 함께 참조하여 설명하기로 한다.
도 3은 학습자 단말기(100)에서 출력되는 화면의 일 예이다.
구체적으로, 응답정보 생성부(142)는 학습자의 UI 조작에 의해 원문 파일을 서브 그룹별로 재생되도록 제어하고, 각각의 서브 그룹의 재생이 종료될 때마다 통역을 위한 녹음 기능이 활성화되도록 제어할 수 있다. 이와 같은 방법으로, 응답정보 생성부(142)는 설정된 녹음 시간이 종료된 후 다음 서브 그룹의 재생이 시작되는 단계를 반복함으로써, 하나의 원문 파일에 대한 서브 그룹별 응답정보 또는 모든 서브 그룹의 응답정보가 통합된 전체응답정보를 생성할 수 있다. 이 과정에서, 제어부(140)는 원문 파일의 업로드 과정에서 학습자가 원문의 난이도와 길이를 고려하여 설정된 서브 그룹별 재생 속도에 따라 문장의 재생 속도가 제어되도록 할 수도 있다. 그리고, 제어부(140)는 미리 설정된 임계시간 동안 음성정보를 입력받지 못한 것으로 확인되면 경고음 또는 알림음이 출력되도록 제어할 수 있다.
여기서, 본 명세서에서 표현된 응답정보라 함은, 상술한 서브 그룹별 응답정보와 전체응답정보를 포함하는 것으로 정의하여 설명하기로 한다. 즉, 후술하는 통역 텍스트 생성부(143)는 서브 그룹별 응답정보를 기초로 서브 그룹별 통역 텍스트를 생성하거나, 전체응답정보를 기초로 원문 파일 전체에 대한 통역 텍스트를 생성할 수도 있다.
응답정보 생성부(142)는 학습자의 UI 조작에 따라 어느 하나의 서브 그룹에 포함된 문장들이 다시 재생될 때마다 응답정보를 생성함으로써, 하나의 서브 그룹에 대하여 복수의 응답정보를 생성할 수 있다. 응답정보 생성부(142)는 생성된 복수의 응답정보를 구분할 수 있는 번호와 해당 서브 그룹의 재생 회차에 따른 파일명을 부여할 수 있다. 이때, 제어부(140)는 학습자의 UI 조작에 따라 응답정보를 학습자가 청취할 수 있도록 제어할 수 있다. 이에, 학습자는 복수의 응답정보를 생성한 경우, 복수의 응답정보를 청취하여 복수의 응답정보 중 가장 만족스러운 응답정보를 해당 서브 그룹에 대한 응답정보로 선택할 수 있다. 응답정보 생성부(142)는 선택된 응답정보를 제외한 나머지 응답정보를 삭제할 수 있다.
통역 텍스트 생성부(143)는 응답정보를 문자화하여 통역 텍스트를 생성할 수 있다. 상술한 바와 같이, 응답정보는 응답정보 생성부(142)에 의해 생성되며, 학습자가 원문 파일에 포함된 문장들을 순차통역하는 과정에서 녹음되는 음성정보로 정의될 수 있다. 통역 텍스트 생성부(143)는 기 공지된 다양한 음성 문자화 기술들 중 어느 하나의 기술을 이용하여 응답정보를 문자화한 통역 텍스트를 생성할 수 있다.
이 과정에서, 통역 텍스트 생성부(143)는 학습자의 통역특징이 반영된 통역 텍스트를 생성할 수 있다.
종래의 음성 문자화 기술은 음성을 문자화할 수는 있으나, 입력된 음성의 특징을 반영할 수 없다는 문제점이 있다. 예를 들어, 학습자는 'I am going to English classes.'라는 원문을 들은 후 순차통역을 수행할 때, '나는 영어 수~업을 음~ 들으러 간다'라고 발화하는 경우, 종래의 음성 문자화 기술 또는 종래의 온라인 학습 서비스 제공 기술은 단순히 '나는 영어 수업을 들으러 간다'로 표시하는 기능만을 제공하고 있다. 이러한 종래 기술에 따라 학습자의 순차통역 결과를 평가하는 데에는 한계가 있다. 왜냐하면, 학습자의 순차통역을 평가하는데 있어, '수~업'과 같이 특정 음절을 지나치게 길게 발성하거나, '음~'과 같이 불필요하면서 의미가 없는 음성(간투사)을 발성하는 경우 원문의 의미는 비교적 정확하게 전달되지만, 매끄럽거나 좋은 통역이라고 평가할 수는 없기 때문이다. 다른 예로, '수업…'과 같이 일정 시간 음성이 입력되지 않은 '침묵'도 기존 기술에서는 표시되지 않으나, 통역 평가를 위해서는 '침묵'기호도 표시되어야 한다. 즉, 상술한 예시와 같이, 순차통역 과정에서 발생되는 학습자의 통역특징은 응답정보를 평가하는 데 있어 중요한 지표로 활용될 수 있으며, 본 발명에 따른 순차통역 자습 보조 방법을 제공하는 소프트웨어(애플리케이션)가 설치된 학습자 단말기(100)는 이러한 학습자의 통역특성이 반영된 통역 텍스트를 생성할 수 있다.
이를 위해, 통역 텍스트 생성부(143)는 응답정보를 분석하여 학습자의 통역특성에 따른 통역 지연 구간을 추출할 수 있다. 통역 지연 구간은 통역 텍스트 상에 특정한 기호로 표시되는 구간으로, 학습자가 순차통역을 수행하는 과정에서 일정 시간 구간 동안 원할하지 못한 통역이 수행되는 구간으로 정의될 수 있다.
통역 텍스트 생성부(143)는 순차통역 평가 시 통역 지연 구간이 발생한 원인을 구분하기 위한 침묵기호, 통역개시 지연기호 또는 특정음절 지속 기호를 생성하고, 생성된 침묵기호, 통역개시지연 기호 및 특정음절 지속 기호를 통역 텍스트상에 표시할 수 있다.
일 예로, 통역 텍스트 생성부(143)는 순차통역을 수행하는 과정에서 학습자가 통역을 수행하지 않는 것으로 확인되는 경우 통역 텍스트 상에서 해당 구간을 침묵기호로 표시할 수 있다. 다시 말해, 통역 텍스트 생성부(143)는 학습자로부터 입력되는 응답정보를 수신하는 도중에 학습자의 음성이 감지되지 않는 구간을 침묵기호, 예컨대 '…'로 표시할 수 있다. 이하에서는, 설명의 편의를 위하여, 통역 텍스트 상에 표시되는 침묵기호를 '…'로 정의하여 설명하기로 한다. 하지만, 침묵기호가 반드시 '…'이어야 할 필요는 없으며, 후술하는 다른 기호(통역개시 지연기호, 특정음절 지속기호)와 구분될 수 있는 다른 문자로도 대체될 수도 있다.
다른 예로, 통역 텍스트 생성부(143)는 원문이 출력된 후 통역을 개시하기까지 소요되는 시간 구간을 침묵기호와 구분되는 통역개시 지연기호로 표시할 수 있다. 이를 위해, 통역 텍스트 생성부(143)는 원문을 분할한 서브 그룹의 문장들이 출력된 후 순차통역을 시작하기까지의 시간, 다시 말해 서브 그룹의 문장들의 출력 종료시간과 응답정보의 입력 시작시간을 확인할 수 있다. 이때, 통역 텍스트 생성부(143)는 출력 종료시간과 입력 시작시간의 간격이 미리 설정된 임계시간을 초과하는 것으로 확인되는 경우 통역개시지연 기호를 생성할 수 있다.
통역 텍스트 생성부(143)에 의해 통역개시지연 기호가 생성되는 구체적인 예로, 서브 그룹의 문장들의 출력이 종료된 시간과 해당 문장들에 대한 응답정보의 발성 시작시간(또는 통역 텍스트의 생성 시간)과의 시간 간격이 3초이고, 미리 정해진 임계시간이 2초인 경우, 통역 텍스트 생성부(143)는 통역 텍스트의 앞 부분에 '='로 표현되는 통역개시 지연기호를 삽입할 수 있다. 따라서, 학습자는 통역 텍스트에 표시된 통역개시 지연기호를 확인하는 것만으로도 어느 문장에서 순차통역의 개시가 지연되는지에 대한 정보를 제공받을 수 있다. 이하에서는, 설명의 편의를 위하여, 통역 텍스트 상에 표시되는 통역개시 지연기호를 '='로 정의하여 설명하기로 한다. 하지만, 통역개시 지연기호가 반드시 '='이어야 할 필요는 없으며, 전술 또는 후술하는 다른 기호(침묵기호, 특정음절 지속기호)와 구분될 수 있는 다른 문자로도 대체될 수도 있다.
한편, 통역 텍스트 생성부(143)는 응답정보를 분석하여 특정 서브 그룹의 문장들의 순차통역을 수행하는 동안 학습자가 특정 음절을 늘어뜨려 발화하는 것으로 확인되면, 통역 텍스트 상에서 해당 구간을 특정음절 지속기호로 표시할 수 있다.
구체적으로는, 통역 텍스트 생성부(143)는 응답정보를 분석하여 특정 음절이 미리 정해진 기준시간 이상 지속되는 구간을 감지할 수 있다. 통역 텍스트 생성부(143)는 해당 구간을 표시하기 위한 특정음절 지속기호를 생성할 수 있으며, 예를 들어 특정음절 지속기호는 '~'로 표시될 수 있다. 이하에서는, 설명의 편의를 위하여, 통역 텍스트 상에 표시되는 특정음절 지속기호를 '~'로 정의하여 설명하기로 한다. 하지만, 특정음절 지속기호가 반드시 '~'이어야 할 필요는 없으며, 상술한 다른 기호(통역개시 지연기호, 침묵기호)와 구분될 수 있는 다른 문자로도 대체될 수도 있다.
요약하면, 통역 텍스트 생성부(143)는 응답정보를 문자화하여 통역 텍스트를 생성하되, 응답정보를 분석하여 학습자의 통역특징에 따른 통역 지연 구간이 감지되는 것으로 확인되면, 감지된 통역 지연 구간에 해당되는 위치에 통역 지연 기호를 삽입할 수 있다. 따라서, 학습자는 통역 텍스트에 표시된 통역 지연 기호(침묵기호, 통역개시 지연기호, 특정음절 지속기호)를 확인하는 것만으로도 원문에 대한 순차통역 과정에서 어느 부분에서 통역이 원할하지 못했는지에 대한 정보를 제공받을 수 있다.
몇몇 다른 실시예에서, 통역 텍스트 생성부(143)는 통역 지연 구간이 감지되는 시간이 통역 텍스트상에 반영되도록 제어할 수 있다.
이를 위해, 통역 텍스트 생성부(143)는 통역 지연 구간이 감지되는 시간 구간에 따라 통역 지연 기호(침묵기호, 통역개시 지연기호, 특정음절 지속기호)가 통역 텍스트 상에서 연속적으로 표시되도록 제어할 수 있다.
예를 들어, 통역 텍스트 생성부(143)는 서브 그룹의 문장들의 출력이 종료된 시간과 해당 문장들에 대한 응답정보의 발성 시작시간(또는 통역 텍스트의 생성 시간)과의 시간 간격이 3초이고, 미리 정해진 임계시간이 2초인 경우, 통역 텍스트 생성부(143)는 통역 텍스트의 앞 부분에 '='로 표현되는 통역개시 지연기호를 삽입할 수 있다. 이때, 통역 텍스트 생성부(143)는 서브 그룹의 문장들의 출력이 종료된 시간과 해당 문장들에 대한 응답정보의 발성 시작시간이 4초로 감지되는 경우, 통역 텍스트의 앞단에 통역개시 지연기호를 연속적으로 표시할 수 있다. 이 경우, 통역 텍스트에 반영되는 통역개시 지연기호는 '=='로 표시될 수 있다. 이와 유사한 방법으로, 통역 텍스트 생성부(142)는 침묵구간 및 특정음절 지속구간이 지속되는 시간 구간에 따라 침묵기호 및 특정음절 지속기호가 연속적으로 표시되도록 제어할 수 있다.
이에 따라, 학습자는 통역 텍스트에 표시된 지연기호가 연속적으로 표시되어 있는지를 확인하는 것만으로 통역의 유창성을 정량적으로 확인하는 것이 가능하다.
한편 상술한 실시예에서, 통역 텍스트 생성부(143)는 통역 지연 구간의 지속감지 구간이 1초씩 증가할 때 마다 하나의 통역 지연 기호를 연속하여 표시하는 것으로 설명하였으나, 감지 구간이 2초씩 증가할 때 마다 하나의 통역 지연 기호를 연속하여 표시하는 등, 원문 파일의 난이도, 학습자의 학습 역량, 학습자의 설정 등에 따라 지속감지 구간은 다양한 길이로 설정될 수 있음은 물론이다.
평가데이터 생성부(144)는 통역 지연 구간이 반영된 통역 텍스트를 평가하기 위한 평가데이터를 생성할 수 있다. 이때, 평가데이터는 통역 지연 구간의 총 발생횟수, 서브 그룹별 통역 지연 구간의 총 발생횟수/평균 발생횟수, 침묵 기호의 총 발생횟수, 서브 그룹별 침묵 기호의 총 발생횟수/평균 발생횟수, 특정음절 지속기호의 총 발생횟수, 서브 그룹별 특정음절 지속기호의 총 발생횟수/평균 발생횟수, 통역개시 지연기호의 총 발생횟수, 서브 그룹별 통역개시 지연기호의 총 발생횟수/평균 발생횟수 등에 대한 정보를 포함할 수 있다. 즉, 평가데이터 생성부(144)는 통역 텍스트를 분석하여 침묵구간, 침묵기호 및 특정음절 지속기호의 발생 횟수를 카운팅할 수 있다. 또한, 평가데이터 생성부(144)는 원문 전체의 통역개시 지연 시간의 평균과, 서브 그룹별 통역개시 지연 시간을 산출하여 평가데이터에 포함시킬 수 있다.
또한, 평가데이터는 통역 누락률 및 추가율에 대한 정보 또는 누락 개수 및 추가 개수에 대한 정보 중 적어도 하나의 정보를 더 포함할 수 있다. 이를 위해, 평가데이터 생성부(144)는 통역 텍스트를 원문 파일을 문자화한 원문 텍스트와 비교하여 누락률 및 추가율, 또는 누락 개수 및 추가 개수를 산출할 수 있다.
이 과정에서, 평가데이터 생성부(144)는 원문 텍스트의 단어가 통역 텍스트에 표현되어 있는지를 판단한 결과에 따라 해당 원문에 대한 누락률 및 추가율, 또는 누락 개수 및 추가 개수를 산출할 수 있다. 또는, 평가데이터 생성부(144)는 원문 텍스트의 총 음절 수와 통역 텍스트의 총 음절 수를 비교하여 누락률 및 추가율, 또는 누락 개수 및 추가 개수를 산출할 수도 있다. 예를 들어, 평가데이터 생성부(144)는 원문 텍스트의 총 단어수와, 원문 텍스트를 구성하는 단어가 통역 텍스트에서 누락되거나 추가된 개수인 누락 개수 및 추가 개수를 산출하고, 원문 텍스트의 총 단어수와 산출된 누락 개수(및 추가 개수)와의 비율을 누락률 및 추가율로 산출하거나, 원문 텍스트의 총 음절 수와 통역 텍스트의 총 음절 수의 비율을 누락률 및 추가율로 산출할 수 있다. 여기서, 누락률 및 추가율, 또는 누락 개수 및 추가 개수는 해당 서브 그룹의 문장들을 모두 통역했을 때 발생한 누락률 및 추가율, 또는 누락 개수 및 추가 개수와, 모두 통역하지 못했을 때 발생한 누락률 및 추가율, 또는 누락 개수 및 추가 개수가 모두 포함될 수 있다.
다른 예로, 평가데이터 생성부(144)는 원문 파일을 문자화한 원문 텍스트에 대한 자동기계번역문을 획득하여 표시할 수 있다. 평가데이터 생성부(144)는 통번역 서비스를 제공하는 별도의 서버에 접속하여 원문 텍스트에 대한 자동기계번역문을 획득할 수 있다.
평가데이터 생성부(144)는 원문 파일을 문자화한 원문 텍스트와 응답정보를 문자화한 통역 텍스트를 함께 표시할 수 있으며, 원문 텍스트에 대한 자동기계번역문 및 통역 텍스트의 누락률 및 추가율, 또는 누락 개수 및 추가 개수도 함께 표시할 수 있다. 이때, 원문 텍스트에 대한 자동기계번역문은 단순 참고용으로 활용될 수 있다.
이후, 평가데이터 생성부(144)는 누적 생성된 평가 데이터를 도표화하여 제공할 수 있다.
이때, 제어부(140)는 산출된 누락률 및 추가율에 대한 정보 또는 누락 개수 및 추가 개수에 대한 정보를 분석하여, 다음 차례에 출력되는 서브 그룹의 문장들의 음성 재생 속도가 가변되도록 제어할 수 있다. 구체적인 일 예로, 제어부(140)는 현재까지 산출된 서브 그룹별 누락률 및 추가율에 대한 평균 누락률 및 추가율을 산출하고, 평균 누락률 및 추가율이 미리 정해진 임계값을 초과하는지를 확인할 수 있다. 제어부(140)는 평균 누락률 및 추가율이 임계값을 초과하는 것으로 확인되면, 다음 차례에 선택되어 출력부(130)로 출력되는 서브 그룹의 문장들의 음성 재생 속도를 늦추도록 제어할 수 있다. 다른 예로, 제어부(140)는 현재 음성으로 출력되는 어느 하나의 서브 그룹의 문장들의 누락 개수 및 추가 개수가 미리 정해진 임계값을 초과하는 경우, 다음 차례에 선택되어 출력부(130)를 통해 음성으로 출력되는 서브 그룹의 문장들의 음성 재생 속도가 가변되도록 제어할 수 있다. 누락률 및 추가율, 또는 누락 개수 및 추가 개수가 높다는 것은 학습자가 해당 서브 그룹에 포함된 학습용 문장을 순차통역하는 과정에 어려움이 있다는 의미이므로, 제어부(140)는 이후에 출력되는 서브 그룹의 문장들의 출력 속도를 조절하여 학습자의 학습 효과를 향상시킬 수 있다.
또는, 제어부(140)는 원문 파일의 재생 전에, 학습자로부터 서브 그룹의 문장 출력 속도 변경 기능을 활성화할 것인지 여부에 대한 사전 설정 신호를 수신할 수 있다. 이 과정에서, 제어부(140)는 원문 파일의 재생 전, 학습자로부터 수신된 사전 설정 신호를 기초로 해당 기능을 활성화하는 것으로 승인된 경우에만, 평균 누락률 및 추가율을 임계값과 비교하여 다음 차례에 선택되어 음성 출력부(131)로 출력되는 서브 그룹의 문장들의 음성 재생 속도를 변경할 수 있다. 한편, 상술한 바와 같이, 제어부(140)는 누락률 및 추가율, 또는 누락 개수 및 추가 개수의 계산과 무관하게 원문 파일의 업로드 과정에서 학습자가 원문의 난이도와 길이를 고려하여 설정된 서브 그룹별 재생 속도에 따라 문장의 재생 속도가 제어되도록 할 수도 있다.
도 4 내지 도 5는 상술한 기능들이 구비된 학습자 단말기(100)에서 출력되는 화면의 예시도이다.
먼저, 도 4를 참조하면, 학습자 단말기(100)에 설치되는 순차통역 자습 보조 방법을 제공하는 소프트웨어(애플리케이션)는 응답정보의 분석 결과를 확인할 수 있는 UI를 제공할 수 있다.
학습자 단말기(100)는 학습자의 UI 조작에 따라 원문 파일에 대하여 등록되는 서브 그룹별 응답정보 중 어느 하나의 응답정보를 출력하거나, 원문 파일 전체에 대한 응답정보를 음성으로 출력할 수 있다.
이때, 통역 텍스트 생성부(143)는 학습자의 응답정보를 기초로 생성된 통역 텍스트를 원문 파일을 문자화한 원문 텍스트와 함께 표시할 수 있다. 이때, 통역 텍스트 생성부(143)는 원문 텍스트 하단에 통역 텍스트를 표시할 수 있는데, 원문의 출력이 종료된 시점으로부터 순차통역이 개시되기까지 소요된 시간, 즉 응답정보가 녹음되기까지 소요되는 시간을 별도로 표시할 수 있다.
그리고, 통역 텍스트 생성부(143)는 응답정보를 분석하여 학습자의 통역 특징이 반영된 구간, 즉 통역개시 지연구간, 특정음절 지속구간 및 침묵구간 중 적어도 하나의 구간을 감지하는 경우, 이를 별도의 기호로 통역 텍스트에 표시할 수 있다. 이와 관련하여, 도 5를 함께 참조하여 설명하기로 한다.
도 5는 학습자 단말기(100)에서 학습자의 통역특성이 반영된 통역 텍스트가 출력되는 일 예이다.
구체적으로, 통역 텍스트 생성부(143)는 응답정보를 분석하여 통역 텍스트 상에 통역개시지연기호, 침묵기호 및 특정음절 지속기호 중 어느 하나를 기호로 표시할 수 있다. 예를 들어, 통역 텍스트 생성부(143)는 원문의 출력 종료시간과 응답정보의 입력 시작시간 사이의 시간 간격 또는 음성이 감지되지 않는 시간 구간이 미리 정해진 임계구간을 벗어난 것으로 확인되면 통역개시 지연기호(A)를 생성할 수 있다. 또는, 통역 텍스트 생성부(143)는 통역 중간에 음성이 감지되지 않은 구간을 통역 텍스트 상에 침묵기호(B)로 표시되도록 제어할 수 있다. 또한, 통역 텍스트 생성부(143)는 응답정보를 분석하여 학습자의 음성에서 특정한 음절이 일정시간 이상 지속되는 구간을 통역 텍스트 상에 특정음절 지속기호(C)로 표시할 수 있다.
예를 들어, 응답정보를 분석한 결과, 통역 지연 구간이 반영된 통역 텍스트가 '===나라를…바~로 세워야 합니다'로 생성된 경우, 학습자는 통역 지연 구간이 반영된 통역 텍스트를 확인하는 것만으로 어느 부분에서 통역이 매끄럽지 않았는지를 판단할 수 있다. 즉, '나라' 앞에 표시된 '==='기호는 통역개시 지연기호(A)이고, 통역 텍스트의 가장 앞부분에 표시되어 있으므로, 순차통역의 발화 시점이 기준시간보다 느렸음을 확인할 수 있다. 그리고, '나라' 뒤에 표시된 '…'기호는 침묵기호(B)이므로, 통역 중간에 침묵이 발생한 것을 확인할 수 있다. 또한, '바로' 사이에 표시된 '~'기호는 특정음절 지속기호(C)이므로, 특정음절이 불필요하게 지속됨으로 인해 유창성이 떨어지는 통역임을 확인할 수 있다. 이 과정에서, 통역개시 지연기호가 연속적으로 세 개가 표시되었다는 것은, 원문의 출력 후 통역 음성이 발화되기까지 소요되는 시간이 미리 정해진 임계시간보다 3초 이후에 녹음되었음을 의미하며, 학습자는 연속적으로 표기되는 통역 지연 기호의 개수를 확인하는 것만으로도 통역이 지연되는 시간의 길이를 정량적으로 판단할 수 있다.
도 6은 학습자 단말기(100)를 이용하여 수행되는 본 발명의 일 실시예에 따른 순차통역 자습 보조 방법의 개략적인 흐름이 도시된 순서도이다.
학습자 단말기(100)는 순차통역 방법에 따른 통역 과정을 수행하기 위하여, 순차통역 자습에 필요한 원문 파일을 등록할 수 있다(610).
학습자 단말기(100)는 학습자의 UI 조작에 따라 미리 저장된 파일 찾기, URL 연결 또는 직접 녹음 중 어느 하나의 방법에 따라 원문 파일을 입력받을 수 있다. 이 과정에서, 학습자 단말기(100)는 원문 파일을 복수의 서브 그룹으로 분할하고, 서브 그룹별 재생시간을 설정함으로써, 각각의 서브 그룹에 포함되는 문장의 개수를 결정할 수 있다.
학습자 단말기(100)는 서브 그룹별로 분할된 원문 파일을 이용하여 미리 정해진 재생시간 동안 원문을 음성으로 출력하고, 재생시간이 경과하면 미리 정해진 녹음시간 동안 학습자로부터 통역된 응답정보를 음성으로 입력받을 수 있다(620).
학습자 단말기(100)는 녹음시간 동안 입력된 음성 응답정보를 문자화한 통역 텍스트를 생성하되, 학습자의 통역 특성이 반영된 통역 지연 구간을 통역 텍스트에 표시할 수 있다(630).
이때, 학습자 단말기(100)는 원문을 문자화한 원문 텍스트 하단에 통역 텍스트를 표시할 수 있다. 일 예로, 학습자 단말기(100)는 원문 텍스트가 통역 텍스트보다 화면의 상단에 표시되도록 출력할 수 있다.
또한, 학습자 단말기(100)는 응답정보를 분석하여 통역 텍스트 상에 통역개시지연기호, 침묵기호 및 특정음절 지속기호 중 어느 하나를 기호로 표시할 수 있다. 예를 들어, 학습자 단말기(100)는 원문의 출력 종료시간과 응답정보의 입력 시작시간 사이의 시간 간격 또는 음성이 감지되지 않는 시간 구간이 미리 정해진 임계구간을 벗어난 것으로 확인되면 통역개시 지연기호를 생성할 수 있다. 또는, 학습자 단말기(100)는 통역 중간에 음성이 감지되지 않은 구간을 통역 텍스트 상에 침묵기호로 표시되도록 제어할 수 있다. 또한, 학습자 단말기(100)는 응답정보를 분석하여 학습자의 음성에서 특정한 음절이 일정시간 이상 지속되는 구간을 통역 텍스트 상에 특정음절 지속기호로 표시할 수 있다.
이후, 학습자 단말기(100)는 통역 지연 구간이 표시된 통역 텍스트를 분석하여 순차통역 결과를 평가하기 위한 평가데이터를 생성할 수 있다(640). 평가데이터는 통역 지연 구간의 종류별 총 횟수, 평균 출현 빈도수, 누락률 및 추가율, 누락 개수 및 추가 개수에 대한 정보를 포함할 수 있다.
이와 같은, 순차통역 자습 보조 방법을 제공하는 기술은 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.
상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거니와 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다.
컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD 와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.
프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상에서는 실시예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (14)

  1. 학습자가 소지하는 학습자 단말기를 이용한 순차통역 자습 보조 방법에 있어서,
    순차통역 자습을 위한 원문 파일을 입력 받는 단계;
    미리 정해진 재생시간 동안 상기 원문 파일을 음성으로 출력하고, 상기 재생시간이 경과하면 미리 정해진 녹음시간 동안 상기 학습자에 의해 수행되는 순차통역 과정에서 발생되는 응답정보를 음성으로 입력받는 단계;
    상기 응답정보를 문자화한 통역 텍스트를 생성하고, 상기 응답정보를 분석하여 상기 학습자의 통역특성을 나타내는 통역 지연 구간이 발생하는 것으로 확인되면, 침묵구간, 통역개시 지연구간 및 특정음절 지속구간 중 적어도 하나의 구간을 상기 통역 텍스트 상에 표시하는 단계; 및
    상기 통역 텍스트를 분석하여 상기 학습자에 의해 수행된 순차통역 결과를 자체 평가하기 위한 평가데이터를 생성하는 단계를 포함하는, 순차통역 자습 보조 방법.
  2. 제1항에 있어서,
    상기 학습자의 통역특성을 나타내는 침묵구간을 상기 통역 텍스트 상에 표시하는 단계는,
    상기 응답정보를 문자 텍스트로 변환하는 단계;
    상기 응답정보를 기초로 침묵 시간이 미리 정해진 기준시간 이상 지속되는 구간을 감지하는 단계;
    상기 구간에 대응되는 침묵기호를 생성하는 단계; 및
    상기 문자 텍스트 사이에 상기 침묵기호가 반영된 상기 통역 텍스트를 생성하는 단계를 포함하는, 순차통역 자습 보조 방법.
  3. 제1항에 있어서,
    상기 평가데이터는,
    상기 침묵기호가 상기 통역 텍스트에 삽입된 횟수, 문장별 평균 침묵기호의 출현 횟수에 대한 정보를 포함하는, 순차통역 자습 보조 방법.
  4. 제1항에 있어서,
    상기 학습자의 통역특성을 나타내는 특정음절 지속구간을 상기 통역 텍스트 상에 표시하는 단계는,
    상기 응답정보를 문자 텍스트로 변환하는 단계;
    상기 응답정보를 분석하여 특정 음절이 미리 정해진 기준시간 이상 지속되는 구간을 감지하는 단계;
    상기 구간에 대응되는 특정음절 지속기호를 생성하는 단계; 및
    상기 문자 텍스트 사이에 상기 특정음절 지속기호가 반영된 상기 통역 텍스트를 생성하는 단계를 포함하는, 순차통역 자습 보조 방법.
  5. 제4항에 있어서,
    상기 평가데이터는,
    상기 특정음절 지속기호가 상기 통역 텍스트에 삽입된 횟수, 문장별 평균 특정음절 지속기호의 출현 횟수에 대한 정보를 포함하는, 순차통역 자습 보조 방법.
  6. 제1항에 있어서,
    상기 학습자의 통역특성을 나타내는 통역개시 지연구간을 상기 통역 텍스트 상에 표시하는 단계는,
    상기 원문 파일의 출력 종료시간과 상기 응답정보의 입력 시작시간을 확인하는 단계;
    상기 출력 종료시간과 상기 입력 시작시간의 시간 간격을 나타내는 통역개시 지연기호를 생성하는 단계; 및
    상기 통역개시 지연기호가 반영된 상기 통역 텍스트를 생성하는 단계를 포함하는, 순차통역 자습 보조 방법.
  7. 제6항에 있어서,
    상기 통역개시 지연기호를 생성하는 것은,
    상기 출력 종료시간과 상기 입력 시작시간의 시간 간격이 미리 정해진 임계시간을 초과하는 것으로 확인되는 경우 생성되며,
    상기 통역개시 지연 기호는 상기 통역 텍스트의 앞단에 표시되는 것을 특징으로 하는, 순차통역 자습 보조 방법.
  8. 제6항에 있어서,
    상기 평가데이터는,
    상기 통역개시 지연기호가 상기 통역 텍스트에 삽입된 횟수에 대한 정보와, 상기 출력 종료시간과 상기 입력 시작시간의 시간 간격의 길이를 나타내는 정보를 포함하는, 순차통역 자습 보조 방법.
  9. 제1항에 있어서,
    상기 평가데이터는 누락률 및 추가율에 대한 정보 또는 누락 개수 및 추가 개수에 대한 정보 중 적어도 하나의 정보를 포함하고,
    상기 평가데이터를 생성하는 것은,
    상기 원문 파일을 원문 텍스트로 변환하고, 상기 원문 텍스트와 상기 통역 텍스트를 비교한 결과에 따라 상기 누락률 및 추가율에 대한 정보 또는 상기 누락 개수 및 추가 개수에 대한 정보를 산출하는 것을 특징으로 하는, 순차통역 자습 보조 방법.
  10. 제9항에 있어서,
    상기 원문 파일을 음성으로 출력하는 것은,
    상기 누락률 및 추가율에 대한 정보 또는 상기 누락 개수 및 상기 추가 개수에 대한 정보 중 적어도 하나의 정보의 히스토리를 분석하여, 상기 미리 정해진 녹음시간이 경과한 후, 다음 차례에 출력되는 원문 파일의 음성 재생 속도를 가변시키는 것을 특징으로 하는, 순차통역 자습 보조 방법.
  11. 제9항에 있어서,
    상기 학습자 단말기는,
    상기 원문 텍스트를 화면에 표시하고, 상기 통역 텍스트를 상기 원문 텍스트의 하단에 표시하되, 상기 미리 정해진 재생시간 동안 상기 원문 파일의 출력이 종료된 시점으로부터 상기 응답정보가 개시되기까지 소요된 시간을 상기 원문 텍스트와 상기 통역 텍스트 사이에 표시하는 것을 특징으로 하는, 순차통역 자습 보조 방법.
  12. 제1항에 있어서,
    상기 미리 정해진 재생시간 동안 원문 파일을 음성으로 출력하는 것은,
    상기 학습자 단말기가 미리 정해진 재생시간 동안 상기 원문 파일을 재생하도록, 상기 학습자에 의해 설정되는 재생시간을 기초로 상기 원문 파일을 적어도 하나의 문장으로 구성된 복수의 서브 그룹으로 분할하고,
    상기 재생시간 동안 어느 하나의 서브 그룹에 포함된 모든 문장들을 음성으로 출력하고, 상기 재생시간이 경과하면 미리 정해진 녹음시간 동안 상기 학습자로부터 입력되는 음성을 녹음하여 서브 그룹별 응답정보를 생성하는, 순차통역 자습 보조 방법.
  13. 제12항에 있어서,
    상기 학습자 단말기는,
    상기 미리 정해진 녹음시간이 경과하면 다음 차례의 서브 그룹에 포함된 모든 문장들을 음성으로 출력한 후 상기 학습자로부터 입력되는 음성을 녹음하는 과정을 반복하여, 상기 원문 파일을 구성하는 각각의 서브 그룹별 응답정보 및 모든 서브 그룹별 응답정보가 통합된 전체응답정보를 생성하며,
    상기 응답정보는 상기 서브 그룹별 응답정보 및 상기 전체응답정보 중 적어도 하나를 포함하는, 순차통역 자습 보조 방법.
  14. 제1항 내지 제13항 중 어느 하나의 항에 따른 순차통역 자습 보조 방법을 수행하기 위한, 컴퓨터 프로그램이 기록된 컴퓨터로 판독 가능한 기록매체.
KR1020170154496A 2017-11-20 2017-11-20 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체 KR102060229B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170154496A KR102060229B1 (ko) 2017-11-20 2017-11-20 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170154496A KR102060229B1 (ko) 2017-11-20 2017-11-20 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체

Publications (2)

Publication Number Publication Date
KR20190057509A true KR20190057509A (ko) 2019-05-29
KR102060229B1 KR102060229B1 (ko) 2020-02-20

Family

ID=66672854

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170154496A KR102060229B1 (ko) 2017-11-20 2017-11-20 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체

Country Status (1)

Country Link
KR (1) KR102060229B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220053412A (ko) * 2020-10-22 2022-04-29 이화여자대학교 산학협력단 순차통역 학습을 위한 평가 방법, 이를 수행하기 위한 기록 매체 및 장치
WO2023085736A1 (ko) * 2021-11-09 2023-05-19 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
KR102546559B1 (ko) * 2022-03-14 2023-06-26 주식회사 엘젠 영상 콘텐츠 자동 번역 더빙 시스템

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220029912A (ko) * 2020-09-02 2022-03-10 삼성전자주식회사 통역 상황 정보를 제공하는 방법 및 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050119808A (ko) 2004-06-17 2005-12-22 윤병원 음성인식을 이용한 다국어 통역/학습 장치 및 방법과 그저장매체
KR100981426B1 (ko) * 2010-02-26 2010-09-10 김한일 강제 반복 청취를 통한 영어 듣기 능력 향상 장치
KR20120083104A (ko) * 2011-01-17 2012-07-25 엘지전자 주식회사 멀티미디어 장치의 음성인식을 통한 텍스트 입력 방법 및 그에 따른 멀티미디어 장치
KR101438087B1 (ko) 2012-07-03 2014-09-17 (주)아이티씨교육 음성인식엔진을 이용한 순차 및 동시 통역 테스트에 따른 외국어 문장 패턴 내면화 강화 및 인출 훈련 서비스 제공 방법
KR20170069778A (ko) * 2015-12-11 2017-06-21 주식회사 미티영 외국어 학습을 위한 단말장치와 그의 외국어 학습 화면 출력방법, 기록매체, 프로그램

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050119808A (ko) 2004-06-17 2005-12-22 윤병원 음성인식을 이용한 다국어 통역/학습 장치 및 방법과 그저장매체
KR100981426B1 (ko) * 2010-02-26 2010-09-10 김한일 강제 반복 청취를 통한 영어 듣기 능력 향상 장치
KR20120083104A (ko) * 2011-01-17 2012-07-25 엘지전자 주식회사 멀티미디어 장치의 음성인식을 통한 텍스트 입력 방법 및 그에 따른 멀티미디어 장치
KR101438087B1 (ko) 2012-07-03 2014-09-17 (주)아이티씨교육 음성인식엔진을 이용한 순차 및 동시 통역 테스트에 따른 외국어 문장 패턴 내면화 강화 및 인출 훈련 서비스 제공 방법
KR20170069778A (ko) * 2015-12-11 2017-06-21 주식회사 미티영 외국어 학습을 위한 단말장치와 그의 외국어 학습 화면 출력방법, 기록매체, 프로그램

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220053412A (ko) * 2020-10-22 2022-04-29 이화여자대학교 산학협력단 순차통역 학습을 위한 평가 방법, 이를 수행하기 위한 기록 매체 및 장치
WO2023085736A1 (ko) * 2021-11-09 2023-05-19 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
KR102546559B1 (ko) * 2022-03-14 2023-06-26 주식회사 엘젠 영상 콘텐츠 자동 번역 더빙 시스템

Also Published As

Publication number Publication date
KR102060229B1 (ko) 2020-02-20

Similar Documents

Publication Publication Date Title
US11527174B2 (en) System to evaluate dimensions of pronunciation quality
KR101674851B1 (ko) 텍스트 데이터와 오디오 데이터 간의 맵핑 자동 생성
KR101826714B1 (ko) 말하기 학습 기능을 구비한 외국어 학습 시스템 및 외국어 학습 방법
KR20190057509A (ko) 순차통역 자습 보조 방법 및 이를 수행하기 위한 기록매체
JP2002503353A (ja) 音読及び発音指導装置
JP2001159865A (ja) 対話型語学指導のための方法および装置
JPWO2009025155A1 (ja) 音声再生方法、音声再生装置およびコンピュータ・プログラム
US20190079918A1 (en) Controlling playback of speech-containing audio data
CN111739556B (zh) 一种语音分析的系统和方法
US11735204B2 (en) Methods and systems for computer-generated visualization of speech
KR102414626B1 (ko) 외국어 발음 훈련 및 평가 시스템
US20230419847A1 (en) System and method for dual mode presentation of content in a target language to improve listening fluency in the target language
KR20190049263A (ko) 순차통역 수업 학습자를 위한 수업 보조 방법 및 이를 수행하기 위한 기록매체
KR101920653B1 (ko) 비교음 생성을 통한 어학학습방법 및 어학학습프로그램
KR101957043B1 (ko) 동시통역 수업 교수자를 위한 수업 보조방법 및 이를 수행하기 위한 기록매체
KR101957045B1 (ko) 동시통역 자습 보조방법 및 이를 수행하기 위한 기록매체
JP6155102B2 (ja) 学習支援装置
KR101979114B1 (ko) 순차통역 수업 교수자를 위한 수업 보조 방법 및 이를 수행하기 위한 기록매체
KR102585031B1 (ko) 실시간 외국어 발음 평가시스템 및 방법
KR100979561B1 (ko) 대화형 언어 학습 장치
KR101957044B1 (ko) 동시통역 수업 학습자를 위한 수업 보조방법 및 이를 수행하기 위한 기록매체
Zhang et al. JustSpeak: Automated, user-configurable, interactive agents for speech tutoring
KR102288531B1 (ko) 반복 학습을 통한 중국어 강의 콘텐츠 제공 방법 및 이를 위한 장치
KR20120044606A (ko) 어학 학습 지원 시스템 및 어학 학습 지원 방법
JP6957069B1 (ja) 学習支援システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)