KR20000063615A - Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same - Google Patents

Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same Download PDF

Info

Publication number
KR20000063615A
KR20000063615A KR1020000042971A KR20000042971A KR20000063615A KR 20000063615 A KR20000063615 A KR 20000063615A KR 1020000042971 A KR1020000042971 A KR 1020000042971A KR 20000042971 A KR20000042971 A KR 20000042971A KR 20000063615 A KR20000063615 A KR 20000063615A
Authority
KR
South Korea
Prior art keywords
audio data
data
character
audio
screen
Prior art date
Application number
KR1020000042971A
Other languages
Korean (ko)
Inventor
최원용
이병철
정상현
최원식
Original Assignee
최원용
주식회사 코스모탄
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 최원용, 주식회사 코스모탄 filed Critical 최원용
Priority to KR1020000042971A priority Critical patent/KR20000063615A/en
Publication of KR20000063615A publication Critical patent/KR20000063615A/en

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • G11B27/007Reproducing at a different information rate from the information rate of recording reproducing continuously a part of the information, i.e. repeating
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • G11B2020/10546Audio or video recording specifically adapted for audio data

Landscapes

  • Electrically Operated Instructional Devices (AREA)

Abstract

PURPOSE: A range designated audio replaying method is provided to enable a partial replay of an audio data corresponding to the range of specified characters which are displayed on a screen. CONSTITUTION: A data file having audio data and character data corresponding to the audio data is read into a memory. The audio data is replayed via a speaker into voice, and the character data is displayed with characters on an output screen. A user directs a range replay while designating a desired range from the displayed characters on the screen by using designating means. The audio data corresponding to the characters in the designated range is read out from the memory and replayed through the speaker via a certain signal treatment. In listening to a foreign language, the user can replay of a certain part that is difficult to understand, and the efficiency of the study can be enhanced.

Description

구간 지정된 문자에 대응하는 오디오신호의 재생방법과 이를 위한 재생장치{Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same}Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same}

본 발명은 오디오신호의 재생방법에 관한 것이다. 보다 구체적으로는, 오디오와 문자를 각각 스피커와 디스플레이화면을 통해 재생하는 오디오 재생장치에 있어서 원하는 구간의 문자를 임의로 지정하여 재생지시를 하면 지정된 구간의 문자에 대응하는 오디오를 재생해주는 방법과 이를 위한 장치에 관한 것이다.The present invention relates to a method for reproducing an audio signal. More specifically, in an audio reproducing apparatus for reproducing audio and text through a speaker and a display screen, a method of reproducing an audio corresponding to a character of a designated section is provided when the character of a desired section is designated and played back. Relates to a device.

예컨대, 영화감상을 하다가 특정 부분의 장면을 다시 보고 싶은 경우, 노래가사를 익히기 위한 경우, 혹은 외국어의 청취학습 중에 잘 들리지 않는 부분만을 선택적으로 재생하기 위한 경우가 있다. 이때, 기록매체에 기록된 데이터를 전부 재생할 필요 없이 사용자가 원하는 부분만을 재생해줄 수 있어야 한다.For example, when watching a movie while watching a certain part of the scene again, in order to learn a song lyrics, or to selectively reproduce only a part that is hard to hear during listening learning of a foreign language. At this time, it is necessary to be able to reproduce only the portion desired by the user without having to reproduce all the data recorded on the recording medium.

위와 같은 요구에 부응하기 위하여, 이른바 지정구간 재생방법이나 이를 위한 장치에 관한 수많은 제안들이 있었다. 과거에는 주로 카세트 테이프 레코더나 VCR 장치 등에서의 구간 지정 재생기술이 많이 제안되었다. 하지만 최근에는 인터넷의 활성화와 멀티미디어 기록매체의 활용도가 높아짐에 따라, 컴퓨터나 기타 여러 가지 멀티미디어 재생기(이하 '컴퓨터'라 함) 등에서의 구간 지정 재생기술이 주목을 받고 있다.In order to meet the above demands, there have been numerous proposals on the so-called reproducing method of a designated section or a device therefor. In the past, a large number of section-specific playback techniques have been proposed, mainly in cassette tape recorders and VCR devices. Recently, however, as the use of the Internet and the increasing utilization of multimedia recording media, segment-specific playback technologies in computers and other multimedia players (hereinafter referred to as "computers") have attracted attention.

구간 지정 재생기술은 각 재생장치가 갖는 특성에 따라 근본적으로 다른 개념에 따른다. 기록매체의 종류와 그에 따른 특정 구간에의 접근 방식, 기록매체에 기록된 신호의 형태 즉, 아날로그 신호인지 혹은 디지털 신호인지 여부 등에 따라 지정된 구간의 신호 재생 방식은 특수성을 갖는다. 컴퓨터장치를 이용한 멀티미디어 데이터의 구간 지정 재생과 관련해서도 그 자체의 특수성으로 인해 다른 재생장치와는 전혀 다른 방식으로 접근해야 한다.The section-specific reproduction technology follows a fundamentally different concept depending on the characteristics of each playback device. Depending on the type of recording medium and its approach to a particular section, the type of signal recorded on the recording medium, i.e. whether it is an analog signal or a digital signal, the signal reproduction method of the designated section has particularity. With regard to the segmented reproduction of multimedia data using a computer device, its specificity requires a completely different approach from other playback devices.

컴퓨터는 계속적으로 그 성능이 향상되면서 최근에는 멀티미디어 재생기로서의 기능을 훌륭히 수행하고 있다. 컴퓨터가 갖는 멀티미디어 재생기로서의 기능을 효과적으로 활용할 수 있는 대표적인 예가 외국어 학습장치로 이용하는 것이다. 컴퓨터용 외국어 학습용 컨텐츠는 일반적으로는 파일형태로 제공된다. 이러한 파일들은 인터넷을 통하여 제공받거나 혹은 여러 가지 형태의 광 혹은 자기 기록매체 등을 통해서도 제공된다.As computers continue to improve in performance, they have recently performed well as multimedia players. A representative example of effectively utilizing the functions of a multimedia player of a computer is to use it as a foreign language learning device. Foreign language learning content for computers is generally provided in the form of a file. These files may be provided via the Internet or through various types of optical or magnetic recording media.

특히, 외국어 청취력 학습용 컨텐츠는 기본적으로는 특정 내용에 대한 해당 외국어로 발음된 오디오 데이터와 그 외국어로 된 외국어문자 데이터를 포함한다. 위 내용의 번역문에 관한 모국어문자 데이터나 학습에 도움을 줄 수 있는 위 특정 내용에 관련된 비디오 데이터를 더 포함할 수 있다. 따라서, 컴퓨터에서 외국어 학습용 파일을 재생시킬 때, 스피커로는 오디오 데이터를 재생하고 이에 병행하여 화면으로는 대응되는 문자 데이터를 디스플레이 하는 것이 일반적이다. 멀티미디어 데이터의 구성에 따라서는 번역문이나 비디오도 디스플레이 해 주기도 한다.In particular, the content for learning foreign language listening ability basically includes audio data pronounced in a corresponding foreign language for a specific content and foreign language character data in the foreign language. It may further include native-language data on the translations of the above contents or video data related to the above specific contents that may help learning. Therefore, when playing a file for learning a foreign language on a computer, it is common to reproduce audio data with a speaker and display corresponding character data on a screen in parallel. Depending on the structure of the multimedia data, translations or videos may be displayed.

그런데, 종래에는 멀티미디어 데이터를 컴퓨터에서 재생함에 있어서 이를 파일단위로 재생할 수 있었을 뿐, 파일의 내용 일부만을 선택적으로 재생하는 기능은 제공되지 못했다. 다시 듣고자하는 부분이 그 파일의 일부 내용인 경우에도 파일 전체의 내용을 다시 들어야 하는 것은 시간낭비를 초래한다. 특히, 외국어 청취력 학습장치에 있어서 그 출력화면에 디스플레이된 문자를 이용하여 잘 들리지 않는 특정 부분만을 지정하여 그에 대응하는 오디오만을 재생하는 기능은 학습 효과를 높이는 데 매우 유용하게 작용할 수 있다. 하지만, 종래에는 이와 같은 기능을 제공해주는 기술이 알려진 바 없다.However, in the related art, the multimedia data may be reproduced in units of files when the multimedia data is reproduced on a computer, and a function of selectively reproducing only a part of the contents of the file is not provided. Even if the part you want to listen to is part of the file, it is a waste of time to listen to the entire file again. In particular, in a foreign language listening ability learning apparatus, a function of designating only a specific part which is hard to be heard using a character displayed on the output screen and playing only audio corresponding thereto may be very useful for enhancing the learning effect. However, there is no known technology that provides such a function in the related art.

본 발명은 위와 같은 요구에 응하기 위하여, 출력화면에 디스플레이된 문자의 범위를 특정하여 그에 대응하는 오디오만을 부분적으로 재생할 수 있는 구간 지정 오디오 재생방법을 제공하는 것을 제 1의 목적으로 한다.SUMMARY OF THE INVENTION In order to meet the above requirements, it is a first object of the present invention to provide a method for reproducing a section designating audio that can specify a range of characters displayed on an output screen and partially reproduce only audio corresponding thereto.

본 발명은 또한 적어도 오디오데이터와 문자데이터를 포함하는 데이터파일과, 이 데이터파일을 컴퓨터에 의해 재생시키되 특히 출력화면에 디스플레이된 문자의 범위를 특정하여 그에 대응하는 오디오만을 부분적으로 재생할 수 있는 프로그램 파일이 기록된 데이터기록매체를 제공하는 것을 제 2의 목적으로 한다.The present invention also provides a data file comprising at least audio data and text data, and a program file which reproduces the data file by a computer, in particular specifying only the range of characters displayed on the output screen and partially reproducing the audio corresponding thereto. It is a second object to provide this recorded data recording medium.

본 발명은 출력화면에 디스플레이된 문자의 범위를 특정하여 그에 대응하는 오디오만을 부분적으로 재생할 수 있는 구간 지정 오디오 재생장치를 제공하는 것을 제 3의 목적으로 한다.It is a third object of the present invention to provide an interval specifying audio reproduction apparatus capable of specifying a range of characters displayed on an output screen and partially reproducing only audio corresponding thereto.

도 1은 본 발명에 따른 오디오신호 재생방법을 실현하기 위한 장치의 구성을 도시한 블록도 이다.1 is a block diagram showing the configuration of an apparatus for realizing an audio signal reproduction method according to the present invention.

도 2a와 2b는 본 발명에 따른 오디오신호 재생방법을 설명하기 위한 흐름도 이다.2A and 2B are flowcharts illustrating a method of reproducing an audio signal according to the present invention.

도 3은 (a) 내지 (d)는 저장매체상의 파일포맷과 메모리에서의 파일포맷을 도시한다.3A to 3D show file formats on a storage medium and file formats in a memory.

도 4는 본 발명의 제 1 측면에 따른 오디오신호 재생방법을 설명하기 위한 출력화면의 일 예를 도시한다.4 shows an example of an output screen for explaining an audio signal reproduction method according to the first aspect of the present invention.

도 5a 내지 도 5f는 본 발명에 따른 오디오신호 재생방법을 도식적으로 설명하기 위한 도면들이다.5A to 5F are diagrams for schematically describing an audio signal reproducing method according to the present invention.

도 6 내지 도 9는 본 발명의 제 2 측면에 따른 오디오신호 재생방법을 설명하기 위한 출력화면의 예를 도시한다.6 to 9 show examples of output screens for explaining the audio signal reproduction method according to the second aspect of the present invention.

** 도면의 주요부분에 대한 부호의 설명 **** Explanation of symbols for main parts of drawings **

8: 버스 10: 중앙연산장치(CPU)8: Bus 10: Central Computing Unit (CPU)

12: 롬(ROM) 14: 메모리12: ROM 14: Memory

16: 오디오재생부 18: 비디오재생부16: audio player 18: video player

20: 사용자입력부 22: 저장수단20: user input unit 22: storage means

24: 통신망인터페이스 26: 스피커24: network interface 26: speaker

28: 출력화면28: output screen

상기 제 1의 목적을 달성하기 위하여, 본 발명의 제 1측면에 따르면, 적어도 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일을 메모리에 읽어들여 상기 오디오데이터는 스피커를 통해 음성으로 재생하고 상기 문자데이터는 출력화면에 문자로 디스플레이 하는 제 1 단계; 및 사용자가 출력화면상에 디스플레이 된 전체 문자 중 원하는 구간을 소정의 지정수단을 이용하여 지정하면서 구간재생을 지시하면, 이에 응답하여 상기 메모리로부터 지정구간의 문자에 대응하는 오디오데이터를 읽어내어 소정의 신호처리를 거쳐 상기 스피커를 통해 재생시키는 제 2 단계를 구비하는 것을 특징으로 하는 오디오데이터 구간 재생방법이 제공된다. 이에 의해 구간 지정된 문자에 대응하는 오디오데이터만을 재생하는 것이 가능하다.In order to achieve the first object, according to the first aspect of the present invention, a data file including at least audio data and corresponding text data is read into a memory so that the audio data is reproduced as voice through a speaker and the A first step of displaying text data in text on an output screen; And when the user instructs section playback while designating a desired section of all the characters displayed on the output screen by using a predetermined designation means, in response to this, audio data corresponding to a character of the designated section is read from the memory and the predetermined section is designated. And a second step of playing the signal through the speaker through signal processing. This makes it possible to reproduce only the audio data corresponding to the section-designated characters.

상기 지정구간의 문자에 대응하는 오디오데이터는, 상기 지정구간의 시작문자와 마지막문자의 화면상의 좌표를 추출하는 단계; 화면 포맷정보를 이용하여 추출된 좌표에 대응하는 시작문자와 마지막문자의 전체 문자중의 순번을 산출하는 단계; 산출된 순번 각각에 대응하는 상기 메모리상의 제1 및 제2 주소를 산출하는 단계; 상기 메모리의 상기 제 1 주소 및 제2 주소에 기록된 시작문자와 마지막 문자 각각에 대응하는 오디오 데이터의 제 1 및 제 2 샘플인덱스를 읽어내는 단계; 및 상기 제1 샘플인덱스와 상기 제2 샘플인덱스 사이의 오디오데이터를 상기 메모리로부터 읽어내는 단계에 의해 얻어진다.Extracting coordinates on a screen of a start character and a last character of the designated section, for audio data corresponding to a character of the designated section; Calculating a sequence number of all characters of the start character and the last character corresponding to the extracted coordinates using the screen format information; Calculating first and second addresses in the memory corresponding to each calculated sequence number; Reading first and second sample indexes of audio data corresponding to each of a start character and a last character recorded at the first address and the second address of the memory; And reading audio data between the first sample index and the second sample index from the memory.

부가기능을 제공하기 위해 상기 구간 재생방법은 상기 지정구간의 문자에 대응하는 오디오데이터는 사용자가 설정한 반복횟수만큼 반복재생을 하는 단계를 더 포함한다. 또한, 상기 구간 재생방법은 상기 오디오데이터를 상기 스피커를 통해 재생하는 동안에 그 재생음에 대응하여 상기 화면에 디스플레이된 문자의 색상을 변환하는 단계를 더 포함하는 것이 바람직하다.In order to provide an additional function, the section reproducing method further includes repeating and reproducing audio data corresponding to a character of the designated section by a repetition number set by a user. The section reproducing method may further include converting a color of a character displayed on the screen in response to the reproducing sound while the audio data is reproduced through the speaker.

재생속도를 가변시키는 처리를 할 때 누적 오차를 줄이기 위해, 상기 오디오데이터와 상기 문자데이터의 재생을 위해 상기 메모리로부터 읽어들일 때, 소정크기의 프레임단위로 오디오데이터와 문자데이터를 번갈아 가면서 읽어들여 재생처리를 하는 방식을 적용한다.In order to reduce the cumulative error in the process of varying the reproduction speed, when reading from the memory for reproducing the audio data and the character data, the audio data and the character data are alternately read and reproduced in units of a predetermined size. Apply the method of processing.

상기 제 1의 목적을 달성하기 위한 본 발명의 제 2 측면에 따르면,According to a second aspect of the present invention for achieving the first object,

멀티미디어 재생장치를 이용하여, 적어도 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일들 중에서 사용자가 선택하여 재생을 지시한 데이터파일을 재생하는 방법에 있어서,A method of playing a data file in which a user instructs playback by selecting from among data files including at least audio data and text data corresponding thereto using a multimedia player,

사용자가 선택한 데이터파일을 상기 멀티미디어 재생장치의 메모리에 읽어들여 상기 오디오데이터는 스피커를 통해 음성으로 재생하고, 상기 문자데이터는 그 길이에 대응하여 실제 문자가 아닌 '-'와 같은 아무개 문자로 변환하여 화면에 디스플레이 하는 단계; 및The data file selected by the user is read into the memory of the multimedia player, and the audio data is reproduced as a voice through a speaker, and the text data is converted into any character such as '-' rather than the actual character in correspondence with the length thereof. Displaying on the screen; And

사용자가 출력화면상에 디스플레이 된 전체 아무개 문자 중 원하는 구간을 지정하여 구간재생을 지시하면, 지정구간에 대응하는 오디오데이터를 상기 메모리에서 찾아 사용자가 설정한 재생속도로 재생하기 위한 소정의 신호처리를 하여 상기 스피커를 통해 재생시키는 단계를 구비하는 것을 특징으로 하는 오디오데이터의 구간 재생방법이 제공된다.When the user instructs section playback by designating a desired section among all the characters displayed on the output screen, audio signal corresponding to the designated section is searched in the memory for predetermined signal processing for playback at the playback speed set by the user. And reproducing through the speaker is provided.

상기 화면에 디스플레이 된 상기 아무개 문자는 상기 오디오데이터의 재생진도에 대응하여 그 색상을 변화시켜 사용자로 하여금 현재 재생 중인 오디오데이터의 구간이 대략 어느 부분인지 알 수 있도록 한다.The random characters displayed on the screen change the color corresponding to the reproduction progress of the audio data so that the user can know approximately which portion of the audio data section is currently being reproduced.

상기 재생방법은 사용자가 상기 화면에 디스플레이 된 상기 아무개 문자 전부 또는 그 일부를 지정하여 실제 문자표시를 지시하면, 지정된 아무개 문자를 실제 문자로 변환하여 상기 화면에 디스플레이 하는 단계를 더 구비하는 것이 바람직하다.Preferably, the reproducing method further includes converting the designated arbitrary characters into actual characters and displaying them on the screen when the user designates all or part of the arbitrary characters displayed on the screen to instruct the actual character display. .

상기 재생방법은 사용자가 상기 실제의 문자로 변환된 화면에서 변환된 실제 문자의 전부 또는 그 일부를 지정하여 오디오재생을 지시하면, 이에 응답하여 상기 메모리에 저장된 데이터 중 지정된 구간의 문자에 대응하는 오디오데이터를 찾아 사용자가 현재 설정한 재생속도로 재생될 수 있도록 소정의 신호처리를 하여 상기 스피커를 통해 재생시키는 단계를 더 구비하는 것이 바람직하다.In the playback method, if the user instructs audio playback by designating all or a part of the actual characters converted on the screen converted into the actual characters, the audio corresponding to the characters of the designated section among the data stored in the memory is in response. The method may further include reproducing the data through the speaker by performing predetermined signal processing so that the data can be reproduced at the currently set playback speed.

또한 상기 재생방법은, 사용자가 상기 화면에서 상기 아무개 문자 또는 상기 실제 문자를 구간을 지정하여 오디오 재생을 지시하는 경우에, 지정된 구간의 문자에 대응하는 오디오 데이터는 단어 단위로 찾아서 재생하는 것이 바람직하다. 또한, 바람직하게는 상기 아무개 문자 또는 실제 문자의 색상변환 처리는 단어 단위로 이루어진다.In the playback method, when the user specifies audio playback by specifying a section of the random text or the actual text on the screen, the audio data corresponding to the text of the designated section is preferably found and played in word units. . Further, preferably, the color conversion processing of the arbitrary character or the actual character is performed in units of words.

나아가, 상기 재생방법은, 상기 오디오데이터의 재생속도를 조정하기 위한 재생시간조정률 α와 상기 오디오데이터의 약음을 강음에 비하여 차등적으로 강화하기 위한 차등증폭율 β를 설정할 수 있는 화면을 제공하고, 상기 지정구간에 대응하는 오디오데이터의 재생시, 각 프레임에 포함되는 오디오데이터의 샘플 개수를 사용자가 설정한 재생시간조정율 α에 대응하여 인위적으로 더 늘리거나 줄이는 처리를 함과 동시에 사용자가 설정한 차등증폭율 β에 대응하여 각 프레임의 샘플데이터 xi를 약음에서 강음으로 갈수록 증폭이득이 상대적으로 낮게 적용되는 단조증가함수인 소정의 차등증폭함수 f(xi)에 차례로 대입하여 증폭한 다음 재생하는 단계를 더 구비한다.Further, the reproduction method provides a screen that can set the reproduction time adjustment rate α for adjusting the reproduction speed of the audio data and the differential amplification ratio β for differentially reinforcing the weak sound of the audio data, When the audio data corresponding to the specified section is played back, the number of samples of audio data included in each frame is artificially increased or decreased in response to the playback time adjustment rate α set by the user, and the difference set by the user. Corresponding to the amplification factor β, the sample data x i of each frame is sequentially amplified by a predetermined differential amplification function f (x i ), which is a monotonically increasing function applied with a relatively low amplification gain from weak to strong. It further comprises a step.

상기 제 2의 목적을 달성하기 위하여, 본 발명은, 적어도 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일과 프로그램이 기록되어 있는 데이터기록매체로서, 상기 프로그램은 컴퓨터에 의해 실행되어 상기 컴퓨터로 하여금 상기 데이터파일을 내부의 메모리로 읽어들여 상기 오디오데이터는 스피커를 통해 음성으로 재생하고 상기 문자데이터는 출력화면에 문자로 디스플레이 시키고, 사용자가 출력화면상에 디스플레이 된 전체 문자 중 원하는 구간을 소정의 지정수단을 이용하여 지정하면서 구간재생을 지시하면, 이에 응답하여 상기 메모리로부터 지정구간의 문자에 대응하는 오디오데이터를 읽어내어 소정의 신호처리를 거쳐 상기 스피커를 통해 재생시켜, 구간 지정된 문자에 대응하는 오디오데이터만을 재생하는 기능을 구비하는 것을 특징으로 하는 데이터 기록매체를 제공한다.In order to achieve the second object, the present invention provides a data recording medium on which a data file and a program including at least audio data and text data corresponding thereto are recorded, the program being executed by a computer and executed by the computer. Reads the data file into the internal memory, reproduces the audio data through the speaker, and displays the text data as text on the output screen, and the user selects a desired section of the entire text displayed on the output screen. If section playback is designated while designating using designation means, audio data corresponding to a character of a designated section is read from the memory and played back through the speaker through a predetermined signal processing in response to the section playback. It has a function to play only audio data Provides a data recording medium, characterized in that the.

나아가, 상기 제 3의 목적을 달성하기 위하여, 본 발명은, 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일과 상기 데이터파일을 재생하기 위한 프로그램을 저장하는 저장수단; 출력화면; 오디오출력수단; 메모리; 및 상기 프로그램의 실행에 의해 지시되는 일련의 데이터처리 동작을 수행하는 데이터처리수단을 구비하며, 상기 프로그램은 상기 데이터처리수단으로 하여금 상기 데이터파일을 상기 메모리로 읽어들여 상기 오디오데이터는 상기 오디오출력수단을 통해 음성으로 재생하고 상기 문자데이터는 상기 출력화면에 문자로 디스플레이 시키고, 사용자가 출력화면상에 디스플레이 된 전체 문자 중 원하는 구간을 소정의 지정수단을 이용하여 지정하면서 구간재생을 지시하면, 이에 응답하여 상기 메모리로부터 지정구간의 문자에 대응하는 오디오데이터를 읽어내어 소정의 신호처리를 거쳐 상기 오디오출력수단을 통해 재생시키도록 하는 기능을 포함하는 것을 특징으로 하는 데이터 재생장치를 제공한다.Further, in order to achieve the third object, the present invention provides a data file including audio data and text data corresponding thereto, and storage means for storing a program for reproducing the data file; Output screen; Audio output means; Memory; And data processing means for performing a series of data processing operations instructed by execution of the program, wherein the program causes the data processing means to read the data file into the memory so that the audio data is the audio output means. If the text data is displayed as text on the output screen, and the user instructs playback of the section while designating a desired section of the entire text displayed on the output screen by using a predetermined designation means, the response is made. And read out the audio data corresponding to the character of the designated section from the memory and play the audio data through the audio output means through a predetermined signal processing.

상기 프로그램은 상기 데이터처리수단이 상기 오디오데이터를 상기 오디오출력수단을 통해 재생하는 동안에 그 재생음에 대응하여 상기 출력화면에 디스플레이된 문자의 색상을 변환시키도록 하는 기능, 상기 데이터처리수단이 상기 오디오데이터와 상기 문자데이터의 재생을 위해 상기 메모리로부터 읽어들일 때 소정크기의 프레임단위로 오디오데이터와 문자데이터를 번갈아 가면서 읽어들여 재생처리를 하는 기능, 그리고 상기 데이터처리수단이 상기 지정구간의 문자에 대응하는 오디오데이터를 사용자가 설정한 반복횟수만큼 반복해서 재생하도록 하는 기능을 하나 또는 다양한 조합으로 더 포함한다.The program has a function of converting a color of a character displayed on the output screen in response to the reproduction sound while the data processing means reproduces the audio data through the audio output means, and the data processing means causes the audio data to be changed. And a function of alternately reading and reproducing audio data and character data in a frame unit of a predetermined size when reading from the memory for reproducing the character data, and the data processing means corresponding to the character of the designated section. The apparatus further includes a function of repeatedly playing the audio data by the number of repetitions set by the user in one or various combinations.

이하에서는 첨부한 도면을 참조하여 본 발명에 따른 오디오신호 가공방법을 보다 구체적으로 설명하기로 한다.Hereinafter, an audio signal processing method according to the present invention will be described in more detail with reference to the accompanying drawings.

도 1은 본 발명에 따른 오디오신호 재생방법을 구현하기 위한 장치의 구성을 도시한 블록도 이다. 본 발명을 구현하는 장치의 대표적인 예는 컴퓨터이다. 도 1의 장치는 일반적인 개인용 컴퓨터가 구비하는 여러 가지 기본적인 구성요소를 도시한 것이다.1 is a block diagram showing the configuration of an apparatus for implementing an audio signal reproduction method according to the present invention. A representative example of a device embodying the present invention is a computer. 1 illustrates various basic components of a general personal computer.

본 발명을 구현하기 위해 갖춰야 할 요소로서, 데이터를 처리하기 위한 수단으로서의 중앙연산처리장치(CPU), 메모리(10), 롬(12), 오디오데이터와 텍스트데이터를 포함하는 데이터파일이 저장되는 저장수단(22), 키보드나 마우스 등과 같이 데이터파일의 선택이나 구간의 지정 혹은 기타 여러 가지 사용자 명령을 내릴 수 있는 사용자입력부(20), 모니터와 같은 출력화면(28), 그리고 오디오 재생음이 출력되는 스피커(26) 등을 들 수 있다. 저장수단(22)은 하드디스크나 예컨대 시디-롬과 같은 광디스크가 구체적인 예가 될 수 있다.As an element to be implemented to implement the present invention, a storage for storing a data file including a central processing unit (CPU), a memory 10, a ROM 12, audio data and text data as a means for processing data. Means 22, a user input unit 20 for selecting a data file, specifying a section such as a keyboard or a mouse, or other various user commands, an output screen 28 such as a monitor, and a speaker for outputting audio reproduction sounds (26) etc. are mentioned. The storage means 22 may be a hard disk or an optical disk such as a CD-ROM.

그리고 CPU(10)에 의해 처리된 문자나 이미지 데이터를 제공받아 출력화면(28)의 구동신호원으로 변환시켜주는 비디오재생부(18)나 CPU(10)에 의해 처리된 오디오데이터를 제공받아 스피커(26)의 입력신호원으로 변환시켜주는 오디오재생부(16)를 더 구비할 수도 있다. 예컨대, 비디오카드나 오디오카드가 그 예가 될 수 있다. 상기 데이터파일은 시디-롬 등과 같은 기록매체를 통해서도 제공받을 수 있지만, 인터넷을 통해 외부의 데이터파일 제공장치로부터 다운로드를 받을 수도 있다. 이를 위해 외부의 통신망과의 데이터통신을 하기 위한 통신망 인터페이스(24)도 필요하다.The speaker receives the audio data processed by the video player 18 or the CPU 10 that receives the text or image data processed by the CPU 10 and converts it into a driving signal source of the output screen 28. An audio reproducing section 16 for converting the input signal source into 26 may be further provided. For example, a video card or an audio card may be an example. The data file may be provided through a recording medium such as a CD-ROM or the like, but may be downloaded from an external data file providing device through the Internet. To this end, a communication network interface 24 for data communication with an external communication network is also required.

이들 각 구성요소들은 버스(8)를 통해 서로 연결된다.Each of these components is connected to each other via a bus 8.

컴퓨터가 발휘하는 기능은 그것이 실행하는 프로그램이 갖고 있는 기능으로 볼 수 있다. 본 발명에 따른 오디오신호 재생방법은 컴퓨터에서 실행 가능한 프로그램으로 구현된다. 이 프로그램의 개략적인 실행절차가 도 2a와 2b의 흐름도로 표현된다. 즉, 도 2a와 2b는 본 발명에 따른 오디오신호 재생방법, 특히 문자의 구간 지정에 의한 오디오신호의 재생방법을 설명하기 위한 흐름도 이다.The functions that a computer exerts can be seen as the functions of the program it runs. The audio signal reproducing method according to the present invention is implemented as a program executable on a computer. A schematic execution procedure of this program is represented by the flowcharts of Figs. 2A and 2B. 2A and 2B are flowcharts illustrating a method of reproducing an audio signal according to the present invention, particularly a method of reproducing an audio signal by specifying a character section.

흐름도를 참조하여 본 발명의 오디오신호 재생방법을 설명하기에 앞서 우선 도 4를 참조하면서 본 발명에 의한 오디오신호 재생방법이 제공하는 출력화면의 구성을 설명하기로 한다. 예시된 출력화면은 웹페이지 형태로 구성되는 창이다. 출력화면의 구성형태는 웹페이지 형태가 아니어도 무방하다.Before describing the audio signal reproducing method of the present invention with reference to the flowchart, the configuration of the output screen provided by the audio signal reproducing method according to the present invention will be described first with reference to FIG. The illustrated output screen is a window configured in the form of a web page. The configuration of the output screen may not be a web page.

예시된 출력화면창의 상부에는 오디오 재생과 관련된 여러 가지 조작버튼들이 마련되고, 하부에는 재생되는 오디오데이터에 대응하는 문자데이터가 디스플레이 된다. 상부 창에 제공되는 오디오 재생에 관련된 조작버튼은 재생의 반복회수를 지정하는 반복(repeat) 버튼(66), 재생을 지시하는 재생버튼(64), 재생음의 재생속도를 느리게 하거나 혹은 빠르게 변경하도록 지시하기 위한 재생속도지정부(68), 약음을 강음에 비하여 상대적으로 더 큰 증폭이득을 부여하여 증폭시키는 약음강화지정부(70), 그리고 재생을 원하는 데이터파일을 선택하기 위한 파일선택버튼(65) 등이 제공된다. 출력화면창의 하부에는 재생되는 오디오데이터에 대응되는 외국어 문장이 디스플레이 되는 제 1 텍스트영역(60)과 외국어 문자의 모국어(한국어) 번역문이 디스플레이 되는 제 2 텍스트영역(62)이 위치한다.In the upper portion of the illustrated output screen window, various operation buttons related to audio reproduction are provided, and in the lower portion, character data corresponding to the reproduced audio data is displayed. The operation buttons related to audio playback provided in the upper window are a repeat button 66 for specifying the number of times of playback to be repeated, a play button 64 for instructing playback, and a command to slow down or change the playback speed of the playback sound slowly. A playback speed designation section 68 for amplifying, a weak sound enhancement section 70 for amplifying by amplifying a relatively larger amplification gain compared to a strong sound, and a file selection button 65 for selecting a data file to be played back; Etc. are provided. In the lower portion of the output screen window, a first text area 60 in which a foreign language sentence corresponding to the reproduced audio data is displayed, and a second text area 62 in which a native language (Korean) translation of a foreign language character is displayed are located.

도 3의 (a) 내지 (d)는 본 발명에서 정의하는 데이터파일의 포맷을 도식화한 도면이다. 하나의 기본 데이터파일은 데이터파일의 수, 각 데이터파일의 수만큼의 오프셋 포인터, 기타 제작자나 제작일 등과 같은 기본정보를 싣고 있는 파일헤드(30)와 다수개의 데이터파일(32-1, ..., 32-n)을 포함한다. 이 기본 데이터파일은 예컨대 시디-롬과 같은 데이터기록매체에 기록되어 제공되거나, 혹은 인터넷 등과 같은 온라인수단을 통해 제공되기도 한다. 여러 개의 데이터 파일을 하나의 기본 데이터파일에 통합시켜 외형적으로는 하나의 파일로 취급되도록 한 것은 파일 액세스 속도나 데이터처리 속도를 향상시키기 위함이다.3A to 3D are diagrams illustrating the format of a data file defined in the present invention. One basic data file includes a file head 30 and a plurality of data files 32-1, which carry basic information such as the number of data files, the offset pointers of the number of each data file, and other producers or production dates. , 32-n). This basic data file may be provided recorded on a data recording medium such as a CD-ROM or may be provided through online means such as the Internet. The purpose of combining several data files into one basic data file to treat them as one file is to improve file access speed and data processing speed.

하나의 데이터파일(32-1 혹은 32-n)은 데이터파일 헤드부(34), 오디오데이터부(36), 제1 텍스트데이터부(38)를 기본적으로 포함하며 제2 텍스트데이터부(40)를 더 포함할 수도 있다.One data file 32-1 or 32-n basically includes a data file head portion 34, an audio data portion 36, and a first text data portion 38 and a second text data portion 40. It may further include.

데이터파일 헤드부(34)에는 데이터파일 인덱스정보, 사용될 트랙의 개수, 각 트랙별로 오디오데이터와 텍스트데이터의 오프셋과 문장의 총 개수 등에 관한 정보 등을 포함한다.The data file head 34 includes data file index information, the number of tracks to be used, information about the offset of audio and text data and the total number of sentences for each track, and the like.

오디오데이터부(36)는 기록된 오디오데이터의 샘플률(42), 샘플링 바이트수(44), 오디오데이터의 신호 포맷 형식(46), 그리고 오디오데이터(50)를 포함하는 데이터포맷을 가진다.The audio data section 36 has a data format including a sample rate 42 of the recorded audio data, the number of sampling bytes 44, a signal format format 46 of the audio data, and the audio data 50.

제1 혹은 제2 텍스트데이터부(38 혹은 40)는 실제 문장이 기록되는 텍스트데이터(58-1, ..., 58-n)를 기본으로 하여, 대응되는 오디오샘플의 길이(52-1, ..., 52-n), 텍스트데이터(58-1, ..., 58-n) 각각에 기록된 실제 문장에 포함된 문자수(54-1, ..., 54-n), 그리고 대응되는 오디오샘플의 시작위치(56-1, ..., 546-n)를 포함하는 포맷으로 구성된다.The first or second text data section 38 or 40 is based on the text data 58-1, ..., 58-n in which the actual sentence is recorded, and the length of the corresponding audio sample 52-1, ..., 52-n), the number of characters 54-1, ..., 54-n included in the actual sentence recorded in each of the text data 58-1, ..., 58-n, and It consists of a format including the start position (56-1, ..., 546-n) of the corresponding audio sample.

이와 같은 사항들을 기본 전제로 하고 도 2a와 2b의 흐름도와 도 5a 내지 도 5f를 함께 참조하면서 본 발명의 오디오신호 재생방법을 설명하면 다음과 같다.The audio signal reproduction method of the present invention will be described below with reference to the flowcharts of FIGS. 2A and 2B and FIGS.

사용자가 도 4의 화면에서 파일선택버튼(65)을 이용하여 재생을 원하는 데이터파일을 선택한 다음 재생버튼(64)을 이용하여 재생을 지시하면, 이에 응답하여 CPU(10)는 선택된 데이터파일을 저장수단(22)에서 메모리(14)로 읽어들인다(S12 단계). 앞서 언급한 바와 같이 상기 데이터파일은 하드디스크나 시디-롬과 같은 광디스크에 저장되어 있을 수도 있고, 다른 경우로서는 인터넷을 이용하여 데이터파일 제공자의 서버(비도시)로부터 다운로드 받을 수도 있다.When the user selects a data file to be played back using the file selection button 65 on the screen of FIG. 4 and then instructs play back using the play button 64, the CPU 10 stores the selected data file in response. It reads from the means 22 into the memory 14 (step S12). As mentioned above, the data file may be stored in an optical disk such as a hard disk or a CD-ROM. Alternatively, the data file may be downloaded from a server (not shown) of the data file provider using the Internet.

데이터파일의 재생시 CPU(10)는 사용자가 설정한 재생조건, 예컨대 재생속도, 약음 강화의 정도, 그리고 재생의 반복회수 등을 확인한다. 확인된 재생조건에 따라 상기 데이터파일을 재생한다. 오디오데이터는 아래와 같은 소정의 신호처리를 거쳐 스피커(26)를 통해 음성출력을 하고, 문자데이터는 소정의 포맷팅 처리를 거쳐 출력화면(28)의 지정된 위치(60, 62)에 문자로 디스플레이 한다(S14 단계). 도 4는 재생되는 오디오데이터는 출력창 상단에 파형으로 표시하고, 문자데이터는 출력창 하단에 영어로 된 문장과 이의 한국어 번역문을 각각 디스플레이하고 있는 예를 보여준다.At the time of reproduction of the data file, the CPU 10 checks the reproduction conditions set by the user, for example, the reproduction speed, the degree of sound enhancement, and the number of times of reproduction. The data file is played back in accordance with the confirmed playback conditions. The audio data is output through the speaker 26 through the predetermined signal processing as follows, and the text data is displayed as text at designated positions 60 and 62 of the output screen 28 through the predetermined formatting process ( Step S14). 4 shows an example in which the reproduced audio data is displayed as a waveform at the top of the output window, and the text data is displayed at the bottom of the output window in English and its Korean translation.

여기서, 재생속도와 약음 강화의 정도는 각각 재생속도지정부(68)와 약음강화지정부(70)를 이용하여 사용자가 자신의 청취력에 맞게 적절히 설정한 값이다. 설정한 값은 재생시간조정율 α와 차등증폭율 β로 CPU(10)에 의해 읽혀지고, CPU(10)는 재생시간조정율 α의 값에 따라 오디오데이터를 프레임별로 시간축으로 변환처리를 하고, 차등증폭율 β의 값에 따라 오디오 데이터의 각 샘플별로 약음을 강음에 비하여 상대적으로 더 높은 증폭율을 적용하여 차등적으로 증폭 처리하는 방식으로 신호가공을 한다. 재생속도의 조정과 약음 강화 방식에 관한 보다 구체적인 설명은 본 출원인이 2000년 5월 26일자로 출원한 특허출원 제 10-2000-28582호의 명세서를 참조하기 바라며, 동 출원 명세서에 개시한 내용 전부는 본 출원 명세서의 내용으로서 포함한다.Here, the playback speed and the degree of weakening sound reinforcement are values set appropriately by the user according to their own listening power by using the reproducing speed adjusting part 68 and the weakening sound reinforcing part 70, respectively. The set value is read by the CPU 10 at the reproduction time adjustment rate α and the differential amplification ratio β, and the CPU 10 converts the audio data into the time axis on a frame-by-frame basis according to the value of the reproduction time adjustment rate α. According to the value of the rate β, the signal processing is performed by differentially amplifying by applying a relatively higher amplification rate for each sample of the audio data than strong sound. For a more detailed description of the adjustment of the reproduction speed and the method of enhancing the sound dampening, refer to the specification of Patent Application No. 10-2000-28582 filed by the applicant of May 26, 2000, and all of the contents disclosed in the specification It is included as a content of this application specification.

사용자가 재생된 데이터파일의 전체에 대하여 재생지시를 다시 하면(S16 단계) 상기 S14 단계로 피드백 하여 위와 같은 방식으로 다시 재생한다.If the user repeats the reproduction instruction for the entire reproduced data file (step S16), the user feeds back to the step S14 to play again in the above manner.

경우에 따라서는 사용자가 재생된 내용중의 일부만을 재생하기를 원할 수 있다. 이 때에는 사용자는 마우스와 같은 사용자 입력부(20)를 이용하여 자신이 다시 듣고자 하는 내용을 출력화면(28)에 디스플레이된 외국어 문장(60)에서 선택한 다음 재생버튼(64)을 클릭하면 된다(S18 단계). 그러면 CPU(10)는 이에 응답하여 문자지정 구간재생을 위한 인터럽트를 발생시켜 선택된 문자에 대응하는 오디오 재생을 위한 처리를 수행하게 된다(S20 단계).In some cases, the user may want to play only a part of the reproduced content. In this case, the user may select contents to be heard again by the user input unit 20 such as a mouse from the foreign language sentence 60 displayed on the output screen 28 and then click the play button 64 (S18). step). In response, the CPU 10 generates an interrupt for reproducing the character designation section and performs a process for reproducing the audio corresponding to the selected character (step S20).

문자지정 구간재생의 처리루틴은 도 2b의 흐름도에 개략적으로 표현되어 있다.The processing routine for character specification section reproduction is schematically represented in the flowchart of FIG. 2B.

여기서, 예컨대 사용자가 출력화면(28)에 디스플레이된 전체 영어문장 "The Centers for Disease Control and Prevention says illegal ...." 중에서 그 일부인 "for Disease Control and Prevention"(72)을 마우스로 선택하여 재생을 지시한 경우를 가정하자(도 5a 내지 5f를 참조 바람).Here, for example, the user selects and plays a part of "for Disease Control and Prevention" 72 which is a part of the entire English sentence "The Centers for Disease Control and Prevention says illegal ...." displayed on the output screen 28 with the mouse. Assume the case where is indicated (see Figs. 5a to 5f).

이와 같은 재생명령이 지시되면 CPU(10)는 먼저 지정구간의 시작문자와 마지막문자의 출력화면(28)상의 좌표를 추출한다(S22 단계). 지정구간의 시작문자 "f"와 마지막 문자 "n"의 좌표는 출력화면(28)상의 좌표는 각각 (x1, y1)과 (x2, y1) 로서 추출될 것이다.When such a playback instruction is instructed, the CPU 10 first extracts the coordinates on the output screen 28 of the start character and the last character of the designated section (step S22). The coordinates of the start character "f" and the last character "n" of the designated section will be extracted as the coordinates on the output screen 28 as (x1, y1) and (x2, y1), respectively.

출력화면 포맷정보를 이용하여 추출된 좌표값 (x1, y1)과 (x2, y1)이 각각 전체 영어 문장 중에서 몇 번째의 문자에 해당하는지를 산출한다(S24 단계). 스페이스도 하나의 문자로 간주할 때, 좌표값 (x1, y1)은 13번째 문자에 대응되고, 좌표값 (x2, y1)은 46번째 문자에 대응되는 것을 알게 된다.Using the output screen format information, it is calculated whether the extracted coordinate values (x1, y1) and (x2, y1) correspond to which character of the entire English sentences, respectively (step S24). When the space is also regarded as one character, the coordinate values (x1, y1) correspond to the thirteenth character, and the coordinate values (x2, y1) correspond to the 46th character.

이렇게 지정구간의 시작문자와 마지막 문자의 전체 문장 중에서의 순번을 알아낸 다음에는, 산출된 순번 각각에 대응하는 메모리(14) 상의 주소를 산출한다(S26 단계). 예컨대, 텍스트데이터의 메모리상의 시작주소를 알고 있으면 산출된 순번에 해당하는 문자의 메모리상의 주소는 계산할 수 있을 것이다. 메모리(14)에서의 데이터처리는 소정 시간 예컨대 100msec에 해당하는 오디오데이터와 이에 대응하는 텍스트데이터를 프레임으로 묶어서 취급하는 것이 재생속도의 조절 등과 관련하여 효과적이다. 여기서는 이와 같이 프레임단위로 데이터를 처리하는 경우를 가정한다. 이 경우에는 시작문자 "f"의 메모리(14)상의 제1 주소와 마지막문자 "n"의 메모리(14)상의 제2 주소를 이용하여 제1 주소와 제2 주소가 속하는 프레임의 시작주소를 알아낼 필요가 있다.In this way, after finding the sequence number in the entire sentence of the start character and the last character of the designated section, an address on the memory 14 corresponding to each calculated sequence number is calculated (step S26). For example, if the starting address in the memory of the text data is known, the address in the memory of the character corresponding to the calculated sequence number may be calculated. In the data processing in the memory 14, it is effective to treat audio data corresponding to a predetermined time, for example, 100 msec, and text data corresponding thereto in a frame in connection with adjustment of the reproduction speed. In this case, it is assumed that data is processed in units of frames. In this case, the first address in the memory 14 of the start character "f" and the second address in the memory 14 of the last character "n" are used to find the start address of the frame to which the first address and the second address belong. There is a need.

위와 같이 각 프레임의 시작주소를 알아낸 다음에, 제1 주소와 제2 주소에 액세스하여 당해 주소에 기록된 문자데이터 프레임 각각에 대응하는 오디오 데이터의 제1 샘플인덱스와 제2 샘플인덱스를 읽어낸다(S28 단계). 이를 구체적으로 설명하면 다음과 같다.After the start address of each frame is found as described above, the first address and the second address are accessed to read the first sample index and the second sample index of the audio data corresponding to each character data frame recorded at the address. (Step S28). This will be described in detail as follows.

시작문자 "f"가 속하는 제1 프레임(87a)에는 실제문장이 "for"이고, 이 문장에 대응하는 오디오데이터의 샘플인덱스는 36,000번부터 38,300(=36,000+2,300)번까지라는 정보가 기록되어 있다. 마찬가지로 마지막 문자 "n"이 속하는 제 2 프레임(87b)에는 그 프레임에 기록된 문자가 "ention"이고, 이에 대응하는 오디오데이터의 샘플인덱스는 73,800번부터 76,800(73,800+3,000)번까지임을 알 수 있는 정보가 기록되어 있다.In the first frame 87a to which the start character "f" belongs, the actual sentence is "for", and the sample index of audio data corresponding to this sentence is recorded from 36,000 to 38,300 (= 36,000 + 2,300). have. Similarly, in the second frame 87b to which the last character "n" belongs, the character recorded in the frame is "ention", and the sample index of the corresponding audio data is 73,800 to 76,800 (73,800 + 3,000). The information is recorded.

샘플인덱스를 읽어낸 다음에는 시작과 마지막 부분의 샘플인덱스 사이의 오디오데이터를 메모리(14)로부터 프레임단위로 읽어내어 사용자가 설정한 재생조건에 따라 오디오데이터를 가공하여 스피커로 음성을 재생한다. 이런 오디오 재생과 병행하여 오디오재생속도에 동기 시켜 출력화면(28)상의 문자의 색상을 변경시키는 처리도 함께 한다(S30 단계).After reading the sample index, audio data between the start and end sample indexes is read out from the memory 14 in units of frames, and the audio data is processed according to the playback conditions set by the user to reproduce the audio through the speaker. In parallel with such audio reproduction, a process of changing the color of the characters on the output screen 28 in synchronization with the audio reproduction speed is also performed (step S30).

구체적으로 설명하면, 오디오데이터는 도 5b에 도식화된 것처럼 각 샘플데이터들이 0번부터 차례로 기록되어 있으므로, 샘플인덱스를 알아내면 그 샘플인덱스에 대응하는 오디오데이터는 정확하게 읽어낼 수 있다. 그런데, 오디오데이터도 마찬가지로 프레임단위로 처리되므로 36,000번의 샘플인덱스가 속하는 프레임의 시작위치는 샘플인덱스가 35,000번인 경우에는 그 35,000번부터 읽어낸다. 여기서, 한 프레임은 5000개의 샘플로 이루어지는 경우를 가정한다. 따라서, 도 5d에 도식화 된 것처럼 CPU(10)는 샘플인덱스가 35,000번부터 80,000번까지에 해당하는 오디오데이터를 읽어들여 재생처리를 한다. 읽어들이는 단위는 프레임(88a, .., 88n)단위 이며 도면에서 빗금친 부분이 각 문자 값에 대응하는 오디오데이터의 샘플구간이다.Specifically, the audio data is recorded in order from zero, as illustrated in FIG. 5B, so that once the sample index is found, the audio data corresponding to the sample index can be read accurately. However, since the audio data is similarly processed in units of frames, the starting position of the frame to which 36,000 sample indexes belong is read from the 35,000 number when the sample index is 35,000 times. In this case, it is assumed that one frame includes 5000 samples. Therefore, as illustrated in FIG. 5D, the CPU 10 reads audio data corresponding to 35,000 to 80,000 sample indexes for playback processing. The unit of reading is a unit of frame 88a,..., 88n, and the shaded portion in the drawing is a sample section of audio data corresponding to each character value.

그런데, 메모리(14)에는 오디오데이터가 도 5d에 도시된 것처럼 각 프레임의 위치는 절대주소로 기록되어 있다. 즉, 제1 프레임(88a)의 시작위치와 마지막위치는 각각 샘플인덱스 35,000번부터 40,000번까지이고 이는 메모리(14)상의 절대주소와 등가적인 값이다. 하지만, 구간재생을 위해 오디오데이터를 읽어들일 때에는 도 5e에 도시된 것처럼, 각 프레임의 시작위치는 항상 0번의 샘플인덱스로 설정하여 읽어들이는 방식을 취하면 오차가 누적되는 범위가 프레임이 되므로 재생시의 오차를 최소화할 수 있다. 이는 각 프레임의 시작위치와 그 프레임의 크기를 알고 있으므로 프로그램의 변수값 조작으로 충분히 가능하다. 도 5d의 절대위치 방식으로 데이터를 재생 처리하면 오차가 누적되는 범위가 재생구간 전체가 되므로 그만큼 재생의 후반부로 갈수록 누적오차가 증가하지만, 도 5e와 같이 상대위치 방식으로 데이터를 처리하면 프레임이 새로이 바뀔 때마다 이전 프레임에서 발생한 오차는 청산될 수 있어 누적오차는 매우 작아지게 된다.By the way, in the memory 14, as shown in Fig. 5D, the audio data is recorded at the absolute address of each frame. That is, the start position and the end position of the first frame 88a are from 35,000 to 40,000 sample indexes, respectively, which is equivalent to the absolute address on the memory 14. However, when reading audio data for interval playback, as shown in FIG. 5E, if the reading position is always set to 0 sample index and reads, the error accumulates in the frame. The error of can be minimized. This is possible by manipulating the variable value of the program because the starting position of each frame and the size of the frame are known. When the data is reproduced in the absolute position method of FIG. 5D, the error accumulates in the entire playback section. Therefore, the cumulative error increases toward the second half of the playback. However, when the data is processed in the relative position method as shown in FIG. Each time the change occurs, the error from the previous frame can be cleared, resulting in a very small cumulative error.

특히 재생속도를 느리게 하는 경우에는 재생 오차가 더 많이 생길 수 있는데, 이 경우 상대위치 방식으로 오디오데이터를 읽어들여 처리하면 누적오차를 줄일 수 있어 큰 효과를 얻을 수 있다. 예컨대, 재생속도를 2배로 느리게 하도록 사용자가 지정하면, 각 프레임을 도 5f와 같이 그 샘플데이터를 2배로 늘리는 처리를 하여 메모리(14)에 재배치하되 각 프레임의 시작위치는 항상 0번의 샘플인덱스가 부여되도록 재배치하면 된다.In particular, when the playback speed is slowed, more playback error may occur. In this case, when the audio data is read and processed in a relative position method, the cumulative error can be reduced, thereby achieving a great effect. For example, if the user specifies that the playback speed is doubled, each frame is rearranged in the memory 14 by a process of doubling the sample data as shown in FIG. 5F, but the starting position of each frame is always zero sample indexes. You can rearrange it so that it is granted.

한편, 출력문자의 색상변경은 오디오데이터의 재생진도에 맞추어 처리한다. 오디오데이터의 재생진도는 처리되는 샘플데이터의 수를 카운트하면 알 수 있다. 따라서 카운트된 재생진도에 따라 색상 변경을 해야할 문장 전체의 문자수를 기준으로 색상을 변경하여야 할 문자수를 계산하여 그 계산된 위치의 문자의 색상을 변경하면 된다.On the other hand, the color change of the output character is processed in accordance with the reproduction progress of the audio data. The reproduction progress of the audio data can be known by counting the number of sample data to be processed. Therefore, the number of characters to be changed in color is calculated based on the number of characters of the whole sentence to be changed according to the counted playback progress, and the color of the characters at the calculated position is changed.

다음으로, 도 6 내지 도 9에 예시된 도면들은 본 발명의 제 2 측면에 따른 오디오신호 재생방법을 설명하기 위한 출력화면의 예를 보여준다.6 to 9 show an example of an output screen for explaining an audio signal reproduction method according to the second aspect of the present invention.

사용자가 컴퓨터와 같은 멀티미디어 재생장치를 이용하여, 적어도 오디오데이터와 이에 대응하는 문자데이터를 포함하는 멀티미디어 데이터파일을 선택하여 재생버튼(102)을 조작하여 재생을 지시한 경우를 상정한다.It is assumed that a user instructs playback by selecting a multimedia data file including at least audio data and text data corresponding thereto by using a multimedia playback apparatus such as a computer to operate the playback button 102.

이 경우는 오디오데이터는 사용자가 선택한 데이터파일을 멀티미디어 재생장치의 메모리(14)에 읽어들여 상기 오디오데이터는 스피커(26)를 통해 음성으로 재생한다. 그러나, 문자데이터의 처리에 있어서는 앞에서 설명한 본 발명의 제 1 측면과는 달리, 상기 문자데이터를 그 길이에 대응하여 실제 문자가 아닌 '-'와 같은 아무개 문자(100)로 변환하여 화면에 디스플레이 해준다. 화면에 발음되는 말이 문자로 표시되면 학습자의 관심이 분산되어 '듣기'의 집중도가 떨어진다. 즉, 실제 문자를 바로 화면에 표시해주는 것은 학습자로 하여금 오직 귀로만 알아듣고자 하는 의지를 약화시켜 청취력 학습의 효과를 떨어뜨릴 수 있기 때문에 학습자로 하여금 오직 듣는 것에만 집중하도록 아무개 문자로 표시한다.In this case, the audio data reads the data file selected by the user into the memory 14 of the multimedia player, and the audio data is reproduced by voice through the speaker 26. However, in the processing of the character data, unlike the first aspect of the present invention described above, the character data is converted to any character 100 such as '-' instead of the actual character corresponding to its length, and displayed on the screen. . When the words spoken on the screen are displayed as letters, the learner's attention is dispersed and the concentration of 'listening' is reduced. In other words, displaying the actual letter directly on the screen weakens the willingness of the learner to listen only by the ear, and thus decreases the effect of the learning ability.

아무개 문자(100)는 단어와 단어 사이에 스페이스를 두어 단어 단위로 구분되도록 표시한다. 이 때, 상기 화면에 디스플레이 된 상기 아무개 문자(100)는 상기 오디오데이터의 재생진도에 대응하여 그 색상을 변화시킨다. 사용자는 아무개 문자의 색상 변화를 통해 현재 재생 중인 오디오데이터의 구간이 대략 어느 부분인지 알 수 있도록 해준다. 따라서, 사용자는 잘 들리지 않는 구간에 대해서는 그 구간에 해당하는 아무개 문자(100)를 지정하여 다시 재생명령을 내리면 그 지정 구간에 대해서만 오디오데이터의 재생음을 다시 들을 수 있다.The random character 100 displays a space between words and words so as to be separated by word units. At this time, the random character 100 displayed on the screen changes its color corresponding to the reproduction progress of the audio data. By changing the color of the arbitrary characters, the user can find out which part of the audio data section is currently playing. Therefore, if a user specifies a character 100 corresponding to the section and issues a playback command again, the user can hear the playback sound of the audio data only for the designated section.

잘 들리지 않는 구간을 여러 번 들어도 잘 듣지 못한 경우가 있을 수 있다. 이런 경우 사용자가 화면에 디스플레이 된 아무개 문자의 일부를 지정하여 부분표기(Script Partial) 버튼(108)을 눌러 실제 문자의 표시를 지시하면, 도 7에 도시된 것처럼, 지정된 아무개 문자만을 그에 해당하는 실제의 문자로 변환하여 화면에 디스플레이 해준다. 전체표기(Script Full) 버튼(110)을 누르면 화면에 표시된 아무개 문자 전부를 그에 해당하는 실제의 문자로 변환하여 화면에 디스플레이 해준다. 이 기능을 통해 자신이 정확하게 듣지 못한 단어를 직접 눈으로 확인할 수 있다.You may not hear well even if you hear a section that is hard to hear. In this case, when the user designates a portion of the arbitrary characters displayed on the screen and instructs the display of the actual characters by pressing the Script Partial button 108, as shown in FIG. It is converted to the character of and displayed on the screen. Pressing the Script Full button 110 converts all characters displayed on the screen into actual characters corresponding to the characters and displays them on the screen. This feature allows you to see the words you did not hear correctly.

또한, 화면에는 번역(translation) 버튼(112)이 제공된다. 이 번역버튼(112)을 눌러 실행하면, 현재 화면에 표시된 아무개 문자나 실제 외국어 문자에 대응되는 한글 번역문을 화면에 표시해준다. 도 8과 도 9는 사용자의 번역 버튼(112)의 실행에 응하여, 외국어를 아무개 문자와 실제 외국문자로 표시하고 그 각각에 대응하여 한글 번역문을 병기한 화면을 도시한다. 물론 번역문을 병기한 화면에서도 재생을 실행하면 오디오데이터의 재생진도에 대응하여 아무개 문자나 실제 문자의 색상을 변경하여 재생중인 부분의 위치를 알 수 있게 해준다.In addition, a translation button 112 is provided on the screen. When the translation button 112 is pressed and executed, the Korean translation text corresponding to the arbitrary character displayed on the current screen or the actual foreign language character is displayed on the screen. 8 and 9 show screens in which a foreign language is displayed as a random character and a real foreign character in response to execution of the user's translation button 112, and the Korean translation is written in correspondence with each of them. Of course, if playback is performed on the screen with translations written together, the position of the part being played can be known by changing the color of any character or the actual character in response to the progress of the audio data.

나아가, 사용자가 이와 같이 실제의 문자로 변환된 화면에서 오디오재생을 지시하면, 이에 응답하여 상기 메모리에 저장된 데이터 중 지정된 구간의 문자에 대응하는 오디오데이터를 찾아 사용자가 현재 설정한 재생속도로 재생될 수 있도록 소정의 신호처리를 하여 상기 스피커(26)를 통해 재생시킨다.Further, when the user instructs audio playback on the screen converted to the actual character, the audio data corresponding to the character of the designated section among the data stored in the memory is found and played back at the playback speed currently set by the user. A predetermined signal processing is performed so as to reproduce the signal through the speaker 26.

여기서, 사용자가 상기 화면에서 아무개 문자(100) 또는 실제 문자(112)를 구간을 지정하여 오디오 재생을 지시하는 경우에, 지정된 구간의 문자에 대응하는 오디오 데이터는 단어 단위로 찾아서 재생한다. 또한, 상기 아무개 문자(100) 또는 실제 문자(112)의 색상변환 처리 또한 단어 단위로 이루어진다. 이와 같은 단어단위의 처리는 단어와 단어 사이의 스페이스를 활용하면 된다. 즉, 아무개 문자나 실제 문자는 단어와 단어 사이에 스페이스가 존재하므로, 사용자가 구간을 지정할 때, 시작단어의 맨 처음과 마지막 단어의 맨 끝을 지정하지 않고 그 중간을 각각 지정하더라도 실제로 지정된 구간은 시작단어의 맨 처음부터 마지막 단어의 맨 끝까지를 지정된 구간으로 인식하여 처리하도록 프로그램 하면 된다. 아울러 문자의 구간이 단어단위로 지정되면, 위에서 설명한 바와 같이 오디오데이터도 당연히 단어단위로 그 범위가 지정되어 재생될 수 있다.Here, in the case where the user instructs audio reproduction by specifying a character 100 or an actual character 112 on the screen, audio data corresponding to the character of the designated interval is searched for and reproduced in units of words. In addition, the color conversion process of the arbitrary character 100 or the actual character 112 is also performed in units of words. This word-based processing can take advantage of the space between words. In other words, any character or actual character has a space between the word and the word, so when the user specifies a section, even if the middle section is specified without specifying the beginning and end of the first word, You can program it to recognize and process from the beginning of the start word to the end of the last word as the designated section. In addition, if the section of the character is designated in word units, as described above, the audio data can be naturally reproduced by specifying the range in units of words.

한편, 사용자가 출력화면상에 디스플레이 된 전체 아무개 문자 중 원하는 구간을 지정하여 구간재생을 지시하면, 지정구간에 대응하는 오디오데이터를 메모리(14)에서 찾아 사용자가 설정한 재생속도로 재생하기 위한 소정의 신호처리를 하고, 최종적으로 스피커(26)를 통해 재생시킨다. 이를 위해 화면에는 오디오데이터의 재생속도를 사용자가 원하는 속도로 설정할 수 있는 재생속도지정부(104)가 제공된다.On the other hand, if the user designates a desired section of all the characters displayed on the output screen to instruct the section to be reproduced, the audio data corresponding to the designated section can be found in the memory 14 and played back at the playback rate set by the user. Signal processing, and finally reproduced through the speaker (26). To this end, the screen is provided with a playback speed setting unit 104 for setting the playback speed of the audio data to a desired speed.

사용자는 재생속도지정부(104)를 조작하여 오디오데이터의 재생시간 즉, 재생속도를 가변적으로 설정할 수 있는데, 그 가변 범위는 오디오데이터의 정상적인 재생시간을 1이라 할 때, 이의 0.7배에서 3배까지 재생시간을 줄이거나 늘릴 수 있다. 사용자가 재생속도지정부(104)를 통해 설정한 오디오데이터의 재생시간조정률 α은 화면을 통해 읽혀져서 오디오데이터의 재생시 재생속도의 기준값으로 작용한다. 즉, 지정구간에 대응하는 오디오데이터의 재생시, 각 프레임에 포함되는 오디오데이터의 샘플 개수를 사용자가 설정한 재생시간조정율 α에 대응하여 인위적으로 더 늘리거나 줄이는 처리를 한 다음 재생한다. 따라서, 상기 오디오데이터의 재생시간은 재생시간조정율 α에 비례하여 변하게 된다.The user can manipulate the playback speed setting unit 104 to variably set the playback time of audio data, that is, the playback speed. The variable range is 0.7 to 3 times that of the normal playback time of audio data. You can reduce or increase the playback time. The reproduction time adjustment rate α of the audio data set by the user through the reproduction speed setting unit 104 is read through the screen and serves as a reference value of the reproduction speed when the audio data is reproduced. That is, when the audio data corresponding to the specified section is played back, the number of samples of audio data included in each frame is artificially further increased or decreased in response to the playback time adjustment rate? Set by the user, and then played back. Therefore, the reproduction time of the audio data changes in proportion to the reproduction time adjustment rate α.

나아가, 화면에는 오디오데이터의 약음을 강음에 비하여 차등적으로 강화하기 위한 차등증폭버튼(106)이 제공된다. 도 6의 화면은 차등증폭율 β를 사용자가 직접 설정할 수는 없도록 하고 일정한 차등증폭율 β를 시스템이 디폴트값으로 적용하는 경우를 예시적으로 보여준다. 하지만, 차등증폭율 β도 재생시간조정율 α와 마찬가지로 사용자가 그 크기를 설정할 수 있도록 화면을 구성하는 것도 가능한다. 그리고, 사용자가 지정구간에 대응하는 오디오데이터의 재생을 명하면, 사용자가 설정한 차등증폭율 β 혹은 시스템에서 디폴트로 적용하는 차등증폭율 β에 대응하여 각 프레임의 샘플데이터 xi를 소정의 차등증폭함수 f(xi)에 차례로 대입하여 증폭하여 약음을 강음에 비하여 상대적으로 더 강화하는 신호처리를 한다. 이때, 적용되는 차등증폭함수 f(xi)는 약음에서 강음으로 갈수록 증폭이득이 상대적으로 낮게 적용되는 단조증가함수로 하는 것이 바람직하다.Furthermore, a differential amplification button 106 is provided on the screen to differentially reinforce the weak sound of audio data. The screen of FIG. 6 exemplarily illustrates a case in which the user cannot directly set the differential amplification ratio β and the system applies a constant differential amplification ratio β as a default value. However, similarly to the reproduction time adjustment rate α, the differential amplification ratio β can also be configured so that the user can set its size. When the user commands the reproduction of the audio data corresponding to the designated section, the sample data x i of each frame is predetermined according to the differential amplification ratio β set by the user or the differential amplification ratio β applied by the system by default. Subsequently, amplification is performed by substituting the amplification function f (x i ) and the signal processing is performed to reinforce the weak sound relatively more than the strong sound. In this case, it is preferable that the differential amplification function f (x i ) applied is a monotonically increasing function in which the amplification gain is relatively lowered from weak to strong.

위와 같은 재생속도의 조정과 약음 강화를 위한 차등증폭은 오디오데이터의 재생중에도 그 설정값을 변경할 수 있으며, 이와 같은 변경이 있으면 CPU(10)는 이를 모니터링하여 이후의 오디오데이터의 재생에 있어서는 변경 설정된 재생시간조정율 α와 차등증폭율 β에 따라 오디오데이터를 가공한다. 이에 적용되는 오디오데이터의 가공방법에 대해서는 앞서 언급한 바와 같이 본 출원인이 2000년 5월 26일자로 출원한 특허출원 제 10-2000-28582호의 명세서에 상세하게 기재되어 있다. 지정구간의 재생이나 전체 구간의 재생이나 재생시간의 조절과 약음의 차등증폭은 오디오데이터의 처리단위가 프레임단위로서 매우 작으므로 동일한 개념이 적용될 수 있다.As described above, the differential amplification for adjusting the playback speed and reinforcing the attenuation can be changed even during the playback of the audio data, and if such a change is made, the CPU 10 monitors it and changes the setting for subsequent playback of the audio data. Audio data is processed according to the reproduction time adjustment rate α and the differential amplification rate β. As described above, the processing method of the audio data applied thereto is described in detail in the specification of Patent Application No. 10-2000-28582 filed on May 26, 2000 by the applicant. The same concept can be applied to the playback of a designated section, the playback of an entire section, the adjustment of the playback time, and the differential amplification of attenuation because the processing unit of audio data is very small as a frame unit.

이상에서 설명한 바와 같이, 본 발명은 재생화면에서 다시 듣기를 원하는 구간의 문자를 특정하여 재생을 지시하면 그에 대응하는 오디오가 재생될 수 있도록 해준다. 이때, 문자는 사용자의 선택에 따라 실제 문자가 화면에 표시될 수도 있고, 그 실제 문자를 식별하지 못하는 아무개 문자로 화면에 나타나게 할 수도 있다. 아울러 실제 외국어 문자에 대응되는 번역문을 부가적으로 표시할 수도 있다.As described above, the present invention allows a corresponding audio to be played when a character of the section to be listened to is designated on the playback screen to instruct playback. In this case, the text may be displayed on the screen according to the user's selection, or may be displayed on the screen as any character that does not identify the actual text. In addition, translations corresponding to actual foreign language characters may be additionally displayed.

또한, 구간재생시 사용자는 오디오데이터의 재생시간을 자신이 원하는 대로 늘리거나 줄일 수 있다. 재생음을 통해 들려오는 외국인의 발음 속도가 너무 빨라 잘 듣지 못하는 경우에는 재생시간을 강제로 늘려주므로써 자신의 청취력 수준에 맞추어 들을 수 있다. 스피커를 통해 출력되는 외국어 음성을 제대로 알아듣기 힘들 때가 있다. 이에 관한 원인은 여러 가지가 있을 수 있다. 원래의 신호음이 약하게 기록되어 있거나 대단히 빠른 속도로 기록되어 있는 경우도 그 원인이 될 수 있지만, 청취자의 청력이 약해 약음을 잘 알아듣지 못하거나 혹은 재생음이 외국어이어서 청해력이 기본적으로 낮은 경우도 그 원인이 될 수 있다. 이와 같은 경우, 재생속도를 느리게 하거나 잘 들리지 않는 약음 부분을 강화시키는 것도 유용한 기능임은 물론 이거니와 잘 들리지 않는 부분만을 선택적으로 재생할 수 있는 기능도 위 기능 못지 않게 유용하다. 본 출원인은 본 출원에 앞서 행하였고 본 출원의 내용으로 포함시킨 선언을 한 바 있는 재생속도의 조절기능과 약음의 차등적 강화 기능을 제공하는 발명을 이미 출원한 바 있다. 따라서 구간 지정 재생기능은 이들 기능과 함께 제공되어 사용자들이 이를 통합적으로 활용할 때 외국어 청취력 학습에 있어서 커다란 상승효과를 거둘 수 있을 것으로 기대된다.In addition, during interval playback, the user can increase or decrease the playback time of the audio data as desired. If the foreigner's pronunciation speed is too fast to hear through the sound, you can listen to your own level of listening by forcibly increasing the playing time. Sometimes it is difficult to properly understand the foreign language output through the speakers. There are many possible causes for this. The reason may be that the original tone is weakly recorded or recorded at a very high speed, but it is also possible that the listener's hearing is weak and he / she does not hear it well, or that the hearing is fundamentally low due to the foreign language being played. This can be In such a case, it is also useful not only to slow down the playback speed or to enhance the inaudible part, but also to selectively play only the inaudible part. The present applicant has already filed an invention that provides a function of regulating playback speed and differential reinforcement of attenuation, which has been made prior to the present application and has been declared as included in the present application. Therefore, the segmented playback function is provided with these functions, and it is expected that the users will have a great synergy effect in learning foreign language listening ability when they utilize it.

아울러 이와 같은 구간지정이나 지정구간의 음성 재생은 단어단위로 처리하여 실제의 외국어 학습 환경과 어울리도록 한다. 이와 같은 본원 발명의 여러 가지 기능에 의해 외국어 청취력 학습시 잘 들리지 않는 부분만을 특정하여 들을 수 있으므로 학습시간을 단축시키고 난해한 발음을 집중해서 들을 수 있으므로 학습효과를 높일 수 있다.In addition, the speech reproduction of the section designation or the designated section is processed in word units so as to match with the actual foreign language learning environment. As described above, various functions of the present invention can be made by listening only to parts that are difficult to hear when learning foreign language listening ability, thereby shortening the learning time and focusing on difficult pronunciations, thereby improving the learning effect.

이상에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허청구의 범위에 기재된 본발명의 사상 및 영역으로부터 벗어나지 않는 범위내에서 본발명을 다양하게 수정 및 변경시킬 수 있다. 따라서, 특허청구범위의 등가적인 의미나 범위에 속하는 모든 변화들은 전부 본 발명의 권리범위안에 속함을 밝혀둔다.Although the above has been described with reference to a preferred embodiment of the present invention, those skilled in the art will be variously modified and changed within the scope of the present invention without departing from the spirit and scope of the present invention described in the claims below. You can. Accordingly, all changes that come within the meaning or range of equivalency of the claims are to be embraced within their scope.

Claims (22)

적어도 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일을 메모리에 읽어들여 상기 오디오데이터는 스피커를 통해 음성으로 재생하고 상기 문자데이터는 출력화면에 문자로 디스플레이 하는 제 1 단계; 및A first step of reading a data file including at least audio data and text data corresponding thereto into a memory to reproduce the audio data through a speaker and to display the text data on the output screen as text; And 사용자가 출력화면상에 디스플레이 된 전체 문자 중 원하는 구간을 소정의 지정수단을 이용하여 지정하면서 구간재생을 지시하면, 이에 응답하여 상기 메모리로부터 지정구간의 문자에 대응하는 오디오데이터를 읽어내어 소정의 신호처리를 거쳐 상기 스피커를 통해 재생시키는 제 2 단계를 포함하여,When the user instructs section playback while designating a desired section of all characters displayed on the output screen by using a predetermined designation means, in response to this, audio data corresponding to a character of the designated section is read from the memory and a predetermined signal is output. A second step of processing and playing through the speaker, 구간 지정된 문자에 대응하는 오디오데이터만을 재생하는 것을 특징으로 하는 오디오데이터 구간 재생방법.And reproducing only audio data corresponding to a section-designated character. 제 1항에 있어서, 상기 지정구간의 문자에 대응하는 오디오데이터는,The method of claim 1, wherein the audio data corresponding to the character of the designated section, 상기 지정구간의 시작문자와 마지막문자의 화면상의 좌표를 추출하는 단계;Extracting coordinates on a screen of a start character and a last character of the designated section; 화면 포맷정보를 이용하여 추출된 좌표에 대응하는 시작문자와 마지막문자의 전체 문자중의 순번을 산출하는 단계;Calculating a sequence number of all characters of the start character and the last character corresponding to the extracted coordinates using the screen format information; 산출된 순번 각각에 대응하는 상기 메모리상의 제1 및 제2 주소를 산출하는 단계;Calculating first and second addresses in the memory corresponding to each calculated sequence number; 상기 메모리의 상기 제 1 주소 및 제2 주소에 기록된 시작문자와 마지막 문자 각각에 대응하는 오디오 데이터의 제 1 및 제 2 샘플인덱스를 읽어내는 단계; 및Reading first and second sample indexes of audio data corresponding to each of a start character and a last character recorded at the first address and the second address of the memory; And 상기 제1 샘플인덱스와 상기 제2 샘플인덱스 사이의 오디오데이터를 상기 메모리로부터 읽어내는 단계에 의해 얻어지는 데이터인 것을 특징으로 하는 오디오데이터 구간 재생방법.And audio data obtained by reading audio data between the first sample index and the second sample index from the memory. 제 1항 또는 제 2항에 있어서, 상기 지정구간의 문자에 대응하는 오디오데이터는 사용자가 설정한 반복횟수만큼 반복재생을 하는 단계를 더 포함하는 것을 특징으로 하는 오디오 데이터 구간 재생방법.The audio data section reproduction method according to claim 1 or 2, further comprising the step of repeating playback of the audio data corresponding to the character of the designated section by the number of repetitions set by the user. 제 1항에 있어서, 상기 오디오데이터를 상기 스피커를 통해 재생하는 동안에 그 재생음에 대응하여 상기 화면에 디스플레이된 문자의 색상을 변환하는 단계를 더 포함하는 것을 특징으로 하는 오디오 데이터 구간 재생방법.The method of claim 1, further comprising converting a color of a character displayed on the screen in response to the reproduction sound while the audio data is reproduced through the speaker. 제 1항에 있어서, 상기 문자데이터는 외국어 문자데이터인 것을 특징으로 하는 오디오 데이터 구간 재생방법.The method of claim 1, wherein the text data is foreign language text data. 제 1항에 있어서, 상기 문자데이터는 외국어 문자데이터와 상기 외국어를 모국어로 번역한 모국어 문자데이터를 포함하는 것을 특징으로 하는 오디오 데이터 구간 재생방법.The method of claim 1, wherein the text data includes foreign language text data and native language text data obtained by translating the foreign language into a native language. 제 1항에 있어서, 상기 오디오데이터와 상기 문자데이터의 재생을 위해 상기 메모리로부터 읽어들일 때, 소정크기의 프레임단위로 오디오데이터와 문자데이터를 번갈아 가면서 읽어들여 재생처리를 하는 것을 특징으로 하는 오디오신호 재생방법.The audio signal according to claim 1, wherein when the audio data and the text data are read from the memory for reproduction, the audio data and the text data are alternately read and reproduced in a frame unit of a predetermined size. How to play. 적어도 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일과 프로그램이 기록되어 있는 데이터기록매체로서,A data recording medium on which data files and programs containing at least audio data and corresponding character data are recorded, 상기 프로그램은 컴퓨터에 의해 실행되어 상기 컴퓨터로 하여금 상기 데이터파일을 내부의 메모리로 읽어들여 상기 오디오데이터는 스피커를 통해 음성으로 재생하고 상기 문자데이터는 출력화면에 문자로 디스플레이 시키고, 사용자가 출력화면상에 디스플레이 된 전체 문자 중 원하는 구간을 소정의 지정수단을 이용하여 지정하면서 구간재생을 지시하면, 이에 응답하여 상기 메모리로부터 지정구간의 문자에 대응하는 오디오데이터를 읽어내어 소정의 신호처리를 거쳐 상기 스피커를 통해 재생시켜, 구간 지정된 문자에 대응하는 오디오데이터만을 재생하는 기능을 구비하는 것을 특징으로 하는 데이터 기록매체.The program is executed by a computer, which causes the computer to read the data file into an internal memory so that the audio data is reproduced as a voice through a speaker and the text data is displayed as text on an output screen. When the section playback is instructed while designating a desired section among all the characters displayed on the screen using predetermined designation means, the speaker reads audio data corresponding to the text of the designated section from the memory in response to the predetermined signal processing. And a function of playing back only audio data corresponding to a section-designated character by playing back through the text. 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일과 상기 데이터파일을 재생하기 위한 프로그램을 저장하는 저장수단;Storage means for storing a data file including audio data and text data corresponding thereto and a program for reproducing the data file; 출력화면;Output screen; 오디오출력수단;Audio output means; 메모리; 및Memory; And 상기 프로그램의 실행에 의해 지시되는 일련의 데이터처리 동작을 수행하는 데이터처리수단을 구비하며,And data processing means for performing a series of data processing operations instructed by execution of the program, 상기 프로그램은 상기 데이터처리수단으로 하여금 상기 데이터파일을 상기 메모리로 읽어들여 상기 오디오데이터는 상기 오디오출력수단을 통해 음성으로 재생하고 상기 문자데이터는 상기 출력화면에 문자로 디스플레이 시키고, 사용자가 출력화면상에 디스플레이 된 전체 문자 중 원하는 구간을 소정의 지정수단을 이용하여 지정하면서 구간재생을 지시하면, 이에 응답하여 상기 메모리로부터 지정구간의 문자에 대응하는 오디오데이터를 읽어내어 소정의 신호처리를 거쳐 상기 오디오출력수단을 통해 재생시키도록 하는 기능을 포함하는 것을 특징으로 하는 데이터 재생장치.The program causes the data processing means to read the data file into the memory, reproduce the audio data through the audio output means as voice, and display the text data as text on the output screen. When a section playback is instructed while designating a desired section among all the characters displayed on the screen using predetermined designation means, the audio data corresponding to the text of the designated section is read from the memory in response to the predetermined signal processing, and the audio signal is subjected to the predetermined signal processing. And a function for reproducing through an output means. 제 9항에 있어서, 상기 프로그램은 상기 데이터처리수단이 상기 오디오데이터를 상기 오디오출력수단을 통해 재생하는 동안에 그 재생음에 대응하여 상기 출력화면에 디스플레이된 문자의 색상을 변환시키도록 하는 기능을 더 포함하는 것을 특징으로 하는 데이터 재생장치.10. The apparatus of claim 9, wherein the program further includes a function of causing the data processing means to change the color of the characters displayed on the output screen in response to the reproduction sound while the audio data is reproduced through the audio output means. And a data reproducing apparatus. 제 9항에 있어서, 상기 프로그램은 상기 데이터처리수단이 상기 오디오데이터와 상기 문자데이터의 재생을 위해 상기 메모리로부터 읽어들일 때, 소정크기의 프레임단위로 오디오데이터와 문자데이터를 번갈아 가면서 읽어들여 재생처리를 하는 기능을 더 포함하는 것을 특징으로 하는 데이터 재생장치.10. The reproduction processing according to claim 9, wherein the program reads and reproduces the audio data and the character data alternately in units of a predetermined size when the data processing means reads from the memory for reproduction of the audio data and the character data. A data reproducing apparatus, further comprising a function to. 제 9항에 있어서, 상기 프로그램은 상기 데이터처리수단이 상기 지정구간의 문자에 대응하는 오디오데이터를 사용자가 설정한 반복횟수만큼 반복해서 재생하도록 하는 기능을 더 포함하는 것을 특징으로 하는 데이터 재생장치.10. The data reproducing apparatus according to claim 9, wherein said program further comprises a function of causing said data processing means to repeatedly play audio data corresponding to a character of said designated section by a repetition number set by a user. 멀티미디어 재생장치를 이용하여, 적어도 오디오데이터와 이에 대응하는 문자데이터를 포함하는 데이터파일들 중에서 사용자가 선택하여 재생을 지시한 데이터파일을 재생하는 방법에 있어서,A method of playing a data file in which a user instructs playback by selecting from among data files including at least audio data and text data corresponding thereto using a multimedia player, 사용자가 선택한 데이터파일을 상기 멀티미디어 재생장치의 메모리에 읽어들여 상기 오디오데이터는 스피커를 통해 음성으로 재생하고, 상기 문자데이터는 그 길이에 대응하여 실제 문자가 아닌 '-'와 같은 아무개 문자로 변환하여 화면에 디스플레이 하는 단계; 및The data file selected by the user is read into the memory of the multimedia player, and the audio data is reproduced as a voice through a speaker, and the text data is converted into any character such as '-' rather than the actual character in correspondence with the length thereof. Displaying on the screen; And 사용자가 출력화면상에 디스플레이 된 전체 아무개 문자 중 원하는 구간을 지정하여 구간재생을 지시하면, 지정구간에 대응하는 오디오데이터를 상기 메모리에서 찾아 사용자가 설정한 재생속도로 재생하기 위한 소정의 신호처리를 하여 상기 스피커를 통해 재생시키는 단계를 구비하는 것을 특징으로 하는 오디오데이터의 구간 재생방법.When the user instructs section playback by designating a desired section among all the characters displayed on the output screen, audio signal corresponding to the designated section is searched in the memory for predetermined signal processing for playback at the playback speed set by the user. And reproducing the audio data through the speaker. 제 13항에 있어서, 상기 화면에 디스플레이 된 상기 아무개 문자는 상기 오디오데이터의 재생진도에 대응하여 그 색상을 변화시켜 사용자로 하여금 현재 재생 중인 오디오데이터의 구간이 대략 어느 부분인지 알 수 있도록 하는 것을 특징으로 하는 오디오데이터의 구간 재생방법.15. The apparatus of claim 13, wherein the random characters displayed on the screen change their color corresponding to the reproduction progress of the audio data so that the user can know which part of the audio data section is currently being played. A method of playing back an interval of audio data. 제 13항에 있어서, 사용자가 상기 화면에 디스플레이 된 상기 아무개 문자 전부 또는 그 일부를 지정하여 실제 문자표시를 지시하면, 지정된 아무개 문자를 실제 문자로 변환하여 상기 화면에 디스플레이 하는 단계를 더 구비하는 것을 특징으로 하는 오디오데이터의 구간 재생방법.15. The method of claim 13, further comprising: converting the designated arbitrary characters into actual characters and displaying them on the screen when the user designates all or part of the arbitrary characters displayed on the screen to instruct the actual character display. A method of playing back an interval of audio data, characterized by the above-mentioned. 제 15항에 있어서, 사용자가 상기 실제의 문자로 변환된 화면에서 변환된 실제 문자의 전부 또는 그 일부를 지정하여 오디오재생을 지시하면, 이에 응답하여 상기 메모리에 저장된 데이터 중 지정된 구간의 문자에 대응하는 오디오데이터를 찾아 사용자가 현재 설정한 재생속도로 재생될 수 있도록 소정의 신호처리를 하여 상기 스피커를 통해 재생시키는 단계를 더 구비하는 것을 특징으로 하는 오디오데이터의 구간 재생방법.16. The method of claim 15, wherein when the user instructs audio reproduction by designating all or a part of the converted actual characters on the screen converted to the actual characters, the user corresponds to the characters of the designated section among the data stored in the memory in response thereto. And reproducing the audio data through the speaker by performing predetermined signal processing so that the user can reproduce the audio data at a currently set playback speed. 제 13항 또는 제 16항에 있어서, 사용자가 상기 화면에서 상기 아무개 문자 또는 상기 실제 문자를 구간을 지정하여 오디오 재생을 지시하는 경우에, 지정된 구간의 문자에 대응하는 오디오 데이터는 단어 단위로 찾아서 재생하는 것을 특징으로 하는 오디오데이터의 구간 재생방법.The audio data corresponding to the character of the designated section is found and played in word units when the user designates a section of the arbitrary character or the actual character on the screen to instruct audio reproduction. A method of reproducing an interval of audio data, characterized in that. 제 13항 또는 제 16항에 있어서, 상기 아무개 문자 또는 실제 문자의 색상변환 처리는 단어 단위로 이루어지는 것을 특징으로 하는 오디오데이터의 구간 재생방법.17. The method of claim 13 or 16, wherein the color conversion processing of the arbitrary characters or the actual characters is performed in units of words. 제 13항 또는 제 16항에 있어서, 상기 지정구간의 문자에 대응하는 오디오데이터는,The audio data corresponding to the character of the designated section is according to claim 13 or 16, 상기 지정구간의 시작문자와 마지막문자의 화면상의 좌표를 추출하는 단계;Extracting coordinates on a screen of a start character and a last character of the designated section; 화면 포맷정보를 이용하여 추출된 좌표에 대응하는 시작문자와 마지막문자의 전체 문자중의 순번을 산출하는 단계;Calculating a sequence number of all characters of the start character and the last character corresponding to the extracted coordinates using the screen format information; 산출된 순번 각각에 대응하는 상기 메모리상의 제1 및 제2 주소를 산출하는 단계;Calculating first and second addresses in the memory corresponding to each calculated sequence number; 상기 메모리의 상기 제 1 주소 및 제2 주소에 기록된 시작문자와 마지막 문자 각각에 대응하는 오디오 데이터의 제 1 및 제 2 샘플인덱스를 읽어내는 단계; 및Reading first and second sample indexes of audio data corresponding to each of a start character and a last character recorded at the first address and the second address of the memory; And 상기 제1 샘플인덱스와 상기 제2 샘플인덱스 사이의 오디오데이터를 상기 메모리로부터 읽어내는 단계에 의해 얻어지는 데이터인 것을 특징으로 하는 오디오데이터 구간 재생방법.And audio data obtained by reading audio data between the first sample index and the second sample index from the memory. 제 13항에 있어서, 상기 소정의 신호처리를 위해, 상기 오디오데이터의 재생시간조정률 α를 설정할 수 있는 화면을 제공하고, 상기 지정구간에 대응하는 오디오데이터의 재생시, 각 프레임에 포함되는 오디오데이터의 샘플 개수를 사용자가 설정한 재생시간조정율 α에 대응하여 인위적으로 더 늘리거나 줄이는 처리를 한 다음 재생함으로써 상기 오디오데이터의 재생시간은 상기 재생시간조정율 β에 비례하여 변하게 하는 단계를 더 구비하는 것을 특징으로 하는 오디오데이터 구간 재생방법.The audio data included in each frame according to claim 13, further comprising: providing a screen for setting a reproduction time adjustment rate? Of said audio data for said predetermined signal processing, and reproducing audio data corresponding to said designated section. And artificially increasing or decreasing the number of samples corresponding to the reproduction time adjustment rate α set by the user, and then reproducing the reproduction time of the audio data in proportion to the reproduction time adjustment rate β. An audio data section reproduction method. 제 13항에 있어서, 상기 오디오데이터의 약음을 강음에 비하여 차등적으로 강화하기 위한 차등증폭율 β를 설정할 수 있는 화면을 제공하고, 상기 지정구간에 대응하는 오디오데이터의 재생시, 사용자가 설정한 차등증폭율 β에 대응하여 각 프레임의 샘플데이터 xi를 소정의 차등증폭함수 f(xi)에 차례로 대입하여 증폭하되, 특히 상기 차등증폭함수 f(xi)는 약음에서 강음으로 갈수록 증폭이득이 상대적으로 낮게 적용되는 단조증가함수인 단계를 더 구비하는 것을 특징으로 하는 오디오데이터 구간 재생방법.The method of claim 13, further comprising: providing a screen for setting a differential amplification ratio β for differentially reinforcing the attenuation of the audio data compared to a strong sound, and setting the user during playback of the audio data corresponding to the designated section. Sample data x i of each frame is sequentially amplified by substituting a predetermined differential amplification function f (x i ) corresponding to the differential amplification ratio β, and the differential amplification function f (x i ) is amplified gain gradually from weak to strong. And a step of increasing a monotonically increasing function applied relatively low. 제 13항에 있어서, 상기 오디오데이터의 재생속도를 조정하기 위한 재생시간조정률 α와 상기 오디오데이터의 약음을 강음에 비하여 차등적으로 강화하기 위한 차등증폭율 β를 설정할 수 있는 화면을 제공하고, 상기 지정구간에 대응하는 오디오데이터의 재생시, 각 프레임에 포함되는 오디오데이터의 샘플 개수를 사용자가 설정한 재생시간조정율 α에 대응하여 인위적으로 더 늘리거나 줄이는 처리를 함과 동시에 사용자가 설정한 차등증폭율 β에 대응하여 각 프레임의 샘플데이터 xi를 약음에서 강음으로 갈수록 증폭이득이 상대적으로 낮게 적용되는 단조증가함수인 소정의 차등증폭함수 f(xi)에 차례로 대입하여 증폭한 다음 재생하는 단계를 더 구비하는 것을 특징으로 하는 오디오데이터 구간 재생방법.14. The screen of claim 13, further comprising: a screen for setting a reproduction time adjustment rate α for adjusting the reproduction speed of the audio data and a differential amplification ratio β for differentially reinforcing the weak sound of the audio data. When the audio data corresponding to the designated section is played, the number of samples of the audio data included in each frame is artificially increased or decreased in response to the playback time adjustment rate α set by the user, and the differential amplification set by the user. Amplifying and regenerating sample data x i of each frame in turn to a predetermined differential amplification function f (x i ), which is a monotonically increasing function whose amplification gain is relatively lower from weak to strong in response to the rate β. Audio data section reproduction method further comprising.
KR1020000042971A 2000-06-01 2000-07-26 Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same KR20000063615A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020000042971A KR20000063615A (en) 2000-06-01 2000-07-26 Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20000029838 2000-06-01
KR1020000029838 2000-06-01
KR1020000042971A KR20000063615A (en) 2000-06-01 2000-07-26 Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same

Publications (1)

Publication Number Publication Date
KR20000063615A true KR20000063615A (en) 2000-11-06

Family

ID=26638058

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020000042971A KR20000063615A (en) 2000-06-01 2000-07-26 Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same

Country Status (1)

Country Link
KR (1) KR20000063615A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020057433A (en) * 2001-01-04 2002-07-11 윤종용 Media reproduction program and reproduction method and media for media reproduction program therefor
KR20030035692A (en) * 2001-11-02 2003-05-09 황문섭 Caption repeat player and method of reproducing caption data
KR20030044561A (en) * 2001-11-30 2003-06-09 주식회사 하빈 A method for recording and/or outputing caption data of a digital content file, and an apparatus thereof
KR100442946B1 (en) * 2001-12-29 2004-08-04 엘지전자 주식회사 Section repeat playing method in a computer multimedia player
WO2005081250A1 (en) * 2004-02-19 2005-09-01 Seong-Cheol Kim Method and apparatus of scheduling media data
KR100678923B1 (en) * 2005-11-21 2007-02-05 삼성전자주식회사 Apparatus and method for editing music files

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020057433A (en) * 2001-01-04 2002-07-11 윤종용 Media reproduction program and reproduction method and media for media reproduction program therefor
KR20030035692A (en) * 2001-11-02 2003-05-09 황문섭 Caption repeat player and method of reproducing caption data
KR20030044561A (en) * 2001-11-30 2003-06-09 주식회사 하빈 A method for recording and/or outputing caption data of a digital content file, and an apparatus thereof
KR100442946B1 (en) * 2001-12-29 2004-08-04 엘지전자 주식회사 Section repeat playing method in a computer multimedia player
WO2005081250A1 (en) * 2004-02-19 2005-09-01 Seong-Cheol Kim Method and apparatus of scheduling media data
KR100678923B1 (en) * 2005-11-21 2007-02-05 삼성전자주식회사 Apparatus and method for editing music files

Similar Documents

Publication Publication Date Title
US6283764B2 (en) Storage medium playback system and method
US5151998A (en) sound editing system using control line for altering specified characteristic of adjacent segment of the stored waveform
US10629223B2 (en) Fast playback in media files with reduced impact to speech quality
US11430485B2 (en) Systems and methods for mixing synthetic voice with original audio tracks
JP2005165066A (en) Speech recognition system, data processor, and its data processing method and program
JP2013231999A (en) Apparatus and method for transforming audio characteristics of audio recording
JP2003307997A (en) Language education system, voice data processor, voice data processing method, voice data processing program, and recording medium
KR100830689B1 (en) Method of reproducing multimedia for educating foreign language by chunking and Media recorded thereby
KR20000063615A (en) Method of Reproducing Audio Signal Corresponding to Partially Designated Text Data and Reproducing Apparatus for the Same
JP2005321706A (en) Method for reproducing digital book and apparatus for the same
WO1998044483A1 (en) Time scale modification of audiovisual playback and teaching listening comprehension
JP2007114599A (en) Recording and reproducing method of memory medium used for foreign language learning, memory medium and reproducing device of memory medium
JP2001022265A (en) Language study system using digital movie software
KR100383061B1 (en) A learning method using a digital audio with caption data
KR100377132B1 (en) A Language Studing Method By The Repeat Hearing Of The Sentence
JP3620787B2 (en) Audio data encoding method
JP2010107926A (en) Learning material for improving linguistic hearing ability and shadowing ability, and creating method thereof
KR20010049233A (en) Text data outputting system corresponding to audio signal
US6522863B2 (en) Multiple listening training device and a multiple listening training recording medium
KR100357242B1 (en) The mapping method for digital data and replaying method by using of it
JP2514200Y2 (en) Language hearing learning machine
KR100250540B1 (en) Studying method of foreign language dictation with apparatus of playing caption video cd
JP2002229440A (en) System for learning foreign language using dvd video
JP2004184619A (en) System for acquiring language and practicing musical performance
KR101103329B1 (en) Play method of language learning system

Legal Events

Date Code Title Description
A201 Request for examination
G15R Request for early opening
A302 Request for accelerated examination
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20010728

Effective date: 20021031

S901 Examination by remand of revocation
E902 Notification of reason for refusal
E902 Notification of reason for refusal
S601 Decision to reject again after remand of revocation