KR101509196B1 - System and method for editing text and translating text to voice - Google Patents
System and method for editing text and translating text to voice Download PDFInfo
- Publication number
- KR101509196B1 KR101509196B1 KR20130040878A KR20130040878A KR101509196B1 KR 101509196 B1 KR101509196 B1 KR 101509196B1 KR 20130040878 A KR20130040878 A KR 20130040878A KR 20130040878 A KR20130040878 A KR 20130040878A KR 101509196 B1 KR101509196 B1 KR 101509196B1
- Authority
- KR
- South Korea
- Prior art keywords
- text
- live
- emotional
- editing
- emotion
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
- H04M1/72436—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. SMS or e-mail
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/02—Methods for producing synthetic speech; Speech synthesisers
- G10L13/033—Voice editing, e.g. manipulating the voice of the synthesiser
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
- G10L13/10—Prosody rules derived from text; Stress or intonation
Abstract
감정 전달이 가능한 라이브 텍스트 및 라이브 텍스트를 이용한 라이브 보이스를 제공하기 위한 텍스트 편집 및 보이스 변환 시스템 및 방법을 공개한다. 본 발명은 적어도 하나의 사용자 단말을 이용한 텍스트 편집 및 보이스 변환 방법에 있어서, 적어도 하나의 사용자 단말은, 복수개의 문장 구조 및 복수개의 감정 표현의 조합 각각에 대응하여 텍스트의 형태를 변환하는 텍스트 변화 규칙이 기설정되어 저장된 감정 텍스트 편집 프로그램을 구동하는 단계, 텍스트 편집 명령이 인가되면, 인가된 텍스트 편집 명령이 감정 표현 편집 명령인지 판별하고, 텍스트 편집 명령이 감정 표현 편집 명령이면, 텍스트의 문장 구조를 분석하는 단계, 및 감정 표현 편집 명령에 의해 설정되는 감정 표현 및 분석된 문장 구조에 대응하여 문장의 악센트, 어조, 강세, 장음, 단음의 변화가 반영되는 텍스트 변화 규칙을 텍스트에 적용하여 텍스트를 감정 표현을 포함하는 라이브 텍스트로 변환하는 단계를 포함한다.Discloses a text editing and voice conversion system and method for providing live voice using emotion-delivering live text and live text. The present invention relates to a text editing and voice conversion method using at least one user terminal, wherein at least one user terminal comprises a text change rule A step of determining whether the text editing command is an emotional expression editing command, and if the text editing command is an emotional expression editing command, Analyzing the text and applying a text change rule to the text to reflect a change in the accent, tone, accent, prolonged sound, and monophonic of the sentence in response to the sentence structure and the emotional expression set by the emotional expression edit command. Into a live text containing a representation.
Description
본 발명은 텍스트 편집 및 보이스 변환 시스템 및 방법에 관한 것으로, 특히 감정 전달이 가능한 라이브 텍스트 및 라이브 텍스트를 이용한 라이브 보이스를 제공하기 위한 텍스트 편집 및 보이스 변환 시스템 및 방법에 관한 것이다.
The present invention relates to a text editing and voice conversion system and method, and more particularly, to a text editing and voice conversion system and method for providing live voice using live text and live text capable of delivering emotion.
컴퓨터 및 네트워크 기술의 발전에 따라 최근에는 수많은 문서들이 컴퓨터상에서 전자 문서로 작성되어 저장되고, 전송되고 있다. 특히 스마트폰이나 휴대폰과 같은 휴대용 사용자 단말기의 발전 및 보급과 더불어 급성장한 소셜 네트워크 서비스(Social Network Services : SNS)에 의해 많은 사람들이 단문 및 장문의 전자 텍스트를 활용하는 빈도가 기하급수적으로 증가하였다.BACKGROUND OF THE INVENTION With the advancement of computer and network technologies, a large number of documents have been written, stored, and transmitted in electronic documents on a computer. Especially, with the development and spread of portable user terminals such as smart phones and mobile phones, the frequency of using short texts and long text electronic texts has increased exponentially with the rapid growth of social network services (SNS).
그러나 사람들 간에 음성을 이용한 의사소통에 비해 전자 텍스트를 이용한 의사소통은 감정의 전달에서 매우 취약하다는 한계가 있다. 일반적으로 음성을 이용한 의사소통의 경우, 문장의 악센트(accent), 어조(intonation), 강세(stress), 장음(prolonged sound), 단음(short sound) 등의 음향 특성이 함께 전달되므로, 단순히 문장에 포함된 단어들의 조합으로서의 의미뿐만 아니라 말하는 사람의 감정도 함께 전달할 수 있다. 반면 전자 텍스트의 경우에는 음향 특성이 포함되지 않기 때문에 글 작성자의 감정이 표현되지 못한다. 전자 텍스트가 아닌 손 글씨로 작성된 텍스트라면, 글씨체 등으로 글 작성자의 감정이 일부라도 표현될 수 있으나, 전자 텍스트는 기설정된 글꼴에 따라 항상 동일한 글씨체가 표현되므로 감정이 표현되지 않는다.However, the communication using electronic text is very weak in the transmission of emotion than the communication using voice among people. Generally speaking, in speech communication, acoustic characteristics such as sentence accent, intonation, stress, prolonged sound, and short sound are transmitted together, Not only the meaning of the combination of the words included but also the emotions of the speaker can be transmitted together. On the other hand, in the case of electronic text, the emotion of the author can not be expressed because the acoustic characteristic is not included. If the text is handwritten rather than electronic text, the emotion of the author can be expressed in a font or the like, but the emotion is not expressed because the electronic text is always displayed in the same font according to the predetermined font.
전자 텍스트에 감정이 표현되지 않는 것은 의사소통 시에 여러 가지 오해를 불러일으킬 수 있으며, 이로 인해 사람들 간의 불화나 분쟁이 발생할 가능성이 높다.Failure to express emotions in electronic text can lead to misunderstandings in communication, and this is likely to cause discord or conflict among people.
예를 들어, "그것 참 좋은 아이디어야"라는 표현을 살펴보면, 정말로 좋은 아이디어라고 생각하여 감탄하는 경우와, 그다지 좋지 않는 아이디어라고 생각하면서 일종의 반어법 형태로 좋다고 표현하는 경우가 있다.For example, if you look at the expression "it should be a good idea," it is often said that it is a good idea, and when you admire it, it is a bad idea.
음성으로 상기의 표현을 전달하는 경우, 전자는 "참"을 단음으로 억양의 톤이 점차로 올라가도록 발음하는데 비해, 후자는 "참"을 장음으로 억양 톤이 점차로 낮아지도록 발음하여 두 가지 표현의 차이를 듣는 사람이 명확하게 구분할 수 있도록 한다. 그러나 전자 텍스트로는 단순히 "그것 참 좋은 아이디어야"라는 하나의 표현만으로 전달할 수 있으므로, 상기의 두 가지 경우 중 어떤 의미로 이러한 표현을 하였는지 텍스트의 수신자가 구분하기 어렵다. 따라서 수신자는 보통 전후 문장으로부터 문맥의 흐름을 파악하고, 파악된 문맥의 흐름으로부터 화자의 표현 의도가 어떠한 것이었는지 막연히 추측할 수밖에 없었다. 그러나 문맥의 흐름은 전후 문장을 명확히 파악할 수 있는 경우에만 활용할 수 있는 반면, 최근 휴대용 사용자 단말기를 이용하는 SNS는 주로 1 ~ 2개의 문장으로 구성되는 단문의 메시지를 전송하는 경우가 빈번하고, SNS는 채팅과 달리 연속되는 대화가 아니기 때문에, 이전 문장을 다시 확인하지 않으면, 문맥의 흐름으로부터 문장의 의미를 분석하기 어렵다. 이에 사람들 간에 오해가 발생할 가능성이 높아지고 있다. 즉 사람들 간의 의사소통은 서로 상대에게 자신의 생각을 전달하기 위한 것임에도 불구하고, 전자 텍스트에 감정을 함께 표현할 수 없다는 한계로 인해 생각이 잘못 전달됨에 따라 불필요한 오해를 불러일으키는 경우가 왕왕 발생한다.When the above expression is conveyed by the voice, the former pronounces the "true" to the tone to gradually increase the tone of the intonation, while the latter pronounces the "true" to the gradually increasing tone of the intonation tone, So that it can be clearly distinguished. However, it is difficult to distinguish the recipient of the text from the above two expressions because the electronic text can be conveyed only by a single expression "it should be a good idea". Therefore, the receiver usually grasps the flow of the context from the previous and next sentences, and has no choice but to guess what the intention of the speaker is from the flow of the identified context. However, the flow of the context can be utilized only when it is possible to clearly grasp the context before and after. In recent years, the SNS using the portable user terminal frequently transmits a short message composed of one to two sentences, It is difficult to analyze the meaning of the sentence from the flow of the context unless the previous sentence is confirmed again. Thus, the possibility of misunderstanding among people is increasing. In other words, although the communication between people is to communicate their thoughts to each other, it is the case that the thought is misunderstood due to the limitation that the emotions can not be expressed together in the electronic text, thereby causing unnecessary misunderstanding.
이에 기존에 글 작성자들은 감정 표현을 전자 텍스트에 포함하기 위해 다양한 이모티콘이나 아이콘을 활용하고 있다. 그러나 이모티콘의 경우에는 문장을 전달하고자하는 사람이 이모티콘의 표현 방법을 미리 알고 있어야 한다는 한계가 있고, 아이콘의 경우에는 시스템에서 미리 설정된 표현만 가능하다는 한계가 있다. 또한 텍스트 상에 직접 표현되는 것이 아니므로, 실질적으로 텍스트에 감정을 표현하는 것이 아니라, 문장에 부가적으로 추가하는 형태로서 감정 전달이 명확하지 않다. 즉 전자 텍스트의 어감을 제공하지 않는다는 한계가 있다. 더불어, 이모티콘의 의미를 정확히 알지 못하는 사용자에게는 이모티콘으로 인해 오히려 감정 표현이 오인될 가능성도 있다.In the past, authors have used various emoticons and icons to embed emotional expressions in electronic text. However, in the case of emoticons, there is a limit in that a person who wants to transmit a sentence must know the method of expressing the emoticons in advance. In addition, since it is not expressed directly on the text, the emotion is not clearly conveyed as a form to be added additionally to the sentence, rather than expressing emotion in the text. That is, there is a limitation that electronic text is not provided. In addition, for users who do not know the meaning of the emoticons, there is a possibility that emotional expressions may be mistaken for emoticons.
비록 기존의 텍스트 프로그램에서도 텍스트의 형태나 색상을 변경할 수는 있으나, 이러한 기능을 감정 표현에 대응시키는 경우는 없다. 따라서 텍스트의 변형이 어떠한 감정을 표현하고자 하는 것인지 텍스트를 읽는 사람이 판단할 수 없어서, 여전히 의사 전달 시에 오해의 소지가 있다.Although existing text programs can change the shape or color of text, there is no case where such a function is matched to emotion expression. Therefore, since the reader of the text can not judge what kind of emotion is expressed by the transformation of the text, it is still misleading in communication.
또한 최근에는 기존의 종이 서적을 대체하여 다양한 전자 출판물이 간행됨에 따라 전자 출판물을 자동으로 읽어 주는 TTS(Text To Speech)가 확대 보급되고 있으나, 기존의 전자 출판물의 전자 텍스트에는 상기한 바와 같이 말하는 사람의 감정을 표현하기 위한 방법이 포함되어 있지 않음에 따라 TTS를 사용 시 듣는 이로 하여금 무미건조하다는 느낌을 받게 하여 쉽게 지루해지게 만들고, 텍스트의 원래 의미를 정확하게 전달하지 못한다는 한계가 있다(국내등록특허 제10-1419764호 참고).
In recent years, TTS (Text To Speech), which automatically reads electronic publications as electronic publications have been published in place of existing paper books, has been increasingly widespread. However, in the electronic texts of existing electronic publications, , There is a limitation in that the user who tries to use the TTS is made to feel unstable and is easily bored and can not accurately convey the original meaning of the text 10-1419764).
본 발명의 목적은 텍스트 포맷을 변경하여 텍스트 자체에 음향 특성에 대한 표현을 함께 포함하여 감정 전달이 가능한 라이브 텍스트를 생성하고, 라이브 텍스트를 이용하여 사실적인 보이스로 변환할 수 있는 텍스트 편집 및 보이스 변환 방법하는데 있다.An object of the present invention is to provide a method and apparatus for generating live text capable of delivering emotions by including a representation of acoustic characteristics in a text itself by changing a text format and performing text editing and voice conversion Method.
본 발명의 다른 목적은 감정 전달이 가능한 라이브 텍스트를 생성하고, 라이브 텍스트를 사실적 보이스 변환할 수 있는 텍스트 편집 및 보이스 변환 시스템을 제공하는데 있다.
It is another object of the present invention to provide a text editing and voice conversion system capable of generating live text capable of delivering emotion and realistic voice conversion of live text.
상기 목적을 달성하기 위한 본 발명의 일예에 따른 텍스트 편집 및 보이스 변환 방법은 적어도 하나의 사용자 단말을 이용한 텍스트 편집 및 보이스 변환 방법에 있어서, 상기 적어도 하나의 사용자 단말은, 복수개의 문장 구조 및 복수개의 감정 표현의 조합 각각에 대응하여 텍스트의 형태를 변환하는 텍스트 변화 규칙이 기설정되어 저장된 감정 텍스트 편집 프로그램을 구동하는 단계; 텍스트 편집 명령이 인가되면, 인가된 상기 텍스트 편집 명령이 감정 표현 편집 명령인지 판별하고, 상기 텍스트 편집 명령이 상기 감정 표현 편집 명령이면, 상기 텍스트의 상기 문장 구조를 분석하는 단계; 및 상기 감정 표현 편집 명령에 의해 설정되는 감정 표현 및 상기 분석된 문장 구조에 대응하여 문장의 악센트, 어조, 강세, 장음, 단음의 변화가 반영되는 텍스트 변화 규칙을 상기 텍스트에 적용하여 상기 텍스트를 상기 감정 표현을 포함하는 라이브 텍스트로 변환하는 단계; 를 포함한다.According to an aspect of the present invention, there is provided a text editing and voice conversion method using at least one user terminal, wherein the at least one user terminal includes a plurality of sentence structures and a plurality of Driving an emotional text editing program in which a text change rule for converting a form of a text corresponding to each combination of emotional expressions is previously stored and stored; Determining whether the text edit command is an emotional expression edit command if the text edit command is issued and analyzing the sentence structure of the text if the text edit command is the emotional expression edit command; And a text change rule that reflects a change in the accent, tone, accent, prolonged sound, and short tone of the sentence in response to the emotional expression set by the emotional expression edit command and the analyzed sentence structure, Converting into a live text including an emotional expression; .
상기 목적을 달성하기 위한 본 발명의 다른 예에 따른 텍스트 편집 및 보이스 변환 방법은 적어도 하나의 사용자 단말이 접속 가능한 텍스트 편집 서버를 이용한 텍스트 편집 및 보이스 변환 방법에 있어서, 상기 텍스트 편집 서버는, 상기 적어도 하나의 사용자 단말이 접속되는지 판별하는 단계; 상기 적어도 하나의 사용자 단말이 접속되면, 복수개의 문장 구조 및 복수개의 감정 표현의 조합 각각에 대응하여 텍스트의 형태를 변환하는 텍스트 변화 규칙이 기설정되어 저장된 감정 텍스트 편집 프로그램을 구동하는 단계; 접속된 상기 사용자 단말로부터 텍스트 편집 명령이 인가되면, 인가된 상기 텍스트 편집 명령이 감정 표현 편집 명령인지 판별하고, 상기 텍스트 편집 명령이 상기 감정 표현 편집 명령이면, 상기 텍스트의 상기 문장 구조를 분석하는 단계; 및 상기 감정 표현 편집 명령에 의해 설정되는 감정 표현 및 상기 분석된 문장 구조에 대응하여 문장의 악센트, 어조, 강세, 장음, 단음의 변화가 반영되는 텍스트 변화 규칙을 상기 텍스트에 적용하여 상기 텍스트를 상기 감정 표현을 포함하는 라이브 텍스트로 변환하는 단계; 를 포함한다.According to another aspect of the present invention, there is provided a text editing and voice converting method using a text editing server connectable to at least one user terminal, Determining whether one user terminal is connected; Driving an emotional text editing program in which a text change rule for converting a form of a text corresponding to each of a plurality of sentence structures and a plurality of combinations of emotional expressions is preset and stored when the at least one user terminal is connected; Determining whether the text edit command is an emotional expression edit command if a text edit command is issued from the connected user terminal and analyzing the sentence structure of the text if the text edit command is the emotional expression edit command ; And a text change rule that reflects a change in the accent, tone, accent, prolonged sound, and short tone of the sentence in response to the emotional expression set by the emotional expression edit command and the analyzed sentence structure, Converting into a live text including an emotional expression; .
상기 텍스트 편집 및 보이스 변환 방법은 라이브 보이스 변환 명령이 인가되면, 변환할 상기 라이브 텍스트를 선택하는 단계; 및 선택된 상기 라이브 텍스트를 상기 라이브 텍스트에 적용된 텍스트 변화 규칙에 대응하여 상기 문장의 악센트, 어조, 강세, 장음, 단음의 변화가 포함된 음향 신호인 라이브 보이스 신호로 변환하는 단계를 더 포함하는 것을 특징으로 한다.The text editing and voice conversion method includes: selecting the live text to be converted when a live voice conversion command is applied; And converting the selected live text into a live voice signal which is an acoustic signal including a change of accent, tone, accent, prolonged sound, and short sound of the sentence in correspondence with a text change rule applied to the live text .
상기 라이브 텍스트로 변환하는 단계는 상기 감정 표현 편집 명령에 의해 지정되는 감정 표현에 대응하는 상기 텍스트 변화 규칙을 적용하여 상기 텍스트를 상기 라이브 텍스트로 변환하는 것을 특징으로 한다.Wherein the step of converting into the live text converts the text into the live text by applying the text change rule corresponding to the emotion expression designated by the emotion expression edit command.
상기 목적을 달성하기 위한 본 발명의 또 다른 예에 따른 텍스트 편집 및 보이스 변환 방법은 적어도 하나의 사용자 단말이 접속 가능한 텍스트 전송 서버를 이용한 텍스트 편집 및 보이스 변환 방법에 있어서, 상기 텍스트 전송 서버는, 상기 적어도 하나의 사용자 단말이 접속되어 다른 사용자 단말로 전송 요청되는 텍스트가 수신되는지 판별하는 단계; 상기 텍스트가 수신되면, 상기 접속된 사용자 단말의 사용자 설정이 텍스트에 감정 표현을 포함하도록 설정되어 있는지 판별하는 단계; 상기 텍스트에 감정 표현을 포함하도록 설정되어 있으면, 복수개의 문장 구조 및 복수개의 감정 표현의 조합 각각에 대응하여 텍스트의 형태를 변환하는 텍스트 변화 규칙이 기설정되어 저장된 감정 텍스트 편집 프로그램을 이용하여 상기 텍스트의 상기 문장 구조를 분석하는 단계; 상기 감정 표현 편집 명령에 의해 설정되는 감정 표현 및 상기 분석된 문장 구조에 대응하여 문장의 악센트, 어조, 강세, 장음, 단음의 변화가 반영되는 텍스트 변화 규칙을 상기 텍스트에 적용하여 상기 텍스트를 상기 감정 표현을 포함하는 라이브 텍스트로 변환하는 단계; 및 상기 라이브 텍스트를 상기 다른 사용자 단말로 전송하는 단계; 를 포함한다.According to another aspect of the present invention, there is provided a text editing and voice conversion method using a text transmission server connectable to at least one user terminal, Determining whether at least one user terminal is connected and a text to be transmitted to another user terminal is received; Determining whether the user setting of the connected user terminal is set to include an emotional expression in the text when the text is received; A text change rule for converting a form of a text corresponding to each of a plurality of sentence structures and a plurality of combinations of a plurality of emotional expressions is previously stored and stored in the emotional text editing program, Analyzing the sentence structure of the sentence; A text change rule that reflects a change in accent, tone, accent, prolonged sound, and monophon of a sentence corresponding to the emotional expression set by the emotional expression edit command and the analyzed sentence structure is applied to the text, Converting into a live text including an expression; And transmitting the live text to the another user terminal; .
상기 텍스트 편집 및 보이스 변환 방법은 상기 텍스트가 수신되면, 상기 접속된 사용자 단말의 사용자 설정이 상기 라이브 텍스트를 라이브 보이스로 변환하도록 설정되어 있는지 판별하는 단계; 상기 사용자 설정이 상기 라이브 보이스로 변환하도록 설정되어 있으면, 상기 변환할 상기 라이브 텍스트를 선택하는 단계; 및 선택된 상기 라이브 텍스트를 상기 라이브 텍스트에 적용된 텍스트 변화 규칙에 대응하여 상기 문장의 악센트, 어조, 강세, 장음, 단음의 변화가 포함된 음향 신호인 라이브 보이스 신호로 변환하는 단계를 더 포함하는 것을 특징으로 한다.Wherein the text editing and voice conversion method comprises the steps of: if the text is received, determining whether a user setting of the connected user terminal is set to convert the live text into a live voice; Selecting the live text to be converted if the user setting is set to be converted into the live voice; And converting the selected live text into a live voice signal which is an acoustic signal including a change of accent, tone, accent, prolonged sound, and short sound of the sentence in correspondence with a text change rule applied to the live text .
상기 라이브 텍스트로 변환하는 단계는 상기 감정 텍스트 편집 프로그램이 상기 텍스트의 문맥을 분석하고, 분석된 문맥으로부터 기설정된 복수개의 감정표현 중 하나의 감정표현을 선택하여, 선택된 감정 표현에 감정 표현에 대응하는 상기 텍스트 변화 규칙을 적용하여 상기 텍스트를 자동으로 상기 라이브 텍스트로 변환하는 것을 특징으로 한다.The step of converting into the live text may include analyzing the context of the text by the emotional text editing program, selecting one of the plurality of predetermined emotional expressions from the analyzed context, And the text is automatically converted into the live text by applying the text change rule.
상기 라이브 텍스트로 변환하는 단계는 상기 텍스트 편집 명령에 응답하여 기설정된 범위의 상기 텍스트에 대해 상기 라이브 텍스트로 변환하는 것을 특징으로 한다.Wherein the step of converting into the live text converts the live text into a predetermined range of the text in response to the text edit command.
상기 라이브 텍스트로 변환하는 단계는 상기 텍스트 전체를 라이브 텍스트로 변환하는 것을 특징으로 한다.Wherein the step of converting into the live text converts the entire text into live text.
상기 라이브 텍스트로 변환하는 단계는 상기 텍스트 변화 규칙에 따라 상기 복수개의 문장 구조 및 상기 복수개의 감정 표현의 조합 각각에 대해 기분석된 어감이 상기 텍스트에 시각적으로 표시되도록 상기 텍스트를 변환하는 것을 특징으로 한다.Wherein the step of converting into the live text includes converting the text so that a phrase analyzed beforehand for each of the plurality of sentence structures and the combination of the plurality of emotional expressions is visually displayed in the text according to the text change rule. do.
상기 라이브 텍스트로 변환하는 단계는 상기 텍스트 변화 규칙에 따라 상기 텍스트가 동적으로 가변되는 다이나믹 텍스트의 형태로 변환하는 것을 특징으로 한다.Wherein the converting into the live text is performed by converting the text into a dynamically changing dynamic text according to the text change rule.
상기 다른 목적을 달성하기 위한 본 발명의 일 예에 따른 텍스트 편집 시스템은 복수개의 문장 구조 및 복수개의 감정 표현의 조합 각각에 대응하여 텍스트의 형태를 변환하는 텍스트 변화 규칙이 기설정되어 저장된 감정 텍스트 편집 프로그램이 저장된 텍스트 편집 서버; 및 상기 텍스트 편집 서버로부터 상기 감정 텍스트 편집 프로그램을 수신하여 설치하며, 입력 수단을 통해 텍스트 편집 명령이 인가되면, 인가된 상기 텍스트 편집 명령이 감정 표현 편집 명령인지 판별하고, 상기 텍스트 편집 명령이 상기 감정 표현 편집 명령이면, 상기 텍스트의 상기 문장 구조를 분석하고, 상기 감정 표현 편집 명령에 의해 설정되는 감정 표현 및 상기 분석된 문장 구조에 대응하는 텍스트 변화 규칙을 상기 텍스트에 적용하여 상기 텍스트를 상기 감정 표현을 포함되는 라이브 텍스트로 변환하는 적어도 하나의 사용자 단말;을 포함한다.According to another aspect of the present invention, there is provided a text editing system including a plurality of sentence structures and a plurality of emotional text editing A text editing server in which a program is stored; And receiving and installing the emotional text editing program from the text editing server, and if the text editing command is input through the inputting means, determining that the applied text editing command is an emotional expression editing command, The method comprising the steps of: analyzing the sentence structure of the text, applying an emotion expression set by the emotion expression edit command and a text change rule corresponding to the analyzed sentence structure to the text, Into at least one user terminal that converts the live text into embedded live text.
상기 텍스트 편집 서버는 상기 감정 텍스트 편집 프로그램을 직접 구동하여 상기 적어도 하나의 사용자 단말로부터 상기 텍스트 및 상기 텍스트 편집 명령을 수신하여, 상기 텍스트를 상기 라이브 텍스트로 변환하는 것을 특징으로 한다.The text editing server directly drives the emotional text editing program to receive the text and the text editing command from the at least one user terminal and convert the text into the live text.
상기 텍스트 서버는 상기 감정 텍스트 프로그램에 의해 편집된 라이브 텍스트를 상기 텍스트 변화 규칙에 의해 표현되는 문장의 악센트, 어조, 강세, 장음, 단음의 변화를 반영하여 음향 신호인 라이브 보이스 신호로 변환하는 라이브 보이스 변환 프로그램이 추가로 저장하고, 상기 라이브 보이스 변환 프로그램을 구동하여, 상기 라이브 텍스트를 상기 라이브 텍스트에 적용된 텍스트 변화 규칙에 대응하는 음향 신호인 라이브 보이스 신호로 변환하는 것을 특징으로 한다.The text server converts the live text edited by the emotional text program into a live voice signal which is a sound signal reflecting the change of the accent, tone, accent, long sound, and single sound of the sentence represented by the text change rule And converting the live text into a live voice signal, which is an acoustic signal corresponding to a text change rule applied to the live text, by driving the live voice conversion program.
상기 적어도 하나의 사용자 단말 각각은 상기 감정 텍스트 프로그램에 의해 편집된 라이브 텍스트를 상기 텍스트 변화 규칙에 의해 표현되는 문장의 악센트, 어조, 강세, 장음, 단음의 변화를 반영하여 음향 신호인 라이브 보이스 신호로 변환하는 라이브 보이스 변환 프로그램을 상기 텍스트 편집 서버로부터 더 수신하여 설치하고, 상기 라이브 보이스 변환 프로그램을 구동하여, 상기 라이브 텍스트를 상기 라이브 텍스트에 적용된 텍스트 변화 규칙에 대응하는 음향 신호인 라이브 보이스 신호로 변환하여 출력하는 것을 특징으로 한다.Wherein each of the at least one user terminals is configured to receive live text edited by the emotional text program as a live voice signal that is an acoustic signal by reflecting a change in the accent, tone, accent, prolonged sound, And converting the live text into a live voice signal, which is an acoustic signal corresponding to a text change rule applied to the live text, by driving the live voice conversion program by receiving and installing a live voice conversion program to be converted from the text editing server And outputting the result.
상기 텍스트 편집 시스템은 상기 감정 텍스트 편집 프로그램을 구동하여 상기 적어도 하나의 사용자 단말이 접속되어 다른 사용자 단말로 전송 요청되는 텍스트를 수신하고, 수신된 상기 텍스트를 상기 라이브 텍스트로 변환하여 상기 다른 사용자 단말로 전송하는 텍스트 전송 서버;를 더 포함하는 것을 특징으로 한다.The text editing system drives the emotional text editing program to receive the text to which the at least one user terminal is connected and is requested to be transmitted to another user terminal, convert the received text into the live text, And a text transmission server for transmitting the text data.
상기 텍스트 전송 서버는 상기 감정 텍스트 프로그램에 의해 편집된 라이브 텍스트를 상기 텍스트 변화 규칙에 의해 표현되는 문장의 악센트, 어조, 강세, 장음, 단음의 변화를 반영하여 음향 신호인 라이브 보이스 신호로 변환하는 라이브 보이스 변환 프로그램을 구동하여 상기 라이브 보이스 변환 프로그램을 구동하여, 상기 라이브 텍스트를 상기 라이브 텍스트에 적용된 텍스트 변화 규칙에 대응하는 음향 신호인 라이브 보이스 신호로 변환하여 출력하는 것을 특징으로 한다.
The text transmission server converts the live text edited by the emotional text program into a live voice signal, which is a sound signal reflecting the change of accent, tone, accent, prolonged sound, and single sound of a sentence expressed by the text change rule The live voice conversion program is driven by driving a voice conversion program to convert the live text into a live voice signal which is an acoustic signal corresponding to a text change rule applied to the live text and outputs the live voice signal.
따라서, 본 발명의 감정 전달이 가능한 라이브 텍스트 및 라이브 텍스트를 이용한 사실적 보이스를 제공하기 위한 텍스트 편집 및 보이스 변환 시스템 및 방법은 텍스트 편집 화면에 텍스트의 어감을 표현하기 위한 복수개의 어감 편집 아이콘을 제공하여, 사용자가 전달하고자 하는 전자 텍스트에 강조, 악센트 장음 및 단음 표현을 함께 기입할 수 있도록 하므로, 텍스트에 감정을 표현할 수 있도록 한다. 또한 경우에 따라서는 텍스트 편집 시스템이 문장 분석을 통해 자동으로 텍스트에 감정이 표현되도록 텍스트를 편집하여 라이브 텍스트를 제공할 수 있다. 그러므로 라이브 텍스트에 어감을 통한 감정 전달이 가능해져셔, 텍스트 전달로 인한 오해가 발생할 가능성을 줄여 더욱 정확한 의사소통이 가능하도록 한다. 더불어, 전자 텍스트를 자동으로 읽어 주는 TTS(Text To Speech)에 적용 시에 라이브 텍스트에 에 포함된 문장의 어감을 활용하여 문장의 악센트, 어조, 강세, 장음, 단음의 변화가 반영된 라이브 보이스를 출력할 수 있으므로, 사람이 말하는 것과 유사한 감성을 전달할 수 있다. 또한 다양한 종류의 사용자 단말에 적용할 수 있도록 하여, 텍스트에 감정 표현을 포함하는 기법에 대한 공통 기준을 제공할 수 있다.
Accordingly, a text editing and voice conversion system and method for providing realistic voices using live text and live text capable of delivering emotion according to the present invention provides a plurality of text editing icons for expressing a textual phrase on a text editing screen , So that the user can write emphasis, accent sound and monophonic expression together in the electronic text to be transmitted, so that the emotion can be expressed in the text. Also, in some cases, the text editing system may provide the live text by editing the text so that the sentence analysis automatically expresses the emotion in the text. Therefore, it is possible to transmit emotion through the sentence to the live text, thereby reducing the possibility of misunderstanding caused by text transmission, thereby enabling more accurate communication. In addition, when applied to TTS (Text To Speech), which automatically reads electronic text, it outputs a live voice that reflects changes in the accent, tone, accent, prolonged sound, and single tone of the sentence using the sentence phrase included in the live text. So that it can convey a feeling similar to what a person is saying. It can also be applied to various types of user terminals to provide a common reference for techniques that include emotional expressions in text.
도1 은 본 발명의 일실시예에 따른 텍스트 편집 및 보이스 변환 시스템을 나타낸다.
도2 는 본 발명에 따른 라이브 텍스트의 실제 적용예를 나타낸다.
도3 및 도4 는 본 발명의 일 실시예에 따른 감정 전달이 가능한 라이브 텍스트 및 라이브 보이스를 제공하기 위한 텍스트 편집 및 라이브 보이스 변환 방법을 나타낸다.
도5 는 본 발명에 따른 텍스트 감정 표현 포함 설정창의 일예를 나타낸다.
도6 은 본 발명의 다른 실시예에 따른 감정 전달이 가능한 라이브 텍스트 및 라이브 보이스를 제공하기 위한 텍스트 편집 및 라이브 보이스 변환 방법을 나타낸다.
도7 은 본 발명의 또 다른 실시예에 따른 감정 전달이 가능한 라이브 텍스트 및 라이브 보이스를 제공하기 위한 텍스트 편집 및 라이브 보이스 변환 방법을 나타낸다.1 shows a text editing and voice conversion system according to an embodiment of the present invention.
Fig. 2 shows an actual application example of live text according to the present invention.
3 and 4 illustrate a text editing and live voice conversion method for providing live text and live voice capable of delivering emotion according to an embodiment of the present invention.
Fig. 5 shows an example of a text emotion expression including setting window according to the present invention.
6 shows a text editing and live voice conversion method for providing live text and live voice capable of delivering emotion according to another embodiment of the present invention.
7 illustrates a text editing and live voice conversion method for providing live text and live voice capable of delivering emotion according to another embodiment of the present invention.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다. In order to fully understand the present invention, operational advantages of the present invention, and objects achieved by the practice of the present invention, reference should be made to the accompanying drawings and the accompanying drawings which illustrate preferred embodiments of the present invention.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로서, 본 발명을 상세히 설명한다. 그러나, 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 설명하는 실시예에 한정되는 것이 아니다. 그리고, 본 발명을 명확하게 설명하기 위하여 설명과 관계없는 부분은 생략되며, 도면의 동일한 참조부호는 동일한 부재임을 나타낸다. Hereinafter, the present invention will be described in detail with reference to the preferred embodiments of the present invention with reference to the accompanying drawings. However, the present invention can be implemented in various different forms, and is not limited to the embodiments described. In order to clearly describe the present invention, parts that are not related to the description are omitted, and the same reference numerals in the drawings denote the same members.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 “...부”, “...기”, “모듈”, “블록” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
Throughout the specification, when an element is referred to as " including " an element, it does not exclude other elements unless specifically stated to the contrary. The terms "part", "unit", "module", "block", and the like described in the specification mean units for processing at least one function or operation, And a combination of software.
도1 은 본 발명의 일실시예에 따른 텍스트 편집 및 보이스 변환 시스템을 나타낸다.1 shows a text editing and voice conversion system according to an embodiment of the present invention.
도1 을 참조하면, 본 발명에 따른 텍스트 편집 및 보이스 변환 시스템은 복수개의 사용자 단말(110 ~ 130), 네트워크(200), 텍스트 편집 서버(300) 및 텍스트 전송 서버(400)를 포함한다.Referring to FIG. 1, the text editing and voice conversion system includes a plurality of
복수개의 사용자 단말(110 ~ 130)은 사용자의 명령을 인가받는 입력부 및 화면을 출력하는 디스플레이부를 구비하여 사용자가 전자 텍스트를 입력 및 편집할 수 있도록 하고, 입력 및 편집된 전자 텍스트를 저장한다. 그리고 통신부를 구비하여 네트워크(200)를 통해 저장된 전자 텍스트를 전송할 수 있다. 또한 복수개의 사용자 단말(110 ~ 130)은 다른 사용자 단말에서 작성된 전자 텍스트를 수신하여 디스플레이 수단을 통해 디스플레이 할 수 있다. 그리고 수신된 전자 텍스트에 대해서도 편집을 수행할 수 있도록 한다. 복수개의 사용자 단말(110 ~ 130)은 사용자가 전자 텍스트에 감정 표현이 포함되는 편집을 수행할 수 있도록 하는 감정 텍스트 편집 프로그램이 설치되어 구동될 수 있다. 여기서 감정 텍스트 편집 프로그램은 사용자 단말(110 ~ 130)에 기설치된 텍스트 편집 프로그램에 추가되는 애드온(Add-On) 타입의 프로그램일 수도 있으며, 기존의 텍스트 편집 프로그램과 별도로 구동되는 개별 텍스트 편집 프로그램일 수도 있다.The plurality of
감정 텍스트 편집 프로그램은 사용자가 전자 텍스트에 감정 표현을 포함할 수 있도록 다양한 감정 편집도구를 제공할 수 있다. 감정 편집도구는 즐거움, 기쁨, 울음, 불만, 감탄, 부끄러움, 민망, 화남, 놀람 등의 복수개의 감정 표현 아이콘을 포함할 수 있다. 그리고 감정 텍스트 편집 프로그램은 복수개의 감정 표현 아이콘에 대응하여 기설정된 형태로 텍스트 자체의 형태를 변환할 수 있다. 이를 위해 다양한 문장 구조 및 감정 표현 각각의 조합에 대한 어감을 분석되고, 분석된 어감에 대응하는 텍스트의 형태 변화 규칙이 미리 설정되어 감정 텍스트 편집 프로그램에 저장될 수 있다. 즉 감정 텍스트 편집 프로그램에는 문장 구조 및 감정 표현에 따른 텍스트의 형태 변화 규칙이 미리 저장된다.The emotion text editing program can provide various emotion editing tools so that the user can include the emotion expression in the electronic text. The emotion editing tool may include a plurality of emotion expression icons such as pleasure, joy, crying, complaint, admiration, shame, palm, angry, surprise, The emotion text editing program can convert the form of the text itself into a predetermined form corresponding to a plurality of emotion expression icons. For this purpose, the phrases for various combinations of the sentence structures and the emotional expressions are analyzed, and the morphological change rules of the text corresponding to the analyzed phrases are preset and stored in the emotional text editing program. That is, the emotion text editing program stores in advance the morphological change rules of the text according to the sentence structure and the emotional expression.
그리고 감정 텍스트 편집 프로그램의 텍스트 형태 변화 규칙은 텍스트의 글꼴 크기, 글꼴 색을 변화할 뿐만 아니라 기존의 텍스트 폰트에서 제공하지 않는 다양한 텍스트 형태를 제공할 수도 있다. 뿐만 아니라, 텍스트 형태가 시간의 진행에 따라 가변되는 다이나믹 텍스트를 제공할 수도 있다. 특히 감정 텍스트 편집 프로그램은 사용자가 지정한 범위 이내의 문장의 모든 단어에 대해 분석을 수행하고, 분석된 단어들의 품사나 문장 구조에 따라 자동으로 선택된 감정에 대응하는 어감이 표현되도록 텍스트 편집을 수행할 수 있다.In addition, the rules for changing the text form of the emotion text editing program may not only change the font size and font color of the text, but may also provide various text forms not provided in the existing text fonts. In addition, the text type may provide dynamic text that varies with the passage of time. Especially, the emotion text editing program analyzes all the words in the sentences within the range specified by the user and performs text editing so that the sentences corresponding to the emotions automatically selected according to the parts of speech or sentence structures of the analyzed words are expressed have.
이에 사용자는 자신이 표현하고자 하는 감정을 전자 텍스트에 어감으로 표시형태로 시각적으로 포함시킬 수 있다. 본 발명에서는 상기한 바와 같이 감정 표현이 포함되는 텍스트를 라이브 텍스트(live text)라 지칭하기로 한다.Accordingly, the user can visually include emotions that he / she wants to express in a display form in electronic text. In the present invention, a text including emotional expression as described above will be referred to as a live text.
감정 텍스트 편집 프로그램은 경우에 따라서, 사용자가 작성한 문장의 전후 문맥 구조를 분석하고, 분석된 문맥 구조에 따라 자동으로 전체 전자 텍스트에 감정 표현이 포함되도록 편집을 수행하거나, 현재 편집 중인 문장에 대해 추천하는 감정 표현을 표시하여 사용자가 선택할 수 있도록 할 수도 있다. 최근 전자 문서의 활용 분야가 다양해짐에 따라 학습, 검색, 통계 등의 다양한 이유로 전자 문서에 대한 자동 분석 기술이 급격하게 발전하였다. 이러한 문장 자동 분석 기술은 현재까지 사람이 작성한 문장에 대해 완전한 해석을 수행하지는 못하지만, 각 문장의 구성, 문장 구조, 긍정 및 부정 표현, 품사의 구분과 같은 다양한 분석을 수행할 수 있다. 따라서 감정 텍스트 편집 프로그램은 전자 문서에 대한 자동 분석을 수행하여 문맥에 따라 전자 텍스트에 감정 표현이 포함되도록 편집을 수행할 수 있으며, 사용자가 편집 중인 문장에 대해 추천 감정을 제시할 수도 있다. 상기한 문장 자동 분석 기술은 공지된 기술로서 여기서는 상세하게 설명하지 않는다.The emotion text editing program analyzes the context structure of a sentence created by the user in some cases and performs editing so that the emotional expression is automatically included in the entire electronic text according to the analyzed context structure, The user can display the emotional expression to be selected by the user. Recently, as the application areas of electronic documents have been diversified, automatic analysis technology for electronic documents has been developed rapidly for various reasons such as learning, searching, and statistics. Although this automatic analysis technique does not perform a complete analysis on human sentences until now, it can perform various analyzes such as composition of each sentence, sentence structure, affirmative and negative expression, and classification of parts of speech. Accordingly, the emotion text editing program may perform automatic analysis on the electronic document to perform editing so that the electronic text includes the emotional expression according to the context, and may suggest a recommendation feeling to the sentence being edited by the user. The automatic sentence analysis technique described above is a known technique and is not described in detail here.
그리고 복수개의 사용자 단말(110 ~ 130)은 라이브 보이스 변환 프로그램이 설치 및 구동되어, 라이브 텍스트를 라이브 보이스 신호로 자동으로 변환하고, 스피커와 같은 음향 출력 장치를 구비하여 변환된 라이브 보이스 신호를 라이브 보이스로 출력할 수 있다. 즉 복수개의 사용자 단말(110 ~ 130)은 감정 표현이 포함된 라이브 텍스트를 실제 사람이 말하는 것과 같이 악센트, 어조, 강세, 장음, 단음과 같은 음향 특성이 포함된 라이브 보이스로 변환하여 출력할 수 있다.A plurality of
기존에도 전자 텍스트를 보이스로 변환하여 출력하는 기술은 공개되어 있으나, 상기한 바와 같이 기존의 전자 텍스트는 감정 표현을 텍스트에 포함하지 못함에 따라 출력되는 보이스가 무미건조하고 텍스트의 의미를 정확하게 전달하지 못하였다. 그러나 본 발명에서는 라이브 텍스트에 감성 표현이 함께 편집되어 저장되어 있음에 따라, 텍스트를 보이스로 출력할 때, 텍스트에 지정된 즐거움, 기쁨, 울음, 불만, 감탄, 부끄러움, 민망, 화남, 놀람 등과 같은 감성 표현에 따라 악센트, 어조, 강세, 장음, 단음과 같은 음향 특성을 조절하여 라이브 보이스를 출력할 수 있다. 라이브 보이스 변환 프로그램은 감정 텍스트 편집 프로그램과 별도의 프로그램으로 제공될 수도 있으며, 감정 텍스트 편집 프로그램에 포함되어 구현될 수도 있다. 또한 라이브 보이스 변환 프로그램 또한 기존에 사용자 단말에 설치된 다른 프로그램에 애드온 프로그램의 형태로 제공되어 설치될 수도 있다.
Conventionally, a technique for converting electronic text into voices and outputting them has been disclosed. However, as described above, existing electronic texts do not include emotional expressions in text, Respectively. However, according to the present invention, since the emotional expressions are edited and stored together with the live text, when the text is outputted as a voice, the emotional expressions such as pleasure, joy, crying, dissatisfaction, admiration, shame, Depending on the expression, you can output live voice by adjusting acoustical characteristics such as accent, tones, accents, long sounds, and single sounds. The live voice conversion program may be provided as a separate program from the emotion text editing program, or may be included in the emotion text editing program. In addition, the live voice conversion program may be provided in the form of an add-on program to another program installed in the user terminal.
도1 에서 복수개의 사용자 단말(110 ~ 130)은 컴퓨터, 핸드폰, 스마트폰 및 PDA 등의 장치로 구현될 수 있다.1, the plurality of
네트워크(200)는 복수개의 사용자 단말(110 ~ 130)과 텍스트 편집 서버(300) 및 텍스트 전송 서버(400) 사이의 통신을 제공한다. 네트워크(200)는 통신 및 통신망과 동일한 의미로 사용될 수 있으며, 본 발명의 네트워크(200)는 유선 및 무선 네트워크를 모두 포함한다. 또한 네트워크(200)는 근거리 네트워크 및 원거리 광역 네트워크를 모두 포함할 수 있다.The
텍스트 편집 서버(300)는 감정 텍스트 편집 프로그램 및 라이브 보이스 변환 프로그램이 저장되어, 복수개의 사용자 단말(110 ~ 130)로 감정 텍스트 편집 프로그램과 라이브 보이스 변환 프로그램을 제공할 수 있다. 또한 텍스트 편집 서버(300)는 감정 텍스트 편집 프로그램을 사용자 단말(110 ~ 130)로 제공하지 않고, 직접 감정 텍스트 편집 프로그램을 구동할 수도 있다. 즉 네트워크(200)을 통해 사용자 단말(110 ~ 130)이 접속되면, 텍스트 편집 서버(300)는 접속되는 사용자 단말(110 ~ 130)에 감정 텍스트 편집 프로그램을 표시하고, 사용자가 사용자 단말(110 ~ 130)을 이용하여 온라인상에서 직접 텍스트에 감정 표현을 포함할 수 있도록 편집할 수 있도록 할 수도 있다. 즉 라이브 텍스트를 생성할 수 있도록 할 수 있다. 이 경우, 사용자는 감정 텍스트 편집 프로그램을 사용자 단말(110 ~ 130)에 설치하지 않아도 전자 텍스트에 감정 표현을 포함시켜 라이브 텍스트를 생성할 수 있다.The
또한 텍스트 편집 서버(300)는 경우에 따라서, 사용자 단말(110 ~ 130)에서 감정 표현이 포함되지 않은 전자 텍스트가 수신되는 경우에, 문장에 대해 자동 분석을 수행하여 전자 텍스트에 감정 표현을 포함시켜 라이브 텍스트로 변환할 수도 있다. 뿐만 아니라, 사용자 단말(110 ~ 130)이 텍스트 편집 서버(300)에 접속하여 온라인상에서 전자 텍스트를 편집하는 경우에도 텍스트 편집 서버(300)는 문장을 분석하여 자동으로 전자 텍스트에 포함할 감정 표현을 추가하거나, 사용자 단말(110 ~ 130)로 추천할 수도 있다.In addition, the
또한 텍스트 편집 서버(300)는 라이브 보이스 변환 프로그램도 직접 구동하여 복수개의 사용자 단말(110 ~ 130)로부터 수신되는 라이브 텍스트를 라이브 텍스트에 포함된 감정 표현에 따라 음향 특성이 가변되는 라이브 보이스 신호로 변환하여 복수개의 사용자 단말(110 ~ 130)으로 전송할 수도 있다. 즉 복수개의 사용자 단말(110 ~ 130)로부터 라이브 텍스트를 수신하여 라이브 보이스 신호로 변환한 후 다시 복수개의 사용자 단말(110 ~ 130)로 전송하는 변환 장치로서 동작할 수 있다.The
텍스트 전송 서버(400)는 복수개의 사용자 단말(110 ~ 130) 또는 텍스트 편집 서버(300)로부터 전자 텍스트를 수신하고, 임시로 저장한 후, 전자 텍스트 내에 포함된 다른 사용자에게 수신된 전자 텍스트를 전송하는 역할을 수행한다. 다만 본 발명에 따른 텍스트 전송 서버(400)는 단순히 전자 텍스트를 수신하여 전송하는 역할만을 수행하는 것이 아니라, 수신된 전자 텍스트에 감정 표현이 포함되어 있지 않으면, 즉 라이브 텍스트가 아니면, 텍스트 편집 서버(300)로 전자 텍스트를 전송하여 라이브 텍스트로 변환 요청하고, 변환된 라이브 텍스트를 수신하여 수신자의 사용자 단말로 전송할 수 있다. 전자 텍스트를 라이브 텍스트로의 자동 변환 여부는 전자 텍스트를 송신하는 사용자(즉 송신자)가 사용자 단말에서 설정할 수 있다. 그리고 텍스트를 송신하는 송신자와 수신하는 수신자는 동일하여도 무방하다.The
그리고 텍스트 전송 서버(400)는 경우에 따라서 복수개의 사용자 단말(110 ~ 130) 또는 텍스트 편집 서버(300)로부터 전자 텍스트 또는 라이브 텍스트를 수신하여, 수신된 전자 텍스트 또는 라이브 텍스트를 텍스트 편집 서버(400)로 전송하여 라이브 보이스 신호로 변환 요청하고, 변환된 라이브 보이스 신호를 설정된 수신자의 사용자 단말로 전송할 수도 있다.The
텍스트 전송 서버(400)가 전자 텍스트 또는 라이브 텍스트를 수신하여 라이브 보이스 신호를 전송하는 경우에도, 전자 텍스트와 마찬가지로, 라이브 텍스트를 수신하는 사용자 단말과 라이브 보이스를 전송하는 사용자 단말이 서로 동일하거나 다를 수 있다.Even when the
도1 에서는 설명의 편의를 위하여 텍스트 편집 서버(300)와 텍스트 전송 서버(400)를 별도의 장치로 도시하였으나, 텍스트 전송 서버(400)는 텍스트 편집 서버(300)에 포함되어 구현되어도 무방하며, 텍스트 전송 서버(400)가 감정 텍스트 편집 프로그램 및 라이브 보이스 변환 프로그램을 직접 구동하여 전자 텍스트를 라이브 텍스트로 변환하거나, 라이브 텍스트를 라이브 보이스로 변환하여도 무방하다.
Although the
도2 는 본 발명에 따른 라이브 텍스트의 실제 적용예를 나타낸다.Fig. 2 shows an actual application example of live text according to the present invention.
도2 에서 감정 편집도구(TE)는 감정 텍스트 편집 프로그램 상에 표시되어 상용자가 복수개의 감정 편집 아이콘 중 하나를 선택할 수 있도록 한다. 그리고 비록 도시되지 않았으나, 복수개의 감정 편집 아이콘 각각은 선택시 감정 표현의 강도를 설정하기 위한 화면을 추가로 제공할 수 있다. 감정 표현의 강도는 기설정된 범위의 숫자(예를 들면 1 ~ 5)로 제공될 수 있다. 도2 에서는 일예로서 감정 편집도구(TE)에 9개의 감정 편집 아이콘만이 도시되었으나, 감정 편집 아이콘의 개수 및 종류는 다양하게 설정될 수 있다.In FIG. 2, the emotion editing tool TE is displayed on the emotion text editing program so that the user can select one of a plurality of emotion editing icons. Although not shown, each of the plurality of emotion edit icons may further provide a screen for setting the intensity of the emotional expression at the time of selection. The strength of the emotional expression may be provided in a predetermined range of numbers (e.g., 1 to 5). Although only nine emotion edit icons are shown in the emotion edit tool TE as an example in FIG. 2, the number and types of emotion edit icons can be set variously.
도2 에서 (a)는 일반 전자 텍스트를 나타내며, (b) 및 (c)는 각각 감탄의 감정 편집 아이콘이 선택된 경우 및 불만의 감정 아이콘이 선택된 경우를 나타낸다.In FIG. 2, (a) shows general electronic text, (b) and (c) show a case where the emotion editing icon of admiration is selected, and a case where the emotion icon of the complaint is selected.
상기한 바와 같이 (a)의 일반 전자 텍스트는 실제로 좋은 아이디어로 생각하여 감탄하는 경우와, 그다지 좋지 않는 아이디어라고 생각하면서 일종의 반어법 형태로 좋다고 표현하는 경우의 2가지 의미로 해석될 수 있으므로, 사람들의 오해를 불러일으킬 소지가 있었다.As described above, the general electronic text of (a) can be interpreted in two meanings: a case of actually admiring and admiring a good idea, and a case of expressing it as a kind of ironic form while thinking it as a bad idea There was a misunderstanding.
그에 비해 어감에 의한 감정 표현이 포함된 라이브 텍스트인 (b) 및 (c)의 경우에는, 실제 사람이 말하는 것과 같이 감정이 포함되도록 어감에 대응하는 형태로 텍스트가 편집되어 함께 표시됨으로서, 전자 텍스트를 읽는 사람이 텍스트 작성자의 의도를 명확히 인지할 수 있도록 한다. 즉 (b)에서는 어감에 맞게 감탄사인 "참"을 짧고 높아지도록 표현한 반면, (c)에서는 "참"을 길고 점차 낮아지도록 표현하였다. 또한 도2 의 (b) 및 (c)에 도시한 바와 같이 텍스트의 색상 또한 긍정적인 경우에 밝고 채도가 높은 색상을, 부정적인 경우에 어둡고 채도가 낮은 색상으로 서로 다르게 조절하여 시각적으로 명확하게 인식할 수 있도록 할 수 있다.On the other hand, in the case of the live texts (b) and (c) in which the emotional expression due to the phrase is included, the text is edited and displayed together with the form corresponding to the phrase such that emotions are included, So that the reader of the text can clearly recognize the intention of the text creator. That is, in (b), "true", which is an admirable note, is expressed to be short and high, while in (c), "true" is expressed to be long and gradually lower. As shown in FIGS. 2 (b) and 2 (c), when the color of the text is also positive, bright and saturated colors are differently adjusted to dark and saturated colors in the negative case, Can be done.
상기한 바와 같이 기존의 텍스트 프로그램에서도 텍스트의 형태나 색상을 변형할 수는 있었으나, 이러한 텍스트의 변형이 감정 표현에 매칭되는 기준이 제시되어 있지 않으므로, 텍스트의 변형이 단순히 강조의 의미 이상은 없었다. 그러나 도2 에 도시된 바와 같이 본 발명에서는 각 감정에 따른 텍스트의 변형 형태를 어감에 따라 미리 설정하여 제공함으로서, 글을 읽는 사람들이 텍스트에 담긴 감정을 파악할 수 있도록 라이브 텍스트를 제공하면, 감정 텍스트 편집 프로그램의 보급화에 따라 다양한 단말에서 공통적으로 활용할 수 있는 텍스트 상의 감정 표현 기법의 기준을 제시할 수 있게 된다.As described above, in the conventional text program, the shape or color of the text could be modified. However, since the standard for matching the text with the modification of the text is not presented, the modification of the text merely means emphasis. However, as shown in FIG. 2, in the present invention, when a live text is provided so that the reader of the text can grasp the emotion contained in the text, the emotion text With the spread of the editing program, it is possible to present a standard of a text-based emotional expression technique that can be commonly used by various terminals.
그리고 이러한 라이브 텍스트가 활성화되면, 전자 텍스트 문서를 단순히 표준화된 음성으로만 읽어 주어 쉽게 지루해지던 TTS(Text To Speech) 기술에 적용하여, 감정 표현이 포함된 라이브 텍스트를 라이브 보이스로 변환함으로서 더욱 사실적인 음성 표현이 가능한 TTS를 제공할 수도 있다. 라이브 텍스트를 라이브 보이스로 변환하는 기술은 기존의 전자 텍스트를 음성으로 표현하는 TTS 기술에서 라이브 텍스트에 감정 표현을 위해 포함된 문장의 악센트, 어조, 강세, 장음, 단음 등의 음향 특성을 반영함으로서 용이하게 구현할 수 있다.
And when these live texts are activated, they are applied to the text-to-speech (TTS) technology, which is easily boring by reading electronic text documents simply as standardized voices. By converting live texts containing emotional expressions into live voices, It is also possible to provide a TTS capable of voice representation. The technique of converting live text to live voice is easy because it reflects acoustical characteristics such as accent, tone, accent, long sound, and single sound of sentence included in emotional expression in live text in TTS technology which expresses existing electronic text by voice .
도3 및 도4 는 본 발명의 일 실시예에 따른 감정 전달이 가능한 라이브 텍스트 및 라이브 보이스를 제공하기 위한 텍스트 편집 및 라이브 보이스 변환 방법을 나타낸다.3 and 4 illustrate a text editing and live voice conversion method for providing live text and live voice capable of delivering emotion according to an embodiment of the present invention.
도3 및 도4 는 특히 사용자 단말에서 라이브 텍스트를 제공하기 위한 텍스트 편집 방법을 나타낸다.Figures 3 and 4 illustrate a text editing method for providing live text, especially at a user terminal.
도3 을 참조하면, 본 발명의 라이브 텍스트 편집 방법은 사용자 단말(110 ~ 130)은 텍스트 편집 명령이 인가되면, 감정 텍스트 편집 프로그램이 기설치되어 있는지 판별한다(S11). 만일 감정 텍스트 편집 프로그램이 기설치되어 있지 않다면, 사용자 단말(110 ~ 130)은 텍스트 편집 서버(300)으로부터 감정 텍스트 프로그램을 다운로드하여 설치한다(S12). 그러나 감정 텍스트 프로그램이 기설치되어 있다면, 이 단계는 생략한다. 이후 감정 텍스트 편집 프로그램을 구동하여 텍스트 편집화면을 디스플레이부에 표시한다(S13).Referring to FIG. 3, in the live text editing method of the present invention, the
감정 텍스트 편집 프로그램이 구동되어 텍스트 편집 화면이 디스플레이부에 표시되면, 사용자는 텍스트를 편집하기 위해 명령을 인가하고, 사용자 단말(110 ~ 130)은 텍스트 편집 명령이 수신되는지 판별한다(S140). 여기서 텍스트 편집 명령은 전자 텍스트의 내용에 해당하는 문자 입력일 수도 있으며, 각 문자에 대한 기존의 텍스트 편집 명령 또는 감정 표현 편집 명령일 수도 있다.When the emotion text editing program is activated and a text editing screen is displayed on the display unit, the user applies a command to edit the text, and the
이에 사용자 단말(110 ~ 130)은 텍스트 편집 명령이 감정 표현 편집 명령인지 판별한다(S15). 즉 도2 에 도시된 감정 편집도구(TE)의 복수개의 감정 편집 아이콘 중 하나의 아이콘이 선택되었는지 판별한다. 판별 결과 감정 표현 편집 명령이면, 기설정된 구간의 텍스트에 대한 분석을 수행한다(S16). 텍스트 분석은 선택된 구간의 텍스트의 문장 구조 및 각 단어의 품사를 분석하여 수행된다. 그리고 선택된 감정 편집 아이콘에 대응하여 분석된 문장에 도2 의 (b) 및 (c)와 같이 어감에 따른 감정 표현을 포함한다(S17). 여기서 텍스트에 감정 표현을 포함하는 구간은 사용자가 편집 명령 입력 시 직접 설정할 수 있다. 그리고 텍스트에 선택된 감정 표현 아이콘에 대응하는 감정 표현을 포함하는 것은 각각의 감정에 대한 문장 구조에 따른 어감을 기설정하여 저장함으로서 사용자의 추가 텍스트 편집 없이 자동으로 수행될 수 있다.Accordingly, the
그리고 만일 텍스트 편집 명령이 감정 표현 편집 명령이 아니라면, 사용자 단말은 인가된 텍스트 편집 명령에 대응하여 텍스트를 편집한다(S18).If the text edit command is not an emotional expression edit command, the user terminal edits the text corresponding to the authorized text edit command (S18).
이후 사용자 단말(110 ~ 130)은 텍스트 편집 종료 명령이 인가되는지 판별한다(S19). 만일 텍스트 편집 종료 명령이 인가되면, 편집된 텍스트를 라이브 텍스트로서 저장한다(S20). 그러나 텍스트 편집 종료 명령이 인가되지 않으면, 다시 텍스트 편집 명령이 수신되는지 판별한다(S14). 여기서 라이브 텍스트로 저장 시에는 감정 텍스트 편집 프로그램을 다운로드할 수 있는 사이트의 인터넷 어드레스, 즉 텍스트 편집 서버(300)의 인터넷 어드레스를 함께 포함할 수 있다. 이렇게 라이브 텍스트에 감정 텍스트 편집 프로그램을 다운로드 할 수 있는 주소를 지정하는 경우, 감정 텍스트 편집 프로그램이 설치되지 않은 사용자 단말(110 ~ 130)이 라이브 텍스트를 열거나 편집하고자 하는 경우에 자동으로 감정 텍스트 편집 프로그램을 다운로드할 수 있는 사이트로 접속되어 라이브 텍스트의 보급을 활성화 할 수 있다.Thereafter, the
그리고 저장된 라이브 텍스트에 대해 라이브 보이스 변환 명령이 인가되는지 판별한다(S21). 라이브 보이스 변환 명령은 라이브 보이스 변환 프로그램이 사용자 단말(110 ~ 130)이 설치되어 있는 경우에 수신 가능하며, 이를 위해서 사용자 단말은 감정 텍스트 편집 프로그램과 마찬가지로 라이브 보이스 변환 프로그램이 기설치되어 있는지 확인하고 설치되어 있지 않으면, 텍스트 편집 서버(300)로부터 수신하여 설치 및 구동할 수 있다. 또한 라이브 보이스 변환 프로그램이 감정 텍스트 편집 프로그램에 포함되어 구현되어 있어도 무방하다.Then, it is determined whether a live voice conversion command is applied to the stored live text (S21). The live voice conversion command is received when the live voice conversion program is installed in the
만일 라이브 보이스 변환 명령이 인가된 것으로 판별되면, 사용자 단말(110 ~ 130)은 라이브 텍스트를 라이브 보이스 신호로 변환하고, 변환된 라이브 보이스 신호를 음향 신호로서 출력한다(S22).
If it is determined that the live voice conversion command is applied, the
그리고 도4 의 라이브 텍스트 편집 방법은 도3 과 마찬가지로 사용자 단말(110 ~ 130)에서 수행되는 편집 방법으로서, 기저정된 라이브 텍스트를 호출하여 재편집하고자 하는 경우를 나타낸다.The live text editing method of FIG. 4 is an editing method performed by the
도4 에서는 우선 사용자 단말(110 ~ 130)이 기저장된 텍스트를 호출한다(S31). 이때 호출되는 텍스트는 라이브 텍스트일 수도 있으며, 기존의 일반 텍스트일 수도 있다. 그리고 텍스트가 호출되면, 사용자 단말(110 ~ 130)에 가정 텍스트 편집 프로그램이 기 설치되어 있는지 판별한다(S32). 만일 감정 텍스트 편집 프로그램이 설치되어 있지 않으면, 텍스트 편집 서버(300)로 접속하여 감정 텍스트 편집 프로그램을 다운로드하여 설치한다(S33). 이때 라이브 텍스트가 호출된 경우라면, 라이브 텍스트에 포함된 인터넷 주소를 기초로 텍스트 편집 서버(300)로 접속로 자동 접속할 수 있다. 만일 사용자 단말(110 ~ 130)에 감정 텍스트 편집 프로그램이 설치되어 있으면, 이 단계를 생략한다.In FIG. 4, first, the
그리고 텍스트에 감정 표현을 포함하여 표시할지, 단순 텍스트만 표시할지 여부와 감정 표현이 포함되어 있지 않은 텍스트에 자동으로 감정 표현을 추가할지 여부에 대한 텍스트 감정 표현 포함 설정창을 표시한다(S34). 사용자 단말(110 ~ 130)로 수신되는 설정 명령이 텍스트의 감정 표현을 포함하는 것이고, 호출된 텍스트가 라이브 텍스트이면, 텍스트에 감정 표현을 포함하여 디스플레이부에 디스플레이 한다(S35). 이때, 사용자 명령이 자동으로 텍스트 감정 표현을 추가하는 것으로 설정되어 있으면, 사용자의 이전 텍스트 편집에 의해 포함된 감정 표현 영역을 제외한 나머지 영역에 대해 감정 텍스트 편집 프로그램이 자동으로 텍스트를 분석하여 감정 표현을 추가할 수 있다. 그리고 호출된 텍스트가 라이브 텍스트가 아닌 경우에는 텍스트 전체 영역에 대해 자동으로 분석하여 감정 표현을 추가할 수 있다.
In step S34, a setting window including a text emotion expression about whether to display an emotional expression in the text, whether to display only the simple text, and whether to automatically add the emotion expression to the text not including the emotion expression is displayed. If the setting command received by the user terminal 110-130 includes an emotional expression of the text and the called text is a live text, the emotional expression is displayed on the text and displayed on the display unit (S35). At this time, if the user command is set to automatically add the text emotion expression, the emotion text editing program automatically analyzes the text for the remaining area excluding the emotion expression area included by the previous text editing of the user, Can be added. If the called text is not live text, the entire text area can be automatically analyzed to add emotional expressions.
도5 는 본 발명에 따른 텍스트 감정 표현 포함 설정창의 일예를 나타낸다.Fig. 5 shows an example of a text emotion expression including setting window according to the present invention.
도5 에 도시된 바와 같이 본 발명의 라이브 텍스트 편집 방법은 텍스트에 감정 표현을 포함할지 여부를 사용자에게 설정하도록 할 수 있다.As shown in FIG. 5, the live text editing method of the present invention can set whether or not to include an emotional expression in a text.
이는 감정 표현이 포함된 라이브 텍스트에 거부감이 있는 사용자가 존재할 수 있기 때문에, 글을 읽는 사용자에게 라이브 텍스트를 적용할지 여부를 확인하는 것이다. 즉 기존과 같은 형태의 텍스트를 읽기 원하는 사용자에게는 라이브 텍스트일지라도 기본적인 텍스트를 표시할 수 있다. 추후 라이브 텍스트가 대중적으로 보급되면, 설정창 표시 단계는 생략될 수 있다.This is to ensure that the user reading the text will be able to apply live text, as there may be users with a sense of discomfort in the live text that contains the emotional expression. In other words, for users who want to read text in the same form as the original, it is possible to display basic text even if it is a live text. If later live text is popularized, the setting window display step may be omitted.
이후 라이브 텍스트를 사용자 단말(110 ~ 130)은 라이브 텍스트를 추가로 편집할 수 있으며, 이에 사용자 단말(110 ~ 130)은 텍스트를 추가로 편집하고자 하는 텍스트 편집 명령이 인가되는지 판별한다(S37). 그리고 텍스트 편집 명령이 인가되면, 텍스트 명령에 응답하여 텍스트를 편집한다(S38). 이는 도3 의 텍스트 편집 명령 수신 단계(S14)부터 텍스트 편집 단계(S18)에 대응하는 구성으로 상세한 설명은 생략한다.Thereafter, the user terminal 110-130 can further edit the live text, and the user terminal 110-130 determines whether a text editing command for further editing the text is applied (S37). When the text edit command is input, the text is edited in response to the text command (S38). This corresponds to the text edit command reception step S14 to the text edit step S18 of FIG. 3, and a detailed description thereof will be omitted.
그리고 도3 과 마찬가지로 텍스트 편집 종료 명령이 인가되는지 판별하고(S39), 텍스트 종료 명령이 인가되면 라이브 텍스트를 저장한다(S40). Then, as in FIG. 3, it is determined whether a text editing end command is applied (S39). When a text end command is given, live text is stored (S40).
그리고 도시하지 않았으나, 도4 의 라이브 텍스트 편집 방법 또한 도3 과 같이 추가로 생성된 라이브 텍스트를 라이브 보이스로 변환하는 단계를 포함할 수 있다.Although not shown, the live text editing method of FIG. 4 may also include the step of converting the live text, which is generated as shown in FIG. 3, into a live voice.
상기에서는 전자 텍스트를 호출하여 라이브 텍스트로 변환하고 변환된 라이브 텍스트를 라이브 보이스로 변환하는 방법을 설명하였으나, 경우에 따라서는 라이브 텍스트가 기저장되어 호출되고, 호출된 라이브 텍스트를 곧바로 라이브 보이스로 변환할 수도 있음은 자명하다.
In the above description, a method has been described in which an electronic text is called to convert to live text, and the converted live text is converted to a live voice. In some cases, live text is stored and called and the called live text is directly converted to live voice It is obvious that it can be done.
도6 은 본 발명의 다른 실시예에 따른 감정 전달이 가능한 라이브 텍스트 및 라이브 보이스를 제공하기 위한 텍스트 편집 및 라이브 보이스 변환 방법을 나타낸다.6 shows a text editing and live voice conversion method for providing live text and live voice capable of delivering emotion according to another embodiment of the present invention.
도6 은 도3 및 도4 와 달리 사용자 단말(110 ~ 130)이 텍스트 편집 서버(300)에 네트워크(200)을 통해 접속하고, 텍스트 편집 서버(300)에서 라이브 텍스트를 편집하는 방법을 나타낸다.6 illustrates a method in which the
도6을 참조하면, 텍스트 편집 서버(300)는 우선 적어도 하나의 사용자 단말(110 ~ 130)이 네트워크(200)을 통해 접속하는지 판별한다(S51). 그리고 사용자 단말이 접속하면, 접속된 사용자 단말(110 ~ 130)로부터 라이브 텍스트 변집 요청이 수신되는지 판별한다(S52). 라이브 텍스트 편집 요청이 수신되면, 기저장된 감정 텍스트 편집 프로그램을 구동한다(S53).Referring to FIG. 6, the
그리고 사용자 단말(110 ~ 130)으로부터 텍스트 편집 서버(300)에 기저장된 텍스트 호출 명령이 인가되는지 판별한다(S54). 만일 텍스트 호출 명령이 인가되면, 텍스트 편집 서버(300)에 기저장된 텍스트를 열어 사용자 단말(110 ~ 130)에 표시한다(S55). 그러나 텍스트 호출 명령이 인가되지 않으면, 사용자 단말(110 ~ 130)에 저장된 텍스트가 전송되어 수신되는지 판별한다(S56). 만일 사용자 단말(110 ~ 130)에 저장된 텍스트가 수신되면, 수신된 텍스트를 열어 사용자 단말(110 ~ 130)에 표시한다(S57). 이때, 텍스트 편집 서버(300)의 감성 텍스트 편집 프로그램은 상기한 바와 같이, 텍스트 열기와 함께, 복수개의 감정 편집 아이콘이 포함된 감정 편집도구(TE)를 사용자 단말(110 ~ 130)에 표시한다.Then, it is determined whether the text call command is stored in the
그리고 도4 와 마찬가지로, 텍스트에 감정 표현을 포함하여 표시할지, 단순 텍스트만 표시할지 여부와 감정 표현이 포함되어 있지 않은 텍스트에 자동으로 감정 표현을 추가할지 여부에 대한 텍스트 감정 표현 포함 설정창을 표시한다(S58). 사용자 단말(110 ~ 130)로 수신되는 설정 명령이 텍스트의 감정 표현을 포함하는 것이고, 호출된 텍스트가 라이브 텍스트이면, 텍스트에 감정 표현을 포함하여 디스플레이부에 디스플레이 한다(S59).As in FIG. 4, a setting window including a text emotional expression about whether to display an emotional expression in the text, whether to display only the simple text, and whether to automatically add the emotional expression to the text that does not include the emotional expression is displayed (S58). If the setting command received by the user terminal 110-130 includes an emotional expression of the text and the called text is live text, the emotional expression is displayed on the text and displayed on the display unit (S59).
만일 사용자 단말(110 ~ 130)에 저장된 텍스트도 수신되지 않는다면, 새로운 텍스트를 편집하고자 하는 것으로 판단하여 새로운 텍스트 화면을 연다(S60).If no text stored in the
기저장된 텍스트나 수신된 텍스트 또는 새 텍스트가 열리면, 텍스트 편집 서버(300)는 사용자 단말(110 ~ 130)로부터 텍스트를 추가로 편집하고자 하는 텍스트 편집 명령이 인가되는지 판별한다(S61). 그리고 텍스트 편집 명령이 인가되면, 텍스트 명령에 응답하여 텍스트를 편집한다(S62). 이때도, 도3 및 도4 와 유사하게 텍스트를 단순 편집할 수도 있으나 감정 표현이 포함되도록 편집할 수도 있다.When the stored text, the received text, or the new text is opened, the
그리고 사용자 단말(110 ~ 130)로부터 텍스트 편집 종료 명령이 인가되는지 판별한다(S63). 텍스트 편집 종료 명령이 인가되면, 텍스트 편집 서버(300)는 라이브 텍스트를 저장한다(S64). 이때 텍스트 편집 서버(300)는 라이브 텍스트를 사용자 단말(110 ~ 130)에서 지정하는 수신자의 메일 주소나, 전화 번호 및 SNS의 ID등을 이용하여 수신자의 사용자 단말로 곧바로 전송할 수도 있다.Then, it is determined whether a text editing end command is applied from the
한편 텍스트 편집 종료 명령이 인가되거나, 라이브 텍스트 편집 요청이 인가되지 않으면, 텍스트 편집 서버(300)는 라이브 보이스 변환 요청이 수신되는지 판별한다(S65). 만일 라이브 보이스 변환 요청이 사용자 단말(110 ~ 130)로부터 수신되면, 텍스트 편집 서버(300)는 기저장된 라이브 텍스트 또는 사용자 단말(110 ~ 130)에서 수신되는 라이브 텍스트를 라이브 텍스트에 포함된 악센트, 어조, 강세, 장음, 단음 등의 음향 특성을 반영하여 라이브 보이스 신호로 변환하여 저장한다(S66).On the other hand, if the text editing end command is given or if the live text editing request is not granted, the
이때 텍스트 편집 서버(300)는 라이브 텍스트와 마찬가지로 변환된 라이브 보이스를 사용자 단말(110 ~ 130)에서 지정하는 수신자의 메일 주소나, 전화 번호 및 SNS의 ID등을 이용하여 수신자의 사용자 단말로 곧바로 전송할 수도 있다.
At this time, the
도7 은 본 발명의 또 다른 실시예에 따른 감정 전달이 가능한 라이브 텍스트 및 라이브 보이스를 제공하기 위한 텍스트 편집 및 라이브 보이스 변환 방법을 나타내며, 텍스트 전송 서버(400)에서 라이브 텍스트를 편집하거나, 라이브 보이스로 변환하는 방법을 나타낸다.FIG. 7 shows a text editing and live voice conversion method for providing live text and live voice capable of delivering emotion according to another embodiment of the present invention. In the
도7 을 참조하면, 텍스트 전송 서버(400)는 우선 사용자 단말(110 ~ 130)이 접속하는지 판별한다(S71). 그리고 사용자 단말(110 ~ 130)이 접속하면, 사용자 단말로부터 전송할 텍스트를 수신한다(S72). 텍스트 전송 서버(400)는 전송할 텍스트가 수신되면, 수신된 텍스트가 기존의 전자 텍스트인지, 감정 표현이 포함된 라이브 텍스트인지 판별한다(S73). 만일 감정 표현이 포함되어 있지 않은 전자 텍스트라면, 텍스트에 감정 표현을 포함하여 표시할지, 단순 텍스트만 표시할지 여부와 감정 표현이 포함되어 있지 않은 텍스트에 자동으로 감정 표현을 추가할지 여부에 대한 사용자 설정을 판별한다(S74). 여기서 사용자 설정은 사용자 단말(110 ~ 130) 또는 텍스트 전송 서버(400) 중 적어도 하나에 기설정되어 저장될 수 있다. 그러나 경우에 따라서는 도6 과 마찬가지로, 텍스트 감정 표현 포함 설정창을 사용자 단말(110 ~ 130)에 표시하여, 사용자 단말로부터 설정을 수신할 수도 있다. 그리고 기설정된 사용자 설정이 텍스트의 감정 표현을 포함하는 것이고, 호출된 텍스트가 라이브 텍스트이면, 텍스트에 감정 표현을 포함한다(S75). 그러나 만일 사용자 설정이 텍스트의 감정 표현을 포함하지 않도록 설정되어 있으면, 기존의 텍스트와 동일하게 텍스트에 감정 표현을 포함하지 않는다.Referring to FIG. 7, the
라이브 텍스트가 수신된 경우나, 전자 텍스트가 라이브 텍스트로 변환되면, 라이브 텍스트를 라이브 보이스로 변환할지 여부에 대한 사용자 설정을 판별한다(S76). 만일 라이브 보이스로의 변환 설정이 되어 있지 않다면, 텍스트 전송 서버(400)는 라이브 텍스트를 사용자 단말(110 ~ 130)에서 지정하는 수신자의 메일 주소나, 전화 번호 및 SNS의 ID등을 이용하여 수신자의 사용자 단말로 전송한다(S77).When the live text is received, or when the electronic text is converted into live text, the user setting for determining whether to convert the live text to live voice is determined (S76). If the conversion to the live voice is not set, the
그러나 사용자 설정이 라이브 텍스트를 라이브 보이스로 변환하는 것으로 설정되어 있으면, 텍스트 전송 서버(400)는 라이브 텍스트를 라이브 보이스 신호로 변환한다(S78). 이후 텍스트 전송 서버(400)는 변환된 라이브 보이스 신호를 사용자 단말(110 ~ 130)에서 지정하는 수신자의 메일 주소나, 전화 번호 및 SNS의 ID등을 이용하여 수신자의 사용자 단말로 전송한다(S79).However, if the user setting is set to convert the live text to live voice, the
일반적으로 텍스트 전송 서버(400)는 기본적으로 텍스트를 편집하기 위한 장치가 아니라 단순히 텍스트를 하나의 사용자 단말에서 다른 사용자 단말로 전달하기 위한 전송 수단이지만, 본 발명에서는 텍스트 전송 서버(400)가 수신되는 텍스트에 자동으로 감정 표현을 포함하여 라이브 텍스트로 변환하여 전송하거나 라이브 텍스트를 라이브 보이스로 변환하여 전송할 수 있도록 한다. 이를 위해 텍스트 전송 서버(400)는 감정 텍스트 편집 프로그램 및 라이브 보이스 변환 프로그램이 저장되어 항시 구동되도록 설정될 수 있다.
In general, the
상기에서는 사용자 단말(110 ~ 130), 텍스트 편집 서버(300) 및 텍스트 전송 서버(400)를 각각 분리하여 설명하였으나, 사용자 단말(110 ~ 130), 텍스트 편집 서버(300) 및 텍스트 전송 서버(400)는 모두 감성 텍스트 편집 장치로 일괄적으로 칭할 수 있다.
Although the
상기한 바와 같이 본 발명은 텍스트에 감정 표현을 위한 기준을 제시할 수 있으며, 이러한 기준이 어감을 기초로 하기 때문에 라이브 텍스트를 읽는 사람들이 직관적으로 텍스트를 읽는 동안 어감에 의해 글쓴이의 감정을 용이하게 파악할 수 있다. 따라서 전자 텍스트의 해석의 오해로 인한 사람들간의 분쟁이 발생하는 것을 줄일 수 있다. 또한 TTS에 적용하여 라이브 보이스로 변환 가능하므로 더욱 실감나는 읽기 기능을 제공할 수 있다.
As described above, the present invention can present a criterion for emotional expression in text, and since the criterion is based on the phrase, the reader of the live text can easily feel the feelings of the writer while reading the text intuitively . Therefore, it is possible to reduce the occurrence of disputes among people due to the misunderstanding of the interpretation of the electronic text. Also, it can be converted into live voice by applying to TTS, so it can provide more realistic reading function.
본 발명에 따른 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
The method according to the present invention can be implemented as a computer-readable code on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and a carrier wave (for example, transmission via the Internet). The computer-readable recording medium may also be distributed over a networked computer system so that computer readable code can be stored and executed in a distributed manner.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is evident that many alternatives, modifications and variations will be apparent to those skilled in the art.
따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.
Claims (23)
상기 감성 텍스트 편집 장치가 복수개의 감정 표현 중 하나를 선택할 수 있도록 하는 감정 편집 도구를 사용자에게 제공하는 단계;
상기 감성 텍스트 편집 장치가 사용자에 의해 복수개의 감정 표현 중 하나가 선택되면, 텍스트의 문장 구조를 분석 및 파악하는 단계; 및
상기 감성 텍스트 편집 장치가 복수개의 문장 구조 및 복수개의 감정 표현의 조합 각각에 대응하는 텍스트 형태가 정의되어 있는 텍스트 변화 규칙을 참고하여, 상기 선택된 감정 표현과 상기 파악 문장 구조에 대응하는 텍스트 변화 규칙을 상기 텍스트에 적용하여 상기 텍스트를 상기 감정 표현을 포함하는 라이브 텍스트로 변환하는 단계;를 포함하며,
상기 텍스트 변화 규칙은
상기 선택된 감정 표현과 상기 파악 문장 구조를 기반으로, 상기 텍스트에 포함된 글자 각각의 형태 및 색상이 시간대별로 가변되도록 하는 것을 특징으로 하는 텍스트 편집 및 보이스 변환 방법.A method for text editing and voice conversion of an emotional text editing apparatus,
Providing a user with an emotional editing tool that allows the emotional text editing device to select one of a plurality of emotional expressions;
Analyzing and grasping a sentence structure of the text if the emotional text editing apparatus selects one of a plurality of emotional expressions by the user; And
The emotional text editing apparatus refers to a text change rule in which a text form corresponding to each of a plurality of sentence structures and a combination of a plurality of emotional expressions is defined so as to determine a text change rule corresponding to the selected emotion expression and the perceived sentence structure And converting the text into live text including the emotional expression by applying the text to the text,
The text change rule
Wherein the type and color of each of the characters included in the text are varied on a time-based basis, based on the selected emotional expression and the perceived sentence structure.
상기 선택된 감정 표현과 상기 파악 문장 구조를 기반으로, 상기 텍스트에 포함된 글자 각각의 형태 및 색상이 가변되도록 하는 것을 특징으로 하는 텍스트 편집 및 보이스 변환 방법.The method of claim 1,
And the shape and color of each of the characters included in the text are varied based on the selected emotional expression and the perceived sentence structure.
상기 선택된 감정 표현과 상기 파악 문장 구조를 기반으로, 상기 텍스트에 포함된 문장의 악센트, 어조, 강세, 장음, 단음 중 적어도 하나가 가변되도록 하는 것을 특징으로 하는 텍스트 편집 및 보이스 변환 방법.3. The method of claim 2,
Wherein at least one of an accent, a tone, an accent, a prolonged sound, and a short tone of a sentence included in the text is varied based on the selected emotional expression and the perceived sentence structure.
상기 텍스트 변화 규칙을 참고하여 상기 라이브 텍스트를 음향 신호 형태의 라이브 보이스로 변환하여 출력하는 단계를 더 포함하는 것을 특징으로 하는 텍스트 편집 및 보이스 변환 방법.The method of claim 3,
Converting the live text into a live voice in the form of a sound signal with reference to the text change rule, and outputting the converted live voice.
상기 텍스트의 라이브 텍스트 변환 범위를 선택 및 조정할 수 있는 것을 특징으로 하는 텍스트 편집 및 보이스 변환 방법.2. The method of claim 1,
Wherein a range of live text conversion of the text can be selected and adjusted.
상기 감정 텍스트 편집 프로그램을 구동하여 복수개의 감정 표현 중 하나를 선택할 수 있도록 하는 감정 편집 도구를 사용자에게 제공한 후, 사용자에 의해 복수개의 감정 표현 중 하나가 선택되면, 텍스트의 문장 구조를 분석 및 파악하고, 복수개의 문장 구조 및 복수개의 감정 표현의 조합 각각에 대응하는 텍스트 형태가 정의되어 있는 텍스트 변화 규칙을 참고하여, 상기 선택된 감정 표현과 상기 파악 문장 구조에 대응하는 텍스트 변화 규칙을 상기 텍스트에 적용하여 상기 텍스트를 상기 감정 표현을 포함하며,
상기 텍스트 변화 규칙은
상기 선택된 감정 표현과 상기 파악 문장 구조를 기반으로, 상기 텍스트에 포함된 글자 각각의 형태 및 색상이 시간대별로 가변되도록 하는 것을 특징으로 하는 라이브 텍스트로 변환하는 감성 텍스트 편집 장치.And an emotional text editing program in which a text change rule for converting a form of a text corresponding to each of a plurality of sentence structures and a combination of a plurality of emotional expressions is previously stored and stored,
The method comprising: providing a user with an emotional editing tool that enables the user to select one of a plurality of emotional expressions by driving the emotional text editing program; and when one of the plurality of emotional expressions is selected by the user, A text change rule corresponding to the selected emotion expression and the perceived sentence structure is applied to the text by referring to a text change rule in which a text form corresponding to each of a plurality of sentence structures and a combination of a plurality of emotion expressions is defined Said text including said emotional expression,
The text change rule
Wherein the type and color of each of the characters included in the text are varied on a time-based basis, based on the selected emotional expression and the perceived sentence structure.
상기 감정 텍스트 프로그램에 의해 편집된 라이브 텍스트를 상기 텍스트 변화 규칙에 의해 표현되는 문장의 악센트, 어조, 강세, 장음, 단음의 변화를 반영하여 음향 신호인 라이브 보이스 신호로 변환하는 라이브 보이스 변환 프로그램을 더 구비하고,
상기 라이브 보이스 변환 프로그램을 구동하여, 상기 라이브 텍스트를 상기 라이브 텍스트에 적용된 텍스트 변화 규칙에 대응하는 음향 신호인 라이브 보이스 신호로 변환하는 것을 특징으로 하는 감성 텍스트 편집 장치.9. The method of claim 8,
And a live voice conversion program for converting a live text edited by the emotion text program into a live voice signal which is an acoustic signal reflecting a change in accent, tone, accent, prolonged sound, and single sound of a sentence represented by the text change rule Respectively,
And the live voice conversion program is driven to convert the live text into a live voice signal which is an acoustic signal corresponding to a text change rule applied to the live text.
사용자 단말로 구현되는 것을 특징으로 하는 감성 텍스트 편집 장치.9. The apparatus according to claim 8, wherein the emotional text editing apparatus
Wherein the emotional text editing device is implemented as a user terminal.
텍스트 편집 서버로 구현되는 것을 특징으로 하는 감성 텍스트 편집 장치.9. The apparatus according to claim 8, wherein the emotional text editing apparatus
And the text editing server is implemented as a text editing server.
텍스트 전송 서버로 구현되는 것을 특징으로 하는 감성 텍스트 편집 장치.9. The apparatus according to claim 8, wherein the emotional text editing apparatus
Wherein the text editing server is implemented as a text transmission server.
애드온 타입의 프로그램으로 구현될 수 있는 것을 특징으로 하는 감성 텍스트 편집 장치.
10. The method according to claim 9, wherein each of the emotional text editing program and the live voice conversion program
And can be implemented as an add-on type program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR20130040878A KR101509196B1 (en) | 2013-04-15 | 2013-04-15 | System and method for editing text and translating text to voice |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR20130040878A KR101509196B1 (en) | 2013-04-15 | 2013-04-15 | System and method for editing text and translating text to voice |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20140123715A KR20140123715A (en) | 2014-10-23 |
| KR101509196B1 true KR101509196B1 (en) | 2015-04-10 |
Family
ID=51994254
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR20130040878A KR101509196B1 (en) | 2013-04-15 | 2013-04-15 | System and method for editing text and translating text to voice |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101509196B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020235696A1 (en) * | 2019-05-17 | 2020-11-26 | 엘지전자 주식회사 | Artificial intelligence apparatus for interconverting text and speech by considering style, and method for same |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101994803B1 (en) * | 2017-03-14 | 2019-07-01 | 이명철 | System for text editor support applicable affective contents |
| KR102053076B1 (en) * | 2018-07-09 | 2019-12-06 | 주식회사 한글과컴퓨터 | Document editing apparatus capable of applying styles based on emotion analysis and operating method thereof |
| WO2020235712A1 (en) * | 2019-05-21 | 2020-11-26 | 엘지전자 주식회사 | Artificial intelligence device for generating text or speech having content-based style and method therefor |
| CN112115686A (en) * | 2019-06-21 | 2020-12-22 | 珠海金山办公软件有限公司 | Document editing method and device, computer storage medium and terminal |
| CN110517689B (en) * | 2019-08-28 | 2023-11-24 | 腾讯科技（深圳）有限公司 | Voice data processing method, device and storage medium |
| CN114745349B (en) * | 2021-01-08 | 2023-12-26 | 上海博泰悦臻网络技术服务有限公司 | Comment method, electronic equipment and computer readable storage medium |
| CN117275455B (en) * | 2023-11-22 | 2024-02-13 | 深圳市阳日电子有限公司 | Sound cloning method for translation earphone |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002244688A (en) * | 2001-02-15 | 2002-08-30 | Sony Computer Entertainment Inc | Information processor, information processing method, information transmission system, medium for making information processor run information processing program, and information processing program |
-
2013
- 2013-04-15 KR KR20130040878A patent/KR101509196B1/en not_active IP Right Cessation
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002244688A (en) * | 2001-02-15 | 2002-08-30 | Sony Computer Entertainment Inc | Information processor, information processing method, information transmission system, medium for making information processor run information processing program, and information processing program |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020235696A1 (en) * | 2019-05-17 | 2020-11-26 | 엘지전자 주식회사 | Artificial intelligence apparatus for interconverting text and speech by considering style, and method for same |
| US11715485B2 (en) | 2019-05-17 | 2023-08-01 | Lg Electronics Inc. | Artificial intelligence apparatus for converting text and speech in consideration of style and method for the same |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20140123715A (en) | 2014-10-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101509196B1 (en) | System and method for editing text and translating text to voice | |
| US7062437B2 (en) | Audio renderings for expressing non-audio nuances | |
| US20220230374A1 (en) | User interface for generating expressive content | |
| CN101030368B (en) | Method and system for communicating across channels simultaneously with emotion preservation | |
| KR102582291B1 (en) | Emotion information-based voice synthesis method and device | |
| US6975988B1 (en) | Electronic mail method and system using associated audio and visual techniques | |
| CN102117614B (en) | Personalized text-to-speech synthesis and personalized speech feature extraction | |
| JP4651613B2 (en) | Voice activated message input method and apparatus using multimedia and text editor | |
| US7366979B2 (en) | Method and apparatus for annotating a document | |
| KR20090085376A (en) | Service method and apparatus for using speech synthesis of text message | |
| US20060069567A1 (en) | Methods, systems, and products for translating text to speech | |
| EP2157571A2 (en) | Automatic answering device, automatic answering system, conversation scenario editing device, conversation server, and automatic answering method | |
| RU2692051C1 (en) | Method and system for speech synthesis from text | |
| KR20100129122A (en) | Animation system for reproducing text base data by animation | |
| KR102076793B1 (en) | Method for providing electric document using voice, apparatus and method for writing electric document using voice | |
| JP4072900B2 (en) | Terminal device | |
| CN111142667A (en) | System and method for generating voice based on text mark | |
| JP2005065252A (en) | Cell phone | |
| CN111105776A (en) | Audio playing device and playing method thereof | |
| KR20000024318A (en) | The TTS(text-to-speech) system and the service method of TTS through internet | |
| JP4586063B2 (en) | Terminal device | |
| JP2002268664A (en) | Voice converter and program | |
| KR100487446B1 (en) | Method for expression of emotion using audio apparatus of mobile communication terminal and mobile communication terminal therefor | |
| CN116956826A (en) | Data processing method and device, electronic equipment and storage medium | |
| KR102295826B1 (en) | E-book service method and device for providing sound effect |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| FPAY | Annual fee payment |
Payment date: 20180226 Year of fee payment: 4 |
|
| LAPS | Lapse due to unpaid annual fee |