KR100754571B1 - 발음 기술 언어에 의한 음성 합성을 실행하는 단말 장치 - Google Patents

Abstract

본 발명의 단말장치는, 소정의 발음 기술 언어에 준거한 발음 문자열을 이용하여 기술된 전자 메일 등의 텍스트에 대하여 소망의 음성 합성을 행하는 것을 특징으로 한다. 여기서, 발음 기술 언어에 준거한 발음 문자열에 의해 지정된 단어(예컨대, 문자나 음소, 일본어의「가나」문자)에 부여되는 억양 등이 규정되어, 자동으로 해석됨으로써 발음 문자열에 대하여 음성 합성이 행해진다. 따라서, 유저는 단말 장치를 조작하여 발음 문자열을 포함하는 전자 메일을 작성하여, 이것이 다른 단말 장치에 송신되어 수신되어, 여기서 상기 발음 문자열이 자동으로 해석됨으로써 전자 메일의 음성 합성이 행해진다.

Description

발음 기술 언어에 의한 음성 합성을 실행하는 단말 장치{TERMINAL DEVICE FOR EXECUTING SPEECH SYNTHESIS USING UTTERANCE DESCRIPTION LANGUAGE}

도 1은 본 발명의 바람직한 실시예에 따른 휴대 전화기의 구성을 도시하는 블록도이다.

도 2은 본 실시예에서의 발음 문자열을 포함하는 문장인 전자 메일의 본문의 일례를 도시한다.

도 3a는 본 실시예에서의 발음 기술 언어에 이용되는 각종 기호의 대표예가 나타내는 발음 제어 명령의 일람이다.

도 3b는 상기 기호에 의한 발음 제어 명령에 따른 각 문자의 문두에서의 피치 변화 태양을 도시한다.

도 3c는 상기 기호에 의한 발음 제어 명령에 따른 각 문자의 발음 중 피치 변화 태양을 도시한다.

도 4a는 HV-Script에 의한 발음 문자열을 포함하는 전자 메일의 작성예를 도시한다.

도 4b는 상기 전자 메일에서 HV-Script가 전용 제어 문자에 삽입된 모양을 도시한다.

도 4c는 상기 전자 메일 중의 HV-Script을 첨부 파일로서 분리시키고, 또한 그 전용 제어 문자를 그림 문자로서 표시한 모양을 도시한다.

도 5는 본 실시예에서의 송신측 휴대 전화기의 동작을 도시하는 흐름도이다.

도 6은 본 실시예에서의 수신측 휴대 전화기의 동작을 도시하는 흐름도이다.

* 도면의 주요부분에 대한 부호의 설명 *

1 : 휴대 전화기 11 : CPU

12 : 통신부 12a : 안테나

13 : 음성 처리부 14, 17 : 스피커

15 : 마이크 16 : 음성 합성 기능을 가진 음원

18 : 조작부 19 : RAM

20 : ROM 21 : 표시부

22 : 바이브레이터 30 : 버스

본 발명은 전자 메일 등의 데이터 송수신이 가능한 단말 장치에 관한 것으로, 특히 발음 기술 언어에 의한 음성 합성을 실행하는 단말 장치에 관한 것이다.

본 출원은 일본국 특원 제2003-18891호에 기초하여 우선권을 주장하는 것이며, 여기에 그 내용을 포함하는 것으로 한다.

종래부터 텍스트 형식으로 기술된 문장을 음성 합성하는 기술이 개발ㆍ이용되고 있다. 현재는, 또한, 합성하는 음성에 그 억양(intonation) 등을 부가하여, 보다 자연스러운 사람의 발음을 모방하는 기술이 개발되어 있다.

한편, 휴대 전화기나 퍼스널 컴퓨터 등에서는, 전자 메일의 착신을 소정의 음성 합성에 의해 통지하거나, 텍스트 형식으로 기술된 전자 메일을 음성 합성하여 소리내어 읽을 수 있도록 되어 있다. 예컨대, 일본국 특원 제2002-73507호 공보(이하, 「특허문헌」이라 칭한다)에는, 전자 메일의 본문에 첨부 파일 참조용 코드/문자열을 삽입하여, 텍스트 본문을 소리내어 읽을 수 있는데 이어, 삽입된 소정의 코드/문자열에 대응된 음악 데이터 또는 화상 데이터로 이루어지는 첨부 파일을 참조하여 그 첨부 파일 데이터의 재생 및/또는 표시를 함으로써, 통상의 텍스트 송신으로서는 전달하기 어려운 감정(즐거움 등)을 전달하는 기술이 개시되어 있다. 이 특허 문헌에서는, 소정의 코드/문자열에 대응하는 음악 데이터 또는 화상 데이터를 송신해야 할 전자 메일에 첨부 파일로서 자동 첨부하도록 되어 있다.

그러나, 상기 특허 문헌에 기재된 기술에서는, 전자 메일의 본문 중에 삽입되는 소정의 코드/문자열에 대응하여 미리 준비된 음악 데이터 또는 화상 데이터로 이루어지는 첨부 파일을 작성하여, 상기 첨부 파일을 전자 메일과 동시에 송신하고, 한편, 수신측에서는 전자 메일 본문에 삽입된 소정의 코드/문자열에 기초하여 첨부 파일이 나타내는 음악 데이터 또는 화상 데이터를 재생하고 있다. 이 때문에, 음성 합성에 관해서는 텍스트 본문을 음성 합성할 뿐이고, 이것에 음악 데이터 또는 화상 데이터의 재생 기능을 부가한 것에 지나지 않는다. 즉, 송신측의 유저가 음성 합성시키는 단어나 그 억양 등을 임의로 지정하여 수신측에서 재생시킨다 고 하는 기술을 개시하고 있는 것이 아니다.

또한, 음악 데이터 또는 화상 데이터를 첨부 파일에 포함시키는 것으로, 전자 메일 본문 중에 소정의 코드/문자열이 삽입되게 되는데, 삽입되는 소정의 코드/문자열이 언어로서 의미를 갖는 문자열인 경우는 여하튼, 유저에게 있어 의미 없는 제어 코드가 삽입된 경우에, 소위 문자화된 것으로 착각되는 때도 있고, 또 수신측에서 시각 인식적으로 바람직한 것이 아니다. 특히, 수신측이 휴대 전화기 등의 소형의 휴대 단말 장치인 경우에는, 그 표시 화면이 작기 때문에, 시각 인식적으로 보다 바람직하지 않다. 또, 삽입되는 문자열이 언어로서 의미가 있어 시각 인식적으로 문제가 없더라도, 상기 문자열에 대응하여 재생되는 것은 미리 준비된 음악 데이터 또는 화상 데이터이고, 수신측에서 인식상 혼란되는 것도 생각할 수 있다.

(발명의 개시)

본 발명은 상기의 점에 감안하여 이루어진 것으로, 그 목적은, 텍스트 형식으로 기술되고, 지정된 단어에 억양 등이 부여된 음성을 합성하기 위한 발음 문자열을 나타내는 텍스트 데이터를 수신하여, 지정된 단어에 억양 등이 부여된 음성의 합성을 행하는 텍스트 데이터 수신 장치를 제공하는 것이다.

또, 본 발명의 다른 목적은, 상기 텍스트 형식으로 기술되고, 지정된 단어에 억양 등이 부여된 음성을 발음하기 위한 발음 문자열을 나타내는 텍스트 데이터를 송신하는 텍스트 데이터 송신 장치를 제공하는 것이다.

상기와 같이, 음성 합성용 발음 기술 언어에 의해 전자 메일의 수신측에서 지정된 단어뿐만 아니라, 그 억양 등을 포함하여 음성 합성할 수 있고, 또한 수신 측에 대하여 송신하는 전자 메일의 본문은 읽기 쉽고, 읽는 사람에게 불쾌감을 주지 않을 수 있는 발음 기술 언어에 의한 음성 합성을 실행하는 단말 장치를 제공할 수 있다.

본 발명에 의한 단말 장치에서는, 소정의 발음 기술 언어에 준거한 발음 문자열을 도입함으로써 전자 메일 등의 텍스트문을 음성화할 때, 소망의 음성 합성을 행하는 것을 특징으로 하고 있다. 즉, 텍스트문에서, 지정된 단어(각 문자나 각 음소, 일본어의 경우에는 가나 문자 등)에 부여하는 억양(인토네이션) 등을 규정하는 음성 발음용 발음 기술 언어에 의한 발음 문자열을 자동으로 해석하여, 상기 발음 문자열에서 규정되는 음성을 음성 합성하는 음성 합성 수단이 상기 단말 장치에 구비되어 있다. 따라서, 송신자측은 단말 장치를 조작하여 발음 문자열을 포함하여 전자 메일을 작성하여 송신하면, 수신자측의 단말 장치에서는 상기 전자 메일에 포함되는 발음 문자열을 자동으로 검출ㆍ해석하여, 음성 합성이 행해진다.

상기의 경우, 발음 문자열은 전자 메일의 본문 내에 기술하고, 그 후 자동으로 첨부 파일에 기입된다. 또, 발음 문자열은 전용 제어 문자에 의해 그 범위가 지정되어 있고, 첨부 파일의 자동 작성 시에, 전자 메일의 본문으로부터 발음 문자열이 자동으로 삭제됨과 동시에, 전용 제어 문자를 소망의 그림 문자 등으로 자동 치환한다. 이것에 의해, 전자 메일의 본문에는 시각상 발음 문자열이 삭제되어 있으므로, 수신자가 전자 메일을 수신하여 표시할 때, 시각 인식상 혼란되는(심리적인) 불쾌감을 가지는 일이 없게 된다. 또, 발음 문자열을 기술한 첨부 파일은 전 자 메일의 본문이 음성화될 때, 실시간으로 자동으로 해석되어 음성 합성되므로, 수신자는 송신자가 의도하는 억양 등을 수반한 음성을 들을 수 있다.

또, 발음 문자열에는, 억양 등을 부여하는 것을 의도하는 문자(혹은, 음소 등)의 직전 또는 직후에 소정의 기호(영숫자, 특수 문자 등)를 배치하도록 하는 구문으로 되어 있고, 관련된 기호를 검지ㆍ해석하는 수단으로서는, 비교적 단순한 테이블 등을 설정하여 음성 제어하는 것만으로 되어, 비교적 간이하게 본 발명의 기능을 기존의 휴대 단말 장치 등에서 실현할 수 있다.

(발명을 실시하기 위한 최선의 형태)

본 발명에 대하여, 도면을 참조하여 실시예와 함께 상세히 설명한다.

도 1은 본 발명의 바람직한 실시예를 나타내는 휴대 전화기의 구성을 도시하는 블록도이다. 또, 본 발명은 휴대 전화기(cellular phone) 등에 한하지 않고, PHS(Personal Handyphone System: 일본국 등록 상표명)나 휴대 정보 단말(PDA:Personal Digital Assistant) 및 퍼스널 컴퓨터 등에도 적용할 수 있다.

도 1에서, 부호 1은 CPU(중앙 처리 장치)를 나타내고, 각종 프로그램을 실행함으로써 휴대 단말 장치(1)의 각부의 동작을 제어한다. 부호 12는 통신부를 나타내고, 탑재된 안테나(12a)에 의해 수신된 신호의 복조를 행함과 동시에, 송신하는 신호를 변조하여 안테나(12a)에 공급하고 있어, 송수신 수단 혹은 통신 수단으로서 기능하는 것이다.

상기 CPU(11)는, 통신부(12)에서 수신ㆍ복조된 인터넷 등의 네트워크 경유의 신호에 대하여 소정의 프로토콜에 따라 복호화를 행하여, 그 복호 신호에 포함된 정보(예컨대, 전자 메일 등의 텍스트 정보)를 표시부(21)의 화면 상에 표시함과 동시에, 전자 메일 또는 그 첨부 파일에 발음 문자열이 포함되는 경우에는, 그 발음 문자열로 규정되는 음성을 음성 합성 기능을 가진 음원부(16)에서 음성 합성한다. 또, 전자 메일 등의 송신 데이터는 CPU(11)에서 소정의 프로토콜에 의한 부호화가 행해져, 상기 통신부(12)에서 변조된 후, 송신처의 서버(전자 메일을 송신하는 경우에는, 메일 서버)를 향하여, 안테나(12a)에서 기지국으로 송신된다.

부호 13은 음성 처리부를 나타낸다. 상기 통신부(12)에서 전화 회선 등을 경유하여 수신한 음성 신호가 복호된 후, 음성 처리부(13)에서 복호되어, 스피커(14)로부터 음성 출력된다. 한편, 마이크로폰(15)으로 집음ㆍ입력된 음성 신호는 음성 처리부(13)에서 디지털 처리되어, 압축 부호화된다. 그 후, 통신부(12)에서 변조되어 안테나(12a)를 통하여 휴대 전화망에 접속된 기지국에 송신된다. 음성 처리부(13)는, 예컨대 CELP(Code Excited Linear Predictive Coding) 방식이나 ADPCM(Adaptive Differential Pulse-Code Modulation) 방식에 의해 음성 데이터를 고능률 압축 부호화/복호화하고 있다.

부호 16은 음성 합성 기능을 가진 음원부를 나타내고, 미리 착신음으로서 선택된 악곡 데이터를 재생하여 스피커(17)로부터 음성 출력(방음)한다. 또, 발음시키는 단어를 구성하는 각 문자의 각 음소에 대응하는 소정의 음성 데이터(소리 품질ㆍ음정(보컬 품질, 피치 등) 등에 영향을 미치는 파라미터를 포함한다)를 수신한 경우, 음성 합성 기능을 가진 음원부(16)는 CPU(11)의 제어 하에, 상기 음성 데이터를 음성 합성하여 스피커(17)로부터 음성 출력(발음, 발성)한다. 이 음성 합성 기능을 가진 음원부(16)에서의 음성 합성 방식에 대해서는 임의로 설정할 수 있으나, 예컨대 일본국 특공소 제58-53351호 공보에 개시된 CSM(Carrier Sense Multiple-Access) 음성 합성 기술을 FM(Frequency Modulation) 음원에 적용하는 것으로 실현된다. 부호 18은 조작부를 나타내고, 휴대 전화기(1)의 본체(케이싱, 하우징 등)에 설치된 영숫자 키를 포함하는 각종 키(도시 생략)나, 그 외의 입력 디바이스로부터의 입력을 행하는 것이다. 예컨대, 유저에 의한 영숫자 키 등의 키 조작을 검출하여, 일본어, 영어, 중국어, 한국어 등의 소망의 언어를 입력할 수 있다. 또, 조그 다이얼이나 터치 스크린, 혹은 휴대 전화기에 접속된 외부 부착 키보드 등의 다른 입력 디바이스를 이용하여 소망의 문자를 입력할 수 있다.

부호 19는 RAM(Random Access Memory)를 나타내고, 상기 CPU(11)의 워크 에어리어 및 통신 회선을 통하여 서버 장치로부터 다운로드된 악곡 데이터나 반주음 데이터(이들은 착신 멜로디의 재생에 이용한다)의 격납 에어리어, 및 송신 종료된 전자 메일, 작성 중의 전자 메일, 수신한 전자 메일의 데이터가 격납되는 메일 데이터 격납 에어리어 등을 설정할 수 있다.

부호 20은 ROM(Read Only Memory)을 나타내고, CPU(11)가 실행하는 발신ㆍ착신 등의 제어를 행하는 각종 전화 기능 프로그램, 악곡 재생 처리를 보조하는 프로그램, 전자 메일의 송수신을 제어하는 메일 송수신 기능 프로그램, 음성 합성 처리를 보조하는 프로그램과 다른 프로그램, 및 각 음소 마다의 음성 데이터나 악음 데이터 등의 각종 데이터가 격납된다.

부호 21은, 예컨대 액정 표시기(LCD: Liquid Crystal Display)로 이루어지는 표시부를 나타내고, CPU(11)의 제어 하에, 각종 메뉴 화상의 표시 및 전자 메일의 내용 표시, 및 상기 조작부(18)의 조작 내용의 표시를 행한다.

부호 22는 바이브레이터를 나타내고, 착신 시에서 착신음을 대신하여 휴대 전화기(1)의 본체를 진동시킴으로써, 유저에게 착신을 통지하는 것이다.

한편, 상기 각 기능 블록은 버스(30)를 통하여 데이터나 명령의 수수를 행하고 있다.

다음, 단어를 음성화할 때의 억양 등을 규정하는 음성 발음용 발음 기술 언어에 의한 발음 문자열에 대하여 설명한다. 도 2는 발음 문자열을 포함하는 일본어로 된 문장(즉, 전자 메일 본문)의 일례를 도시하고 있고, 각 행에서 좌측에서 우측으로 문자가 배열되어 있다. 이 문장예에서는, 3행째의 「か_3さが ほ^5し_4い '4ね$2-」로 되는 발음 문자열이 부호「A」로 나타내는 전용 제어 문자(ⓢ)에 의해 범위 규정되고, 그 외의 문자가 통상의 텍스트문이다. 이 발음 문자열「か_3さが ほ^5し_4い '4ね$2-」는「かさがほしいね-(우산이 필요합니다)」라고 말하는 발음 언어에 인토네이션을 부가하여 음성 합성시키기 위한 발음 기술 언어에 의해 기술되어 있다. 이 예에 기술된 기호「'」,「^」,「_」,「$」등은 발음하는 문자(이 예에서는, 일본어의 가나 문자)에 부가하는 인토네이션의 종류별을 나타내는 텍스트이고, 이 기호의 뒤에 계속되는 문자(이 기호의 직후에 수값이 있는 경우에는, 그 수값에 계속되는 문자)에 대하여 소정의 액센트를 부가하는 것이다. 이러한 문자와 기호는 연속적으로 배열된 형식으로, 입력 수단인 조작부(18)에 의해서 입력된다.

도 3a는 상기 발음 기술 언어에서의 각 기호(대표예)가 나타내는 음성 합성 시의 발음 제어 명령을 도시하고 있고, 예컨대 「'」에서는 어두에서 피치를 올리고 (도 3b의 부호 「A」참조), 「^」에서는 발음 중에 피치를 올리고(도 3c의 부호「C」참조), 「_」에서는 어두에서 피치를 내리고(도 3b의 부호「B」참조),「$」에서는 발음 중에 피치를 내리는(도 3c의 부호「D」참조) 것과 같은 음성 합성을 행하는 것을 의미하고 있다. 또, 상기 기호의 직후에 수값이 부가되어 있는 경우, 그 수값은 부가하는 액센트의 변화량을 지정하는 것이다. 예컨대, 「か_3さが」에서는, 「さ」를 어두에서 피치를 「3」의 양만큼 내리는 것을 의미하고, 다음에 계속되는「が」를 그 내린 피치로 발음하고, 또 「か」에 대해서는 특별히 기호가 부가되어 있지 않으므로, 표준의 피치(음고)로 발음하는 것을 의미한다.

이와 같이, 발음 기술 언어에서는, 발음시키는 단어에 포함되는 문자에 액센트(인토네이션)를 부가하는 경우, 그 문자의 직전에 도 2에 도시하는 것 같은 기호(또한, 인토네이션의 변화량을 나타내는 수값)를 부가하도록 단어를 기술하는 구문으로 되어 있다. 한편, 본 실시예에서는, 피치를 제어하는 기호에 대해서만 설명하나, 이들 기호 이외에, 소리의 강약, 속도, 음질 등을 제어하는 기호를 이용할 수도 있다. 또, 이 발음 문자열은 도 2에 도시하는 바와 같이 전자 메일의 본문 중에 기술하거나, 전자 메일의 타이틀 부분에 기술해도 좋고, 혹은 이 발음 문자열을 소정의 첨부 파일(예컨대, 그 확장자에 의해 발음 문자열이 포함하는 것을 식별할 수 있는 첨부 파일) 내에 기술하여, 송신하는 전자 메일에 첨부하도록 해도 좋다.

다음, 상기 구성에 의한 본 실시예의 휴대 전화기(1)의 동작에 대하여 설명한다. 한편, 통상의 전화 기능에 의한 발신ㆍ착신 시의 동작이나 전자 메일의 송수신 등에 관한 동작은 주지의 기술이며, 그 설명을 생략한다. 또, 이하의 설명에서는, 발음 기술 언어에 의한 발음 문자열에 준거하여 기술된 문장을「HV-Script」이라고 칭한다.

[송신측의 동작]

우선, 송신자는, 전자 메일을 송신하는 프로그램을 기동시켜, 조작부(18)를 조작하여 표시 수단인 표시부(21)를 확인하면서, 전자 메일용 문장을 작성한다. 여기서, 송신자는 전자 메일을 작성할 때, 발음시키고 싶은 HV-Script을 전자 메일 본문 중의 어느 장소(혹은, 전자 메일의 타이틀 란이라도 좋다)에 텍스트 형식으로 기술한다(도 4a 참조). 이 때, 송신자는 전용 제어 문자(도 4b에서 부호「A」로 나타내는 「ⓢ」인 문자)에 의해 HV-Script을 삽입하도록 입력한다. 이것에 의해, HV-Script을 포함하는 전자 메일이 작성된다. 이 프로그램에서, 작성된 HV-Script은 전자 메일 본문에 관한 파일의 첨부 파일로서 취급된다. 이와 같이, 일반의 문장으로서는 읽기 힘든 특수한 문자열을 전자 메일 작성 시에 기술하는 것으로 되나, 이 HV-Script을 첨부 파일로서 취급하고, 또 첨부 파일에 데이터 이동하는 것으로, 전자 메일 자체는 수신측의 통신 상대방에서도 읽기 쉬운 전자 메일로 된다. 이것에 의해, 본 실시예의 휴대 전화기(1) 뿐만 아니라, 본 실시예의 기능을 가지지 않는 일반적인 휴대 전화기에서도, 통상의 전자 메일과 동일하게 표시되어, 읽는 사람에게 혼란ㆍ불쾌감을 주지 않는다. 한편, 작성 중 혹은 작성 후의 전자 메 일의 데이터에 대해서는, 송신을 행하지 않고, RAM(19)의 메일 데이터 격납 에어리어에 기억시켜 놓을 수도 있다.

다음, 전자 메일의 작성이 종료하면, 송신자는 이 전자 메일을 소망의 상대처(또는, 어드레스)에 대하여 송신하는 조작을 행한다. 이 송신측의 휴대 전화기(1)의 동작에 대해서는 도 5에 도시하는 흐름도를 참조하여 설명한다.

송신측의 휴대 전화기(1)에서는, 단계 S01에서 전자 메일 송신 조작이 행해지는지의 여부가 판정된다. 즉, 유저가 전자 메일 송신 조작을 행할 때까지, 도 5에 도시하는 루틴은 대기 상태로 되어 있다.

송신자가 전자 메일 송신 조작을 행하면, 단계 S01의 판정 결과는「예」가 되어, 흐름은 단계 S02로 이행한다. 단계 S02에서는, 작성된 전자 메일 내에 전용제어 문자가 포함되어 있는지의 여부가 판정된다. 전자 메일 내에 전용 제어 문자가 포함되어 있지 않은 경우에는, 판정 결과는「아니오」가 되어, 흐름은 단계 S03으로 이행한다. 단계 S03에서는, 전자 메일의 송신 처리가 실행되어, 그 후 도 5의 루틴은 종료한다.

도 4b에 도시하는 바와 같이, 본 실시예에서는, 작성된 전자 메일은 전용 제어 문자를 포함하여 기술되어 있으므로, 단계 S02의 판정 결과는「예」가 되어, 흐름은 단계 S04로 이행한다.

단계 S04에서는, 신규로 첨부 파일을 작성한다. 이 첨부 파일의 파일명은 적절하게 설정되지만, 그 확장자로서, HV-Script을 포함하는 파일인 것을 나타내기 위한 전용 확장자(예컨대,「. hvs」)가 붙여질 수 있다.

다음, 단계 S05에서, 전자 메일 내의 전용 제어 문자에 삽입된 HV-Script을 첨부 파일에 이동시킨다. 즉, 전용 제어 문자에 삽입된 문자열을 HV-Script으로 간주하고, 이 HV-Script을 전자 메일의 문장으로부터 추출하여 첨부 파일에 기술하여 기록함과 동시에, 상기 HV-Script을 전자 메일의 데이터로부터 삭제한다.

다음, 단계 S06에서 전자 메일 내의 전용 제어 문자의 조를 소정의 범용 그림 문자 혹은 아이콘으로 변경ㆍ치환한다. 여기서는, 도 4c에서 부호「B」로 나타낸 바와 같은 그림 문자가 이용된다.

단계 S07에서, 단계 S06으로써 변경이 부가된 전자 메일과, 상기 단계 S04, S05로써 작성된 첨부 파일을 지정된 송신처(예컨대, 전자 메일 어드레스)에 송신한다. 또, 송신 종료된 전자 메일은 RAM(19) 내의 메일 데이터 격납 에어리어 등의 소정의 기억 수단에 기억된다. 한편, 단계 S05, S06의 처리에 대해서는, 별도로, 유저에 의한 소정의 조작을 받아 실행하도록 해도 좋다. 또, 송신측의 휴대 전화기(1)에 기억되는 전자 메일은, 전자 메일 본문과 첨부 파일이 분리되어 있지 않도록 하는 데이터 형식에 의한 것이라도 좋고, 혹은 상기 처리에 의해 전자 메일과 첨부 파일로 분리되어 서로 링크된 것이어도 좋다.

[수신측의 동작]

다음, 수신측의 휴대 전화기(1)의 동작에 대해서 도 6에 도시하는 흐름도를 참조하여 설명한다. 여기서, 수신측의 휴대 전화기(1)는, 그 통신부(12)를 통하여 수신한 전자 메일을 RAM(19) 내의 메일 데이터 격납 에어리어 등의 기억 수단에 기억하는 것으로 한다.

우선, 수신측의 휴대 전화기(1)는, 단계 S11에서 유저(즉, 수신자)가 전자 메일의 표시 조작을 했는지의 여부를 판정한다. 즉, 유저에 의한 전자 메일의 표시 조작이 행해질 때까지, 도 6에 도시하는 루틴은 대기 상태로 되어 있다.

유저(수신자)에 의해 전자 메일의 표시 조작이 행해지면, 단계 S11의 판정 결과는「예」로 되어, 흐름은 단계 S12로 이행한다. 단계 S12에서는, 제어 수단(CPU(11))의 제어 하에, RAM(19)의 메일 데이터 격납 에어리어로부터 수신한 전자 메일의 데이터를 독출하여, 그 독출한 전자 메일의 파일을 열어, 그 파일 내용을 표시부(21)의 화면 상에 표시한다.

다음, 단계 S13에서, 수신한 전자 메일 내에 HV-Script이 포함되어 있는지의 여부를 판정한다. 이 판정은, 전자 메일의 파일 내에 전용 제어 문자의 조가 포함되어 있는지의 여부에 의해 행해진다. 이 판정 결과가「예」인 경우, 즉 수신한 전자 메일의 파일 내에 전용 제어 문자의 조가 포함되어 있어, HV-Script이 기술되어 있다고 판정되는 경우, 흐름은 단계 S14로 이행한다.

단계 S14에서는, 이 HV-Script으로 지정된 단어를 구성하는 각 문자의 각 음소에 대응하는 음성 데이터를 ROM(20)으로부터 독출하고, 또한 상기 HV-Script에 기술된 단어에 액센트를 부가하는 기호에 기초하여, 발음시키는 음성에 소망의 인토네이션을 갖게 하도록, 음성 합성 수단인 음성 합성 기능을 가진 음원(16)에 대하여 음성 데이터(이 경우, 음정 등을 변화시키기 위해서, 음성 데이터를 가공하는 경우도 있다)를 부여함과 동시에, 소정의 제어를 실시하여 음성 합성을 행한다. 이와 같이, 전자 메일의 본문 내에 HV-Script이 포함되어 있는 경우, 수신측의 휴 대 전화기(1)는 자동으로 상기 HV-Script을 해석(translation)하여, 그 해석 결과에 기초하여 바로 음성 합성을 행하여, 이로써 소망의 억양 등이 부여된 음성을 자동으로 합성하여 발음시킨다.

한편, 단계 S13의 판정 결과가「아니오」인 경우, 즉 전자 메일 내에 HV-Script의 기술이 없는 경우, 흐름은 단계 S15로 이행한다.

단계 S15에서는, 전자 메일의 파일에 대하여 상기「. hvs」의 확장자를 갖는 첨부 파일이 첨부되어 있는지의 여부를 판정한다. 이 판정 결과가「아니오」인 경우, 즉 전자 메일의 파일 내 및 그 첨부 파일에도 HV-Script이 전혀 존재하지 않은 경우에는, 음성 합성을 행하지 않고, 도 6의 루틴을 종료한다.

한편, 단계 S15의 판정 결과가「예」인 경우, 즉 전자 메일에「. hvs」의 확장자를 갖는 첨부 파일이 첨부되어 있는 경우, 흐름은 단계 S16로 이행한다.

단계 S16에서는, 사용하는 메일러(혹은 전자 메일 읽기 소프트웨어(e-mail reading software)에 의해「. hvs」의 확장자를 갖는 첨부 파일을 자동으로 열도록 설정되어 있는지의 여부를 판정한다. 이 판정 결과가「예」인 경우, 즉 자동으로 첨부 파일을 여는 설정으로 되어 있는 경우, 흐름은 단계 S17로 이행하여, 상기 첨부 파일을 연다. 한편, 판정 결과가「아니오」인 경우, 즉 자동으로 첨부 파일을 여는 설정으로 되어 있지 않은 경우, 흐름은 단계 S18로 이행한다.

단계 S18에서는, 유저(수신자)에 의해 첨부 파일의 전개 조작이 행해지는지의 여부를 판정한다. 즉, 수신자가 첨부 파일을 여는 조작을 할 때까지 대기 상태로 된다. 그 후, 수신자가 첨부 파일을 여는 조작을 행하면, 단계 S18의 판정 결 과는「예」로 되어, 흐름은 단계 S17로 이행하여, 상기 첨부 파일을 연다.

단계 S17 후, 흐름은 단계 S19로 이행하여, 상기 단계 S14와 동일한 처리를 행한다. 즉, 첨부 파일 내의 HV-Script에 기초하여 음성 합성을 행하여, 지정된 단어에 대하여 지정된 액센트를 부가하여, 발음을 행한다.

한편, 상기 실시예에서 설명한 각 동작ㆍ단계의 내용은 예시적인 것이며, 본 발명의 내용은 상기 처리 흐름에 한정되는 것은 아니다. 예컨대, 상기 실시예에서는, 수신한 전자 메일을 RAM(19)으로부터 독출하여 음성 합성을 행하도록 설정되어 있으나, 수신한 전자 메일 뿐만 아니라, 송신 종료된 전자 메일이나 작성 중의 전자 메일을 차차 RAM(19)에 기억하여 놓고, 이것을 독출하여 음성 합성을 행하도록 해도 좋다. 또, 음성 합성되는 언어는 일본어에 한하지 않고, 영어, 중국어, 한국어 등의 다른 언어를 이용해도 좋다.

이상, 본 발명의 실시예에 대하여 첨부 도면을 참조하여 상세히 설명하였으나, 본 발명의 구체적인 구성은 상기 실시예에 한정되는 것이 아니라, 본 발명의 요지를 일탈하지 않은 범위 내에서의 변경(modification)도 포함된다. 예컨대, 상기 실시예에서는, 각 문자의 직전에 액센트를 규정하는 기호와 그 액센트의 변화량을 규정하는 수값을 이용한 구문으로 이루어지는 발음 기술 언어를 이용하고 있으나, 물론, 이 발음 기술 언어로 규정하는 구문은 상기의 것에 한정되는 것은 아니다. 예컨대, 상기 기호 등을 각 문자의 직후에 기술하도록 하는 구문이어도 좋다. 또, 전자 메일 작성 시, 그 본문 내에 HV-Script(발음 문자열)을 기술하여, 그 발음 문자열을 첨부 파일로 이동시키고 있으나, 발신자 자신이 이 첨부 파일을 별도 작성하 도록 해도 좋다. 또한, 수신자측에서 첨부 파일을 자동 전개하는 설정을 메일러로 행하게 할 필요는 없고, 송신되는 첨부 파일 자체에 그 설정을 포함시키도록 해도 좋다.

이상 설명한 바와 같이, 본 발명은 여러 가지의 효과 및 기술적 특징을 갖고 있고, 이들에 대하여 이하에 설명한다.

(1) 본 발명에 의하면, 종래의 전자 메일의 문자 정보 표시에 부가하여, 상기 발음 문자열을 도입함으로써 발음 합성에 의한 고도의 표현 효과를 제공할 수 있다. 또, 본 발명에서는, 송신자측에서 발음 문자열을 기술한 파일을 별도 작성하여, 이것을 전자 메일의 첨부 파일로 함과 동시에, 상기 전자 메일의 본문으로부터 그 발음 문자열을 삭제하고, 한편 수신자측에서는, 적절한 첨부 파일을 엶으로써, 음성 합성을 행하므로, 수신자측의 단말에서 전자 메일을 표시할 때, 자동으로 발음 문자열의 표시를 삭제할 수 있고, 이로써 전자 메일의 표시에서 시각 인식적인 부족ㆍ손상이 발생하는 일 없이, 읽는 사람에게 시각 인식적(혹은, 심리적)인 혼란ㆍ불쾌감을 느끼게 하는 것을 미연에 방지할 수 있다.

(2) 또, 상기 발음 문자열을 식별하기 위한 전용 제어 문자를 범용의 그림 문자ㆍ아이콘 등으로 자동 치환하므로, 전자 메일을 기분 전환의 즐거운 표현으로 할 수 있다. 또한, 수신자측에서 전자 메일이 열렸을 때, 첨부 파일의 발음 문자열이 자동으로 해석되어 소망의 음성 합성이 실행되므로, 수신자측의 유저 자신이 수동으로 첨부 파일을 열 필요가 없고, 또 발음 문자열에 의한 기술(HV-Script)이 별도 파일(첨부 파일)로 되어 있어도, 전자 메일의 본문의 표시와 발음 문자열에 의한 음성 합성을 대략 동시에 실행할 수 있다.

(3) 구체적으로는, 송수신이 가능한 단말 장치에서, 텍스트 형식으로 기술되고, 지정된 단어를 음성화할 때의 억양(인토네이션) 등을 규정하는 음성 발음용 발음 기술 언어에 의한 발음 문자열을 자동으로 해석하여 음성 합성하는 음성 합성 수단을 구비하고, 한편, 수신측의 단말 장치는 수신한 전자 메일에 포함되는 발음 문자열을 해석하여 음성 합성한다. 또, 발음 기술 언어에 의한 발음 문자열을 포함시킨 전자 메일이 송신되면, 수신자측의 단말 장치는 상기 발음 문자열을 해석하여 음성 합성을 실행한다. 한편, 발음 기술 언어는, 발음시킨 단어(문자열), 및 그 문자열을 구성하는 각 문자(일본어의 경우, 가나 문자 등)의 각각에 대하여 억양을 부가하는 경우에는 그 억양을 규정하는 기호를 부가하여 발음 문자열을 기술하는 구문으로 된다. 이와 같이 함으로써, 1문자 단위(혹은, 1음소 단위)로 억양을 부가할 수 있다.

(4) 상기 발음 문자열을 발신자측의 단말 장치에서 별도 파일에 기억시켜, 전자 메일의 첨부 파일로 할 수 있다. 이 경우, 상기 전자 메일의 본문 중에서 발음 문자열을 자동으로 삭제하고, 한편 수신자측의 단말 장치에서 전자 메일의 첨부 파일이 열리면, 여기에 기술된 발음 문자열이 자동으로 해석되어, 음성 합성이 행해진다.

(5) 상기 발음 문자열의 전후(일본어의 경우, 각 행의 좌우 위치)에 전용 제어 문자를 기술한다. 즉, 전용 제어 문자를 검지함으로써 간이하게 발음 문자열을 식별할 수 있다. 또, 이 전용 제어 문자를 미리 결정된 범용의 그림 문자 등으로 치환하도록 해도 좋다. 이 경우, 수신자측의 단말 장치에서는, 송신자측에서 기술된 전자 메일 내의 전용 제어 문자가 범용의 그림 문자 등으로서 표시되므로, 수신자측에서 기분 전환의 즐거운 시각적 효과를 실현할 수 있다.

(6) 또, 상기 첨부 파일은 전자 메일이 열리면 자동으로 열려, 이로써 발음 문자열이 해석되어 음성 합성이 행해진다. 이 때문에, 수신자는 자신이 첨부 파일을 열 필요도 없고, 또 발음 문자열이 전자 메일 본문과는 별도의 첨부 파일로 되어 있어도, 전자 메일의 본문의 표시와 발음 문자열에 의한 음성 합성을 대략 동시에 실시간으로 실행할 수 있다.

Claims (6)

1. 표시용 전자메일의 본문을 나타내는 제1 텍스트 데이터를 입력하고 또한 소정의 입력룰에 의해 범위 지정이 이루어진 음성 합성용 문자열과 해당 문자열을 음성으로서 발음할 때의 억양을 규정한 기호로 구성된 발음 문자열을 나타내는 제2 텍스트 데이터를 상기 전자메일의 본문 내에 입력하는 입력수단,

   사용자가 상기 전자메일의 송신 조작을 행할 때에, 상기 전자메일의 본문에서, 상기 소정의 입력룰에 의해 범위 지정이 이루어진, 상기 제2 텍스트 데이터를 검출하여, 상기 검출된 제2 텍스트 데이터를 상기 전자메일의 본문에서 삭제함으로써, 상기 제2 텍스트 데이터를 기술한 파일을, 상기 전자메일의 첨부파일로서 작성하는 파일작성수단,

   상기 제1 텍스트 데이터를 포함하고 또한 상기 첨부파일이 부여된 전자메일을 기억하는 기억수단, 및

   상기 기억수단에 기억된, 상기 전자메일을, 통신 회선을 통해 송신하는 송신수단을 구비하고,

   상기 전자메일을 통신 회선을 통해 수신하는 텍스트 데이터 수신장치에서, 상기 제1 텍스트 데이터에 의거하여 상기 전자 메일의 본문이 표시되고, 또한 상기 첨부 파일에 의거하여 음성 합성이 이루어지는 것을 특징으로 하는, 텍스트 데이터 송신 장치.
2. 제 1 항에 있어서, 상기 소정의 입력룰은, 상기 발음 문자열을 전용 제어 문자에 의해 끼워지도록 입력하는 것인, 텍스트 데이터 송신 장치.
3. 제 2 항에 있어서, 상기 전자메일의 본문 내의 상기 전용 제어 문자를 범용의 그림 문자로 치환하는 치환수단을 더 구비하는, 텍스트 데이터 송신 장치.
4. 표시용 전자메일의 본문을 나타내는 제1 텍스트 데이터를 입력하고 또한 소정의 입력룰에 의해 범위 지정이 이루어진 음성 합성용 문자열과 해당 문자열을 음성으로서 발음할 때의 억양을 규정한 기호로 구성된 발음 문자열을 나타내는 제2 텍스트 데이터를 상기 전자메일의 본문 내에 입력하여,

   사용자가 상기 전자메일의 송신 조작을 행할 때에, 상기 전자메일의 본문에서, 상기 소정의 입력룰에 의해 범위 지정이 이루어진, 상기 제2 텍스트 데이터를 검출하여, 상기 검출된 제2 텍스트 데이터를 상기 전자메일의 본문에서 삭제함으로써, 상기 제2 텍스트 데이터를 기술한 파일을, 상기 전자메일의 첨부파일로서 작성하고,

   상기 제1 텍스트 데이터를 포함하고 또한 상기 첨부파일이 부여된 전자메일을 기억하며,

   기억된 상기 전자메일을 통신 회선을 통해 송신하고,

   상기 전자메일을 통신 회선을 통해 수신하는 텍스트 데이터 수신장치에서, 상기 제1 텍스트 데이터에 의거하여 상기 전자 메일의 본문이 표시되고, 또한 상기 첨부 파일에 의거하여 음성 합성이 이루어지는 것을 특징으로 하는, 텍스트 데이터 송신 방법.
5. 텍스트 데이터 송신 프로그램을 기억하여 컴퓨터에 실행시키는 기억 미디어로서, 상기 텍스트 데이터 송신 프로그램을 실행함으로써,

   표시용 전자메일의 본문을 나타내는 제1 텍스트 데이터를 입력하고 또한 소정의 입력룰에 의해 범위 지정이 이루어진 음성 합성용 문자열과 해당 문자열을 음성으로서 발음할 때의 억양을 규정한 기호로 구성된 발음 문자열을 나타내는 제2 텍스트 데이터를 상기 전자메일의 본문 내에 입력하여,

   사용자가 상기 전자메일의 송신 조작을 행할 때에, 상기 전자메일의 본문에서, 상기 소정의 입력룰에 의해 범위 지정이 이루어진, 상기 제2 텍스트 데이터를 검출하여, 상기 검출된 제2 텍스트 데이터를 상기 전자메일의 본문에서 삭제함으로써, 상기 제2 텍스트 데이터를 기술한 파일을, 상기 전자메일의 첨부파일로서 작성하고,

   상기 제1 텍스트 데이터를 포함하고 또한 상기 첨부파일이 부여된 전자메일을 기억하며,

   기억된 상기 전자메일을 통신 회선을 통해 송신하고,

   상기 전자메일을 통신 회선을 통해 수신하는 텍스트 데이터 수신장치에서, 상기 제1 텍스트 데이터에 의거하여 상기 전자 메일의 본문이 표시되고, 또한 상기 첨부 파일에 의거하여 음성 합성이 이루어지는 것을 특징으로 하는, 기억 미디어.
6. 텍스트 데이터 송신장치와 텍스트 데이터 수신장치로 구성된 텍스트 데이터 통신 시스템으로서,

   상기 텍스트 데이터 송신장치는,

   표시용 전자메일의 본문을 나타내는 제1 텍스트 데이터를 입력하고 또한 소정의 입력룰에 의해 범위 지정이 이루어진 음성 합성용 문자열과 해당 문자열을 음성으로서 발음할 때의 억양을 규정한 기호로 구성된 발음 문자열을 나타내는 제2 텍스트 데이터를 상기 전자메일의 본문 내에 입력하는 입력수단,

   사용자가 상기 전자메일의 송신 조작을 행할 때에, 상기 전자메일의 본문에서, 상기 소정의 입력룰에 의해 범위 지정이 이루어진, 상기 제2 텍스트 데이터를 검출하여, 상기 검출된 제2 텍스트 데이터를 상기 전자메일의 본문에서 삭제함으로써, 상기 제2 텍스트 데이터를 기술한 파일을, 상기 전자메일의 첨부파일로서 작성하는 파일작성수단,

   상기 제1 텍스트 데이터를 포함하고 또한 상기 첨부파일이 부여된 전자메일을 기억하는 기억수단, 및

   상기 기억수단에 기억된, 상기 전자메일을, 통신 회선을 통해 송신하는 송신수단을 구비하고,

   상기 텍스트 데이터 수신장치는,

   상기 텍스트 데이터 송신장치에서 송신된, 상기 전자메일을, 통신 회선을 통해 수신하는 수신수단,

   수신한 상기 전자메일을 기억하는 기억수단,

   사용자가 해당 전자메일의 표시조작을 행할 때에, 상기 기억수단에서 상기 제1 텍스트 데이터를 포함하고 또한 상기 첨부파일이 부여된 상기 전자메일을 독출하는 제어수단,

   상기 제1 텍스트 데이터에 따라, 상기 전자메일의 본문을 표시하는 표시수단, 및

   상기 첨부파일에 포함되는 상기 제2 텍스트 데이터에 표시된 발음 문자열에 따라, 억양이 부여된 음성을 합성하는 음성합성수단을 구비하는 것을 특징으로 하는, 텍스트 데이터 통신 시스템.

Images