KR101044323B1

KR101044323B1 - 음성 합성용 음성 데이터베이스를 구축하기 위한 통신 시스템, 이를 위한 중계 장치, 및 이를 위한 중계 방법

Info

Publication number: KR101044323B1
Application number: KR1020090013442A
Authority: KR
Inventors: 신이치 이소베; 다쿠지 사카구치; 모토시 다무라; 마사미 야부사키
Original assignee: 가부시키가이샤 엔.티.티.도코모
Priority date: 2008-02-20
Filing date: 2009-02-18
Publication date: 2011-06-29
Also published as: EP2093755B1; JP2009223307A; US20090210221A1; JP2013047851A; EP2093755A3; US8265927B2; CN101515455B; JP5162495B2; JP5406358B2; KR20090090275A; EP2093755A2; CN101515455A

Abstract

중계 장치(20)는 하나의 통신 단말과 음성 통신을 수행하는 다른 통신 단말로부터 수신한 음성 데이터를 복제한다. 복제된 음성 데이터는 미디어 처리 장치(40)에 전송되어 기억된다. 미디어 처리 장치(40)는 기억된 음성 데이터에 기초하여 음성 합성을 위한 데이터베이스를 구축한다.

Description

음성 합성용 음성 데이터베이스를 구축하기 위한 통신 시스템, 이를 위한 중계 장치, 및 이를 위한 중계 방법{COMMUNICATION SYSTEM FOR BUILDING SPEECH DATABASE FOR SPEECH SYNTHESIS, RELAY DEVICE THEREFOR, AND RELAY METHOD THEREFOR}

본 발명은 음성 합성에 사용되는 음성 데이터베이스를 구축하기 위한 통신 시스템, 이를 위한 중계 장치, 및 이를 위한 중계 방법에 관한 것이다. 더 구체적으로 말하면, 본 발명은 전화와 비디오폰 통화 중에 오가는 대화에 기초해서, 개개인의 특징을 재생하는 것에 중점을 둔 음성 합성에 사용하기 위한 음성 데이터베이스를 구축하기 위한 통신 시스템, 이러한 통신 시스템에 사용되는 중계 장치, 및 이러한 통신 시스템에 사용되는 중계 방법에 관한 것이다.

음성 합성 기술은, 합성한 음성이 실제 인간의 음성과 유사하도록, 합성한 음성의 자연스러움(naturalness)과 개성(individuality)에 중점을 두고 개발되어 왔다.

이러한 음성 합성 기술에서는, 사람으로 하여금 여러 가지 이야기를 큰 소리로 읽도록 하고 그 음성을 이루는 여러 개의 부분을 녹음(record)해서 작성된 데이 터베이스에, 인간에 대한 일련의 음성 데이터를 미리 등록시켜 두고, 입력 텍스트에 가장 잘 부합하는 부분을 조합해서 합성된 음성을 생성한다. 이와 관련해서는, 예를 들어 일본 특허출원 공개번호 제2003-295880호에 개시되어 있다.

그러나 종래의 음성 합성 기술에서는, 음성 합성을 위한 음성 데이터를 이루는 많은 부분들을 저장한 데이터베이스를 구축하기 위해, 전용의 스튜디오에서 녹음을 행해야 하는데, 이러한 녹음에 많은 시간이 소요되는 것이 일반적이다(예컨대, 몇 시간에서 수십 시간까지 걸릴 수 있다). 따라서, 종래의 방식으로는, 차량 네비게이션 시스템이나 IVR(Interactive Voice Response: 대화형 음성 응답) 시스템과 같이 음성 패턴의 유형이 제한되어 있는 시스템에서는 사용될 수 있지만, 모바일 통신 시스템과 같은 시스템에서 인간의 음성을 재생하는 데에는 적합하지 않을 것이다.

본 발명은, 앞서 설명한 과제들을 감안하여 이루어진 것으로서, 인간 음성의 특징을 재생함에 있어서 개성에 중점을 두고 음성 합성용의 음성 데이터베이스를 구축하기 위한 통신 시스템, 이러한 시스템에 사용되는 중계 장치, 및 이러한 시스템에 사용되는 중계 방법을 제공하는 것을 목적으로 한다.

본 발명의 하나의 관점으로서, 본 발명은 통신 네트워크에 접속되는 중계 장치; 중계 장치를 통해 통신 네트워크에 접속되며, 음성 데이터를 중계 장치를 거쳐 상대측과 주고 받는 둘 이상의 통신 단말; 및 중계 장치에 접속되는 미디어 처리 장치를 포함하며, 중계 장치는, 제1 통신 단말로부터 생긴 제1 음성 데이터를 수신하고, 수신한 제1 음성 데이터를 제2 통신 단말로 전송하는 송수신기; 음성 데이터를 복제(duplicate)하는 데이터 듀플리케이터(data duplicator); 및 듀플리케이터로 하여금 송수신기를 통해 제1 통신 단말로부터 수신된 제1 음성 데이터를 복제하도록 하고, 송수신기로 하여금 복제된 음성 데이터를 미디어 처리 장치에 전송하도록 하는 통신 컨트롤러를 포함하고, 미디어 처리 장치는, 중계 장치로부터 제1 통신 단말의 복제된 음성 데이터를 수신하는 수신기; 수신기에 의해 수신된 음성 데이터를 음성 데이터 기억 장치에 기억시키는 음성 데이터 프로세서; 음성 데이터 기억 장치에 기억된 음성 데이터에 기초하여 제1 통신 단말을 위한 음성 합성 데이터베이스를 작성하는 음성 합성 데이터베이스 생성 장치; 음성 합성 데이터베이스 생성 장치에 의해 생성된 음성 합성 데이터베이스를 기억하는 음성 합성 데이터베이스 기억 장치; 및 음성 합성을 위한 요청이 제1 통신 단말로부터 수신된 경우에 음성 합성 데이터베이스에 기초해서 음성 합성을 실행하는 음성 합성 장치를 포함한다. 본 발명의 통신 시스템에 의하면, 인간의 재생되는 음성 특징의 개성에 중점을 둔 음성 합성 데이터베이스를 용이하게 구축할 수 있다.

바람직한 실시예에서, 본 발명의 통신 시스템에서, 중계 장치는, 제1 통신 단말과 제2 통신 단말에 대한 통신 정보를 기억하는 통신 정보 기억 장치를 더 포함할 수 있으며, 통신 정보에는 제1 통신 단말이 음성 합성 서비스에 가입되어 있는지 여부를 나타내는 서비스 정보가 포함되어 있고, 통신 컨트롤러는, 서비스 정보에 의해 제1 통신 단말이 음성 합성 서비스에 가입되어 있다고 판정되면, 송수신기에 의해 수신된 음성 데이터가 복제되어야 한다고 판정하고, 데이터 듀플리케이터로 하여금 음성 데이터를 복제하도록 할 수 있다. 이 구성에 의하면, 통신 단말로부터 전송된 음성 데이터는, 해당 통신 단말이 음성 합성 서비스에 가입되어 있는 경우에만, 복제되어 미디어 처리 장치로 전송된다. 따라서, 입력되는 모든 음성 데이터 부분이 복제되는 경우에 비해, 음성 데이터 부분을 복제하고 복제된 부분을 전송하는 중계 장치의 처리 부하를 감소시킬 수 있다. 또한, 통신 시스템의 통신 리소스를 절약할 수 있기 때문에, 음성 합성을 위한 데이터베이스의 구축에 대한 효율성을 높일 수 있다.

본 발명의 통신 시스템은, 중계 장치에 접속되어, 둘 이상의 통신 단말의 각각에 대한 가입 정보를 저장하기 위한 가입 정보 데이터베이스 장치를 더 포함하는 것이 바람직하며, 통신 정보 기억 장치에 저장된 제1 통신 단말에 대한 통신 정보는, 가입 정보 데이터베이스 장치로부터 다운로드된 정보에 기초해서 작성되는 것 이 바람직하다. 이러한 구성에 의하면, 제1 통신 단말에 대한 서비스 정보가 가입 정보 데이터베이스로부터 다운로드될 수 있기 때문에, 중계 장치는 해당 중계 장치를 통해 현재 통신 중이 아닌 통신 단말에 대한 서비스 정보를 기억하고 있을 필요가 없다. 따라서, 중계 장치의 메모리 공간을 절약할 수 있다.

본 발명의 중계 장치의 송수신기는, 제2 통신 단말로부터 음성 데이터를 수신하고 수신한 음성 데이터를 제1 통신 단말에 전송하며, 통신 컨트롤러는, 제1 통신 단말과 제2 통신 단말 사이에서 소정 기간 동안 이루어지는 호출의 횟수가 임계값을 초과하는 경우에, 데이터 듀플리케이터로 하여금 제2 통신 단말로부터 송수신기를 거쳐 수신된 음성 데이터를 복제하도록 하는 것이 더 바람직하다. 이러한 구성에 의하면, 상대측 통신 단말이 음성 합성 서비스에 가입하지 않은 경우에도, 상대측 통신 단말에 대한 데이터베이스를 구축할 수 있다.

본 발명의 통신 시스템의 다른 바람직한 실시예에서, 통신 컨트롤러는, 송수신기가 제1 통신 단말로부터 복제의 지시를 수신한 경우에, 데이터 듀플리케이터로 하여금 제1 통신 단말로부터 송수신기를 거쳐 수신된 음성 데이터를 복제하도록 할 수 있다. 이 경우, 제1 통신 단말은 음성 데이터가 전송될 때마다 기록될 음성 데이터를 지정할 수 있다. 이와 달리, 제1 통신 단말은 음성 통신이 종료된 후에 음성 데이터를 기록할 것인지 여부를 나타낼 수 있다. 이러한 구성에 의하면, 미디어 처리 장치에서 기록될 음성 데이터는 통신 단말에 의해 자유롭게 지정될 수 있다.

본 발명의 통신 시스템의 또 다른 바람직한 실시예에서, 음성 데이터 프로세 서는, 수신기에 의해 수신된 음성 데이터의 부분과 기억된 음성 데이터의 모든 부분이 대응하는지 여부를 판정하는 판정 장치와, 수신된 음성 데이터의 부분에 포함된 잡음량과 기억된 음성 데이터의 대응하는 부분에 포함된 잡음량을 측정하는 잡음 측정 장치를 더 포함할 수 있으며, 음성 데이터 프로세서는, 수신한 음성 데이터의 부분의 잡음량이 기억된 음성 데이터의 대응하는 부분의 잡음량보다 적은 경우, 기억된 음성 데이터 부분에 수신된 음성 데이터 부분을 덮어쓰기(overwrite)할 수 있다. 또 다른 실시예에서, 음성 데이터 프로세서는 음성 데이터에 포함되어 있는 배경 잡음을 제거하는 잡음 필터를 더 포함할 수 있으며, 음성 데이터 프로세서는 잡음 필터에 의해 잡음이 제거된 후에 음성 데이터를 저장할 수 있다. 이 경우, 음성 합성 데이터베이스는 더 높은 품질의 음성 데이터를 제공할 수 있다.

본 발명의 바람직한 실시예에서, 중계 장치의 송수신기는, 제2 통신 단말로부터 생성된 제2 음성 데이터를 수신하고, 수신한 제2 음성 데이터를 제1 통신 단말에 전송하며, 통신 컨트롤러는, 데이터 듀플리케이터로 하여금 제1 음성 데이터와 제2 음성 데이터 중의 적어도 하나를 복제하도록 하고, 송수신기로 하여금, 제1 통신 단말 및 제2 통신 단말 중의 하나를 음성 데이터를 생성한 호출측 통신 단말로서 식별하는 식별 정보와 함께 복제한 음성 데이터를, 미디어 처리 장치에 전송하도록 할 수 있으며, 미디어 처리 장치의 수신기는, 중계 장치로부터 복제한 음성 데이터와 식별 정보를 수신하며, 음성 데이터 프로세서는, 수신기에 의해 수신된 음성 데이터를 식별 정보에 의해 음성 데이터 기억 장치에 기억시키며, 음성 합성 데이터 베이스 생성 장치는, 음성 데이터 기억 장치에 기억된 음성 데이터에 기초 하여 호출측 통신 단말에 대한 음성 합성 데이터베이스를 생성하며, 음성 합성 장치는, 식별 정보에 의해 식별된 통신 단말로부터 음성 합성을 위한 요청이 수신되면, 음성 합성 데이터베이스에 기초하여 음성 합성을 실행할 수 있다. 이 경우, 제1 통신 단말과 제2 통신 단말이 본 발명의 통신 시스템의 동일한 중계 장치에 모두 접속될 수 있다. 이와 달리, 제1 통신 단말은 본 발명의 중계 장치에 접속될 수 있으며, 제2 통신 단말은 본 발명의 중계 장치를 비롯한 임의의 다른 중계 장치에 접속될 수 있다. 본 실시예에 의하면, 제1 통신 단말과 제2 통신 단말 중의 하나 이상이 갖는 음성 데이터를 기록할 수 있다.

바람직하게는, 중계 장치는, 제1 통신 단말과 제2 통신 단말에 대한 통신 정보를 기억하는 통신 정보 기억 장치를 더 포함할 수 있으며, 통신 정보에는 제1 통신 단말과 제2 통신 단말의 각각에 대한 서비스 정보가 포함될 수 있고, 서비스 정보는 제1 통신 단말 및 제2 통신 단말의 각각이 음성 합성 서비스에 가입되어 있는지 여부를 나타낼 수 있으며, 통신 컨트롤러는, 제1 통신 단말이 음성 합성 서비스에 가입된 것을 서비스 정보가 나타내는 경우, 송수신기에 의해 수신된 제1 음성 데이터가 복제되어야 한다고 판정하고, 데이터 듀플리케이터로 하여금 제1 음성 데이터를 복제하도록 할 수 있으며, 또한 제2 통신 단말이 음성 합성 서비스에 가입된 것을 서비스 정보가 나타내는 경우, 송수신기에 의해 수신된 제2 음성 데이터가 복제되어야 한다고 판정하고, 데이터 듀플리케이터로 하여금 제2 음성 데이터를 복제하도록 할 수 있다. 이 경우, 제1 통신 단말과 제2 통신 단말의 각각에 대해 각각의 통신 단말이 음성 합성 서비스에 가입했는지 여부에 대하여 판정이 이루어지 기 때문에, 제1 음성 데이터와 제2 음성 데이터는 발신측의 통신 단말이 음성 합성 서비스에 가입한 경우에만 복제된다. 따라서, 음성 합성을 위한 데이터베이스를 구축하는데 있어서의 효율성을 높일 수 있다.

더 바람직하게는, 통신 시스템은, 중계 장치에 접속되어 둘 이상의 통신 단말에 대한 가입 정보를 기억하기 위한 가입 정보 데이터베이스 장치를 더 포함할 수 있으며, 중계 장치는, 가입 정보 데이터베이스 장치로부터 제1 통신 단말에 대한 서비스 정보를 다운로드해서 통신 정보 기억 장치에 기억시키기 위한 제1 다운로더와, 가입 정보 데이터베이스 장치로부터 제2 통신 단말에 대한 서비스 정보를 다운로드해서 통신 정보 기억 장치에 기억시키기 위한 제2 다운로더를 더 포함할 수 있다. 이러한 구성에 의하면, 제1 및 제2 통신 단말에 대한 서비스 정보는 가입 정보 데이터베이스로부터 다운로드될 수 있기 때문에, 중계 장치는 해당 중계 장치를 통해 현재 통신 중이지 않은 통신 단말에 대한 서비스 정보를 기억하고 있지 않아도 된다. 따라서, 중계 장치에 대한 처리 부하를 경감시킬 수 있다.

이 경우, 통신 시스템은, 복수의 중계 장치를 포함하는데, 복수의 중계 장치 중에는, 제1 통신 단말에 접속되고 제1 다운로더를 갖는 제1 중계 장치와, 제2 통신 단말에 접속되고 제2 다운로더를 갖는 제2 중계 장치가 포함될 수 있으며, 제2 중계 장치는 제2 통신 단말에 대한 서비스 정보를 제1 중계 장치에 전송하는 전송 장치를 더 포함할 수 있고, 제1 중계 장치는, 제1 다운로더에 의해 다운로드된 제1 통신 단말에 대한 서비스 정보와, 제2 중계 장치로부터 전송된 제2 통신 단말에 대한 서비스 정보를 통신 정보 기억 장치에 저장할 수 있다. 이 구성에 의하면, 제1 및 제2 중계 장치의 각각에 의해 서비스 정보가 다운로드되며, 제2 중계 장치에 의해 다운로드되는 서비스 정보가 제1 중계 장치에 전송되기 때문에, 제1 중계 장치는 제1 및 제2 음성 데이터의 각각에 대해 해당 음성 데이터가 복제되어야 하는지 여부를 판정할 수 있다.

본 발명의 다른 관점으로서, 본 발명은 통신 네트워크에 접속되는 중계 장치와, 하나의 통신 단말로부터 다른 통신 단말로 데이터를 중계하기 위한 중계 장치를 통해 통신 네트워크에 접속되는 둘 이상의 통신 단말을 포함하는 통신 시스템에서 사용되는 중계 장치를 제공하는데, 본 발명의 중계 장치는, 제1 통신 단말로부터 음성 데이터를 수신하고, 수신한 음성 데이터를 제2 통신 단말로 전송하는 송수신기; 음성 데이터를 복제하는 데이터 듀플리케이터; 및 데이터 듀플리케이터로 하여금 송수신기를 통해 제1 통신 단말로부터 수신된 음성 데이터를 복제하도록 하고, 송수신기로 하여금 복제된 음성 데이터를 미디어 처리 장치에 전송하도록 하는 통신 컨트롤러를 포함할 수 있으며, 미디어 처리 장치는 복제된 음성 데이터를 저장하고 음성 합성 데이터베이스를 생성할 수 있다. 이러한 본 발명의 중계 장치에 의하면, 인간의 재생되는 음성 특징의 개성에 중점을 둔 음성 합성 데이터베이스를 용이하게 구성할 수 있다.

본 발명의 또 다른 관점으로서, 본 발명은 통신 네트워크에 접속되는 중계 장치와, 하나의 통신 단말로부터 다른 통신 단말로 데이터를 중계하기 위한 중계 장치를 통해 통신 네트워크에 접속되는 둘 이상의 통신 단말을 포함하는 통신 시스템에서 중계 장치에서 사용하기 위한 중계 방법으로서, 제1 통신 단말로부터 음성 데이터를 수신하고 수신한 음성 데이터를 제2 통신 단말에 전송하는 제1 단계; 제1 단계에서 수신된 음성 데이터를 복제하는 제2 단계; 복제된 음성 데이터를 저장하고, 음성 합성 데이터베이스를 생성하는 미디어 처리 장치에 복제된 음성 데이터를 전송하는 제3 단계를 포함할 수 있다. 이러한 본 발명의 중계 방법에 의하면, 인간의 재생되는 음성 특징의 개성에 중점을 둔 음성 합성 데이터베이스를 용이하게 구성할 수 있다.

본 발명에 의하면, 인간 음성의 특징을 재생함에 있어서 개성에 중점을 둔 음성 합성용의 음성 데이터베이스를 구축할 수 있는 통신 시스템, 이러한 시스템에 사용되는 중계 장치, 및 이러한 시스템에 사용되는 중계 방법을 제공할 수 있다.

이하, 본 발명의 바람직한 실시예에 대하여 도면을 참조하여 상세하게 설명한다.

도 1은 본 발명의 실시예에 따라 음성 합성에 사용하기 위한 음성 데이터베이스(speech database)를 구축하기 위한 통신 시스템의 예를 보여주고 있다. 이 통신 시스템은, 복수의 통신 단말(10: 10a, 10b), 복수의 중계 장치(20: 20a, 20b), 가입 정보(subscription information) 데이터베이스(DB)(30), 및 미디어 처리 장치(40)를 포함하고 있다. 통신 단말(10)은 네트워크(N)의 관할 범위에 속해 있으며, 중계 장치(20)는 각 통신 단말을 네트워크(N)에 접속시키는 기능을 행하며, 가입 정보 DB(30)는 각 통신 단말(10)의 가입 정보를 관리(manage)하며, 미디어 처리 장치(40)는 각 통신 단말과 관련된 미디어 정보를 저장하고 처리한다. 통 신 단말, 중계 장치, 가입 정보 DB 및 미디어 처리 장치는 네트워크(N)를 통해 서로 접속되어 있다. 도 1에는 통신 단말(10)이 2개이고 중계 장치(20)가 2개인 것으로 나타내었지만, 통신 단말이나 중계 장치의 수를 3개 또는 그 이상으로 해도 된다.

음성 데이터(speech data)의 예로는, 음성 통신(voice communication), 비디오폰, 및 자동 응답기 등의 음성 데이터가 있다. 미디어 정보로는, 자동 응답기 등에 기록된 비디오 메시지, 오디오 메시지, 음악 파일, 동영상 등이 있다.

통신 단말(10)은 중계 장치(20)를 통해 네트워크(N)에 접속된다. 네트워크(N)는, 각 통신 단말(10)에 통신 서비스를 제공하며, 이러한 네트워크(N)의 예로는 모바일 통신 네트워크 등이 있다. 통신 단말(10)은 중계 장치(20)에 유선 또는 무선으로 접속될 수 있다.

통신 단말(10)은, 같은 네트워크(N)에 접속되어 있는 다른 통신 단말(10)과 중계 장치(20)를 통해 통신을 행할 수 있다. 통신 단말(10)은, CPU(Central Processing Unit), RAM(Random Access Memory), 1차 기억 장치로서의 ROM(Read Only Memory), 통신을 수행하기 위한 통신 모듈, 보조 기억 장치로서의 하드디스크 등의 하드웨어, 및 통신 단말(10)의 사용자가 조작하는 조작 유닛을 구성요소로서 포함하는 컴퓨터이다. 이들 구성요소는 서로 협력해서 동작하며, 통신 단말(10)의 기능은 다음에 설명하는 바와 같이 구현된다.

도 2는 통신 단말(10)의 기능적인 구성을 나타내는 블록도이다. 도 2에 나타낸 바와 같이, 통신 단말(10)은, 음성 입출력기(voice inputter- outputter)(101), 코덱(encoder-decoder)(102), 패킷 프로세서(103), 통신 컨트롤러(104), 및 데이터 송수신기(105)를 포함한다.

음성 입출력기(101)는 마이크로폰(101a)과 스피커(1001b)를 포함한다. 음성 입출력기(101)는 사용자가 마이크로폰(101a)을 통해 입력한 소리를 획득하고 획득한 소리를 음성 데이터로서 코덱(102)에 출력한다. 음성 입출력기(101)는 또한 코덱(102)에 의해 복호 처리된 음성 데이터를 입력받아서 스피커(101b)로 출력한다.

코덱(102)은 마이크로폰(101a)으로부터 제공된 음성 데이터를 부호화해서 데이터 송수신기로부터 전송될 수 있는 형태로 만든다. 한편, 코덱(102)은 입력된 음성 데이터를 복호 처리해서 음성 입출력기(101)의 스피커(101b)에서 출력될 수 있는 형태로 만든다. 모바일 통신용으로 사용되는 코덱(102)은, 예컨대 적응형 다중 레이트(AMR: Adaptive Multi-Rate) 협대역 코덱 및 AMR 광대역 코덱 등과 같은 다양한 코덱 중 하나이다.

패킷 프로세서(103)는, 코덱(102)에 의해 부호화된 음성 데이터를, 데이터 송수신기(105)로 출력하기 위한 복수의 패킷으로 분할한다. 패킷 프로세서(103)는 또한 데이터 송수신기(105)로부터 수신한 패킷을 조합함으로써, 음성 데이터가 코덱(102)에 의해 복호화 처리한 후에 재생이 가능하도록 한다. 패킷 프로세서(103)에 의해 이루어지는 프로세스는, VoIP(Voice over Internet Protocol) 등의 IP 시스템에서 음성 통신(voice communication)을 위한 RTP(Real-time Transfer Protocol)와 같은 프로토콜을 따른다.

통신 컨트롤러(104)가 생성하는 등록 메시지(registration message)에 의해, 통신 단말(10)은 네트워크(N)의 통신 서비스를 수신할 수 있다. 이후, 생성된 메시지는 데이터 송수신기(105)로 제공된다. 통신 컨트롤러(104)는, 대응하는 장치로부터 데이터 송수신기(105)를 통해 제공되는 응답 메시지(response message)를 수신하면, 통신이 현재 가능한 상태라고 판단한다. 통신 컨트롤러(104)에 의해 수행되는 제어 프로세스는 SIP(Session Initiation Protocol) 등의 프로토콜을 따른다. 사용자가 조작 유닛을 사용해서 통신을 종료하기 위한 명령을 입력하면, 통신 단말(10)은, 통신 컨트롤러(104)에 의해 수행되는 제어 프로세스에 따라, 대응하는 단말에 종료 메시지(termination message)를 전송하고, 이러한 종료 메시지에 대한 응답 메시지를 수신하면, 통신을 종료한다.

데이터 송수신기(105)는 다른 단말과 데이터 및 메시지를 주고 받는다. 데이터 송수신기(105)는, 패킷 프로세서(103)로부터 제공된 음성 데이터와 통신 컨트롤러(104)로부터 제공된 제어 메시지를 네트워크(N)에 전송한다. 데이터 송수신기(105)는 또한 네트워크(N)로부터 수신한 음성 데이터를 패킷 프로세서(103)에 제공하고, 네트워크(N)로부터 수신한 제어 메시지를 통신 컨트롤러(104)에 제공한다.

통신 단말(10)의 예로는 모바일 통신 단말 등이 될 수 있지만, 이에 한정되는 것은 아니다. 예를 들어, 통신 단말(10)은 음성 통신(voice communication)을 수행할 수 있는 개인용 컴퓨터나 SIP 전화가 될 수 있다. 그러나 본 실시예에서는, 통신 단말(10)이 모바일 통신 단말인 것으로 가정하고 설명한다.

네트워크(N)에는 중계 장치(20)가 접속되어 있다. 중계 장치(20)는 어느 통신 단말(10)을 다른 통신 단말(10)에 다른 중계 장치(20)를 통해 접속시키는 통신 기능을 제공한다. 중계 장치(20)는 CPU, RAM, 1차 기억 장치로서의 ROM, 통신을 수행하기 위한 통신 모듈, 및 보조 기억 장치로서의 하드디스크 등의 하드웨어를 구성요소로서 포함하는 컴퓨터이다. 이들 구성요소는 서로 협력해서 동작하며, 중계 장치(20)의 기능은 다음에 설명하는 바와 같이 구현된다.

도 3은 중계 장치(20)의 기능적인 구성을 나타내는 블록도이다. 도 3에 나타낸 바와 같이, 중계 장치(20)는 데이터 송수신기(201), 데이터 듀플리케이터(data duplicator)(202), 통신 컨트롤러(203), 통신 정보 기억 장치(204), 및 프로파일 정보 관리 데이터베이스(205)를 포함한다. 본 실시예에서는, 통신 단말(10)이 모바일 통신 단말이기 때문에, 중계 장치(20)는 통신 단말(10)이 접속하는 기지국이 된다. 통신 단말은 무선으로 또는 다른 네트워크 요소와 통신을 행하는 라우터 및 교환 장치에 의해 기지국에 접속한다. 이하, 설명의 편의를 위해, 중계 장치(20)는 중계 장치(20a)인 것으로 한다.

데이터 송수신기(201)는, 통신 단말(10), 다른 중계 장치[20: 본 실시예에서는 중계 장치(20b)], 가입 정보 DB(30), 또는 미디어 처리 장치(40) 중 하나로부터 제어 메시지를 수신하면, 수신한 제어 메시지를 통신 컨트롤러(203)에 제공한다. 데이터 송수신기(201)는, 통신 컨트롤러(203)로부터 제공되는 제어 메시지를, 통신 단말(10), 중계 장치(20b), 가입 정보 DB(30), 및 미디어 처리 장치(40) 중 하나에 전송한다.

중계 장치(20a)가 수신 및 전송하는 제어 메시지의 예로는, 통신 단말(10)이 제공하는 것으로서 네트워크(N)로부터 서비스를 수신하는데 사용하기 위한 등록 메 시지, 가입 정보 DB(30)로부터 통신 단말(10)의 프로파일 정보를 다운로드하는데 사용하기 위한 프로파일 다운로드 메시지(profile download message), 통신의 개시를 통지하기 위한 호출 메시지(call message), 및 호출 메시지에 응대하기 위한 응답 메시지가 있다. 제어 메시지의 다른 예로는, 대응하는 통신 단말의 접속 포인트[즉, 중계 장치(20)]를 조회하기 위한 수신측 접속 포인트 조회 메시지(receiver connected point inquiry message), 수신측 접속 포인트 조회 메시지에 대한 응답으로서 상대측의 접속 포인트를 전송하기 위한 수신측 접속 포인트 응답 메시지(receiver access point response message), 통신 단말(10)로부터 제공되는 메시지로서 대응하는 통신 단말과의 통신을 종료하기 위한 종료 메시지(termination message), 미디어 처리 장치(40)와의 통신을 종료하기 위한 종료 메시지, 및 대응하는 통신 단말(10)이나 미디어 처리 장치(40)로부터 제공되는 메시지로서 통신 단말이나 미디어 처리 장치와의 통신을 종료하기 위한 종료 메시지에 응대하기 위한 응답 메시지가 있다.

또한, 데이터 송수신기(201)는, 통신 컨트롤러(203)에 의해 지정된 패킷을 수신하면, 해당 패킷을 데이터 듀플리케이터(202)에 전송한다. 데이터 송수신기(201)는 데이터 듀플리케이터(202)에 의해 복제(duplicate)된 패킷을 미디어 처리 장치(40)에 전송한다.

데이터 듀플리케이터(202)는 데이터 송수신기(201)로부터 제공되는 패킷을 복제한다. 데이터 듀플리케이터(202)는, 복제된 패킷의 최초 송신측 어드레스를 유지하고 있다가, 목적지 어드레스(destination address)를 미디어 처리 장치(40) 의 IP 어드레스로 변경한 다음, 해당 패킷을 데이터 송수신기(201)로 출력한다.

도 4는 통신 정보 기억 장치(204)에 저장된 정보의 예를 나타낸다. 도 4에 나타낸 바와 같이, 통신 정보 기억 장치(204)는 복수의 레코드를 포함하고 있는데, 이들 복수의 레코드의 각각은, 통신 단말 식별자(통신 단말의 식별 정보)와, 현재 서로 통신을 행하고 있는 통신 단말(10)의 호출측 및 수신측의 IP 어드레스를 포함하고 있다. 또한, 각각의 레코드는 호출측과 수신측의 각각의 통신 단말(10)이 음성 합성 서비스에 가입되어 있는지 여부에 대한 서비스 정보를 포함한다. 음성 합성 서비스는, 예를 들어 모바일 통신 네트워크의 오퍼레이터가 제공하는 서비스로서, 가입자에 의해 특정된 텍스트에 대응하는 음성 합성 메시지를 생성하고, 이 음성 합성 메시지를 원하는 목적지로 전송하기 위한 것이다.

중계 장치(20)에 접속하는 통신 단말(10)의 프로파일 정보에 기초해서 음성 통신의 각각의 세션에 대해 레코드가 생성되며, 프로파일 정보는 가입 정보 DB(30)로부터 다운로드된 정보로서, 이에 대해서는 나중에 상세히 설명한다. 각각의 레코드는 통신 세션이 종료된 후에(즉, 통신을 종료하기 위한 종료 메시지에 응답하는 응답 메시지를 수신한 후에) 삭제된다.

본 실시예에서는, 각각의 통신 단말이 고유하게 식별될 수 있도록 하기 위한 통신 단말 식별자로서 전화 번호(phone number)를 사용한다.

프로파일 정보 관리 DB(205)는 가입 정보 DB(30)로부터 다운로드된 프로파일 정보를 저장한다. 가입 정보 DB(30)로부터 다운로드된 프로파일 정보에는, 등록 메시지를 전송한 통신 단말(10)의 전화 번호(즉, 통신 단말 식별자)와, 해당 통신 단말(10)이 음성 합성 서비스에 가입했는지 여부를 나타내는 서비스 정보가 포함되지만, 이에 한정되지 않는다. 프로파일 정보는, 각 통신 단말(10)의 IP 어드레스와 연관되어 기억되며, 동일한 통신 단말 식별자를 갖는 프로파일 정보가 다운로드될 때마다 최신의 IP 어드레스를 덮어쓰기 한다.

통신 컨트롤러(203)는, 데이터 송수신기(201)로부터 제어 메시지를 수신하면, 수신한 제어 메시지에 대응하는 프로세스를 수행한다. 제어 메시지의 예에 대해서는 앞서 설명한 바와 같다.

통신 컨트롤러(203)는, 통신 단말(10)로부터 데이터 송수신기(201)를 통해 등록 메시지를 수신하면, 수신한 등록 메시지를 데이터 송수신기(201)를 통해 가입 정보 DB(30)에 전송한다. 이 등록 메시지에 따라, 관련된 통신 단말(10)의 프로파일 정보가 프로파일 다운로드 메시지에 의해 통보된다. 수신된 프로파일 정보는 프로파일 정보 관리 DB(205)에 기억된다.

또한, 통신 컨트롤러(203)는, 통신 단말(10)로부터 데이터 송수신기(201)를 통해 호출 메시지(call message)를 수신하면, 대응하는 통신 단말(10)이 호출 메시지의 향후 목적지로서 접속되는 중계 장치를 식별하기 위해 수신측 접속 포인트 조회 메시지를 생성한다. 이후, 통신 컨트롤러(203)는, 생성한 수신측 접속 포인트 조회 메시지를 데이터 송수신기(201)에 출력해서, 가입 정보 DB(30)로 전송될 수 있도록 한다. 통신 컨트롤러(203)는, 데이터 송수신기(201)를 통해 수신측 접속 포인트 응답 메시지를 수신하면, 대응하는 통신 단말(10)이 접속된 중계 장치(20)를 식별하고, 그 식별된 중계 장치(20)에 데이터 송수신기(201)를 통해 호출 메시 지를 전송한다. 통신 컨트롤러(203)는, 대응하는 통신 단말(10)로부터 응답 메시지를 수신하면, 통신 정보 기억 장치(204)에 새로운 레코드를 생성한다.

통신 컨트롤러(203)는, 대응하는 중계 장치(20)로부터 데이터 송수신기(201)를 통해 호출 메시지를 수신하면, 수신한 호출 메시지를 데이터 송수신기(201)를 통해 관련 통신 단말(10)에 전송한다. 통신 컨트롤러(203)는, 통신 단말(10)로부터 데이터 송수신기(201)를 통해 호출 메시지에 대한 응답 메시지를 수신하면, 그 응답 메시지를 대응하는 중계 장치(20)에 전송하는데, 응답 메시지를 전송할 때에는, 응답 메시지의 송신측에 대응하는 프로파일 정보를 프로파일 정보 관리 장치 DB(205)로부터 판독해서, 판독한 프로파일 정보와 송신측 통신 단말(10)의 IP 어드레스를 응답 메시지에 추가해서 전송한다.

통신 컨트롤러(203)는, 통신 단말(10)로부터 데이터 송수신기(201)를 통해 종료 메시지를 수신하면, 데이터 송수신기(201)를 통해, 대응하는 중계 장치(20)와 미디어 처리 장치(40)에 각각 종료 메시지를 전송한다. 또한, 통신 컨트롤러(203)는, 대응하는 중계 장치(20)로부터 제공되는 응답 메시지와 미디어 처리 장치(40)로부터 제공되는 응답 메시지가 수신되었는지를 확인한 후에, 통신 단말(10)에 응답 메시지를 전송한다.

프로파일 다운로드 메시지에 의해 통보된 프로파일 정보에 의해, 통신 단말(10a)의 사용자가 음성 합성 서비스에 가입했다는 것을 나타내는 경우를 가정한다. 이 경우, 통신 단말(10a)로부터 음성 통신 호출 또는 비디오폰 호출이 수신하였거나, 통신 단말(10a)이 다른 통신 단말(10b)로부터의 호출을 수신하였다면, 통 신 컨트롤러(203)는 데이터 송수신기(201)로 하여금 해당 호출에서의 대화에 대응하는 음성 데이터를 데이터 듀플리케이터(202)에 출력하도록 한다. 출력된 음성 데이터는 데이터 듀플리케이터(202)에서 복제될 것이며, 복제된 음성 데이터는 데이터 송수신기(201)를 통해 미디어 처리 장치(40)로 전송된다.

따라서, 통신 단말(10a)이 음성 합성 서비스에 가입된 경우, 통신 컨트롤러(203)에 의해, 데이터 듀플리케이터(202)는 통신 단말(10a)로부터 수신한 음성 데이터를 복제하고, 데이터 송수신기(201)는 복제된 음성 데이터를 미디어 처리 장치(40)에 전송한다. 미디어 처리 장치(40)에 전송된 음성 데이터는 음성 합성 데이터베이스를 위한 기초로서 기억되고 사용될 것이기 때문에, 음성 합성을 위한 데이터베이스는 음성 합성 서비스에 가입하는 사용자의 실제의 음성 데이터에 기초해서 구성될 수 있다. 따라서, 이러한 방식으로 작성된 데이터베이스에 기초하여 생성되는 음성 합성 메시지는, 사용자의 각각의 음성 특징을 반영하는, 즉 사용자의 실제 소리와 매우 유사한 음성 메시지가 될 것이다.

또한, 통신 단말(10a)과 통신을 행하는 통신 단말(10b)이 음성 합성 서비스에 가입한 경우, 통신 단말(10a)에 접속된 중계 장치(20a)의 통신 컨트롤러(203)는 데이터 듀플리케이터(202)로 하여금 통신 단말(10b)로부터 수신한 음성 데이터를 복제하도록 한다. 통신 단말(10a)과 이에 대응하는 통신 단말(10b)이 모두 음성 합성 서비스에 가입한 경우, 중계 장치(20a)의 통신 컨트롤러(203)는 데이터 듀플리케이터(202)로 하여금 통신 단말(10a)로부터 수신한 음성 데이터와 통신 단말(10b)로부터 수신한 음성 데이터를 모두 복제하도록 한다. 따라서, 본 실시예의 통신 시스템에 의하면, 음성 합성 데이터베이스는 상대측 통신 단말의 사용자를 위한 구성이 될 수도 있다.

호출 메시지에 대한 응답으로서 전송된 응답 메시지는, 인입되는 호출(incoming call)에 대한 응답을 위한 것일 뿐만 아니라, 수신측 통신 단말(10)의 IP 어드레스를 통보하기 위한 것이기도 하다. 결과적으로, 호출측 통신 단말(10)이 접속된 중계 장치(20)는, 통신 단말 식별자와, 호출측 통신 단말 및 수신측 통신 단말 모두의 IP 어드레스에 대한 정보를 갖게 됨으로써, 이 정보는 통신 정보 기억 장치(204)에 기억된다. 앞서 설명한 바와 같이, 통신 단말 식별자와, 호출이 이루어지는 동안의 호출측 통신 단말 및 수신측 통신 단말의 IP 어드레스가 통신 정보 기억 장치(204)에 유지된다.

통신 컨트롤러(203)는, 대응하는 통신 단말(10)로부터 응답 메시지를 수신하면, 미디어 처리 장치(40)와 통신 경로를 확립하기 위한 호출 메시지를 생성해서, 미디어 처리 장치(40)에 전송한다. 데이터 듀플리케이터(202)는 미디어 처리 장치(40)로부터 응답 메시지를 수신한 후에 패킷의 복제를 시작한다.

가입 정보 DB(30)는, 네트워크(N)에 접속되며, 네트워크(N)의 오퍼레이터와 계약한 모든 통신 단말(10)에 대한 가입 정보와, 각 통신 단말(10)이 위치한 지점에 대한 정보를 관리하는 데이터베이스 서버 장치이다. 모바일 통신 시스템에서, 가입 정보 DB(30)는, 예를 들어 HLR(Home Location Register)이 될 수 있다. 가입 정보 DB(30)는, CPU, RAM, 1차 기억 장치로서의 ROM, 통신을 수행하기 위한 통신 모듈, 보조 기억 장치로서의 하드디스크와 같은 하드웨어(도시 안 됨)를 구성요소 로서 포함하는 컴퓨터이다. 이들 구성요소는 서로 협력해서 동작하며, 가입 정보 DB(30)의 기능은 다음에 설명하는 바와 같이 구현된다.

도 5는 가입 정보 DB(30)에 등록된 정보의 예를 나타낸다. 도 5에 나타낸 바와 같이, 가입 정보(301)로서, 사용자 ID, 전화 번호, 음성 합성 서비스에 대한 가입 여부를 나타내는 "예" 또는 "아니오", 및 각 통신 단말(10)에 대한 등록 상태가 등록된다. 본 실시예에서, 가입 정보 DB에 기억된 전화 번호는 통신 단말(10)의 통신 단말 식별자로서의 기능을 한다. 등록 상태는 통신 단말(10)이 등록된 경우(즉, 통신 단말이 켜져 있는 경우)에 통신 단말(10)이 접속되어 있는 중계 장치(20)의 IP 어드레스를 나타낸다. 중계 장치(20)의 IP 어드레스는 등록 메시지와 함께 중계 장치(20)로부터 전송된다. 이와 관련해서, 등록 메시지는 위치 등록 요청 메시지에 해당한다.

가입 정보 DB(30)는, 중계 장치(20)로부터 등록 메시지를 수신하면, 등록 메시지를 전송한 통신 단말(10)이 접속된 중계 장치(20)를 식별하는 정보를 등록 상태 항목에 등록한다. 또한, 가입 정보 DB(30)는 통신 단말(10)의 프로파일 정보로서 음성 합성 서비스의 가입 여부에 대한 "예" 또는 "아니오"를 나타내는 서비스 정보와 전화 번호를, 프로파일 다운로드 메시지에 의해 중계 장치(20)에 전송한다. 또한, 가입 정보 DB(30)는, 수신측 통신 단말(10)의 접속 포인트[즉, 통신 단말(10)이 접속된 중계 장치(20)]에 대해 조회하기 위한 수신측 접속 포인트 조회 메시지를 수신하게 되면, 조회를 전송한 중계 장치(20)에 수신측 통신 단말(10)의 접속 포인트를 전송하는데, 접속 포인트에 대한 정보를 수신측 접속 포인트 응답 메시지 내에 포함시킨 후에 전송한다.

미디어 처리 장치(40)는, 네트워크(N)에 접속되어, 통신 단말(10)의 멀티미디어 정보를 기억 및 처리하는 기능을 수행한다. 미디어 처리 장치(40)는, CPU, RAM, 1차 기억 장치로서의 ROM, 통신을 수행하기 위한 통신 모듈, 보조 기억 장치로서의 하드디스크와 같은 하드웨어(도시 안 됨)를 구성요소로서 포함하는 컴퓨터이다. 이들 구성요소는 서로 협력해서 동작하며, 미디어 처리 장치(40)의 기능은 다음에 설명하는 바와 같이 구현된다.

도 6은 미디어 처리 장치(40)의 기능적인 구성을 나타내는 블록도이다. 도 6에 나타낸 바와 같이, 미디어 처리 장치(40)는, 데이터 송수신기(401), 미디어 처리 애플리케이션(음성 데이터 프로세서)(402), 음성 데이터 기억 장치(403), 음성 합성 DB 생성 엔진(404), 음성 합성 DB(음성 합성 데이터베이스 기억 장치)(405), 및 음성 합성 장치(406)를 포함한다.

데이터 송수신기(401)는, 중계 장치(20)로부터 제어 메시지를 수신하면, 수신한 제어 메시지를 미디어 처리 애플리케이션(402)에 전송한다. 데이터 송수신기(401)는 미디어 처리 애플리케이션(402)으로부터 수신한 제어 메시지를 중계 장치(20)로 전송한다. 데이터 송수신기(401)는 또한 중계 장치(20)로부터 수신한 패킷을 미디어 처리 애플리케이션(402)으로 전송한다. 데이터 송수신기(401)는, 통신 단말(10)로부터 음성 합성을 요구하기 위한 음성 합성 요청 메시지를 수신하면, 수신한 메시지를 음성 합성 장치(406)로 출력한다. 음성 합성 요청 메시지는, 전자 메일의 텍스트 데이터 또는 인스턴트 메시지의 데이터와 함께 전송된다.

미디어 처리 애플리케이션(402)은, 중계 장치(20)로부터 호출 메시지를 수신하면, 응답 메시지를 전송한다. 호출 메시지에는 호출측 통신 단말의 IP 어드레스와 통신 단말 식별자가 포함된다. 미디어 처리 애플리케이션(402)은, 향후에 중계 장치(20)로부터 패킷을 수신하면, 각 패킷을 송신측 IP 어드레스를 기준으로 분류하고, 수신되어 분류된 각 패킷은 음성 데이터 기억 장치(403)에서의 대응하는 IP 어드레스에 따라 통신 단말용의 메모리 기억 공간에 기억된다. 이러한 기억 과정은 중계 장치(20)로부터 패킷이 수신될 때마다 수행된다. 미디어 처리 애플리케이션(402)은, 중계 장치(20)로부터 종료 메시지를 수신하면, 그 종료 메시지를 승인하는 응답 메시지를 전송한다. 미디어 처리 애플리케이션(402)은 또한 음성 데이터 기억 장치(403)로 하여금 기억된 패킷을 하나의 데이터 파일에 저장하도록 지시한다.

음성 합성 DB 엔진(404)은, 음성 합성을 위한 데이터 파일이 음성 데이터 기억 장치(403)에 등록되어 있는 경우, 음성 데이터 기억 장치(403)로부터 데이터 파일을 취득해서, 음성 합성을 위한 데이터베이스를 작성한다. 작성된 데이터베이스는 음성 합성 DB(405)에 저장된다.

음성 합성 장치(406)는, 통신 단말(10)로부터 음성 합성 요청 메시지를 수신하면, 음성 합성 DB(405)로부터 송신측 통신 단말(10)의 음성 합성을 위한 데이터를 취득하고 음성 합성 프로세스를 수행한다. 음성 합성된 메시지는 수신측 통신 단말(10)로 전송된다.

도 8은 중계 장치(20)의 통신 컨트롤러(203)에 의해 수행되는 통신 제어 프 로세스의 단순한 예를 나타내는 플로차트이다. 도 8에 나타낸 바와 같이, 통신 제어 프로세스에서, 통신 컨트롤러(203)는, 통신 단말(10)로부터 등록 요청을 수신하면, 먼저 등록 프로세스(단계 SA1)를 수행한다. 등록 요청은, 예를 들어 모바일 통신 단말(10)에 전원이 들어올 때에 전송된다. 등록 프로세스가 완료된 후, 통신 컨트롤러(203)는 다른 제어 메시지를 대기한다.

제어 메시지가 수신되고 수신된 제어 메시지가 중계 장치(20)에 접속하는 통신 단말(10)로부터의 호출 메시지인 경우, 통신 컨트롤러(203)는 먼저 호출측 프로세스(단계 SA2)를 수행한다. 이후, 통신 컨트롤러(203)는, 중계 장치(20)에 접속하는 하나 이상의 호출측 통신 단말(10)과 다른 중계 장치(20)에 접속하는 수신측 통신 단말(10)이 음성 합성 서비스에 가입되어 있는지 여부를, 통신 정보 기억 장치(204)에 기억된 정보에 기초하여 판정하기 위한 판정 프로세스(단계 SA4)를 수행한다. 판정 프로세스에 의한 판정이 "예"이면, 통신 컨트롤러(203)는 미디어 처리 장치(40)와의 통신 접속을 확립하기 위한 미디어 처리 장치 접속 프로세스(SA5)로 진행한다. 계속해서, 통신 컨트롤러(203)는 사용자 데이터 전송 및 복제 프로세스(단계 SA6)를 수행한다. 이어서, 통신 컨트롤러(203)는 통신 세션을 종료하기 위한 종료 프로세스(단계 SA7)를 수행한다. 단계 SA4에서의 판정이 "아니오"인 경우, 통신 컨트롤러(203)는 사용자 데이터 전송 프로세스(단계 SA8)로 진행한다. 사용자 데이터 전송 프로세스는 사용자 데이터가 수신될 때마다 수행되고, 이후 종료 메시지가 수신된 경우에 종료 프로세스가 수행된다(단계 SA7).

한편, 제어 메시지가 수신되고 수신된 제어 메시지가 다른 중계 장치(20)로 부터의 호출 메시지인 경우, 통신 컨트롤러(203)는 먼저 수신측 프로세스(단계 SA3)를 수행한다. 중계 장치(20)에 접속하는 통신 단말(10)과 다른 중계 장치(20)에 접속하는 통신 단말(10) 간의 통신 접속이 수신측 프로세스에 의해 확립되면, 통신 컨트롤러(203)는 해당 중계 장치에 접속하는 통신 단말(10)로부터 수신된 사용자 데이터를 다른 중계 장치(20)에 전송하고, 다른 중계 장치(20)로부터 수신된 사용자 데이터를 해당 중계 장치(20)에 접속하는 통신 단말(10)에 전송한다(단계 SA8). 이러한 사용자 데이터 전송 프로세스는 사용자 데이터가 수신될 때마다 수행되며, 종료 메시지가 수신된 경우에는 종료 프로세스(단계 SA7)로 진행한다. 이 종료 프로세스에서, 통신 컨트롤러(203)는, 통신 단말(10)로부터 종료 메시지를 수신하면, 다른 중계 장치(20)와의 통신을 종료한다. 통신 컨트롤러(203)는 또한 해당 중계 장치(20)가 미디어 처리 장치(40)와 통신을 하고 있는 경우 미디어 처리 장치(40)와의 통신도 종료한다.

도 7a 및 도 7b는 통신 시스템에서 교환되는 데이터 흐름을 나타내는 순차도이다. 도 9 내지 도 12는 각각 등록 프로세스(도 8에서의 SA1), 호출측 프로세스(도 8에서의 SA2), 수신측 프로세스(도 8에서의 SA3), 사용자 데이터 전송 및 복제 프로세스(도 8의 SA6)의 상세한 흐름을 나타낸다.

도 7a 및 도 7b와 도 9 내지 도 12를 참조해서, 통신 시스템에서 수행되는 프로세스의 예를 설명한다. 이러한 통신 시스템에서 수행되는 프로세스에서, 2개의 통신 단말(10a, 10b)은 음성 통신을 수행하며, 이러한 음성 통신이 이루어지는 동안, 미디어 처리 장치(40)에 패킷이 저장되고, 통신 단말(10a, 10b)은 통신이 종 료된 후에 음성 합성 요청 메시지를 각각 전송한다.

도 7a에서의 단계 S1에서, 통신 단말(10a, 10b)은, 예를 들어 각 통신 단말이 네트워크(N)로부터 서비스를 수신할 수 있도록 전원이 온으로 되었을 때에, 등록 메시지를 중계 장치(20a, 20b)에 각각 전송한다. 각각의 중계 장치(20a, 20b)는 이 등록 메시지를 가입 정보 DB(30)에 전송한다. 이 때, 각각의 중계 장치(20a, 20b)는, 각 중계 장치(20a, 20b)의 IP 어드레스를 가입 정보 DB(30)에 통보해서, 각 통신 단말(10a, 10b)이 접속된 중계 장치를 찾을 수 있도록 한다. 다음으로, 가입 정보 DB(30)는 각 통신 단말(10a, 10b)이 접속된 중계 장치(20a, 20b)의 IP 어드레스를 등록 상태로서 등록한다.

단계 S2에서, 등록 메시지를 수신한 가입 정보 DB(30)는, 등록 메시지에 의해 통보된 중계 장치(20a, 20b)의 각각의 IP 어드레스에 대한 프로파일 정보를 전송하기 위해 각 통신 단말(10a, 10b)의 프로파일 정보를 추출(extract)한다(도 7a에서의 단계 S2: 프로파일 다운로드). 각 중계 장치(20a, 20b)는 수신한 프로파일 정보를 각 중계 장치(20)의 프로파일 정보 관리 DB(205)에 등록한다.

도 9는 중계 장치(20)의 통신 컨트롤러(203)에 의해 수행되는 등록 프로세스의 흐름을 나타내는 플로차트이다. 이러한 등록 프로세서에서, 통신 컨트롤러(203)는 먼저 통신 단말(10)로부터 등록 메시지를 수신한다(단계 SA11). 이러서, 통신 컨트롤러(203)는 수신한 등록 메시지를 가입 정보 DB에 전송한다(단계 SA12). 등록 메시지를 전송할 때에, 통신 컨트롤러(203)는 중계 장치(20)의 IP 어드레스를 등록 메시지에 추가해서 전송한다.

이어서, 통신 컨트롤러(203)는, 가입 정보 DB(30)로부터 프로파일 정보가 수신되었는지 여부를 판정한다(단계 SA13). 이러한 판정은, 프로파일 정보가 수신될 때까지 반복된다(단계 SA13: 아니오). 판정이 "예"로 되면, 통신 컨트롤러(203)는, 수신한 프로파일 정보를 프로파일 정보 관리 DB(205)에 등록해서, 등록 프로세스를 완료한다.

도 7a에 나타낸 바와 같이, 등록 프로세스는 중계 장치(20a, 20b)에 의해 각각 수행된다.

도 7a에서의 단계 S3에서, 통신 단말(10a)은 통신 단말(10b)에 대한 호출 메시지를 전송한다.

도 7a에서의 단계 S4에서, 중계 장치(20a)는 통신 단말(10b)이 접속된 중계 장치에 대해 가입 정보 DB(30)에 조회하게 되는데, 이 경우 수신측 접속 포인트 조회 메시지를 전송함으로써 조회한다.

도 7a에서의 단계 S5에서, 통신 단말(10b)의 등록이 완료된 경우, 가입 정보 DB(30)는, 통신 단말(10b)이 중계 장치(20b)에 접속된 것으로 판정해서, 중계 장치(20b)를 나타내는 정보를 중계 장치(20a)에 전송한다(도 7a에서의 단계 S5: 수신측 접속 포인트 응답).

도 7a에서의 단계 S6에서, 중계 장치(20a)는 통신 단말(10b)이 접속한 중계 장치로서 가입 정보 DB(30)에 의해 통보된 중계 장치(20b)에 호출 메시지를 전송한다. 중계 장치(20b)는, 호출 메시지를 수신했으면, 동일한 호출 메시지를 통신 단말(10b)에 전송하고, 수신한 호출 메시지의 송신측 어드레스를 기록한다.

도 7a에서의 단계 S7에서, 통신 단말(10b)은, 호출 메시지에 응답을 할 수 있게 되면, 중계 장치(20b)에 응답 메시지를 전송한다. 중계 장치(20b)는, 통신 단말(10b)의 IP 어드레스와 프로파일 정보를 추가한 다음, 수신한 응답 메시지를 중계 장치(20a)에 전송한다. 이어서, 중계 장치(20a)는 응답 메시지를 통신 단말(10a)에 전송한다. 본 실시예에서, 중계 장치(20b)는, 단계 S6에서 수신한 호출 메시지의 송신측 어드레스를 기록해 두었기 때문에, 중계 장치(20a)에 메시지를 전송할 수 있다.

도 10은 중계 장치(20)[도 7a에 나타낸 예에서의 중계 장치(20a)]의 통신 컨트롤러(203)[본 프로세스에서는 통신 컨트롤러(203)를 "통신 컨트롤러(203a)"라고 함]에 의해 수행되는 호출측 프로세스의 흐름을 나타내는 플로차트이다. 호출측 프로세스에서, 통신 컨트롤러(203a)는 우선 호출측 통신 단말에 해당하는 통신 단말(10a)로부터 호출 메시지를 수신한다(단계 SA21). 이어서, 통신 컨트롤러(203a)는, 가입 정보 DB(30)에 수신측 접속 포인트 조회 메시지를 전송함으로써, 호출 메시지에서 지정된 수신측 통신 단말(10b)의 접속 포인트에 대해서 조회한다(단계 SA22).

이어서, 통신 컨트롤러(203a)는 수신측 접속 포인트에 대한 정보가 가입 정보 DB(30)로부터 수신되었는지 여부를 판정한다(단계 SA23). 이러한 판정은 수신측 접속 포인트에 대한 정보가 수신될 때까지 반복된다(단계 SA23: 아니오). 판정이 "예"로 되면, 통신 컨트롤러(203a)는 수신측 접속 포인트에 대한 정보가 나타내는 중계 장치(20)[도 7a에 나타낸 예에서는 중계 장치(20b)]에 호출 메시지를 전송 한다(단계 SA24). 이 호출 메시지는, 도 7a에서의 단계 S6에 나타낸 바와 같이, 중계 장치(20b)로부터 통신 단말(10b)로 전송된다.

도 11은 중계 장치(20)[도 7a에 나타낸 예에서의 중계 장치(20b)]의 통신 컨트롤러(203)[본 프로세스에서는 통신 컨트롤러(203)를 "통신 컨트롤러(203b)"라고 함]에 의해 수행되는 수신측 프로세스의 흐름을 나타내는 플로차트이다. 이 수신측 프로세스에서, 통신 컨트롤러(203b)는, 호출 메시지를 수신측 통신 단말(10b)에 전송하고, 송신한 호출 메시지에 대한 응답 메시지를 대기한다(단계 SA33: 아니오).

통신 컨트롤러(203b)는, 통신 단말(10b)로부터 응답 메시지를 수신하면(단계 SA33: 아니오), 프로파일 정보 관리 DB(205)로부터 통신 단말(10b)의 프로파일 정보를 판독하고(단계 SA34), 판독한 통신 단말(10b)의 프로파일 정보와 IP 어드레스를 응답 메시지에 추가한 다음(단계 SA35), 응답 메시지를 추가한 정보와 함께 중계 장치(20a)에 전송하고, 수신측 프로세스를 완료한다.

한편, 도 10의 단계 SA25에서, 중계 장치(20a)의 통신 컨트롤러(203a)는, 응답 메시지가 통신 단말(10b)로부터 중계 장치(20b)를 통해 수신되었는지 여부를 판정한다(단계 SA25). 이러한 판정은 응답 메시지가 수신될 때까지 반복된다(단계 SA25: 아니오).

통신 컨트롤러(203a)는, 상기 판정이 "예"로 되면, 통신 정보 기억 장치(204)에 새로운 레코드를 생성한다. 구체적으로 말해서, 통신 컨트롤러(203a)는, 수신한 프로파일 정보에 기초해서, 통신 단말(10b)의 통신 단말 식별자와, 통 신 단말(10b)이 음성 합성 서비스에 가입했는지 여부를 나타내는 서비스 정보를 취득한다. 이어서, 통신 컨트롤러(203a)는, 새로운 레코드에, 통신 단말 식별자, 서비스 정보, 및 통신 단말(10b)의 수신한 IP 어드레스를 저장한다. 통신 컨트롤러(203)는 또한, 단계 SA21에서 수신한 호출측 메시지에 포함된 IP 어드레스에 대응하는 프로파일 정보를, 프로파일 정보 관리 DB(205)로부터 판독하고, 통신 단말(10a)의 통신 단말 식별자와, 통신 단말(10a)이 음성 합성 서비스에 가입했는지 여부를 나타내는 서비스 정보를 취득해서, 통신 단말(10a)의 IP 어드레스와 함께 새로운 레코드에 저장한다(단계 SA26).

본 예에서, 단계 SA26에서 수행된 프로세스의 결과로서, 도 4에 나타낸 바와 같이, 통신 정보 기억 장치(204)의 최상위 레코드에서, 통신 단말(10a)의 통신 단말 식별자는 "090AAAAAAAA"로 하고, 통신 단말(10b)의 통신 단말 식별자는 "090BBBBBBB"인 것으로 가정한다. 따라서, 본 예에서는, 통신 단말(10a)과 통신 단말(10b)이 모두 음성 합성 서비스에 가입되어 있다.

이어서, 통신 컨트롤러(203a)는, 호출측 프로세스를 완료하고, 도 8에서의 단계 SA4의 판정 프로세스로 진행한다.

판정 프로세스에서, 중계 장치(20a)는 호출측 통신 단말과 수신측 통신 단말 중의 적어도 하나가 음성 합성 서비스에 가입했는지 여부를 통신 정보 기억 장치(204)에 기억된 정보에 기초해서 판정한다. 본 예에서는, 통신 정보 기억 장치(204)에 기억된 정보에 기초해서 긍정인 것으로(도 8에서의 단계 SA4: 예) 판정되기 때문에, 중계 장치(20a)는 미디어 처리 장치(40)에의 전송을 위한 통신 경로 를 확립하기 위한 호출 메시지를 생성한다(도 7a에서의 단계 S8: 호출, 도 8에서의 단계 SA5). 호출측 통신 단말이나 수신측 통신 단말 중 어느 것도 음성 합성 서비스에 가입하지 않은 것으로 판정된 경우(도 8에서의 단계 SA4: 아니오)에는, 통신 컨트롤러(203)가 미디어 처리 장치(40)에 호출 메시지를 전송하지 않는다. 대신에, 통신 컨트롤러(203)는 사용자 데이터 전송 프로세스로 진행한다(도 8의 단계 SA8).

도 7a의 단계 S9에서, 미디어 처리 장치(40)는, 호출 메시지를 수신하고 나서, 응답 메시지를 중계 장치(20a)에 전송하며, 이에 의하여 중계 장치(20a)와의 통신 경로가 구축된다.

도 7a의 단계 S10에서, 사용자 데이터(음성 데이터)를 포함하는 패킷이 통신 단말(10a)로부터 중계 장치(20a)로 전송된 경우, 중계 장치(20a)는 대응하는 통신 단말(10b)에 접속된 중계 장치(20b)로 패킷을 전송한다. 본 실시예에서, 통신 단말(10a)은 음성 합성 서비스에 가입했기 때문에, 중계 장치(20a)는 패킷을 복제해서 미디어 처리 장치(40)에 전송한다. 패킷이 통신 단말(10b)로부터 중계 장치(20b)를 거쳐 중계 장치(20a)로 전송되며, 또한 본 실시예에서, 통신 단말(10b)은 음성 합성 서비스에 가입했기 때문에, 중계 장치(20a)는 패킷을 복제해서 미디어 처리 장치(40)에 전송한다(도 7a에서의 단계 S10a: 복제된 패킷). 미디어 처리 장치(40)는 수신한 패킷을 최초 송신측 어드레스[즉, 통신 단말(10a 또는 10b)의 IP 어드레스]에 따라 분류하고, 각 패킷의 데이터를 음성 데이터 기억 장치(403)의 송신측 어드레스에 대응하는 통신 단말 식별자에 대응하는 메모리 기억 공간에 저 장한다.

도 12는 통신 컨트롤러(203a)에 의해 수행되는 사용자 데이터 전송 및 복제 프로세스의 흐름을 나타내는 플로차트이다. 본 프로세스에서, 통신 컨트롤러(203a)는 우선 사용자 데이터를 수신한다(SA61). 이어서, 통신 컨트롤러(203a)는 수신한 사용자 데이터가 단계 SA21에서 수신한 호출 메시지를 전송한 호출측 통신 단말[즉, 통신 단말(10a)]로부터 전송되었는지 여부를 판정한다(단계 SA62).

상기 판정이 "예"로 되면, 통신 컨트롤러(203a)는 사용자 데이터를 수신측 통신 단말[즉, 통신 단말(10b)]에 전송한다(단계 SA63). 이어서, 통신 컨트롤러(203a)는 통신 단말(10a)이 음성 합성 서비스에 가입했는지 여부를, 통신 정보 기억 장치(204)에 기억된 정보에 기초하여 판정한다(단계 SA64). 본 예에서, 통신 단말(10a)은 음성 합성 서비스에 가입되어 있기 때문에, 상기 판정은 "예"로 된다. 따라서, 통신 컨트롤러(203a)는, 데이터 듀플리케이터(202)로 하여금 사용자 데이터를 복제하도록 하고(단계 SA65), 복제된 사용자 데이터를 데이터 송수신기(201)를 거쳐 미디어 처리 장치(40)에 전송해서(단계 SA66), 본 프로세스를 완료한다. 단계 SA64에서의 판정이 "아니오"인 경우에는, 도 8의 메인 프로세스로 복귀한다.

한편, 단계 SA62에서의 판정이 "아니오"인 경우, 수신된 사용자 데이터가 통신 단말(10b)로부터 전송되었다면, 통신 컨트롤러(203a)는 사용자 데이터를 수신측 통신 단말[즉, 통신 단말(10a)]로 전송한다(단계 SA67). 이어서, 통신 컨트롤러(203a)는 통신 단말(10b)이 음성 합성 서비스에 가입되어 있는지 여부를 통신 정보 기억 장치(204)에 기억된 정보에 기초하여 판정한다(단계 SA68). 본 예에서, 통신 단말(10b)은 음성 합성 서비스에 가입되어 있기 때문에, 상기 판정은 "예"로 된다. 따라서, 통신 컨트롤러(203a)는 데이터 듀플리케이터(202)로 하여금 사용자 데이터를 복제하도록 하고(단계 SA65), 복제된 사용자 데이터를 데이터 송수신기(201)를 통해 미디어 처리 장치(40)로 전송해서(단계 SA66), 본 프로세스를 완료한다. 단계 SA68에서의 판정이 "아니오"인 경우, 도 8의 메인 프로세스로 복귀한다. 이 사용자 데이터 전송 및 복제 프로세스는 사용자 데이터가 수신될 때마다 수행된다.

도 7b의 단계 S11에서, 통신을 종료하기 위한 지시가 사용자에 의해 입력된 경우, 통신 단말(10a)은 종료 메시지를 전송한다. 중계 장치(20a)는, 종료 메시지를 수신하면, 수신한 종료 메시지를 중계 장치(20b)에 전송한다. 이어서, 중계 장치(20b)는 종료 메시지를 통신 단말(10b)에 전송한다.

도 7b에서의 단계 S12에서, 통신 단말(10b)은, 음성 통신을 종료하기 위한 종료 메시지를 수신한 후에, 응답 메시지를 중계 장치(20b)에 전송한다. 중계 장치(20b)는, 응답 메시지를 수신하면, 수신한 응답 메시지를 중계 장치(20a)에 전송한다. 중계 장치(20b)는 그 응답 메시지를 단계 S7과 관련해서 언급한 것과 동일한 이유에 의해 중계 장치(20a)에 전송할 수 있다.

도 7b의 단계 S13에서, 중계 장치(20a)는, 통신 단말(10a)로부터 종료 메시지를 수신하면, 중계 장치(20a)에서의 패킷의 복제 기능을 중단시키고, 종료 메시지를 미디어 처리 장치(40)에 전송한다.

도 7b의 단계 S14에서, 미디어 처리 장치(40)는, 종료 메시지를 수신하면, 응답 메시지를 전송해서 중계 장치(20a)와의 통신을 종료한다. 이 경우, 미디어 처리 장치(40)는 음성 통신이 완료된 것으로 판정하고, 음성 데이터 기억 장치(403)에 기억되어 있는 복제된 각각의 패킷에 포함된 데이터가 하나의 데이터 파일로 조합된다.

도 7b의 단계 S15에서, 중계 장치(20a)는, 중계 장치(20b)와 미디어 처리 장치(40)로부터 응답 메시지를 수신하면, 통신이 완료되었다는 것을 통보하는 응답 메시지를 통신 단말(10a)에 전송한다(도 8의 단계 SA7에 대응하는 단계 S11 내지 단계 S15). 따라서, 통신 단말(10a)과 통신 단말(10b) 간의 통신 세션이 종료된다.

도 7b의 단계 S16에서, 미디어 처리 장치(40)는, 음성 데이터 기억 장치(403)에 기억된 음성 통신에 대한 데이터 파일에 기초하여 음성 합성을 위해 사용될 데이터베이스를 구축한다.

단계 S16에서 생성된 음성 합성 DB는, 전자 메일이나 인스턴트 메시지와 같은 메시징 애플리케이션에 의해, 통신 단말(10a 또는 10b)로부터 전송된 메시지 데이터에 의해 음성 합성 작업이 요청될 때에 사용된다.

단계 S17에서, 통신 단말(10a)은, 음성 합성 요청을 포함하는 통신 단말(10b)에 대한 메시지를, 중계 장치(20a)에 전송한다. 중계 장치(20a)는 수신한 메시지를 미디어 처리 장치(40)에 전송한다(도 7b에서의 단계 S17: 음성 합성 요청 메시지).

단계 S18에서, 미디어 처리 장치(40)는 통신 단말(10a)의 사용자의 각 음성 특징을 반영하는 음성 합성 메시지를 음성 합성 DB에 기초해서 생성하고, 이 메시지를 중계 장치(20b)를 통해 통신 단말(10b)에 전송한다(도 7b에서의 단계 S18: 음성 합성 메시지).

단계 S19에서, 통신 단말(10b)은 음성 합성 요청을 포함하는 통신 단말(10a)에 대한 메시지를 중계 장치(20b)에 전송한다. 중계 장치(20b)는 수신한 메시지를 미디어 처리 장치(40)에 전송한다(도 7b에서의 단계 S19: 음성 합성 요청 메시지).

단계 S20에서, 미디어 처리 장치(40)는 통신 단말(10b)의 사용자의 각 음성 특징을 반영하는 음성 합성된 메시지를, 음성 합성 DB에 기초해서 생성하고, 그 메시지를 중계 장치(20a)를 통해 통신 단말(10a)에 전송한다(도 7b에서의 단계 S20: 음성 합성된 메시지).

변형예

앞서 설명한 실시예들은 다음에 설명하는 바와 같이 변경될 수 있다.

앞서 설명한 실시예에서, 통신 단말(10a)이 통신 단말(10b)을 호출하는 경우, 통신 단말(10a)에 접속된 중계 장치(20a)는, 통신 단말(10a)과 통신 단말(10b)의 음성 데이터를 복제하고, 복제된 음성 데이터를 미디어 처리 장치(40)에 전송한다. 그러나, 이 경우, 중계 장치(20b)는 중계 장치(20a)와 동일한 구성을 갖기 때문에, 중계 장치(20b)도 통신 단말(10a)과 통신 단말(10b)에 대한 음성 데이터를 복제하도록 할 수 있다. 이와 달리, 중계 장치(20a)와 중계 장치(20b)가 각각 통신 단말(10a)과 통신 단말(10b)에 대한 음성 데이터를 복제하도록 시스템이 구성될 수 있다. 다른 예로서, 각각의 중계 장치(20a, 20b)는 통신 단말(10a)에 대한 음 성 데이터와 통신 단말(10b)에 대한 음성 데이터를 각각 복제할 수 있다.

또한, 상기 실시예에서는, 통신 단말(10a)이 중계 장치(20a)에 접속되어 있으며, 통신 단말(10b)이 중계 장치(20b)에 접속되어 있는 것으로 설명했지만, 통신 단말(10a)과 통신 단말(10b)은 모두 동일한 중계 장치(20)에 접속되어 있을 수 있다. 또한, 중계 장치(20)에 하나 이상의 통신 단말(10)이 접속될 수 있다. 즉, 중계 장치(20)와 동일한 기능을 갖지 않는 일반적인 중계 장치에 통신 단말 중의 하나가 접속될 수 있다.

상기 실시예에서는, 미디어 처리 장치(40)에 전송된 음성 통신에 포함되는 데이터의 모든 부분을 미디어 처리 장치에 저장하는 것으로 했지만, 전송된 데이터 중에서 선택한 일부분만이 저장되도록 해도 된다. 저장될 데이터의 선택은, 저장된 데이터와 수신한 데이터를 비교해서 이루어질 수 있는데, 예를 들어 발음과 의미에 의해 저장된 데이터와 동일 또는 유사한 데이터 부분을 폐기한다. 이 경우, 미디어 처리 장치(40)의 미디어 처리 애플리케이션(402)은, 수신측에 수신된 음성 데이터의 부분이 저장된 음성 데이터의 부분에 대응하는지 여부를 판정하는 판정 장치를 포함할 수 있다. 미디어 처리 애플리케이션(402)은, 판정 장치에 의해 상대측이 있는 것을 알았을 때에, 수신한 음성 데이터 부분을 기억된 음성 데이터 부분에 덮어쓸 수 있다.

기억된 데이터 부분에 배경 잡음이 있고 새로 수신한 데이터 부분이 기억된 데이터 부분보다 음질이 좋은 경우, 수신한 데이터 부분이 기억된 데이터 부분과 동일 또는 유사하다면, 기억된 데이터 부분을 수신한 데이터 부분으로 대체시킬 수 있는 것이 바람직하다. 이 경우, 미디어 처리 애플리케이션(402)은 수신된 음성 데이터 부분에 포함된 잡음량과 이에 대응하는 기억된 음성 데이터 부분에 포함된 잡음량을 측정하는 잡음 측정 장치를 구비할 수 있다. 음성 데이터 기억 장치(403)는, 수신한 음성 데이터 부분의 잡음량이 기억된 음성 데이터 부분의 잡음량보다 적은 경우에는, 기억된 음성 데이터 부분을 수신한 음성 데이터 부분으로 덮어쓸 수 있다. 이러한 구성에 의하면, 음성 합성 데이터베이스의 크기를 최적화하면 높은 품질을 유지할 수 있다.

음성 합성 메시지에 자주 사용되는 데이터 부분을 기억시켜 둠으로써, 새로운 데이터 부분이 입력되어도 데이터의 대체가 자주 일어나지 않도록 하는 것이 바람직하다.

상기 실시예에서, 미디어 처리 장치(40)에 전송된 음성 통신에 포함된 데이터는 모두 기억되지만, 배경 잡음과 같은 바람직하지 않은 음향을 제거한 후에 기억시켜도 된다. 이 경우, 미디어 처리 애플리케이션(402)은 음성 데이터에 포함된 배경 잡음을 제거하는 잡음 필터 장치를 구비할 수 있으며, 음성 데이터 기억 장치(403)는 잡음 제어 필터에 의해 잡음을 제거한 음성 데이터를 기억할 수 있다. 이러한 구성에 의하면, 데이터의 필요한 부분만을 기억시킬 수 있다.

데이터를 기억시키기 전에, 배경 잡음뿐만 아니라, 무음 데이터도 제거할 수 있는 것이 바람직하다.

상기 실시예에서, 데이터는, 송신측 IP 어드레스에 의해 중계 장치에서 복제되며, 송신측 IP 어드레스에 의해 미디어 처리 장치에 기억된다. 그러나, 데이터 를 복제 및 기억시키는 데에 다른 식별자가 사용될 수 있다. 예를 들면, Ethernet에서의 MAC(Media Access Control), ATM(Asynchronous Transfer Mode)에서의 VCI(Virtual Channel Identifier), 또는 IMSI(International Mobile Subscriber Identity)가 사용될 수 있다. 또한, 통신 단말의 통신 단말 식별자가 사용될 수 있다. 이러한 변형예에 의하면, 본 발명의 통신 시스템이 IP를 사용하는 네트워크(예컨대, Internet) 외의 네트워크에 제공될 수 있다.

상기 실시예에서, 가입 정보는 중계 장치에서 데이터를 복제했는지와 그 복제된 데이터를 미디어 처리 장치에 저장했는지 여부를 판정하는 데에 사용된다. 대신에, 호출측 통신 단말은, 해당 통신 단말에 의해 지정된 음성 데이터만 미디어 처리 장치에 기록되도록, 음성 데이터를 기록하기 위한 지시(즉, 데이터의 복제 및 저장)를 전송할 수 있다. 이 경우, 중계 장치(20)의 통신 컨트롤러(203)는, 데이터 송수신기(201)가 통신 단말(10)로부터 복제를 위한 지시를 수신한 경우, 데이터 듀플리케이터(202)로 하여금 통신 단말(10)로부터 데이터 송수신기(201)를 거쳐 수신된 음성 데이터를 복제하도록 할 수 있다. 이러한 변형예에 의하면, 기록될 음성 데이터는 통신 단말에 의해 자유롭게 지정될 수 있다.

사용자로 하여금 음성 통신이 완료된 후 음성 데이터를 기록할 것인지 여부를 지정할 수 있도록 하는 것이 바람직하다. 이 경우, 음성 합성 DB 엔진(404)은 음성 데이터 기억 장치(403)로부터 데이터 파일을 취득해서, 데이터 파일을 데이터베이스에 추가하기 위한 지시가 주어진 경우에만, 음성 합성을 위한 데이터베이스를 작성할 수 있다.

상기 실시예에서, 음성 합성 서비스에 가입한 통신 단말의 음성 데이터는 미디어 처리 장치에 저장되지만, 음성 합성 서비스에 가입한 통신 단말의 자주 접촉하는 상대측의 음성 데이터도 저장될 수 있다. 구체적으로 말해서, 몇몇 가장 빈번한 상대측의 음성 데이터는, 몇몇 가장 빈번한 상대측 중의 하나로부터 메시지가 전송된 경우에, 음성 합성된 메시지가 전송되도록 저장될 수 있다. 이 경우, 통신 단말(10a)은 음성 합성 서비스에 가입했지만, 통신 단말(10b)은 음성 합성 서비스에 가입하지 않은 경우라도, 통신 단말(10a)이 접속한 중계 장치(20)의 통신 컨트롤러(203)는, 데이터 듀플리케이터(202)로 하여금, 소정의 기간 내에 통신 단말 사이에서 이루어진 호출의 횟수가 임계값을 초과하는 경우, 통신 단말(10b)로부터 수신된 음성 데이터를 복제하도록 할 수 있다. 이 변형예에 의하면, 상대측 통신 단말이 음성 합성 서비스에 가입해 있지 않은 경우라도, 그 상대측 통신 단말로부터 음성 합성된 메시지가 전송될 수 있다.

상기 실시예에서, 미디어 처리 장치는, 합성된 메시지를 자동으로 전송하기 위해, 요청 메시지가 전송될 때에, 음성 합성 프로세스를 수행한다. 그러나, 음성 합성된 메시지는 상대측으로 전송되기 전에 호출측 통신 단말에서 체크될 수 있다. 구체적으로 말해서, 음성 합성된 메시지는 호출측 통신 단말에서 재생될 수 있다. 이 변형예에 의하면, 호출측 통신 단말의 사용자는, 합성된 메시지를 전송할 것인지 여부를 판정하기 위해, 합성된 메시지가 충분한 정도의 개별 음성 특징을 가지고 있는지 여부를 확인할 수 있다.

상기 실시예에서, 미디어 처리 장치는 음성 데이터를 여러 파일에 저장하고, 또한 저장된 음성 데이터 파일은 음성 인식을 거쳐 처리될 수 있으며, 인식된 문자 및 음성 데이터 파일을 서로 관련시켜 기억시킬 수 있다.

이상, 본 발명에 따라 음성 통신이 이루어지는 동안 음성 데이터에 기초해서 음성 합성을 위한 데이터베이스를 구축하기 위한 통신 시스템에서는, 통신 단말을 이용해서 이루어지는 대화가 음성 합성을 위한 데이터베이스를 구축하기 위해 사용된다. 따라서, 이러한 통신 시스템에서는, 사용자가 기록이나 녹음을 위해 긴 시간 동안 작업을 하거나 전용 스튜디오를 갖출 필요가 없다. 따라서, 본 발명에 따라 음성 통신이 이루어지는 동안 음성 데이터에 기초해서 음성 합성을 위한 데이터베이스를 구축하기 위한 통신 시스템에 의하면, 음성 합성을 위한 기록이나 녹음이 수행되고 있는지를 사용자가 알 필요없이 음성 합성을 위한 데이터베이스가 용이하게 구축될 수 있다.

또한, 음성 합성을 위한 데이터베이스는 통신 단말을 사용하는 사용자에 의해 행해지는 대화에 기초해서 구축된다. 따라서, 본 발명에 의하면, 인간의 재생 음성 특징의 개성을 강조한 음성 합성 데이터베이스 구축을 위한 방법을 제공할 수 있다.

또한, 데이터베이스를 구축하기 위해 특별한 문자를 사용할 필요가 없으므로, 사람들이 일상에서 행하는 대화에 가까운 합성 데이터를 제공할 수 있다.

통신 단말(10)이 개인용 컴퓨터와 같이 고정된 단말인 경우, 중계 장치(20)는 고정된 통신 네트워크의 교환국이 된다. 이 경우, 위치 등록 또는 접속 포인트 조회가 필요하지 않기 때문에, 등록 정보 DB(30)가 없어도 된다. 이 경우, 중계 장치(20)가 프로파일 정보를 기억하도록 해도 된다.

도 1은 본 발명의 실시예에 따른 통신 시스템의 전체 구성을 나타내는 도면이다.

도 2는 본 발명의 실시예에 따른 통신 단말의 기능적인 구성을 나타내는 블록도이다.

도 3은 본 발명의 실시예에 따른 중계 장치의 기능적인 구성을 나타내는 블록도이다.

도 4는 본 발명의 중계 장치 내의 통신 정보 기억 장치에 저장된 데이터의 예를 나타내는 표이다.

도 5는 본 발명의 실시예에 따른 가입 정보 데이터베이스에 저장된 데이터의 예를 나타내는 표이다.

도 6은 본 발명의 실시예에 따른 미디어 처리 장치의 기능적인 구성을 나타내는 블록도이다.

도 7a 및 도 7b는 본 발명의 실시예에 따른 통신 시스템에서 교환되는 정보의 흐름을 나타내는 순차 도표들이다.

도 8은 중계 장치가 수행하는 통신 제어 프로세스를 나타내는 플로차트이다.

도 9는 중계 장치가 수행하는 등록 프로세스의 흐름을 나타내는 플로차트이다.

도 10은 중계 장치가 수행하는 발신측 프로세스(caller process)의 흐름을 나타내는 플로차트이다.

도 11은 중계 장치가 수행하는 수신측 프로세스(receiver process)의 흐름을 나타내는 플로차트이다.

도 12는 중계 장치가 수행하는 사용자 데이터 전송 및 복제 프로세스의 흐름을 나타내는 플로차트이다.

Claims

통신 네트워크에 접속되는 중계 장치;

상기 중계 장치를 통해 상기 통신 네트워크에 접속되며, 음성 데이터를 상기 중계 장치를 거쳐 상대측과 주고 받는 둘 이상의 통신 단말; 및

상기 중계 장치에 접속되는 미디어 처리 장치

를 포함하며,

상기 중계 장치는,

제1 통신 단말로부터 발생한 제1 음성 데이터를 수신하고, 수신한 상기 제1 음성 데이터를 제2 통신 단말로 전송하는 송수신기;

음성 데이터를 복제(duplicate)하는 데이터 듀플리케이터(data duplicator); 및

상기 듀플리케이터로 하여금 상기 송수신기를 통해 상기 제1 통신 단말로부터 수신된 상기 제1 음성 데이터를 복제하도록 하고, 상기 송수신기로 하여금 복제된 음성 데이터를 상기 미디어 처리 장치에 전송하도록 하는 통신 컨트롤러

를 포함하고,

상기 미디어 처리 장치는,

상기 중계 장치로부터 상기 제1 통신 단말의 상기 복제된 음성 데이터를 수신하는 수신기;

상기 수신기에 의해 수신된 음성 데이터를 음성 데이터 기억 장치에 기억시키는 음성 데이터 프로세서;

상기 음성 데이터 기억 장치에 기억된 상기 음성 데이터에 기초하여 상기 제1 통신 단말을 위한 음성 합성 데이터베이스를 작성하는 음성 합성 데이터베이스 생성 장치;

상기 음성 합성 데이터베이스 생성 장치에 의해 생성된 음성 합성 데이터베이스를 기억하는 음성 합성 데이터베이스 기억 장치; 및

음성 합성을 위한 요청이 상기 제1 통신 단말로부터 수신된 경우에 상기 음성 합성 데이터베이스에 기초해서 음성 합성을 실행하는 음성 합성 장치

를 포함하는, 통신 시스템.
제1항에 있어서,

상기 중계 장치는 상기 제1 통신 단말과 상기 제2 통신 단말에 대한 통신 정보를 기억하는 통신 정보 기억 장치를 더 포함하며, 상기 통신 정보에는 상기 제1 통신 단말이 음성 합성 서비스에 가입되어 있는지 여부를 나타내는 서비스 정보가 포함되어 있고,

상기 통신 컨트롤러는, 상기 서비스 정보에 의해 상기 제1 통신 단말이 상기 음성 합성 서비스에 가입되어 있다고 판정되면, 상기 송수신기에 의해 수신된 음성 데이터가 복제되어야 한다고 판정하고, 상기 데이터 듀플리케이터로 하여금 음성 데이터를 복제하도록 하는, 통신 시스템.
제2항에 있어서,

상기 통신 시스템은, 상기 중계 장치에 접속되어, 상기 둘 이상의 통신 단말의 각각에 대한 가입 정보를 저장하기 위한 가입 정보 데이터베이스 장치를 더 포함하며,

상기 통신 정보 기억 장치에 저장된 상기 제1 통신 단말에 대한 상기 통신 정보는, 상기 가입 정보 데이터베이스 장치로부터 다운로드된 정보에 기초해서 작성되는 것인, 통신 시스템.
제2항에 있어서,

상기 중계 장치의 상기 송수신기는, 상기 제2 통신 단말로부터 음성 데이터를 수신하고 수신한 상기 음성 데이터를 상기 제1 통신 단말에 전송하며,

상기 통신 컨트롤러는, 상기 제1 통신 단말과 상기 제2 통신 단말 사이에서 소정 기간 동안 이루어지는 호출(calls)의 횟수가 임계값을 초과하는 경우에, 상기 데이터 듀플리케이터로 하여금 상기 제2 통신 단말로부터 상기 송수신기를 거쳐 수신된 음성 데이터를 복제하도록 하는, 통신 시스템.
제1항에 있어서,

상기 통신 컨트롤러는, 상기 송수신기가 상기 제1 통신 단말로부터 복제의 지시를 수신한 경우에, 상기 데이터 듀플리케이터로 하여금 상기 제1 통신 단말로부터 상기 송수신기를 거쳐 수신된 음성 데이터를 복제하도록 하는, 통신 시스템.
제1항에 있어서,

상기 음성 데이터 프로세서는, 상기 수신기에 의해 수신된 음성 데이터의 부분과 상기 기억된 음성 데이터의 모든 부분이 대응하는지 여부를 판정하는 판정 장치와, 상기 수신된 음성 데이터의 부분에 포함된 잡음량과 상기 기억된 음성 데이터의 대응하는 부분에 포함된 잡음량을 측정하는 잡음 측정 장치를 더 포함하며,

상기 음성 데이터 프로세서는, 상기 수신한 음성 데이터의 부분의 잡음량이 상기 기억된 음성 데이터의 대응하는 부분의 잡음량보다 적은 경우, 상기 기억된 음성 데이터 부분에 상기 수신된 음성 데이터 부분을 덮어쓰기(overwrite)하는, 통신 시스템.
제1항에 있어서,

상기 음성 데이터 프로세서는 상기 음성 데이터에 포함되어 있는 배경 잡음을 제거하는 잡음 필터를 더 포함하며,

상기 음성 데이터 프로세서는 상기 잡음 필터에 의해 잡음이 제거된 후에 상기 음성 데이터를 저장하는, 통신 시스템.
제1항에 있어서,

상기 중계 장치의 상기 송수신기는, 상기 제2 통신 단말로부터 생성된 제2 음성 데이터를 수신하고, 수신한 상기 제2 음성 데이터를 상기 제1 통신 단말에 전 송하며,

상기 통신 컨트롤러는, 상기 데이터 듀플리케이터로 하여금 상기 제1 음성 데이터와 상기 제2 음성 데이터 중의 적어도 하나를 복제하도록 하고, 상기 송수신기로 하여금, 상기 제1 통신 단말 및 상기 제2 통신 단말 중의 하나를 상기 음성 데이터를 생성한 호출측 통신 단말로서 식별하는 식별 정보와 함께 복제한 음성 데이터를, 상기 미디어 처리 장치에 전송하도록 하며,

상기 미디어 처리 장치의 상기 수신기는, 상기 중계 장치로부터 상기 복제한 음성 데이터와 상기 식별 정보를 수신하며,

상기 음성 데이터 프로세서는, 상기 수신기에 의해 수신된 음성 데이터를 상기 식별 정보에 의해 상기 음성 데이터 기억 장치에 기억시키며,

상기 음성 합성 데이터 베이스 생성 장치는, 상기 음성 데이터 기억 장치에 기억된 음성 데이터에 기초하여 상기 호출측 통신 단말에 대한 음성 합성 데이터베이스를 생성하며,

상기 음성 합성 장치는, 상기 식별 정보에 의해 식별된 통신 단말로부터 상기 음성 합성을 위한 요청이 수신되면, 상기 음성 합성 데이터베이스에 기초하여 음성 합성을 실행하는, 통신 시스템.
제8항에 있어서,

상기 중계 장치는, 상기 제1 통신 단말과 상기 제2 통신 단말에 대한 통신 정보를 기억하는 통신 정보 기억 장치를 더 포함하며, 상기 통신 정보에는 상기 제 1 통신 단말과 상기 제2 통신 단말의 각각에 대한 서비스 정보가 포함되며, 상기 서비스 정보는 상기 제1 통신 단말 및 상기 제2 통신 단말이 음성 합성 서비스에 가입되어 있는지 여부를 각각 나타내며,

상기 통신 컨트롤러는, 상기 서비스 정보가 상기 제1 통신 단말이 상기 음성 합성 서비스에 가입된 것을 나타내는 경우, 상기 송수신기에 의해 수신된 상기 제1 음성 데이터가 복제되어야 한다고 판정하고, 상기 데이터 듀플리케이터로 하여금 상기 제1 음성 데이터를 복제하도록 하며, 또한 상기 서비스 정보가 상기 제2 통신 단말이 상기 음성 합성 서비스에 가입된 것을 나타내는 경우, 상기 송수신기에 의해 수신된 상기 제2 음성 데이터가 복제되어야 한다고 판정하고, 상기 데이터 듀플리케이터로 하여금 상기 제2 음성 데이터를 복제하도록 하는, 통신 시스템.
제9항에 있어서,

상기 통신 시스템은, 상기 중계 장치에 접속되어 상기 둘 이상의 통신 단말에 대한 가입 정보를 기억하기 위한 가입 정보 데이터베이스 장치를 더 포함하며,

상기 중계 장치는, 상기 가입 정보 데이터베이스 장치로부터 상기 제1 통신 단말에 대한 서비스 정보를 다운로드해서 상기 통신 정보 기억 장치에 기억시키기 위한 제1 다운로더와, 상기 가입 정보 데이터베이스 장치로부터 상기 제2 통신 단말에 대한 서비스 정보를 다운로드해서 상기 통신 정보 기억 장치에 기억시키기 위한 제2 다운로더를 더 포함하는, 통신 시스템.
제10항에 있어서,

상기 통신 시스템은, 복수의 중계 장치를 포함하는데, 상기 복수의 중계 장치 중에는, 상기 제1 통신 단말에 접속되고 상기 제1 다운로더를 갖는 제1 중계 장치와, 상기 제2 통신 단말에 접속되고 상기 제2 다운로더를 갖는 제2 중계 장치가 포함되며,

상기 제2 중계 장치는 상기 제2 통신 단말에 대한 상기 서비스 정보를 상기 제1 중계 장치에 전송하는 전송 장치를 더 포함하며,

상기 제1 중계 장치는, 상기 제1 다운로더에 의해 다운로드된 상기 제1 통신 단말에 대한 상기 서비스 정보와, 상기 제2 중계 장치로부터 전송된 상기 제2 통신 단말에 대한 상기 서비스 정보를 상기 통신 정보 기억 장치에 저장하는, 통신 시스템.
통신 네트워크에 접속되는 중계 장치 및 하나의 통신 단말로부터 다른 통신 단말로 데이터를 중계하기 위한 상기 중계 장치를 통해 상기 통신 네트워크에 접속되는 둘 이상의 통신 단말을 포함하는 통신 시스템에서 사용되는 중계 장치로서,

제1 통신 단말로부터 음성 데이터를 수신하고, 수신한 상기 음성 데이터를 제2 통신 단말로 전송하는 송수신기;

음성 데이터를 복제하는 데이터 듀플리케이터; 및

상기 데이터 듀플리케이터로 하여금 상기 송수신기를 통해 상기 제1 통신 단말로부터 수신된 음성 데이터를 복제하도록 하고, 상기 송수신기로 하여금 복제된 음성 데이터를 미디어 처리 장치에 전송하도록 하는 통신 컨트롤러

를 포함하고,

상기 미디어 처리 장치는 상기 복제된 음성 데이터를 저장하고 음성 합성 데이터베이스를 생성하는, 중계 장치.
통신 네트워크에 접속되는 중계 장치와, 하나의 통신 단말로부터 다른 통신 단말로 데이터를 중계하기 위한 상기 중계 장치를 통해 상기 통신 네트워크에 접속되는 둘 이상의 통신 단말을 포함하는 통신 시스템에서 상기 중계 장치에서 사용하기 위한 중계 방법으로서,

제1 통신 단말로부터 음성 데이터를 수신하고 수신한 상기 음성 데이터를 제2 통신 단말에 전송하는 제1 단계;

상기 제1 단계에서 수신된 상기 음성 데이터를 복제하는 제2 단계;

복제된 상기 음성 데이터를 저장하고, 음성 합성 데이터베이스를 생성하는 미디어 처리 장치에 복제된 상기 음성 데이터를 전송하는 제3 단계

를 포함하는 중계 방법.