JP2005079852A - 翻訳通信システム及び通信端末装置 - Google Patents

Abstract

【課題】 通話の途中であってもその通話を継続したまま、原語と翻訳された言語のいずれにも切替えることができる翻訳通信システム及び通信端末装置を提供する。
【解決手段】 第１及び第２のタイムスロットを用いて通信行なう第１の通信端末装置８と、第１の通信端末装置と第２の通信端末装置８間を相互に接続する通信網４内に配置され、音声原語を翻訳して翻訳合成音声データを出力する音声翻訳装置６を備え、第１の通信端末装置は、原語の音声データを第１のタイムスロットにより第２の通信端末装置に送信すると共に、同一の音声データを第２のタイムスロットにより第２の通信端末装置を特定する相手先情報を付加して音声翻訳装置に送信し、音声翻訳装置は受信した原語の音声データを翻訳し相手先情報により特定された第２の通信端末装置に翻訳合成音声データを送信するようにした。
【選択図】 図１

Description

本発明は、通信端末装置による相互の通信において、それぞれの通信端末装置から送信される音声を通信網内の音声翻訳装置が翻訳したものを相手先の通信端末装置が受信するようにした翻訳通信システム、及びこの翻訳通信システムに用いられる通信端末装置に関するものである。

従来、親機に接続された翻訳センターと複数の子機を用いて同時通訳を行なうシステムがあった（特許文献１参照）。また、送信側の通信端末装置から送信した音声データを通信網内に配置される音声翻訳装置を経由させるようにしたことにより、受信側の通信端末装置のユーザーが翻訳された合成音声を聞けるようにした翻訳通信システムがあった。
特開平４−１８５１５６号公報

しかしながら、背景技術に記載されているような翻訳通信システムでは、翻訳された合成音声を聞くように設定した場合に、この設定を通話の途中で変更することができないという問題があった。例えば、通話の途中で一方の通信端末装置の話者が交代したことにより、翻訳された合成音声ではなく元の原語で会話したいような場合であっても、元に戻すことができないため、通話を一度切断してから音声翻訳装置を経由しない設定で電話を掛け直す必要があった。

そこで本発明は、上記問題点に鑑みて、通話の途中であってもその通話を継続したまま、原語と翻訳された言語のいずれにも切替えることができる翻訳通信システム及び通信端末装置を提供することを課題とするものである。

上記課題を解決するために、本発明による翻訳通信システムは、
第１及び第２のタイムスロットを用いて通信を行なう第１の通信端末装置と、
前記第１の通信端末装置と第２の通信端末装置間を相互に接続する通信網内に配置され、音声原語を翻訳して翻訳文字データ又は翻訳合成音声データを出力する音声翻訳装置を備え、
前記第１の通信端末装置は、原語の音声データを第１のタイムスロットにより通信の相手先の第２の通信端末装置に送信すると共に、同一の音声データを第２のタイムスロットにより第２の通信端末装置を特定する相手先情報を付加して前記音声翻訳装置に送信し、音声翻訳装置は第２のタイムスロットにより受信した原語の音声データを翻訳し前記相手先情報により特定された第２の通信端末装置に翻訳文字データ又は翻訳合成音声データを送信することを特徴とするものである。

また、本発明による翻訳通信システムは、
前記第１の通信端末装置は、前記第２の通信端末装置との接続確立後の所定時間内に同一の遅延時間測定メッセージを第１のタイムスロットにより第２の通信端末装置と、第２のタイムスロットにより第２の通信端末装置を特定する相手先情報を付加して前記音声翻訳装置とに同時に送信し、第２の通信端末は第１及び第２のタイムスロットにより相手先の通信端末装置から遅延時間測定メッセージを受信した場合にその到着時間差を算出する遅延時間測定部と、原語の音声データを一時保管するデータバッファ部を備え、
前記音声翻訳装置は、前記第１の通信端末装置から前記遅延時間測定メッセージを受信した場合にはこの遅延時間測定メッセージに平均翻訳遅延時間の情報を付加するように動作して、
前記第２の通信端末装置が、第１のタイムスロットにより前記原語の音声データを受信した場合に、これを前記到着時間差と前記平均翻訳遅延時間との合計時間だけ前記データバッファ部に一時保管するようにすることができる。

また、本発明による翻訳通信システムは、前記第１の通信端末装置及び／又は第２の通信端末装置を、無線通信端末装置とすることができる。

また、本発明による通信端末装置は、
複数のタイムスロットを用いて通信を行なう通信端末装置であって、
通信の相手先の通信端末装置との接続確立後の所定時間内に同一の遅延時間測定メッセージを同時に第１のタイムスロットにより相手先の通信端末装置に、第２のタイムスロットにより相手先の通信端末装置を特定する相手先情報を付加して通信網内の音声翻訳装置に送信すると共に、第３のタイムスロットにより相手先の通信端末装置から送信される遅延時間測定メッセージを受信し、第４のタイムスロットにより音声翻訳装置から送信される平均翻訳遅延時間の情報が付加された遅延時間測定メッセージを受信した場合にその到着時間差を算出する遅延時間測定部と、
翻訳文字データ又は翻訳合成音声データを一時保管するデータバッファ部と、
第３のタイムスロットにより音声データを受信した場合に、これを前記到着時間差と前記平均翻訳遅延時間との合計時間だけ前記データバッファ部に一時保管する制御を行なう制御部を備えることを特徴とするものである。

また、本発明による通信端末装置は、無線通信端末装置とすることができる。

本発明の翻訳通信システム及び通信端末装置によれば、通信端末装置のユーザーは通話の途中であってもその通話を継続したまま、原語と翻訳された言語のいずれにも切替えることができる。

以下、本発明に係る翻訳通信システムの実施の形態について、図面に基づいて具体的に説明する。

図１ないし図３は、本発明の一実施の形態に係る翻訳通信システムについて説明するために参照する図である。

図１に示すように、本実施の形態に係る翻訳通信システムには、複数の基地局２を含む有線の通信網４内に音声翻訳装置６が配置されている。そして、通信端末装置に相当する複数の簡易型携帯電話機８（ＰＨＳ：Ｐｅｒｓｏｎａｌ Ｈａｎｄｙ ｐｈｏｎｅ Ｓｙｓｔｅｍ）のそれぞれは、最も電波状況のよい基地局２と無線による送受信を行なうようになっている。

各基地局２は、隣り合う基地局２との混信を防止するため、隣り合う基地局２と互いに異なる特定の周波数で簡易型携帯電話機８との送受信を行なうようになっている。また、１つの基地局２が、特定の周波数を１つだけではなく２つ以上の異なる特定の周波数を用いているような場合でも、これらは隣り合う他の基地局２が用いる周波数とは相互に異なるようになっている。

そして、基地局２と簡易型携帯電話機８との間の送受信は、デジタル方式の時分割多元接続方式（ＴＤＭＡ方式）で行なわれるようになっており、特に送信と受信の両方を同一の周波数で行なう時分割二重化方式（ＴＤＤ方式）が採用されている。

すなわち、基地局２は、１つの周波数に複数のチャンネル（回線）を割当てることができるようにするために、所定の時間長さの送受信タイムフレームを、その周波数に割当てるチャンネル数のタイムスロット（期間）に等分するようになっている。ＰＨＳシステムでは、送受信それぞれ４スロットとなるように等分される。各送受信タイムフレームは、その前半の部分が各チャンネルにおける基地局２から簡易型携帯電話機８への送信スロットに割当てられ、後半の部分が簡易型携帯電話機８から基地局２への受信スロットに割当てられるようになっている。

一方、簡易型携帯電話機８は、音声データ等の信号を基地局２へ送信するときには、送受信タイムフレーム分の時間長さごとに、その音声等の情報を時間圧縮して、これを１つのタイムスロットに押し込んで送信することにより、基地局２がその簡易型携帯電話機８との送受信に用いるチャンネルに対応するタイムスロットの受信時間で受信することができるようになっている。逆に、簡易型携帯電話機８が基地局２から受信した場合には、そのチャンネルに対応するタイムスロットの送信時間に押し込まれている信号を送受信タイムフレーム分の時間長さに伸長するようになっている。

そして、本実施の形態に係る翻訳通信システムは、送受信をそれぞれ２つのタイムスロットを用いて２チャンネルで行なうようになっている。例えば、簡易型携帯電話機８が送信に用いる２つのタイムスロットのうち、その一方を第１のタイムスロット、他方を第２のタイムスロットということにする。

２つのチャンネルは、１つの基地局２における同一の周波数に存在することもあるし、異なる周波数に存在する場合もある。また、この２つのチャンネルは、それぞれが異なる基地局２で送受信されていることもある。

図１に示すように、２つの簡易型携帯電話機８の間で行なわれる通話は、第１のタイムスロット及び第２のタイムスロットの２つが用いられ、相互に、いずれか一方の簡易型携帯電話機８からユーザーの発した原語の音声データは、第１のタイムスロットにより相手先である他方の簡易型携帯電話機８に送信されるようになっている（図１中、破線矢印Ａの経路）。

また、これらの簡易型携帯電話機８は、それぞれ第１のタイムスロットにより送信される音声データと同一の音声データに相手先の簡易型携帯電話機８を特定するための相手先情報を付加して、第２のタイムスロットにより通信網の音声翻訳装置６に送信するようになっている（図１中、破線矢印Ｂ又はＣの経路）。音声データに付加される相手先情報としては、相手先の簡易型携帯電話機８の電話番号等が用いられる。

音声翻訳装置６は、第２のタイムスロットにより、原語の音声データと相手先情報を受信すると、まず、原語の音声データを音声認識してこれを原語の文字データに変換する。次に、この原語の文字データを自動翻訳して翻訳文字データを作成した後、この翻訳文字データに基づいて合成音声による翻訳合成音声データを作成する。そして、音声翻訳装置６は、第２のタイムスロットにより、作成した翻訳音声データを相手先情報により特定される簡易型携帯電話機８に送信するようになっている（図１中、破線矢印Ｃ又はＢの経路）。

したがって、相手先の簡易型携帯電話機８では、第１のタイムスロットにより原語の音声データを受信し、第２のタイムスロットにより翻訳音声データを受信するようになっており、これらは、ユーザーの操作によりいずれかが選択されて、スピーカーから出力させることができるようになっている。

また、音声翻訳装置６は、後述するように、２つの簡易型携帯電話機８の間に通信が確立した後の所定時間内に、両方の簡易型携帯電話機８から別々に相手先情報が付加された、後述する遅延測定メッセージを受信するようになっている。音声翻訳装置６は、この遅延測定メッセージを受信した場合には、音声認識や翻訳の動作は行なわずに、予め定められている平均翻訳遅延時間の情報を遅延測定メッセージのデータに付加した後、その遅延測定メッセージの相手先情報に基づいて、この遅延測定メッセージを送信した方の簡易型携帯電話機８とは他方の簡易型携帯電話機８に送信するようになっている。

次に、図２は、本実施の形態に係る簡易型携帯電話機８の回路構成を示すブロック図である。簡易型携帯電話機８は、従来の一般的な簡易型携帯電話機と同様に、無線による通信を行なう通信部１０、操作部１２、ＬＣＤ（液晶ディスプレイ）等の表示部１４、スピーカー１６、マイクロホン１８及びこれらを制御する制御部２０を備えている。通信部１０、操作部１２、表示部１４、スピーカー１６及びマイクロホン１８については、従来の一般的な簡易型携帯電話機と同様に動作するものであるため、その説明は省略する。

また、本実施の形態に係る簡易型携帯電話機８には、従来の一般的な簡易型携帯電話機と異なり、通信部１０と制御部２０との間に遅延時間測定部２２が並列に設けられ、スピーカー１６と制御部２０との間にはデータバッファ部２４が設けられている。

遅延時間測定部２２は、相手先の簡易型携帯電話機８との通話を開始する際において、自機と相手先の簡易型携帯電話機８の間に通信が接続確立した後であって、音声データの送受信を行なう前の所定時間内に、以下に説明するように、相互に遅延測定メッセージを送受信するようになっている。

ここで、図３に示すように、特に発呼の動作を行なう方の簡易型携帯電話機８の符号を「８ａ」で表し、着呼の動作を行なう方の簡易型携帯電話機８の符号を「８ｂ」で表すこととする。

簡易型携帯電話機８の遅延時間測定部２２は、自機が発呼の動作を行なった方の簡易型携帯電話機８ａである場合には、相手先の簡易型携帯電話機８ｂとの通信が接続確立すると、通信部１０を介して第１及び第２のタイムスロットにより同一の遅延時間測定メッセージを同時に送信するようになっている。第１のタイムスロットによる遅延時間測定メッセージは、音声翻訳装置６を経由せずに相手先の簡易型携帯電話機８ｂに送信され、第２のタイムスロットによる遅延時間測定メッセージは、音声翻訳装置６を経由して相手先の簡易型携帯電話機８ｂに送信されるようになっている。

また、発呼の動作を行なった方の簡易型携帯電話機８ａの遅延時間測定部２２は、相手先である着呼した方の簡易型携帯電話機８ｂから送信される同一の遅延時間測定メッセージを、第３及び第４のタイムスロットのそれぞれによって受信するようになっており、これらの到着時間差を算出すると共に、この到着時間差、及び第４のタイムスロットにより受信した遅延時間測定メッセージに付加されている平均翻訳遅延時間の情報を、制御部２０に出力するようになっている。

一方、自機が着呼した方の簡易型携帯電話機８ｂである場合には、その遅延時間測定部２２は、発呼の動作を行なった方の簡易型携帯電話機８ａと同様に、第１及び第２のタイムスロットにより同一の遅延時間測定メッセージを受信すると、これらの到着時間差を算出して、この到着時間差及び平均翻訳遅延時間の情報を制御部２０に出力すると共に、発呼の動作を行なった方の簡易型携帯電話機８ａに対して、第３及び第４のタイムスロットにより同一の遅延時間測定メッセージを同時に送信するようになっている。

次に、発呼の動作を行なった方の簡易型携帯電話機８ａ、及び着呼した方の簡易型携帯電話機８ｂのいずれの制御部２０も、遅延時間測定部２２から受信した到着時間差と平均翻訳遅延時間に基づき、その合計時間を算出するようになっている。

そして、制御部２０は、第１のタイムスロットにより受信した原語の音声データをスピーカー１６で音声出力させる場合には、この原語の音声データを到着時間差と平均翻訳遅延時間の合計時間だけデータバッファ部２４に一時保管してから出力するように制御するようになっている。

このため、第１のタイムスロットにより受信した原語の音声データをスピーカー１６で出力している状態から、第２のタイムスロットにより受信した翻訳合成音声データを出力するように切替る操作を行なったとき、或いは、逆に切替る操作を行なったときに、会話の内容が同期して整合性を保つことができるようになっている。

次に、図３に基づいて、発呼側の簡易型携帯電話機８ａ、着呼側の簡易型携帯電話機８ｂ及び翻訳装置６の動作について説明する。発呼側の簡易型携帯電話機８ａのユーザーが、相手先である着呼側の簡易型携帯電話機８ｂに対して発呼の操作を行なうと、簡易型携帯電話機８ａの通信部１０は、第１のタイムスロット（図３中、矢印ａ，ｂ，ｃ）及び第２のタイムスロット（図３中、矢印ｄ，ｅ，ｆ，ｇ）を用いて相手先である着呼側の簡易型携帯電話機８ｂを呼び出すようになっている。

発呼側の簡易型携帯電話機８ａと着呼側の簡易型携帯電話機８ｂの相互の通信接続が確立すると、発呼側の簡易型携帯電話機８ａの遅延時間測定部は、第１及び第２のタイムスロットにより同一の遅延測定メッセージを同時に送信する（図３中、矢印ｈ，ｋ）。第１のタイムスロットによる遅延測定メッセージは、音声翻訳装置６を経由せずに着呼側の簡易型携帯電話機８ｂに届く（図３中、矢印ｈ，ｉ，ｊ）。第２のタイムスロットによる遅延測定メッセージは、音声翻訳装置を経由することにより平均翻訳遅延時間の情報が付されて着呼側の簡易型携帯電話機８ｂに届く（図３中、矢印ｋ，ｌ，ｍ，ｎ）。

着呼側の簡易型携帯電話機８ｂは、その遅延時間測定部２２が遅延測定メッセージの到着時間差を算出して制御部２０に出力すると共に、発呼側の簡易型携帯電話機８ａに対して、第３及び第４のタイムスロットにより同一の遅延測定メッセージを同時に送信する（図３中、矢印ｐ，ｓ）。第３のタイムスロットによる遅延測定メッセージは、音声翻訳装置６を経由せずに発呼側の簡易型携帯電話機８ａに届く（図３中、矢印ｐ，ｑ，ｒ）。第４のタイムスロットによる遅延測定メッセージは、音声翻訳装置６を経由することにより平均翻訳遅延時間の情報が付されて発呼側の簡易型携帯電話機８ａに届く（図３中、矢印ｓ，ｔ，ｕ，ｖ）。

発呼側の簡易型携帯電話機８ａは、着呼側の簡易型携帯電話機８ｂと同様に、その遅延時間測定部２２が遅延測定メッセージの到着時間差を算出して制御部２０に出力する。

このような遅延測定メッセージの相互の送受信は、発呼側の簡易型携帯電話機８ａと着呼側の簡易型携帯電話機８ｂとの間に通信が接続確立した後であって、音声データの送受信を行なう前の所定時間内に行なわれる。そして、所定時間の経過後においては、発呼側の簡易型携帯電話機８ａ及び着呼側の簡易型携帯電話機８ｂは、相互に第１及び第３のタイムスロットにより原語の音声データの送受信を行なうと共に、第２及び第４のタイムスロットにより原語の音声データを送信して翻訳合成音声データを受信するようになる。

そして、発呼側の簡易型携帯電話機８ａ及び着呼側の簡易型携帯電話機８ｂのいずれも、原語の音声データ又は翻訳合成音声データのいずれかを選択してスピーカー１６から出力させることができる。原語の音声データを出力させるようにする場合には、制御部２０が遅延測定メッセージの到着時間差及び平均翻訳遅延時間の合計時間だけデータバッファ部２４に一時保管してからスピーカー１６に出力させるので、原語の音声データを出力している状態から翻訳合成音声データを出力させるように切替る操作を行なったとき、或いは、逆に切替る操作を行なったときでも、会話の内容が同期して整合性を保つことができるようになっている。

このような翻訳通信システム及び簡易型携帯電話機８によれば、通話の途中であってもその通話を継続したまま、原語と翻訳された言語のいずれにも切替えることができる。

また、原語と翻訳された言語は、いずれも切替えたときに会話の内容が同期してスピーカーから出力されるので、通話の途中で原語と翻訳された言語を切替えた場合でも、会話の内容に整合性を保つことができる。

なお、本実施の形態に係る翻訳通信システム及び通信端末装置においては、原語の音声データ又は翻訳合成音声データのいずれかを選択操作してスピーカー１６から出力させるようになっているが、簡易型携帯電話機８のスピーカー１６を２つ設けて両方を同時に出力するようにしてもよい。

また、本実施の形態に係る翻訳通信システム及び通信端末装置おいては、音声翻訳装置６が原語の音声データに基づいて翻訳合成音声データを送信し、これを受信した簡易型携帯電話機８がスピーカーにより出力するようになっているが、音声翻訳装置６が原語の音声データに基づいて翻訳文字データを出力して、これを受信した簡易型携帯電話機８がその表示部１４に出力するようになっていてもよい。

また、本実施の形態に係る翻訳通信システム及び通信端末装置においては、通信端末装置として、時分割多元接続方式であって基地局との間の送信と受信の両方を同じ周波数で行なう時分割二重化方式（ＴＤＤ方式）を用いる簡易型携帯電話機に本発明を適用したが、本実施の形態と同様に時分割多元接続方式であって、基地局との送信と受信を異なる周波数で行なう周波数分割二重化方式（ＦＤＤ方式）を用いる携帯電話機や、ＩＳＤＮ（Ｉｎｔｅｇｒａｔｅｄ Ｓｅｒｖｉｃｅｓ Ｄｉｇｉｔａｌ Ｎｅｔｗｏｒｋ）のようなデジタル方式の有線の通信回線に接続される電話機等の通信端末装置に本発明を適用しても良い。

本発明の一実施の形態に係る翻訳通信システムを示す構成図である。 図１に示す簡易型携帯電話機８の回路構成を示すブロック図である。 簡易型携帯電話機８ａ，８ｂが、到着時間差及び平均翻訳遅延時間の合計時間を算出するまでの手順を示すタイムチャート図である。

符号の説明

２ 基地局
４ 通信網
６ 音声翻訳装置
８，８ａ，８ｂ 簡易型携帯電話機
１０ 通信部
１２ 操作部
１４ 表示部
１６ スピーカー
１８ マイクロホン
２０ 制御部
２２ 遅延時間測定部
２４ データバッファ部

Claims (5)

1. 第１及び第２のタイムスロットを用いて通信を行なう第１の通信端末装置と、
   前記第１の通信端末装置と第２の通信端末装置間を相互に接続する通信網内に配置され、音声原語を翻訳して翻訳文字データ又は翻訳合成音声データを出力する音声翻訳装置を備え、
   前記第１の通信端末装置は、原語の音声データを第１のタイムスロットにより通信の相手先の第２の通信端末装置に送信すると共に、同一の音声データを第２のタイムスロットにより第２の通信端末装置を特定する相手先情報を付加して前記音声翻訳装置に送信し、音声翻訳装置は第２のタイムスロットにより受信した原語の音声データを翻訳し前記相手先情報により特定された第２の通信端末装置に翻訳文字データ又は翻訳合成音声データを送信する
   ことを特徴とする翻訳通信システム。
2. 前記第１の通信端末装置は、前記第２の通信端末装置との接続確立後の所定時間内に同一の遅延時間測定メッセージを第１のタイムスロットにより第２の通信端末装置と、第２のタイムスロットにより第２の通信端末装置を特定する相手先情報を付加して前記音声翻訳装置とに同時に送信し、第２の通信端末は第１及び第２のタイムスロットにより相手先の通信端末装置から遅延時間測定メッセージを受信した場合にその到着時間差を算出する遅延時間測定部と、原語の音声データを一時保管するデータバッファ部を備え、
   前記音声翻訳装置は、前記第１の通信端末装置から前記遅延時間測定メッセージを受信した場合にはこの遅延時間測定メッセージに平均翻訳遅延時間の情報を付加するように動作して、
   前記第２の通信端末装置が、第１のタイムスロットにより前記原語の音声データを受信した場合に、これを前記到着時間差と前記平均翻訳遅延時間との合計時間だけ前記データバッファ部に一時保管するようにした請求項１に記載の翻訳通信システム。
3. 前記第１の通信端末装置及び／又は第２の通信端末装置は、無線通信端末装置である請求項１又は請求項２に記載の翻訳通信システム。
4. 複数のタイムスロットを用いて通信を行なう通信端末装置であって、
   通信の相手先の通信端末装置との接続確立後の所定時間内に同一の遅延時間測定メッセージを同時に第１のタイムスロットにより相手先の通信端末装置に、第２のタイムスロットにより相手先の通信端末装置を特定する相手先情報を付加して通信網内の音声翻訳装置に送信すると共に、第３のタイムスロットにより相手先の通信端末装置から送信される遅延時間測定メッセージを受信し、第４のタイムスロットにより音声翻訳装置から送信される平均翻訳遅延時間の情報が付加された遅延時間測定メッセージを受信した場合にその到着時間差を算出する遅延時間測定部と、
   翻訳文字データ又は翻訳合成音声データを一時保管するデータバッファ部と、
   第３のタイムスロットにより音声データを受信した場合に、これを前記到着時間差と前記平均翻訳遅延時間との合計時間だけ前記データバッファ部に一時保管する制御を行なう制御部を備える
   ことを特徴とする通信端末装置。
5. 無線通信端末装置である請求項４に記載の通信端末装置。
   

Images