JP2000004304A

JP2000004304A - 異なる手段での会話が可能な通話装置

Info

Publication number: JP2000004304A
Application number: JP18327798A
Authority: JP
Inventors: Katsumi Nakanishi; 克美中西
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 1998-06-16
Filing date: 1998-06-16
Publication date: 2000-01-07

Abstract

(57)【要約】【課題】音声と文字との異なる会話手段によって会話
することができる通話装置を提供する。【解決手段】通話装置に、入力された音声信号を音声
情報として圧縮符号化し伝送する手段12と、この音声信
号を音声認識によって文字情報に変換し、その文字情報
をデータ多重伝送する手段13、14とを設ける。音声情報
を音声としてだけでなく文字情報としても送信すること
ができ、音声での会話のみが可能な（目が見えない）人
が、音声を使って、文字での会話のみが可能な（耳が聞
こえない）相手と文字で通話することができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、テレビ電話装置や
パソコン通信装置などの通話装置に関し、特に、医療・
福祉用途に適用して、目が見えない人や耳が聞こえない
人、発声できない人の間の会話を支援するものである。

【０００２】

【従来の技術】従来、テレビ電話では音声・映像による
会話が可能であり、また、パソコン通信では、チャット
等の文字による会話を行なうことができる。

【０００３】従来のテレビ電話装置やパソコン通信装置
は、図６に示すように、マイクロフォンなどから成る音
声入力手段71と、入力した音声信号を圧縮符号化する音
声圧縮符号化手段77と、圧縮符号化されている音声信号
を伸長復号化する音声伸長復号化手段78と、スピーカな
どから成る音声出力手段72と、ビデオカメラから成る映
像入力手段73と、映像信号を圧縮符号化する映像圧縮符
号化手段79と、圧縮符号化されている映像信号を伸長復
号化する映像伸長復号化手段80と、テレビモニタから成
る映像出力手段74と、キーボードなどから成る文字入力
手段75と、文字情報をデータ圧縮する文字情報圧縮手段
81と、文字情報の圧縮データを伸長する文字情報伸長手
段82と、ディスプレイなどの文字出力手段76と、音声圧
縮符号化データ、文字情報圧縮データ及び映像圧縮符号
化データの多重・分離を行なうデータ多重分離伝送手段
83と、ネットワーク回線への接続や、映像や音声、デー
タ等の符号化モードなどの制御を行なう通信回線接続手
段84とを備えている。

【０００４】この装置では、音声入力手段71から入力さ
れた音声や、文字入力手段75から入力された文字など
が、圧縮処理され、ネットワーク回線を通じて相手装置
に伝送され、また、相手装置から送られて来た文字情報
や音声情報が、伸長処理されて文字出力手段76や音声出
力手段72から出力され、音声や文字による会話が行なわ
れる。

【０００５】

【発明が解決しようとする課題】しかし、従来のテレビ
電話装置やパソコン通信装置では、入力された音声が相
手装置に音声で出力され、入力された文字が相手装置に
文字で表示されるため、これらの装置を医療・福祉分野
で利用した場合に、目の見えない人や耳の聞こえない
人、発声できない人が相互の間で交わす会話を十分にサ
ポートすることができないという問題点がある。

【０００６】つまり、これらの装置を利用して、音声に
よる会話はできないが文字による会話は可能である人同
志が文字を通じて会話したり、あるいは、文字による会
話はできないが音声による会話は可能である人同志が、
音声を通じて会話することはできるが、これらの装置を
使っても、文字による会話だけが可能である人と音声に
よる会話だけが可能である人とが会話することはできな
い。

【０００７】本発明は、こうした従来の問題点を解決す
るものであり、音声と文字と言うように、異なる会話手
段によって会話することができる通話装置を提供するこ
とを目的としている。

【０００８】

【課題を解決するための手段】そこで、本発明の通話装
置では、入力された音声信号を音声認識処理によって文
字情報データに変換して送信し、受信した文字情報デー
タを音声合成処理によって音声信号に変換して出力し、
あるいは、入力された文字情報データを音声合成処理に
よって音声信号に変換して圧縮伝送し、受信した音声信
号を音声認識によって文字情報データに変換して出力し
ている。

【０００９】そのため、これまでの双方向とも音声によ
る会話、あるいは双方向とも文字による会話だけでな
く、一方は音声で、他方は文字で、と言う異なる会話手
段での通話が可能になる。

【００１０】

【発明の実施の形態】本発明の請求項１に記載の発明
は、通話装置に、入力された音声信号を音声情報として
圧縮符号化し伝送する手段と、この音声信号を音声認識
によって文字情報に変換し、その文字情報をデータ多重
伝送する手段とを設けたものであり、音声情報を、音声
としてだけでなく文字情報としても送信することができ
る。そのため、音声での会話のみが可能な（目が見えな
い）人が、音声を使って、文字での会話のみが可能な
（耳が聞こえない）相手と文字で通話することができ
る。また、送信を文字情報だけにした場合には、音声デ
ータを送る場合に比べて、伝送データ量を小さくするこ
とができる。

【００１１】また、請求項２に記載の発明は、通話装置
に、入力された文字情報をデータ多重伝送する手段と、
この文字情報を音声合成によって音声信号に変換し、信
号圧縮して伝送する手段とを設けたものであり、文字情
報を、文字としてだけでなく音声としても送信すること
ができる。そのため、文字での会話のみが可能な（発声
できない）人が、文字を使って、音声での会話のみが可
能な（目が見えない）相手と音声で通話することができ
る。

【００１２】また、請求項３に記載の発明は、通話装置
に、受信した音声圧縮信号を伸長復号化し出力する手段
と、出力する音声信号を音声認識によって文字情報に変
換し、その文字情報を表示する手段とを設けたものであ
り、送られて来た音声情報を、音声だけでなく文字情報
としても出力することができる。そのため、文字での会
話のみが可能な（耳が聞こえない）人が、文字を使っ
て、音声での会話のみが可能な（目が見えない）相手と
音声で通話することができる。

【００１３】また、請求項４に記載の発明は、通話装置
に、受信したデータのうち文字情報を分離し、表示する
手段と、その文字情報を音声合成によって音声信号に変
換し、出力する手段とを設けたものであり、送られて来
た文字情報を、文字としてだけでなく音声でも出力する
ことができる。そのため、音声での会話のみが可能な
（目が見えない）人が、音声を使って、文字での会話の
みが可能な（発声できない）相手と文字で通話すること
ができる。

【００１４】また、請求項５に記載の発明は、通話装置
に、入力された音声信号を音声情報として圧縮符号化し
伝送する手段と、この音声信号を音声認識によって文字
情報に変換し、その文字情報をデータ多重伝送する手段
と、入力された文字情報をデータ多重伝送する手段と、
この文字情報を音声合成によって音声信号に変換し、信
号圧縮して伝送する手段と、受信した音声圧縮信号を伸
長復号化し出力する手段と、出力する音声信号を音声認
識によって文字情報に変換し、その文字情報を画面表示
する手段と、受信したデータのうち文字情報を分離し、
画面表示する手段と、その文字情報を音声合成によって
音声信号に変換し、出力する手段とを設けたものであ
り、請求項１、請求項２、請求項３及び請求項４の装置
の機能を併せ持つことができる。そのため、音声での会
話のみが可能な（目が見えない）人が音声を使って、文
字での会話のみが可能な（耳が聞こえない、発声できな
い）相手と文字で通話することができたり、文字での会
話のみが可能な（発声できない、耳が聞こえない）人が
文字を使って、音声での会話のみが可能な（目が見えな
い）相手と音声で通話することができる。

【００１５】以下、本発明の実施の形態について、図１
から図５を用いて説明する。

【００１６】（第１の実施形態）第１の実施形態の通話
装置は、入力された音声信号を、音声及び文字情報とし
て送信することができる。

【００１７】この装置は、図１に示すように、収音した
アナログ音声信号をデジタル音声信号に変換する音声入
力手段11と、変換されたデジタル音声信号を相手側通話
装置が復号可能な音声符号化方式で音声圧縮符号化する
音声圧縮符号化手段12と、音声入力手段11から入力した
デジタル音声信号を相手側通話装置が翻訳及び表示可能
な言語の文字情報に変換する音声認識手段13と、変換さ
れた文字情報を相手側通話装置が復号化可能なデータ符
号化方式でデータ圧縮符号化する文字情報圧縮手段14
と、音声圧縮符号化手段12から出力された音声圧縮符号
化データ及び文字情報圧縮手段14から出力された文字情
報圧縮データを相手側通話装置が分離可能な多重化伝送
方式でデータ多重化するデータ多重伝送（送信）手段15
とを備えている。

【００１８】この音声入力手段11は、マイクロフォン、
ミキサー及びＡＤ変換器などで構成され、また、音声圧
縮符号化手段12、音声認識手段13、文字情報圧縮手段14
及びデータ多重伝送（送信）手段15は、デジタルシグナ
ルプロセッサやマイクロプロセッサ、メモリなどで構成
される。

【００１９】この装置に入力した音声信号は、音声圧縮
符号化手段12により音声情報として圧縮符号化され、同
時に、音声認識手段13及び文字情報圧縮手段14により、
データ圧縮された文字情報に変換される。そして、これ
らの圧縮符号化された音声情報とデータ圧縮された文字
情報とは、同時に、あるいは、使用者の選択によってそ
の一方だけが、送信手段を通じて相手方に送信される。

【００２０】従って、音声での会話のみが可能な（目が
見えない）人と文字での会話のみが可能な（耳が聞こえ
ない）人とが通話する場合、音声での会話のみが可能な
（目が見えない）人が、この装置から音声でメッセージ
を入力すると、文字での会話のみが可能な（耳が聞こえ
ない）相手方は、そのメッセージを文字情報として受け
取ることができる。

【００２１】また、この装置により、音声情報を文字情
報に変換し、文字情報としてだけ送信する場合には、音
声データを送る場合に比べて、伝送データ量を小さくす
ることができる。

【００２２】（第２の実施形態）第２の実施形態の通話
装置は、入力された文字情報を、文字情報及び音声情報
として送信することができる。

【００２３】この装置は、図２に示すように、キーボー
ドなどから成る、文字情報を入力する文字入力手段21
と、ディスプレイやモニタから成る、文字を表示する文
字表示手段22と、入力された文字情報を相手側通話装置
が復号化可能なデータ符号化方式でデータ圧縮符号化す
る文字情報圧縮手段23と、入力された文字情報を聞き取
り可能な言語のデジタル音声信号に変換する音声合成手
段24と、変換されたデジタル音声信号を相手側通話装置
が復号可能な音声符号化方式で音声圧縮符号化する音声
圧縮符号化手段25と、文字情報圧縮手段23から出力され
た文字情報圧縮データ及び音声圧縮符号化手段25から出
力された音声圧縮符号化データを相手側通話装置が分離
可能な多重化伝送方式でデータ多重化するデータ多重伝
送（送信）手段26とを備えている。

【００２４】この文字情報圧縮手段23、音声合成手段2
4、音声圧縮符号化手段25及びデータ多重伝送（送信）
手段26は、デジタルシグナルプロセッサやマイクロプロ
セッサ、メモリなどから構成される。

【００２５】この装置では、使用者が文字入力手段21か
ら文字を入力すると、この文字が文字表示手段22に表示
され、また、文字情報圧縮手段23により、データ圧縮さ
れた文字情報に変換される。同時に、入力された文字情
報は、音声合成手段24で音声合成された後、音声圧縮符
号化手段25で圧縮符号化された音声情報に変換される。
そして、これらのデータ圧縮された文字情報と圧縮符号
化された音声情報とは、同時に、あるいは、使用者の選
択によってその一方だけが、送信手段を通じて相手方に
送信される。

【００２６】従って、文字での会話のみが可能な（耳が
聞こえない）人と音声での会話のみが可能な（目が見え
ない）人とが通話する場合、文字での会話のみが可能な
（耳が聞こえない）人が、この装置から文字でメッセー
ジを入力すると、音声での会話のみが可能な（目が見え
ない）相手方は、そのメッセージを音声で受け取ること
ができる。

【００２７】（第３の実施形態）第３の実施形態の通話
装置は、受信した音声情報を、音声情報及び文字情報と
して出力することができる。

【００２８】この装置は、図３に示すように、受信した
データから音声圧縮符号化されたデータを分離するデー
タ伝送分離（受信）手段31と、データ伝送分離（受信）
手段31から出力された音声圧縮符号化データを対応する
音声復号化方式でデジタル音声信号に変換する音声伸長
復号化手段32と、音声伸長復号化手段32から出力された
デジタル音声信号をアナログ音声信号に変換して拡声す
る音声出力手段34と、音声伸長復号化手段32から出力さ
れたデジタル音声信号を表示可能な言語の文字情報に変
換する音声認識手段33と、音声認識手段33で変換された
文字情報を表示する文字表示手段35とを備えている。

【００２９】このデータ伝送分離（受信）手段31、音声
伸長復号化手段32及び音声認識手段33は、デジタルシグ
ナルプロセッサやマイクロプロセッサ、メモリなどで構
成され、音声出力手段34は、ＤＡ変換器、アンプ及びス
ピーカなどで構成され、また、文字表示手段35は、モニ
タまたはディスプレイで構成される。

【００３０】この装置では、受信した音声圧縮信号が、
音声伸長復号化手段32により伸長復号化され、音声出力
手段34から音声として放音される。同時に、復号化され
た音声信号は、音声認識手段33で文字情報に変換され、
文字表示手段35に文字で表示される。この音声の出力と
文字の表示とは、使用者の選択によってその一方だけを
行なうこともできる。

【００３１】従って、文字での会話のみが可能な（耳が
聞こえない）人が音声での会話のみが可能な（目が見え
ない）人と通話する場合に、文字での会話のみが可能な
（耳が聞こえない）人は、この装置を使うことによっ
て、音声での会話のみが可能な（目が見えない）人から
送られて来る音声のメッセージを文字情報に変えて受け
取ることが可能になる。

【００３２】（第４の実施形態）第４の実施形態の通話
装置は、受信した文字情報を文字情報及び音声情報とし
て出力することができる。

【００３３】この装置は、図４に示すように、受信した
データから文字情報の圧縮データを分離するデータ伝送
分離（受信）手段41と、データ伝送分離（受信）手段41
から出力された文字情報の圧縮データを表示可能な言語
の文字情報に変換する文字情報伸長手段42と、変換され
た文字情報を表示する文字表示手段44と、変換された文
字情報を聞き取り可能な言語のデジタル音声信号に変換
する音声合成手段43と、変換されたデジタル音声信号を
アナログ音声信号に変換して拡声する音声出力手段45と
を備えている。

【００３４】このデータ伝送分離（受信）手段41、文字
情報伸長手段42及び音声合成手段43は、デジタルシグナ
ルプロセッサやマイクロプロセッサ、メモリなどで構成
される。

【００３５】この装置では、受信した文字情報の圧縮デ
ータが、文字情報伸長手段42で伸長され、文字表示手段
44に表示される。同時に、伸長された文字情報は、音声
合成手段43で音声信号に変換され、音声出力手段45から
音声によって出力される。この音声の出力と文字の表示
とは、使用者の選択によってその一方だけを行なうこと
もできる。

【００３６】従って、音声での会話のみが可能な（目が
見えない）人は、文字での会話のみが可能な（耳が聞こ
えない）人と通話する場合に、この装置を使うことによ
って、相手（耳が聞こえない人）から送られて来る文字
情報のメッセージを音声に変えて受け取ることができ
る。

【００３７】（第５の実施形態）第５の実施形態の通話
装置は、第１〜第４の実施形態の構成を含むテレビ電話
装置である。

【００３８】この装置は、図５に示すように、収音した
アナログ音声信号をデジタル音声信号に変換する音声入
力手段51と、文字情報を入力する文字入力手段52と、デ
ジタル音声信号をアナログ音声信号に変換して拡声する
音声出力手段53と、文字を表示する文字表示手段54と、
ビデオカメラなどで撮影した映像信号を入力する映像入
力手段55と、受信映像をテレビモニタなどに画面表示す
る映像出力手段56と、音声入力手段51及び送信側音声合
成手段60から出力されたデジタル音声信号を相手側通話
装置が復号可能な音声符号化方式で音声圧縮符号化する
音声圧縮符号化手段57と、音声入力手段51から入力した
デジタル音声信号を相手側通話装置が表示可能な言語の
文字情報に変換する送信側音声認識手段58と、文字入力
手段52及び送信側音声認識手段58から入力する文字情報
を相手側通話装置が復号化可能なデータ符号化方式でデ
ータ圧縮符号化する文字情報圧縮手段59と、文字入力手
段52から入力する文字情報を聞き取り可能な言語のデジ
タル音声信号に変換する送信側音声合成手段60と、デー
タ多重分離伝送（送受信）手段67から入力する音声圧縮
符号化データを対応する音声復号化方式でデジタル音声
信号に変換する音声伸長復号化手段61と、音声伸長復号
化手段61から入力したデジタル音声信号を表示可能な言
語の文字情報に変換する受信側音声認識手段62と、デー
タ多重分離伝送（送受信）手段67から入力する文字情報
の圧縮データを表示可能な言語の文字情報に変換する文
字情報伸長手段63と、文字情報伸長手段63から入力する
文字情報を聞き取り可能な言語のデジタル音声信号に変
換する受信側音声合成手段64と、映像入力手段55から入
力するデジタル映像信号を相手側通話装置が復号可能な
映像符号化方式で圧縮符号化する映像圧縮符号化手段65
と、データ多重分離伝送（送受信）手段67から入力する
映像圧縮符号化データを対応する映像復号化方式でデジ
タル映像信号に変換する映像伸長復号化手段66と、送受
信データの多重分離を行なうデータ多重分離伝送（送受
信）手段67と、ＩＳＤＮなどのネットワーク回線への接
続や、映像、音声、データ等の符号化モードなどを制御
する通信回線接続手段68とを備えている。

【００３９】この音声入力手段51はマイクロフォン、ミ
キサー及びＡＤ変換器などで構成され、文字入力手段52
はキーボードで構成され、音声出力手段53はＤＡ変換
器、アンプ及びスピーカなどで構成され、文字表示手段
54はディスプレイで構成され、また、音声圧縮符号化手
段57、送信側音声認識手段58、文字情報圧縮手段59、送
信側音声合成手段60、音声伸長復号化手段61、受信側音
声認識手段62、文字情報伸長手段63、受信側音声合成手
段64、映像圧縮符号化手段65、映像伸長復号化手段66、
データ多重分離伝送（送受信）手段67及び通信回線接続
手段68は、デジタルシグナルプロセッサやマイクロプロ
セッサ、メモリなどで構成される。

【００４０】この装置は、第１〜第４の実施形態の動作
を併せて行なうことができ、音声での会話のみが可能な
（目が見えない）人が音声を使って、文字での会話のみ
が可能な（耳が聞こえない、発声できない）相手と文字
で通話することができ、また、文字での会話のみが可能
な（発声できない、耳が聞こえない）人が文字を使っ
て、音声での会話のみが可能な（目が見えない）相手と
音声で通話することができる。

【００４１】このように、このテレビ電話装置は、従来
の装置に音声認識手段と音声合成手段とを設けるだけ
で、目の見えない人や耳の聞こえない人、発声できない
人達による、一方は音声で、他方は文字で行なう会話を
サポートすることができる。

【００４２】また、従来のパソコン通信装置に音声認識
手段と音声合成手段とを設けることによっても、同様の
動作が可能になる。

【００４３】また、音声入力手段に入力する音声情報
を、文字情報に変換し、文字情報としてだけ送信する場
合には、伝送データ量を小さくすることができ、その
分、映像符号化データ量を大きくすることができる。

【００４４】

【発明の効果】以上の説明から明らかなように、本発明
の通話装置は、目の見えない人や耳の聞こえない人、発
声できない人達が、異なる会話手段で、一方は音声によ
り、他方は文字により通話することを可能にする。

【図面の簡単な説明】

【図１】本発明の第１の実施形態における通話装置の音
声・文字送信部の構成を示すブロック図、

【図２】本発明の第２の実施形態における通話装置の文
字・音声送信部の構成を示すブロック図、

【図３】本発明の第３の実施形態における通話装置の音
声・文字受信部の構成を示すブロック図、

【図４】本発明の第４の実施形態における通話装置の文
字・音声受信部の構成を示すブロック図、

【図５】本発明の第５の実施形態におけるテレビ電話装
置の構成を示すブロック図、

【図６】従来のテレビ電話装置（またはパソコン通信装
置）の構成を示すブロック図である。

【符号の説明】

11、51、71 音声入力手段 12、25、57、77 音声圧縮符号化手段 13、33 音声認識手段 14、23、59、81 文字情報圧縮手段 15、26 データ多重伝送（送信）手段 21、52、75 文字入力手段 31、41 データ伝送分離（受信）手段 32、61、78 音声伸長復号化手段 34、45、53、72 音声出力手段 42、63、82 文字情報伸長手段 43 音声合成手段 44、54 文字表示手段 55、73 映像入力手段 56、74 映像出力手段 58 送信側音声認識手段 60 送信側音声合成手段 62 受信側音声認識手段 64 受信側音声合成手段 65 映像圧縮符号化手段 66 映像伸長復号化手段 67、83 データ多重分離伝送（送受信）手段 68、84 通信回線接続手段 76 文字出力手段

Claims

【特許請求の範囲】

【請求項１】入力された音声信号を音声情報として圧
縮符号化し伝送する手段と、前記音声信号を音声認識に
よって文字情報に変換し、その文字情報をデータ多重伝
送する手段とを備えることを特徴とする通話装置。
【請求項２】入力された文字情報をデータ多重伝送す
る手段と、前記文字情報を音声合成によって音声信号に
変換し、信号圧縮して伝送する手段とを備えることを特
徴とする通話装置。
【請求項３】受信した音声圧縮信号を伸長復号化し出
力する手段と、出力する音声信号を音声認識によって文
字情報に変換し、その文字情報を画面表示する手段とを
備えることを特徴とする通話装置。
【請求項４】受信したデータのうち文字情報を分離
し、画面表示する手段と、その文字情報を音声合成によ
って音声信号に変換し、出力する手段とを備えることを
特徴とする通話装置。
【請求項５】入力された音声信号を音声情報として圧
縮符号化し伝送する手段と、前記音声信号を音声認識に
よって文字情報に変換し、その文字情報をデータ多重伝
送する手段と、入力された文字情報をデータ多重伝送す
る手段と、前記文字情報を音声合成によって音声信号に
変換し、信号圧縮して伝送する手段と、受信した音声圧
縮信号を伸長復号化し出力する手段と、出力する音声信
号を音声認識によって文字情報に変換し、その文字情報
を画面表示する手段と、受信したデータのうち文字情報
を分離し、画面表示する手段と、その文字情報を音声合
成によって音声信号に変換し、出力する手段とを備える
ことを特徴とする通話装置。