JP2000152203A - ビデオ対応コンピュータ・テレフォニー装置 - Google Patents

Abstract

(57)【要約】 【課題】 顧客側から接客側へ接続した後で、通信手段
を介在することなく接続を一旦保留にしたり、別の接客
側に転送したりすることなどを実現することができる。 【解決手段】 映像音声応答ボード２０は、電話網８か
ら入来する映像を伴う電話信号を受信し、この受信され
た映像を伴う電話信号に基づいて応答し、内線電話接続
ボード２１は、この受信された映像を伴う電話信号をオ
ペレータに接続するように構成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ビデオ対応コンピ
ュータ・テレフォニー装置に係り、詳しくは、電話網か
らの入来電話の処理を行うビデオ対応コンピュータ・テ
レフォニー装置に関するものである。

【０００２】

【従来の技術】従来、接客システムについては、例えば
特開平９−１６３０３１号公報で報告されたものがあ
る。以下、具体的に図面を用いて説明する。図１０は従
来の接客システムの構成を示す概略図である。図１０に
おいて、１００ａ、１００ｂは端末装置、１１２は通信
回線、１１４ａ、１１４ｂは表示装置、１１６ａ、１１
６ｂはタッチパネル、１１８ａはテレビカメラ、１２０
ａ、１２２ａは表示装置１１４ａの画面の領域、１２０
ｂ、１２２ｂは表示装置１１４ｂの画面の領域である。

【０００３】この従来の接客システムについて説明す
る。接客員と顧客は、端末装置１００ａ、１００ｂの内
部の会話装置によって、互いに会話することができる。
テレビカメラ１１８ａは、端末装置１００ａの前にいる
接客員を撮影するほか、接客員側において商品及びその
他の関連情報を撮影し、その画像信号を通信回線１１２
を介して顧客側の端末装置１００ｂに送る。

【０００４】表示装置１１４ａ、１１４ｂには、テレビ
カメラ１１８ａによって撮影された画像が、領域１２０
ａ、１２０ｂに表示される。また、表示装置１１４ａ、
１１４ｂの領域１２２ａ、１２２ｂには、端末装置１０
０ａ内部の記憶手段に登録されている情報を表示するこ
とができる。

【０００５】

【発明が解決しようとする課題】上記したような従来の
接客システムでは、顧客側と接客側の端末装置１００
ａ、１００ｂが通信手段によって直接接続されているた
めに、顧客側から接客側へ接続した後で、通信手段の介
在なしに接続を一旦保留にすることや別の接客側に転送
することなどができないという課題があった。

【０００６】そこで、本発明は上記のような課題を解決
するためになされたもので、顧客側から接客側へ接続し
た後で、通信手段の介在なしに接続を一旦保留にするこ
とや別の接客側に転送することなどを実現することがで
きるビデオ対応コンピュータ・テレフォニー装置を提供
することを目的とする。

【０００７】

【課題を解決するための手段】請求項１記載の発明は、
プロセッサが実装されたＣＰＵボードと、ＣＰＵボード
が接続されたシステムバスと、システムバスに接続され
たメモリボードと、Ｉ／Ｏバスへのブリッジを行うシス
テムブリッジボードと、Ｉ／Ｏ制御ボードと、Ｉ／Ｏ制
御ボードが接続されたＩ／Ｏバスと、Ｉ／Ｏ制御ボード
に接続されたディスクユニットと、各構成要素のボード
とディスクユニットに電源を供給する電源ユニットと、
システムの管理を行うシステム管理ボードとを有するビ
デオ対応コンピュータ・テレフォニー装置において、電
話網から入来する映像を伴う電話信号を受信する電話信
号受信手段と、受信された映像を伴う電話信号に基づい
て応答する電話信号応答手段と、受信された映像を伴う
電話信号をオペレータに接続する電話信号接続手段とを
有することを特徴とするものである。

【０００８】請求項２記載の発明は、請求項１に記載の
ビデオ対応コンピュータ・テレフォニー装置において、
電話網から入来する映像を認識する映像認識手段と、受
信された映像を伴う電話信号をオペレータに接続する
際、認識された映像の内容に基づいてオペレータに自動
接続する電話信号自動接続手段とを有することをを特徴
とするものである。

【０００９】請求項３記載の発明は、請求項１に記載の
ビデオ対応コンピュータ・テレフォニー装置において、
オペレータの音声を認識する音声認識手段と、オペレー
タの音声を認識した場合、発信者に送信する映像に音声
認識結果を合成する音声認識結果合成手段とを有するこ
とを特徴とするものである。

【００１０】請求項４記載の発明は、請求項１乃至２に
記載のビデオ対応コンピュータ・テレフォニー装置にお
いて、電話網から入来する映像に含まれる手話を認識す
る手話認識手段と、映像を伴う電話信号をオペレータに
接続する際、認識された手話認識結果を映像に合成する
手話認識結果合成手段とを有することを特徴とするもの
である。

【００１１】請求項５記載の発明は、請求項１乃至２、
４に記載のビデオ対応コンピュータ・テレフォニー装置
において、文字列から音声を合成する第１の音声合成手
段と、電話網から入来する映像に含まれる手話を認識す
る手話認識手段と、電話信号をオペレータに接続する
際、手話認識手段により認識された手話認識結果から第
１の音声合成手段により音声合成を行い、この合成され
た音声を入来した電話信号の音声に合成する第２の音声
合成手段とを有することを特徴とするものである。

【００１２】

【発明の実施の形態】以下に、本発明の実施の形態を図
面を参照して説明する。 実施の形態１．図１は本発明に係る実施の形態１のビデ
オ対応コンピュータ・テレフォニー装置のシステム構成
を示す図である。図１において、１はビデオ対応コンピ
ュータ・テレフォニー装置、２、３は端末、４、６はテ
レビ電話、５はアナログ電話、７はＬＡＮ、８は電話網
である。１９はＬＡＮ７を介して端末２、３と接続され
るビデオ対応コンピュータ・テレフォニー装置１のＬＡ
Ｎボード、２０は映像音声応答ボードで、電話網８から
の入来電話信号を受信して応答し、２１は内線電話接続
ボードで、電話信号を有線電話に接続する。

【００１３】図２は図１に示すビデオ対応コンピュータ
・テレフォニー装置の構成を示すブロック図である。図
２において、１１、１２はＣＰＵボード、１３はメモリ
ボード、１４はバスブリッジボード、１５はＩ／Ｏ制御
ボード、１６はシステムバスで、ＣＰＵボード１１、１
２、メモリボード１３、バスブリッジボード１４はシス
テムバス１６を介してデータ転送を行う。１７はＩ／Ｏ
バスで、バスブリッジボード１４、Ｉ／Ｏ制御ボード１
５とＬＡＮボード１９が接続される。１８はＳＣＳＩバ
スで、ディスク装置２３〜２６が接続される。２２はＣ
ＴＩバスで、入来電話信号を内線電話接続ボード２１を
介してオペレータに転送する。

【００１４】図３は図１に示すビデオ対応コンピュータ
・テレフォニー装置の映像音声応答ボードの構成を示す
ブロック図である。図３において、３１は回線制御回
路、３２はＣＴＩバス制御回路、３３は電話制御回路、
３４は映像処理回路、３５は音声処理回路、３６はメモ
リ、３７はバス・ブリッジ、３８はＣＰＵ、３９はメモ
リ、４０はローカルバス制御回路である。

【００１５】４１はＣＴＩコネクタで、ＣＴＩバス制御
回路３２に接続される。４２は映像音声バスで、電話制
御回路３３、映像処理回路３４、音声処理回路３５、メ
モリ３６、バスブリッジ３７は映像音声バス４２を介し
てデータ転送を行う。４３はローカルバスで、バスブリ
ッジ３７、ＣＰＵ３８、メモリ３９、ローカルバス制御
回路４０はローカルバス４３を介してデータ転送を行
う。４４はＩ／Ｏバスで、ローカルバス制御回路４０が
接続される。

【００１６】図４は図１に示す端末の構成を示すブロッ
ク図である。図４において、５１はＣＰＵボード、５２
はメモリボード、５３はバスブリッジボードである。５
４はＩ／Ｏ制御ボード、５５はＩ／Ｏ制御ボード５４に
接続され、かつＯＳが格納されたディスク装置、５６は
ＬＡＮ７に接続されたＬＡＮボードである。

【００１７】ここで、電話網８よりビデオ対応コンピュ
ータ・テレフォニー装置１に入来した映像を伴う電話信
号をテレビ電話６を備えるオペレータに接続する場合に
ついて説明する。電話網８に接続されたテレビ電話４よ
り発信者がコンピュータ・テレフォニー装置１に電話を
かけると、ビデオ対応コンピュータ・テレフォニー装置
１の映像音声応答ボード２０が映像を伴う電話信号を受
信する。

【００１８】映像音声応答ボード２０のデバイスドライ
バは、この映像を伴う電話信号を映像音声応答ボード２
０の回線制御回路３１、ＣＴＩバス制御回路３２を介し
て電話制御回路３３で処理する。この時、回線制御回路
３１は、発信者電話番号サービスで得られる発信者の番
号をバッファリングする。電話制御回路３３は映像を伴
う電話信号である場合には、その映像と音声の分離を行
う。

【００１９】映像信号は、映像処理回路３４にて復号化
された後、メモリ３６に蓄積される。音声信号は、その
ままメモリ３６に蓄積される。次に、電話制御回路３３
は、ＣＴＩバス制御回路３２、ＣＴＩコネクタ４１、Ｃ
ＴＩバス２２を介して、内線電話接続ボード２１に対し
て、入来電話信号をオペレータ＃２のテレビ電話６に接
続するように指示する。

【００２０】ビデオ対応コンピュータ・テレフォニー装
置１の音声応答ボード２０が映像を伴う電話信号の受信
を行った時点からオペレータ＃２のテレビ電話６に接続
するまでの映像は、映像処理回路３４にて復号化された
後、メモリ３６に蓄積され続ける。次いで、オペレータ
＃２のテレビ電話６に接続された時点で、メモリ３６の
映像を映像処理回路３４にて再度符号化し、メモリ３６
の音声とともに、電話制御回路３３、ＣＴＩバス制御回
路３２、ＣＴＩコネクタ４１、ＣＴＩバス２２、内線電
話接続ボード２１を介して、オペレータ＃２のテレビ電
話６に転送する。

【００２１】また、同時に、発信者の電話番号から発信
者を特定するために、ディスク装置２４内の発信者電話
番号に該当する顧客データを検索する。システムは、こ
の顧客データをＬＡＮボード１９、ＬＡＮ７、オペレー
タ＃２の端末３のＬＡＮボード５６経由で端末３の画面
上に表示する。この時点で、発信者とオペレータ＃２は
テレビ電話４、６を介して会話を開始するが、オペレー
タ＃２は発信者の顧客データを見ながら発信者と対応す
ることができる。この対応で更新されたデータは、ディ
スク装置２４内の顧客データに格納される。

【００２２】さらに、発信者の要求に応じて、オペレー
タ＃２は、静止画像、動画像を流すこともできる。この
静止画像、動画像は、例えば商品の説明をする資料、ビ
デオガイダンスなどである。具体的には、静止画像、動
画像はＪＰＥＧ、ＭＰＥＧなどの圧縮された形式で、デ
ィスク装置２６内に格納されている。システムは、この
静止画像、動画像をディスク装置２６内から取り出し、
映像音声応答ボード２０に転送する。

【００２３】映像音声応答ボード２０のデバイスドライ
バは、ローカルバス制御回路４０、ＣＴＩバス制御回路
３２、電話制御回路３３を介して静止画像、動画像を一
旦メモリ３６に格納した後、映像処理回路３４、音声処
理回路３５にてテレビ電話の映像フォーマット、音声フ
ォーマットに変換し、電話制御回路３３、ＣＴＩバス制
御回路３２、回線制御回路３１を介して発信者に送信す
る。

【００２４】電話網８よりビデオ対応コンピュータ・テ
レフォニー装置１に映像を伴う電話信号が入来した時
に、テレビ電話６を備えるオペレータが対応できない
時、発信者に前もって準備した映像を伴うメッセージを
送信した後、発信者から映像を伴うメッセージを受け取
る場合について説明する。

【００２５】電話網８に接続されたテレビ電話４より発
信者がビデオ対応コンピュータ・テレフォニー装置１に
電話をかけると、ビデオ対応コンピュータ・テレフォニ
ー装置１の映像音声応答ボード２０が映像を伴う電話信
号を受信する。映像音声応答ボード２０のデバイスドラ
イバは、この電話信号を映像音声応答ボード２０の回線
制御回路３１、ＣＴＩバス制御回路３２を介して電話制
御回路３３で処理する。この時、回線制御回路３１は、
発信者電話番号サービスで得られる発信者の番号をバッ
ファリングする。

【００２６】電話制御回路３３は映像を伴う電話信号で
ある場合には、映像と音声の分離を行う。映像信号は、
映像処理回路３４にて復号化された後、メモリ３６に蓄
積される。音声信号は、そのままメモリ３６に蓄積され
る。システムは、ディスク装置２５内のオペレータ状態
テーブルを検索して、オペレータのログイン、ログオフ
を確認する。この場合は、当該オペレータはログオフ状
態のため、次に、ディスク装置２５内のオペレータ顧客
データを検索して、当該の発信者に対応する映像を伴う
メッセージの有無を確認する。

【００２７】なお、オペレータは、席を離れる時と席に
戻った時に端末３にて、ログイン、ログオフを行い、シ
ステムはこの情報をＬＡＮ７経由で受け取り、ディスク
装置２５内のオペレータ状態テーブルを適宜更新する。
また、オペレータは、端末３にて、登録されている顧客
対応の映像を伴うメッセージを適宜作成し、ディスク装
置２５内のオペレータ顧客データに格納する。

【００２８】ディスク装置２５内のオペレータ顧客デー
タを検索して、当該発信者に対するメッセージがない場
合には、「申し訳ありません。オペレータは只今席をは
ずしております。メッセージがございましたらお話くだ
さい。」等の映像を伴うメッセージを発信者に対して送
信するとともに、発信者の映像を伴うメッセージを映像
音声メッセージ・ボックスに保存する。具体的には、映
像音声応答ボード２０のデバイス・ドライバはシステム
からの当該メッセージを受信し、それを電話網８へ送信
するために映像音声応答ボード２０に転送する。

【００２９】次に、映像音声応答ボード２０の電話制御
回路３３は当該メッセージをＣＴＩバス制御回路３２、
回線制御回路３１を介して発信者に送信する。また、発
信者の映像を伴うメッセージを映像音声応答ボード２０
が受信し、回線制御回路３１、ＣＴＩバス制御回路３
２、ローカルバス制御回路４０を介し、システムに引き
渡す。システムは、当該の映像を伴うメッセージをディ
スク装置２５内の映像音声メッセージ・ボックスに格納
する。

【００３０】当該発信者に対するメッセージがある場合
には、「申し訳ありません。オペレータ＃２は只今席を
はずしておりますが、あなた様宛のメッセージがござい
ますのでご覧ください。」等の映像を伴うメッセージを
発信者に対して送信する。具体的には、映像音声応答ボ
ード２０のデバイス・ドライバはシステムからの当該メ
ッセージを受信し、それを電話網８へ送信するために映
像音声応答ボード２０に転送する。

【００３１】次に、映像音声応答ボード２０は、当該メ
ッセージをローカルバス制御回路４０、ＣＴＩバス制御
回路３２、電話制御回路３３をを介して、一旦メモリ３
６に格納し、映像処理回路３４、音声処理回路３５にて
テレビ電話の映像フォーマット、音声フォーマットに変
換し、電話制御回路３３、ＣＴＩバス制御回路３２、回
線制御回路３１を介して発信者に送信する。

【００３２】さらに、発信者からの映像を伴うメッセー
ジを残す場合には、「オペレータ＃２にメッセージがご
ざいましたらお話ください。」等のメッセージを発信者
に対して送信するとともに、発信者のメッセージを音声
メッセージ・ボックスに保存する。具体的には、映像音
声応答ボード２０のデバイス・ドライバはシステムから
の当該メッセージを受信し、それを電話網８へ送信する
ために映像音声応答ボード２０に転送する。

【００３３】次に、映像音声応答ボード２０は、当該メ
ッセージをローカルバス制御回路４０、ＣＴＩバス制御
回路３２、電話制御回路３３を介して、一旦メモリ３６
に格納し、映像処理回路３４、音声処理回路３５にてテ
レビ電話の映像フォーマット、音声フォーマットに変換
し、電話制御回路３３、ＣＴＩバス制御回路３２、回線
制御回路３１を介して発信者に送信する。発信者の映像
を伴うメッセージは、映像音声応答ボード２０の回線制
御回路３１、ＣＴＩバス制御回路３２を介して電話制御
回路３３で処理する。

【００３４】電話制御回路３３は映像を伴う電話信号で
ある場合には、映像と音声の分離を行う。映像信号は、
映像処理回路３４にて復号化された後、メモリ３６に蓄
積される。音声信号は、そのままメモリ３６に蓄積され
る。システムは、発信者の映像を伴うメッセージを映像
音声応答ボード２０から受け取り、ディスク装置２５内
の映像音声メッセージ・ボックスに格納する。

【００３５】電話網８よりビデオ対応コンピュータ・テ
レフォニー装置１に映像を伴う電話信号が入来した時
に、テレビ電話６を備えるオペレータが対応できない時
に、発信者がアナログ電話を備えるオペレータの対応を
希望する場合について説明する。

【００３６】電話網８に接続されたテレビ電話４より発
信者がビデオ対応コンピュータ・テレフォニー装置１に
電話をかけると、ビデオ対応コンピュータ・テレフォニ
ー装置１の映像音声応答ボード２０が映像を伴う電話信
号を受信する。映像音声応答ボード２０のデバイスドラ
イバは、この電話信号を映像音声応答ボード２０の回線
制御回路３１、ＣＴＩバス制御回路３２を介して電話制
御回路３３で処理する。

【００３７】回線制御回路３１は、発信者電話番号サー
ビスで得られる発信者の番号をバッファリングする。電
話制御回路３３は映像を伴う電話信号である場合には、
映像と音声の分離を行う。映像信号は、映像処理回路３
４にて復号化された後、メモリ３６に蓄積される。音声
信号は、そのままメモリ３６に蓄積される。システム
は、ディスク装置２５内のオペレータ状態テーブルを検
索し、オペレータのログイン、ログオフを確認する。こ
の場合は、当該オペレータはログオフ状態のため、次
に、ディスク装置２５内のオペレータ顧客データを検索
し、当該の発信者に対応する映像を伴うメッセージの有
無を確認する。

【００３８】オペレータが対応できない時、「申し訳あ
りません。オペレータは只今席をはずしております。ア
ナログ電話での対応を希望される場合には、プッシュボ
タンの＃＃＃を押してください。」等の映像を伴うメッ
セージを発信者に対して送信する。具体的には、映像音
声応答ボード２０のデバイス・ドライバは、システムか
らの当該メッセージを受信し、それを電話網８へ送信す
るために映像音声応答ボード２０に転送する。

【００３９】次に、映像音声応答ボード２０は、当該メ
ッセージをローカルバス制御回路４０、ＣＴＩバス制御
回路３２、電話制御回路３３をを介して、一旦メモリ３
６に格納し、映像処理回路３４、音声処理回路３５にて
テレビ電話の映像フォーマット、音声フォーマットに変
換し、電話制御回路３３、ＣＴＩバス制御回路３２、回
線制御回路３１を介して発信者に送信する。同時に、映
像音声応答ボード２０のデバイスドライバは、プッシュ
ボタンの＃＃＃押下によるダイヤルトーン信号を映像音
声応答ボード２０の回線制御回路３１、ＣＴＩバス制御
回路３２を介して電話制御回路３３で処理する。

【００４０】発信者がアナログ電話での対応を希望する
場合には、映像音声応答ボード２０のデバイス・ドライ
バは、ＣＴＩバス制御回路３２、ＣＴＩコネクタ４１、
ＣＴＩバス２２を介して、内線電話接続ボード２１に対
して、入来電話信号をオペレータ＃１のアナログ電話５
に接続するように指示する。

【００４１】このように、本実施の形態では、電話網８
よりビデオ対応コンピュータ・テレフォニー装置１に入
来した映像を伴う電話信号を、テレビ電話６を備えるオ
ペレータに接続する時に、テレビ電話６を備えるオペレ
ータが対応できない時、発信者に前もって準備した映像
を伴うメッセージを送信した後、発信者から映像を伴う
メッセージを受け取ることができる。

【００４２】なお、上記実施の形態１では、電話網８よ
りビデオ対応コンピュータ・テレフォニー装置１に入来
した電話信号をテレビ電話６を備えるオペレータに接続
を行うように構成する場合を説明したが、オペレータの
端末３にテレビ電話機能を持たせて構成するようにして
もよい。

【００４３】実施の形態２．以下に、本発明の実施の形
態２を図面を参照して説明する。図５は本発明に係る実
施の形態２のビデオ対応コンピュータ・テレフォニー装
置のシステム構成を示す図である。図５において、１は
ビデオ対応コンピュータ・テレフォニー装置、２、３、
９は端末、４、６、１０はテレビ電話、５はアナログ電
話、７はＬＡＮ、８は電話網である。１９はＬＡＮ７を
介して端末２、３と接続されるビデオ対応コンピュータ
・テレフォニー装置１のＬＡＮボード、２０は映像音声
応答ボードで、電話網８からの入来電話信号を受信して
応答し、２１は内線電話接続ボードで、電話信号を有線
電話に接続する。

【００４４】図６は図１に示すビデオ対応コンピュータ
・テレフォニー装置の構成を示すブロック図である。図
６において、１１、１２はＣＰＵボード、１３はメモリ
ボード、１４はバスブリッジボード、１５はＩ／Ｏ制御
ボード、１６はシステムバスで、ＣＰＵボード１１、１
２、メモリボード１３、バスブリッジボード１４はシス
テムバス１６を介してデータ転送を行う。１７はＩ／Ｏ
バスで、バスブリッジボード１４、Ｉ／Ｏ制御ボード１
５とＬＡＮボード１９が接続される。１８はＳＣＳＩバ
スで、ディスク装置２３〜２６が接続される。２２はＣ
ＴＩバスで、入来電話信号を内線電話接続ボード２１を
介してオペレータに転送する。２７は映像認識ボード
で、映像を伴う電話信号の映像を認識する。

【００４５】図３は図１に示すビデオ対応コンピュータ
・テレフォニー装置の映像音声応答ボードの構成を示す
ブロック図である。図３において、３１は回線制御回
路、３２はＣＴＩバス制御回路、３３は電話制御回路、
３４は映像処理回路、３５は音声処理回路、３６はメモ
リ、３７はバス・ブリッジ、３８はＣＰＵ、３９はメモ
リ、４０はローカルバス制御回路である。

【００４６】４１はＣＴＩコネクタで、ＣＴＩバス制御
回路３２に接続される。４２は映像音声バスで、電話制
御回路３３、映像処理回路３４、音声処理回路３５、メ
モリ３６、バスブリッジ３７は映像音声バス４２を介し
てデータ転送を行う。４３はローカルバスで、バスブリ
ッジ３７、ＣＰＵ３８、メモリ３９、ローカルバス制御
回路４０はローカルバス４３を介してデータ転送を行
う。４４はＩ／Ｏバスで、ローカルバス制御回路４０が
接続される。

【００４７】図４は図１に示す端末の構成を示すブロッ
ク図である。図４において、５１はＣＰＵボード、５２
はメモリボード、５３はバスブリッジボードである。５
４はＩ／Ｏ制御ボード、５５はＩ／Ｏ制御ボード５４に
接続され、かつＯＳが格納されたディスク装置、５６は
ＬＡＮ７に接続されたＬＡＮボードである。

【００４８】ここで、電話網８よりビデオ対応コンピュ
ータ・テレフォニー装置１に入来した映像を伴う電話信
号の映像を認識し、発信者が手話を使って会話を試みて
いる時に、手話のできるオペレータに接続する場合につ
いて説明する。

【００４９】電話網８に接続されたテレビ電話４より発
信者がビデオ対応コンピュータ・テレフォニー装置１に
電話をかけると、ビデオ対応コンピュータ・テレフォニ
ー装置１の映像音声応答ボード２０が映像を伴う電話信
号を受信する。映像音声応答ボード２０のデバイスドラ
イバは、この電話信号を映像音声応答ボード２０の回線
制御回路３１、ＣＴＩバス制御回路３２を介して電話制
御回路３３で処理する。

【００５０】回線制御回路３１は、発信者電話番号サー
ビスで得られる発信者の番号をバッファリングする。電
話制御回路３３は映像を伴う電話信号である場合には、
映像と音声の分離を行う。映像信号は、映像処理回路３
４にて復号化された後、メモリ３６に蓄積される。音声
信号は、そのままメモリ３６に蓄積される。システム
は、メモリ３６に蓄積した映像信号を、電話制御回路３
３、ＣＴＩバス制御回路３２、ローカルバス制御回路４
０、Ｉ／Ｏバス１７を介して映像認識ボード２７に転送
する。

【００５１】映像認識ボード２７は、映像のフレーム間
の動きのある部分を解析し、手話が使われていることを
認識した場合に、システムに通知する。システムは、
「手話が可能なオペレータにおつなぎしますので、しば
らくお待ちください。」等の映像を伴うメッセージを発
信者に対して送信する。具体的には、映像音声応答ボー
ド２０のデバイス・ドライバはシステムから当該メッセ
ージを受信し、それを電話網８へ送信するために映像音
声応答ボード２０に転送する。

【００５２】次に、映像音声応答ボード２０の電話制御
回路３３は当該メッセージをＣＴＩバス制御回路３２、
回線制御回路３１を介して発信者に送信する。さらに、
電話制御回路３３は、ＣＴＩバス制御回路３２、ＣＴＩ
コネクタ４１、ＣＴＩバス２２を介して、内線電話接続
ボード２１に対して、入来電話信号をオペレータ＃３の
テレビ電話１０に接続するように指示する。

【００５３】ビデオ対応コンピュータ・テレフォニー装
置１の音声応答ボード２０が映像を伴う電話信号の受信
を行った時点からオペレータ＃３のテレビ電話１０に接
続するまでの映像は、映像処理回路３４にて復号化され
た後、メモリ３６に蓄積され続け、オペレータ＃３のテ
レビ電話１０に接続された時点で、メモリ３６の映像を
映像処理回路３４にて再度符号化し、メモリ３６の音声
とともに、電話制御回路３３、ＣＴＩバス制御回路３
２、ＣＴＩコネクタ４１、ＣＴＩバス２２、内線電話接
続ボード２１を介して、オペレータ＃３のテレビ電話１
０に転送する。

【００５４】また、同時に、発信者の電話番号から発信
者を特定するために、情報をディスク装置２４内の顧客
データを検索する。システムは、この顧客データをＬＡ
Ｎボード１９、ＬＡＮ７、オペレータ＃３の端末９のＬ
ＡＮボード５６経由で端末９の画面上に表示する。この
時点で、発信者とオペレータ＃３はテレビ電話１０を介
して会話を開始するが、オペレータ＃３は顧客データを
見ながら発信者と対応することができる。この対応で更
新されたデータはディスク装置２４内の顧客データに格
納される。

【００５５】電話網８よりビデオ対応コンピュータ・テ
レフォニー装置１に入来した映像を伴う電話信号の映像
を認識し、発信者が手話を使って会話を試みている時
に、手話のできるオペレータが対応できない時、発信者
に前もって準備した映像を伴うメッセージを送信した
後、発信者から映像を伴うメッセージを受け取る場合に
ついて説明する。

【００５６】電話網８に接続されたテレビ電話４より発
信者がビデオ対応コンピュータ・テレフォニー装置１に
電話をかけると、ビデオ対応コンピュータ・テレフォニ
ー装置１の映像音声応答ボード２０が映像を伴う電話信
号を受信する。映像音声応答ボード２０のデバイスドラ
イバは、この電話信号を映像音声応答ボード２０の回線
制御回路３１、ＣＴＩバス制御回路３２を介して電話制
御回路３３で処理する。

【００５７】回線制御回路３１は、発信者電話番号サー
ビスで得られる発信者の番号をバッファリングする。電
話制御回路３３は映像を伴う電話信号である場合には、
映像と音声の分離を行う。映像信号は、映像処理回路３
４にて復号化された後、メモリ３６に蓄積される。音声
信号は、そのままメモリ３６に蓄積される。システム
は、メモリ３６に蓄積した映像信号を、電話制御回路３
３、ＣＴＩバス制御回路３２、ローカルバス制御回路４
０、Ｉ／Ｏバス１７を介して映像認識ボード２７に転送
する。

【００５８】映像認識ボード２７は、映像のフレーム間
の動きのある部分を解析し、手話が使われていることを
認識した場合に、システムに通知する。システムは、デ
ィスク装置２５内のオペレータ状態テーブルを検索し、
当該オペレータのログイン、ログオフを確認する。この
場合は、当該オペレータはログオフ状態のため、次に、
ディスク装置２５内のオペレータ顧客データを検索し、
当該の発信者に対応する映像を伴うメッセージの有無を
確認する。

【００５９】なお、オペレータは、席を離れる時と席に
戻った時に端末にて、ログイン、ログオフを行い、シス
テムはこの情報をＬＡＮ７経由で受け取り、ディスク装
置２５内のオペレータ状態テーブルを適宜更新する。ま
た、オペレータは、端末９にて、登録されている顧客対
応の映像を伴うメッセージを適宜作成し、ディスク装置
２５内のオペレータ顧客データに格納する。

【００６０】当該発信者に対するメッセージがない場合
には、「申し訳ありません。手話が可能なオペレータは
只今席をはずしております。メッセージがございました
らお話ください。」等の映像を伴うメッセージを発信者
に対して送信する。この場合の映像を伴うメッセージ
は、前もって準備された上記内容の静止画像、手話を使
った録画メッセージ、手話を使ったアニメーションであ
る。これに引き続き、発信者の映像を伴うメッセージを
映像音声メッセージ・ボックスに保存する。

【００６１】具体的には、映像音声応答ボード２０のデ
バイス・ドライバはシステムからの当該メッセージを受
信し、それを電話網８へ送信するために映像音声応答ボ
ード２０に転送する。次に、映像音声応答ボード２０の
電話制御３３は当該メッセージをＣＴＩバス制御回路３
２、回線制御回路３１を介して発信者に送信する。ま
た、発信者の映像を伴うメッセージを映像音声応答ボー
ド２０が受信し、回線制御回路３１、ＣＴＩバス制御回
路３２、ローカルバス制御回路４０を介し、システムに
引き渡す。システムは、当該の映像を伴うメッセージを
ディスク装置２５内の映像音声メッセージ・ボックスに
格納する。

【００６２】当該発信者に対するメッセージがある場合
には、「申し訳ありません。手話が可能なオペレータは
只今席をはずしておりますが、あなた様宛のメッセージ
がございますのでご覧ください。」等の映像を伴うメッ
セージを発信者に対して送信する。この場合の映像を伴
うメッセージは、前もって準備された上記内容の静止画
像、手話を使った録画メッセージ、手話を使ったアニメ
ーションである。

【００６３】具体的には、映像音声応答ボード２０のデ
バイス・ドライバはシステムからの当該メッセージを受
信し、それを電話網８へ送信するために映像音声応答ボ
ード２０に転送する。次に、映像音声応答ボード２０
は、当該メッセージをローカルバス制御回路４０、ＣＴ
Ｉバス制御回路３２、電話制御回路３３をを介して、一
旦メモリ３６に格納し、映像処理回路３４、音声処理回
路３５にてテレビ電話の映像フォーマット、音声フォー
マットに変換し、電話制御回路３３、ＣＴＩバス制御回
路３２、回線制御回路３１を介して発信者に送信する。

【００６４】さらに、発信者が映像を伴うメッセージを
残す場合には、「オペレータ＃２にメッセージがござい
ましたらお話ください。」等のメッセージを発信者に送
信する。この場合の映像を伴うメッセージは、前もって
準備された上記内容の静止画、手話を使った録画メッセ
ージ、手話を使ったアニメーションである。さらに、発
信者のメッセージを映像音声メッセージ・ボックスに保
存する。具体的には、映像音声応答ボード２０のデバイ
ス・ドライバはシステムからの当該メッセージを受信
し、それを電話網８へ送信するために映像音声応答ボー
ド２０に転送する。

【００６５】次に、映像音声応答ボード２０は、当該メ
ッセージをローカルバス制御回路４０、ＣＴＩバス制御
回路３２、電話制御回路３３をを介して、一旦メモリ３
６に格納し、映像処理回路３４、音声処理回路３５にて
テレビ電話の映像フォーマット、音声フォーマットに変
換し、電話制御回路３３、ＣＴＩバス制御回路３２、回
線制御回路３１を介して発信者に送信する。発信者の映
像を伴うメッセージは、映像音声応答ボード２０の回線
制御回路３１、ＣＴＩバス制御回路３２を介して電話制
御回路３３で処理する。

【００６６】電話制御回路３３は映像を伴う電話信号で
ある場合には、映像と音声の分離を行う。映像信号は、
映像処理回路３４にて復号化された後、メモリ３６に蓄
積される。音声信号は、そのままメモリ３６に蓄積され
る。システムは、発信者の映像を伴うメッセージを映像
音声応答ボード２０から受け取り、ディスク装置２５内
の映像音声メッセージ・ボックスに格納する。

【００６７】このように、本実施の形態では、電話網８
よりビデオ対応コンピュータ・テレフォニー装置１に入
来した映像を伴う電話信号の映像を認識し、発信者が手
話を使って会話を試みている時に、手話のできるオペレ
ータに接続する時、手話のできるオペレータが対応でき
ない場合、発信者に前もって準備した映像を伴うメッセ
ージを送信した後、発信者から映像を伴うメッセージを
受け取ることができる。

【００６８】なお、上記実施の形態２では、電話網８よ
りビデオ対応コンピュータ・テレフォニー装置１に入来
した電話信号をテレビ電話６、１０を備えるオペレータ
に接続を行うように構成する場合を説明したが、オペレ
ータの端末３、９にテレビ電話機能を持たせて構成する
ようにしてもよい。

【００６９】実施の形態３．以下に、本発明の実施の形
態３を図面を参照して説明する。本実施の形態は、図１
に示す実施の形態１のビデオ対応コンピュータ・テレフ
ォニー装置のシステム構成と同様であるので、図１を用
いて説明する。図１において、１はビデオ対応コンピュ
ータ・テレフォニー装置、２、３は端末、４、６はテレ
ビ電話、５はアナログ電話、７はＬＡＮ、８は電話網で
ある。１９はＬＡＮ７を介して端末２、３と接続される
ビデオ対応コンピュータ・テレフォニー装置１のＬＡＮ
ボード、２０は映像音声応答ボードで、電話網８からの
入来電話信号を受信して応答し、２１は内線電話接続ボ
ードで、電話信号を有線電話に接続する。

【００７０】図７は図１に示すビデオ対応コンピュータ
・テレフォニー装置の構成を示すブロック図である。図
７において、１１、１２はＣＰＵボード、１３はメモリ
ボード、１４はバスブリッジボード、１５はＩ／Ｏ制御
ボード、１６はシステムバスで、ＣＰＵボード１１、１
２、メモリボード１３、バスブリッジボード１４はシス
テムバス１６を介してデータ転送を行う。１７はＩ／Ｏ
バスで、バスブリッジボード１４、Ｉ／Ｏ制御ボード１
５とＬＡＮボード１９が接続される。１８はＳＣＳＩバ
スで、ディスク装置２３〜２６が接続される。２２はＣ
ＴＩバスで、入来電話信号を内線電話接続ボード２１を
介してオペレータに転送する。２８は音声認識ボード
で、オペレータの電話信号の音声を認識する。

【００７１】図３は図１に示すビデオ対応コンピュータ
・テレフォニー装置の映像音声応答ボードの構成を示す
ブロック図である。図３において、３１は回線制御回
路、３２はＣＴＩバス制御回路、３３は電話制御回路、
３４は映像処理回路、３５は音声処理回路、３６はメモ
リ、３７はバス・ブリッジ、３８はＣＰＵ、３９はメモ
リ、４０はローカルバス制御回路である。

【００７２】４１はＣＴＩコネクタで、ＣＴＩバス制御
回路３２に接続される。４２は映像音声バスで、電話制
御回路３３、映像処理回路３４、音声処理回路３５、メ
モリ３６、バスブリッジ３７は映像音声バス４２を介し
てデータ転送を行う。４３はローカルバスで、バスブリ
ッジ３７、ＣＰＵ３８、メモリ３９、ローカルバス制御
回路４０はローカルバス４３を介してデータ転送を行
う。４４はＩ／Ｏバスで、ローカルバス制御回路４０が
接続される。

【００７３】図４は図１に示す端末の構成を示すブロッ
ク図である。図４において、５１はＣＰＵボード、５２
はメモリボード、５３はバスブリッジボードである。５
４はＩ／Ｏ制御ボード、５５はＩ／Ｏ制御ボード５４に
接続され、かつＯＳが格納されたディスク装置、５６は
ＬＡＮ７に接続されたＬＡＮボードである。

【００７４】ここで、電話網８よりビデオ対応コンピュ
ータ・テレフォニー装置１に入来した映像を伴う電話信
号をテレビ電話６を備えるオペレータに接続し、オペレ
ータの音声を音声認識し、音声認識結果を映像に合成し
て発信者に送信する場合について説明する。

【００７５】電話網８に接続されたテレビ電話４より発
信者がコンピュータ・テレフォニー装置１に電話をかけ
ると、ビデオ対応コンピュータ・テレフォニー装置１の
音声応答ボード２０が映像を伴う電話信号を受信する。
映像音声応答ボード２０のデバイスドライバは、この映
像を伴う電話信号を映像音声応答ボード２０の回線制御
回路３１、ＣＴＩバス制御回路３２を介して電話制御回
路３３で処理する。

【００７６】回線制御回路３１は、発信者電話番号サー
ビスで得られる発信者の番号をバッファリングする。電
話制御回路３３は映像を伴う電話信号である場合には、
映像と音声の分離を行う。映像信号は、映像処理回路３
４にて復号化された後、メモリ３６に蓄積される。音声
信号は、そのままメモリ３６に蓄積される。次に、電話
制御回路３３は、ＣＴＩバス制御回路３２、ＣＴＩコネ
クタ４１、ＣＴＩバス２２を介して、内線電話接続ボー
ド２１に対して、入来電話信号をオペレータ＃２のテレ
ビ電話６に接続するように指示する。

【００７７】ビデオ対応コンピュータ・テレフォニー装
置１の音声応答ボード２０が映像を伴う電話信号を受信
を行った時点からオペレータ＃２のテレビ電話６に接続
するまでの映像は、映像処理回路３４にて復号化された
後、メモリ３６に蓄積され続け、オペレータ＃２のテレ
ビ電話６に接続された時点で、メモリ３６の映像を映像
処理回路３４にて再度符号化し、メモリ３６の音声とと
もに、電話制御回路３３、ＣＴＩバス制御回路３２、Ｃ
ＴＩコネクタ４１、ＣＴＩバス２２、内線電話接続ボー
ド２１を介して、オペレータ＃２のテレビ電話６に転送
する。

【００７８】また、同時に、発信者の電話番号から発信
者を特定するために、情報をディスク装置２４内の顧客
データを検索する。システムは、この顧客データをＬＡ
Ｎボード１９、ＬＡＮ７、オペレータ＃２の端末３のＬ
ＡＮボード５６経由で端末３の画面上に表示する。この
時点で、発信者とオペレータ＃２はテレビ電話６を介し
て会話を開始するが、オペレータ＃２の映像を伴う電話
信号は、内線接続ボード２１、Ｉ／Ｏバス１７を介して
映像音声応答ボード２０に転送され、ローカルバス制御
回路４０、ＣＴＩバス制御回路３２を介して電話制御回
路３３で処理される。

【００７９】電話制御回路３３は映像を伴う電話信号で
ある場合には、映像と音声の分離を行う。映像信号は、
映像処理回路３４にて復号化された後、メモリ３６に蓄
積される。音声信号は、音声処理回路３４にて復号化さ
れた後、メモリ３６に蓄積される。システムは、メモリ
３６に格納された音声を、電話制御回路３３、ＣＴＩバ
ス制御回路３２、ローカルバス制御回路４０、Ｉ／Ｏバ
ス１７を介して、音声認識ボード２８に転送する。

【００８０】音声認識ボード２８は、音声を認識し、映
像音声応答ボード２０に文字列として戻す。映像音声応
答ボード２０のデバイスドライバは、音声認識結果（文
字列）をメモリ３６に格納されたオペレータ＃２の映像
と合成する。さらに、映像処理回路３４、音声処理回路
３５にてテレビ電話の映像フォーマット、音声フォーマ
ットに変換し、電話制御回路３３、ＣＴＩバス制御回路
３２、回線制御回路３１を介して発信者に送信する。

【００８１】このように、本実施の形態では、電話網８
よりビデオ対応コンピュータ・テレフォニー装置１に入
来した映像を伴う電話信号をテレビ電話６を備えるオペ
レータに接続し、オペレータの音声を音声認識し、音声
認識結果を映像に合成して発信者に送信することができ
る。

【００８２】なお、上記実施の形態３では、電話網８よ
りビデオ対応コンピュータ・テレフォニー装置１に入来
した電話信号をテレビ電話６を備えるオペレータに接続
を行うように構成する場合を説明したが、オペレータの
端末３にテレビ電話機能を持たせて構成するようにして
もよい。

【００８３】実施の形態４．以下に、本発明の実施の形
態４を図面を参照して説明する。本実施の形態は、図１
に示す実施の形態１のビデオ対応コンピュータ・テレフ
ォニー装置のシステム構成と同様であるので、図１を用
いて説明する。図１において、１はビデオ対応コンピュ
ータ・テレフォニー装置、２、３は端末、４、６はテレ
ビ電話、５はアナログ電話、７はＬＡＮ、８は電話網で
ある。１９はＬＡＮ７を介して端末２、３と接続される
ビデオ対応コンピュータ・テレフォニー装置１のＬＡＮ
ボード、２０は映像音声応答ボードで、電話網８からの
入来電話信号を受信して応答し、２１は内線電話接続ボ
ードで、電話信号を有線電話に接続する。

【００８４】図８は図１に示すビデオ対応コンピュータ
・テレフォニー装置の構成を示すブロック図である。図
８において、１１、１２はＣＰＵボード、１３はメモリ
ボード、１４はバスブリッジボード、１５はＩ／Ｏ制御
ボード、１６はシステムバスで、ＣＰＵボード１１、１
２、メモリボード１３、バスブリッジボード１４はシス
テムバス１６を介してデータ転送を行う。

【００８５】１７はＩ／Ｏバスで、バスブリッジボード
１４、Ｉ／Ｏ制御ボード１５とＬＡＮボード１９が接続
される。１８はＳＣＳＩバスで、ディスク装置２３〜２
６が接続される。２２はＣＴＩバスで、入来電話信号を
内線電話接続ボード２１を介してオペレータに転送す
る。２８は音声認識ボードで、オペレータの電話信号の
音声を認識し、２９は手話認識ボードで、発信者の手話
を認識する。

【００８６】図３は図１に示すビデオ対応コンピュータ
・テレフォニー装置の映像音声応答ボードの構成を示す
ブロック図である。図３において、３１は回線制御回
路、３２はＣＴＩバス制御回路、３３は電話制御回路、
３４は映像処理回路、３５は音声処理回路、３６はメモ
リ、３７はバス・ブリッジ、３８はＣＰＵ、３９はメモ
リ、４０はローカルバス制御回路である。

【００８７】４１はＣＴＩコネクタで、ＣＴＩバス制御
回路３２に接続される。４２は映像音声バスで、電話制
御回路３３、映像処理回路３４、音声処理回路３５、メ
モリ３６、バスブリッジ３７は映像音声バス４２を介し
てデータ転送を行う。４３はローカルバスで、バスブリ
ッジ３７、ＣＰＵ３８、メモリ３９、ローカルバス制御
回路４０はローカルバス４３を介してデータ転送を行
う。４４はＩ／Ｏバスで、ローカルバス制御回路４０が
接続される。

【００８８】図４は図１に示す端末の構成を示すブロッ
ク図である。図４において、５１はＣＰＵボード、５２
はメモリボード、５３はバスブリッジボードである。５
４はＩ／Ｏ制御ボード、５５はＩ／Ｏ制御ボード５４に
接続され、かつＯＳが格納されたディスク装置、５６は
ＬＡＮ７に接続されたＬＡＮボードである。

【００８９】ここで、電話網８よりビデオ対応コンピュ
ータ・テレフォニー装置１に入来した映像を伴う電話信
号の映像に含まれる手話を認識し、手話の認識結果（文
字列）をオペレータに送信する映像に合成し、オペレー
タの音声を音声認識し、音声認識結果（文字列）を映像
に合成して発信者に送信する場合について説明する。

【００９０】電話網８に接続されたテレビ電話４より発
信者がビデオ対応コンピュータ・テレフォニー装置１に
電話をかけると、ビデオ対応コンピュータ・テレフォニ
ー装置１の映像音声応答ボード２０が映像を伴う電話信
号を受信する。映像音声応答ボード２０のデバイスドラ
イバは、この電話信号を映像音声応答ボード２０の回線
制御回路３１、ＣＴＩバス制御回路３２を介して電話制
御回路３３で処理する。

【００９１】回線制御回路３１は、発信者電話番号サー
ビスで得られる発信者の番号をバッファリングする。電
話制御回路３３は映像を伴う電話信号である場合には、
映像と音声の分離を行う。映像信号は、映像処理回路３
４にて復号化された後、メモリ３６に蓄積される。音声
信号は、そのままメモリ３６に蓄積される。システム
は、メモリ３６に蓄積した映像信号を、電話制御回路３
３、ＣＴＩバス制御３２、ローカルバス制御４０、Ｉ／
Ｏバス１７を介して手話認識ボード２９に転送する。

【００９２】手話認識ボード２９は、映像に含まれる手
話を認識し、認識結果（文字列）を映像音声応答ボード
２０に転送する。映像音声応答ボード２０のデバイスド
ライバは、認識結果（文字列）を、メモリ３６に蓄積さ
れた映像信号に合成する。デバイスドライバは、ＣＴＩ
バス制御回路３２、ＣＴＩコネクタ４１、ＣＴＩバス２
２を介して、内線電話接続ボード２１に対して、入来電
話信号をオペレータ＃２のテレビ電話６に接続するよう
に指示する。

【００９３】ビデオ対応コンピュータ・テレフォニー装
置１の音声応答ボード２０が映像を伴う電話信号を受信
を行った時点からオペレータ＃２のテレビ電話６に接続
するまでの映像は、映像処理回路３４にて復号化された
後、メモリ３６に蓄積され、さらに手話の認識結果（文
字列）が合成され、オペレータ＃２のテレビ電話６に接
続された時点で、メモリ３６の映像を映像処理回路３４
にて再度符号化し、メモリ３６の音声とともに、電話制
御回路３３、ＣＴＩバス制御回路３２、ＣＴＩコネクタ
４１、ＣＴＩバス２２、内線電話接続ボード２１を介し
て、オペレータ＃２のテレビ電話６に転送する。

【００９４】また、同時に、発信者の電話番号から発信
者を特定するために、情報をディスク装置２４内の顧客
データを検索する。システムは、この顧客データをＬＡ
Ｎボード１９、ＬＡＮ７、オペレータ＃２の端末３のＬ
ＡＮボード５６経由で端末３の画面上に表示する。この
時点で、発信者とオペレータ＃２はテレビ電話６を介し
て会話を開始するが、オペレータ＃２の映像を伴う電話
信号は、内線接続ボード２１、Ｉ／Ｏバス１７を介して
映像音声応答ボード２０に転送され、ローカルバス制御
回路４０、ＣＴＩバス制御回路３２を介して電話制御回
路３３で処理される。

【００９５】電話制御回路３３は、オペレータ＃２から
の映像を伴う電話信号の映像と音声の分離を行う。映像
信号は、映像処理回路３４にて復号化された後、メモリ
３６に蓄積される。音声信号は、音声処理回路３４にて
復号化された後、メモリ３６に蓄積される。システム
は、メモリ３６に格納された音声を、電話制御回路３
３、ＣＴＩバス制御回路３２、ローカルバス制御回路４
０、Ｉ／Ｏバス１７を介して、音声認識ボード２８に転
送する。

【００９６】音声認識ボード２８は、音声を認識し、映
像音声応答ボード２０に文字列として戻す。映像音声応
答ボード２０のデバイスドライバは、音声認識結果（文
字列）をメモリ３６に格納されたオペレータ＃２の映像
と合成する。さらに、映像処理回路３４、音声処理回路
３５にてテレビ電話の映像フォーマット、音声フォーマ
ットに変換し、電話制御回路３３、ＣＴＩバス制御回路
３２、回線制御回路３１を介して発信者に送信する。

【００９７】発信者の手話は、オペレータ＃２のテレビ
電話６の画面上に映し出されるとともに、テレビ電話６
の画面の下側に手話の認識結果（文字列）が字幕のよう
にスーパーインポーズされる。オペレータ＃２は、この
手話の認識結果（文字列）を見ながら発信者に対応す
る。発信者のテレビ電話の画面の下側にはオペレータ＃
２の音声の音声認識結果（文字列）が字幕のようにスー
パーインポーズされる。

【００９８】このように、本実施の形態４では、電話網
８よりビデオ対応コンピュータ・テレフォニー装置１に
入来した映像を伴う電話信号の映像に含まれる手話を認
識し、手話の認識結果（文字列）をオペレータに送信す
る映像に合成し、オペレータの音声を音声認識し、音声
認識結果（文字列）を映像に合成して発信者に送信する
ことができる。

【００９９】なお、上記実施の形態４では、電話網８よ
りビデオ対応コンピュータ・テレフォニー装置１に入来
した電話信号をテレビ電話６を備えるオペレータに接続
を行うように構成する場合を説明したが、オペレータの
端末３にテレビ電話機能を持たせて構成するようにして
もよい。

【０１００】また、上記実施の形態４では、発信者の手
話の認識結果（文字列）をオペレータのテレビ電話６の
画面の下側に字幕のようにスーパーインポーズされるよ
うに構成したが、発信者の手話認識結果（文字列）をオ
ペレータの端末３の画面に表示するように構成してもよ
い。

【０１０１】実施の形態５．以下に、本発明の実施の形
態５を図面を参照して説明する。本実施の形態は、図１
に示す実施の形態１のビデオ対応コンピュータ・テレフ
ォニー装置のシステム構成と同様であるので、図１を用
いて説明する。図１において、１はビデオ対応コンピュ
ータ・テレフォニー装置、２、３は端末、４、６はテレ
ビ電話、５はアナログ電話、７はＬＡＮ、８は電話網で
ある。１９はＬＡＮ７を介して端末２、３と接続される
ビデオ対応コンピュータ・テレフォニー装置１のＬＡＮ
ボード、２０は映像音声応答ボードで、電話網８からの
入来電話信号を受信して応答し、２１は内線電話接続ボ
ードで、電話信号を有線電話に接続する。

【０１０２】図９は図１に示すビデオ対応コンピュータ
・テレフォニー装置の構成を示すブロック図である。図
９において、１１、１２はＣＰＵボード、１３はメモリ
ボード、１４はバスブリッジボード、１５はＩ／Ｏ制御
ボード、１６はシステムバスで、ＣＰＵボード１１、１
２、メモリボード１３、バスブリッジボード１４はシス
テムバス１６を介してデータ転送を行う。

【０１０３】１７はＩ／Ｏバスで、バスブリッジボード
１４、Ｉ／Ｏ制御ボード１５とＬＡＮボード１９が接続
される。１８はＳＣＳＩバスで、ディスク装置２３〜２
６が接続される。２２はＣＴＩバスで、入来電話信号を
内線電話接続ボード２１を介してオペレータに転送す
る。２８は音声認識ボードで、オペレータの電話信号の
音声を認識し、２９は手話認識ボードで、発信者の手話
を認識する。３０は音声合成ボードで、文字列を音声に
変換する。

【０１０４】図３は図１に示すビデオ対応コンピュータ
・テレフォニー装置の映像音声応答ボードの構成を示す
ブロック図である。図３において、３１は回線制御回
路、３２はＣＴＩバス制御回路、３３は電話制御回路、
３４は映像処理回路、３５は音声処理回路、３６はメモ
リ、３７はバス・ブリッジ、３８はＣＰＵ、３９はメモ
リ、４０はローカルバス制御回路である。

【０１０５】４１はＣＴＩコネクタで、ＣＴＩバス制御
回路３２に接続される。４２は映像音声バスで、電話制
御回路３３、映像処理回路３４、音声処理回路３５、メ
モリ３６、バスブリッジ３７は映像音声バス４２を介し
てデータ転送を行う。４３はローカルバスで、バスブリ
ッジ３７、ＣＰＵ３８、メモリ３９、ローカルバス制御
回路４０はローカルバス４３を介してデータ転送を行
う。４４はＩ／Ｏバスで、ローカルバス制御回路４０が
接続される。

【０１０６】図４は図１に示す端末の構成を示すブロッ
ク図である。図４において、５１はＣＰＵボード、５２
はメモリボード、５３はバスブリッジボードである。５
４はＩ／Ｏ制御ボード、５５はＩ／Ｏ制御ボード５４に
接続され、かつＯＳが格納されたディスク装置、５６は
ＬＡＮ７に接続されたＬＡＮボードである。

【０１０７】ここで、電話網８よりビデオ対応コンピュ
ータ・テレフォニー装置１に入来した映像を伴う電話信
号の映像に含まれる手話を認識して手話の認識結果（文
字列）をオペレータに送信する映像に合成するととも
に、、手話の認識結果（文字列）を音声合成してオペレ
ータに送信する音声に合成し、オペレータの音声を音声
認識して音声認識結果（文字列）を映像に合成して発信
者に送信する場合について説明する。

【０１０８】電話網８に接続されたテレビ電話４より発
信者がビデオ対応コンピュータ・テレフォニー装置１に
電話をかけると、ビデオ対応コンピュータ・テレフォニ
ー装置１の映像音声応答ボード２０が映像を伴う電話信
号を受信する。映像音声応答ボード２０のデバイスドラ
イバは、この電話信号を映像音声応答ボード２０の回線
制御回路３１と、ＣＴＩバス制御回路３２を介して電話
制御回路３３で処理する。回線制御回路３１は、発信者
電話番号サービスで得られる発信者の番号をバッファリ
ングする。

【０１０９】電話制御回路３３は映像を伴う電話信号で
ある場合には、映像と音声の分離を行う。映像信号は、
映像処理回路３４にて復号化された後、メモリ３６に蓄
積される。音声信号は、音声処理回路３５にて復号化さ
れた後、メモリ３６に蓄積される。システムは、メモリ
３６に蓄積した映像信号を、電話制御回路３３、ＣＴＩ
バス制御３２、ローカルバス制御４０、Ｉ／Ｏバス１７
を介して手話認識ボード２９に転送する。手話認識ボー
ド２９は、映像に含まれる手話を認識し、認識結果（文
字列）を映像音声応答ボード２０に転送する。

【０１１０】映像音声応答ボード２０のデバイスドライ
バは、認識結果（文字列）を、メモリ３６に蓄積された
映像信号に合成する。次に、デバイスドライバは、認識
結果（文字列）を電話制御回路３３、ＣＴＩバス制御３
２、ローカルバス制御４０、Ｉ／Ｏバス１７を介して音
声合成ボード２９に転送する。音声合成ボード２９は、
認識結果（文字列）を音声信号に変換し、映像音声応答
ボード２０に転送する。映像音声応答ボード２０のデバ
イスドライバは、受信した音声信号を、メモリ３６に蓄
積された音声信号に合成する。

【０１１１】デバイスドライバは、ＣＴＩバス制御回路
３２、ＣＴＩコネクタ４１、ＣＴＩバス２２を介して、
内線電話接続ボード２１に対して、入来電話信号をオペ
レータ＃２のテレビ電話６に接続するように指示する。
ビデオ対応コンピュータ・テレフォニー装置１の音声応
答ボード２０が映像を伴う電話信号を受信を行った時点
からオペレータ＃２のテレビ電話６に接続するまでの映
像と音声は、映像処理回路３４または音声処理回路３５
にて復号化された後、メモリ３６に蓄積され、手話の認
識結果（文字列）が映像に合成され、手話の認識結果
（文字列）を音声合成したものが音声に合成される。そ
の後、オペレータ＃２のテレビ電話６に接続された時点
で、メモリ３６映像と音声は映像処理回路３４または音
声処理回路３５にて再度符号化し、電話制御回路３３、
ＣＴＩバス制御回路３２、ＣＴＩコネクタ４１、ＣＴＩ
バス２２、内線電話接続ボード２１を介して、オペレー
タ＃２のテレビ電話６に転送する。

【０１１２】また、同時に、発信者の電話番号から発信
者を特定するために、情報をディスク装置２４内の顧客
データを検索する。システムは、この顧客データをＬＡ
Ｎボード１９、ＬＡＮ７、オペレータ＃２の端末３のＬ
ＡＮボード５６経由で端末３の画面上に表示する。この
時点で、発信者とオペレータ＃２はテレビ電話４、６を
介して会話を開始するが、オペレータ＃２の映像を伴う
電話信号は、内線接続ボード２１、Ｉ／Ｏバス１７を介
して映像音声応答ボード２０に転送され、ローカルバス
制御回路４０、ＣＴＩバス制御回路３２を介して電話制
御回路３３で処理される。

【０１１３】電話制御回路３３は、オペレータ＃２から
の映像を伴う電話信号の映像と音声の分離を行う。映像
信号は、映像処理回路３４にて復号化された後、メモリ
３６に蓄積される。音声信号は、音声処理回路３５にて
復号化された後、メモリ３６に蓄積される。システム
は、メモリ３６に格納された音声を、電話制御回路３
３、ＣＴＩバス制御回路３２、ローカルバス制御回路４
０、Ｉ／Ｏバス１７を介して、音声認識ボード２８に転
送する。

【０１１４】音声認識ボード２８は、音声を認識し、映
像音声応答ボード２０に文字列として戻す。映像音声応
答ボード２０のデバイスドライバは、音声認識結果（文
字列）をメモリ３６に格納されたオペレータ＃２の映像
と合成する。さらに、映像処理回路３４、音声処理回路
３５にてテレビ電話の映像フォーマット、音声フォーマ
ットに変換し、電話制御回路３３、ＣＴＩバス制御回路
３２、回線制御回路３１を介して発信者に送信する。

【０１１５】発信者の手話は、オペレータ＃２のテレビ
電話６の画面上に映し出されるとともに、テレビ電話６
の画面の下側に手話の認識結果（文字列）が字幕のよう
にスーパーインポーズされるとともに、手話の認識結果
が音声合成されてテレビ電話６から音声で聞くことがで
きる。オペレータ＃２は、この手話の認識結果（文字
列）を見ながら、合成された音声を聞きながら、発信者
に対応する。発信者のテレビ電話４の画面の下側にはオ
ペレータ＃２の音声の音声認識結果（文字列）が字幕の
ようにスーパーインポーズされる。

【０１１６】このように、本実施の形態では、電話網８
よりビデオ対応コンピュータ・テレフォニー装置１に入
来した映像を伴う電話信号の映像に含まれる発信者の手
話を認識して、手話の認識結果（文字列）をオペレータ
に送信する映像に合成するとともに、手話の認識結果
（文字列）を音声合成してオペレータに送信する音声に
合成し、オペレータの音声を音声認識して音声認識結果
（文字列）を映像に合成して発信者に送信することがで
きる。

【０１１７】なお、上記実施の形態５では、電話網８よ
りビデオ対応コンピュータ・テレフォニー装置１に入来
した電話信号をテレビ電話６を備えるオペレータに接続
を行うように構成する場合を説明したが、オペレータの
端末６にテレビ電話機能を持たせて構成するようにして
もよい。

【０１１８】また、上記実施の形態５では、発信者の手
話の認識結果（文字列）をオペレータのテレビ電話６の
画面の下側に字幕のようにスーパーインポーズされるよ
うに構成したが、発信者の手話認識結果（文字列）をオ
ペレータの端末３の画面に表示するように構成してもよ
い。

【０１１９】

【発明の効果】請求項１記載の発明によれば、電話網か
ら入来する映像を伴う電話信号を受信する電話信号受信
手段と、受信された映像を伴う電話信号に基づいて応答
する電話信号応答手段と、受信された映像を伴う電話信
号をオペレータに接続する電話信号接続手段とを有する
ように構成することにより、発信者とオペレータが映像
と音声を使って会話することができるという効果があ
る。

【０１２０】請求項２記載の発明によれば、電話網から
入来する映像を認識する映像認識手段と、受信された映
像を伴う電話信号をオペレータに接続する際、認識され
た映像の内容に基づいてオペレータに自動接続する電話
信号自動接続手段とを有するように構成することによ
り、映像の内容によってオペレータに自動接続すること
ができるという効果がある。

【０１２１】請求項３記載の発明によれば、オペレータ
の音声を認識する音声認識手段と、オペレータの音声を
認識した場合、発信者に送信する映像に音声認識結果を
合成する音声認識結果合成手段とを有するように構成す
ることにより、オペレータの音声を認識した場合、発信
者に送信する映像に音声認識結果を合成することができ
るという効果がある。

【０１２２】請求項４記載の発明によれば、電話網から
入来する映像に含まれる手話を認識する手話認識手段
と、映像を伴う電話信号をオペレータに接続する際、認
識された手話認識結果を映像に合成する手話認識結果合
成手段とを有するようにこうせいすることにより、映像
を伴う電話信号をオペレータに接続する際、手話認識結
果を映像に合成することができるという効果がある。

【０１２３】請求項５記載の発明によれば、文字列から
音声を合成する第１の音声合成手段と、電話網から入来
する映像に含まれる手話を認識する手話認識手段と、電
話信号をオペレータに接続する際、手話認識手段により
認識された手話認識結果から第１の音声合成手段により
音声合成を行い、この合成された音声を入来した電話信
号の音声に合成する第２の音声合成手段とを有するよう
に構成することにより、電話信号をオペレータに接続す
る際、手話認識結果から音声合成を行い、合成された音
声を入来した電話信号の音声に合成することができると
いう効果がある。

【図面の簡単な説明】

【図１】 本発明に係る実施の形態１のビデオ対応コン
ピュータ・テレフォニー装置のシステム構成を示す図で
ある。

【図２】 図１に示すビデオ対応コンピュータ・テレフ
ォニー装置の構成を示すブロック図である。

【図３】 図１に示すビデオ対応コンピュータ・テレフ
ォニー装置の映像音声応答ボードの構成を示すブロック
図である。

【図４】 図１に示す端末の構成を示すブロック図であ
る。

【図５】 本発明に係る実施の形態２のビデオ対応コン
ピュータ・テレフォニー装置のシステム構成を示す図で
ある。

【図６】 図１に示すビデオ対応コンピュータ・テレフ
ォニー装置の構成を示すブロック図である。

【図７】 図１に示すビデオ対応コンピュータ・テレフ
ォニー装置の構成を示すブロック図である。

【図８】 図１に示すビデオ対応コンピュータ・テレフ
ォニー装置の構成を示すブロック図である。

【図９】 図１に示すビデオ対応コンピュータ・テレフ
ォニー装置の構成を示すブロック図である。

【図１０】 従来の特開平９−１６３０３１号公報に示
された接客システムの構成を示す概略図である。

【符号の説明】

１ ビデオ対応コンピュータ・テレフォニー装置、２、
３ 端末、４、６ 電話、７ ＬＡＮ、８ 電話網、１
１、１２ ＣＰＵボード、１３ メモリボード、１４
バスブリッジボード、１５ Ｉ／Ｏ制御ボード、１６
システムバス、１７ Ｉ／Ｏバス、１８ ＳＣＳＩバ
ス、１９ ＬＡＮボード、２０ 映像音声応答ボード、
２１ 内線電話接続ボード、２２ ＣＴＩバス、２３〜
２６ ディスクユニット、２７ 映像認識ボード、２８
音声認識ボード、２９ 手話認識ボード、３１ 回線
制御回路、３２ ＣＴＩバス制御回路、３３ 電話制御
回路、３４ 映像処理回路、３５ 音声処理回路、３６
メモリ、３７ バスブリッジ、３８ ＣＰＵ、３９
メモリ、４０ ローカルバス制御回路、５１ ＣＰＵボ
ード、５２ メモリボード、５３ Ｉ／Ｏブリッジ、５
４ Ｉ／Ｏ制御ボード、５５ ディスク装置、５６ Ｌ
ＡＮボード。

Claims (5)

【特許請求の範囲】
1. 【請求項１】 プロセッサが実装されたＣＰＵボード
   と、ＣＰＵボードが接続されたシステムバスと、システ
   ムバスに接続されたメモリボードと、Ｉ／Ｏバスへのブ
   リッジを行うシステムブリッジボードと、Ｉ／Ｏ制御ボ
   ードと、Ｉ／Ｏ制御ボードが接続されたＩ／Ｏバスと、
   Ｉ／Ｏ制御ボードに接続されたディスクユニットと、各
   構成要素のボードとディスクユニットに電源を供給する
   電源ユニットと、システムの管理を行うシステム管理ボ
   ードとを有するビデオ対応コンピュータ・テレフォニー
   装置において、 電話網から入来する映像を伴う電話信号を受信する電話
   信号受信手段と、受信された映像を伴う電話信号に基づ
   いて応答する電話信号応答手段と、受信された映像を伴
   う電話信号をオペレータに接続する電話信号接続手段と
   を有することを特徴とするビデオ対応コンピュータ・テ
   レフォニー装置。
2. 【請求項２】 請求項１に記載のビデオ対応コンピュー
   タ・テレフォニー装置において、電話網から入来する映
   像を認識する映像認識手段と、受信された映像を伴う電
   話信号をオペレータに接続する際、認識された映像の内
   容に基づいてオペレータに自動接続する電話信号自動接
   続手段とを有することをを特徴とするビデオ対応コンピ
   ュータ・テレフォニー装置。
3. 【請求項３】 請求項１に記載のビデオ対応コンピュー
   タ・テレフォニー装置において、オペレータの音声を認
   識する音声認識手段と、オペレータの音声を認識した場
   合、発信者に送信する映像に音声認識結果を合成する音
   声認識結果合成手段とを有することを特徴とするビデオ
   対応コンピュータ・テレフォニー装置。
4. 【請求項４】 請求項１乃至２に記載のビデオ対応コン
   ピュータ・テレフォニー装置において、電話網から入来
   する映像に含まれる手話を認識する手話認識手段と、映
   像を伴う電話信号をオペレータに接続する際、認識され
   た手話認識結果を映像に合成する手話認識結果合成手段
   とを有することを特徴とするビデオ対応コンピュータ・
   テレフォニー装置。
5. 【請求項５】 請求項１乃至２、４に記載のビデオ対応
   コンピュータ・テレフォニー装置において、文字列から
   音声を合成する第１の音声合成手段と、電話網から入来
   する映像に含まれる手話を認識する手話認識手段と、電
   話信号をオペレータに接続する際、手話認識手段により
   認識された手話認識結果から第１の音声合成手段により
   音声合成を行い、この合成された音声を入来した電話信
   号の音声に合成する第２の音声合成手段とを有すること
   を特徴とするビデオ対応コンピュータ・テレフォニー装
   置。