JPH0799540A - 音声と映像と図形解析信号を扱う電話装置及びその作動方法 - Google Patents

Abstract

(57)【要約】 【目的】 アナログ回線で音声、映像及び解析信号を同
時に送受信する装置。 【構成】 送信側の多機能電話機１０１から音声データ
パケットが第１の時間間隔の間に周期レートによりアナ
ログ回線１０２及び公衆交換電話ネットワークを経て送
信され、同じく多機能電話機１０１から映像データパケ
ット及び図式解析データパケットが音声データパケット
にインタリーブされて、第１の時間間隔に続く第２の時
間間隔の間に送信され、これにより音声データと映像デ
ータと図式解析データとが受信側の多機能電話機１０５
において同時に出力される。必要に応じて、装置全体の
制御用に制御データパケットが第２の時間間隔の間に送
信される。更に、音声データパケットが、多機能電話機
が１０１が映像送信モードにあるときに第１の周期レー
トで送信され、多機能電話機１０１が映像送信モードに
ないときに第１の周期レートよりも速い第２の周期レー
トで送信される。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、映像データの伝送に関
し、詳しくは映像データ伴うオーディオ（音声）データ
及び図形解析（graphical annotation）データの伝送に
関する。

【０００２】

【従来の技術】マルチメディア技術はオーディオ（音
声）、ビデオ、静止映像、図形、テキスト及び解析の組
み合せデータのユ−ザ間での送達が見込める新生技術で
ある。今日、アナログのチップ／リング方式電話回線で
使用可能な静止映像通信端末が種々存在する。

【０００３】

【発明が解決しようとする課題】このような製品の一例
としては、アナログ回線上で同時、実時間のカラービデ
オ及び音声通信の可能なＡＴ＆Ｔ「ビデオフォン２５０
０」がある。別の製品として、音声及び映像通信の可能
なソニー「ＰＶＴ−１１５」があるが、音声と映像との
通信は同時ではなく、又図形解析送信はできない。

【０００４】更に別の製品であるイメージデータ社の
「フォトフォン」は、図形解析を出力できるが、映像と
音声とを同時に送ることはできず、又外部電話インタフ
ェ−スを必要とする。コムテック・ラボ社の「ブィーワ
ン」は、音声と静止映像とを同時出力できるが、図形解
析の出力能力がない。

【０００５】すなわち、アナログ回線上での音声と映像
と図形解析との同時送信の可能な端末装置が引続き求め
られている。

【０００６】

【課題を解決するための手段】本発明によれば、電話装
置が音声信号と映像信号と図形解析信号とを得て、これ
ら得られた音声信号と映像信号と図形解析信号との各々
が、交換式電話ネットワークとこの電話装置とを接続す
るアナログ回線上での同時送信用に、データパケット内
の別個の論理チャネルとして符号化される。

【０００７】本発明の一態様によれば、第１手段が、上
記得られた音声信号を１群の音声データパケットに符号
化し、これら音声データパケットが、アナログ回線上で
周期的に送信される。上記得られた映像信号は１群の映
像データパケットとして符号化され、上記得られた図形
解析信号は１群の図形解析データパケットとして符号化
される。これら映像データパケットと図形解析データパ
ケットとは上記音声データパケットにインタリーブされ
て上記音声データパケットと共に上記アナログ回線上を
送信される。

【０００８】上記音声データパケットは、第１時間間隔
の間に送信され、上記映像データパケット及び前記図形
解析データパケットは、この第１時間間隔に続く第２時
間間隔の間に送信される。端末装置操作用の制御信号
が、制御データパケットとして符号化され、第２時間間
隔の間に送信される。

【０００９】本発明の別の態様によれば、音声データパ
ケットが、電話装置が映像送信モードにあるときに第１
周期レートで送信され、電話装置が映像送信モードにな
いときに第１周期レートよりも速い第２周期レートで送
信される。

【００１０】

【実施例】図１は、本発明による電話装置として、機能
を強化して構成した多機能電話機（例えば１０１、１０
５）を用いた通信システムを例示するブロック図であ
る。多機能電話機１０１は、アナログ回線（チップ／リ
ング回線）１０２、公衆交換電話ネットワーク１０３、
及びアナログ回線１０４を介して多機能電話機１０５に
接続される。多機能電話機１０１は、カメラ１０６又は
ドキュメントスキャナ１０７からビデオ入力を取得し、
若しくはビデオディスプレイ１０８上でビデオ映像を表
示する。

【００１１】カメラ１０６はビデオムービーカメラ（カ
ムコーダ）又はスチルビデオカメラである。カメラ１０
６は又、映像を撮影するために多機能電話機１０１から
取り外され、映像を送信するために多機能電話機１０１
に接続される。ビデオディスプレイ１０８は、テレビモ
ニタでもよいし、パーソナルコンピュータ（ＰＣ）のモ
ニタでもよい。

【００１２】図形解析装置１１４（例えばスタイラス、
マウス、又は同等品）は、表示されているビデオ映像に
図形解析を加えるのに用いられる。この解析信号も又、
アナログ回線上を多機能電話機１０１によって送信され
る。多機能電話機１０１は、音声電話機の通常の構成部
品であるダイヤルパッド、スピーカフォン、及び種々の
機能ボタンを有する。多機能電話機１０１は又、付随す
る図形解析を含む複数の映像と音声解析とを記憶するた
めのメモリを有する。

【００１３】多機能電話機１０１及び１０５は両方共、
全ての動作モードについて全二重送受信モードで作動す
る。

【００１４】後に詳細に述べるように、多機能電話機
は、最初に音声、映像、及び解析信号を取得後、音声信
号を１群の音声データパケットに符号化し、映像信号及
び図形解析信号を、それぞれのデータパケットに符号化
する。そして映像データパケット及び図形解析データパ
ケットは、音声データパケットにインタリーブされ、ア
ナログ回線上を周期レートで送信される。

【００１５】受信側の多機能電話機１０５においては、
映像データパケット及び図形解析データパケットにイン
タリーブされた音声データパケットがアナログ回線を介
して受信され、復号化され、適切な装置へ出力される。
多機能電話機１０５は、映像信号及び解析信号をビデオ
ディスプレイ１０９又はパーソナルコンピュータ（Ｐ
Ｃ）１１３のディスプレイに表示する。

【００１６】多機能電話機１０５は、ビデオ映像を、内
部メモリ、若しくはビデオフロッピーディスク１１２、
ビデオテープレコーダ１１１、又はＰＣ１１３のハード
ディスク等の外部記憶装置に記憶させてもよい。又、多
機能電話機１０５が、表示された映像のハードコピーを
別のビデオ又はレーザプリンタ、若しくはＰＣ１１３の
プリンタを介して出力するようにしてもよい。

【００１７】尚、例示の目的で、それぞれ異なる外部装
置が送信側の多機能電話機１０１及び受信側の多機能電
話機１０５に接続されているものとして説明したが、ど
れか又は全ての外部装置を多機能電話機１０１又は１０
５に接続するようにしてもよい。

【００１８】以下、多機能電話機１０１及び１０５の間
の一般的な通信手順について簡単に説明する。多機能電
話機１０１のユ−ザが送受器を外し（オフフック）、多
機能電話機１０５の電話番号をダイヤルして通常のアナ
ログ音声接続を設立する。その後、発呼者と被呼者とが
音声会話を実行する。

【００１９】音声接続が設立されると、発呼者又は被呼
者は、それぞれの多機能電話機の映像送信ボタンを押す
ことにより映像接続を設立することができる。映像送信
ボタンが押されると、設立されたプロトコルに従って各
多機能電話機が、アナログ音声接続モードからディジタ
ル映像接続モードに切り替わる。

【００２０】ディジタル映像接続モードにおいては、音
声信号に加えて、カメラ１０６、ドキュメントスキャナ
１０７、又は内部メモリ（例えば前に記憶された映像）
から得られた映像信号が、公衆交換電話ネットワーク１
０３を介して多機能電話機１０５に送られ、そこで映像
信号はモニタ（ビデオディスプレイ１０９）に表示さ
れ、音声信号はスピーカフォンを介してに出力される。
どちらの多機能電話機のユ−ザも、映像送信の一時停
止、又は取消ができる。

【００２１】又本発明によれば、どちらの多機能電話機
のユ−ザも、音声通信の継続と、ビデオディスプレイ１
０８又は１０９に表示されているビデオ映像に対する図
形解析の実行との両方でも片方でもできる。表示された
ビデオ信号についての図形解析実施の間になされたユ−
ザコメント（音声による解析）が図形解析と同期した状
態で確実に送られるように、どちらの側の端末からの音
声信号及び図形解析信号も、インタリーブ（相互中間挿
入）されたフォーマットで送受信される。

【００２２】更に、もしビデオ映像がが記憶される場
合、オプションとして、付随する図形解析と音声による
解析とがこのビデオ映像と共に記憶される。図形解析
は、図形解析は、音声解析に付随させて、又は付随させ
ずに、別個に記憶される。これら記憶された映像及び図
形解析は、任意にアクセス又は表示することができる。
音声又は映像電話呼は、送受器をかける（置く）ことに
よって音声電話呼の通常の仕方で終結される。

【００２３】図２は、本発明実施状態を説明するのに便
利な電話装置としての多機能電話機（例えば符号１０
１）のブロック図である。多機能電話機は、ビデオ入力
装置２３１（例えばカメラ１０６）からアナログビデオ
信号を受信してビデオ出力装置２３２（例えばビデオデ
ィスプレイ１０９）にアナログビデオ信号を出力するア
ナログビデオ信号プロセッサ２２０を有する。これらの
アナログ信号は、標準ＮＴＳＣ又はＰＡＬ方式のビデオ
フォーマットによる通常のアナログビデオ信号である。

【００２４】アナログビデオ信号プロセッサ２２０は
又、解析装置２３３（例えばペンマウス）から図形解析
信号を受信する。アナログビデオ信号プロセッサ２２０
はディジタル信号プロセッサ（ＤＳＰ）２２１、入出力
（Ｉ／Ｏ）ポ−ト制御装置２２２、ＮＴＳＣ／ＰＡＬビ
デオ信号符号器／復号器（コーデック）２２７、並びに
ＤＳＰが用いるデータとプログラムとを記憶するための
ＲＡＭ２２３、ＲＯＭ２２４、及びＶＲＡＭ（フレ−ム
バッファ）２２５からなるメモリを有する。

【００２５】ビデオ信号は、ビデオ入力装置２３１によ
って生成され、復号器２２７によって復号化され、アナ
ログ／ディジタル（Ａ／Ｄ）変換器２２６によってディ
ジタル信号に変換され、フレ−ムバッファ（ＶＲＡＭ）
２２５に記憶され、ＤＳＰ２２１によって処理される。
又、解析装置２３３から受信された図形解析信号は、Ｉ
／Ｏポ−ト制御装置２２２を介してＤＳＰ２２１に結合
されて、ここで処理される。

【００２６】ＤＳＰ２２１は、周知の写真映像用映像圧
縮国際基準ＪＰＥＧを用いた、後に述べる映像強調処理
によって、映像信号を圧縮する。ＤＳＰ２２１は又、周
知のチェーン符号化処理により図形解析信号を符号化し
て圧縮する。そして映像信号と解析信号とには、後に述
べる手順を用いて相互付随関係が与えられる。この組み
合わされた情報は、パス２３５を経てホストプロセッサ
２６０へ送られる。ＤＳＰ２２１は、ビデオ信号入力装
置２３１から受信されたビデオ信号の処理を制御する映
像マネージャープログラムを利用する。

【００２７】通常のディスプレイマネージャープログラ
ムが、ビデオ信号出力装置２３２（例えばビデオディス
プレイ）に出力されるテキスト又は図形若しくはそれら
の両方、の処理及び表示を制御する。解析マネージャー
プログラム（図１２）が、解析装置２３３から受信され
た解析信号の処理を制御する。周辺マネージャープログ
ラムが、多機能電話機に接続された解析装置２３３、プ
リンタ１１０、及びＰＣ１１３にインタフェ−スするＩ
／Ｏポ−ト制御装置２２２を制御する。

【００２８】ＰＣ２３４とＤＳＰ２２１とがパラレルポ
−トを介して接続される。ＰＣ上でのマイクロソフトウ
インドウ３.１ のアプリケーションソフトウエアの動作
が、ＲＯＭに常駐する基本的なパラレルポ−トドライバ
及び他のユーティリティプログラムによってサポートさ
れる（マイクロソフトウインドウ３.１ はマイクロソフ
ト社の商標）。このＰＣアプリケーションが、この作業
についてパラレルポ−トを初期化し立ち上げる。

【００２９】ＤＳＰ２２１が、ウインドウプログラムに
用いられるビットマップ映像用にＪＰＥＧ相互交換ファ
イルフォーマットと .ＢＰＭファイルフォーマットとの
間の変換を行う。映像がＰＣに転送されると、この映像
に対して多機能電話機はもはや制御を行わず、ＰＣのア
プリケーションプログラムが引き継ぐ。

【００３０】ユ−ザは、ＰＣディスクから映像を検索し
て映像ウインドウに取り出す。この映像は、合意された
フォーマット（例えば、.ＢＰＭ） でビデオ信号プロセ
ッサ２２０にダウンロードされる。映像がビデオプロセ
ッサ２２１に入ると、この映像は、ビデオ入力装置２３
１（例えば、ビデオムービーカメラ）から来たかのよう
に取り扱われる。

【００３１】音声信号プロセッサ２４０は、スピーカフ
ォン２５１又は送受器から音声信号を受信する。この音
声信号は、標本採取（サンプリング）（例えば２０ｍｓ
ごとに）され、アナログ／ディジタル（Ａ／Ｄ）符号器
／復号器（コーデック）２４２によってディジタル化さ
れ符号化され、ディジタル信号プロセッサ（ＤＳＰ）２
４１によって圧縮され処理されて ６.８Ｋｂ／ｓ圧縮デ
ィジタル信号となり、パス２４３に出力される。

【００３２】ＤＰＳ２４１は、コ−ド励起線形予測プラ
ス（ＣＥＬＰプラス）アルゴリズムを用いて受信音声信
号を圧縮する。このアルゴリズムは、音声（スピーチ）
パラメータを抽出するもので、抽出されたパラメータ
は、各１バイトの１７個のパラメータに変換される。す
なわち、各２０ｍｓの音声が１７バイトの１個のディジ
タル音声信号となる。ＤＳＰ２４１が、オーディオマネ
ージャープログラムを用いて音声信号処理の制御を行
う。

【００３３】ホストプロセッサ２６０は、ホストプロセ
ッサ２６０の機能を実行するために用いられるデータ及
びプログラムをそれぞれ記憶するためのプロセッサ２６
１、ＲＡＭ２６０、及びＲＯＭ２６３を有する。ホスト
プロセッサ２６０は、音声信号プロセッサ２４０からパ
ス２４３を介して圧縮ディジタル音声信号を受信し、又
アナログビデオ信号プロセッサ２２０からパス２３５を
介して受信されたディジタル化された圧縮映像信号及び
解析信号を、ＪＰＥＧインタフェ−ス２６５を介して受
信する。

【００３４】ホストプロセッサ２６０は更に、キーパッ
ドユニット２５２（図３）及びスイッチフック２５３に
おけるユ−ザの入力に応答して、キーパッドプロセッサ
２５８からパス２５４を介して制御信号を受信する。こ
れらのユ−ザ入力（例えばボタン押し下げ）は、多機能
電話機１０１と公衆交換電話ネットワークとのアナログ
音声モード又はディジタル通信接続を設立するために用
いられる。

【００３５】プロセッサ２５２ａは、音声電話マネージ
ャープログラムを用いてキーパッドユニット２５２及び
スピーカフォン２５１の動作を制御する。ホストプロセ
ッサ２６０は、パス２６４を介してモデム２８０にディ
ジタル音声及び映像信号を出力する。

【００３６】モデム２８０は、ディジタル信号プロセッ
サ（ＤＳＰ）２８１、Ａ／Ｄ変換符号器／復号器（コー
デック）２８２、アナログインタフェ−ス回路２８３、
及びデータポンプ（ＣＡＭＩＬ２）２８４を有する。モ
デム２８０のＤＳＰ２８１は、モデムマネージャープロ
グラムの制御を受けて作動する。ＤＳＰ２８１は、標準
のＶ.３２ ＢＩＳモデム（２８００ボー（ｂａｕｄ）及
び３２００ボーで多次元符号化を行うための拡張付き）
を用いて９.６、１４.４、１８.８、及び１９.２ｋｂｐ
ｓのデータレートを得る。

【００３７】モデム２８０は、急速起動プロセスを用い
ることによって映像交換動作の開始までのユ−ザの待ち
時間を最短化させる。この目的のために、フェーズロッ
ク・ループを含む、回線特性表示プロセスによる通常の
起動方法が用いられる。

【００３８】モデム２８０のアナログインタフェ−ス回
路２８３は、パス２５６を介してパワースイッチユニッ
ト２５５からディジタルインタフェ−ス制御信号を受信
する。ディジタルインタフェ−ス制御信号は、ユ−ザが
送信ボタン３１０（図３）を押したことに応答して送ら
れる信号で、この信号によってモデム２８０のディジタ
ル接続モード設立が可能化され、その結果として公衆交
換電話ネットワークを介してのディジタルデータの送信
が可能となる。

【００３９】ＤＳＰ２８１は、コーデック２８２とデー
タポンプ２８４とを制御して、パス２６４を介して受信
されたディジタル及び音声信号からディジタルデータ信
号を生成させる。このディジタルデータ信号は、パス２
５８を介してチップ／リング（Ｔ／Ｒ）回線インタフェ
−ス回路２９０に出力される。モデム２８０は、送信ボ
タンの作動に応答して、開始信号を、公衆交換電話ネッ
トワーク１０３を介して被呼側すなわち他端の多機能電
話機に送る。

【００４０】この開始信号によって、公衆交換電話ネッ
トワーク１０３内のエコー抑圧及び等化の機能を使用不
能化させる。このディジタル接続セットアップの間は、
音声が無音（ミュート）化される。被呼側の多機能電話
機におけるモデムは、常に開始信号受信を待つ聴取状態
に置かれる。

【００４１】モデム２８０は、送信について最高のデー
タレート（すなわち １９.２ｋｂ／ｓを利用しようと試
みる。もしアナログ回線（例えば１０２）が最高データ
レートを取り扱うことができない場合には、モデム２８
０は、許容可能なエラーレート状態が得られるまで、順
次すぐ下のデータレートの利用を試みる。このような例
は、例えば回線に雑音が多い、又は発呼側と被呼側とで
電話装置の仕様が同一でない等の場合に生じる。

【００４２】Ｔ／Ｒ回線インタフェＤ−ス回路２９０
は、多機能電話機１０１をアナログ回線１０２と公衆交
換電話ネットワーク１０３とにインタフェ−スする。Ｔ
／Ｒ回線インタフェ−ス回路２９０は又、自動応答回路
２９１を介してキーパッドユニット２５２の回路に接続
される。パワースイッチユニット２５５は、パス２５９
を介してプロセッサ２５２ａから受信された制御信号に
制御されて作動する。一方、プロセッサ２５２ａはホス
トプロセッサ２６０に制御されて作動する。

【００４３】多機能電話機１０１が音声モードで接続さ
れているとき（すなわちビデオ送信ボタンが押されてい
ないとき）には、スピーカフォン２５１からの音声信号
は、パワースイッチユニット２５５を介しパス２５７を
経てＴ／Ｒ回線インタフェ−ス回路２９０に結合され
る。ビデオディジタル接続モードの間は、パワースイッ
チユニット２５５が、スピーカフォン２５１からの音声
信号のパス２５７上での出力を妨げるように作動する。

【００４４】代わりに、スピーカフォン２５１からの音
声信号は、音声信号プロセッサ２４０及びホストプロセ
ッサ２６０によって処理され、映像信号と共にモデム２
８０を介して出力される。

【００４５】パワースイッチユニット２５５は、プロセ
ッサ２５２ａの制御の下にパス２５６を介しディジタル
インタフェ−ス制御信号を用いてモデム２８０の動作を
制御する。このディジタルインタフェ−ス制御信号は、
ユ−ザによるビデオ送信ボタンの操作に応答してプロセ
ッサ２５２ａによって生成される信号である。

【００４６】次に図３を参照して、多機能電話機１０１
のキーパッドユニット２５２について説明する。キーパ
ッドユニット２５２及びスピーカフォン２５１の動作
は、音声電話マネージャープログラムを用いてプロセッ
サ２５２ａによって制御される。ダイヤルパッドボタン
３０１、スピーカフォン３０２、音量調整ボタン３０
３、「保留」（ホールド）ボタン３０４、「無音」（ミ
ュート）ボタン３０５、及び「再ダイヤル」ボタン３０
６が、それぞれの周知の機能を行う。

【００４７】「送信」ボタン３１０は、映像電話機の動
作モードをアナログ音声呼モードからディジタル呼モー
ドに変えるのに用いられる。接続を設立させる動作中
は、この「送信」ボタンに付随する発光ダイオード（Ｌ
ＥＤ）が点滅し、接続が成功するとＬＥＤは点灯状態の
ままとなる。「取消」ボタン３１１は、「送信」ボタン
３１０の効果を取り消すのに用いられる。すなわち、
「取消」ボタン３１１は、「送信」ボタン３１０が押す
つもりでないのに不注意に押されたときに用いられる。

【００４８】そして「取消」ボタン３１１により、映像
送受信が停止され音声送信は継続するが、呼はディジタ
ルモードに留まるという状態が得られる。「フラッシ
ュ」ボタン３０７は、多機能電話機１０１の動作をアナ
ログ音声モードに戻す。

【００４９】「記憶」ボタン３１３は、現在表示されて
いる映像を次に利用可能なメモリ所在位置に記憶するの
に用いられる。この映像を記憶後にもし残りの利用可能
な映像記憶スペースが別の追加映像を記憶するのに要す
るスペースより少ない場合には、警告メッセ−ジ及びア
ドバイス／ヘルプメッセ−ジが表示される。

【００５０】「消去」ボタン３１２は、現在表示されて
いる映像のメモリからの消去を行う。もし受信された映
像が離れた場所からのものである場合には、受信バッフ
ァの内容が消去される。もし映像電話機がローカルビデ
オモードにある場合には、「消去」ボタン３１２を押し
ても何の効果も生じない。

【００５１】「メニュー」ボタン３１４を押すと、メニ
ューが表示される。メニューによって、ユ−ザが種々の
オプション及び映像管理機能をセットアップすることが
可能となる。メニュー項目を選択するには、ダイヤルパ
ッドボタン３０１がカーソルボタンとして用いられる。

【００５２】「メモリ」ボタン３１５を押すと、多機能
電話機１０１に記憶されている全ての映像の表示が可能
である。「次」ボタン３１６と「前」ボタン３１７とで
ユ−ザが、記憶されている映像のうちから表示したい映
像を選択できる。

【００５３】「最後入」ボタン３１８は、離れた側から
最後の受信された映像を表示するのに用いられる。「プ
レビュー」ボタン３１９は、生ビデオ入力と入力ビデオ
のフレ−ム静止とを切り換えるトグルスイッチである。

【００５４】［多機能電話機送信動作］図１〜図３、図
４、図５、図８〜図１１を併せ参照して多機能電話機の
動作について説明する。多機能電話機は最初に、ステッ
プ４０１に示すようにオンフック状態にある。ステップ
４０３において、多機能電話機はユ−ザの送受器持ち上
げ又はスピーカフォンボタン３０２押し下げに応答し
て、オフフック状態に変わる。

【００５５】ステップ４０５において、もしダイヤル音
（ト−ン）が受信されない場合、ユ−ザは、送受器を受
台に戻すか又はスピーカフォンボタン３０２を押し下げ
るかして多機能電話機をオンフック状態（ステップ４０
１）に戻す。もしダイヤルト−ンが受信された場合は、
ステップ４０７においてユ−ザは、ダイヤルパッドボタ
ン３０１を用いて手動で、又は再ダイヤルボタン３０６
を用いて自動で、被呼者の電話番号をダイヤルする。

【００５６】ステップ４０９において、もし被呼者が呼
に応答しない場合、発呼者は、多機能電話機をオンフッ
ク状態（ステップ４０１）に戻す。もし被呼者が呼に応
答した場合は、被呼者所在地と発呼者所在地との間にア
ナログ音声モードの接続が設立される。このアナログ音
声モードの接続は、発呼者の多機能電話機と被呼者の多
機能電話機又は通常電話機との間に設立される。以下の
説明においては、発呼者及び被呼者の両方が多機能電話
機を用いる場合を仮定する。

【００５７】ステップ４１３において、もし発呼者又は
被呼者のいずれかが映像送信を望まない場合、ステップ
４１４に示すように発呼者又は被呼者のいずれかが会話
終結を望むまで、通常のアナログ音声信号を用いて音声
会話が続く。

【００５８】ステップ４１３において、もし発呼者が被
呼者所在場所へ映像を送信しようと決めた場合には、次
のステップ４１５においてユ−ザがビデオソース（源）
を選択し、ステップ４１６において、送信ボタン３１０
を押す。前に述べたように、ビデオソースは、カメラ１
０６（例えばビデオムービーカメラ）又はドキュメント
スキャナ１０７である。ステップ４１７において音声接
続が無音化され、多機能電話機が Ｖ.２５アンサート−
ンを発する。

【００５９】その後、多機能電話機１０１のモデム２８
０が Ｖ.３２ＢＩＳ起動シーケンス信号を発する。前に
述べたように、この起動信号は公衆交換電話ネットワー
ク１０３におけるエコー抑圧及び等化の機能を使用不能
化させる。ステップ４１９において、もしビデオ接続が
成功しない場合、アナログ音声モードが戻り、適切なメ
ッセ−ジが、モニタであるビデオディスプレイ１０８上
に表示される。

【００６０】もしビデオ接続が成功しない場合には、物
理層処理ステップ４２１及び４２３が実行される。ステ
ップ４２１においては、被呼者及び発呼者それぞれの多
機能電話機が相互に通信連絡を取り両者間の通信にとっ
て最適のデータレートを設立する。前に述べたように、
モデムは、最高のデータレートでディジタル接続を設立
しようとする。このセットアップ時間中、音声は無音化
される。

【００６１】ステップ４２３において、発呼者及び被呼
者の多機能電話機は、標準のハイレベルデータリンク制
御（ＨＤＬＣ）プロトコルシーケンスを用いてリンク層
「ＬＡＰＢプラス」を設立する。ステップ４２５におい
て、もしステップ４２１及び４２３が成功しなかったと
判断される場合、アナログ音声モードが戻る。ステップ
４２５において、もしステップ４２１及び４２３が成功
と判断される場合は、リンク層は完成で、ステップ４２
７において、ネットワーク層Ｘ.２５ が設立される。そ
の後、再起動表示メッセ−ジが送られ、多機能電話機は
確認メッセ−ジを待つ。

【００６２】ステップ４２９においてもしステップ４２
７が成功しなかったと判断されると、アナログ音声モー
ドが再設立される。ステップ４２９においてもしステッ
プ４２７が成功と判断されると、ネットワーク層は完成
で、ステップ４３１（図５）において、オフフックディ
ジタル通信モードが設立され、多機能電話機の音声及び
映像信号送信準備が完了し、多機能電話機は今、アプリ
ケーション層シーケンスにある。

【００６３】ステップ４３２において、もしフラッシュ
ボタン３０７が押されると、プロセスはステップ４１１
（図４）に戻り、もし押されない場合にはステップ４３
３が実行される。

【００６４】ステップ４３３において、多機能電話機
が、映像が送信されることになっているかどうかを定め
る。もしユ−ザが映像の送信ボタンを押さなかった場
合、映像は送信されず、ステップ４３５及び４３７にお
いて、プロセッサ２６１が高速音声更新レート（図８の
符号６００映像のない場合の送信シーケンスを参照）で
音声データパケットを送る。

【００６５】ステップ４３７において、音声信号（ステ
ップ４４０において生成）が音声パケットに符号化され
て、別に符号化された制御信号パケット（ステップ４３
８において生成）に、又は符号化された解析信号パケッ
ト（ステップ４３９において生成）に、あるいはこれら
の両方にインタリーブされ、アナログ回線１０２を介し
て送られる。

【００６６】この、音声信号パケットと解析信号パケッ
トとのインタリーブ処理の結果、これら２種類の信号の
間がほぼ同期することとなる。その後、プロセスはステ
ップ４３２に戻る。

【００６７】ここで図８を参照すると、もし映像送信が
ない（ステップ４３３において映像送信コマンドが送ら
れない）場合、ディジタル化された音声信号サンプルが
第１予め定められたレート（本例では４０ｍｓ）で周期
的に（時間長さＡの間）セットされることが判る。

【００６８】前に述べたように、音声信号プロセッサ２
４０が、２０ｍｓのアナログ音声信号ごとに１個の１７
バイトのディジタル化された音声信号サンプルを形成す
る。ディジタル信号プロセッサ（ＤＳＰ）２４１から
の、２個の２０ｍｓのアナログ音声信号長さを表す２個
の１７バイトのディジタル化された音声信号サンプル
が、プロセッサ２６１によって図９の１個の音声データ
パケット送信メッセ−ジ７１０にパッケージされる。

【００６９】次に、図７を参照して、アプリケーション
層パケットメッセ−ジについて説明する。符号７１０
は、リンク層の音声データパケット送信メッセ−ジで、
１個の「ＬＡＰＢプラス」と複数の音声フレ−ム（ステ
ップ４４０において生成されステップ４３７において送
られる）とを有する。

【００７０】音声フレ−ムの構成を符号７２０に示す。
音声フレ−ムは、フラッグセグメント７２１、アドレス
セグメント７２２、制御セグメント７２３、データセグ
メント７２４、エラー点検セグメント７２５、及びフラ
ッグセグメント７２６からなる。

【００７１】フラッグセグメント７２１は長さ１バイト
で、これによってフレ−ムが識別される。アドレスセグ
メント７２２は２バイトのアドレスフィールドで、これ
によって音声フレ−ムが識別される。制御セグメント７
２３は長さ１バイトで、流れ制御信号を与え、フレ−ム
形式をデータ又は制御として定義する。エラー点検セグ
メント７２５は、エラー点検の目的で１個の２バイトの
周期的冗長コ−ド（ＣＲＣ）を有する。音声フレ−ム
は、そのＣＲＣ中にエラーが検出された場合には廃棄さ
れる。

【００７２】データセグメント７２４は長さ３４バイト
で、２個の１７バイトの音声サンプルを有する。もう１
個のフラッグセグメント７２６は長さ１バイトで、これ
で音声フレ−ム７２０が完結する。則ち、音声フレ−ム
７２０は、４１バイトの長さとなる。

【００７３】もしデータ送信レートを１４.４Ｋｂｐｓ
と仮定すると、音声フレ−ム７２０の送信には約２３ｍ
ｓの時間がかかる。図８において、音声フレ−ム７２０
は、映像データのない場合の送信シーケンス６００のう
ちのセグメントＡ（６０１）を占める。したがって、次
の音声フレ−ム又はメッセ−ジ６０３が送られることに
なるまでに１７ｍｓ（セグメントＢ（６０２））が残
る。このセグメントＢは、解析又は制御信号（それぞれ
ステップ４３９又は４３８で生成）を送るのに用いられ
る。

【００７４】もしユ−ザが１個以上のボタンを押す場
合、これらのボタンに対応する機能信号はキーパッドの
プロセッサ２５２ａによって１個以上のバイトを用いて
符号化され、ステップ４３７又は４３８において、セグ
メントＢの制御フレ−ムの一部として（制御フィールド
７２３はこれが制御メッセ−ジであることを表示す
る）、セグメントＡの音声フレ−ム７２０と共に送られ
る。

【００７５】制御メッセ−ジフレ−ムは音声フレ−ム７
２０と同じフォーマットを有し、データセグメント７２
４はディジタル化された音声でなく制御データを含む。

【００７６】更に、ステップ４３９において、もし図形
解析信号がユ−ザによって生成される場合（後に図１１
を参照して説明する）、この解析信号は、セグメントＢ
内の別の解析フレ−ムメッセ−ジとしてこれ独自で送信
できる。なお、解析信号及び制御信号は両方共、セグメ
ントＢ内の別個のフレ−ムメッセ−ジとして送られる。
なお又、制御フィールド７２３は、データフィールド７
２４が制御データか又は解析データかを指定する。

【００７７】もしセグメントＢ（６０２）内に制御信号
及び解析信号の両方を送る十分な時間長さがない場合、
これらの信号のうちの１つは次のセグメントＢ（６０
４）において送信される。

【００７８】図５のステップ４３３に戻って、もしプロ
セッサ２６１が、ユ−ザが映像送信を望むと判断した場
合、多機能電話機１０１は１００ｍｓの音声信号更新レ
ートを用いる。そしてステップ４４２において、音声送
信が映像データ送信と共に、図８の符号６１０で示すよ
うに実行される。

【００７９】１００ｍｓの周期的音声信号更新レートを
用いるということは、各５個の音声信号サンプルがセグ
メントＡ（６１１、６１３、６１６等）ごとに周期的に
送られ、映像データ、制御信号、又は解析信号がセグメ
ントＢ（６１２、６１４、６１６等）ごとに送られるこ
とを意味する。

【００８０】送信方法としては、２個の音声信号サンプ
ルが４０ｍｓごとに送られるのではなく、５個の音声信
号サンプルが１００ｍｓごとに送られるので、受信側の
多機能電話機での音声品質は少し低くなる。なお、音声
信号サンプルは全て送信されるのであって、品質低下と
いっても、共に送信される映像又は解析信号との同期が
少しずれるだけである。

【００８１】映像データ同時送信モードにおいては、プ
ロセッサ２６１が、セグメントＡにおいて送信する前に
まず各２０ｍｓの５個の音声信号サンプルを集める。し
たがって、図９のデータフィールドのサイズは、５×１
７バイトすなわち８５バイトである。図８の符号６１１
において、セグメントＡの全長は９２バイトで、送信に
約５１ｍｓの時間がかかる。そして、残りの４９ｍｓが
セグメントＢ（６１２）における映像、制御、又は解析
信号送信用に用いられる。

【００８２】符号６２０に示すように、第１セグメント
Ｂ（６１２）には制御信号６２１の送信要求が含まれる
（図５のステップ４３３）。又、もし離れた多機能電話
機によって適切に受け入れ確認がされた場合には、映像
送信コマンド６２２も含まれる（図５のステップ４４
９）。

【００８３】次の５個の音声信号サンプルがセグメント
Ａ（６１３）で送信された後、映像パケットがセグメン
トＢ（６１４、６１６等）によって送られる。符号６３
０に、５個の映像パケット（映像パケット１〜５）を含
む一般的なセグメントＢを示す。５個の映像パケットが
送られた後、ホストプロセッサ２６０は、これらパケッ
トが適切に受信された旨の受信確認を待つ。

【００８４】Ｘ.２５ によって要求される適切な受信確
認プロトコルが得られるように、映像パケットは各々、
図１０に示すネットワーク層フォーマットの映像、解
析、及び監視メッセ−ジパケット構造８１０を用いて送
信される。映像データは、１回に１２バイトずつ送られ
（ユ−ザデータ８１７）、残るフィールド８１１〜８１
６用に必要なのは４バイトである。

【００８５】ここで図１０を参照して符号８１０に示す
映像、解析、及び監視メッセ−ジのパケット構造につい
て説明する。メッセ−ジ８１０は、グループフレ−ム見
出し（ＧＦＩＤ）８１１、論理グループ８１２、論理チ
ャネル８１３、送信シーケンス８１４、受信シーケンス
８１５、Ｍビット８１６、及びユ−ザデータ８１７のフ
ィールドからなる複数のセグメントで構成される。

【００８６】グループフレ−ム見出し８１１は、グルー
プフレ−ム番号を識別特定する。論理グループ８１２
は、信号ソース（源）のグループ番号を識別特定する。
論理チャネル８１３は、複数のチャネル形式のうちの１
つを指定する。これらのチャネル形式は、独自の２進数
によって各々識別される監視、映像、又は解析の形式で
ある。

【００８７】論理チャネル８１３の形式は、このメッセ
−ジフレ−ム８１０に含めて送信されるユ−ザデータフ
ィールド８１７の形式を識別特定する。したがって、も
し論理チャネルが監視形式メッセ−ジを表示する場合、
監視データはデータフィールド８１７内にある。監視コ
マンドの例としては、キーボタン押し下げ、セット能力
の交換、及び映像送信許可のメッセ−ジが挙げられる。
図形解析信号については別の項で後に述べる。

【００８８】送信シーケンス８１４は、このメッセ−ジ
８１０についての識別番号である。受信シーケンス８１
５は、他端（反対側）の電話端末から最後に正しく受信
されたメッセ−ジは何であるかを他端に伝えるものであ
る。Ｍビット８１６は、別のフレ−ムが続くことを示す
継続表示ビットである。

【００８９】ネットワーク層メッセ−ジであるメッセ−
ジ８１０によって、多機能電話機１０５が最後に正しく
受信した映像メッセ−ジパケットが何であるかを多機能
電話機１０１が知ることが可能となる。したがって、正
しく受信されなかった映像パケットとそれに続くパケッ
トとが、次のセグメントＢの間に送られる次の５個の映
像パケットの一部として再送信される。

【００９０】例えば、図６において、映像パケット１〜
５が前のセグメントＢ（６１４）で送られ、パケット４
にエラーがあった場合、次のセグメントＢ（６１６）に
おいてホストプロセッサ２６０が、パケット４及び５を
再送し続いて新しい映像パケット６、７、及び８を送
る。

【００９１】図１０に戻って、ネットワーク層メッセ−
ジ８１０は、１２バイトの映像パケット８１７１個と４
バイトのネットワーク層オーバヘッド（フィールド８１
１〜８１６）からなるようにフォーマットされる。そし
てこのネットワーク層メッセ−ジ８１０は、リンク層メ
ッセ−ジである音声フレ−ム７２０のデータフィールド
７２４になる。したがって、リンク層メッセ−ジ７２０
は、映像データモードにおいて映像パケット当り２３バ
イト（１６＋７（オーバヘッド分））を有することとな
る。

【００９２】図８の符号６３０に示すように、映像パケ
ットは、５個まで１個のセグメントＢ（６１４）の間に
送信可能である。その後、送信側（発呼側）の多機能電
話機は、他端（被呼側）の多機能電話機からの受信確認
信号を待つ。

【００９３】代わりに、符号６４０に示すように、セグ
メントＢには映像パケット、制御信号、及び解析信号の
組み合せを入れることもできる。

【００９４】図５に戻って、ステップ４４３において、
発呼側の多機能電話機が、映像メッセ−ジ送信要求を発
して被呼側多機能電話機からの許可付与メッセ−ジを待
つ。ステップ４４５において、もし許可が拒否された場
合、ステップ４４７において発呼側多機能電話機のモニ
タにメッセ−ジが表示される。ステップ４４５において
もし許可が付与された場合は、ステップ４４９におい
て、映像送信開始コマンドが送られ、多機能電話機が映
像パケットを送信する。

【００９５】次にステップ４５１において、もし受信確
認信号が他端から受信されない場合、ステップ４４９が
繰り返される。もし受信確認信号が受信された場合、ス
テップ４５３において、１群の映像パケット（本例では
５個）が送られる（前に図８の符号６３０を参照して述
べた通り）。

【００９６】ステップ４５５において、多機能電話機１
０１が肯定的な受信確認を待つ。ステップ４５７におい
て、もし Ｘ.２５エラーメッセ−ジが受信されない場
合、ステップ４５９において、次の５個の映像パケット
が送信される。

【００９７】もし Ｘ.２５エラーメッセ−ジが受信され
た場合、ステップ４６１において、（前に図８の符号６
１０を参照して述べたように）最後に正しく受信された
映像パケットに続く全てのパケットを含む５個の映像パ
ケットが送信される。

【００９８】ステップ４６３において、映像の終を表示
する映像終了マーカが検出されたかどうかが定められ
る。もし映像終了マーカが検出されない場合、プロセス
はステップ４４９に戻る。もし映像終了マーカが検出さ
れた場合は、ステップ４６５において、多機能電話機が
映像送信終了コマンドを送る。

【００９９】その後、ステップ４６７において、もし受
信確認信号が受信されない場合、ステップ４６５が繰り
返される。そうでなく、受信確認信号が受信された場合
には、ステップ４６９において、適切なメッセ−ジがモ
ニタに出力され、多機能電話機はディジタルモードに留
まる。その後、もしユ−ザが別の映像送信を望む場合、
プロセスはステップ４３２に戻る。

【０１００】［多機能電話機受信動作］図６及び図７を
参照して、受信モードにおける多機能電話機の動作につ
いて説明する。図６のステップ５０１において、多機能
電話機は最初にオンフック状態にある。ステップ５０３
において、多機能電話機はユ−ザの送受器持ち上げ又は
スピーカフォンボタン３０２押し下げに応答して、又は
音声電話プロセッサへのソフトウエア制御信号を介して
ユ−ザの送受器持ち上げを電気的にシミュレートする自
動応答回路の動作に応答して、入呼に返答するためにオ
フフック状態に変わる。

【０１０１】多機能電話機を、自動応答回路２９１を用
いて自動応答モードにしておくと、Ｔ／Ｒ回線インタフ
ェ−ス回路における入来呼出信号に応答してオフフック
状態が生じる。

【０１０２】更に、もし多機能電話機がディジタル接続
の終結を検知した場合、自動的にオンフック状態に戻
る。ステップ５０５において、発呼者所在場所と被呼者
所在場所との間にアナログ音声モード接続が設立され
て、音声会話が開始される。

【０１０３】ステップ５０７において、多機能電話機が
信号を受信し、 Ｖ.２５アンサートーンを探す。もしア
ンサートーンが検出されない場合、ステップ５０９にお
いて、音声会話が完了したかどうかが定められる。もし
完了していない場合、プロセスはステップ５０５に戻
る。もし音声会話が完了した場合、ステップ５０１のオ
ンフック状態に戻る。

【０１０４】もしアンサートーンが検出された場合に
は、多機能電話機はディジタル接続モードに入る。ステ
ップ５１１において映像接続が始まる。受信側多機能電
話機において音声は無音化され、 Ｖ.２５生成ト−ンが
出され、多機能電話機は、 Ｖ.３２びＳ接続シーケンス
に従う。

【０１０５】ステップ５１３において、多機能電話機
は、物理層接続が成功したかどうかを定める。もし成功
しなかった場合、プロセスはステップ５０５に戻る。も
し接続が成功した場合は、ステップ５１５において送信
側及び受信側の多機能電話機のモデム間で最適データレ
ートの折衝取り決めが行われ、レートが設立される。

【０１０６】ステップ５１７において、標準のＨＤＬＣ
プロトコルシーケンスを用いて、リンク層「ＬＡＰＢプ
ラス」が設立される。ステップ５１９において、リンク
層の設立が成功したかどうかが定められる。成功しなか
ったと判断される場合、多機能電話機は、ステップ５０
５のアナログ接続音声モードに戻る。

【０１０７】ステップ５１９において、成功と判断され
る場合は、ステップ５２１において、ネットワーク層
Ｘ.２５ が設立される。そして多機能電話機は、再起動
表示信号を送り、他端の多機能電話機からの確認メッセ
−ジを待つ。ステップ５２３において、もしネットワー
ク層が設立されなかったと判断された場合、多機能電話
機はステップ５０５のアナログ接続音声モードに戻る。

【０１０８】ステップ５２３において、もしネットワー
ク層が設立されたと判断される場合、ステップ５２５に
おいて、多機能電話機はディジタルデータの送受信の準
備ができた状態となる。この状態を、オフフックディジ
タルモードと称する。

【０１０９】ステップ５２７において、もし映像を受信
することになっていない場合、ステップ５２９において
受信側の多機能電話機は、高速音声更新レートモードに
入る（前に図８の符号６００を参照して述べた通り）。
この高速音声更新レートモード（ステップ５３１）にお
いて、音声パケットは、制御又は解析信号、あるいはそ
の両方にインタリーブされて４０ｍｓごとに送信され
る。

【０１１０】ステップ５３５において、音声データパケ
ット信号が音声信号プロセッサ２４０によって処理さ
れ、スピーカフォン２５１へ出力され、ステップ５３４
においては、制御データパケット信号がホストプロセッ
サ２６０によって処理される。又、ステップ５３３にお
いて、解析データパケット信号が、ビデオ用ディジタル
信号プロセッサ（ＤＳＰ）２２１によって、図１２に示
すように処理される。

【０１１１】ステップ５２７において、もし映像を受信
することになっている場合は、ステップ５３６におい
て、受信側の多機能電話機が、低速音声更新レートモー
ドに入る（前に図８の符号６１０を参照して述べた通
り）。図７に移り、ステップ５３７において、多機能電
話機は、音声パケットを受信して復号化と圧縮解凍を行
い、得られた音声信号を多機能電話機のスピーカフォン
／送受器に送る。

【０１１２】ステップ５３８において、多機能電話機
は、他端の多機能電話機からの映像送信要求が検出され
るかどうかを監視する。このステップ５３８は、映像送
信要求信号が受信されるまで継続する。もし映像送信要
求信号が受信された場合、多機能電話機は、映像受信モ
ードに入る。ステップ５３９において、映像受信機がオ
ンになっているかどうかが定められる。もし映像受信機
がオンになっていない場合、プロセスはステップ５３８
に戻り、そうでない場合には、プロセスはステップ５４
１に移る。

【０１１３】ステップ５４１において、多機能電話機
が、映像パケット信号送信の許可を出す。ステップ５４
３において、多機能電話機が、映像送信開始コマンドを
待つ。ステップ５４５において、映像送信開始コマンド
が受信されたかどうかが定められる。もし受信されない
場合、プロセスはステップ５４３に戻る。

【０１１４】もし映像送信開始コマンドが受信された場
合は、ステップ５４７において、多機能電話機が映像デ
ータパケットの存在（受信）有無を検出する。もし映像
データパケットが受信されない場合、プロセスはステッ
プ５４７に戻り、受信された場合は、ステップ５５１に
進む。

【０１１５】ステップ５５１においては、受信されたパ
ケットにエラーがあったかどうかが定められる。もしエ
ラーがあった場合、ステップ５５３において多機能電話
機が、否定的な受信確認信号を送り、プロセスはステッ
プ５４７に戻る。もし受信された映像データパケットに
エラーがなかった場合は、多機能電話機は、映像データ
パケット終了信号が受信されるかどうかを監視する。

【０１１６】もし映像データパケット終了信号が受信さ
れない場合、ステップ５５７において、受信確認信号が
送られ、映像データパケットは、映像処理のため待ち行
列に記憶される。そしてプロセスはステップ５４７に戻
る。

【０１１７】もし映像データパケット終了信号が受信さ
れた場合は、ステップ５５９において受信確認信号が送
られ、映像信号プロセッサには受信終了が通知される。
その後、多機能電話機は、ディジタルモードにとどま
り、プロセスはステップ５３８に移る。

【０１１８】もしディジタルモードが終了する場合、多
機能電話機は、アナログ音声だけのモードに自動的には
いる。もし多機能電話機が自動応答モードにあり（人が
付いておらず）ディジタルモードが終了する場合、アナ
ログ音声モードはバイパスされ、オンフック状態が設立
される。

【０１１９】［解析］次に、図１１を参照して多機能電
話機１０１の図形解析のローカル表示及び送信処理動作
について説明する。図形解析処理によって、表示された
映像上に点又は線の解析をユ−ザが追加し、又希望によ
り解析を後に選択的に抹消することが可能となる。

【０１２０】解析は、普通の方法で記憶され、そこで動
きは降りのチェーンに分割される。チェーン符号（コ−
ド）は、１つの要素から別の要素への位置の変化を表
す。解析の線幅は１個の画素よりも広いので、線幅はラ
ンレングス符号化を用いて符号化される。チェーン符号
は、解析曲線の前縁を表すのに用いられ、ランレングス
は、幅を表す。

【０１２１】以下の説明において、解析装置はマウス装
置であると仮定する。ステップ９０１において、マウス
装置が移動するか又はマウスボタンの１つが押されるか
した場合、マウス装置によって周期的に（２０又は３０
ｍｓごとに）割り込み信号が生成される。もしマウス装
置が移動した場合、タイマが起動し、ステップ９０２に
おいて、マウスデータが収集され、先入れ先出し解析待
ち行列９０３に記憶される。

【０１２２】マウスデータは、ｘ及びｙ座標情報、並び
に左ボタン及び右ボタンの状態についての情報からなる
計３バイトの情報を有する。ステップ９０１及び９０２
は、データを収集して待ち行列に記憶できるように繰り
返し実行される。

【０１２３】ユ−ザが左ボタンの押し下げをゆるめると
きに、カーソルは線を引かず点を描くだけである。ステ
ップ９０４において、ＤＳＰ２２１が、処理及び変換用
に、解析待ち行列９０３からデータバイトを順を追って
読み出す。色及び基点がセットされ、ステップ９０５に
おいてＤＳＰ２２１により、データサンプルが操作され
て、多機能電話機１０１に付随するビデオディスプレイ
１０８上で線引き、点描、及び抹消が行われる。

【０１２４】ステップ９０６において、多機能電話機が
ディジタルモードにあるか又はアナログモードにあるか
が定められる。もしディジタルモードにない場合、多機
能電話機はローカル表示映像モードにあり、解析はディ
スプレイ１０８上にローカルに表示される。もし多機能
電話機がディジタルモードにある場合は、ステップ９０
７において、これが解析パケットの最初のサンプルであ
るかどうかが点検される。もしそうである場合、ステッ
プ９０８において、タイマが起動され、そうでない場合
は、ステップ９０９が実行される。

【０１２５】ステップ９０９においては、４個のサンプ
ルが収集されたかどうかが点検される。もし収集されて
いない場合、ステップ９１０においてタイマのセット時
間が経過したかどうかが点検される。もし経過していな
い場合、プロセスはステップ９０４に戻って次のサンプ
ルが収集される。この手順によって、解析サンプルの各
々がタイマのセット時間内に他端で受信されることが保
証される。すなわちこれによって、両方の多機能電話機
所在場所において解析データが確実に実時間表示される
ことになる。

【０１２６】もしステップ９０９において４個のサンプ
ルが収集されていると判断された場合、又はステップ９
１０においてタイマのセット時間が経過した場合は、ス
テップ９１１においてタイマがリセットされる。ステッ
プ９１０においてタイマのセット時間が経過したときに
は、収集されたサンプル数は１より多いが４よりは少な
い。

【０１２７】ステップ９１２において、ステップ９０９
又は９１０で収集されたデータサンプルが、図１０のメ
ッセ−ジパケット構造に示すようなネットワーク層パケ
ットにパッケージされる。ステップ９１３において、図
１０のネットワーク層パケットは、図９の Ｘ.２５メッ
セ−ジ内のデータフィールド７２４にパッケージされ
る。

【０１２８】ステップ９１３において、もし映像データ
が送信されることになっていない場合には、図５のステ
ップ４３９のデータ送信手順が実行される。この、映像
データのない送信モードにおいて、音声データパケット
は、図８の符号６００に示すように解析データパケット
にインタリーブされて送信される。

【０１２９】もし映像データが送信されることになって
いる場合には、図５のステップ４４１以降のデータ送信
手順が実行される。映像データのある送信モードにおい
て、音声データパケットは、図８の符号６１０に示すよ
うに解析データパケットにインタリーブされて送信され
る。

【０１３０】次に、図１２を参照して、多機能電話機の
解析受信動作に付いて説明する。ステップ１００１にお
いて、他端の多機能電話機１０５が、図８の符号６００
又は６１０に示すフォーマットのどちらか（送信側の多
機能電話機１０１によって定められる）による、図９の
Ｘ.２５フォーマットの情報を受信する。本発明によ
り、送信側の多機能電話機がフォーマット（６００又は
６１０）を選択し、受信側の多機能電話機が、送信側と
フォーマットについて折衝せずにフォーマットを即応的
（トランスパレント）に復号化する。もし映像データが
送信されなかった場合、解析データパケットは図８の符
号６００に示す送信側の用いる送信フォーマットによっ
て音声でパケットにインタリーブされた状態で受信され
る。もし映像データが送信された場合、解析データパケ
ットは図８の符号６１０に示す送信側の用いる送信フォ
ーマットによって音声でパケットにインタリーブされた
状態で受信される。

【０１３１】ステップ１００３において、図１０の符号
８１０に示すフォーマットで受信された解析データパケ
ットは、ディジタル信号プロセッサ２２１によって復号
化される。ステップ１００５において、解析データの項
目は先入れ先出し待ち行列１００６（図２のＲＡＭ２２
３）に記憶される。ステップ１００７において、プロセ
ッサ２２１が待ち行列１００６から次のデータ項目を順
を追って収集して処理し、ステップ１００９において、
ディスプレイ（図２の符号２３２）上で線引き、点描、
及び抹消を行う。

【０１３２】［映像記憶］多機能電話機は、独特の「統
一ファイルフォーマット」をもちいる新方式の映像記憶
管理を行う。統一ファイルフォーマットは、映像全体を
識別するフィールドからなるデータ記憶ヘッダ、その映
像の小アイコン（走査検索及び選択用）、ビットマップ
化し圧縮した図形解析データ、及び付随する圧縮音声デ
ータ（メッセ−ジ添付、音声解析、及びその他の用途
用）を有する。このデータ記憶ヘッダは、より多くのデ
ータ形式、及び音声と図形解析との同期が組み入れ可能
なように十分な柔軟性を有する。

【０１３３】多機能電話機によって用いられる統一ファ
イルフォーマットは、次のフィールドを有する。

【０１３４】ヘッダ＿サイズ：このフィールドはヘッダ
のサイズをバイト数で指定する。 ヘッダ＿ｒｅｖ：このフィールドはバージョン数を指定
する。 ファイル＿サイズ：このフィールドは統一ファイルの全
体サイズをバイト数で指定する。 映像＿サイズ：このフィールドは圧縮映像データ中の全
体バイト数について指定する。

【０１３５】ｐｓ＿サイズ：このフィールドは郵便切手
映像データのサイズをバイト数で示す。 解析＿サイズ：このフィールドは図形解析データのサイ
ズをバイト数で指定する。 音声＿サイズ：このフィールドは音声解析データのサイ
ズをバイト数で指定する。

【０１３６】原＿ｘ＿サイズ：このフィールドは原映像
の幅を画素数で指定する。 原＿ｙ＿サイズ：このフィールドは原映像の高さを画素
数で指定する。 ｘ＿サブサンプル：このフィールドは原映像の幅に沿っ
て行われたサブサンプリングを指定する。 ｙ＿サブサンプル：このフィールドは原映像の高さに沿
って行われたサブサンプリングを指定する。

【０１３７】ｘ＿オフセット：このフィールドは原映像
のｘ座標を画素数で指定する。 ｙ＿オフセット：このフィールドは原映像のｙ座標を画
素数で指定する。 ｐｓ＿オフセット：このフィールドは郵便切手映像デー
タの始点についてのアドレスオフセットを指定する。 映像＿オフセット：このフィールドは圧縮映像データの
始点についてのアドレスオフセットを指定する。

【０１３８】解析＿オフセット：このフィールドは圧縮
解析データの始点についてのアドレスオフセットを指定
する。 音声＿オフセット：このフィールドは圧縮音声データの
始点についてのアドレスオフセットを指定する。 映像＿フォーマット：このフィールドは圧縮映像データ
と、原映像中の成分の数及び記述についての情報とにつ
いてのファイルフォーマットを指定する。

【０１３９】解析＿フォーマット：このフィールドは圧
縮解析データについてのファイルフォーマットを指定す
る。 音声＿フォーマット：このフィールドは圧縮音声データ
についてのファイルフォーマットを指定する。 予備１：このフィールドは将来の拡張に対して用いられ
る。

【０１４０】解析装置１３３（図１）を用いる図形解析
によって、呼の両端の多機能電話機所在場所にいるユ−
ザがモニタ画面上で特定の点を描き（又は指し）あるい
は線を引き、若しくはその両方の操作を行うことができ
る。カーソルは、モニタ上に表示されるほとんど全ての
背景映像上で可視状態にある。２つの側（すなわち呼の
両端）から操作されるカーソルは互いに区別が付けられ
ている。利用できる基本的図形解析機能は、点描、（小
さな）線引き、及び（小さな）区画の抹消である。

【０１４１】映像及び図形解析は、別個に独立して扱わ
れ、記憶時点が来るまでは互いに付随関係にはない。記
憶の間は、解析は映像の一部分となり、映像と共に送信
され、検索回収され、又は抹消される。画面上に現存す
る解析は、新たに入来する映像によって自動的に消去さ
れる。他端の画面を消去するには、他端の装置から消去
の許可を得る必要がある。

【０１４２】解析は、装置のどの通常モードにおいても
実行が可能である。しかし、解析の送信は、モードによ
って異なる仕方で扱われる。「オンフック」モードにお
いては、明らかに送信は不可能である。「オフフックア
ナログ」モードにおいても、解析はローカル操作のみで
送信はできない。「オフフックディジタル」モード（他
端を呼出後に映像送信ボタンを押したときに起動する）
では、解析は、データとして他端の多機能電話機へ送信
され、画面に実時間表示される。

【０１４３】発呼側及び被呼側の両方が、同時に線を引
くことができ、もしディジタル接続が維持されていれば
両方の画面に同じ線が表示される。各側での解析は、区
別して表示されてるが、抹消又は記憶のような動作は、
画面に表示される組み合せ解析データ上で行われう。

【０１４４】このように両側共、同時に解析を実行で
き、結果は両方の画面に示される。自分の側（ローカ
ル）のカーソル、解析、及び抹消は、縁を黒く内部を白
くした形で示される。又、他端のカーソル、解析、及び
抹消は、縁を白く内部を黒くした形で示される。

【０１４５】点描解析装置（マウス）入力は、他端に無
関係なこちら側だけのローカル動作として絶対座標に変
換され、ボタン押し下げが検出される。これらの入力
は、ローカル動作として解析を描き又は抹消するために
用いられる。もし映像接続があり且つ映像送信がない場
合、読み取り内容は４バイトにパッケージされて他端に
送られ、そこで同様に処理される。

【０１４６】画面消去用のキーパッドボタンは、ビデオ
映像及び解析に適用される。メニューを利用することに
より、ユ−ザは、解析だけ、映像だけ、又は映像及び解
析の両方を消去できる。更に、解析は以下に示すように
消去できる。

【０１４７】点描装置（マウス）の右ボタンは、「解析
抹消」ボタンとしてプログラムされている。右ボタンが
押されると、カーソルは小さな箱（ボックス）形（イレ
ーザと称する）に変わる。もしボタンを押したままマウ
スをドラッグすると、イレーザボックスの下に位置する
区域が抹消される。イレーザはローカルの解析と他端の
解析とを区別せず、単にイレーザボックスに重なった部
分のデータを抹消する（したがって、抹消されたデータ
の下にもし別のデータがあればそれが表に現れることに
なる）。

【０１４８】右ボタンをダブルクリックするとローカル
画面から全ての解析が消去されるが、他端についてはメ
ニューインタフェ−ス内のセットアップオプションに応
じて処理される。すなわち、他端による、解析消去の許
可を許可することも拒否することもできる。他端通話者
による解析消去許可は、いつでも変更可能である。

【０１４９】上に述べたように、メニューインタフェ−
スを用いることにより、ユ−ザは、映像だけ、解析だ
け、又は映像及び解析の両方を消去できる。解析は抹消
可能であるので、マウス読み取りシーケンスとしては記
憶されず、映像として扱われる。ユ−ザは、解析の実時
間送信をターンオフ及びターンオンすることができる。
これはローカル解析モードである。

【０１５０】マウス装置の両ボタンを一緒に抑えると、
画面上（オンスクリーン）のソフト機能キー列が呼び出
される。これらのキーのうちの１つは、「ＴＥＸＴ」と
いう名前が付けられている。このボタンを選択すると、
テキスト入力ボックス及びオンスクリーンの英数字キー
パッド（バックスペース及び改行キーを含む）が開かれ
る。ユ−ザは、テキストボックスに示されるキーパッド
から一度に１つの文字または数字を選択でき、又テキス
トボックスを移動し、又その大きさを変更することが可
能である。

【０１５１】多機能電話機は、多数の映像及び付随する
図形及び音声解析を記憶し再現する独特な能力を有す
る。３個のボタン、すなわち「メモリ」３１５、「次」
３１６、及び「前」３１７のボタンが、メモリ呼び出し
機能を補助する。もしユ−ザが関心のある特定のメモリ
映像を表示させたいと望む場合、次に示す一連の操作方
法が可能である。

【０１５２】すなわち、「メモリ」ボタンを用いてビデ
オソースとしてのメモリ映像を選択し、「次」及び
「前」と名前の付けられたボタンを用いて、映像につい
てのアクセスと表示を１回に１つずつ順を追って行い、
望む映像が視覚点検によって選択されるまで継続する方
法である。多機能電話機（又は他の類似の装置）は、符
号化され圧縮された形式でその内部メモリに映像を記憶
する。表示させるには、映像についてアクセスし、復号
化し、圧縮を解凍する必要がある。

【０１５３】もし映像が画面に表示されている場合に
は、映像送信ボタンを操作することにより画面上の映像
が他端の多機能電話機に送信される。送信動作が完了
後、ユ−ザは、「次」又は「前」ボタンを用いて別の映
像を選択してから映像送信ボタンを再度押すことによ
り、この別の映像を送信できる。

【０１５４】同様に、映像の記憶及び抹消動作もボタン
を押すことによって実行できる。なお、映像は、次に利
用可能なメモリ位置に記憶される。もし利用可能な空き
のメモリスロットがない場合、映像はメモリ内の「先入
れ」映像に重ね書きして記憶される。

【０１５５】したがって、映像メモリは、先入れ先出
し、すなわち最新に取り込まれた映像が記憶される方式
で円形バッファの手法によって動作する。抹消動作でメ
モリ内に空白部分が残るすことはない。メモリスロット
は抹消動作が行われる都度再構成される。

【０１５６】以上の説明は、本発明の一実施例に関する
もので、この技術分野の当業者であれば、本発明の種々
の変形例を考え得るが、それらはいずれも本発明の技術
的範囲に包含される。

【０１５７】すなわち、本発明について特定のディジタ
ルデータ通信フォーマット（Ｘ.２５） を用いて説明し
たが、他のディジタルデータフォーマットも利用が可能
である。これに加えて、上記実施例においては高速及び
低速音声更新（周期）レートをそれぞれ４０及び１００
ｍｓとなるように選択したが、これらの更新レートは、
装置についての望ましい動作特性に応じて利用される種
々のレートのうちの単なる代表例に過ぎない。

【０１５８】その上、送信用にグループ分けされた音声
データパケット、映像データパケット、及び解析データ
パケットの数も、音声更新レート及び他の望ましい装置
動作特性に応じて変わるものである。

【０１５９】尚、特許請求の範囲に記載した参照番号は
発明の容易な理解のためで、その技術的範囲を制限する
ように解釈されるべきではない。

【０１６０】

【発明の効果】以上述べたごとく、本発明によれば、音
声データパケットが第１時間間隔の間に周期レートによ
り送信され、映像データパケット及び図形解析データパ
ケットが音声データパケットにインタリーブされて、第
１時間間隔に続く第２時間間隔の間に送信されるように
したので、受信側における音声データと映像データと図
形解析データとの、アナログ電話回線を介しての同時出
力が可能となる。したがって、音声、映像、及び図形解
析のデータパケット送信の効率の向上が図れる。

【０１６１】又、音声データパケットが、電話装置が映
像送信モードにないときには、映像送信モードにあると
きのデータレートよりも速いデータレートで送信される
ようにしたので、状況に応じて時間を有効に利用した更
に効率的なデータ送信が可能となる。

【図面の簡単な説明】

【図１】本発明と、公衆交換電話ネットワークにおける
本発明の実施態様とを説明するブロック図である。

【図２】本発明による多機能電話機のブロック図であ
る。

【図３】図２の多機能電話機のキーパッドユニットのレ
イアウト図である。

【図４】図２の多機能電話機の送信動作を、図５と共に
説明する流れ図である。

【図５】図２の多機能電話機の送信動作を、図４と共に
説明する流れ図である。

【図６】図２の多機能電話機の受信動作を、図７と共に
説明する流れ図である。

【図７】図２の多機能電話機の受信動作を、図６と共に
説明する流れ図である。

【図８】本発明によって用いられる種々の送信手順を示
す説明図である。

【図９】音声データパケットのフォーマットを示す説明
図である。

【図１０】映像、解析及び監視のデータパケットのフォ
ーマットを示す説明図である。

【図１１】監視データパケットの送信動作を説明する流
れ図である。

【図１２】監視データパケットの受信動作を説明する流
れ図である。

【符号の説明】

１０１、１０５ 多機能電話機 １０２、１０４ アナログ回線（チップ／リング回線） １０３ 公衆交換電話ネットワーク １０６ カメラ １０７ ドキュメントスキャナ １０８、１０９ ビデオディスプレイ １１０ ビデオ／レーザプリンタ １１１ ビデオテープレコーダ １１２ ビデオフロッピーディスク １１３、２３４ パーソナルコンピュータ（ＰＣ） １１４、２３３ 解析装置 ２２０ アナログビデオ信号プロセッサ ２２１ （ビデオ）ディジタル信号プロセッサ（ＤＳ
Ｐ） ２２２ 入出力（Ｉ／Ｏ）ポ−ト制御装置 ２２３、２６２ ＲＡＭ ２２４、２６３ ＲＯＭ ２２５ ＶＲＡＭ（フレ−ムバッファ） ２２６ アナログ／ディジタル（Ａ／Ｄ）変換器 ２２７ ＮＴＳＣ／ＰＡＬビデオ信号符号器／復号器
（コーデック） ２３１ ビデオ信号入力装置 ２３２ ビデオ信号出力装置 ２３５、２４３、２５４、２５６、２５７、２５８、２
５９、２６４ パス ２４０ 音声信号プロセッサ ２４１ （音声）ディジタル信号プロセッサ（ＤＳＰ） ２４２ アナログ／ディジタル（Ａ／Ｄ）符号器／復号
器（コーデック） ２５１、３０２ スピーカフォン ２５２ キーパッドユニット ２５２ａ プロセッサ ２５３ スイッチフック ２５５ パワースイッチユニット ２６０ ホストプロセッサ ２６１ プロセッサ ２６５ ＪＰＥＧインタフェ−ス ２８０ モデム ２８１ ディジタル信号プロセッサ（ＤＳＰ） ２８２ Ａ／Ｄ変換符号器／復号器（コーデック） ２８３ アナログインタフェ−ス回路 ２８４ データポンプ ２９０ チップ／リング（Ｔ／Ｒ）回線インタフェ−ス
回路 ２９１ 自動応答回路 ３０１ ダイヤルパッドボタン ３０３ 音量調整ボタン ３０４ 「保留」（ホールド）ボタン ３０５ 「無音」（ミュート）ボタン ３０６ 「再ダイヤル」ボタン ３０７ 「フラッシュ」ボタン ３１０ 「送信」ボタン ３１１ 「取消」ボタン ３１２ 「消去」ボタン ３１３ 「記憶」ボタン ３１４ 「メニュー」ボタン ３１５ 「メモリ」ボタン ３１６ 「次」ボタン ３１７ 「前」ボタン ３１８ 「最後入」ボタン ３１９ 「プレビュー」ボタン ６００ 映像データのない場合の送信シーケンス ６１０ 映像データのある場合の送信シーケンス ７１０ 音声データパケット送信メッセ−ジ（リンク層
メッセ−ジ） ７２０ 音声フレ−ム（リンク層メッセ−ジ） ８１０ 映像、解析、及び監視メッセ−ジパケット構造
（ネットワーク層メッセ−ジ）

───────────────────────────────────────────────────── フロントページの続き (72)発明者 スティーブン チャールズ ジック アメリカ合衆国、08873 ニュージャージ ー、サマセット、ドリフトウッド ドライ ブ 102 (72)発明者 チャールズ ハル アメリカ合衆国、07719 ニュージャージ ー、ウォール、アダム ストリート 2921 (72)発明者 マヘンドラ プラタップ アメリカ合衆国、07735 ニュージャージ ー、クリフウッド ビーチ、ビーチ ドラ イブ 301 (72)発明者 ジェロメ プレスティナリオ アメリカ合衆国、08807 ニュージャージ ー、ブリッジウォーター、スチール ギャ ップ ロード 530 (72)発明者 ミナカナグルキ ベンカタスワミィ ラン ガナス アメリカ合衆国、07738 ニュージャージ ー、リンクロフト、リスク コート ６ (72)発明者 ジョン フランク リベラ アメリカ合衆国、07731 ニュージャージ ー、ハウエル、グレン アーデン ドライ ブ 12

Claims (10)

【特許請求の範囲】
1. 【請求項１】 音声信号と映像信号と図形解析信号とを
   得る手段（４４０、４３１、４３９）と、 前記装置に接続されたアナログ回線上での第１レートに
   よる周期的送信のために、前記得られた音声信号を１群
   の音声データパケットに符号化する（４４１）の第１手
   段と、 前記得られた映像信号を１群の映像データパケットとし
   て符号化する（６１０）ための且つ、前記得られた図形
   解析信号を１群の図形解析データパケットとして符号化
   するための且つ、前記アナログ回線上でこれら映像デー
   タパケットと図形解析データパケットとを前記音声デー
   タパケットにインタリーブさせて送信する第２手段とか
   らなり、 前記第２手段による送信において、前記音声データパケ
   ットが、前記映像データパケットと前記図形解析データ
   パケットとにほぼ同期する状態で送信されることを特徴
   とする電話装置。
2. 【請求項２】 前記音声データパケットが第１時間間隔
   の間に送信され、前記映像データパケット及び前記図形
   解析データパケットが、前記第１時間間隔に続く第２時
   間間隔の間に送信される、ことを特徴とする請求項１の
   装置。
3. 【請求項３】 もし前記図形解析信号が予め定められた
   時間長さ内において変化する場合に図形解析信号サンプ
   ルを生成する（９０７ー９１３）ための且つ、各図形解
   析信号サンプルについて図形解析信号ブロックを形成す
   る手段をさらに有し、 前記各図形解析信号パケットが、複数の前記図形解析信
   号ブロックからなることを特徴とする請求項１の装置。
4. 【請求項４】 映像データパケットと図形解析データパ
   ケットとにインタリーブされた音声データパケットを、
   前記装置に接続されたアナログ回線上で受信する（５０
   １ー５２５）手段と、 前記受信された音声データパケットと映像データパケッ
   トと図形解析データパケットとを、前記装置からの出力
   用として音声信号と映像信号と図形解析とにそれぞれ復
   号化する（５３７、５４９、図１２）の手段とを更に有
   することを特徴とする電話装置。
5. 【請求項５】 前記受信された音声データパケットが、
   第１時間間隔の間に受信され、 前記映像データパケット及び前記図形解析データパケッ
   トが、前記第１時間間隔に続く第２時間間隔の間に受信
   される、ことを特徴とする請求項４の装置。
6. 【請求項６】 音声信号と映像信号と図形解析信号とを
   得る（４４０、４３１、４３９）手段と、 交換式電話ネットワークのアナログ回線上での同時送信
   用として、前記得られた音声信号と映像信号と図形解析
   信号との各々をデータパケット内の別個の論理チャネル
   として符号化する（６１０）手段とをさらに有すること
   を特徴とする電話装置。
7. 【請求項７】 前記データパケットが、前記音声信号と
   前記図形解析信号とがほぼ同期することが確実になるよ
   うな順序で送信される、ことを特徴とする請求項６の装
   置。
8. 【請求項８】 音声信号と映像信号と図形解析信号とを
   得る（４４０、４３１、４３９）ステップと、 前記電話装置に接続されたアナログ回線上での第１レー
   トによる周期的送信のために、前記得られた音声信号を
   １群の音声データパケットに符号化する（４４１）ステ
   ップと、 前記得られた映像信号を１群の映像データパケットとし
   て符号化する（６１０）ステップと、 前記得られた図形解析信号を１群の図形解析データパケ
   ットとして符号化する（６１０）ステップと、 前記アナログ回線上でこれら映像データパケットと図形
   解析データパケットとを前記音声データパケットとにイ
   ンタリーブさせて送信するステップと、からなることを
   特徴とする電話装置の作動方法。
9. 【請求項９】 映像データパケットと図形解析データパ
   ケットとにインタリーブされた音声データパケットを、
   前記装置に接続されたアナログ回線上で受信する（５０
   １ー５２５）ステップと、 前記受信された音声データパケットと映像データパケッ
   トと図形解析データパケットとを、前記装置からの出力
   用として音声信号と映像信号と図形解析とにそれぞれ同
   時に復号化する（５３７、５４９、図１２）ステップと
   をさらに有し、 前記同時復号化により、前記電話装置から音声データと
   映像データと図形解析データとが同時に出力される、こ
   とを特徴とする電話装置の作動方法。
10. 【請求項１０】 音声信号と映像信号と図形解析信号と
    を得る（４４０、４３１、４３９）ステップと、 交換式電話ネットワークのアナログ回線上での同時送信
    用として、前記得られた音声信号と映像信号と図形解析
    信号との各々をデータパケット内の別個の論理チャネル
    として符号化する（６１０）ステップとを更に有するこ
    とを特徴とする電話装置の作動方法。