JPH08331537A - 動画像通信装置 - Google Patents

Abstract

(57)【要約】 【目的】 一時中断していた動画像通信装置による動画
像通信を再開する際、画像フレームの発生情報量を削減
し、画像フレームの「コマ落とし」を少なくし、動きの
滑らかな動画像通信を可能にする方法を提供することで
ある。 【構成】 通話中に動画像通信装置が保留設定をした場
合、この動画像通信装置は、保留設定直前の画像フレー
ムを記憶しておくと共に、保留設定した旨を他の動画像
通信装置に通知する。他の動画像通信装置もまた保留設
定した旨の受信直前の画像フレームを記憶する。保留解
除後、動画像通信装置は、保留解除した旨を他の動画像
通信装置に通知すると共に、記憶していた画像フレーム
を用いて、新たに入力した画像フレームとの差分誤差を
符号化する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、動画像通信装置に関
し、より特定的には、保留の設定／解除機能を有する動
画像通信装置に関する。

【０００２】

【従来の技術】近年、技術の進歩に伴い、テレビ電話、
テレビ会議システム等のオーディオビジュアルサービス
の実施についての要望が強くなってきている。そのた
め、６４ｋｂｐｓまでの低ビットレートで動画像通信を
行うための画像圧縮符号化方式として勧告Ｈ．２６１が
制定されている。

【０００３】従来、動画像を伝送するテレビ電話におけ
る保留制御方式は、例えば、特開平４−２３８４８６号
公報に開示されている。以下、従来のテレビ電話におけ
る保留制御方法について説明する。

【０００４】図１３は、従来のテレビ電話での保留制御
方式に係る動画像送信部１３の構成を示すブロック図で
ある。図１３において動画像送信部１３は、画像入力部
１３１と、保留画像格納部１３２と、保留スイッチ１３
３と、画像切換スイッチ１３４と、スイッチ制御部１３
５と、画像符号化部１３６と、多重化部１３７と、伝送
制御部１３８とを備える。画像入力部１３１は、画像を
入力するカメラで構成されており、入力した画像１コマ
ずつを入力画像フレームとして出力する。保留画像格納
部１３２は、保留画像フレームを格納しており、テレビ
電話の通話保留時に、この保留画像フレームを継続的に
出力する。保留スイッチ１３３は、通話を保留設定する
か保留解除するかを切り換えるために、保留設定または
保留解除を示す識別信号をスイッチ制御部１３５へ出力
する。画像切換スイッチ１３４は、端子ａ〜ｃを有して
おり、テレビ電話が通話状態であるか保留状態であるか
に応じて画像入力部１３１または保留画像格納部１３２
と画像符号化部１３６とを接続する。スイッチ制御部１
３５は、保留スイッチ１３３から入力される上記２つの
識別信号に応じて、画像切換スイッチ１３４の接続状態
を変更させる。すなわち、スイッチ制御部１３５は、保
留設定を示す識別信号（以下、保留設定信号と称する）
を入力すると、画像切換スイッチ１３４の端子ｂと端子
ｃとを接続させ、保留解除を示す識別信号（以下、保留
解除信号と称する）を入力すると、画像切換スイッチ１
３４の端子ａと端子ｃとを接続させる。画像符号化部１
３６は、入力した画像フレーム（入力画像フレームまた
は保留画像フレーム）を符号化処理することによって符
号化データを作成し、多重化部１３７へ出力する。同時
に、画像符号化部１３６は、作成した符号化データを動
画像受信部１５（図１５参照）で正確に復号化処理を可
能にするための制御データを多重化部１３７へ出力す
る。なお、画像符号化部１３６については、後で詳細に
説明する。多重化部１３７は、入力した符号化データと
制御データとを多重化することによって多重化データを
作成し、伝送制御部１３８へ出力する。伝送制御部１３
８は、送信バッファ１３８１と伝送部１３８２とを含
む。伝送制御部１３８は、入力された多重化データを一
時的に送信バッファ１３８１へ格納し、予め設定されて
いる伝送レートで多重化データを伝送部１３８２から出
力する。

【０００５】ここで、画像符号化部１３６で画像フレー
ムを符号化処理するときの方法として２通りの方法があ
る。その１つは、フレーム間モードであり、１コマずつ
送信されてくる画像フレームについて、所定コマ数前の
画像フレームとの違いを比較し、差分誤差を演算する。
画像符号化部１３６は、この差分誤差を符号化処理し、
動画像受信部１５へ送信する。もう１つは、フレーム内
モードであり、１コマずつ送信されてくる画像フレーム
を順次直接的に符号化処理し、動画像受信部１５へ送信
する。この両者を比較すると、フレーム間モードでは、
上記のように差分誤差の符号化データを送信するため発
生するデータ量は、フレーム内モードよりも少なくな
る。したがって、特定時以外、画像符号化部１３６は、
フレーム間モードで符号化処理している。

【０００６】次に、画像符号化部１３６が行う符号化処
理の手順を詳細に説明する。図１４は、図１３において
画像符号化部１３６の詳細な構成を示すブロック図であ
る。画像復号化部１３６は、差分部１４１と、モード切
換スイッチ１４２と、直交変換部１４３と、符号化制御
部１４４と、量子化部１４５と、逆量子化部１４６と、
逆直交変換部１４７と、加算部１４８と、送信フレーム
メモリ１４９とを含む。符号化制御部１４４は、符号化
処理全体を制御する。モード切換スイッチ１４２は、第
１および第２の切換スイッチ１４２Ａおよび１４２Ｂと
を有しており、第１の切換スイッチ１４２Ａは端子ｄ〜
ｆを、第２の切換スイッチ１４２Ｂは端子ｇ〜ｉをそれ
ぞれ有している。画像符号化部１３６がフレーム間モー
ドで符号化処理するときには、端子ｅと端子ｆ、端子ｈ
と端子ｉとがそれぞれ接続されている。また、フレーム
内モードで符号化処理するときには、端子ｄと端子ｆ、
端子ｇと端子ｉとがそれぞれ接続されている。

【０００７】差分部１４１は、画像符号化部１３６に入
力した画像フレームと送信フレームメモリ１４９に格納
されている符号化参照フレーム（詳細は後述）とを比較
し、両者の差分誤差を演算する。なお、差分部１４１
は、フレーム内モードで符号化処理するときには機能し
ない。直交変換部１４３は、時系列的な信号である差分
誤差あるいは画像フレームを周波数成分の異なるいくつ
かの波形に分解する変換を行い、量子化部１４５へ出力
する。この直交変換部１４３で代表的に用いられる変換
方法としては、離散コサイン変換が用いられる。量子化
部１４５は、変換された差分誤差あるいは画像フレーム
を量子化する。直交変換部１４３と量子化部１４５とに
よって、差分誤差もしくは画像フレームは符号化処理さ
れ、符号化データとして多重化部１３７（図１３参照）
と逆量子化部１４６とへ出力される。逆量子化部１４６
と逆直交変換部１４７とは、それぞれが上記量子化部１
４５と直交変換部１４３との逆の機能を有している。し
たがって、符号化データは、逆量子化部１４６と逆直交
変換部１４７とによって復号化処理され、差分誤差もし
くは画像フレームに復元される。加算部１４８は、フレ
ーム間モードで符号化処理されているときにのみ機能
し、送信フレームメモリ１４９に格納されている所定コ
マ数前の画像フレームと差分誤差とを合成し、動画像受
信部１５で表示されるべき画像フレームを作成し、送信
フレームメモリ１４９に格納する。送信フレームメモリ
１４９は、符号化参照フレーム（所定コマ数前の画像フ
レーム）を差分部１４１と加算部１４８とに出力する。

【０００８】符号化制御部１４４は、上記構成各部を制
御することによって画像フレームの符号化処理をするの
であるが、このとき行われる特徴的な処理として、「コ
マ落とし」がある。符号化制御部１４４は、入力した画
像フレームを符号化処理する前にまず送信バッファ１３
８１（図１３参照）の空き容量を確認する。もし、符号
化制御部１４４が入力した画像フレームの符号化データ
を格納するに十分な空き容量が送信バッファ１３８１に
存在しない場合、符号化制御部１４４は、この入力した
画像フレームの符号化処理をせずに破棄する。このよう
な処理を「コマ落とし」という。したがって、「コマ落
とし」が行われると、単位時間当たりに動画像送信部１
３から送信される画像フレーム数が少なくなる。

【０００９】図１５は、上記テレビ電話における保留制
御方式に係る動画像受信部１５の構成を示すブロック図
である。図１５において動画像受信部１５は、受信制御
部１１５１と、分離部１５２と、画像復号化部１５３
と、画像出力部１５４とを備える。受信制御部１５１
は、受信部１５１１と、受信バッファ１５１２とを含
む。受信制御部１５１は、受信部１５１１は、送信され
てくる符号化データを受信部１５１１で受信し、この多
重化データを受信バッファ１５１２に一時的に格納し、
分離部１５２へ出力する。分離部１５２は、多重化デー
タを、符号化データと制御データとに分離し、画像復号
化部１５３へ出力する。画像復号化部１５３は、制御デ
ータに基づいて符号化データを画像フレーム（入力画像
フレームもしくは保留画像フレーム）に復号化処理し、
画像出力部１５４へ出力する。画像出力部１５４は、モ
ニタで構成され、入力された画像フレームを表示する。

【００１０】図１６は、図１５において画像復号化部１
５３の詳細な構成を示すブロック図である。画像復号化
部１５３は、復号化制御部１６１と、逆量子化部１６２
と、逆直交変換部１６３と、加算部１６４と、切換スイ
ッチ１６５と、受信フレームメモリ１６６とを含む。多
重化データは、分離部１５２で分離された符号化データ
を逆量子化部１６２に入力し、制御データは、復号化制
御部１６１に入力する。復号化制御部１６１は、制御デ
ータに基づいて、符号化データの復号化処理全体を制御
する。切換スイッチ１６５は、端子ａ〜ｃを有してい
る。復号化制御部１６１がフレーム間モードで復号化処
理を行うときには、端子ａと端子ｂとが接続されてい
る、また、フレーム内モードで復号化処理を行うときに
は、端子ａと端子ｃとが接続されている。逆量子化部１
６２と、逆直交変換部１６３とは、それぞれ前述した逆
量子化部１４６と、逆直交変換部１４７と同一の機能を
有するためその説明を省略する。加算部１６４は、フレ
ーム間モードで符号化処理を行っているときには、受信
フレームメモリ１６６に格納されている所定コマ数前の
画像フレームと差分誤差とを加算し、画像出力部１５４
で表示される画像フレームを作成し、画像出力部１５４
へ出力する。さらに、加算部１６４は、この画像フレー
ムを復号化参照フレームとして受信フレームメモリ１６
６に格納する。送信フレームメモリ１６６は、復号化参
照フレーム（所定コマ数前の画像フレーム）を加算部１
６４に出力する。

【００１１】上記のような構成を有するテレビ電話の保
留時における各部の動作を以下に説明する。通話中にお
いて一方のユーザが保留スイッチ１３３を操作すると、
保留スイッチ１３３は、保留設定識別信号をスイッチ制
御部１３５へ出力する。応じて、スイッチ制御部１３５
は、通話中には端子ａと端子ｃとが接続されている画像
切換スイッチ１３４を端子ｂと端子ｃとが接続するよう
に切り換える。これによって、スイッチ制御部１３５
は、通話中には画像入力部１３１から出力される入力画
像フレームを画像符号化部１３６に入力させず、保留画
像格納部１３２の保留画像フレームを画像符号化部１３
６に入力させる。画像符号化部１３６は、保留画像格納
部１３２に格納されている保留画像フレームを入力した
後、この保留画像フレームを前述した手順で符号化処理
し、保留画像符号化データと保留画像の制御データとを
作成し、それぞれを多重化部１３７へ出力する。多重化
部１３７は、これら２つのデータを多重化することによ
って多重化データを作成し、送信バッファ１３８１に格
納する。伝送部１３８２は、送信バッファ１３８１から
多重化データを読み出し、設定された伝送レートで他方
のユーザの動画像受信部１５へ多重化データを送信す
る。

【００１２】動画像受信部１５では、受信制御部１５１
で動画像送信部１３から送信されてくる多重化データを
受信し、受信バッファ１５１２に格納する。分離部１５
２は、受信した多重化データを保留画像符号化データと
保留画像の制御データに分離し、画像復号化部１５３へ
出力する。画像復号化部１５３は、入力した保留画像符
号化データを同時に入力される保留画像の制御データに
基づいて保留画像フレームに復号化処理し、画像出力部
１５４に出力する。保留画像フレームを受信した画像出
力部１５４は、モニタに保留画像を表示させる。これに
よって、保留を設定したユーザは、もう一方のユーザに
通話保留中であることを通知することとなる。

【００１３】次に保留を解除する場合の動作手順を以下
に説明する。保留設定したユーザが保留スイッチ１３３
によって保留の解除を要求した場合、保留スイッチ１３
３はスイッチ制御部１３５に保留解除を示す識別信号を
スイッチ制御部１３５へ出力する。スイッチ制御部１３
５は、端子ｂと端子ｃとが接続されている画像切換スイ
ッチ１３４を端子ａと端子ｃとが接続するように切り換
える。これによって、スイッチ制御部１３５は、保留画
像格納部１３２内の保留画像フレームを画像符号化部１
３６に入力させず、画像入力部１３１から入力画像フレ
ームを画像符号化部１３６に入力させる。画像符号化部
１３６は、画像入力部１３１から入力画像フレームを得
る。画像符号化部１３６は、この入力画像を符号化処理
し入力画像符号化データを作成する。その後、画像符号
化部１３６は、この入力画像符号化データを多重化部１
３７へ出力する。多重化部１３７は、多重化データを送
信バッファ１３８１に格納する。伝送制御部１３８２は
設定された伝送レートで出力端子１３９を介して動画像
受信部８１に多重化データを送信する。

【００１４】動画像受信部１５では、受信制御部１５１
が動画像送信部１３から受信した多重化データを受信
し、受信バッファ１５１２に格納する。分離部１５２
は、入力した多重化データを入力画像符号化データと制
御データに分離し、画像復号化部１５３へ出力する。画
像復号化部１５３は、入力した入力画像符号化データを
制御データに基づいて、前述と同様の手順で入力画像フ
レームに復号化処理する。画像出力部１５４は、モニタ
に入力画像を表示させる。

【００１５】

【発明が解決しようとする課題】しかしながら、上記の
ような従来のテレビ電話における保留制御方法では、以
下に示す２つの問題点が存在する。

【００１６】（１）第１の問題点 上記から明らかなように、保留時には、保留画像フレー
ムが送信フレームメモリ１４９に格納されることとな
る。このとき問題となるのが保留解除直後において、動
画像送信部１３は、画像入力部１３１から得た入力画像
フレームを動画像受信部１５へ送信するわけであるが、
この保留画像フレームと入力画像フレームとの間には相
関性がない。もし、フレーム間モードで符号化処理する
場合、差分部１４１は、符号化参照フレームに保留画像
フレームを使用しなければならない。従って、差分部１
４１が求める差分誤差は膨大な量となり、それ故に、直
交変換部１４３と量子化部１４５とで作成される符号化
データの量はかなりの量になる。このとき、符号化制御
部１４４では、前述したように、送信バッファ１３８１
の空き容量を確認し、入力画像フレームの符号化データ
と制御データとを多重化部１３７へ出力する。多重化部
１３７で作成された多重化データは、一旦、送信バッフ
ァ１３８１に格納される。このとき、送信バッファ１３
８１には、入力画像フレームのほぼ同一データ量の多重
化データが格納されるため、空き容量が少なくなる。そ
の後、伝送部１３８からこの多重化データは、動画像受
信部１５へ送信される。従って、次に送信されるはずの
入力画像フレームの多重化データは、符号化制御部１４
４の判断によって、「コマ落とし」されることが多い。
一旦、「コマ落とし」が行われると、入力画像フレーム
と符号化参照フレームとの相関性が小さくなる。従っ
て、差分部１４１が求める差分誤差も大きくなるため、
継続的に「コマ落とし」が発生することが多い。そのた
め、画像出力部１５４は、動きのぎこちない映像をモニ
タに表示することとなる。

【００１７】この第１の問題点に関しては、送信バッフ
ァ１３８１の記憶容量を大きくすれば解決するが、テレ
ビ電話の部材のコストが上がるという他の問題を生ずる
こととなるとともに、リアルタイム性が損なわれること
となる。

【００１８】（２）第２の問題点 第２の課題は、通話保留中には、少なくとも保留設定を
したユーザは、他の用事ができたからである。従って、
通話保留中には、保留設定を行ったテレビ電話の画像入
力部１３１は必要ないにもかかわらず、電源がオンされ
ている状態であり、無駄に電力を消費していることであ
る。

【００１９】それ故に、本発明の目的は、保留解除後の
「コマ落とし」を大幅に削減する保留制御方式を提供す
ることである、

【００２０】また、本発明の他の目的は、パワーセーブ
機能を備えたテレビ電話を提供することである。

【００２１】

【課題を解決するための手段】請求項１の発明は、伝送
路を介して動画像通信を行うための装置であって、入力
した動画像データを符号化して送信する動画像送信手段
と、受信した符号化データを復号して動画像データを生
成する動画像受信手段とを備え、動画像送信手段は、所
定フレーム前の動画像データを順次格納する送信フレー
ムメモリを有し、当該送信フレームメモリに格納された
動画像データと、現在入力された動画像データとの差分
誤差の符号化データ、または、現在入力された動画像デ
ータの符号化データを選択的に生成する符号化手段と、
人為的な操作に応答して、動画像通信の保留を設定もし
くは解除するための保留設定／解除手段とを含み、符号
化手段は、保留設定／解除手段によって保留設定される
と、送信フレームメモリに格納されている動画像データ
を固定的に保持させ、保留設定／解除手段によって解除
設定されると、固定的に保持されている送信フレームメ
モリに動画像データを順次格納可能にし、動画像受信手
段は、所定フレーム前の動画像データを順次格納する受
信フレームメモリを有し、現在入力された動画像データ
との差分誤差の符号化データ、または、現在入力された
動画像データの符号化データを選択的に復号化する復号
化手段を備え、復号化手段は、外部から保留設定を通知
されると、受信フレームメモリに格納されている動画像
データを固定的に保持させ、外部から解除設定を通知さ
れると、固定的に保持されている受信フレームメモリに
動画像データを順次格納可能にすることを特徴とする。

【００２２】請求項２の発明は、請求項１の発明におい
て、動画像受信手段は、保留設定中であることを示す保
留画像データを格納する保留画像格納手段を含み、動画
像受信手段は、動画像通信中に他の動画像送信手段から
伝送路を介して保留設定／解除されると、保留画像格納
手段から保留画像データを出力させるか否かを選択する
ことを特徴とする。

【００２３】請求項３の発明は、請求項１の発明におい
て、動画像送信手段は、さらに保留設定中であることを
示す保留画像データを格納する保留画像格納手段を含
み、符号化手段は、保留設定／解除手段によって保留設
定されると、送信フレームメモリに格納されている動画
像データを固定的に保持させ、送信フレームメモリに格
納されている動画像データを参照せずに現在入力された
保留画像データの符号化データを生成し、保留設定／解
除手段によって解除設定されると、固定的に保持されて
いる送信フレームメモリに動画像データを順次格納可能
にし、送信フレームメモリに格納された動画像データ
と、現在入力された動画像データとの差分誤差の符号化
データを生成し、復号化手段は、外部から保留設定を通
知されると、受信フレームメモリに格納されている動画
像データを固定的に保持させ、現在入力された保留画像
データの符号化データを復号化し、外部から解除設定を
通知されると、固定的に保持されている受信フレームメ
モリに動画像データを順次格納可能にし、現在入力され
た差分誤差の符号化データを復号することを特徴とす
る。

【００２４】請求項４の発明は、請求項２または３の発
明において、保留画像出力手段は、テレビ受信機から構
成されることを特徴とする。

【００２５】請求項５の発明は、伝送路を介して動画像
通信を行うための装置であって、動画像データおよび音
声データを入出力する入出力手段と、人為的な操作に応
答して、動画像通信の保留を設定もしくは解除するため
の保留設定／解除手段と、入出力手段の電源を制御する
電源制御手段を備え、電源制御手段は、保留設定／解除
手段が保留を設定すると、入出力手段の電源をオフし、
保留設定／解除手段が保留を解除すると、入出力手段の
電源をオンすることを特徴とする。

【００２６】請求項６の発明は、請求項５の発明におい
て、入出力手段は、入力した音声を音声データに変換し
て出力する音声入力手段と、入力した動画像を動画像デ
ータに変換して出力する画像入力手段と、伝送路を介し
て送信されてくる音声データに基づき音声を出力する音
声出力手段と、伝送路を介して送信されてくる動画像デ
ータに基づき動画像を出力する画像出力手段とを含み、
電源制御手段は、保留設定／解除手段が保留を設定する
と、動画像入力手段と、音声入力手段と、画像出力手段
と、音声出力手段との電源を独立的にオフし、保留設定
／解除手段が保留を解除すると、オフされた動画像入力
手段、音声入力手段、画像出力手段、あるいは音声出力
手段の電源をオンすることを特徴とする。

【００２７】請求項７の発明は、請求項５の発明におい
て、保留設定／解除手段は、動画像通信の保留を設定も
しくは解除を、伝送路を介して当該動画像通信を行って
いる他方に通知し、電源制御手段は、さらに通知によっ
て保留を設定されると、入出力手段の電源をオフし、通
知によって保留を解除されると、入出力手段の電源をオ
ンすることを特徴とする。

【００２８】請求項８の発明は、請求項７の発明におい
て、入出力手段は、入力した音声を音声データに変換し
て出力する音声入力手段と、入力した動画像を動画像デ
ータに変換して出力する画像入力手段と、伝送路を介し
て送信されてくる音声データに基づき音声を出力する音
声出力手段と、伝送路を介して送信されてくる動画像デ
ータに基づき動画像を出力する画像出力手段とを含み、
電源制御手段は、通知によって保留を設定されると、動
画像入力手段と、音声入力手段と、画像出力手段と、音
声出力手段との電源を独立的にオフし、通知によって保
留を解除されると、オフされた動画像入力手段、音声入
力手、画像出力手段、あるいは音声出力手段の電源をオ
ンすることを特徴とする。

【００２９】

【作用】請求項１の発明では、保留設定／解除手段は、
人為的な操作によって、動画像通信の保留要求を通知さ
れると保留設定する。これに応じて、符号化手段は、符
号化データを生成することを中断させ、送信フレームメ
モリに保留設定される直前に符号化処理された動画像デ
ータを格納した状態を保持する。また、符号化手段は、
保留解除されると、現在入力された動画像データと、送
信フレームメモリに格納されている動画像データとの差
分誤差を演算し、この差分誤差を符号化処理する。さら
に、符号化手段は、現在入力した動画像データを送信フ
レームメモリに格納させる。一方、復号化手段は、保留
設定されると、符号化データの復号化処理を中断させ、
受信フレームメモリに保留設定される直前に復号化処理
された動画像データを格納した状態を保持する。また、
復号化手段は、保留解除されると、現在入力した符号化
処理された差分誤差を復号化処理し、受信フレームメモ
リに格納されている動画像データと、現在入力した動画
像データの差分誤差とを合成する。このように、動画像
送信手段は、相関性のある２つの動画像データから差分
誤差を演算する。したがって、発生するデータ量を抑制
している。これによって、「コマ落とし」の発生する可
能性が低減する。

【００３０】請求項２の発明では、動画像通信の保留中
において、保留画像格納手段は、保留状態を示す保留画
像データを出力する。したがって、動画像通信装置は、
保留画像を表示する。また、動画像通信を保留解除され
ると、保留画像格納手段は、保留状態を示す保留画像デ
ータの出力を停止し、動画像通信装置は、動画像通信を
再開する。したがって、保留設定された側は、この保留
画像によって動画像通信が保留中であること認識でき
る。

【００３１】請求項３の発明では、保留設定／解除手段
は、人為的な操作によって、動画像通信の保留要求を通
知されると保留設定する。これに応じて、符号化手段
は、符号化データを生成することを中断させ、送信フレ
ームメモリに保留設定される直前に符号化処理された動
画像データを格納した状態を保持する。そして、符号化
手段は、保留画像格納手段に格納されている保留画像デ
ータを直接的に符号化処理し、符号化データを作成す
る。符号化手段は、保留解除されると、保留画像データ
の符号化データを生成することを停止する。そして、符
号化手段は、送信フレームメモリに格納されている動画
像データと、現在入力した動画像データとの差分誤差を
演算し、この差分誤差の符号化データを生成する。さら
に、符号化手段は、現在入力した動画像データを送信フ
レームメモリに格納させる。一方、復号化手段は、保留
設定されると、受信フレームメモリに保留設定される直
前に復号化処理された動画像データを格納した状態を保
持する。また、復号化手段は、保留解除されると、受信
フレームメモリに格納されているの動画像データと、現
在入力した動画像データの差分誤差とを合成する。この
ように、動画像送信手段は、保留解除直後には相関性の
ある２つの動画像データから差分誤差を演算する。した
がって、発生するデータ量を抑制している。これによっ
て、「コマ落とし」の発生する可能性が低減する。

【００３２】請求項４の発明では、保留画像格納手段
は、保留時にはテレビ受信機から受信したテレビ画像を
出力する。したがって、保留設定された側は、この保留
画像によって動画像通信が保留中であること認識できる
とともに、テレビ画像を観ることができる。

【００３３】請求項５の発明では、保留設定／解除手段
は、人為的な操作によって、動画像通信の保留要求を通
知されると保留を設定する。電源制御手段は、これに応
じて、入出力手段の電源をオフする。保留設定／解除手
段は、人為的な操作によって、動画像通信の保留解除を
通知されると保留を解除する。電源制御手段は、これに
応じて、入出力手段の電源をオンする。これによって、
動画像通信装置の消費電力を低減している。

【００３４】請求項６の発明では、保留設定／解除手段
は、人為的な操作によって、動画像通信の保留要求を通
知されると保留を設定する。電源制御手段は、これに応
じて、音声入力手段、画像入力手段、音声出力手段、画
像出力手段の電源を独立的にオフする。保留設定／解除
手段は、人為的な操作によって、動画像通信の保留解除
を通知されると保留を解除する電源制御手段は、これに
応じて、音声入力手段、画像入力手段、音声出力手段、
画像出力手段の電源を独立的にオンする。したがって、
動画像通信装置の消費電力を低減している。

【００３５】請求項７の発明では、保留設定する側の動
画像通信装置の保留設定／解除手段は、動画像通信の保
留要求を通知されると保留を設定する。この保留要求
は、伝送路を介して保留設定された側の電源制御手段に
通知される。電源制御手段は、これに応じて、入出力手
段の電源をオフする。保留設定する側の動画像通信装置
の保留設定／解除手段は、動画像通信の保留解除を通知
されると保留を解除する。この保留解除は、伝送路を介
して保留設定された側の電源制御手段に通知される。電
源制御手段は、これに応じて、入出力手段の電源をオン
する。したがって、動画像通信装置の消費電力を低減し
ている。

【００３６】請求項８の発明では、保留設定する側の動
画像通信装置の保留設定／解除手段は、動画像通信の保
留要求を通知されると保留を設定する。この保留要求
は、伝送路を介して保留設定された側の電源制御手段に
通知される。電源制御手段は、これに応じて、音声入力
手段、画像入力手段、音声出力手段、画像出力手段の電
源を独立的にオフする。保留設定する側の動画像通信装
置の保留設定／解除手段は、動画像通信の保留解除を通
知されると保留を解除する。この保留解除は、伝送路を
介して保留設定された側の電源制御手段に通知される。
電源制御手段は、これに応じて、音声入力手段、画像入
力手段、音声出力手段、画像出力手段の電源を独立的に
オンする。したがって、動画像通信装置の消費電力を低
減している。

【００３７】

【実施例】

（１）「第１の実施例」 図１は、本発明の第１の実施例に係る動画像通信装置の
動画像送信部１の構成を示すブロック図である。動画像
送信部１は、画像入力部１１と、保留スイッチ１２と、
画像符号化部１３と、識別信号生成部１４と、多重化部
１５と、伝送制御部１６とを備える。ここで、画像入力
部１１と保留スイッチ１２とは、「従来の技術」に記載
した動画像送信部１３（図１３参照）対応する構成と同
一のものであるため詳細な説明を省略する。識別信号生
成部１４は、ユーザの操作によって保留スイッチ１２か
ら保留設定信号または保留解除信号が入力されると、そ
れぞれ保留設定を示す状態識別フラグ（以下、保留設定
識別フラグと称する）、もしくは保留解除を示す状態識
別フラグ（以下、保留解除識別フラグと称する）を生成
し、画像符号化部１３と多重化部１５とへ出力する。画
像符号化部１３は、通話中には、画像入力部１１から入
力される入力画像フレームを「従来の技術」にて記載し
た手順で符号化処理する。画像符号化部１３は、さらに
識別信号生成部１４から入力される上記２つの状態識別
フラグの内容に応じて、符号化処理を停止または再開す
る。多重化部１５と伝送制御部１６とは、「従来の技
術」に記載した機能に加えて、以下に記載する機能を有
する。多重化部１５には、識別信号生成部１４から状態
識別フラグが入力される。伝送制御部１６は、多重化部
１５から入力される状態識別フラグを動画像受信部３
（図３参照）へ出力する。

【００３８】図２は、図１に示す画像符号化部１３の構
成を示す詳細なブロック図である。画像符号化部１３
は、差分部２１と、モード切換スイッチ２２と、直交変
換部２３と、符号化制御部２４と、量子化部２５と、逆
量子化部２６と、逆直交変換部２７と、加算部２８と、
送信フレームメモリ２９とを含む。画像符号化部１３の
構成は、符号化制御部２４以外は「従来の技術」に記載
した対応する構成部と同一であるため、異なる部分であ
る符号化制御部２４のみについて記載する。符号化制御
部２４は、「従来の技術」に記載した機能に加えて、保
留信号送信部１４から送信されてくる状態識別フラグの
内容に応じて、画像フレームの符号化処理を停止するか
否かを判断する。

【００３９】図３は、本発明の第１の実施例に係る動画
像通信装置の動画像受信部３の構成を示すブロック図で
ある。動画像受信部３は、受信制御部３１と、分離部３
２と、画像復号化部３３と、スイッチ制御部３４と、出
力画像切換スイッチ３５と、保留画像格納部３６と、画
像出力部３７とを備える。ここで、受信制御部３１と、
画像出力部３７とは、「従来技術」に記載した動画像受
信部１５（図１５参照）に対応する構成と同一のもので
あるため詳細な説明を省略する。分離部３２と画像復号
化部３３とは、「従来の技術」に記載した機能に加え
て、以下に記載する機能を有する。分離部３２は、前述
した２つの状態識別フラグが入力されたとき、これら状
態識別フラグを画像復号化部３３と、スイッチ制御部３
４とに出力する。画像復号化部３３は、分離部３２から
入力される状態識別フラグの内容に応じて、復号化処理
を停止または再開する。スイッチ制御部３４は、分離部
３２から入力される状態識別フラグの内容に応じて出力
画像切換スイッチ３５の接続状態を切り換える。出力画
像切換スイッチ３５は、端子ａ〜ｃを有しており、画像
復号化部３３で復号化処理された入力画像フレームを画
像出力部３７へ伝送するときには、端子ａと端子ｃとを
接続し、保留画像格納部３６に格納されている保留画像
フレームを画像出力部３７へ伝送するときには、端子ｂ
と端子ｃとを接続する。保留画像格納部３６は、保留画
像フレームを格納しており、テレビ電話の通話保留時
に、この保留画像フレームを画像出力部３７へ出力す
る。

【００４０】図４は、図３に示す画像復号化部３３の詳
細な構成を示すブロック図である。画像復号化部３３
は、復号化制御部４１と、逆量子化部４２と、逆直交変
換部４３と、加算部４４と、切換スイッチ４５と、受信
フレームメモリ４６とを含む。また、復号化制御部４１
以外は「従来の技術」に記載した復号化制御部１６１に
対応する構成部と同一であるため、異なる部分である復
号化制御部４１のみについて記載する。復号化制御部４
１は、前述した機能に加えて分離部３２から送信されて
くる２つの状態識別フラグの内容に応じて、受信した画
像フレームの符号化データの復号化処理を停止するか否
かを判断する。

【００４１】図５は、本発明の第１の実施例に係るテレ
ビ電話の保留制御方法を示すシーケンスチャートであ
る。以下、図１〜図５を参照して本発明の第１の実施例
に係るテレビ電話の保留制御方法について詳細に説明す
る。

【００４２】通話中には、動画像送信部１は、画像入力
部１１から入力した入力画像フレームを画像符号化部１
３でフレーム間モードで符号化処理し、多重化部１５を
介して伝送制御部１６から入力画像フレームを符号化処
理した符号化データ（以下、入力画像符号化データと称
する）を送信している。このとき、動画像受信部３の出
力画像切換スイッチ３５は、端子ａと端子ｃとが接続さ
れている。従って、動画像受信部３は、受信した入力画
像符号化データを画像復号化部３３で復号化処理し、画
像出力部３７に画像入力部１１の入力画像フレームと同
一の画像フレームを順次表示させる（ステップＳ５０
１）。

【００４３】通話中に一方のユーザが保留スイッチ１２
を操作すると（ステップＳ５０２）、保留スイッチ１２
は、保留設定信号を識別信号生成部１４へ出力する。識
別信号生成部１４は、保留設定識別フラグを作成し、画
像符号化部１３の符号化制御部２４と多重化部１５とに
出力する。応じて、符号化制御部２４は、以後画像フレ
ームの符号化処理を中断する（ステップＳ５０３）。こ
れによって、送信フレームメモリ２９には、ユーザが保
留スイッチ１２を操作する直前に画像入力部１１から入
力した入力画像フレームを格納した状態に保持する。一
方、多重化部１５に入力された保留設定識別フラグは、
伝送制御部１６から動画像受信部３へ出力する。

【００４４】動画像受信部３の受信部３１１は、保留設
定識別フラグを受信し（ステップＳ５０４）、受信バッ
ファ３１２を介して分離部３２へ出力する。分離部３２
は、保留設定識別フラグを画像復号化部３３の復号化制
御部４１とスイッチ制御部３４とに出力する。これに応
じて、復号化制御部４１は、画像符号化データの復号化
処理を停止させる（ステップＳ５０５）。これによっ
て、受信フレームメモリ４６には、保留状態識別フラグ
を受信直前に復号化処理された画像フレームが、すなわ
ち、送信フレームメモリ２９に格納されている画像と同
一の画像フレームが、格納された状態を保持する。

【００４５】スイッチ制御部３４は、保留設定識別フラ
グを入力すると、画像切換スイッチ３５の端子ｂと端子
ｃとを接続する（ステップＳ５０６）。このとき、保留
画像格納部３６は、格納されている保留画像フレームを
画像出力部３７へ出力する。画像出力部３７は、入力さ
れた保留画像フレームを表示する（ステップＳ５０
７）。これによって、テレビ電話は保留状態に入る。

【００４６】通話を再開したいとき、前述の保留設定し
たユーザが保留スイッチ１２を操作すると（ステップＳ
５０８）、保留スイッチ１２は、保留解除信号を識別信
号生成部１４へ出力する。識別信号生成部１４は、保留
解除識別フラグを作成し、画像符号化部１３の符号化制
御部２４と多重化部１５とに出力する。応じて、符号化
制御部２４は、以後画像入力部１１から入力する入力画
像フレームの符号化処理を再開する（ステップＳ５０
９）。すなわち、符号化制御部２４は、送信フレームメ
モリ２９に格納されている符号化参照フレームを、差分
部２１と加算部２８とに出力させる。差分部２１は、画
像入力部１１から入力した入力画像フレームと符号化参
照フレームとの差分誤差を演算する。このときの符号化
参照フレームは、前述したようにユーザが保留スイッチ
１２を操作する直前に画像入力部１１から入力した入力
画像フレームである。

【００４７】一般的に、画像入力部１１から入力した入
力画像フレームは、保留設定以前と保留解除後とでは、
通話するユーザとそのユーザの背景、その両者が変化す
ることは稀である。従って、保留解除後の入力画像フレ
ームと符号化参照フレームとの間には相関性があり、生
成した符号化データの発生データ量を抑制することがで
きる。

【００４８】一方、多重化部１５に入力した保留解除識
別フラグは、伝送制御部１６を介して動画像受信部３へ
出力される（ステップＳ５１０）。受信制御部３１に入
力した保留解除識別フラグは、分離部３２を介して画像
復号化部３３とスイッチ制御部３４とに入力する。

【００４９】画像復号化部３３の復号化制御部４１は、
保留解除識別フラグを入力すると、復号化処理を再開す
るため、動画像送信部１から差分誤差の符号化データが
送信されてくるのを待機する（ステップＳ５１１）。一
方、スイッチ制御部３４は、保留解除識別フラグを入力
すると、出力画像切換スイッチ３５の端子ａと端子ｃと
を接続させる（ステップＳ５１２）。

【００５０】符号化制御部２４は、送信バッファ１６１
に少なくとも１つの画像フレームを格納しうる空き容量
が確認されれば、上記差分誤差の符号化処理をする。こ
のとき、送信バッファ１６１には明らかに空き容量が存
在するので、符号化制御部２４は、「コマ落とし」をす
ることはなく、前述した手順にて差分誤差の符号化デー
タを作成し、多重化部１５へ出力する。さらに、この差
分誤差の符号化データは、逆量子化部２６と逆直交変換
部２７を介して、差分誤差に復号化処理される。この差
分誤差は、加算部２８にて、符号化参照フレームと合成
され、新たな符号化参照フレームとして、送信フレーム
メモリ２９に格納される。以降、画像入力部１１が出力
する入力画像フレームを順次符号化処理し、動画像受信
部３へ送信する。応じて、動画像受信部３は、前述した
手順にて送信されてくる差分誤差の符号化データを復号
化処理し、復号化処理した差分誤差と受信フレームメモ
リ４６に格納されている復号化参照フレームとを加算部
４４で合成する。これによって、動画像送信部１の画像
入力部１１で入力した入力画像フレームと同一の画像フ
レームを再現し、画像出力部３７は、これをモニタに表
示させる。

【００５１】（２）第２の実施例 図６は、本発明の第２の実施例に係るテレビ電話の動画
像送信部６の構成を示すブロック図である。動画像送信
部６は、画像入力部６１と、保留画像格納部６２と、保
留スイッチ６３と、入力画像切換スイッチ６４と、画像
符号化部６５と、識別信号生成部６６と、多重化部６７
と、伝送制御部６８とを備える。ここで、画像入力部６
１と、保留画像格納部６２と、保留スイッチ６３と、入
力画像切換スイッチ６４と、伝送制御部６８とは、「従
来の技術」に記載した動画像送信部１３（図１３参照）
に対応する構成と同一のものであり、多重化部６７は、
「第１の実施例」に記載した動画像送信部１（図１参
照）に対応する構成と同一のものであるためそれらの詳
細な説明を省略する。

【００５２】識別信号生成部６６は、ユーザの操作によ
って保留スイッチ６３から入力される保留設定信号もし
くは保留解除信号に応じて、前述した状態識別フラグを
設定し、入力画像切換スイッチ６４と、画像符号化部６
５と多重化部６７とに出力する。入力画像切換スイッチ
６４は、端子ａ〜ｃを有しており、通話中には端子ａと
端子ｃとを接続し、保留中には端子ｂと端子ｃとを接続
する。画像符号化部６５は、画像入力部６１から入力さ
れる入力画像フレームを送信するとき、フレーム間モー
ドで符号化処理し、また、保留画像格納部６２から入力
される保留画像フレームをフレーム内モードによって符
号化処理する。

【００５３】図７は、図６に示す画像符号化部６５の構
成を示す詳細なブロック図である。画像符号化部６５
は、差分部７１と、モード切換スイッチ７２と、直交変
換部７３と、符号化制御部７４と、量子化部７５と、逆
量子化部７６と、逆直交変換部７７と、加算部７８と、
格納／非格納切換スイッチ７９と、送信フレームメモリ
７０とを含む。なお、差分部７１と、モード切換スイッ
チ７２と、直交変換部７３と、量子化部７５と、逆量子
化部７６と、逆直交変換部７７と、加算部７８と、送信
フレームメモリ７０とは、「従来の技術」に記載した対
応する構成部と同一であるため、それらの詳細な説明を
省略する。符号化制御部７４は、状態識別フラグの内容
に応じて、入力する画像フレーム（入力画像フレームま
たは保留画像）をフレーム間モードで符号化処理する
か、フレーム内モードで符号化処理するかを決定し、モ
ード切換スイッチ７２と格納／非格納切換スイッチ７９
の接続状態を設定する。格納／非格納切換スイッチ７９
は、端子ａ〜ｃとを有しており、保留設定されていない
ときには、端子ａと端子ｂとを接続し、逆量子化部７６
と逆直交変換部７７で復号化処理された入力画像フレー
ムを送信フレームメモリ７０に格納する。また、保留設
定されているときには、端子ａと端子ｃとを接続し、送
信フレームメモリ７０に格納されている符号化参照フレ
ームの内容を保持する。

【００５４】図８は、本発明の第２の実施例に係るテレ
ビ電話の動画像受信部８の構成を示すブロック図であ
る。動画像受信部８は、受信制御部８１と、分離部８２
と、画像復号化部８３と、識別信号受信部８４と、画像
出力部８５とを備える。ここで、受信制御部８１と、画
像出力部３７とは、「従来の技術」に記載した動画像受
信部１５（図１５参照）に対応する構成と同一のもので
あり、分離部８２は、「第１の実施例」に記載した動画
像受信部３（図３参照）に対応する構成と同一のもので
あるため詳細な説明を省略する。

【００５５】画像復号化部８３は、フレーム間／フレー
ム内識別フラグの内容に応じて、フレーム間モードによ
って符号化処理された差分誤差の符号化データを復号化
処理し、フレーム内モードによって符号化された保留画
像フレームの符号化データを復号化処理する。なお、画
像復号化部８３の詳細な構成については後述する。識別
信号受信部８４は、前述した２つの状態識別フラグを画
像復号化部８３へ出力する。

【００５６】図９は、図８に示す画像復号化部８３の詳
細な構成を示すブロック図である。画像復号化部８３
は、復号化制御部９１と、逆量子化部９２と、逆直交変
換部９３と、加算部９４と、モード切換スイッチ９５
と、格納／非格納切換スイッチ９６と、受信フレームメ
モリ９７とを含む。ここで、逆量子化部９２と、逆直交
変換部９３と、加算部９４とは、「従来の技術」に記載
した復号化制御部１６１（図１６参照）に対応する構成
部と同一であるため、それらの詳細な説明を省略する。

【００５７】復号化制御部９１は、フレーム間／フレー
ム内識別フラグと、保留設定／解除識別フラグが入力さ
れると、その内容に応じてモード切換スイッチ９５と、
格納／非格納切換スイッチ９６との接続状態を変更す
る。すなわち、前述した手順と同様に入力した符号化デ
ータの復号化処理を行う。モード切換スイッチ９５は、
端子ａ〜ｃとを有しており、フレーム間モード時には端
子ａと端子ｂとを接続し、フレーム内モード時には端子
ａと端子ｃとを接続する。格納／非格納切換スイッチ９
６は、端子ｄ〜ｅとを有しており、保留解除を示す保留
設定／解除識別フラグが入力されたならば、端子ｄと端
子ｅとを接続し、保留設定を示す保留設定／解除識別フ
ラグが入力されたならば端子ｄと端子ｆとを接続する。

【００５８】図１０は、本発明の第２の実施例に係るテ
レビ電話の保留制御を示すシーケンスチャートである。
以下、図６〜図１０を参照して本発明の第２の実施例に
係る保留制御について詳細に説明する。

【００５９】通話中には、動画像送信部６の符号化制御
部７４は、符号化データの発生を抑制するために通常フ
レーム間モードにて、前述したように入力画像フレーム
の符号化処理を行う。従って、符号化制御部７４は、モ
ード切換スイッチ７２の端子ｂと端子ｃとを、さらに端
子ｅと端子ｆとを接続させる。また、符号化制御部７４
は、格納／非格納切換スイッチ７９の端子ａと端子ｂと
を接続させる。画像入力部６１が出力した入力画像フレ
ームは差分部７１に入力し、同時に送信フレームメモリ
７０から入力する符号化参照フレームとこの入力画像フ
レームとの差分誤差を求める。この差分誤差は、前述し
た手順と同様に直交変換部７３と量子化部７５とで符号
化処理され、多重化部６７と逆量子化部７６とへ出力さ
れる。逆量子化部７６へ出力された差分誤差は、前述し
た手順と同様に入力画像フレームに復号化処理され、新
たな符号化参照フレームとして送信フレームメモリ７０
に格納される。一方、多重化部６７に入力した差分誤差
の符号化データは、前述した手順と同様に、動画像受信
部８へ多重化データとして出力される。

【００６０】動画像受信部８の画像復号化制御部８３
は、フレーム間モードで入力した符号化データの復号化
処理を行う。従って、画像復号化制御部８３は、モード
切換スイッチ９５の端子ａと端子ｂとを接続させる。ま
た、格納／非格納切換スイッチ９６の端子ｄと端子ｅと
を接続させる。受信部８１に入力した多重化データは分
離部８２で差分誤差の符号化データと制御データとに分
離される。この差分誤差の符号化データは、逆量子化部
９２に入力され、また、制御データは、復号化制御部９
１に入力される。復号化制御部９１は、制御データに基
づいて、前述した手順にて差分誤差の符号化データを、
逆量子化部９２と逆直交変換部９３とで差分誤差に復号
化処理させる。この差分誤差は、加算部９４にて復号化
参照フレームと合成され、出力画像フレームを再現し、
画像出力部８５と受信フレームメモリ９７とに出力され
る。画像出力部８５は、モニタにこの出力画像を表示す
る。また、受信フレームメモリ９７は、この出力画像フ
レームを新たな復号化参照フレームとして格納する。上
記のようにして、第２の実施例に係るテレビ電話では動
画像の送受信を行っている（ステップＳ１００１）。

【００６１】通話中に一方のユーザが通話を保留したい
とき、そのユーザは、保留スイッチ６３を操作する（ス
テップＳ１００２）。応じて、保留スイッチ６３は、保
留設定信号を識別信号生成部６６へ出力する。識別信号
生成部６６は、保留設定を示す状態識別フラグ（以下、
保留設定識別フラグと称する）を作成し、入力画像切換
スイッチ６４と、画像符号化部６５の符号化制御部７４
と、多重化部６７とに出力する。画像切換スイッチ７４
は、保留設定識別フラグを入力されると、端子ｂと端子
ｃとを接続する（ステップＳ１００３）。従ってこれ以
降、画像符号化部６５には、保留画像格納部６２に格納
されている保留画像フレームが入力される。符号化制御
部７４は、保留設定識別フラグを入力すると、モード切
換スイッチ７２の端子ａと端子ｃとを、さらに端子ｄと
端子ｆとを接続する。従って以後、符号化制御部７４
は、入力する保留画像フレームをフレーム内モードで符
号化処理する。また、符号化制御部７４は、格納／非格
納切換スイッチ７９の端子ａと端子ｃとを接続する。従
ってこれ以降、送信フレームメモリ７０は、画像符号化
部６５で符号化処理されても、新たな符号化参照フレー
ムを格納しない。そのため、ユーザが保留スイッチ６３
を操作する直前に画像入力部６１から入力した入力画像
フレームを符号化参照フレームとして送信フレームメモ
リ７０に格納した状態を維持する。多重化部６７に入力
した保留設定識別フラグは、伝送制御部６８から動画像
受信部８へ出力される。動画像受信部８の受信部８１
は、保留設定識別フラグを受信し（ステップＳ１００
５）、受信バッファ８１３を介して分離部８２へ出力す
る。

【００６２】保留設定識別フラグは、分離部８２から識
別信号受信部８４を介して画像復号化部８３へ入力す
る。保留設定識別フラグを入力した復号化制御部９１
は、モード切換スイッチ９５の端子ａと端子ｃとを接続
させ、格納／非格納切換スイッチ９６の端子ｄと端子ｆ
とを接続させる（ステップＳ１００６）。従って以後、
復号化制御部９１は、入力する保留画像フレームをフレ
ーム内モードで復号化処理する。従って、受信フレーム
メモリ９７は、画像復号化部８３で復号化処理が行われ
ても、新たな復号化参照フレームを格納しない。そのた
め、上述した送信フレームメモリ７０と同一のものが受
信フレームメモリ９７に格納することとなる。

【００６３】保留画像格納部６２の保留画像フレーム
は、前述したように画像符号化部６５に入力する。この
とき、符号化制御部７４は、送信バッファ６８１の空き
容量を確認し、十分な空き容量が確認されると、保留画
像フレームの符号化処理をフレーム内モードで行う（ス
テップＳ１００７）。この保留画像フレームの符号化デ
ータは、前述と同様に多重化部６７で制御データと多重
化されて多重化データとして伝送制御部６８から出力さ
れる。動画像受信部８の受信部８１１は、この多重化デ
ータを受信し（ステップＳ１００８）、受信バッファ８
１３を介して分離部８２へ出力する。分離部８２は、前
述したように制御データを復号化制御部９１に、そし
て、保留画像フレームの符号化データを逆量子化部９２
へと出力する。復号化制御部９１は、前述と同様に、保
留画像フレームの符号化データを保留画像フレームに復
元し、画像出力部８５へ出力する。画像出力部８５は、
モニタに保留画像フレームを表示させる（ステップＳ１
００９）。以降、保留中には、動画像送信部６および動
画像受信部８は、このステップＳ１００７〜ステップＳ
１００９の動作を繰り返し行う。

【００６４】ユーザが通話を再開したいとき、このユー
ザは、保留スイッチ６３を操作し、保留状態を解除しよ
うとする（ステップＳ１０１０）。応じて、保留スイッ
チ６３は、保留解除信号を識別信号生成部６６へ出力す
る。保留スイッチ６３は、保留解除信号を識別信号生成
部６６へ出力する。識別信号生成部６６は、保留解除を
示す状態識別フラグ（以下、保留解除識別フラグと称す
る）を作成し、入力画像切換スイッチ６４と、画像符号
化部６５の符号化制御部７４と、多重化部６７とに出力
する。入力画像切換スイッチ６４は、保留解除識別フラ
グが入力されると、端子ａと端子ｃとを接続する（ステ
ップＳ１０１１）。従って、これ以降、画像符号化部６
５には、画像入力部６１が入力した入力画像フレームが
入力される。符号化制御部７４は、保留設定識別フラグ
が入力されると、モード切換スイッチ７２の端子ｂと端
子ｃとを、さらに端子ｅと端子ｆとを接続する（ステッ
プＳ１０１２）。従って、これ以降、符号化制御部７４
は、画像入力部６１から入力される保留画像フレームを
フレーム間モードで符号化処理する。また、符号化制御
部７４は、格納／非格納切換スイッチ７９の端子ａと端
子ｂとを接続する。従ってこれ以降、送信フレームメモ
リ７０は、画像符号化部６５で符号化処理が行われる
と、新たな符号化参照フレームとしてこれを格納する。
多重化部６７に入力した保留解除識別フラグは、伝送制
御部６８から動画像受信部８へ出力される。動画像受信
部８の受信部８１は、保留設定識別フラグを受信し（ス
テップＳ１０１３）、受信バッファ８１２を介して分離
部８２へ出力する。

【００６５】保留解除識別フラグは、分離部８２から識
別信号受信部８４を介して画像復号化部８３へ入力す
る。保留解除識別フラグを入力した復号化制御部９１
は、モード切換スイッチ９５の端子ａと端子ｂとを接続
させ、格納／非格納切換スイッチ９６の端子ｄと端子ｅ
とを接続させる（ステップＳ１０１４）。従って以降、
復号化制御部９１は、入力する保留画像フレームをフレ
ーム間モードで符号化処理する。すなわち、画像復号化
部８３は、差分誤差の符号化データを復号化処理し、受
信フレームメモリ９５に格納されている復号化参照フレ
ームを使用して画像出力部８５のモニタに表示させる出
力画像を作成することとなる。

【００６６】以降、ステップＳ１００１と同様の動作を
することによって動画像通信装置による動画像通信が再
開される。

【００６７】なお、上述した「第１の実施例」に記載し
た保留画像格納部３６と、「第２の実施例」に記載した
保留画像格納部６６とは、予め保留画像フレームが格納
されているようにしているが、両保留画像格納部３６お
よび６６の代わりに、テレビチューナやビデオ再生部を
設置し、保留中にはテレビ画像やビデオテープの画像を
画像出力部３７および８５に表示させてもよい。

【００６８】なお、上述した「第２の実施例」では、保
留時においては、保留中であることを示す保留画像を、
符号化参照フレームおよび復号化参照フレームを用いず
に符号化または復号化できるフレーム内モードを用いて
符号化することで、送信フレームメモリ７０および受信
フレームメモリ９７に格納されている符号化参照フレー
ムおよび復号化参照フレームを更新しないとしたが、送
信フレームメモリ７０と受信フレームメモリ９７とをそ
れぞれ第１の送信フレームメモリと第１の受信フレーム
メモリとする。また、新たに第１の送信フレームメモリ
と同様な第２の送信フレームメモリと、第１の受信フレ
ームメモリと同様な第２の受信フレームメモリとを、動
画像通信装置に設ける。通常時（保留時以外の時）に動
画像を送信する際には第１の送信フレームメモリまたは
第２の送信フレームメモリのどちらか一方を用いて符号
化処理を行う。また、動画像を受信する際には第１の受
信フレームメモリまたは第２の受信フレームメモリのど
ちらか一方を用いて復号化処理を行う。一方、保留設定
時に、上記通常時に使用している第１または第２の送信
フレームメモリに格納されている符号化参照フレームを
未使用の第１または第２の送信フレームメモリに格納す
る。また、動画像を受信する際には、通常時に使用して
いる第１または第２の受信フレームメモリに格納されて
いる復号化参照フレームを未使用の第１または第２の受
信フレームメモリに格納する。保留解除時に動画像の符
号化処理または復号化処理を再開する際には、符号化参
照フレームまたは復号化参照フレームが格納されている
方の送信、受信フレームメモリを用いて、上記通常時の
符号化または復号化処理を行うとしてもよいことはいう
までもない。

【００６９】また、上述した「第２の実施例」では、保
留解除後は、フレーム間モードで符号化処理するとした
が、フレーム間／フレーム内のモード選択は、符号化制
御部７４が適応的に選択させるようにしてもよい。通
常、保留設定前の画像フレームと保留解除後の画像フレ
ームとの間には高い相関性があるため、フレーム間モー
ドで符号化されることが多い。

【００７０】（３）第３の実施例 図１１は、本発明の第３の実施例に係る動画像送受信端
末１１の構成を示すブロック図である。動画像送受信端
末１１は、入出力部１１１と、音声符号化部１１２と、
画像符号化部１１３と、端末制御部１１４と、保留スイ
ッチ１１５と、多重化部１１６と、分離部１１７と、音
声符号化部１１８と、画像復号化部１１９とを備える。
入出力部１１１は、音声入力部１１１１と、画像入力部
１１１２と、音声出力部１１１３と、画像出力部１１１
４とを含む。なお、画像入力部１１１２と、画像出力部
１１１４と、保留スイッチ１１５とは、「従来の技術」
に記載した対応する構成部と同一であるため、それらの
詳細な説明を省略する。音声入力部１１１１は、マイク
などで構成されており、音声の入力し、後段の音声符号
化部１１２（後述）へ音声信号として出力する。音声出
力部１１１３は、スピーカなどで構成されており、前段
の音声復号化部１１８（後述）で復号化処理された音声
を出力する。音声符号化部１１２は、入力した音声信号
を符号化処理し、多重化部１１６へ音声符号化データと
して出力する。画像符号化部１１３は、入力した画像信
号を符号化処理し、多重化部１１６へ画像符号化データ
として出力する。端末制御部１１４は、保留スイッチ１
１５から入力される保留設定または保留解除識別信号に
応じて入出力部１１１の電源のオン／オフを切り換え
る。端末制御部１１４は、さらに保留設定または保留解
除識別信号を多重化部１１６へ出力する。多重化部１１
６は、通話時には、音声および画像符号化データを多重
化（以下、単に多重化データと称する）し、通話先の動
画像送受信端末１１に出力する。多重化部１１６は、ま
た、端末制御部１１４から保留設定または保留解除識別
信号が入力されると、これらを通話先のテレビ電話に出
力する。分離部１１７は、通話時に送信されてくる多重
化データを音声符号化データと画像符号化データとに分
離し、前者を音声復号化部１１８へ、後者を画像復号化
部１１９へと出力する。分離部１１７は、また、保留設
定または保留解除識別信号が入力されると、これを端末
制御部１１４へ出力する。音声復号化１１８は、入力し
た音声符号化データを復号化処理し、すなわち、音声信
号に復号化処理し、音声出力部１１１３へ出力する。画
像復号化部１１９は、入力した画像符号化データを復号
化処理し、すなわち、画像信号に復号化処理し、画像出
力部１１１４へ出力する。

【００７１】図１２は、本発明の第３の実施例に係る動
画図送受信端末１１の入出力部１１１の電源制御をを示
すシーケンスチャートである。以下、図１１，１２を参
照して本発明の第３の実施例に係る保留制御について詳
細に説明する。

【００７２】通話中には、動画像送受信端末１１の音声
入力部１１１１と画像入力部１１１２とに入力した音声
と画像とは、それぞれ音声符号化部１１２と画像符号化
部１１３とで符号化処理され、多重化部１１６へ出力さ
れる。多重化部１１６は、符号化された音声符号化デー
タと画像符号化データを多重化し、多重化データとして
これを相手方の動画像送受信端末１１に出力する。ま
た、分離部１１７は、相手方の動画像送受信端末１１か
ら送信されてきた多重化データを受信し、これを音声符
号化データと画像符号化データとに分離し、それぞれを
音声復号化部１１８と画像復号化部１１９とに出力す
る。音声復号化部１１８と画像復号化部１１９は、符号
化処理された音声データと画像データとを、それぞれ音
声信号と画像信号とに復号化処理する。応じて、音声出
力部１１１３は音声を出力し、画像出力部１１１４は画
像を出力する（ステップＳ１２０１）。

【００７３】通話中に一方が通話を保留したいとき、保
留スイッチ１１５を操作する（ステップＳ１２０２）。
応じて、保留スイッチ１１５は、保留設定信号を端末制
御部１１４へ出力する。端末制御部１１４は、入出力部
１１１の電源をオフする（ステップＳ１２０３）。ま
た、端末制御部１１４は、保留設定識別フラグを作成
し、多重部１１６から他方の動画像送受信端末１１へ出
力する。この保留設定識別フラグは、有線（あるいは無
線）の伝送路を介して、他方の動画像送受信部１１の分
離部１１７に入力される（ステップＳ１２０４）。保留
設定識別フラグは、分離部１１７から端末制御部１１４
に出力される。応じて、端末制御部１１４は、入出力部
１１１の電源をオフする（ステップＳ１２０５）。

【００７４】通話を再開したいとき、保留設定した一方
が保留スイッチ１１５を操作する（ステップＳ１２０
６）。応じて、保留スイッチ１１５は、保留解除信号を
端末制御部１１４へ出力する。端末制御部１１４は、入
出力部１１１の電源をオンする（ステップＳ１２０
７）。また、端末制御部１１４は、保留解除識別フラグ
を作成し、多重部１１６から他方の動画像送受信端末１
１へ出力する。この保留設定識別フラグは、有線（ある
いは無線）の伝送路を介して、他方の動画像送受信部１
１の分離部１１７に入力される（ステップＳ１２０
８）。保留解除識別フラグは、分離部１１７から端末制
御部１１４に出力される。応じて、端末制御部１１４
は、入出力部１１１の電源をオンする（ステップＳ１２
０９）。これによって、ステップＳ１２０１と同様に動
画像の送受信が再開される（ステップＳ１２１０）。

【００７５】なお、上記の第３の実施例においては、入
出力部１１１の電源を一括的に制御しているが、音声入
力部１１１１、画像入力部１１１２、音声出力部１１１
３、画像出力部１１１４の電源を個別的に制御してもよ
い。

【００７６】

【発明の効果】請求項１の発明によれば、符号化手段
は、保留解除されると、現在入力された動画像データ
と、保留設定の直前に送信フレームメモリが格納した動
画像データとの差分誤差を演算し、この差分誤差の符号
化データを作成する。また、復号化手段は、保留解除さ
れると、現在入力した差分誤差の符号化データを復号化
処理し、保留設定の直前に受信フレームメモリが格納し
た動画像データと、現在入力した動画像データの差分誤
差とを合成する。したがって、送信フレームメモリに格
納されている動画像データと保留解除直後に入力した動
画像データとは相関性を有することとなるため、発生す
る符号化データのデータ量は抑制される。これによっ
て、動画像通信装置は、「コマ落とし」をすることが少
なくなり、動画像受信側の動画像通信装置には動きの滑
らかな動画像を再現できる。しかも、送信フレームメモ
リの記憶容量を増加させることもないため、動画像通信
装置の部材のコストを削減できる。

【００７７】請求項２の発明によれば、保留設定中に
は、保留設定された側の動画像通信装置の保留画像格納
手段は、保留画像データを出力する。これによって、保
留設定された側は、保留中であることが認識でき、保留
設定した側は、私的な用件を保留設定された側に秘密に
することができる。

【００７８】請求項３の発明によれば、符号化手段は、
保留設定されると、符号化データを生成することを中断
させ、送信フレームメモリに保留設定される直前に符号
化処理された動画像データを格納した状態を保持する。
そして、符号化手段は、保留画像格納手段に格納されて
いる保留画像データを直接的に符号化処理し、符号化デ
ータを作成する。符号化手段は、保留解除されると、保
留画像データの符号化データを生成することを停止す
る。そして、符号化手段は、送信フレームメモリに格納
されている動画像データと、現在入力した動画像データ
との差分誤差を演算し、この差分誤差の符号化データを
生成する。さらに、符号化手段は、現在入力した動画像
データを送信フレームメモリに格納させる。一方、復号
化手段は、保留設定されると、受信フレームメモリに保
留設定される直前に復号化処理された動画像データを格
納した状態を保持する。また、復号化手段は、保留解除
されると、受信フレームメモリに格納されているの動画
像データと、現在入力した動画像データの差分誤差とを
合成する。このように、動画像送信手段は、保留解除直
後には相関性のある２つの動画像データから差分誤差を
演算する。これによって、動画像通信装置は、「コマ落
とし」をすることが少なくなり、動画像受信側の動画像
通信装置には動きの滑らかな動画像を再現できる。しか
も、送信フレームメモリの記憶容量を増加させることも
ないため、動画像通信装置の部材のコストを削減でき
る。

【００７９】請求項４の発明によれば、保留画像格納手
段は、テレビ受信機で構成されているため、保留設定中
には、保留設定された側の動画像通信装置にテレビ映像
を表示させることができる。これによって、保留設定さ
れた側は、保留中の時間を退屈せずに保留解除を待つこ
とができる。

【００８０】請求項５の発明によれば、保留設定中に
は、保留設定した側の動画像通信装置の入出力手段の電
源をオフする。これによって、動画像通信装置の消費電
力を低減することができる。

【００８１】請求項６の発明によれば、保留設定中に
は、電源制御手段は、保留設定した側の動画像通信装置
の画像入力手段、音声入力手段、画像出力手段、音声出
力手段の電源を独立的にオフする。また、保留解除され
ると、電源制御手段は、保留設定した側の動画像通信装
置のオフされた画像入力手段、音声入力手段、画像出力
手段、音声出力手段の電源をオンする。これによって、
動画像通信装置の消費電力を低減することができる。さ
らに、保留設定中において、画像入力手段、音声入力手
段、画像出力手段、音声出力手段の電源のオン／オフを
独立的に行うことにより、動画像通信装置が、保留中で
あることを周囲に知らしめることができる。

【００８２】請求項７の発明によれば、保留設定中に
は、保留設定された側の動画像通信装置の入出力手段の
電源をオフする。これによって、動画像通信装置の消費
電力を低減することができる。

【００８３】請求項８の発明によれば、保留設定中に
は、電源制御手段は、保留設定された側の動画像通信装
置の画像入力手段、音声入力手段、画像出力手段、音声
出力手段の電源を独立的にオフする。また、保留解除さ
れると、電源制御手段は、保留設定された側の動画像通
信装置のオフされた画像入力手段、音声入力手段、画像
出力手段、音声出力手段の電源をオンする。これによっ
て、動画像通信装置の消費電力を低減することができ
る。さらに、保留設定中において、画像入力手段、音声
入力手段、画像出力手段、音声出力手段の電源のオン／
オフを独立的に行うことにより、動画像通信装置が、保
留中であることを周囲に知らしめることができる。

【図面の簡単な説明】

【図１】本発明の第１の実施例に係るテレビ電話の動画
像送信部１の構成を示すブロック図である。

【図２】図１に示す画像符号化部１３の構成を示す詳細
なブロック図である。

【図３】本発明の第１の実施例に係るテレビ電話の動画
像受信部３の構成を示すブロック図である。

【図４】図３に示す画像復号化部３３の詳細な構成を示
すブロック図である。

【図５】本発明の第１の実施例に係るテレビ電話の保留
制御を示すシーケンスチャートである。

【図６】本発明の第２の実施例に係るテレビ電話の動画
像送信部６の構成を示すブロック図である。

【図７】図６に示す画像符号化部６５の構成を示す詳細
なブロック図である。

【図８】本発明の第２の実施例に係るテレビ電話の動画
像受信部８の構成を示すブロック図である。

【図９】図８に示す画像復号化部８３の詳細な構成を示
すブロック図である。

【図１０】本発明の第２の実施例に係るテレビ電話の保
留制御を示すシーケンスチャートである。

【図１１】本発明の第３の実施例に係る動画像送受信端
末１１の構成を示すブロック図である。

【図１２】本発明の第３の実施例に係る動画図送受信端
末１１の入出力部１１１の電源制御をを示すシーケンス
チャートである。

【図１３】従来に係る動画像送信部の構成を示すブロッ
ク図である。

【図１４】従来に係る画像符号化部の詳細な構成を示す
ブロック図である。

【図１５】従来に係る動画像受信部の構成を示すブロッ
ク図である。

【図１６】従来に係る画像復合化部の詳細な構成を示す
ブロック図である。

【符号の説明】

１，６…動画像送信部 １１，６１，１１１２…画像入力部 １２，６３，１１５…保留スイッチ １３，６５，１１３…画像符号化部 １４，６６…識別信号生成部 １５，６７，１１６…多重化部 １６，６８…伝送制御部 １６１，６８１…送信バッファ １６２，６８２…伝送部 ２１，７１…差分部 ２２，７２…モード切換スイッチ ２３，７３…直交変換部 ２４，７４…符号化制御部 ２５，７５…量子化部 ２６，７６…逆量子化部 ２７，７７…逆直交変換部 ２８，７８…加算部 ２９，７０…送信フレームメモリ ３，８…動画像受信部 ３１，８１…受信制御部 ３１１，８１２…受信部 ３１２，８１３…受信バッファ ３２，８２，１１７…分離部 ３３，８３，１１９…画像復号化部 ３４…スイッチ制御部 ３５…出力画像切換スイッチ ３６，６２…保留画像格納部 ３７，８５，１１１４…画像出力部 ４１，９１…復号化制御部 ４２，９２…逆量子化部 ４３，９３…逆直交変換部 ４４，９４…加算部 ４５，９５…切換スイッチ ４６，９７…受信フレームメモリ ６４…入力画像切換スイッチ ７９，９６…格納／非格納切換スイッチ ８４…識別信号受信部 １１…動画像送受信端末 １１１…入出力部 １１１１…音声入力部 １１１３…音声出力部 １１２…音声符号化部 １１４…端末制御部 １１８…音声復号化部

Claims (8)

【特許請求の範囲】
1. 【請求項１】 伝送路を介して動画像通信を行うための
   装置であって、 入力した動画像データを符号化して送信する動画像送信
   手段と、 入力した符号化データを復号化して動画像データを生成
   する動画像受信手段とを備え、 前記動画像送信手段は、 所定フレーム前の動画像データを順次格納する送信フレ
   ームメモリを有し、当該送信フレームメモリに格納され
   た動画像データと、現在入力された動画像データとの差
   分誤差の符号化データ、または、現在入力された動画像
   データの符号化データを選択的に生成する符号化手段
   と、 人為的な操作に応答して、動画像通信の保留を設定もし
   くは解除するための保留設定／解除手段とを含み、 前記符号化手段は、 前記保留設定／解除手段によって保留設定されると、前
   記送信フレームメモリに格納されている動画像データを
   固定的に保持させ、 前記保留設定／解除手段によって解除設定されると、固
   定的に保持されている前記送信フレームメモリに前記動
   画像データを順次格納可能にし、 前記動画像受信手段は、 所定フレーム前の動画像データを順次格納する受信フレ
   ームメモリを有し、現在入力された動画像データとの差
   分誤差の符号化データ、または、現在入力された動画像
   データの符号化データを選択的に復号化する復号化手段
   を備え、 前記復号化手段は、 外部から保留設定を通知されると、前記受信フレームメ
   モリに格納されている動画像データを固定的に保持さ
   せ、 外部から解除設定を通知されると、固定的に保持されて
   いる前記受信フレームメモリに前記動画像データを順次
   格納可能にすることを特徴とする、動画像通信装置。
2. 【請求項２】 前記動画像受信手段は、保留設定中であ
   ることを示す保留画像データを格納する保留画像格納手
   段を含み、 前記動画像受信手段は、動画像通信中に他の動画像送信
   手段から前記伝送路を介して保留設定／解除されると、
   前記保留画像格納手段から前記保留画像データを出力さ
   せるか否かを選択することを特徴とする、請求項１に記
   載の動画像通信装置。
3. 【請求項３】 前記動画像送信手段は、さらに保留設定
   中であることを示す保留画像データを格納する保留画像
   格納手段を含み、 前記符号化手段は、 前記保留設定／解除手段によって保留設定されると、前
   記送信フレームメモリに格納されている動画像データを
   固定的に保持させ、前記送信フレームメモリに格納され
   ている動画像データを参照せずに現在入力された前記保
   留画像データの符号化データを生成し、 前記保留設定／解除手段によって解除設定されると、固
   定的に保持されている前記送信フレームメモリに前記動
   画像データを順次格納可能にし、前記送信フレームメモ
   リに格納された動画像データと、現在入力された動画像
   データとの差分誤差の符号化データを生成し、 前記復号化手段は、 外部から保留設定を通知されると、前記受信フレームメ
   モリに格納されている動画像データを固定的に保持さ
   せ、現在入力された保留画像データの符号化データを復
   号化し、 外部から解除設定を通知されると、固定的に保持されて
   いる前記受信フレームメモリに前記動画像データを順次
   格納可能にし、現在入力された差分誤差の符号化データ
   を復号することを特徴とする、請求項１に記載の動画像
   通信装置。
4. 【請求項４】 前記保留画像格納手段は、テレビ受信機
   から構成されることを特徴とする、請求項２または３に
   記載の動画像通信装置。
5. 【請求項５】 伝送路を介して動画像通信を行うための
   装置であって、 動画像データおよび音声データを入出力する入出力手段
   と、 人為的な操作に応答して、動画像通信の保留を設定もし
   くは解除するための保留設定／解除手段と、 前記入出力手段の電源を制御する電源制御手段を備え、 前記電源制御手段は、 前記保留設定／解除手段が保留を設定すると、前記入出
   力手段の電源をオフし、 前記保留設定／解除手段が保留を解除すると、前記入出
   力手段の電源をオンすることを特徴とする、動画像通信
   装置。
6. 【請求項６】 前記入出力手段は、 入力した音声を音声データに変換して出力する音声入力
   手段と、 入力した動画像を動画像データに変換して出力する画像
   入力手段と、 前記伝送路を介して送信されてくる音声データに基づき
   音声を出力する音声出力手段と、 前記伝送路を介して送信されてくる動画像データに基づ
   き動画像を出力する画像出力手段とを含み、 前記電源制御手段は、 前記保留設定／解除手段が保留を設定すると、前記動画
   像入力手段と、前記音声入力手段と、前記画像出力手段
   と、前記音声出力手段との電源を独立的にオフし、 前記保留設定／解除手段が保留を解除すると、オフされ
   た前記動画像入力手段、前記音声入力手段、前記画像出
   力手段、あるいは前記音声出力手段の電源をオンするこ
   とを特徴とする、請求項６に記載の動画像通信装置。
7. 【請求項７】 前記保留設定／解除手段は、動画像通信
   の保留を設定もしくは解除を、前記伝送路を介して当該
   動画像通信を行っている他方に通知し、 前記電源制御手段は、さらに前記通知によって保留を設
   定されると、前記入出力手段の電源をオフし、 前記通知によって保留を解除されると、前記入出力手段
   の電源をオンすることを特徴とする、請求項５に記載の
   動画像通信装置。
8. 【請求項８】 前記入出力手段は、 入力した音声を音声データに変換して出力する音声入力
   手段と、 入力した動画像を動画像データに変換して出力する画像
   入力手段と、 前記伝送路を介して送信されてくる音声データに基づき
   音声を出力する音声出力手段と、 前記伝送路を介して送信されてくる動画像データに基づ
   き動画像を出力する画像出力手段とを含み、 前記電源制御手段は、 前記通知によって保留を設定されると、前記動画像入力
   手段と、前記音声入力手段と、前記画像出力手段と、前
   記音声出力手段との電源を独立的にオフし、 前記通知によって保留を解除されると、オフされた前記
   動画像入力手段、前記音声入力手段、前記画像出力手
   段、あるいは前記音声出力手段の電源をオンすることを
   特徴とする、請求項７に記載の動画像通信装置。