JP2002320225A - 映像信号符号化装置および映像信号伝送装置 - Google Patents

Abstract

(57)【要約】 【課題】 映像信号の符号化及び伝送を継続したまま、
送信者が自画像の送信を保留できる映像信号符号化装置
を提供する。 【解決手段】 映像信号を記憶する記憶手段１０６と、
該記憶手段に記憶された映像信号を符号化する符号化手
段１０７とを有する映像信号符号化装置において、入力
映像に静止画像の少なくとも一部を重畳して出力する機
能を備えたオーバーレイ手段１０２と、該オーバーレイ
手段の出力を映像信号として記憶手段に書き込む書き込
み手段１０５とを備え、該書き込み手段は、前記記憶手
段１０６への書き込みを行うか否かを、外部からの制御
信号に従い映像のフレーム毎に設定することを特徴とす
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、リアルタイムで映
像信号を符号化し伝送する、例えば携帯電話やＴＶ電話
システム等に関わる映像信号符号化装置および映像信号
伝送装置に関する。

【０００２】

【従来の技術】図８は、例えば「ＭＰＥＧ−４のすべ
て」（工業調査会）ｐ．３９〜ｐ．４０等に示されてい
る従来の映像信号符号化装置の構成を示すブロック図で
ある。図９はこの従来の映像信号符号化装置に入力され
る信号のマクロブロックへの分割を説明する図であり、
図１０はこの従来の映像信号符号化装置から出力される
ビットストリームの構造の説明図である。

【０００３】図８において、１は外部からの入力映像信
号が第１の入力に与えられる減算器である。該減算器１
の出力は、ＤＣＴ（離散コサイン変換）手段２により離
散コサイン変換され、量子化器３により量子化され、直
流（ＤＣ）成分、交流（ＡＣ）成分の量子化値を予測す
るためのＤＣ／ＡＣ予測器４と逆量子化器６とに入力さ
れる。ＤＣ／ＡＣ予測器４の出力は可変長符号化手段５
の第１の入力に与えられ、可変長符号化手段５はビット
ストリームを出力する。

【０００４】一方、逆量子化器６の出力は、逆ＤＣＴ手
段７により逆変換され、加算器８の第１の入力に与えら
れる。加算器８の出力はメモリ９に与えられ、メモリ９
の出力は予測画像作成手段１０の第１の入力と動き検出
手段１１の第１の入力とに与えられる。

【０００５】動き検出手段１１の第２の入力には外部か
ら入力される映像信号が与えられ、動き検出手段１１の
出力は予測画像作成手段１０の第２の入力と動きベクト
ル予測器１２とに与えられる。

【０００６】動きベクトル予測器１２の出力は可変長符
号化手段５の第２の入力に与えられる。また、予測画像
作成手段１０の出力は減算器１の第２の入力と加算器８
の第２の入力に与えられる。

【０００７】次にこの映像信号符号化装置の動作を説明
する。外部からの映像信号は図９に示すように基本処理
単位であるマクロブロックに分割され、マクロブロック
単位の信号として映像信号符号化装置入力される。な
お、映像信号符号化装置にマクロブロック生成のための
手段を設け、映像信号符号化装置内で映像信号をマクロ
ブロック単位の信号に変換するようにしてもよい。

【０００８】入力映像信号の画像フォーマットが４：
２：０フォーマット（輝度信号Ｙに対し、色差信号Ｃｂ
及びＣｒが水平及び垂直方向に半分の画素にサブサンプ
リングされたフォーマット）の場合、１６画素×１６ラ
インの一つのマクロブロックは輝度信号Ｙについての８
画素×８ラインの４個のブロックと、色差信号Ｃｂにつ
いての８画素×８ラインの１個のブロックと、色差信号
Ｃｒについての１個の８画素×８ラインのブロックの計
６個のブロックから構成される。なお、ここでは、外部
から入力されるＶＯＰ（単位画像：Ｖｉｄｅｏ Ｏｂｊ
ｅｃｔ Ｐｌａｎｅ）は矩形形状であり、フレームと同
一であるとする。

【０００９】上記６個のブロックはＤＣＴ手段２により
離散コサイン変換されてＤＣＴ係数が生成され、このＤ
ＣＴ係数は量子化手段３により量子化される。量子化さ
れたＤＣＴ係数は、ＤＣ／ＡＣ予測器４においてＤＣ及
びＡＣ成分について各係数の予測が行われた後、量子化
パラメータなどの付加情報とともに可変長符号化（イン
トラ符号化）される。尚、すべてのマクロブロックに対
してイントラ符号化が行われるＶＯＰはＩ−ＶＯＰ（Ｉ
ｎｔｒａ−ＶＯＰ）と呼ばれる。

【００１０】一方、量子化されたＤＣＴ係数は、逆量子
化手段６において逆量子化され、逆ＤＣＴ手段７での逆
変換により復号され、復号画像としてメモリ９に記憶さ
れる。このメモリ９に記憶された復号画像はインター符
号化（フレーム間符号化ともいう）を行うときに使用さ
れる。

【００１１】インター符号化を行う場合は、動き検出手
段１１において外部から入力されたマクロブロックの動
きを示す動きベクトルを検出する。動きベクトルとは、
メモリ９に記憶された復号画像を該ベクトルに基づき動
き補償した際、入力されたマクロブロックとの誤差が最
小になるベクトルである。

【００１２】予測画像作成手段１０は、動き検出手段１
１により検出された動きベクトルに基づき予測画像を作
成する。続いて、減算器１により入力されたマクロブロ
ックと予測画像作成手段１０で作成された予測画像との
差分信号を求め、該差分信号をＤＣＴ手段２により離散
コサイン変換してＤＣＴ係数を生成し、量子化手段３に
より量子化する。

【００１３】量子化されたＤＣＴ係数は、予測符号化さ
れた動きベクトルおよび量子化パラメータなどの付加情
報とともに可変長符号化される。また、量子化されたＤ
ＣＴ係数は、逆量子化手段６において逆量子化され、逆
ＤＣＴ手段７において逆変換され、加算器８によって予
測画像と加算され、復号画像としてメモリ９に記憶され
る。

【００１４】可変長符号化手段５から出力されるビット
ストリームは、図１０に示すようなものである。すなわ
ち、可変長符号化手段５は符号化開始時には先ず、画像
サイズやビットレートなどの情報を含む上位ヘッダ（Ｖ
ｉｓｕａｌ ＯｂｊｅｃｔＳｅｑｕｅｎｃｅ Ｈｅａｄ
ｅｒ、Ｖｉｓｕａｌ Ｏｂｊｅｃｔ Ｈｅａｄｅｒ、Ｖ
ｉｄｅｏ Ｏｂｊｅｃｔ Ｌａｙｅｒ等）を出力し、そ
の後に各ＶＯＰの符号化データを出力し、符号化終了時
にエンドコードを出力する。

【００１５】

【発明が解決しようとする課題】上記のような従来の映
像信号符号化装置をテレビ電話等のリアルタイムの映像
信号伝送装置に用いると、送信者が自画像を相手に送り
たくない場合には映像信号の符号化が中断されることに
なるため、一旦、エンドコードが送出される。その後、
映像の伝送を再開するには、再度上位ヘッダから送信し
なければならず、信号の伝送効率が低下するという問題
があった。

【００１６】本発明は、上述の問題を解消するためにな
されたものであり、映像信号の符号化及び伝送を継続し
たまま、送信者が自画像の伝送を保留できる映像信号符
号化装置を提示することを第１の課題とする。

【００１７】また、本発明は、自画像を伝送していない
間、送信者が自画像をモニタで確認できる映像信号伝送
装置を提示することを第２の課題とする。

【００１８】

【課題を解決するための手段】請求項１に記載の発明
は、上記第１の課題を解決するために、映像信号を記憶
する記憶手段と、該記憶手段に記憶された映像信号を符
号化する符号化手段とを有する映像信号符号化装置にお
いて、入力映像に静止画像の少なくとも一部を重畳して
出力する機能を備えたオーバーレイ手段と、前記オーバ
ーレイ手段の出力を映像信号として前記記憶手段に書き
込む書き込み手段とを備え、前記書き込み手段は、前記
記憶手段への書き込みを行うか否かを、外部からの制御
信号に従い映像のフレーム毎に設定することを特徴とす
る。

【００１９】請求項２に記載の発明は、請求項１に記載
の発明において、前記書き込み手段が、前記記憶手段へ
の書き込みの停止を指示する制御信号を受けたとき、書
き込み途中のフレームを最後まで書き込んでから前記記
憶手段への書き込みを停止し、前記記憶手段への書き込
みの開始を指示する制御信号を受けるまで書き込みの停
止を継続することを特徴とする。

【００２０】請求項３に記載の発明は、上記第２の課題
を解決するために、映像信号を記憶する記憶手段と、該
記憶手段に記憶された映像信号を符号化する符号化手段
と、符号化された映像信号を伝送する伝送手段とを有す
る映像信号伝送装置において、静止画像記憶手段を有
し、入力映像に記憶した静止画像の少なくとも一部を重
畳した映像を出力する機能を有するオーバーレイ手段
と、前記オーバーレイ手段の出力を映像信号として前記
記憶手段に書き込む書き込み手段と、入力映像または保
留画像のいずれを伝送すべきかを指示する外部からの信
号に基づき前記オーバーレイ手段及び前記書き込み手段
を制御する制御手段とを備え、前記制御手段は、保留画
像の伝送を指示する信号を受けたときに、前記静止画像
記憶手段内に任意に設定可能な静止画像を保留画像とし
て書き込み、前記オーバーレイ手段に該保留画像を出力
させ、該保留画像に対応した信号が前記記憶手段に書き
込まれてから、前記書き込み手段に前記記憶手段への書
き込みを停止させることを特徴とする。

【００２１】請求項４に記載の発明は、上記第２の課題
を解決するために、映像信号を記憶する記憶手段と、該
記憶手段に記憶された映像信号を符号化する符号化手段
と、符号化された映像信号を伝送する伝送手段とを有す
る映像信号伝送装置において、静止画像記憶手段を有
し、入力映像に記憶した静止画像信号の少なくとも一部
を重畳した映像信号を出力する機能を備えたオーバーレ
イ手段と、前記オーバーレイ手段の出力を映像信号とし
て前記記憶手段に書き込む書き込み手段と、前記オーバ
ーレイ手段の出力を表示する画像表示手段と、入力映像
または保留画像のいずれを伝送すべきかを指示する外部
からの信号に基づき前記オーバーレイ手段及び前記書き
込み手段を制御する制御手段とを備え、前記制御手段
は、保留画像の伝送を指示する信号を受けたときに、前
記静止画像記憶手段内に任意に設定可能な静止画像を保
留画像として書き込み、前記オーバーレイ手段に該保留
画像を出力させ、該保留画像に対応した信号が前記記憶
手段に書き込まれてから、前記書き込み手段に前記記憶
手段への書き込みを停止させ、その後前記オーバーレイ
手段に入力映像または該入力映像に記憶した静止画像の
少なくとも一部を重畳した映像を出力させることを特徴
とする。

【００２２】請求項５に記載の発明は、請求項４に記載
の発明において、前記制御手段が、入力映像の伝送の再
開を指示する信号を受けた時に、前記書き込み手段に前
記記憶手段に対する書き込みを再開させることを特徴と
する。

【００２３】

【発明の実施の形態】以下、本発明をその実施の形態を
示す図面に基づいて具体的に説明する。 実施の形態１．図１は本発明の映像信号伝送装置の実施
の形態１の構成を示すブロック図である。実施の形態１
の装置は、映像信号符号化装置１１０、撮像装置１０
１、画像表示装置１０８、符号化装置制御手段１０９を
備える。

【００２４】映像信号符号化装置１１０は、オーバーレ
イ手段１０２、マトリックス変換器１０３、間引きフィ
ルタ１０４、符号化画像書き込み手段１０５、メモリ１
０６、符号化手段１０７を含む。オーバーレイ手段１０
２は、加算器１０２ａ、オーバーレイメモリ１０２ｂ、
セレクタ１０２ｃから構成される。

【００２５】図１において、動画像を撮影するカメラ等
の撮像装置１０１から出力される映像信号は、加算器１
０２ａの第１の入力とセレクタ１０２ｃの第１の入力と
に与えられる。加算器１０２ａの第２の入力にはオーバ
ーレイメモリ１０２ｂの出力が与えられる。加算器１０
２ａの出力はセレクタ１０２ｃの第２の入力に与えられ
る。オーバーレイメモリ１０２ｂの出力はセレクタ１０
２ｃの第３の入力にも与えられる。

【００２６】セレクタ１０２ｃの出力は、ＣＲＴや液晶
ディスプレイ等の画像表示装置１０８に入力される一
方、マトリックス変換器１０３と間引きフィルタ１０４
を介して、符号化画像書き込み手段１０５にも与えられ
る。符号化画像書き込み手段１０５の第１の出力はメモ
リ１０６を介して、符号化手段１０７に入力される。符
号化画像書き込み手段１０５の第２の出力は符号化装置
制御手段１０９に入力される。

【００２７】符号化装置制御手段１０９は、外部から入
力される制御信号に基づきオーバーレイメモリ１０２ｂ
と符号化画像書き込み手段１０５とを制御する。以下に
この映像信号伝送装置の動作を説明する。

【００２８】撮像装置１０１から入力される映像信号は
ＲＧＢ信号であってもよく、また、輝度信号Ｙと色差信
号Ｃｂ、Ｃｒであってもよいが、ここではＲＧＢ信号で
あるとする。オーバーレイ手段１０２は、図２に示すよ
うに撮像装置１０１から入力される映像信号に、オーバ
ーレイメモリ１０２ｂに記憶された静止画像を必要に応
じて、透過または半透過でオーバーレイする。入力映像
を（ａ）、オーバーレイメモリに記憶されている静止画
像を（ｂ）とするとき、静止画像の斜線部２０１におい
て入力映像を全透過とし、文字部２０２において入力映
像を非透過とする場合は、画像（ｃ）が出力される。ま
た、画像全体を半透過でオーバーレイする場合には、入
力映像と静止画像の平均の画像（ｄ）が出力される。ま
た、入力映像全体を非透過とした場合は、入力映像に代
わり静止画像（ｅ）が出力される。

【００２９】なお、図２では説明を簡単にするため、文
字部と他の部分のそれぞれについて、透過／半透過／非
透過を切り替える例を示したが、透過／半透過／非透過
の切り替えはこれに限らず、画素単位で設定することも
できる。この場合、入力映像の各画素を透過とするか、
半透過とするか、あるいは非透過とするかは、予め静止
画像とともにオーバーレイメモリ１０２ｂに設定してお
く。

【００３０】図３にオーバーレイメモリ１０２ｂのデー
タフォーマットの一例を示す。このフォーマットでは、
１画素は１６ビットからなり、その最上位ビットは画素
の半透過／非透過を表し、他の１５ビットは、Ｒ、Ｇ、
Ｂにそれぞれ５ビットづつ割り当てられている。最上位
ビットが０の場合は入力映像を非透過とすることを表
し、最上位ビットが１の場合は半透過とすることを表
す。また、８０００（Ｈｅｘ）を特別な処理をする番号
（マジックナンバーと呼ぶ。）としてリザーブし、１６
ビット全体の値が８０００（Ｈｅｘ）である場合は入力
映像を透過とする。

【００３１】オーバーレイ手段１０２から出力された映
像信号は、マトリックス変換器１０３において、輝度信
号Ｙと２つの色差信号Ｃｂ、Ｃｒに変換される。さら
に、間引きフィルタ１０４において、色差信号Ｃｂ、Ｃ
ｒの帯域が１／２に制限され、１／２にダウンサンプリ
ングされる。すなわち、間引きフィルタ１０４から出力
される信号は、いわゆる４：２：０フォーマットの信号
となる。

【００３２】間引きフィルタ１０４の出力は、符号化画
像書き込み手段１０５に入力される。符号化画像書き込
み手段１０５は、符号化装置制御手段１０９から与えら
れる制御信号が「入力ＯＮ」を指示する場合は、間引き
フィルタ１０４の出力をメモリ１０６に書き込むが、制
御信号が「入力ＯＦＦ」を指示する場合は、メモリ１０
６に記憶されている画像を書き換えない。

【００３３】なお、符号化画像書き込み手段１０５は、
間引きフィルタ１０４から出力される映像信号をメモリ
１０６に書き込むか否かの切り替えをフレーム単位に行
う。すなわち、フレームの途中で制御信号が「入力Ｏ
Ｎ」から「入力ＯＦＦ」に変わった場合は、該フレーム
を最後までメモリ１０６に書き込んでからメモリ１０６
への書き込みを停止する。同様に、フレームの途中で制
御信号が「入力ＯＦＦ」から「入力ＯＮ」に変わった場
合も、次のフレームの同期信号を待ち、次のフレームの
先頭からメモリ１０６への書き込みを開始する。なお、
符号化画像書き込み手段１０５は、メモリ１０６への書
き込みを行ったか否かを示すステータス信号を、フレー
ム毎に符号化装置制御手段１０９へ出力する。

【００３４】メモリ１０６に書き込まれた映像信号は、
図９を参照して前に説明したように基本処理単位である
マクロブロックに分割され、符号化手段１０７に入力さ
れる。符号化手段１０７としては、例えば図８を参照し
て説明した映像信号符号化装置を用いることができる。

【００３５】符号化装置制御手段１０９は、例えばユー
ザーインターフェースを通してユーザーから入力される
制御信号に基づき、オーバーレイ手段１０２および符号
化画像書き込み手段１０５を制御する。以下に、符号化
装置制御手段１０９の動作を図４のタイムチャートを参
照して説明する。

【００３６】通常は、符号化画像書き込み手段１０５に
出力される制御信号を「入力ＯＮ」とする。また、ユー
ザーが静止画像のオーバーレイを選択したときには、ユ
ーザーが選択した静止画像と、入力映像の透過／半透過
／非透過を表すデータとをオーバーレイメモリ１０２ｂ
に書き込み設定する。これにより撮像装置から入力され
た映像信号にユーザー設定に応じた静止画像をオーバー
レイした画像が、符号化手段１０７で符号化され、また
画像表示装置１０８に表示される。なお、ユーザーが静
止画像のオーバーレイを選択しなかった場合は、入力映
像を全画面で透過とするようなデータがオーバーレイメ
モリ１０２ｂに設定される。すなわち、図３を参照して
説明したように、全画素の画素データを８０００（Ｈｅ
ｘ）とする。

【００３７】ユーザーが撮像装置から入力される映像信
号を伝送したくない場合（例えば、着信したテレビ電話
に音声だけで応答したい場合）、「保留」を指示する制
御信号が符号化装置制御手段１０９に入力される。この
とき、符号化装置制御手段１０９は、所定の静止画像あ
るいはユーザーが選択した静止画像（以下、保留画像と
いう）をオーバーレイメモリ１０２ｂに書き込み、入力
映像が非透過となるように設定する。また、符号化画像
書き込み手段１０５には「入力ＯＮ」を指示する制御信
号を入力する。これにより、「保留」中はオーバーレイ
メモリに書き込まれた保留画像が符号化手段１０７で符
号化され、伝送されることになる。

【００３８】「保留」中に、ユーザーが撮像装置から入
力される映像信号を確認したい場合、符号化装置制御手
段１０９は、オーバーレイメモリ１０２ｂに設定された
保留画像をメモリ１０６に書き込んだ後に、「入力ＯＦ
Ｆ」を指示する制御信号を符号化画像書き込み手段１０
５に出力する。その後、入力映像を全画面で透過とする
ようなデータをオーバーレイメモリ１０２ｂに設定す
る。すなわち、全画素の画素データを８０００（Ｈｅ
ｘ）とする。このようにすれば、符号化画像書き込み手
段１０５には「入力ＯＦＦ」を指示する信号が入力さ
れ、一方、メモリ１０６は「保留」設定時にオーバーレ
イメモリ１０２ｂに書き込んだ保留画像を保持している
ので符号化手段１０７は、該保留画像の符号化を継続す
る。また、オーバーレイメモリ１０２ｂのデータは、入
力映像を非透過から透過とするように書き換わっている
ので、画像表示装置１０８は撮像装置１０１から入力さ
れる映像信号を表示する。

【００３９】さらに、「保留」中に「保留解除」を指示
する制御信号が符号化装置制御手段１０９に入力される
と、符号化装置制御手段１０９は、符号化画像書き込み
手段１０５に「入力ＯＮ」を指示する制御信号を出力す
る。これにより、メモリ１０６には撮像装置１０１から
入力される映像信号が書き込まれ、符号化手段１０７で
符号化されて伝送される。

【００４０】なお、上記の説明では、符号化装置制御手
段１０９は、オーバーレイメモリ１０２ｂに設定された
保留画像をメモリ１０６に書き込んだ後に、「入力ＯＦ
Ｆ」を指示する制御信号を符号化画像書き込み手段１０
５に出力しているが、符号化画像書き込み手段１０５
は、フレームの途中で「入力ＯＮ」から「入力ＯＦＦ」
に切り替わっても、当該フレームを最後までメモリ１０
６に書き込んでからメモリ１０６へのフレームの書き込
みを停止するので、符号化装置制御手段１０９は、フレ
ーム同期信号の出力タイミングを考慮することなく、オ
ーバーレイメモリ１０２ｂへの保留画像の書き込みが終
わった任意の時点で、「入力ＯＦＦ」信号を出力するこ
とができる。

【００４１】また、上記の説明では、符号化画像書き込
み手段１０５は「入力ＯＦＦ」を指示する制御信号を受
けた場合、次のフレームからメモリ１０６への書きこみ
を停止しているが、確実に保留画像をメモリ１０６に取
り込むために、符号化画像書き込み手段１０５は「入力
ＯＦＦ」を示す制御信号を受けた後、１フレーム以上の
期間にわたって、オーバーレイメモリ１０２ｂの保留画
像をメモリ１０６に書き込んでから停止するようにして
もよい。このようにすれば、符号化装置制御手段１０９
は、オーバーレイメモリ１０２ｂへの保留画像の書き込
みと、符号化画像書き込み手段１０５への「入力ＯＦ
Ｆ」の制御信号の出力を同時に行うことができる。

【００４２】なお、この場合、ユーザーが「保留」中に
撮像装置から入力される映像信号を確認するときには、
符号化装置制御手段１０９は、符号化画像書き込み手段
１０５から返されるステータス信号からメモリ１０６へ
の書き込みを行っていないことを確認してから、オーバ
ーレイメモリ１０２ｂに入力映像を全画面で透過とする
データを設定する。

【００４３】上記した実施の形態１においては、オーバ
ーレイ手段１０２のデータフォーマットを、図３を参照
して説明したように１画素を１６ビットで構成し、マジ
ックナンバーを使うフォーマットとしたが、半透過が不
要であれば、マジックナンバーを使わず、最上位の１ビ
ットが０のときは非透過、１のときは透過としてもよ
い。また、フルカラーの画像でオーバーレイする場合
は、ＲＧＢに２４ビット（各８ビット）を割り当て、ま
た、透過／半透過／非透過を２ビットで表すようにした
２６ビット構成とすることができる。この場合、半透過
が不要であれば、透過／非透過を１ビットで表し、１画
素を２５ビット構成とすることもできる。

【００４４】また、符号化手段１０７としては、図８に
示した従来の映像信号符号化装置を用いることができる
と述べたが、符号化手段１０７はこれに限定されるもの
ではなく、ＭＰＥＧ４、ＭＰＥＧ２、ＭＰＥＧ１、Ｈ．
２６３、Ｍｏｔｉｏｎ ＪＰＥＧ等の符号化方式に対応
する装置、あるいは２次元ＤＰＣＭなどのようにマクロ
ブロックを使わない符号化方式に対応する装置を用いる
ことができる。符号化手段１０７がマクロブロック単位
の符号化を行うものでない場合には、メモリ１０６は例
えば走査線順にデータを出力するように構成される。

【００４５】実施の形態２．上記した実施の形態１にお
いては、図４のタイムチャートを参照して説明したよう
に符号化装置制御手段１０９は、外部から入力される
「保留」、「保留解除」を指示する制御信号に基づき映
像信号符号化装置１１０を制御しているが、実施の形態
２では、この外部から入力される制御信号に、「自画像
確認」を指示する信号を加えている。以下、図５のタイ
ムチャートを参照して実施の形態２の動作を説明する。

【００４６】まず、「保留」を指示する制御信号が符号
化装置制御手段１０９に入力された場合、符号化装置制
御手段１０９は、予め定めた静止画像あるいはユーザー
が選択した静止画像を保留画像としてオーバーレイメモ
リ１０２ｂに書き込み、入力映像が非透過となるように
設定する。また、符号化画像書き込み手段１０５には
「入力ＯＮ」を指示する制御信号を出力する。これによ
り、符号化手段１０７はオーバーレイメモリに設定され
た保留画像を符号化することになる。

【００４７】次に、符号化装置制御手段１０９が「保
留」を指示する制御信号を受けた後に「自画像確認」を
指示する制御信号を受けた場合、オーバーレイメモリ１
０２ｂに設定された保留画像をメモリ１０６に記憶さ
せ、次に「入力ＯＦＦ」を指示する制御信号を符号化画
像書き込み手段１０５に出力する。その後、入力映像を
全画面で透過とするデータをオーバーレイメモリ１０２
ｂに設定する。すなわち、図３において、全画素のデー
タを８０００（Ｈｅｘ）とする。このとき、符号化画像
書き込み手段１０５には「入力ＯＦＦ」を指示する信号
が入力されているので、メモリ１０６は「保留」設定時
にオーバーレイメモリ１０２ｂに書き込んだ保留画像を
保持しており、符号化手段１０７はこの保留画像の符号
化を継続する。一方、オーバーレイメモリ１０２ｂは入
力映像を透過とするデータに書き換わっているので、画
像表示装置１０８には撮像装置１０１から出力される映
像が表示される。

【００４８】さらに、「自画像確認」の後、「保留解
除」を指示する制御信号が符号化装置制御手段１０９に
入力されると、符号化装置制御手段１０９は、符号化画
像書き込み手段１０５に「入力ＯＮ」を指示する制御信
号を出力する。これにより、メモリ１０６には撮像装置
１０１から出力される映像信号が書き込まれ、符号化手
段１０７で符号化される。

【００４９】なお、「保留」を指示する制御信号を受け
た後、「自画像確認」を指示する制御信号が入力されず
に「保留解除」を指示する制御信号が入力された場合
は、図６のタイムチャートに示すように、符号化装置制
御手段１０９は、入力映像を全画面で透過とするデータ
をオーバーレイメモリ１０２ｂに設定する。

【００５０】実施の形態３．図７は、本発明の映像信号
伝送装置の実施の形態３の構成を示すブロック図であ
る。図７において、図１に示した要素と同じ要素には同
じ符号を付している。即ち、実施の形態３の伝送装置
は、映像信号符号化装置１１０、撮像装置１０１、画像
表示装置１０８、符号化装置制御手段１０９を備える。
映像信号符号化装置１１０は、オーバーレイ手段１０
２、符号化画像書き込み手段１０５、メモリ１０６、符
号化手段１０７を含む。オーバーレイ手段１０２は、加
算器１０２ａ、オーバーレイメモリ１０２ｂ、セレクタ
１０２ｃから構成される。

【００５１】図７において、動画像を撮影するカメラ等
の撮像装置１０１から出力される映像信号は、加算器１
０２ａの第１の入力とセレクタ１０２ｃの第１の入力と
に与えられる。加算器１０２ａの第２の入力にはオーバ
ーレイメモリ１０２ｂの出力が与えられる。加算器１０
２ａの出力はセレクタ１０２ｃの第２の入力に与えら
れ、オーバーレイメモリ１０２ｂの出力はセレクタ１０
２ｃの第３の入力にも与えられる。これらの加算器１０
２ａ、オーバーレイメモリ１０２ｂ、セレクタ１０２ｃ
はオーバーレイ手段１０２を構成する。

【００５２】セレクタ１０２ｃの出力は、ＣＲＴや液晶
ディスプレイ等の画像表示装置１０８に入力されるとと
もに、符号化画像書き込み手段１０５に与えられる。符
号化画像書き込み手段１０５の第１の出力はメモリ１０
６を介して符号化手段１０７に入力される。符号化画像
書き込み手段１０５の第２の出力は符号化装置制御手段
１０９に入力される。符号化装置制御手段１０９は、外
部からの制御信号に基づいてオーバーレイメモリ１０２
ｂと符号化画像書き込み手段１０５とを制御する。

【００５３】実施の形態３は、撮像装置１０１が出力す
る映像信号がＲＧＢ信号ではなく、輝度信号Ｙと色差信
号Ｃｂ、Ｃｒである点で実施の形態１と異なる。従っ
て、実施の形態３では、映像信号符号化装置１１０はマ
トリックス変換器１０３及び間引きフィルタ１０４を備
えないが、その他の動作は実施の形態１と同様である。

【００５４】なお、撮像装置１０１が出力する映像信号
がＲＧＢ信号であり、かつ、符号化手段１０７がＲＧＢ
信号をそのまま符号化する場合も、映像信号符号化装置
１１０を図７と同じ構成にすることができる。

【００５５】

【発明の効果】請求項１に記載の映像信号符号化装置
は、静止画像を入力映像にオーバーレイする機能と、映
像信号を記憶手段に書き込むか否かを制御する機能とを
有するので、この装置を映像信号伝送装置に用いれば、
送信者は、映像信号の符号化及び伝送を継続したまま、
自画像の送信を保留することができる。また、書き込み
手段はフレーム毎に書き込みを行うか否かを設定するの
で、フレームの同期信号を考慮することなく、書き込み
手段に制御信号を送ることができる。

【００５６】請求項２に記載の映像信号符号化装置によ
れば、記憶手段への書き込みの停止を指示する制御信号
を受けると、静止画像が記憶手段に完全に書き込まれて
から記憶手段への書き込みを停止し、書き込みの再開を
指示する制御信号示を受けるまで記憶手段への書き込み
を行わないので、その間、オーバーレイ手段から入力映
像を出力しても静止画像の符号化及び送信が継続され
る。また、オーバーレイ手段への制御信号の送信と書き
込み手段への制御信号の送信のタイミングの整合を考慮
しなくてもよい。

【００５７】請求項３に記載の映像信号伝送装置によれ
ば、この装置を使用する送信者が「保留」を選択した場
合には、任意に設定可能な静止画像が保留画像としてオ
ーバーレイ手段に設定され、記憶手段に書き込まれてか
ら該記憶手段への書き込みが停止されるので、自画像に
代え任意の静止画像を保留画像として送信することがで
きる。

【００５８】請求項４に記載の映像信号伝装置によれ
ば、この装置を使用する送信者が「保留」を選択した場
合には、任意に設定可能な静止画像が保留画像としてオ
ーバーレイ手段に設定され、記憶手段に書き込まれてか
ら該記憶手段への書き込みが停止されるので、自画像に
代え任意の静止画像を保留画像として符号化し送信する
ことができ、また、その間にオーバーレイ手段から入力
映像を出力させれば、保留画像の送信中に自画像をモニ
タで確認することができる。

【００５９】請求項５に記載の映像信号伝装置によれ
ば、送信者が「保留」を解除すれば、保留画像に続き、
入力映像を送信することができる。

【図面の簡単な説明】

【図１】 本発明の映像信号伝送装置の実施の形態１の
構成を示すブロック図である。

【図２】 実施の形態１におけるオーバーレイ手段の動
作の説明図である。

【図３】 実施の形態１におけるオーバーレイ手段のデ
ータフォーマットの説明図である。

【図４】 実施の形態１の映像信号伝送装置の動作を説
明するタイムチャートである。

【図５】 本発明の映像信号伝送装置の実施の形態２の
動作を説明するタイムチャートである。

【図６】 実施の形態２の映像信号伝送装置の動作を説
明するタイムチャートである。

【図７】 本発明の映像信号伝送装置の実施の形態３の
構成を示すブロック図である。

【図８】 従来の映像信号符号化装置の構成を示すブロ
ック図である。

【図９】 映像信号符号化装置に入力される信号のマク
ロブロックへの分割を説明する図である。

【図１０】 映像信号符号化装置から出力されるビット
ストリームの構成を示す図である。

【符号の説明】

１０１ 撮像装置、 １０２ オーバーレイ手段、 １
０３ マトリックス変換器、 １０４ 間引きフィル
タ、 １０５ 符号化画像書き込み手段、 １０６ メ
モリ、 １０７ 符号化手段、１０８ 画像表示装置、
１０９ 符号化装置制御手段、 １１０ 映像信号符
号化装置。

───────────────────────────────────────────────────── フロントページの続き (72)発明者 貴島 淳子 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 中尾 貴史 兵庫県尼崎市猪名寺２丁目５番１号 三菱 電機マイコン機器ソフトウエア株式会社内 (72)発明者 杉山 和宏 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 Ｆターム(参考） 5C059 LB05 PP01 PP15 PP24 SS07 SS10 SS14 UA31

Claims (5)

【特許請求の範囲】
1. 【請求項１】 映像信号を記憶する記憶手段と、該記憶
   手段に記憶された映像信号を符号化する符号化手段とを
   有する映像信号符号化装置において、 入力映像に静止画像の少なくとも一部を重畳して出力す
   る機能を備えたオーバーレイ手段と、 前記オーバーレイ手段の出力を映像信号として前記記憶
   手段に書き込む書き込み手段とを備え、 前記書き込み手段は、前記記憶手段への書き込みを行う
   か否かを、外部からの制御信号に従い映像のフレーム毎
   に設定することを特徴とする映像信号符号化装置。
2. 【請求項２】 前記書き込み手段は、前記記憶手段への
   書き込みの停止を指示する制御信号を受けたとき、書き
   込み途中のフレームを最後まで書き込んでから前記記憶
   手段への書き込みを停止し、前記記憶手段への書き込み
   の開始を指示する制御信号を受けるまで書き込みの停止
   を継続することを特徴とする請求項１に記載の映像信号
   符号化装置。
3. 【請求項３】 映像信号を記憶する記憶手段と、該記憶
   手段に記憶された映像信号を符号化する符号化手段と、
   符号化された映像信号を伝送する伝送手段とを有する映
   像信号伝送装置において、 静止画像記憶手段を有し、入力映像に記憶した静止画像
   の少なくとも一部を重畳した映像を出力する機能を有す
   るオーバーレイ手段と、 前記オーバーレイ手段の出力を映像信号として前記記憶
   手段に書き込む書き込み手段と、 入力映像または保留画像のいずれを伝送すべきかを指示
   する外部からの信号に基づき前記オーバーレイ手段及び
   前記書き込み手段を制御する制御手段とを備え、 前記制御手段は、保留画像の伝送を指示する信号を受け
   たときに、前記静止画像記憶手段内に任意に設定可能な
   静止画像を保留画像として書き込み、前記オーバーレイ
   手段に該保留画像を出力させ、該保留画像に対応した信
   号が前記記憶手段に書き込まれてから、前記書き込み手
   段に前記記憶手段への書き込みを停止させることを特徴
   とする映像信号伝送装置。
4. 【請求項４】 映像信号を記憶する記憶手段と、該記憶
   手段に記憶された映像信号を符号化する符号化手段と、
   符号化された映像信号を伝送する伝送手段とを有する映
   像信号伝送装置において、 静止画像記憶手段を有し、入力映像に記憶した静止画像
   信号の少なくとも一部を重畳した映像信号を出力する機
   能を備えたオーバーレイ手段と、 前記オーバーレイ手段の出力を映像信号として前記記憶
   手段に書き込む書き込み手段と、 前記オーバーレイ手段の出力を表示する画像表示手段
   と、 入力映像または保留画像のいずれを伝送すべきかを指示
   する外部からの信号に基づき前記オーバーレイ手段及び
   前記書き込み手段を制御する制御手段とを備え、 前記制御手段は、保留画像の伝送を指示する信号を受け
   たときに、前記静止画像記憶手段内に任意に設定可能な
   静止画像を保留画像として書き込み、前記オーバーレイ
   手段に該保留画像を出力させ、該保留画像に対応した信
   号が前記記憶手段に書き込まれてから、前記書き込み手
   段に前記記憶手段への書き込みを停止させ、その後前記
   オーバーレイ手段に入力映像または該入力映像に記憶し
   た静止画像の少なくとも一部を重畳した映像を出力させ
   ることを特徴とする映像信号伝送装置。
5. 【請求項５】 前記制御手段は、入力映像の伝送の再開
   を指示する信号を受けた時に、前記書き込み手段に前記
   記憶手段に対する書き込みを再開させることを特徴とす
   る請求項４に記載の映像信号伝送装置。