JP2915248B2 - 画像通信システム - Google Patents
画像通信システムInfo
- Publication number
- JP2915248B2 JP2915248B2 JP13112493A JP13112493A JP2915248B2 JP 2915248 B2 JP2915248 B2 JP 2915248B2 JP 13112493 A JP13112493 A JP 13112493A JP 13112493 A JP13112493 A JP 13112493A JP 2915248 B2 JP2915248 B2 JP 2915248B2
- Authority
- JP
- Japan
- Prior art keywords
- region
- interest
- image
- unit
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Description
【０００１】
【産業上の利用分野】本発明は、画像通信システムに関
し、特に画像信号を符号化して伝送する画像符号化装置
を用いた画像通信システムに関するものである。
し、特に画像信号を符号化して伝送する画像符号化装置
を用いた画像通信システムに関するものである。
【０００２】
【従来の技術】ＴＶ電話システム、ＴＶ会議システム、
遠隔監視システム等の画像通信システムには、入力画像
データをブロックに分割してブロック毎に直交変換及び
量子化を行った後、可変長符号化をしてデータを伝送す
る画像符号化装置が一般的に用いられる。従来、この種
の画像符号化装置としては、例えば特開平４−１７６２
９０号公報に開示されたものが知られている。図９に、
その構成例を示す。図９において、入力部１０１に入力
された画像データはその内部メモリに一時的に記憶さ
れ、ブロック毎に読み出される。読み出されたブロック
データは、直交変換部１０２にて直交変換され、さらに
量子化部１０３にて量子化される。
遠隔監視システム等の画像通信システムには、入力画像
データをブロックに分割してブロック毎に直交変換及び
量子化を行った後、可変長符号化をしてデータを伝送す
る画像符号化装置が一般的に用いられる。従来、この種
の画像符号化装置としては、例えば特開平４−１７６２
９０号公報に開示されたものが知られている。図９に、
その構成例を示す。図９において、入力部１０１に入力
された画像データはその内部メモリに一時的に記憶さ
れ、ブロック毎に読み出される。読み出されたブロック
データは、直交変換部１０２にて直交変換され、さらに
量子化部１０３にて量子化される。
【０００３】この量子化データは、動き検出・補償部１
０４にて逆量子化及び逆直交変換されることにより、入
力画像データに対する再生画像データとして得られる。
動き検出・補償部１０４ではさらに、この再生画像デー
タと次フレームの入力画像データとに基づいてブロック
毎の動きベクトルを計算し、再生画像データ及び動きベ
クトルに基づいて次フレームの入力画像データに対する
予測画像データを求める処理が行われる。次フレーム以
降の画像データに対しては、入力画像データ又は入力画
像データと予測画像データとの差分の画像データを直交
変換部１０２に入力して処理が継続される。
０４にて逆量子化及び逆直交変換されることにより、入
力画像データに対する再生画像データとして得られる。
動き検出・補償部１０４ではさらに、この再生画像デー
タと次フレームの入力画像データとに基づいてブロック
毎の動きベクトルを計算し、再生画像データ及び動きベ
クトルに基づいて次フレームの入力画像データに対する
予測画像データを求める処理が行われる。次フレーム以
降の画像データに対しては、入力画像データ又は入力画
像データと予測画像データとの差分の画像データを直交
変換部１０２に入力して処理が継続される。
【０００４】量子化データはマルチプレクサ部１０５に
て量子化ステップ情報等の制御情報が付加されて可変長
符号化される。この可変長符号化されたデータは送信バ
ッファ１０６に記憶され、通信路へ伝送される また、伝送画像の品質を決定する量子化ステップの制御
は、ブロック毎の動きベクトルに応じて行われる。すな
わち、ブロック分類部１０７はブロック毎の動きベクト
ルに基づいて各ブロックを分類し、量子化ステップ制御
部１０８はブロック分類部１０７によるブロック分類に
応じて各ブロック毎に量子化ステップを決定する。した
がって、動きの大きい部分の画質が良好になるように、
量子化ステップを決定することにより、視覚特性に応じ
た画像符号化が可能となる。
て量子化ステップ情報等の制御情報が付加されて可変長
符号化される。この可変長符号化されたデータは送信バ
ッファ１０６に記憶され、通信路へ伝送される また、伝送画像の品質を決定する量子化ステップの制御
は、ブロック毎の動きベクトルに応じて行われる。すな
わち、ブロック分類部１０７はブロック毎の動きベクト
ルに基づいて各ブロックを分類し、量子化ステップ制御
部１０８はブロック分類部１０７によるブロック分類に
応じて各ブロック毎に量子化ステップを決定する。した
がって、動きの大きい部分の画質が良好になるように、
量子化ステップを決定することにより、視覚特性に応じ
た画像符号化が可能となる。
【０００５】
【発明が解決しようとする課題】しかしながら、上記構
成の画像符号化装置を用いた従来の画像通信システムで
は、伝送画像の品質を決定する量子化ステップを、画像
データのブロック毎の動きベクトルに応じて制御する構
成となっていたので、伝送画像の品質が送信側にて一方
的に決定され、受信側の関心の高い画像領域を詳細に伝
送することができないという問題点があった。本発明
は、上記課題に鑑みてなされたものであり、その目的と
するところは、受信側の関心の高い画像領域について高
画質の画像伝送を可能とした画像通信システムを提供す
ることにある。
成の画像符号化装置を用いた従来の画像通信システムで
は、伝送画像の品質を決定する量子化ステップを、画像
データのブロック毎の動きベクトルに応じて制御する構
成となっていたので、伝送画像の品質が送信側にて一方
的に決定され、受信側の関心の高い画像領域を詳細に伝
送することができないという問題点があった。本発明
は、上記課題に鑑みてなされたものであり、その目的と
するところは、受信側の関心の高い画像領域について高
画質の画像伝送を可能とした画像通信システムを提供す
ることにある。
【０００６】
【課題を解決するための手段】上記目的を達成するため
に、請求項１記載の画像通信システムでは、画像信号を
符号化して送信する送信装置と、この送信装置から送信
された符号化信号を受信し復号化して画像信号を出力す
る受信装置と、送信装置と受信装置とを接続する通信路
とからなる画像通信システムにおいて、送信装置から送
信される伝送画像の関心領域に関する関心領域情報を指
示して通信路へ出力する関心領域指示部を受信装置側に
設け、通信路から入力される関心領域情報に基づいて関
心領域中の動体を追尾しつつその関心領域情報を補正す
る関心領域補正部と、この関心領域補正部で補正された
関心領域情報に基づいて量子化ステップを制御する量子
化ステップ制御部と、この量子化ステップに応じて画像
信号を符号化する符号化部とを送信装置側に設けた構成
となっている。
に、請求項１記載の画像通信システムでは、画像信号を
符号化して送信する送信装置と、この送信装置から送信
された符号化信号を受信し復号化して画像信号を出力す
る受信装置と、送信装置と受信装置とを接続する通信路
とからなる画像通信システムにおいて、送信装置から送
信される伝送画像の関心領域に関する関心領域情報を指
示して通信路へ出力する関心領域指示部を受信装置側に
設け、通信路から入力される関心領域情報に基づいて関
心領域中の動体を追尾しつつその関心領域情報を補正す
る関心領域補正部と、この関心領域補正部で補正された
関心領域情報に基づいて量子化ステップを制御する量子
化ステップ制御部と、この量子化ステップに応じて画像
信号を符号化する符号化部とを送信装置側に設けた構成
となっている。
【０００７】請求項２記載の画像通信システムでは、受
信装置がさらに、関心領域指示部によって指示される関
心領域情報に基づいて関心領域中の動体を追尾しつつこ
の関心領域情報を補正する関心領域補正部を有してい
る。
信装置がさらに、関心領域指示部によって指示される関
心領域情報に基づいて関心領域中の動体を追尾しつつこ
の関心領域情報を補正する関心領域補正部を有してい
る。
【０００８】
【作用】請求項１記載の画像通信システムにおいて、送
信装置側から画像が伝送されると、受信装置側からその
伝送画像の関心の高い領域についての関心領域情報を指
示して通信路へ出力する。一方、送信装置側において、
通信路から入力される関心領域情報に基づいて関心領域
中の動体を追尾しつつこの関心領域情報を補正して量子
化ステップ制御部に与える。量子化ステップ制御部で
は、この補正された関心領域情報に基づいて量子化ステ
ップを制御する。これによれば、送信装置が伝送画像の
品質を一方的に決定する従来システムとは異なり、受信
側の関心の高い画像領域について高画質にて画像を伝送
できるとともに、送信装置が関心領域中の動体の動き量
に応じて該関心領域の位置を補正するので、受信側の関
心の対象が動体である場合にも対応できる。
信装置側から画像が伝送されると、受信装置側からその
伝送画像の関心の高い領域についての関心領域情報を指
示して通信路へ出力する。一方、送信装置側において、
通信路から入力される関心領域情報に基づいて関心領域
中の動体を追尾しつつこの関心領域情報を補正して量子
化ステップ制御部に与える。量子化ステップ制御部で
は、この補正された関心領域情報に基づいて量子化ステ
ップを制御する。これによれば、送信装置が伝送画像の
品質を一方的に決定する従来システムとは異なり、受信
側の関心の高い画像領域について高画質にて画像を伝送
できるとともに、送信装置が関心領域中の動体の動き量
に応じて該関心領域の位置を補正するので、受信側の関
心の対象が動体である場合にも対応できる。
【０００９】請求項２記載の画像通信システムでは、受
信装置側において、関心領域指示部によって指示される
関心領域情報に基づいて関心領域中の動体を追尾しつつ
この関心領域情報を補正して通信路へ出力する。送信装
置側では、この補正された関心領域情報に基づいて量子
化ステップを制御する。これによれば、受信装置が関心
領域中の動体の動き量に応じて該関心領域の位置を補正
するので、受信側の関心の対象が動体である場合にも対
応できる。
信装置側において、関心領域指示部によって指示される
関心領域情報に基づいて関心領域中の動体を追尾しつつ
この関心領域情報を補正して通信路へ出力する。送信装
置側では、この補正された関心領域情報に基づいて量子
化ステップを制御する。これによれば、受信装置が関心
領域中の動体の動き量に応じて該関心領域の位置を補正
するので、受信側の関心の対象が動体である場合にも対
応できる。
【００１０】
【実施例】以下、本発明の実施例を図面に基づいて詳細
に説明する。図１は、本発明による画像通信システムの
第１の実施例を示すブロック図である。図１において、
本画像通信システムは、画像信号を符号化して送信する
送信装置１０と、この送信装置１０から送信された符号
化信号を受信し復号化して画像信号を出力する受信装置
２０と、送信装置１０と受信装置２０とを接続する通信
路３０とから構成されている。通信路３０は、送信装置
１０から受信装置２０へ入力画像の符号化データを伝送
するとともに、受信装置２０から送信装置１０へ後述す
る関心領域情報を伝送する。
に説明する。図１は、本発明による画像通信システムの
第１の実施例を示すブロック図である。図１において、
本画像通信システムは、画像信号を符号化して送信する
送信装置１０と、この送信装置１０から送信された符号
化信号を受信し復号化して画像信号を出力する受信装置
２０と、送信装置１０と受信装置２０とを接続する通信
路３０とから構成されている。通信路３０は、送信装置
１０から受信装置２０へ入力画像の符号化データを伝送
するとともに、受信装置２０から送信装置１０へ後述す
る関心領域情報を伝送する。
【００１１】送信装置１０は、画像信号を入力して一時
的に記憶する入力部１１と、この入力部１１から画像デ
ータをブロック毎に読み出して直交変換する直交変換部
１２と、直交変換されたデータを後述する量子化ステッ
プに基づいて量子化する量子化部１３と、量子化された
データと量子化ステップ等の制御情報とを混合して可変
長符号化するマルチプレクサ部１４と、可変長符号化さ
れたデータを一時的に記憶して通信路３０へその空き状
況等に応じて出力する送信バッファ１５と、通信路３０
から入力される関心領域情報と送信バッファ１５の残量
とに基づいて量子化ステップを計算して量子化部１３及
びマルチプレクサ部１４へ与える量子化ステップ制御部
１６とから構成されている。
的に記憶する入力部１１と、この入力部１１から画像デ
ータをブロック毎に読み出して直交変換する直交変換部
１２と、直交変換されたデータを後述する量子化ステッ
プに基づいて量子化する量子化部１３と、量子化された
データと量子化ステップ等の制御情報とを混合して可変
長符号化するマルチプレクサ部１４と、可変長符号化さ
れたデータを一時的に記憶して通信路３０へその空き状
況等に応じて出力する送信バッファ１５と、通信路３０
から入力される関心領域情報と送信バッファ１５の残量
とに基づいて量子化ステップを計算して量子化部１３及
びマルチプレクサ部１４へ与える量子化ステップ制御部
１６とから構成されている。
【００１２】一方、受信装置２０は、通信路３０から入
力される符号化データを復号化する画像復号部２１と、
この復号化された画像データに基づく再生画像を表示す
る表示部２２と、表示画像上のある矩形領域の位置情報
及び関心度情報からなる関心領域情報を指示して通信路
３０へ出力する関心領域指示部２３とから構成されてい
る。次に、上記構成の本実施例による画像通信システム
の動作について、図１に基づいて説明する。先ず、送信
装置１０において、その入力画像信号として、例えばＴ
Ｖカメラからのアナログ画像信号が入力されると、入力
部１１はこのアナログ画像信号をディジタル信号に変換
した後入力画像データとして一時的に記憶する。
力される符号化データを復号化する画像復号部２１と、
この復号化された画像データに基づく再生画像を表示す
る表示部２２と、表示画像上のある矩形領域の位置情報
及び関心度情報からなる関心領域情報を指示して通信路
３０へ出力する関心領域指示部２３とから構成されてい
る。次に、上記構成の本実施例による画像通信システム
の動作について、図１に基づいて説明する。先ず、送信
装置１０において、その入力画像信号として、例えばＴ
Ｖカメラからのアナログ画像信号が入力されると、入力
部１１はこのアナログ画像信号をディジタル信号に変換
した後入力画像データとして一時的に記憶する。
【００１３】次に、直交変換部１２は、入力部１１から
入力画像データをブロック単位で読出しながら直交変換
（例えば、離散コサイン変換）を行う。量子化部１３
は、この直交変換された画像データを、量子化ステップ
制御部１６から出力される量子化ステップに基づいて量
子化する。この量子化の手法としては、従来公知の手法
を用いれば良く、例えば、量子化ステップをｑ、直交変
換データをｄin、量子化データをｄout として、ｄout
＝ｄin／ｑを計算することによって量子化が実現され
る。
入力画像データをブロック単位で読出しながら直交変換
（例えば、離散コサイン変換）を行う。量子化部１３
は、この直交変換された画像データを、量子化ステップ
制御部１６から出力される量子化ステップに基づいて量
子化する。この量子化の手法としては、従来公知の手法
を用いれば良く、例えば、量子化ステップをｑ、直交変
換データをｄin、量子化データをｄout として、ｄout
＝ｄin／ｑを計算することによって量子化が実現され
る。
【００１４】次に、マルチプレクサ部１４は、量子化部
１３からの量子化データと量子化ステップ、フレーム開
始データ等の制御情報とを混合した後、可変長符号化
（例えば、ハフマン符号化）を行い、符号化データを送
信バッファ１５を介して通信路３０へ出力する。この符
号化データは、通信路３０によって受信装置２０へ伝送
される。受信装置２０において、画像復号部２１は送信
装置１０とは逆の動作、すなわち可変長復号化、量子化
データと制御情報の分離、逆量子化及び逆直交変換を行
って画像データを再生し、表示部２２へ供給する。表示
部２２は、この画像データに基づいて再生画像を表示す
る。
１３からの量子化データと量子化ステップ、フレーム開
始データ等の制御情報とを混合した後、可変長符号化
（例えば、ハフマン符号化）を行い、符号化データを送
信バッファ１５を介して通信路３０へ出力する。この符
号化データは、通信路３０によって受信装置２０へ伝送
される。受信装置２０において、画像復号部２１は送信
装置１０とは逆の動作、すなわち可変長復号化、量子化
データと制御情報の分離、逆量子化及び逆直交変換を行
って画像データを再生し、表示部２２へ供給する。表示
部２２は、この画像データに基づいて再生画像を表示す
る。
【００１５】受信装置２０側において、オペレータは表
示部２２に表示される再生画像を観察しながら関心領域
指示部２３に対し、関心の高い矩形領域の位置情報及び
関心度情報からなる関心領域情報を指示する。この関心
領域情報の指示は、表示画像に対応するポインティング
デバイス（例えば、マウス）を用いて関心の高い矩形領
域の位置情報及び関心度情報を入力することにより行わ
れる。関心領域情報が入力されると、関心領域指示部２
３はこの関心領域情報を通信路３０へ出力する。
示部２２に表示される再生画像を観察しながら関心領域
指示部２３に対し、関心の高い矩形領域の位置情報及び
関心度情報からなる関心領域情報を指示する。この関心
領域情報の指示は、表示画像に対応するポインティング
デバイス（例えば、マウス）を用いて関心の高い矩形領
域の位置情報及び関心度情報を入力することにより行わ
れる。関心領域情報が入力されると、関心領域指示部２
３はこの関心領域情報を通信路３０へ出力する。
【００１６】図２に、表示部２２の表示画面の一例を示
す。同図において、表示画面２０１上には、再生画像２
０２と、オペレータがポインティングデバイスで指定す
る関心度Ａ（Ａ＝１，２，……，５）の選択メニューウ
ィンドウ２０３とが表示されている。この再生画像２０
２において、今、図の斜線領域２０４を関心領域として
オペレータがポインティングデバイスを用いて指定する
ものとする。この関心領域２０４の位置は、ｘ，ｙ，
ｗ，ｈの４パラメータによって表される。関心領域指示
部２３は、ポインティングデバイスによって入力された
関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）を通信路３０へ出
力する。
す。同図において、表示画面２０１上には、再生画像２
０２と、オペレータがポインティングデバイスで指定す
る関心度Ａ（Ａ＝１，２，……，５）の選択メニューウ
ィンドウ２０３とが表示されている。この再生画像２０
２において、今、図の斜線領域２０４を関心領域として
オペレータがポインティングデバイスを用いて指定する
ものとする。この関心領域２０４の位置は、ｘ，ｙ，
ｗ，ｈの４パラメータによって表される。関心領域指示
部２３は、ポインティングデバイスによって入力された
関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）を通信路３０へ出
力する。
【００１７】送信装置１０において、量子化ステップ制
御部１６は、通信路３０を介して関心領域情報（ｘ，
ｙ，ｗ，ｈ，Ａ）が入力されると、次式に基づいて量子
化ステップｑを計算し、量子化部１３及びマルチプレク
サ部１４へ出力する。
御部１６は、通信路３０を介して関心領域情報（ｘ，
ｙ，ｗ，ｈ，Ａ）が入力されると、次式に基づいて量子
化ステップｑを計算し、量子化部１３及びマルチプレク
サ部１４へ出力する。
【数１】 但し、ｑ0 は送信バッファ１５の残量ＢＺ等に基づいて
計算される量子化ステップであって、従来公知の手法に
より計算して求めることができるが、ここでは適当な正
の定数をＬとして、ｑ0 ＝Ｌ・ＢＺとする。また、
（Ｘ，Ｙ）は対象ブロックの位置、Ｋは適当な正の定数
である。
計算される量子化ステップであって、従来公知の手法に
より計算して求めることができるが、ここでは適当な正
の定数をＬとして、ｑ0 ＝Ｌ・ＢＺとする。また、
（Ｘ，Ｙ）は対象ブロックの位置、Ｋは適当な正の定数
である。
【００１８】（１）式によれば、入力画像中のブロック
毎に、各ブロックが関心領域（ｘ，ｙ，ｗ，ｈ）に含ま
れる場合には、量子化ステップを関心度Ａに比例した量
Ａ・Ｋだけ減ずることにより、受信側で指定した関心領
域が受信装置２０で再生されたときに他の部分と比べて
鮮明になる。したがって、本画像通信システムによれ
ば、受信側からの指示によって送信画像中の関心領域を
鮮明に伝送できることによって、受信者側の目的に適し
た効率の良い画像伝送を実現できる。
毎に、各ブロックが関心領域（ｘ，ｙ，ｗ，ｈ）に含ま
れる場合には、量子化ステップを関心度Ａに比例した量
Ａ・Ｋだけ減ずることにより、受信側で指定した関心領
域が受信装置２０で再生されたときに他の部分と比べて
鮮明になる。したがって、本画像通信システムによれ
ば、受信側からの指示によって送信画像中の関心領域を
鮮明に伝送できることによって、受信者側の目的に適し
た効率の良い画像伝送を実現できる。
【００１９】なお、本実施例においては、画像伝送の方
向を単一方向とした場合の構成について説明したが、本
発明は、双方向画像伝送の場合にも適用可能である。図
３は、双方向画像伝送に適用された場合の本発明に係る
送受信装置の構成例を示すブロック図である。本変形例
においては、当該送受信装置を２セット用意して双方を
通信路で接続することにより、本実施例と同等の効果を
有する画像通信システムを実現できる。この場合には、
図３に示すように、受信画像の関心領域情報を送信装置
１０内のマルチプレクサ部１４へ入力して送信符号化デ
ータに含める一方、画像復号部２１において受信符号化
データから送信画像の関心領域情報を得て送信画像の量
子化ステップを制御するように構成すれば良い。
向を単一方向とした場合の構成について説明したが、本
発明は、双方向画像伝送の場合にも適用可能である。図
３は、双方向画像伝送に適用された場合の本発明に係る
送受信装置の構成例を示すブロック図である。本変形例
においては、当該送受信装置を２セット用意して双方を
通信路で接続することにより、本実施例と同等の効果を
有する画像通信システムを実現できる。この場合には、
図３に示すように、受信画像の関心領域情報を送信装置
１０内のマルチプレクサ部１４へ入力して送信符号化デ
ータに含める一方、画像復号部２１において受信符号化
データから送信画像の関心領域情報を得て送信画像の量
子化ステップを制御するように構成すれば良い。
【００２０】図４は、本発明の第２の実施例を示すブロ
ック図であり、図中、図１と同等部分には同一符号を付
して示し、その説明については重複するので省略する。
本実施例においては、送信装置１０内に、通信路３０か
ら入力される関心領域情報に基づいて関心領域中の動体
を追尾しつつこの関心領域情報を補正する関心領域補正
部１７を追加した構成となっている。この関心領域補正
部１７は、入力部１１から読み出される入力画像データ
の１次元方向の加算値を関心領域の位置情報に基づいて
計算する加算値計算部１７１と、通信路３０から入力さ
れる関心領域情報を初期情報とし、加算値計算部１７１
で求められる第１の時刻における加算値と第２の時刻に
おける加算値の相関を計算することによって動体の動き
量を検出し、上記関心領域情報を補正する相関計算部１
７２とから構成されている。
ック図であり、図中、図１と同等部分には同一符号を付
して示し、その説明については重複するので省略する。
本実施例においては、送信装置１０内に、通信路３０か
ら入力される関心領域情報に基づいて関心領域中の動体
を追尾しつつこの関心領域情報を補正する関心領域補正
部１７を追加した構成となっている。この関心領域補正
部１７は、入力部１１から読み出される入力画像データ
の１次元方向の加算値を関心領域の位置情報に基づいて
計算する加算値計算部１７１と、通信路３０から入力さ
れる関心領域情報を初期情報とし、加算値計算部１７１
で求められる第１の時刻における加算値と第２の時刻に
おける加算値の相関を計算することによって動体の動き
量を検出し、上記関心領域情報を補正する相関計算部１
７２とから構成されている。
【００２１】この関心領域補正部１７においては、通信
路３０を介して関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）が
入力されると、以下の動作を行う。先ず、相関計算部１
７２は、関心領域情報を量子化ステップ制御部１６へ出
力するとともに、関心領域の位置情報（ｘ，ｙ，ｗ，
ｈ）を加算値計算部１７１へ出力する。加算値計算部１
７１は、関心領域に対応した入力画像データｐ（Ｘ，
Ｙ）（但し、（Ｘ，Ｙ）は画素位置）を入力部１１から
読み出して水平及び垂直方向の加算値Ｈ1(Ｙ）及びＶ
1(Ｘ）を次式により求めて一時的に記憶する。
路３０を介して関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）が
入力されると、以下の動作を行う。先ず、相関計算部１
７２は、関心領域情報を量子化ステップ制御部１６へ出
力するとともに、関心領域の位置情報（ｘ，ｙ，ｗ，
ｈ）を加算値計算部１７１へ出力する。加算値計算部１
７１は、関心領域に対応した入力画像データｐ（Ｘ，
Ｙ）（但し、（Ｘ，Ｙ）は画素位置）を入力部１１から
読み出して水平及び垂直方向の加算値Ｈ1(Ｙ）及びＶ
1(Ｘ）を次式により求めて一時的に記憶する。
【数２】
【数３】
【００２２】また、関心領域補正部１７は、通信路３０
から関心領域情報が入力されない場合には一定時間間
隔、例えば入力部１１が１フレーム分の画像データを入
力する時間間隔で以下の動作を行う。先ず、加算値計算
部１７１が相関計算部１７２から関心領域の位置情報
（ｘ，ｙ，ｗ，ｈ）を入力し、この関心領域に対応した
入力画像データを入力部１１から読み出して、（２）式
及び（３）式に基づいて水平方向及び垂直方向の加算値
Ｈ2(Ｙ）及びＶ2(Ｘ）を計算する。
から関心領域情報が入力されない場合には一定時間間
隔、例えば入力部１１が１フレーム分の画像データを入
力する時間間隔で以下の動作を行う。先ず、加算値計算
部１７１が相関計算部１７２から関心領域の位置情報
（ｘ，ｙ，ｗ，ｈ）を入力し、この関心領域に対応した
入力画像データを入力部１１から読み出して、（２）式
及び（３）式に基づいて水平方向及び垂直方向の加算値
Ｈ2(Ｙ）及びＶ2(Ｘ）を計算する。
【００２３】相関計算部１７２は、加算値計算部１７１
から加算値Ｈ1(Ｙ），Ｖ1(Ｘ）及びＨ2(Ｙ），Ｖ2(Ｘ）
を読み出してＨ1(Ｙ）とＨ2(Ｙ）の相関値ＣＨ（ｄＹ）
及びＶ1(Ｘ）とＶ2(Ｘ）の相関値ＣＶ（ｄＸ）を計算す
る。この相関の計算方法としては、従来公知の方法を用
いることができるが、ここでは、次式により計算する。
から加算値Ｈ1(Ｙ），Ｖ1(Ｘ）及びＨ2(Ｙ），Ｖ2(Ｘ）
を読み出してＨ1(Ｙ）とＨ2(Ｙ）の相関値ＣＨ（ｄＹ）
及びＶ1(Ｘ）とＶ2(Ｘ）の相関値ＣＶ（ｄＸ）を計算す
る。この相関の計算方法としては、従来公知の方法を用
いることができるが、ここでは、次式により計算する。
【数４】
【数５】 （４）式及び（５）式によれば、Ｈ1(Ｙ）とＨ2(Ｙ）の
相関が強い程ＣＨ（ｄＹ）は小さい値をとり、同様にＶ
1(Ｘ）とＶ2(Ｘ）の相関が強い程ＣＶ（ｄＸ）は小さい
値をとる。
相関が強い程ＣＨ（ｄＹ）は小さい値をとり、同様にＶ
1(Ｘ）とＶ2(Ｘ）の相関が強い程ＣＶ（ｄＸ）は小さい
値をとる。
【００２４】そこで、相関計算部１７２は、ＣＨ（ｄ
Ｙ）及びＣＶ（ｄＸ）が最小となる場合のｄＹ＝Δｙ及
びｄＸ＝Δｘを検出し、関心領域の動き量を（Δｘ，Δ
ｙ）として関心領域情報を次式のように補正して記憶す
る。
Ｙ）及びＣＶ（ｄＸ）が最小となる場合のｄＹ＝Δｙ及
びｄＸ＝Δｘを検出し、関心領域の動き量を（Δｘ，Δ
ｙ）として関心領域情報を次式のように補正して記憶す
る。
【数６】 相関計算部１７２は、補正された関心領域情報を量子化
ステップ制御部１６へ出力する。加算値計算部１７１
は、Ｈ2(Ｙ），Ｖ2(Ｘ）のデータをＨ1(Ｙ），Ｖ1(Ｘ）
として一時的に記憶する。図５は、関心領域補正部１７
の動作説明図である。図中、５０１，５０２は第１の時
刻における関心領域及び動体を表し、５０３は第２の時
刻における動体を表わす。
ステップ制御部１６へ出力する。加算値計算部１７１
は、Ｈ2(Ｙ），Ｖ2(Ｘ）のデータをＨ1(Ｙ），Ｖ1(Ｘ）
として一時的に記憶する。図５は、関心領域補正部１７
の動作説明図である。図中、５０１，５０２は第１の時
刻における関心領域及び動体を表し、５０３は第２の時
刻における動体を表わす。
【００２５】加算値計算部１７１は、図５に示すよう
に、第１の時刻及び第２の時刻において、動体５０２，
５０３に対応した加算値Ｈ1(Ｙ），Ｖ1(Ｘ）及びＨ
2(Ｙ），Ｖ2(Ｘ）を計算する。一方、相関計算部１７２
は、第２の時刻において、（４）式及び（５）式に基づ
き相関値ＣＨ（ｄＹ）及びＣＶ（ｄＸ）を計算して、そ
の最小値位置より関心領域の動き量（Δｘ，Δｙ）を検
出する。そして、（６）式に基づいて関心領域情報を補
正する。その結果、動体５０３の位置に応じて新たな関
心領域５０４が設定される。
に、第１の時刻及び第２の時刻において、動体５０２，
５０３に対応した加算値Ｈ1(Ｙ），Ｖ1(Ｘ）及びＨ
2(Ｙ），Ｖ2(Ｘ）を計算する。一方、相関計算部１７２
は、第２の時刻において、（４）式及び（５）式に基づ
き相関値ＣＨ（ｄＹ）及びＣＶ（ｄＸ）を計算して、そ
の最小値位置より関心領域の動き量（Δｘ，Δｙ）を検
出する。そして、（６）式に基づいて関心領域情報を補
正する。その結果、動体５０３の位置に応じて新たな関
心領域５０４が設定される。
【００２６】すなわち、関心領域補正部１７の作用によ
り、関心領域内の動体の動きに応じて関心領域の位置が
適切に補正されることになる。この関心領域補正部１７
から関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）が量子化ステ
ップ制御部１６へ入力されると、量子化ステップ制御部
１６は、第１の実施例の場合と同様に、（１）式に基づ
いて量子化ステップｑを計算し、量子化部１３及びマル
チプレクサ部１４へ出力する。以降、第１の実施例の場
合と同様の動作が行われる。
り、関心領域内の動体の動きに応じて関心領域の位置が
適切に補正されることになる。この関心領域補正部１７
から関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）が量子化ステ
ップ制御部１６へ入力されると、量子化ステップ制御部
１６は、第１の実施例の場合と同様に、（１）式に基づ
いて量子化ステップｑを計算し、量子化部１３及びマル
チプレクサ部１４へ出力する。以降、第１の実施例の場
合と同様の動作が行われる。
【００２７】図６は、第２の実施例の変形例を示すブロ
ック図であり、画像伝送の方向を単一方向とした本実施
例に対し、双方向画像伝送に適用した場合における送受
信装置の構成例を示している。本変形例においては、当
該送受信装置を２セット用意して双方を通信路で接続す
ることにより、本実施例と同等の効果を有する画像通信
システムが実現できる。この場合には、図６に示すよう
に、受信画像の関心領域情報を送信装置１０内のマルチ
プレクサ部１４へ入力して送信符号化データに含める一
方、画像復号部２１において受信符号化データから送信
画像の関心領域情報を得て関心領域補正部１７の相関計
算部１７２に供給し、送信画像の量子化ステップを制御
するように構成すれば良い。
ック図であり、画像伝送の方向を単一方向とした本実施
例に対し、双方向画像伝送に適用した場合における送受
信装置の構成例を示している。本変形例においては、当
該送受信装置を２セット用意して双方を通信路で接続す
ることにより、本実施例と同等の効果を有する画像通信
システムが実現できる。この場合には、図６に示すよう
に、受信画像の関心領域情報を送信装置１０内のマルチ
プレクサ部１４へ入力して送信符号化データに含める一
方、画像復号部２１において受信符号化データから送信
画像の関心領域情報を得て関心領域補正部１７の相関計
算部１７２に供給し、送信画像の量子化ステップを制御
するように構成すれば良い。
【００２８】図７は、本発明の第３の実施例を示すブロ
ック図であり、図中、図１と同等部分には同一符号を付
して示し、その説明については重複するので省略する。
本実施例においては、受信装置２０内に、関心領域指示
部２３で指示された関心領域情報に基づいて関心領域中
の動体を追尾しつつこの関心領域情報を補正する関心領
域補正部２４を追加した構成となっている。この関心領
域補正部２４は、画像復号部２１から読み出される再生
画像データの１次元方向の加算値を関心領域の位置情報
に基づいて計算する加算値計算部２４１と、関心領域指
示部２３から入力される関心領域情報を初期情報とし、
加算値計算部２４１で求められる第１の時刻における加
算値と第２の時刻における加算値の相関を計算すること
によって動体の動き量を検出し、上記関心領域情報を補
正する相関計算部２４２とから構成されている。
ック図であり、図中、図１と同等部分には同一符号を付
して示し、その説明については重複するので省略する。
本実施例においては、受信装置２０内に、関心領域指示
部２３で指示された関心領域情報に基づいて関心領域中
の動体を追尾しつつこの関心領域情報を補正する関心領
域補正部２４を追加した構成となっている。この関心領
域補正部２４は、画像復号部２１から読み出される再生
画像データの１次元方向の加算値を関心領域の位置情報
に基づいて計算する加算値計算部２４１と、関心領域指
示部２３から入力される関心領域情報を初期情報とし、
加算値計算部２４１で求められる第１の時刻における加
算値と第２の時刻における加算値の相関を計算すること
によって動体の動き量を検出し、上記関心領域情報を補
正する相関計算部２４２とから構成されている。
【００２９】この関心領域補正部２４においては、関心
領域指示部２３から関心領域情報（ｘ，ｙ，ｗ，ｈ，
Ａ）が入力されると、以下の動作を行う。先ず、相関計
算部２４２が関心領域の位置情報（ｘ，ｙ，ｗ，ｈ）を
加算値計算部２４１へ出力する。加算値計算部２４１
は、関心領域に対応した再生画像データｐ（Ｘ，Ｙ）
（但し、（Ｘ，Ｙ）は画素位置）を画像復号部２１から
読み出して水平方向及び垂直方向の加算値Ｈ1(Ｙ）及び
Ｖ1(Ｘ）を、第２の実施例の場合と同様に、（２）式及
び（３）式により求めて一時的に記憶する。
領域指示部２３から関心領域情報（ｘ，ｙ，ｗ，ｈ，
Ａ）が入力されると、以下の動作を行う。先ず、相関計
算部２４２が関心領域の位置情報（ｘ，ｙ，ｗ，ｈ）を
加算値計算部２４１へ出力する。加算値計算部２４１
は、関心領域に対応した再生画像データｐ（Ｘ，Ｙ）
（但し、（Ｘ，Ｙ）は画素位置）を画像復号部２１から
読み出して水平方向及び垂直方向の加算値Ｈ1(Ｙ）及び
Ｖ1(Ｘ）を、第２の実施例の場合と同様に、（２）式及
び（３）式により求めて一時的に記憶する。
【００３０】また、関心領域補正部２４は、関心領域指
示部２３から関心領域情報が入力されない場合には一定
時間間隔、例えば画像復号部２１が１フレーム分の画像
データを復号する時間間隔で以下の動作を行う。先ず、
加算値計算部２４１が相関計算部２４２から関心領域の
位置情報（ｘ，ｙ，ｗ，ｈ）を入力し、この関心領域に
対応した再生画像データを画像復号部２１から読み出し
て、第２の実施例の場合と同様に、（２）式及び（３）
式に基づいて水平方向及び垂直方向の加算値Ｈ2(Ｙ）及
びＶ2(Ｘ）を計算する。相関計算部２４２は、加算値計
算部２４１から加算値Ｈ1(Ｙ），Ｖ1(Ｘ）及びＨ
2(Ｙ），Ｖ2(Ｘ）を読み出してＨ1(Ｙ）とＨ2(Ｙ）の相
関値ＣＨ（ｄＹ）及びＶ1(Ｘ）とＶ2(Ｘ）の相関値ＣＶ
（ｄＸ）を計算する。この相関の計算方法としては、第
２の実施例と同様の方法が用いられる。
示部２３から関心領域情報が入力されない場合には一定
時間間隔、例えば画像復号部２１が１フレーム分の画像
データを復号する時間間隔で以下の動作を行う。先ず、
加算値計算部２４１が相関計算部２４２から関心領域の
位置情報（ｘ，ｙ，ｗ，ｈ）を入力し、この関心領域に
対応した再生画像データを画像復号部２１から読み出し
て、第２の実施例の場合と同様に、（２）式及び（３）
式に基づいて水平方向及び垂直方向の加算値Ｈ2(Ｙ）及
びＶ2(Ｘ）を計算する。相関計算部２４２は、加算値計
算部２４１から加算値Ｈ1(Ｙ），Ｖ1(Ｘ）及びＨ
2(Ｙ），Ｖ2(Ｘ）を読み出してＨ1(Ｙ）とＨ2(Ｙ）の相
関値ＣＨ（ｄＹ）及びＶ1(Ｘ）とＶ2(Ｘ）の相関値ＣＶ
（ｄＸ）を計算する。この相関の計算方法としては、第
２の実施例と同様の方法が用いられる。
【００３１】相関計算部２４２は、ＣＨ（ｄＹ）及びＣ
Ｖ（ｄＸ）が最小となる場合のｄＹ＝Δｙ及びｄＸ＝Δ
ｘを検出し、関心領域の動き量を（Δｘ，Δｙ）として
関心領域情報を（６）式のように補正して記憶するとと
もに、関心領域指示部２３へ出力する。関心領域指示部
２３は、補正された関心領域情報を相関計算部２４２よ
り入力して通信路３０へ出力する。加算値計算部２４１
は、Ｈ2(Ｙ），Ｖ2(Ｘ）のデータをＨ1(Ｙ），Ｖ1(Ｘ）
として一時的に記憶する。なお、関心領域補正部２４の
具体的な動作については、図５に基づいて説明した第２
の実施例における関心領域補正部１７の動作と全く同じ
であり、その説明については重複するので省略する。
Ｖ（ｄＸ）が最小となる場合のｄＹ＝Δｙ及びｄＸ＝Δ
ｘを検出し、関心領域の動き量を（Δｘ，Δｙ）として
関心領域情報を（６）式のように補正して記憶するとと
もに、関心領域指示部２３へ出力する。関心領域指示部
２３は、補正された関心領域情報を相関計算部２４２よ
り入力して通信路３０へ出力する。加算値計算部２４１
は、Ｈ2(Ｙ），Ｖ2(Ｘ）のデータをＨ1(Ｙ），Ｖ1(Ｘ）
として一時的に記憶する。なお、関心領域補正部２４の
具体的な動作については、図５に基づいて説明した第２
の実施例における関心領域補正部１７の動作と全く同じ
であり、その説明については重複するので省略する。
【００３２】この関心領域補正部２４の作用により、関
心領域内の動体の動きに応じて関心領域の位置が適切に
補正されることになる。この関心領域補正部２４によっ
て補正された関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）が関
心領域指示部２３から出力され、通信路３０を介して量
子化ステップ制御部１６へ入力されると、量子化ステッ
プ制御部１６は、第１の実施例の場合と同様に、（１）
式に基づいて量子化ステップｑを計算し、量子化部１３
及びマルチプレクサ部１４へ出力する。以降、第１の実
施例の場合と同様の動作が行われる。
心領域内の動体の動きに応じて関心領域の位置が適切に
補正されることになる。この関心領域補正部２４によっ
て補正された関心領域情報（ｘ，ｙ，ｗ，ｈ，Ａ）が関
心領域指示部２３から出力され、通信路３０を介して量
子化ステップ制御部１６へ入力されると、量子化ステッ
プ制御部１６は、第１の実施例の場合と同様に、（１）
式に基づいて量子化ステップｑを計算し、量子化部１３
及びマルチプレクサ部１４へ出力する。以降、第１の実
施例の場合と同様の動作が行われる。
【００３３】図８は、第３の実施例の変形例を示すブロ
ック図であり、画像伝送の方向を単一方向とした本実施
例に対し、双方向画像伝送に適用した場合における送受
信装置の構成例を示している。本変形例においては、当
該送受信装置を２セット用意して双方を通信路で接続す
ることにより、本実施例と同等の効果を有する画像通信
システムが実現できる。この場合には、図８に示すよう
に、受信装置２０において関心領域補正部１７によって
補正されかつ関心領域指示部２３から出力される受信画
像の関心領域情報を送信装置１０内のマルチプレクサ部
１４へ入力して送信符号化データに含める一方、画像復
号部２１において受信符号化データから送信画像の関心
領域情報を得て送信画像の量子化ステップを制御するよ
うに構成すれば良い。
ック図であり、画像伝送の方向を単一方向とした本実施
例に対し、双方向画像伝送に適用した場合における送受
信装置の構成例を示している。本変形例においては、当
該送受信装置を２セット用意して双方を通信路で接続す
ることにより、本実施例と同等の効果を有する画像通信
システムが実現できる。この場合には、図８に示すよう
に、受信装置２０において関心領域補正部１７によって
補正されかつ関心領域指示部２３から出力される受信画
像の関心領域情報を送信装置１０内のマルチプレクサ部
１４へ入力して送信符号化データに含める一方、画像復
号部２１において受信符号化データから送信画像の関心
領域情報を得て送信画像の量子化ステップを制御するよ
うに構成すれば良い。
【００３４】なお、上記第１乃至第３の各実施例では、
受信装置２０における関心領域指示部２３を、ポインテ
ィングデバイスによって関心領域情報を入力するように
構成する構成の場合について説明したが、他の構成、例
えば複数の関心領域情報の組をあらかじめ用意し、これ
らの中から任意の１つの組を選択するような構成であっ
ても良く、上記各実施例と同等の効果を得ることができ
る。さらに、関心領域情報として関心領域の位置情報及
び関心度情報を用いるとしたが、これに限定されるもの
ではなく、関心領域情報を関心領域の位置情報のみと
し、量子化ステップ制御部１６における量子化ステップ
の計算に当たっては関心度Ａ＝１として処理するように
しても良く、この場合においても、上記各実施例と同等
の効果を得ることができる。
受信装置２０における関心領域指示部２３を、ポインテ
ィングデバイスによって関心領域情報を入力するように
構成する構成の場合について説明したが、他の構成、例
えば複数の関心領域情報の組をあらかじめ用意し、これ
らの中から任意の１つの組を選択するような構成であっ
ても良く、上記各実施例と同等の効果を得ることができ
る。さらに、関心領域情報として関心領域の位置情報及
び関心度情報を用いるとしたが、これに限定されるもの
ではなく、関心領域情報を関心領域の位置情報のみと
し、量子化ステップ制御部１６における量子化ステップ
の計算に当たっては関心度Ａ＝１として処理するように
しても良く、この場合においても、上記各実施例と同等
の効果を得ることができる。
【００３５】また、上記第２，第３の実施例において
は、相関計算部１７２，２４２における相関の計算方法
を（４）式及び（５）式で定義したが、この計算方法と
しては、他の任意好適な方法を用いても良い。例えば、
相関値ＣＨ（ｄＹ），ＣＶ（ｄＸ）を求める式として次
式を適用して良い。
は、相関計算部１７２，２４２における相関の計算方法
を（４）式及び（５）式で定義したが、この計算方法と
しては、他の任意好適な方法を用いても良い。例えば、
相関値ＣＨ（ｄＹ），ＣＶ（ｄＸ）を求める式として次
式を適用して良い。
【数７】
【数８】 この場合には、Ｈ1(Ｙ）とＨ2(Ｙ）の相関が強い程ＣＨ
（ｄＹ）は大きな値をとり、同様に、Ｖ1(Ｘ）とＶ
2(Ｘ）の相関が強い程ＣＨ（ｄＸ）は大きな値をとる。
したがって、相関計算部１７２を、ＣＨ（ｄＹ）及びＣ
Ｖ（ｄＸ）が最大となる場合のｄＹ＝Δｘ及びｄＸ＝Δ
ｙを関心領域の動き量として処理するように構成すれば
良い。
（ｄＹ）は大きな値をとり、同様に、Ｖ1(Ｘ）とＶ
2(Ｘ）の相関が強い程ＣＨ（ｄＸ）は大きな値をとる。
したがって、相関計算部１７２を、ＣＨ（ｄＹ）及びＣ
Ｖ（ｄＸ）が最大となる場合のｄＹ＝Δｘ及びｄＸ＝Δ
ｙを関心領域の動き量として処理するように構成すれば
良い。
【００３６】またさらに、第２，第３の実施例では、関
心領域補正部１７，２４を入力画像の１次元の加算値に
基づいて動体を追尾し、関心領域情報を補正するように
構成した場合について説明したが、関心領域中の動体を
従来公知の手法によって追尾し、これにより関心領域情
報を補正するように関心領域補正部１７，２４を構成し
ても、第２，第３の実施例と同等の効果を得ることがで
きる。関心領域中の動体を追尾する他の手法としては、
例えば、入力画像をブロックに分割し、各ブロックの動
き量を検出した後、関心領域に含まれるブロックの動き
量の全部又は一部に基づいて関心領域の動き量を計算す
ることができる。
心領域補正部１７，２４を入力画像の１次元の加算値に
基づいて動体を追尾し、関心領域情報を補正するように
構成した場合について説明したが、関心領域中の動体を
従来公知の手法によって追尾し、これにより関心領域情
報を補正するように関心領域補正部１７，２４を構成し
ても、第２，第３の実施例と同等の効果を得ることがで
きる。関心領域中の動体を追尾する他の手法としては、
例えば、入力画像をブロックに分割し、各ブロックの動
き量を検出した後、関心領域に含まれるブロックの動き
量の全部又は一部に基づいて関心領域の動き量を計算す
ることができる。
【００３７】この場合、関心領域に含まれるブロック番
号をｉ（ｉ＝１，２，……，Ｉ）、各ブロックの動き量
をΔｖi 、関心領域の動き量をΔＶとすると、関心領域
の動き量ΔＶは、例えば次式のようにして計算される。
号をｉ（ｉ＝１，２，……，Ｉ）、各ブロックの動き量
をΔｖi 、関心領域の動き量をΔＶとすると、関心領域
の動き量ΔＶは、例えば次式のようにして計算される。
【数９】 但し、ｗi はブロックｉに対する重み係数であって、こ
のブロックｉが関心領域の中心に近い程大きい値をとる
定数パラメータである。
のブロックｉが関心領域の中心に近い程大きい値をとる
定数パラメータである。
【００３８】動画像符号化装置では一般に、入力画像を
ブロック分割し、各ブロックの動き量を検出してこれに
基づき符号化を行う構成となっている。したがって、第
２の実施例の場合にあっては、関心領域補正部１７で直
接各ブロックの動き量を検出しなくても所期の目的を達
成できるので、本画像通信システムの装置全体の構成を
簡略化できる。一方、第３の実施例の場合にあっては、
関心領域補正部２４は、通信路３０から入力される符号
化データに含まれる関心領域に対応したブロックの動き
量に基づいて（９）式の計算を行うようにすれば良い。
ブロック分割し、各ブロックの動き量を検出してこれに
基づき符号化を行う構成となっている。したがって、第
２の実施例の場合にあっては、関心領域補正部１７で直
接各ブロックの動き量を検出しなくても所期の目的を達
成できるので、本画像通信システムの装置全体の構成を
簡略化できる。一方、第３の実施例の場合にあっては、
関心領域補正部２４は、通信路３０から入力される符号
化データに含まれる関心領域に対応したブロックの動き
量に基づいて（９）式の計算を行うようにすれば良い。
【００３９】
【発明の効果】以上詳細に説明したように、請求項１記
載の画像通信システムによれば、送信装置側から画像が
伝送されると、受信装置側からその伝送画像の関心の高
い領域についての位置情報や関心度情報の関心領域情報
を指示して通信路へ出力する一方、送信装置側において
は通信路から入力される関心領域情報に基づいて関心領
域中の動体を追尾しつつこの関心領域情報を補正して量
子化ステップ制御部に与え、量子化ステップ制御部では
この補正された関心領域情報に基づいて量子化ステップ
を制御するように構成したので、次のような効果が得ら
れる。
載の画像通信システムによれば、送信装置側から画像が
伝送されると、受信装置側からその伝送画像の関心の高
い領域についての位置情報や関心度情報の関心領域情報
を指示して通信路へ出力する一方、送信装置側において
は通信路から入力される関心領域情報に基づいて関心領
域中の動体を追尾しつつこの関心領域情報を補正して量
子化ステップ制御部に与え、量子化ステップ制御部では
この補正された関心領域情報に基づいて量子化ステップ
を制御するように構成したので、次のような効果が得ら
れる。
【００４０】すなわち、送信装置が伝送画像の品質を一
方的に決定する従来システムとは異なり、受信側の関心
の高い画像領域について高画質にて画像を伝送できるこ
とになるとともに、送信装置が関心領域中の動体の動き
量に応じて該関心領域の位置を補正できるため、受信側
の関心の対象が動体である場合にも対応できることにな
る。
方的に決定する従来システムとは異なり、受信側の関心
の高い画像領域について高画質にて画像を伝送できるこ
とになるとともに、送信装置が関心領域中の動体の動き
量に応じて該関心領域の位置を補正できるため、受信側
の関心の対象が動体である場合にも対応できることにな
る。
【００４１】請求項２記載の画像通信システムによれ
ば、受信装置側において関心領域指示部によって指示さ
れる関心領域情報に基づいて関心領域中の動体を追尾し
つつこの関心領域情報を補正して通信路へ出力する一
方、送信装置側ではこの補正された関心領域情報に基づ
いて量子化ステップを制御するように構成したので、受
信装置が関心領域中の動体の動き量に応じて該関心領域
の位置を補正できるため、受信側の関心の対象が動体で
ある場合にも対応できることになる。
ば、受信装置側において関心領域指示部によって指示さ
れる関心領域情報に基づいて関心領域中の動体を追尾し
つつこの関心領域情報を補正して通信路へ出力する一
方、送信装置側ではこの補正された関心領域情報に基づ
いて量子化ステップを制御するように構成したので、受
信装置が関心領域中の動体の動き量に応じて該関心領域
の位置を補正できるため、受信側の関心の対象が動体で
ある場合にも対応できることになる。
【００４２】したがって、本発明による画像通信システ
ムをＴＶ電話システム、ＴＶ会議システム、遠隔監視シ
ステム等に適用すれば、受信側の関心に応じて伝送画像
の特定領域の画質を向上させることができると同時に、
上記特定領域外の符号量を相対的に少なく抑えることが
できるので、受信者側の目的に応じた効率の良い画像伝
送が可能となる。
ムをＴＶ電話システム、ＴＶ会議システム、遠隔監視シ
ステム等に適用すれば、受信側の関心に応じて伝送画像
の特定領域の画質を向上させることができると同時に、
上記特定領域外の符号量を相対的に少なく抑えることが
できるので、受信者側の目的に応じた効率の良い画像伝
送が可能となる。
【図１】本発明による画像通信システムの第１の実施例
を示すブロック図である。
を示すブロック図である。
【図２】動作説明に供する表示部の表示画面の一例を示
す図である。
す図である。
【図３】第１の実施例の変形例を示すブロック図であ
る。
る。
【図４】本発明による画像通信システムの第２の実施例
を示すブロック図である。
を示すブロック図である。
【図５】関心領域補正部の動作説明図である。
【図６】第２の実施例の変形例を示すブロック図であ
る。
る。
【図７】本発明による画像通信システムの第３の実施例
を示すブロック図である。
を示すブロック図である。
【図８】第３の実施例の変形例を示すブロック図であ
る。
る。
【図９】画像通信システムの従来例を示すブロック図で
ある。
ある。
１０ 送信装置 １１ 入力部 １３ 量子化部 １４ マルチプレクサ部 １６ 量子化ステップ制御部 １７，２４ 関心領域補正部 ２０ 受信装置 ２１ 画像復号部 ２２ 表示部 ２３ 関心領域指示部 ３０ 通信路
フロントページの続き (58)調査した分野(Int.Cl.6，ＤＢ名) H04N 7/24 - 7/68 H04N 7/14 - 7/173 H04N 7/18
Claims (2)
- 【請求項１】 画像信号を符号化して送信する送信装置
と、前記送信装置から送信された符号化信号を受信し復
号化して画像信号を出力する受信装置と、前記送信装置
と前記受信装置とを接続する通信路とからなる画像通信
システムにおいて、 前記受信装置は、前記送信装置から送信される伝送画像
の関心領域に関する関心領域情報を指示して前記通信路
へ出力する関心領域指示部を有し、 前記送信装置は、前記通信路から入力される前記関心領
域情報に基づいて関心領域中の動体を追尾しつつ前記関
心領域情報を補正する関心領域補正部と、前記関心領域
補正部で補正された関心領域情報に基づいて量子化ステ
ップを制御する量子化ステップ制御部と、前記量子化ス
テップに応じて画像信号を符号化する符号化部を有する
ことを特徴とする画像通信システム。 - 【請求項２】 前記受信装置はさらに、前記関心領域情
報に基づいて関心領域中の動体を追尾しつつ前記関心領
域情報を補正する関心領域補正部を有することを特徴と
する請求項１記載の画像通信システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13112493A JP2915248B2 (ja) | 1993-05-07 | 1993-05-07 | 画像通信システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13112493A JP2915248B2 (ja) | 1993-05-07 | 1993-05-07 | 画像通信システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH06319134A JPH06319134A (ja) | 1994-11-15 |
| JP2915248B2 true JP2915248B2 (ja) | 1999-07-05 |
Family
ID=15050550
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13112493A Expired - Fee Related JP2915248B2 (ja) | 1993-05-07 | 1993-05-07 | 画像通信システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2915248B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006099404A (ja) * | 2004-09-29 | 2006-04-13 | Sanyo Electric Co Ltd | 画像表示装置 |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09233475A (ja) * | 1996-02-23 | 1997-09-05 | Tsushin Hoso Kiko | 画像符号化装置 |
| JPH10271515A (ja) * | 1997-03-26 | 1998-10-09 | Sanyo Electric Co Ltd | 注目領域追跡方法、その方法を用いた注目領域追跡装置および画像符号化方法 |
| JP3803476B2 (ja) * | 1997-11-05 | 2006-08-02 | Ｎｅｃエンジニアリング株式会社 | 画像伝送システム及び画像符号化装置 |
| US6701017B1 (en) * | 1998-02-10 | 2004-03-02 | Nihon Computer Co., Ltd. | High resolution high-value added video transfer method system and storage medium by using pseudo natural image |
| JP2001045476A (ja) * | 1999-08-02 | 2001-02-16 | Sharp Corp | 子画面表示を考慮した画像符号化装置 |
| TW569159B (en) * | 2001-11-30 | 2004-01-01 | Inst Information Industry | Video wavelet transform processing method |
| JP2003224850A (ja) * | 2002-01-29 | 2003-08-08 | Nippon Hoso Kyokai <Nhk> | 映像中継システム並びに符号化情報指示装置及びそのプログラム並びに符号化映像伝送装置及びそのプログラム |
| JP2003264839A (ja) * | 2002-03-11 | 2003-09-19 | Kddi Research & Development Laboratories Inc | 符号化動画像データのビットレート変換装置 |
| JP2004187023A (ja) * | 2002-12-04 | 2004-07-02 | Nec Corp | 動画像符号化装置及び動画像復号化装置 |
| EP1701546A4 (en) | 2004-04-23 | 2010-09-15 | Sumitomo Electric Industries | CODING METHOD AND DECODING METHOD FOR MOVABLE IMAGE DATA, FINAL DEVICE FOR CARRYING OUT THE METHOD AND BIDIRECTIONAL INTERACTIVE SYSTEM |
| JP3936708B2 (ja) * | 2004-05-26 | 2007-06-27 | 日本電信電話株式会社 | 画像通信システム，通信会議システム，階層符号化装置，サーバ装置，画像通信方法，画像通信プログラムおよび画像通信プログラム記録媒体 |
| US9667980B2 (en) | 2005-03-01 | 2017-05-30 | Qualcomm Incorporated | Content-adaptive background skipping for region-of-interest video coding |
| US7724972B2 (en) * | 2005-03-01 | 2010-05-25 | Qualcomm Incorporated | Quality metric-biased region-of-interest coding for video telephony |
| US8693537B2 (en) * | 2005-03-01 | 2014-04-08 | Qualcomm Incorporated | Region-of-interest coding with background skipping for video telephony |
| US8768084B2 (en) | 2005-03-01 | 2014-07-01 | Qualcomm Incorporated | Region-of-interest coding in video telephony using RHO domain bit allocation |
| US8019175B2 (en) * | 2005-03-09 | 2011-09-13 | Qualcomm Incorporated | Region-of-interest processing for video telephony |
| US8977063B2 (en) | 2005-03-09 | 2015-03-10 | Qualcomm Incorporated | Region-of-interest extraction for video telephony |
| JP2005348438A (ja) * | 2005-07-29 | 2005-12-15 | Sanyo Electric Co Ltd | 画像符号化方法 |
| JP5130028B2 (ja) * | 2007-11-19 | 2013-01-30 | 富士フイルム株式会社 | 画像表示装置 |
| JP2009246642A (ja) * | 2008-03-31 | 2009-10-22 | Kddi Corp | 映像伝送装置、映像表示装置および映像伝送システム |
| JP2014057128A (ja) * | 2012-09-11 | 2014-03-27 | Nippon Hoso Kyokai <Nhk> | 映像符号化制御装置およびそのプログラム、ならびに、映像伝送装置 |
| JP2015231145A (ja) * | 2014-06-05 | 2015-12-21 | 日本放送協会 | 送信装置、受信装置及びこれらのプログラム |
| JP2015208021A (ja) * | 2015-06-10 | 2015-11-19 | レノボ・イノベーションズ・リミテッド（香港） | 動画像通信システム |
| JP6805858B2 (ja) * | 2017-02-07 | 2020-12-23 | 富士通株式会社 | 送信制御プログラム、送信制御方法および送信制御装置 |
-
1993
- 1993-05-07 JP JP13112493A patent/JP2915248B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006099404A (ja) * | 2004-09-29 | 2006-04-13 | Sanyo Electric Co Ltd | 画像表示装置 |
| JP4578197B2 (ja) * | 2004-09-29 | 2010-11-10 | 三洋電機株式会社 | 画像表示装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH06319134A (ja) | 1994-11-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2915248B2 (ja) | 画像通信システム | |
| US5552823A (en) | Picture processing apparatus with object tracking | |
| US7072397B2 (en) | Optimal encoding of motion compensated video | |
| US7738715B2 (en) | Image distribution apparatus, communication terminal apparatus, and control method thereof | |
| US4816906A (en) | Method for motion-compensated frame-to-frame prediction coding | |
| US6931064B2 (en) | Motion picture data converter, and computer product | |
| JP3086396B2 (ja) | 画像符号化装置及び画像復号装置 | |
| EP0637893B1 (en) | Transcoding device | |
| US5537147A (en) | Apparatus and method for intraframe and interframe coding a digital video signal | |
| US6680974B1 (en) | Methods and apparatus for context selection of block transform coefficients | |
| EP0771117A3 (en) | Method and apparatus for encoding and decoding a video signal using feature point based motion estimation | |
| EP0907291A2 (en) | Motion vector detecting method and system and devices incorporating the same | |
| US5686956A (en) | Object-by background information coding apparatus and method | |
| US20020141501A1 (en) | System for performing resolution upscaling on frames of digital video | |
| Adolph et al. | 1.15 Mbit/s coding of video signals including global motion compensation | |
| JP2002044644A (ja) | 顕微鏡の生画像を符号化する方法および装置 | |
| US6320987B1 (en) | Pre-DCT residue filter | |
| JP2587534B2 (ja) | 画像符号化装置 | |
| JPH0851599A (ja) | 画像情報変換装置 | |
| KR20150045951A (ko) | 수신 장치, 송신 장치 및 화상 송신 방법 | |
| JPH0335678A (ja) | ディジタル信号処理装置 | |
| JP2000209569A (ja) | 遠隔監視装置および遠隔監視方法ならびに遠隔監視システム | |
| JP3115866B2 (ja) | 画像符号化装置及び画像復号装置 | |
| US20050036542A1 (en) | Computation of compressed video information | |
| US6501795B1 (en) | Adaptable intraframe/interframe motion video encoder |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080416 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090416 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100416 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100416 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110416 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110416 Year of fee payment: 12 |
|
| LAPS | Cancellation because of no payment of annual fees |