JPH0723395A - 画像処理装置 - Google Patents
画像処理装置Info
- Publication number
- JPH0723395A JPH0723395A JP5151715A JP15171593A JPH0723395A JP H0723395 A JPH0723395 A JP H0723395A JP 5151715 A JP5151715 A JP 5151715A JP 15171593 A JP15171593 A JP 15171593A JP H0723395 A JPH0723395 A JP H0723395A
- Authority
- JP
- Japan
- Prior art keywords
- image
- frame
- motion vector
- picture
- interpolation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
(57)【要約】
【目的】受信側にて動きに違和感のない画像をモニタ上
に表示する。 【構成】補間処理部９７では、送信された動きベクトル
データｖをもとに次画面の間の補間フレーム画像を予測
し、標準的なテレビ画像と同等なフレームレートを有す
る補間予測フレーム画像を作成する。また、フレームメ
モリ９５でも、この動きベクトルデータから次画面の予
測フレーム画像を作成する。そして、加算器９３は、送
信されてきた差分データと予測フレーム画像を加算して
実画像を作成し、それをスイッチ９８ａを介して出力
後、モニタ上へ表示する。
に表示する。 【構成】補間処理部９７では、送信された動きベクトル
データｖをもとに次画面の間の補間フレーム画像を予測
し、標準的なテレビ画像と同等なフレームレートを有す
る補間予測フレーム画像を作成する。また、フレームメ
モリ９５でも、この動きベクトルデータから次画面の予
測フレーム画像を作成する。そして、加算器９３は、送
信されてきた差分データと予測フレーム画像を加算して
実画像を作成し、それをスイッチ９８ａを介して出力
後、モニタ上へ表示する。
Description
【０００１】
【産業上の利用分野】本発明は、画像データに補間を行
なってモニタに表示する画像処理装置に関するものであ
る。
なってモニタに表示する画像処理装置に関するものであ
る。
【０００２】
【従来の技術】従来より、画像処理装置として、例え
ば、複数の遠隔地点間での会議を進行させるテレビ会議
システムが知られている。このテレビ会議システムで
は、ディジタル回線を利用して伝送するため、高能率符
号化技術により、画像信号中の冗長な部分を除くことが
必要となる。
ば、複数の遠隔地点間での会議を進行させるテレビ会議
システムが知られている。このテレビ会議システムで
は、ディジタル回線を利用して伝送するため、高能率符
号化技術により、画像信号中の冗長な部分を除くことが
必要となる。
【０００３】図５は、従来のテレビ会議システムの映像
コーデックの構成を示すブロック図である。同図に示す
コーデックにおいて、符号１は、入力信号に含まれる信
号の冗長度を除き、その残りの信号を一定の誤差の範囲
内で量子化する情報源符号器、２は、映像信号の他、各
種ブロック属性信号を可変長符号化した後、定められた
データ構造の符号列に多重化するビデオマルチプレック
ス符号化器、３は、変動する情報発生量を一定レートに
平滑する送信バッファである。
コーデックの構成を示すブロック図である。同図に示す
コーデックにおいて、符号１は、入力信号に含まれる信
号の冗長度を除き、その残りの信号を一定の誤差の範囲
内で量子化する情報源符号器、２は、映像信号の他、各
種ブロック属性信号を可変長符号化した後、定められた
データ構造の符号列に多重化するビデオマルチプレック
ス符号化器、３は、変動する情報発生量を一定レートに
平滑する送信バッファである。
【０００４】また、符号４は、誤り訂正符号化を行なう
などして、伝送チャネルに適合した信号を発生させる伝
送路符号器、５は、符号化アルゴリズムの中の要素をど
のように使って、与えられたチャネルレートのビット列
を発生するかを決定する符号化制御回路、６は、送られ
てきた信号から誤り訂正符号等を分離する伝送路復号
器、７は受信バッファ、８は、多重化された符号列を映
像信号や各種ブロック属性信号に分離するビデオデマル
チプレックス復号化器、９は、量子化されている映像信
号を複合する情報源復号器である。
などして、伝送チャネルに適合した信号を発生させる伝
送路符号器、５は、符号化アルゴリズムの中の要素をど
のように使って、与えられたチャネルレートのビット列
を発生するかを決定する符号化制御回路、６は、送られ
てきた信号から誤り訂正符号等を分離する伝送路復号
器、７は受信バッファ、８は、多重化された符号列を映
像信号や各種ブロック属性信号に分離するビデオデマル
チプレックス復号化器、９は、量子化されている映像信
号を複合する情報源復号器である。
【０００５】上記の構成をとる映像コーデックは、基本
的には、映像信号について送信側で動き補償フレーム間
予測された誤差信号をＤＣＴ符号化し、これを可変長符
号化するものであり、シーンチェンジのとき、一定の間
隔でフレーム内符号化を行なう。また、受信側では各パ
ラメータに分離して復号化し、出力映像信号を得る。
的には、映像信号について送信側で動き補償フレーム間
予測された誤差信号をＤＣＴ符号化し、これを可変長符
号化するものであり、シーンチェンジのとき、一定の間
隔でフレーム内符号化を行なう。また、受信側では各パ
ラメータに分離して復号化し、出力映像信号を得る。
【０００６】
【発明が解決しようとする課題】上記従来のテレビ会議
システムでは、通信回線としてＩＳＤＮやディジタル専
用線を使用するため、伝送信号には低い符号化レートが
要求される。一般的には、３８４kb/sの転送速度を用い
たテレビ会議の場合、フレームレートは１５フレーム／
ｓｅｃ程度であり、通常のテレビジョン画像の３０フレ
ーム／ｓｅｃと比較した場合、約１／２のフレームレー
トになる。従って、テレビ会議を行なっているとき、そ
の画像をモニタ画面上で見た場合、被写体の動きが非常
にぎこちなく映し出され、見る者に違和感を与えてしま
うという問題がある。
システムでは、通信回線としてＩＳＤＮやディジタル専
用線を使用するため、伝送信号には低い符号化レートが
要求される。一般的には、３８４kb/sの転送速度を用い
たテレビ会議の場合、フレームレートは１５フレーム／
ｓｅｃ程度であり、通常のテレビジョン画像の３０フレ
ーム／ｓｅｃと比較した場合、約１／２のフレームレー
トになる。従って、テレビ会議を行なっているとき、そ
の画像をモニタ画面上で見た場合、被写体の動きが非常
にぎこちなく映し出され、見る者に違和感を与えてしま
うという問題がある。
【０００７】本発明は、画像処理装置の映像コーデック
内の情報源復号器に補間処理部を備え、相手側端末から
送信された映像データと動きベクトルを用いて、送信さ
れたきた画像のフレーム間に、補間処理部で作成した画
像フレームを挿入して画像出力信号を得ることで、会議
参加者に違和感を与えない画像の供給を可能とする画像
処理装置を提供することを目的とする。
内の情報源復号器に補間処理部を備え、相手側端末から
送信された映像データと動きベクトルを用いて、送信さ
れたきた画像のフレーム間に、補間処理部で作成した画
像フレームを挿入して画像出力信号を得ることで、会議
参加者に違和感を与えない画像の供給を可能とする画像
処理装置を提供することを目的とする。
【０００８】
【課題を解決するための手段】上記の目的を達成するた
めに、本発明は、時系列に与えられたフレーム画像の
内、前フレーム画像を、判定された動きベクトルに応じ
て表示画面上で移動させることにより補間フレーム信号
を作成する作成手段と、現時点での与えられたフレーム
画像と前記作成手段にて作成された補間フレーム信号と
を切り換えて出力する手段と、画像データが送信されて
いる間は、前記補間フレーム信号をモニタ上に表示し、
また、１フレーム分の画像データが送信された場合は、
与えられたフレーム画像をモニタ上に表示させる制御手
段とを備える。
めに、本発明は、時系列に与えられたフレーム画像の
内、前フレーム画像を、判定された動きベクトルに応じ
て表示画面上で移動させることにより補間フレーム信号
を作成する作成手段と、現時点での与えられたフレーム
画像と前記作成手段にて作成された補間フレーム信号と
を切り換えて出力する手段と、画像データが送信されて
いる間は、前記補間フレーム信号をモニタ上に表示し、
また、１フレーム分の画像データが送信された場合は、
与えられたフレーム画像をモニタ上に表示させる制御手
段とを備える。
【０００９】
【作用】以上の構成において、受信側にて画像を通常の
テレビ画像と同等のフレームレートにてモニタ上に表示
するよう機能する。
テレビ画像と同等のフレームレートにてモニタ上に表示
するよう機能する。
【００１０】
【実施例】以下、添付図面を参照して、本発明に係る好
適な実施例を詳細に説明する。図１，図２は、それぞ
れ、本発明の実施例に係る画像処理装置としてのテレビ
会議システムを構成する情報源符号器、情報源復号器の
構成を示すブロック図である。
適な実施例を詳細に説明する。図１，図２は、それぞ
れ、本発明の実施例に係る画像処理装置としてのテレビ
会議システムを構成する情報源符号器、情報源復号器の
構成を示すブロック図である。
【００１１】図１において、符号１１は減算器、１２，
１３は、符号化をフレーム間予測（Ｉｎｔｅｒモード）
で行なうか、あるいはフレーム内予測（Ｉｎｔｒａモー
ド）で行なうかを選択するためのスイッチ、１４は、入
力信号を符号化するための離散コサイン変換（ＤＣＴ）
回路、１５は量子化器、１６は逆量子化器、１７は、局
部復号するための逆離散コサイン変換（ＩＤＣＴ）回路
である。
１３は、符号化をフレーム間予測（Ｉｎｔｅｒモード）
で行なうか、あるいはフレーム内予測（Ｉｎｔｒａモー
ド）で行なうかを選択するためのスイッチ、１４は、入
力信号を符号化するための離散コサイン変換（ＤＣＴ）
回路、１５は量子化器、１６は逆量子化器、１７は、局
部復号するための逆離散コサイン変換（ＩＤＣＴ）回路
である。
【００１２】また、符号１８は加算器、１９は、局部復
号されたデータをフレーム単位で格納するフレームメモ
リ、２０は、ローパス特性を有するループ内フィルタ、
２１は、現画面のあるブロックが、前画面のどの部分に
最も似ているかを計算して、ブロックの動き量を検出す
る動きベクトル検出回路である。２２は、スイッチ１
２，１３の制御や量子化器１５の量子化特性の指定、及
び符号化の制御を行なう符号化制御部である。
号されたデータをフレーム単位で格納するフレームメモ
リ、２０は、ローパス特性を有するループ内フィルタ、
２１は、現画面のあるブロックが、前画面のどの部分に
最も似ているかを計算して、ブロックの動き量を検出す
る動きベクトル検出回路である。２２は、スイッチ１
２，１３の制御や量子化器１５の量子化特性の指定、及
び符号化の制御を行なう符号化制御部である。
【００１３】一方、図２において、符号９１は、送信さ
れてきたデータをブロック毎の係数に変換する逆量子化
器、９２は、符号化されている信号を出力信号に変換す
る逆離散コサイン変換（ＩＤＣＴ）回路、９３は加算
器、９４は、送信されてきたデータがフレーム間予測
（Ｉｎｔｅｒモード）であるか、あるいはフレーム内予
測（Ｉｎｔｒａモード）であるかを選択するためのスイ
ッチ、９５は、復号されたデータをフレーム単位で格納
するフレームメモリ、９６は、ローパス特性を有するル
ープ内フィルタ、９７は、送信されたフレーム間に補間
フレームを作成する補間処理部、９８は、補間処理部９
７から出力された補間フレーム画像を出力画像とする
か、あるいは、送信されたフレーム画像を出力画像とす
るかを選択するためのスイッチ、そして、９９は、スイ
ッチ９８を制御する制御部である。［符号器側の動作説
明］以下、本実施例に係る情報源符号器の動作について
詳細に説明する。
れてきたデータをブロック毎の係数に変換する逆量子化
器、９２は、符号化されている信号を出力信号に変換す
る逆離散コサイン変換（ＩＤＣＴ）回路、９３は加算
器、９４は、送信されてきたデータがフレーム間予測
（Ｉｎｔｅｒモード）であるか、あるいはフレーム内予
測（Ｉｎｔｒａモード）であるかを選択するためのスイ
ッチ、９５は、復号されたデータをフレーム単位で格納
するフレームメモリ、９６は、ローパス特性を有するル
ープ内フィルタ、９７は、送信されたフレーム間に補間
フレームを作成する補間処理部、９８は、補間処理部９
７から出力された補間フレーム画像を出力画像とする
か、あるいは、送信されたフレーム画像を出力画像とす
るかを選択するためのスイッチ、そして、９９は、スイ
ッチ９８を制御する制御部である。［符号器側の動作説
明］以下、本実施例に係る情報源符号器の動作について
詳細に説明する。
【００１４】符号器側では、基本的には、動き補償フレ
ーム間予測された誤差信号をＤＣＴ符号化し、これを可
変長符号化する。符号化モードの単位は、８×８画素の
輝度信号ブロック４個と、同じく８×８画素の２個の色
差ブロックであり、これらをマクロブロック（ＭＢ）と
呼ぶ。また、１画像フレームは１２個のＧＯＢ（Ｇｒｏ
ｕｐ ｏｆ Ｂｌｏｃｋ）から構成され、１ＧＯＢは、
３３個のＭＢから構成される。
ーム間予測された誤差信号をＤＣＴ符号化し、これを可
変長符号化する。符号化モードの単位は、８×８画素の
輝度信号ブロック４個と、同じく８×８画素の２個の色
差ブロックであり、これらをマクロブロック（ＭＢ）と
呼ぶ。また、１画像フレームは１２個のＧＯＢ（Ｇｒｏ
ｕｐ ｏｆ Ｂｌｏｃｋ）から構成され、１ＧＯＢは、
３３個のＭＢから構成される。
【００１５】最初の入力信号は、時間・空間フィルタに
より世界共通の中間フォーマット（ＣＩＦ，ＱＣＩＦ）
に変換され、スイッチ１２のａ側（Ｉｎｔｅｒモード）
接点を介して、そのままＤＣＴ回路１４に入力され、そ
こでＤＣＴ符号化される。このＤＣＴ回路１４では、相
関のある信号をなるべく無相関な信号に線形変換し、特
定の変換係数に電力が集中することを利用して、各係数
に割り当てる情報量を最適化する。そして、全体の符号
化情報量を削減するため、８×８画素を１単位としてＤ
ＣＴ係数に変換する。ＤＣＴ符号化された信号は、量子
化器１５へ入力されて量子化が行なわれ、ｑ（変換係数
の量子化出力インデックス）として出力される。
より世界共通の中間フォーマット（ＣＩＦ，ＱＣＩＦ）
に変換され、スイッチ１２のａ側（Ｉｎｔｅｒモード）
接点を介して、そのままＤＣＴ回路１４に入力され、そ
こでＤＣＴ符号化される。このＤＣＴ回路１４では、相
関のある信号をなるべく無相関な信号に線形変換し、特
定の変換係数に電力が集中することを利用して、各係数
に割り当てる情報量を最適化する。そして、全体の符号
化情報量を削減するため、８×８画素を１単位としてＤ
ＣＴ係数に変換する。ＤＣＴ符号化された信号は、量子
化器１５へ入力されて量子化が行なわれ、ｑ（変換係数
の量子化出力インデックス）として出力される。
【００１６】この量子化器１５では、３１種類の量子化
器が用意されており、フレーム内符号化の直流成分を除
く全てのＤＣＴ係数に同一の量子化器が適用される。そ
して、ＤＣＴ係数はジグザグスキャンされた後、連続し
たゼロの数（ラン）と、それに続くゼロ以外の値（レベ
ル）の組み合わせとして符号化される。このとき、選択
された量子化器の情報をｑｚ（量子化特性指定）として
出力する。
器が用意されており、フレーム内符号化の直流成分を除
く全てのＤＣＴ係数に同一の量子化器が適用される。そ
して、ＤＣＴ係数はジグザグスキャンされた後、連続し
たゼロの数（ラン）と、それに続くゼロ以外の値（レベ
ル）の組み合わせとして符号化される。このとき、選択
された量子化器の情報をｑｚ（量子化特性指定）として
出力する。
【００１７】また、量子化の結果、有意係数を持たない
ブロックは無効ブロックとなり、６ブロックすべてが無
効のＭＢの情報は伝送せず、次の有意なＭＢの先頭に、
１つ前の有効ＭＢからの距離を示すアドレスを付加して
表現する。さらに、量子化器１５で量子化されたデータ
は、次に予測値を作る、符号器側の局部復号器である逆
量子化器１６と逆ＤＣＴ回路１７に入力され、そこで復
号化されてからフレームメモリ１９に蓄積される。
ブロックは無効ブロックとなり、６ブロックすべてが無
効のＭＢの情報は伝送せず、次の有意なＭＢの先頭に、
１つ前の有効ＭＢからの距離を示すアドレスを付加して
表現する。さらに、量子化器１５で量子化されたデータ
は、次に予測値を作る、符号器側の局部復号器である逆
量子化器１６と逆ＤＣＴ回路１７に入力され、そこで復
号化されてからフレームメモリ１９に蓄積される。
【００１８】フレームメモリ１９では、動き補償予測を
行なう。その方法としては、次画面のフレーム画像をフ
レームメモリ１９内の現画面のフレーム画像と比較し、
ＭＢを単位として行なって、前ブロックと近似している
ブロックを抽出する。その範囲は、縦横とも±１５画素
／フレームで、精度は整数画素である。動きベクトル検
出回路２１では、上記の動きベクトルを検出し、それを
ｖ（動きベクトル）として出力するとともにフレームメ
モリ１９へ入力する。フレームメモリ１９では、動き補
償を行なった次画面のフレーム画像の予測フレーム画像
を作成する。
行なう。その方法としては、次画面のフレーム画像をフ
レームメモリ１９内の現画面のフレーム画像と比較し、
ＭＢを単位として行なって、前ブロックと近似している
ブロックを抽出する。その範囲は、縦横とも±１５画素
／フレームで、精度は整数画素である。動きベクトル検
出回路２１では、上記の動きベクトルを検出し、それを
ｖ（動きベクトル）として出力するとともにフレームメ
モリ１９へ入力する。フレームメモリ１９では、動き補
償を行なった次画面のフレーム画像の予測フレーム画像
を作成する。
【００１９】フレームメモリ１９から出力された予測フ
レーム画像については、動き補償予測が、一般に画像の
低域成分に関して有効であるから、予測値にローパス特
性を有するループ内フィルタ２０を通過させて、その予
測効率を向上させる。ただし、比較的高い符号化レート
における、カメラのパンニングのような単純な動きに対
しては、動き補償予測の精度が高いため、フィルタをか
けないほうが効率が高い。
レーム画像については、動き補償予測が、一般に画像の
低域成分に関して有効であるから、予測値にローパス特
性を有するループ内フィルタ２０を通過させて、その予
測効率を向上させる。ただし、比較的高い符号化レート
における、カメラのパンニングのような単純な動きに対
しては、動き補償予測の精度が高いため、フィルタをか
けないほうが効率が高い。
【００２０】このため、ループ内フィルタ２０に対して
オン／オフ制御が可能となっており、それがｆ（ループ
内フィルタのオン／オフ信号）として出力される。そし
て、ループ内フィルタ２０を通過した予測フレーム画像
は、減算器１１によって実フレーム画像と比較され、予
測誤差成分のみがスイッチ１２のｂ側（Ｉｎｔｅｒモー
ド）接点を介してＤＣＴ回路１４へ入力され、そこで誤
差成分のみがＤＣＴ変換される。
オン／オフ制御が可能となっており、それがｆ（ループ
内フィルタのオン／オフ信号）として出力される。そし
て、ループ内フィルタ２０を通過した予測フレーム画像
は、減算器１１によって実フレーム画像と比較され、予
測誤差成分のみがスイッチ１２のｂ側（Ｉｎｔｅｒモー
ド）接点を介してＤＣＴ回路１４へ入力され、そこで誤
差成分のみがＤＣＴ変換される。
【００２１】以下、上記の動作を繰り返し行ない、通常
は、動き補償フレーム間予測（Ｉｎｔｅｒモード）にて
入力画像を可変長符号化する。ただし、シーンチェンジ
のとき、及び送受信のデータのミスマッチの累積を防ぐ
ため、一定の間隔でフレーム内符号化（Ｉｎｔｒａモー
ド）を行なう構造となっており、符号化制御部２２は、
これらの制御を行なうため、ｐ（Ｉｎｔｅｒ／Ｉｎｔｒ
ａモードの識別フラグ），ｔ（伝送／非伝送の識別フラ
グ）を出力する。 ［復号器側の動作説明］次に、本実施例に係る情報源復
号器の動作について詳細に説明する。
は、動き補償フレーム間予測（Ｉｎｔｅｒモード）にて
入力画像を可変長符号化する。ただし、シーンチェンジ
のとき、及び送受信のデータのミスマッチの累積を防ぐ
ため、一定の間隔でフレーム内符号化（Ｉｎｔｒａモー
ド）を行なう構造となっており、符号化制御部２２は、
これらの制御を行なうため、ｐ（Ｉｎｔｅｒ／Ｉｎｔｒ
ａモードの識別フラグ），ｔ（伝送／非伝送の識別フラ
グ）を出力する。 ［復号器側の動作説明］次に、本実施例に係る情報源復
号器の動作について詳細に説明する。
【００２２】符号器側では、送信されたデータｑ（変換
係数の量子化出力インデックス）は、逆量子化器９１，
逆ＤＣＴ回路９２で復号され、画像出力信号としてスイ
ッチ９８のａ側接点を介して出力される。この画像信号
は、さらに、フレームメモリ９５に蓄積され、その後、
補間処理部９７へ出力される。補間処理部９７では、送
信されたｖ（動きベクトル）データを、例えば１／２に
して、次画面の間の補間フレーム画像を予測し、補間予
測フレーム画像を作成する。同様に、フレームメモリ９
５でも、ｖ（動きベクトル）データから次画面の予測フ
レーム画像を作成する。
係数の量子化出力インデックス）は、逆量子化器９１，
逆ＤＣＴ回路９２で復号され、画像出力信号としてスイ
ッチ９８のａ側接点を介して出力される。この画像信号
は、さらに、フレームメモリ９５に蓄積され、その後、
補間処理部９７へ出力される。補間処理部９７では、送
信されたｖ（動きベクトル）データを、例えば１／２に
して、次画面の間の補間フレーム画像を予測し、補間予
測フレーム画像を作成する。同様に、フレームメモリ９
５でも、ｖ（動きベクトル）データから次画面の予測フ
レーム画像を作成する。
【００２３】フレームメモリ９５で作成した予測フレー
ム画像は、ループ内フィルタ９６を介してスイッチ９４
に入力される。スイッチ９４は、送信されてきたデータ
がフレーム内予測（Ｉｎｔｒａモード）のときスイッチ
をａ側に倒し、また、フレーム間予測（Ｉｎｔｅｒモー
ド）のときには、スイッチをｂ側に倒す。そして、通常
は、フレーム間予測（Ｉｎｔｅｒモード）なので、予測
フレーム画像は、スイッチ９４のｂ側の接点を介して加
算器９３に入力される。加算器９３では、送信されてき
た差分データと予測フレーム画像を加算して実画像を作
成し、それをスイッチ９８ａを介して出力する。
ム画像は、ループ内フィルタ９６を介してスイッチ９４
に入力される。スイッチ９４は、送信されてきたデータ
がフレーム内予測（Ｉｎｔｒａモード）のときスイッチ
をａ側に倒し、また、フレーム間予測（Ｉｎｔｅｒモー
ド）のときには、スイッチをｂ側に倒す。そして、通常
は、フレーム間予測（Ｉｎｔｅｒモード）なので、予測
フレーム画像は、スイッチ９４のｂ側の接点を介して加
算器９３に入力される。加算器９３では、送信されてき
た差分データと予測フレーム画像を加算して実画像を作
成し、それをスイッチ９８ａを介して出力する。
【００２４】ここで送信されるフレーム画像データは、
ディジタル回線の伝送速度により、それが３８４kb/sの
場合、１５フレーム／ｓｅｃである。よって、補間処理
部９７で作成した補間予測フレーム画像をスイッチ９８
のｂ側接点を介して出力することにより、標準的なテレ
ビ画像のフレームレートにする。この方法としては、制
御部９９でスイッチ９８を制御し、フレーム画像のデー
タの転送が終了していない時点ではスイッチ９８をｂ側
に倒して、補間処理部９７で作成した補間予測フレーム
画像を出力する。また、フレーム画像データの転送が終
了した時点で、スイッチ９８をａ側に倒して実画像を出
力するように動作させれば良い。
ディジタル回線の伝送速度により、それが３８４kb/sの
場合、１５フレーム／ｓｅｃである。よって、補間処理
部９７で作成した補間予測フレーム画像をスイッチ９８
のｂ側接点を介して出力することにより、標準的なテレ
ビ画像のフレームレートにする。この方法としては、制
御部９９でスイッチ９８を制御し、フレーム画像のデー
タの転送が終了していない時点ではスイッチ９８をｂ側
に倒して、補間処理部９７で作成した補間予測フレーム
画像を出力する。また、フレーム画像データの転送が終
了した時点で、スイッチ９８をａ側に倒して実画像を出
力するように動作させれば良い。
【００２５】なお、図３は、上述した本実施例に係る情
報源符号器、情報源復号器にて処理された画像の表示例
を示す。同図には、送信されてきた動きベクトルｖを１
／２にし、現画面と次画面との間の補間フレーム画像を
予測し、補間予測フレーム画像を作成する様子が示され
ている。以上説明したように、本実施例によれば、テレ
ビ会議システムの映像コーデック内の情報源復号器側に
補間処理部を設け、伝送されてくる画像データ間に、補
間処理をした画像データを挿入することで、受信側での
画像が、通常のテレビ画像のフレームレートと同等のフ
レームレートでモニタ上に表示され、テレビ会議の参加
者にとって、画像上での被写体の動きに違和感がなくな
るという効果がある。
報源符号器、情報源復号器にて処理された画像の表示例
を示す。同図には、送信されてきた動きベクトルｖを１
／２にし、現画面と次画面との間の補間フレーム画像を
予測し、補間予測フレーム画像を作成する様子が示され
ている。以上説明したように、本実施例によれば、テレ
ビ会議システムの映像コーデック内の情報源復号器側に
補間処理部を設け、伝送されてくる画像データ間に、補
間処理をした画像データを挿入することで、受信側での
画像が、通常のテレビ画像のフレームレートと同等のフ
レームレートでモニタ上に表示され、テレビ会議の参加
者にとって、画像上での被写体の動きに違和感がなくな
るという効果がある。
【００２６】なお、上記実施例では、送信されてきたｖ
（動きベクトル）データは次画面の動きベクトルデータ
であり、それを１／２にすることで補間予測フレーム画
像を作成した。しかし、次画面の動きベクトルが送信さ
れてきていないときは、現画像の動きベクトルを利用
し、その動きベクトルを３／２にして次画面のフレーム
画像を予測して補間処理を行なうことにより、上記実施
例におけるフレームよりも１フレーム速い補間予測フレ
ームを作成することが可能となる。図４に、この場合の
画像の表示例を示す。
（動きベクトル）データは次画面の動きベクトルデータ
であり、それを１／２にすることで補間予測フレーム画
像を作成した。しかし、次画面の動きベクトルが送信さ
れてきていないときは、現画像の動きベクトルを利用
し、その動きベクトルを３／２にして次画面のフレーム
画像を予測して補間処理を行なうことにより、上記実施
例におけるフレームよりも１フレーム速い補間予測フレ
ームを作成することが可能となる。図４に、この場合の
画像の表示例を示す。
【００２７】本発明は、複数の機器から構成されるシス
テムに適用しても１つの機器から成る装置に適用しても
良い。また、本発明は、システムあるいは装置にプログ
ラムを供給することによって達成される場合にも適用で
きることは言うまでもない。
テムに適用しても１つの機器から成る装置に適用しても
良い。また、本発明は、システムあるいは装置にプログ
ラムを供給することによって達成される場合にも適用で
きることは言うまでもない。
【００２８】
【発明の効果】以上説明したように、本発明によれば、
画像データの復号化側にて画像データ間に補間処理をし
た画像データを挿入することで、受信側の画像は通常の
テレビ画像のフレームレートと同等のフレームレートで
モニタ上に表示され、違和感のない画像を提供できると
いう効果がある。
画像データの復号化側にて画像データ間に補間処理をし
た画像データを挿入することで、受信側の画像は通常の
テレビ画像のフレームレートと同等のフレームレートで
モニタ上に表示され、違和感のない画像を提供できると
いう効果がある。
【図１】本発明の実施例に係るテレビ会議システムを構
成する情報源符号器の構成を示すブロック図である。
成する情報源符号器の構成を示すブロック図である。
【図２】本発明の実施例に係るテレビ会議システムを構
成する情報源復号器の構成を示すブロック図である。
成する情報源復号器の構成を示すブロック図である。
【図３】実施例に係る情報源符号器、情報源復号器にて
処理された画像の表示例を示す図である。
処理された画像の表示例を示す図である。
【図４】実施例に係る情報源符号器、情報源復号器にて
処理された画像の他の表示例を示す図である。
処理された画像の他の表示例を示す図である。
【図５】従来のテレビ会議システムの映像コーデックの
構成を示すブロック図である。
構成を示すブロック図である。
１ 情報源符号器 ２ ビデオマルチプレックス ３ 送信バッファ ４ 伝送路符号器 ５ 符号化制御部 ６ 伝送路復号器 ７ 受信バッファ ８ ビデオデマルチプレックス ９ 情報源復号器 １１ 減算器 １２，１３，９４，９８ スイッチ １４ 離散コサイン変換器 １５ 量子化器 １６，９１ 逆量子化器 １７，９２ 逆離散コサイン変換器 １８，９３ 加算器 １９，９５ フレームメモリ ２０，９６ ループ内フィルタ ２１ 動きベクトル検出回路 ２２ 符号化制御部 ９７ 補間処理部 ９９ 制御部
Claims (3)
- 【請求項１】 時系列に与えられたフレーム画像の内、
前フレーム画像を、判定された動きベクトルに応じて表
示画面上で移動させることにより補間フレーム信号を作
成する作成手段と、 現時点での与えられたフレーム画像と前記作成手段にて
作成された補間フレーム信号とを切り換えて出力する手
段と、 画像データが送信されている間は、前記補間フレーム信
号をモニタ上に表示し、また、１フレーム分の画像デー
タが送信された場合は、与えられたフレーム画像をモニ
タ上に表示させる制御手段とを備えることを特徴とする
画像処理装置。 - 【請求項２】 前記作成手段は、前記動きベクトルをｋ
／ｎ（ｋ＝１〜ｎ−１）にして補間フレーム信号を作成
することを特徴とする請求項１に記載の画像処理装置。 - 【請求項３】 前記作成手段は、前記動きベクトルをｋ
／ｎ（ｎ＜ｋ＜２ｎ）にして補間フレーム信号を作成す
ることを特徴とする請求項１に記載の画像処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5151715A JPH0723395A (ja) | 1993-06-23 | 1993-06-23 | 画像処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5151715A JPH0723395A (ja) | 1993-06-23 | 1993-06-23 | 画像処理装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH0723395A true JPH0723395A (ja) | 1995-01-24 |
Family
ID=15524703
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP5151715A Withdrawn JPH0723395A (ja) | 1993-06-23 | 1993-06-23 | 画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0723395A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100393063B1 (ko) * | 2001-02-15 | 2003-07-31 | 삼성전자주식회사 | 프레임 레이트 변환 기능을 갖는 비디오 디코더 및 그 방법 |
| JP2006203334A (ja) * | 2005-01-18 | 2006-08-03 | Canon Inc | 画像記録装置及びその制御方法、並びにプログラム |
| US7381820B2 (en) | 2003-10-24 | 2008-06-03 | Yamasa Corporation | α-1-phosphorylated-2-deoxy-2-fluoroarabinoside and process for producing 2′-deoxy-2′-fluoro-β-d-arabinonucleoside |
-
1993
- 1993-06-23 JP JP5151715A patent/JPH0723395A/ja not_active Withdrawn
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100393063B1 (ko) * | 2001-02-15 | 2003-07-31 | 삼성전자주식회사 | 프레임 레이트 변환 기능을 갖는 비디오 디코더 및 그 방법 |
| US7381820B2 (en) | 2003-10-24 | 2008-06-03 | Yamasa Corporation | α-1-phosphorylated-2-deoxy-2-fluoroarabinoside and process for producing 2′-deoxy-2′-fluoro-β-d-arabinonucleoside |
| JP2006203334A (ja) * | 2005-01-18 | 2006-08-03 | Canon Inc | 画像記録装置及びその制御方法、並びにプログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100600419B1 (ko) | 움직임 보상된 예측 영상 부호화 및 복호화 | |
| KR100340370B1 (ko) | 화상신호전송방법및장치 | |
| EP0644695A2 (en) | Spatially scalable video encoding and decoding | |
| EP0719055A2 (en) | Video transmission rate matching for multimedia communication systems | |
| US6956899B2 (en) | Precise bit control apparatus with look-ahead for MPEG encoding | |
| WO2003036981A1 (en) | Spatial scalable compression | |
| JPH06189281A (ja) | 適応的フレーム／フィールドフォーマット圧縮を用いた映像信号符号化装置 | |
| WO1998019460A1 (en) | A transcoder | |
| KR20050105222A (ko) | 비디오 부호화 | |
| JP2001508632A (ja) | 動き補償予測画像符号化および復号化 | |
| JPH089375A (ja) | 逆離散コサイン変換不一致制御装置および画像符号化装置 | |
| JPH0723395A (ja) | 画像処理装置 | |
| JP3797208B2 (ja) | カラー動画像符号化装置、復号化装置、符号化方法、復号化方法及びカラー動画像符号列伝送方法 | |
| JPH07107464A (ja) | 画像符号化装置および復号化装置 | |
| JP2000004440A (ja) | 動画像復号化方法および動画像復号化装置 | |
| JP2002010267A (ja) | 動きベクトル変換装置及び方法 | |
| JP3859118B2 (ja) | 可変画像レート符号化装置、可変画像レート復号化装置、可変画像レート符号化方法、及び可変画像レート復号化方法 | |
| JP3416505B2 (ja) | 動画像復号化方法 | |
| JP3247349B2 (ja) | 動画像監視装置及び監視方法 | |
| JP3307969B2 (ja) | 映像信号伝送装置 | |
| JP3384739B2 (ja) | 動画像復号化方法 | |
| JP3139791B2 (ja) | 動画像パケット通信方式 | |
| JP3182920B2 (ja) | 高能率符号化装置 | |
| JPH06334985A (ja) | 画像符号化装置 | |
| JPH02222388A (ja) | 動画像符号化方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20000905 |