JP3478051B2 - 画像符号化装置および画像符号化方法およびビデオ会議装置 - Google Patents
画像符号化装置および画像符号化方法およびビデオ会議装置Info
- Publication number
- JP3478051B2 JP3478051B2 JP11774297A JP11774297A JP3478051B2 JP 3478051 B2 JP3478051 B2 JP 3478051B2 JP 11774297 A JP11774297 A JP 11774297A JP 11774297 A JP11774297 A JP 11774297A JP 3478051 B2 JP3478051 B2 JP 3478051B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- image
- coefficient block
- generated
- lines
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
符号化装置に関する。
Cと略記する。)やワークステーション(以下、WSと
略記する。)等のコンピュータで、ソフトウエア処理に
よってインタレースビデオ信号を符号化する画像符号化
装置に関する。
議装置に関する。
デオカメラやテレビチューナからビデオ信号を入力し、
該ビデオ信号を符号化して、圧縮画像データを生成する
ことが盛んに行われている。さらに、該圧縮画像データ
を、ネットワーク経由で通信するビデオ会議装置も普及
しつつある。
理が可能であることが、実用上非常に重要である。リア
ルタイム処理が不可能な画像符号化装置は、非圧縮の画
像データを一時的に格納するために大容量の記憶装置を
必要とし、コスト高になるためである。記憶装置の記憶
容量が少ない場合には、一度に圧縮できる画像の長さが
短くなる。
ン、毎秒30フレーム、1画素あたり2バイトの非圧縮
画像データを、30分間分格納するためには、約31ギ
ガバイトもの記憶容量の記憶装置が必要である。
持つ記憶装置は高価である。
像符号化装置では、前記の非圧縮画像データを、一度に
約1分間分しか符号化出来ない。
処理時間は短い方が望ましい。
ている、MPEG(Moving PictureExperts Group)やJ
PEG(Joint Picture Experts Group)、およびビデオ
会議に広く用いられているH.261等の国際標準規格
は、いずれもDCT(Discrete Cosine Transform、離散
コサイン変換)を使用している。DCTの計算量は多い
ので、これらの規格による符号化の計算量は多い。さら
に、MPEGおよびH.261でフレーム間予測を行な
う場合には、さらに多くの計算量が必要になる。
ウエアで画像符号化処理を行なう画像符号化装置では、
計算速度の不足により駒落ち等が発生し、上記標準規格
に準拠した高品質な圧縮画像データを、リアルタイムに
生成できないという問題点がある。
II刊、最新MPEG教科書のp.53からp.165
等に掲載されている。
Sの画面に表示する場合には、ビデオ信号と、PCやW
Sのグラフィックス表示信号の走査方法の違いも問題と
なる。PCやWSのグラフィックス表示信号は、ライン
を上から順に間隔を空けずに走査するノンインタレース
形式が主流である。
1ライン分の間隔を空けて走査するインタレース形式が
主流である。
ィールドと偶数フィールドとを合成してフレームを生成
し、該フレームをノンインタレースの表示装置で表示す
ると、フレームの中に異なる時刻にサンプリングされた
画素を含み、動きのある部分に画質劣化が発生する。
合成せず、片フィールドを抽出して符号化すると、フレ
ームの画像と比較して、水平方向の画素数は変わらず、
ライン数だけが半分になるために、横長の不自然な圧縮
画像データが生成される。上記の不自然さを防ぐために
は、画像を水平方向に縮小するか、画像を垂直方向に拡
大することが考えられるが、画像を縮小すると解像度が
低下し、画質が劣化する。
ら、ノンインタレース形式の表示装置で表示させた際に
高画質な圧縮画像データを生成するためには、該ビデオ
信号から片フィールドを抽出し、該フィールドを垂直方
向に2倍に拡大することが考えられる。
直方向に2倍に拡大し、MPEG1(MPEG phase 1)形式
に圧縮符号化する場合を説明する。
ック図である。
入力画像を垂直方向に2倍に拡大し、縦横比を、オリジ
ナルのフレームの縦横比に合わせる。続いて、ブロック
化処理102によって、入力画像を水平8画素、垂直8
ラインからなるブロックに分割する。続いて、フレーム
間予測処理103によって、該ブロックと、参照画像更
新処理108によって生成された参照画像とを用いてフ
レーム間予測処理を行い、差分ブロックと動きベクトル
とを生成する。
レーム間予測処理103を行なわず、ブロック化処理1
02生成したブロックを差分ブロックとする。
ブロックをDCT係数ブロックに変換する。
CT係数ブロックを量子化係数ブロックに変換する。
107、参照画像更新処理108は、次のフレームのフ
レーム間予測処理のための準備である。逆量子化処理1
06によって、該量子化係数ブロックを逆量子化して逆
量子化係数ブロックを生成する。
逆量子化係数ブロックにIDCTを施し、復号ブロック
を生成する。
て、該復号ブロックと、フレーム間予測処理103で生
成した動きベクトルとを用いて参照画像を更新する。
て、量子化処理105で生成した量子化係数と、フレー
ム間予測処理103で生成した動きベクトルを可変長符
号に変換し、さらに画像サイズ等を示す制御符号を付加
して出力する。
61形式に圧縮する場合の処理は、上記説明したMPE
G1形式に圧縮する場合の処理と同様である。また、J
PEG形式に圧縮する場合の処理は、上記処理から、フ
レーム間予測処理103、逆量子化処理106、IDC
T処理107、参照画像更新処理108を除いた処理で
ある。
を最初に行なうと、該処理以降の各処理の計算量が2倍
になり、計算量の増大を招くという問題点がある。
向に拡大した後に符号化する方法は、拡大されてデータ
量が増えた画像データを符号化するため、計算量が多い
という課題がある。同様に、特開平6−237449号
公報記載の方法は、両フィールドを使用するため、計算
量が多いという課題がある。
もので、入力画像を、周波数空間で拡大処理することに
よって計算量を削減し、ソフトウエア処理による安価な
画像符号化装置を提供することを目的とする。
の、奇数あるいは偶数のいずれかのフィールドを符号化
して、圧縮画像データを生成することにより、ノンイン
タレースの表示系で表示させた際にも画質劣化が発生し
ない、高画質な画像符号化装置を提供することを目的と
する。
に、本発明の画像符号化装置は、(1)入力画像を分割
し、水平M画素、垂直Nラインで構成されるブロックを
生成するブロック化手段と、該ブロック化手段で生成さ
れたブロックに直交変換を施し、直交変換係数ブロック
を生成する直交変換手段と、該直交変換手段で生成され
た直交変換係数ブロックを量子化し、量子化係数ブロッ
クを生成する量子化手段と、該量子化手段で生成された
該量子化係数ブロックを、水平P画素、垂直Qライン分
の量子化係数ブロックに変換するサイズ変換手段と、該
サイズ変換手段で生成された量子化係数ブロックを、可
変長符号に変換する可変長符号化手段とを設けて構成す
る。
M画素、垂直Nラインで構成されるブロックを生成する
ブロック化手段と、該ブロック化手段によって生成され
たブロックと、復号手段によって生成された参照画像と
を用いてフレーム間予測処理を行ない、差分ブロックを
生成するフレーム間予測手段と、該フレーム間予測手段
で生成された差分ブロックに直交変換を施し、直交変換
係数ブロックを生成する直交変換手段と、該直交変換手
段で生成された直交変換係数ブロックを量子化し、量子
化係数ブロックを生成する量子化手段と、該量子化ブロ
ックを復号して参照画像を生成する復号手段と、該量子
化手段で生成された該量子化係数ブロックを、水平P画
素、垂直Qライン分の量子化係数ブロックに変換するサ
イズ変換手段と、該サイズ変換手段で生成された量子化
係数ブロックを、可変長符号に変換する可変長符号化手
段とを設けて構成する。
M画素、垂直Nラインで構成されるブロックを生成する
ブロック化手段と、該ブロック化手段で生成されたブロ
ックに直交変換を施し、直交変換係数ブロックを生成す
る直交変換手段と、該直交変換手段で生成された直交変
換係数ブロックを量子化し、量子化係数ブロックを生成
する量子化手段と、該量子化手段で生成された該量子化
係数ブロックを、水平P画素、垂直Qライン分の量子化
係数ブロックに変換するサイズ変換手段と、該サイズ変
換手段で生成された量子化係数ブロックを可変長符号に
変換する可変長符号化手段と、該可変長符号化手段で生
成された可変長符号を、通信網に出力する通信制御手段
とを設けて構成する。
M画素、垂直Nラインで構成されるブロックを生成する
ブロック化手段と、該ブロック化手段によって生成され
たブロックと、復号手段によって生成された参照画像と
を用いてフレーム間予測処理を行ない、差分ブロックを
生成するフレーム間予測手段と、該フレーム間予測手段
で生成された差分ブロックに直交変換を施し、直交変換
係数ブロックを生成する直交変換手段と、該直交変換手
段で生成された直交変換係数ブロックを量子化し、量子
化係数ブロックを生成する量子化手段と、該量子化ブロ
ックを復号して参照画像を生成する復号手段と、該量子
化手段で生成された該量子化係数ブロックを、水平P画
素、垂直Qライン分の量子化係数ブロックに変換するサ
イズ変換手段と、該サイズ変換手段で生成された量子化
係数ブロックを、可変長符号に変換する可変長符号化手
段と、該可変長符号化手段で生成された可変長符号を通
信網に出力する通信制御手段とを設けて構成する。
を参照して説明する。
ロック図である。
による画像符号化処理の概要を説明する。
倍拡大処理101によって、フィールドを垂直方向に2
倍に拡大し、縦横比をオリジナルのフレームの縦横比に
合わせている。
化処理では、可変長符号化処理209の直前の垂直2倍
拡大処理208において、フィールドを垂直方向に2倍
に拡大する。
ロック化処理201によって、入力画像を水平8画素、
垂直4ラインからなるブロックに分割する。一方、従来
方式ではブロック化処理102によって、垂直2倍拡大
された入力画像を水平8画素、垂直8ラインからなるブ
ロックに分割する。従って、ブロックの数は、従来方式
と同一である。
ーム間予測処理202、DCT処理203、量子化処理
204、逆量子化処理205、IDCT処理206、参
照画像更新処理207は、それぞれ、従来方式のフレー
ム間予測処理103、DCT処理104、量子化処理1
05、逆量子化処理106、IDCT処理107、参照
画像更新処理108に対応する処理である。ただし、本
発明の画像符号化処理の上記各処理は、垂直2倍拡大処
理を行なっていないデータに対して行う。従って、上記
各処理の計算量は、従来方式の対応する処理の計算量
の、それぞれ半分である。
子化処理204によって得られた量子化係数データを、
周波数空間で拡大する。
て、圧縮画像データを生成する。以上で、インタレース
形式のビデオ信号の片フィールドから、縦横比がオリジ
ナルのフレームと同じで、かつ高画質の圧縮画像データ
が生成できる。
予測を行なわない場合には、フレーム間予測処理20
2、逆量子化処理205、IDCT処理206、参照画
像更新処理207を行なわず、ブロック化202処理で
生成したブロックを用いてDCT処理203、量子化処
理204、垂直2倍拡大処理208、可変長符号化処理
209を行い、圧縮画像データを生成する。
の計算量を削減できる理由を説明する。
量子化処理、逆量子化処理、IDCT処理、を、水平8
画素、垂直8ラインのブロックに対して施す。一方、本
発明の画像符号化処理では、上記各処理を、水平8画
素、垂直4ラインのブロックに対して施し、ブロックの
数は従来方式と同一である。
量を、従来方式に比して半減できる。
ム間予測処理、参照画像更新処理の対象となるデータ量
は、従来方式の半分である。従って、本発明によれば、
フレーム間予測処理、参照画像更新処理の計算量が、従
来方式に比して半減できる。
符号化処理では、フレーム間予測処理における動きベク
トルの算出のための計算量が支配的であるため、フレー
ム間予測処理の計算量が半減する効果は非常に大きい。
では、DCT処理の計算量が支配的であるため、DCT
処理の計算量が半減する効果は非常に大きい。
号化処理の計算量を、従来方式よりも大幅に削減でき
る。
して説明する。
斜視図である。
1と、ディスプレイ302と、キーボード303と、V
TR304とを備えて構成されている。ディスプレイ3
02は、CRT(Cathode Ray Tube)や液晶パネル等を用
いた表示装置であり、PC301から入力した表示信号
を表示する。キーボード303は、本画像符号化装置の
ユーザの操作を受け付け、該操作を電気信号に変換し、
該電気信号をPC301に出力する。VTR304はビ
デオテープを再生、あるいはテレビジョン放送を受信し
てビデオ信号を生成し、該ビデオ信号をPC301に出
力する。
304が出力するビデオ信号から1フィールド分の画像
を抽出し、該画像をJPEG(Joint Photographic Expe
rtsGroup)形式に符号化して圧縮画像データを生成し、
該圧縮画像データをPC301が内蔵する記憶装置に記
録する。
て説明する。
ある。PC301は、CPU401と、メインメモリ4
02と、グラフィックス表示ボード403と、画像入力
ボード404と、外部記憶装置405と、キーボードイ
ンタフェース406と、バス407とを備えて構成され
ている。
よび記録処理は、CPU401が外部記憶装置405に
蓄積されたソフトウエアをメインメモリ402にロード
し、該ソフトウエアを実行することで実現される。すな
わち、CPU401は該ソフトウエアを実行することに
より、画像入力ボード404を制御して、画像データを
画像入力ボード404からメインメモリ402に転送
し、メインメモリ402に蓄積された画像データを符号
化して圧縮画像データを生成し、該圧縮画像データを外
部記憶装置405に転送する。
明する。
用いた記憶装置である。外部記憶装置405は、磁気記
憶媒体等を用いた記憶装置である。キーボードインタフ
ェース406は、キーボード303からの信号を入力す
るインタフェースである。
U401が、バス407を介して出力する表示データ
を、ノンインタレースの表示信号に変換し、該表示信号
をディスプレイ302に出力する。続いて、画像入力ボ
ード404について図面を参照して説明する。
ア構成図である。
ス部501と、NTSCデコーダ502とを備えて構成
されている。インタフェース部501は、CPU401
から、メインメモリに転送するフィールドの指定を受
け、NTSCデコーダ502からデジタルビデオデータ
を入力し、該デジタルビデオデータのうち、CPU40
1によって指定されたフィールドのデジタルビデオデー
タを、メインメモリ402に転送する。
から画像サイズの指定を受け、VTR304からビデオ
信号を入力し、該ビデオ信号をデジタル化して該画像サ
イズのデジタルビデオデータを生成し、該デジタルビデ
オデータをインタフェース部501に出力する。
ットは422フォーマットであり、水平方向に2画素分
のデータが、Y1(輝度)、Y2(輝度)、Cr(色
差)、Cb(色差2)の各8ビットデータで表されてい
る。
て、ビデオ信号の奇数フィールドを符号化し、JPEG
規格に準拠した、水平640画素、垂直480ライン、
411フォーマットの圧縮画像データを生成する場合に
ついて、具体的に説明する。
先立ち、インタフェース部501には、転送するフィー
ルドを奇数フィールドに、NTSCデコーダ502に
は、画像サイズを水平640画素、垂直240ライン
に、それぞれ設定する。以上の設定により、画像入力ボ
ード404は、VTR304から入力したビデオ信号の
奇数フィールドを、水平640画素、垂直240ライ
ン、422フォーマットの画像データに変換し、該画像
データをメインメモリ402に転送する。
について、図面および数式を参照して説明する。
ーチャートである。まず、ステップ601のブロック化
処理について、図面を参照して説明する。図7は、ブロ
ック化処理のデータの流れを示すデータフローである。
図8は、輝度ブロックの一例である。
ンメモリ402に転送された画像データのうち、輝度デ
ータ701を水平8画素、垂直4ラインからなる輝度ブ
ロック702に分割する。メインメモリ402の画像デ
ータのうち、色差データ703は、画像サイズを垂直方
向に1/2に縮小して縮小色差データ704に変換し、
さらに、該縮小色差データ704を水平8画素、垂直4
ラインからなる色差ブロック705に分割する(ステッ
プ601)。
CT処理について、図面を参照して説明する。数式1
は、ステップ602のDCT処理の変換式の一例であ
る。
る。
2および該色差ブロック705に対して、数式1を用い
て8×4のDCTを施し、DCT係数ブロックを生成す
る(ステップ602)。
て、数式1を変形して計算量を減らした数式を用いても
よい。再び、図6に戻る。続いて、該DCT係数ブロッ
クに量子化処理を施し、量子化係数ブロックを生成する
(ステップ603)。
る。続いて、該量子化係数ブロックに4行8列の0行列
を付加し、変換済み量子化係数ブロックを生成する(ス
テップ604)。
一例である。本図の網掛け部分が、ステップ604で付
加された4行8列の0行列である。最後に、該変換済み
量子化係数ブロックを可変長符号に変換し、該可変長符
号に画像サイズ、色フォーマット等を示す制御情報コー
ドを付加して、JPEG規格に準拠した圧縮画像データ
を生成する(ステップ605)。
605までの処理を、1フィールド分行なうことによ
り、ビデオ信号の奇数フィールドから、JPEG規格に
準拠した、水平640画素、垂直480ラインの、圧縮
画像データが生成される。
下にまとめる。まず第一に、本実施例の画像符号化処理
の計算量は、従来方式に比して少ない。本実施例による
圧縮画像データは、両フィールドの画像を合成した画像
から生成したデータではないため、走査方法変換に伴う
画質劣化がなく、高画質である。さらに、該圧縮画像デ
ータは、JPEG規格に準拠したデータであるので、J
PEG規格に準拠した全ての復号装置で復号可能であ
り、データの互換性がある。従って、以上説明した第一
の実施例によれば、ビデオ信号から、JPEG規格に準
拠した高画質の圧縮画像データを、少ない計算量で生成
できる。
して説明する。
画像符号化装置で、VTR304から入力したビデオ信
号をMPEG1形式に符号化して圧縮画像データを生成
し、該圧縮画像データを外部記憶装置405に記録する
場合の例である。第二の実施例の画像符号化装置のハー
ドウエア構成は、第一の実施例の画像符号化装置のハー
ドウエア構成と同一である。
オ信号の奇数フィールドを符号化し、水平352画素、
垂直240ラインのMPEG1(MPEG phase 1)規格に準
拠した圧縮画像データを生成する場合について、具体的
に説明する。
理、画像符号化処理および記録処理は、CPU401が
外部記憶装置405に蓄積されたソフトウエアをメイン
メモリ402にロードし、該ソフトウエアを実行するこ
とで実現される。本実施例においてCPU401は、画
像符号化処理に先立ち、インタフェース部501には、
転送するフィールドを奇数フィールドに、NTSCデコ
ーダ502には、画像サイズを水平352画素、垂直1
20ラインに、それぞれ設定する。
は、VTR304から入力したビデオ信号の奇数フィー
ルドを、水平352画素、垂直120ライン、YUV4
22フォーマットの画像データに変換し、該画像データ
をメインメモリ402に転送する。
が行なう画像符号化処理を、図面を参照して説明する。
の流れを示すフローチャートである。まず、ステップ1
201のブロック化処理について、図面を参照して説明
する。
を示すデータフローである。まず、画像入力ボード40
4によってメインメモリ402に転送された画像データ
のうち、輝度データ1301を水平8画素、垂直4ライ
ンからなる輝度ブロック1302に分割する。メインメ
モリ402の画像データのうち、色差データ1303
は、画像サイズを垂直方向に1/2に縮小して縮小色差
データ1304に変換し、さらに、該縮小色差データ1
304を水平8画素、垂直4ラインからなる色差ブロッ
ク1305に分割する(ステップ1201)。図12に
戻る。
ク1305と、メインメモリ402に記録されている参
照画像データとを用いて、フレーム間予測を行ない、水
平8画素×垂直4ラインからなる差分ブロックと、動き
ベクトルとを生成する(ステップ1202)。
数ブロックを生成する(ステップ1203)。なお、ス
テップ1203では、数式1の代わりに、数式1を変形
して計算量を減らした数式を用いてもよい。続いて、該
DCT係数ブロックに量子化処理を施し、量子化係数ブ
ロックを生成する(ステップ1204)。
5の復号処理を説明する。
流れを示すフローチャートである。
nverse DCT、逆離散コサイン変換)処理の変換式の一例
である。まず、該量子化係数ブロックに逆量子化を施
し、逆量子化係数ブロックを生成する(ステップ140
1)。続いて、数式2を用いて該逆量子化係数ブロック
にIDCTを施し、参照画像ブロックを生成する(ステ
ップ1402)。
した数式を用いてもよい。
リ402に記録されている参照画像とを用いて、該参照
画像を更新する(ステップ1403)。
204で生成した量子化係数ブロックに4行8列の0行
列を付加し、変換済み量子化係数ブロックを生成する
(ステップ1206)。
可変長符号に変換する。さらにステップ1202で求め
た動きベクトルの垂直成分を2倍した上で符号化し、動
きベクトル符号を生成する。該可変長符号と該動きベク
トル符号に、画像サイズ、フレームレート等を示す制御
情報コードを付加して、MPEG1規格に準拠した圧縮
画像データを生成する(ステップ1207)。
プ1207までの処理を繰り返すことにより、ビデオ信
号から、水平352画素、垂直240ラインの、MPE
G1規格に準拠した圧縮画像データが生成される。
下にまとめる。
計算量は、従来方式に比して少ない。
は、両フィールドの画像を合成した画像から生成したデ
ータではないため、走査方法変換に伴う画質劣化がな
く、高画質である。
規格に準拠したデータであるので、MPEG1規格に準
拠した全ての復号装置で復号可能であり、データの互換
性がある。
ば、ビデオ信号から、MPEG1規格に準拠した高画質
の圧縮画像データを、少ない計算量で生成できる。
照して説明する。
の斜視図である。
501とビデオカメラ1502とを備える。該ビデオ会
議装置は、ネットワーク1503に接続され、相手端末
1504との間でビデオ会議を行なう。ビデオカメラ1
502は、被写体を撮影してビデオ信号を生成し、PC
1501に出力する。ネットワーク1503は、LAN
(Local Area Network)やISDN(Intgrated Services
Digital Network)等の通信回線である。
オカメラ1502が出力するビデオ信号を、H.261
規格で符号化して圧縮画像データを生成し、該圧縮画像
データをネットワーク1503を介して相手端末150
4に転送する。
説明する。
01のハードウエア構成図である。
ンメモリ1602と、グラフィックス表示部1603
と、画像入力カード1604と、外部記憶装置1605
と、キーボード1606と、キーボードインタフェース
1607と、ネットワークインタフェース1608と、
表示パネル1609と、バス1610とを備えて構成さ
れている。
05、キーボード1606、キーボードインタフェース
1607は、それぞれ第一および第二の実施例のメイン
メモリ402、外部記憶装置405、キーボード30
3、キーボードインタフェース406と、同一の機能を
有する。グラフィックス表示部1603は、第一および
第二の実施例のグラフィックス表示ボード403と、同
一の機能を有する。画像入力カード1604は、第一お
よび第二の実施例の画像入力ボード404と、同じ機能
およびハードウエア構成を有する。ネットワークインタ
フェース1608は、PC1501とネットワーク15
03との間のデータ転送の制御を行なう。表示パネル1
609は、液晶パネル等を用いた表示装置であり、グラ
フィックス表示部1603から入力した表示信号を表示
する。
通信処理は、CPU1601が外部記憶装置1605に
蓄積されたソフトウエアをメインメモリ1602にロー
ドし、該ソフトウエアを実行することで実現される。
アを実行することにより、画像入力ボード1604を制
御して、画像データを画像入力カード1604からメイ
ンメモリ1602に転送し、メインメモリ1602に蓄
積された画像データを符号化して圧縮画像データを生成
し、該圧縮画像データをネットワークインタフェース1
607を制御してネットワーク1503に送信する。
実行することにより、ネットワークインタフェース16
07を介して、ネットワーク1503から相手端末15
04が送信する圧縮相手画像データを受信し、該圧縮相
手画像データをデコードして相手画像データを生成し、
さらにグラフィックス表示部1603を制御して、該相
手画像データを表示パネル1609に表示する。
符号化処理に先立ち、画像入力カード1604に、転送
するフィールドを偶数フィールドに、画像サイズを水平
176画素、垂直72ラインに、それぞれ設定する。
4は、ビデオカメラ1502から入力したビデオ信号の
奇数フィールドを、水平176画素、垂直72ライン、
422フォーマットの画像データに変換し、該画像デー
タをメインメモリ1602に転送する。
処理について図面を参照して説明する。
の流れを示すフローチャートである。
について図面を参照して説明する。
を示すデータフローである。
インメモリ1602に転送された画像データのうち、輝
度データ1801を水平8画素、垂直4ラインからなる
輝度ブロック1802に分割する。
ち、色差データ1803は、画像サイズを垂直方向に1
/2に縮小して縮小色差データ1804に変換し、さら
に該縮小色差データ1804を水平8画素、垂直4ライ
ンからなる色差ブロック1805に分割する(ステップ
1701)。図17に戻る。
差ブロック1705と、メインメモリ1602に記録さ
れている参照画像データとを用いて、フレーム間予測を
行ない、水平8画素×垂直4ラインからなる差分ブロッ
クと、動きベクトルとを生成する(ステップ170
2)。
を用いて8×4のDCTを行い、DCT係数ブロックを
生成する(ステップ1703)。
わりに、数式1を変形して計算量を減らした数式を用い
てもよい。続いて、該DCT係数ブロックに量子化処理
を施し、量子化係数ブロックを生成する(ステップ17
04)。
5の復号処理を説明する。
流れを示すフローチャートである。まず、該量子化係数
ブロックに逆量子化を施し、逆量子化係数ブロックを生
成する(ステップ1901)。続いて、数式2を用いて
該逆量子化係数ブロックにIDCTを施し、参照画像ブ
ロックを生成する(ステップ1902)。
えて、数式2を変形して計算量を減らした数式を用いて
もよい。
リ1602に記録されている参照画像とを用いて、該参
照画像を更新する(ステップ1903)。
704で生成した量子化係数ブロックに4行8列の0行
列を付加し、変換済み量子化係数ブロックを生成する
(ステップ1706)。さらに、該変換済み量子化係数
ブロックを可変長符号に変換する。
クトルの垂直成分を2倍した上で符号化し、動きベクト
ル符号を生成する。
像サイズ等を示す制御情報コードを付加して、H.26
1規格に準拠した圧縮画像データを生成する(ステップ
1707)。
プ1707までの処理を繰り返すことにより、ビデオ信
号から、水平176画素、垂直144ラインの、H.2
61規格に準拠した圧縮画像データが生成される。
等を付加して通信データを生成し、該通信データを、ネ
ットワークインタフェース1608およびネットワーク
1503を介して、相手端末1504に送信する(ステ
ップ1708)。
プ1708までの処理により、ビデオカメラ1502で
撮影した画像を、水平176画素、垂直144ライン
の、H.261規格に準拠した圧縮画像データに変換
し、該圧縮画像データを相手端末1504に送信するこ
とができる。
した通信データを受信し、該通信データを復号し、復号
結果を相手端末1504に接続された表示装置に表示す
る。
に対してネットワーク1503を介して圧縮相手画像デ
ータを送信する。PC1501は、該圧縮相手画像デー
タを受信し、さらに該圧縮相手画像データを復号して表
示する。
501と相手端末1504との間で、画像データを送受
信し、ビデオ会議を実現できる。
下にまとめる。まず第一に、本実施例の画像符号化処理
の計算量は、従来方式に比して少ない。さらに、本実施
例による圧縮画像データは、両フィールドの画像を合成
した画像から生成したデータではないため、走査方法変
換に伴う画質劣化がなく、高画質である。
タは、H.261規格に準拠したデータであるので、
H.261規格に準拠したビデオ会議装置であれば、機
種を問わず復号可能である。
ば、ビデオカメラで撮影した画像を、H.261規格に
準拠した高品質の圧縮画像データに変換し、相手端末に
送信できる。
圧縮画像データを復号して得られる直交変換係数ブロッ
クは、水平方向の低空間周波数側から8番目までで、か
つ、垂直方向の低空間周波数側から4番目までの係数だ
けが0以外の値を持ち、該係数以外の全ての係数が0で
あるという特徴を持つ。
で、水平8画素、垂直4ラインからなるブロックを生成
し、該処理以降のフレーム間予測処理、DCT処理、量
子化処理、復号処理を水平8画素、垂直4ラインを単位
として行なうことで、上記の特徴を有する直交変換係数
ブロックを生成した。
を、本実施例の方法よりも計算量は増加するものの、別
の手法によって生成することも可能である。例えば、量
子化処理によって、垂直方向の低空間周波数側から5番
目以降の係数を強制的に0にすれば、上記の特徴を持つ
直交変換係数ブロックを生成できる。
画質劣化がなく、国際標準規格に準拠した高画質な圧縮
画像データを生成可能である。このことは、第一および
第二の実施例についても同様に言うことができる。
れによっても、入力画像を、周波数空間で拡大処理する
ことによって計算量を削減し、ソフトウエア処理による
安価な画像符号化装置を実現できる。
奇数あるいは偶数のいずれかのフィールドを符号化し
て、圧縮画像データを生成することにより、ノンインタ
レースの表示系で表示させた際にも画質劣化が少ない、
高画質な画像符号化装置を実現できる。
標準規格に準拠しており、データの互換性がある。
る。
ある。
ートである。
ローである。
フローチャートである。
フローである。
トである。
である。
ウエア構成図である。
フローチャートである。
フローである。
トである。
…グラフィックス表示ボード、 404…動画入
力ボード、405…外部記憶装置、406…キーボード
インタフェース、407…バス、501…インターフェ
ース部、502…NTSCデコーダ、1601…CP
U、 1602…メインメモリ、1603…グラフィ
ックス表示部、 1604…画像入力カード、
1605…外部記憶装置、 1606
…キーボード、1607…キーボードインタフェース、
1608…ネットワークインタフェース、 1609
…表示パネル、1610…バス。
Claims (8)
- 【請求項1】奇数フィールドと偶数フィールドとからな
るインタレース形式の画像を入力とする手段と、 前記入力画像のいずれか片フィールドを 、水平M画素、
垂直Nラインで構成されるブロックに分割するブロック
化手段と、 該ブロック化手段で生成された前記ブロックに直交変換
を施し、直交変換係数ブロックを生成する直交変換手段
と、 該直交変換手段で生成された前記直交変換係数ブロック
を量子化し、量子化係数ブロックを生成する量子化手段
と、 該量子化手段で生成された該量子化係数ブロックを、水
平M画素、垂直2Nラインの変換済み量子化係数ブロッ
クに変換するサイズ変換手段と、 該サイズ変換手段で生成された前記変換済み量子化係数
ブロックを、可変長符号に変換する可変長符号化手段
と、前記可変長符号に制御情報コードを付加して、前記片フ
ィールドからなる画像のライン数が2倍に拡大された、
ノンインタレース形式の圧縮画像データを生成する手段
と、 を備えることを特徴とする画像符号化装置。 - 【請求項2】奇数フィールドと偶数フィールドとからな
るインタレース形式の画像を入力とする手段と、 前記入力画像のいずれか片フィールドを 、水平M画素、
垂直Nラインで構成されるブロックに分割するブロック
化手段と、 該ブロック化手段によって生成された前記ブロックと、
復号手段によって生成された参照画像とを用いてフレー
ム間予測処理を行ない、差分ブロックを生成するフレー
ム間予測手段と、 該フレーム間予測手段で生成された前記差分ブロックに
直交変換を施し、直交変換係数ブロックを生成する直交
変換手段と、 該直交変換手段で生成された前記直交変換係数ブロック
を量子化し、量子化係数ブロックを生成する量子化手段
と、 該量子化係数ブロックを復号して前記参照画像を生成す
る前記復号手段と、 該量子化手段で生成された該量子化係数ブロックを、水
平M画素、垂直2Nラインの変換済み量子化係数ブロッ
クに変換するサイズ変換手段と、 該サイズ変換手段で生成された前記変換済み量子化係数
ブロックを、可変長符号に変換する可変長符号化手段
と、前記可変長符号に制御情報コードを付加して、前記片フ
ィールドからなる画像のライン数が2倍に拡大された、
ノンインタレース形式の圧縮画像データを生成する手段
と、 を備えることを特徴とする画像符号化装置。 - 【請求項3】請求項1または請求項2に記載の画像符号
化装置において、前記M=8かつ前記N=4であって、 前記ブロック化手段は、水平8画素、垂直4ラインで構
成される前記ブロックを生成し、 前記サイズ変換手段は、水平8画素、垂直8ラインの画
像に対応する前記量子化係数ブロック を生成することを
特徴とする画像符号化装置。 - 【請求項4】請求項1または請求項2に記載の画像符号
化装置において、前記 サイズ変換手段は、前記量子化係数ブロックに、値
が0である係数からなる行列を付加して、前記変換済み
量子化係数ブロックを生成することを特徴とする画像符
号化装置。 - 【請求項5】奇数フィールドと偶数フィールドとからな
るインタレース形式の画像を入力とする手段と、 前記入力画像のいずれか片フィールドを、水平M画素、
垂直Nラインで構成されるブロックに分割するブロック
化手段と、 該ブロック化手段で生成された前記ブロックに直交変換
を施し、直交変換係数ブロックを生成する直交変換手段
と、 該直交変換手段で生成された前記直交変換係数ブロック
を量子化し、量子化係数ブロックを生成する量子化手段
と、 該量子化手段で生成された該量子化係数ブロックを、水
平M画素、垂直2Nラインの変換済み量子化係数ブロッ
クに変換するサイズ変換手段と、 該サイズ変換手段で生成された前記変換済み量子化係数
ブロックを、可変長符号に変換する可変長符号化手段
と、前記可変長符号に制御情報コードを付加して、前記片フ
ィールドからなる画像のライン数が2倍に拡大された、
ノンインタレース形式の圧縮画像データを生成する手段
と、 前記圧縮画像データに誤り訂正符号を付加して通信デー
タを生成する手段と、 前記通信データを 通信網に出力する通信制御手段を備え
ることを特徴とするビデオ会議装置。 - 【請求項6】奇数フィールドと偶数フィールドとからな
るインタレース形式の画像を入力とする手段と、 前記入力画像のいずれか片フィールドを、水平M画素、
垂直Nラインで構成されるブロックに分割するブロック
化手段と、 該ブロック化手段によって生成された前記ブロックと、
復号手段によって生成された参照画像とを用いてフレー
ム間予測処理を行ない、差分ブロックを生成するフレー
ム間予測手段と、 該フレーム間予測手段で生成された前記差分ブロックに
直交変換を施し、直交変換係数ブロックを生成する直交
変換手段と、 該直交変換手段で生成された前記直交変換係数ブロック
を量子化し、量子化係数ブロックを生成する量子化手段
と、 該量子化係数ブロックを復号して前記参照画像を生成す
る前記復号手段と、 該量子化手段で生成された該量子化係数ブロックを、水
平M画素、垂直2Nラインの変換済み量子化係数ブロッ
クに変換するサイズ変換手段と、 該サイズ変換手段で生成された前記変換済み量子化係数
ブロックを、可変長符号に変換する可変長符号化手段
と、前記可変長符号に制御情報コードを付加して、前記片フ
ィールドからなる画像のライン数が2倍に拡大された、
ノンインタレース形式の圧縮画像データを生成する手段
と、 前記圧縮画像データに誤り訂正符号を付加して通信デー
タを生成する手段と、 前記通信データ を通信網に出力する通信制御手段を備え
ることを特徴とするビデオ会議装置。 - 【請求項7】請求項5または請求項6に記載のビデオ会
議装置において、前記M=8かつ前記N=4であって、 前記ブロック化手段は、水平8画素、垂直4ラインで構
成される前記ブロックを生成し、 前記サイズ変換手段は、水平8画素、垂直8ラインの画
像に対応する量子化係数ブロックを 生成することを特徴
とするビデオ会議装置。 - 【請求項8】請求項5または請求項6に記載のビデオ会
議装置において、前記 サイズ変換手段は、前記量子化係数ブロックに、値
が0である係数からなる行列を付加して、前記変換済み
量子化係数ブロックを生成することを特徴とするビデオ
会議装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP11774297A JP3478051B2 (ja) | 1997-05-08 | 1997-05-08 | 画像符号化装置および画像符号化方法およびビデオ会議装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP11774297A JP3478051B2 (ja) | 1997-05-08 | 1997-05-08 | 画像符号化装置および画像符号化方法およびビデオ会議装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH10308946A JPH10308946A (ja) | 1998-11-17 |
JP3478051B2 true JP3478051B2 (ja) | 2003-12-10 |
Family
ID=14719189
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP11774297A Expired - Fee Related JP3478051B2 (ja) | 1997-05-08 | 1997-05-08 | 画像符号化装置および画像符号化方法およびビデオ会議装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3478051B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001112000A (ja) | 1999-10-07 | 2001-04-20 | Matsushita Electric Ind Co Ltd | 映像信号符号化装置 |
-
1997
- 1997-05-08 JP JP11774297A patent/JP3478051B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH10308946A (ja) | 1998-11-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7016419B2 (en) | Systems for MPEG subsample decoding | |
US7221709B2 (en) | Information processing apparatus and method, and program storage medium | |
JP3338639B2 (ja) | ディジタル・ビデオ・デコーダおよびディジタル・ビデオ信号をデコードする方法 | |
US5930526A (en) | System for progressive transmission of compressed video including video data of first type of video frame played independently of video data of second type of video frame | |
US6301304B1 (en) | Architecture and method for inverse quantization of discrete cosine transform coefficients in MPEG decoders | |
US5905815A (en) | Decoding encoded image signals encoded by further transforming transformed DC signals | |
US6590938B1 (en) | DCT domain conversion of a higher definition signal to lower definition signal | |
EP0827344A2 (en) | Video decoder | |
JPH09322165A (ja) | 画像復号化装置とその方法、および、画像再生装置 | |
US5764802A (en) | Encoding image signals using a blur image | |
KR100312421B1 (ko) | 영상시스템에서의압축동영상변환장치및그방법 | |
JP3164971B2 (ja) | 画像再生装置 | |
JP3478051B2 (ja) | 画像符号化装置および画像符号化方法およびビデオ会議装置 | |
US6266374B1 (en) | Low level digital video decoder for HDTV having backward compatibility | |
JPH07160865A (ja) | 静止画再生装置 | |
JPH11355775A (ja) | 片フィールドデータによるフレーム表示方法および装置 | |
JP3481112B2 (ja) | 動画像復号化装置 | |
JP3384739B2 (ja) | 動画像復号化方法 | |
JP3481111B2 (ja) | 動画像復号化装置 | |
JP2003087797A (ja) | 画像情報変換装置及び方法、画像情報変換プログラム、並びに記録媒体 | |
JP3478414B2 (ja) | 画像情報圧縮装置 | |
JP2956726B2 (ja) | 動画像の高能率符号化方法及び装置 | |
Furht | Image presentation and compression | |
JP2004214982A (ja) | 画像処理方法 | |
JPH0937265A (ja) | 画像復号化装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081003 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091003 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091003 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101003 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111003 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121003 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131003 Year of fee payment: 10 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |