JP3984981B2 - 画像符号化方法、その装置及びそのプログラム並びに画像復号化方法、その装置及びそのプログラム - Google Patents

Description

本発明は、画像データを符号化するための画像符号化方法、画像符号化装置及び画像符号化プログラム、符号化画像データを基に画像データを復号するための画像復号化方法、画像復号化装置及び画像復号化プログラム並びに画像データを変換するための画像変換方法、画像変換装置及び画像変換プログラムに関する。

動画像を符号化するための符号化方式として、ＭＰＥＧ(Moving Picture Experts Group)方式がディファクトスタンダードとなっている。ＭＰＥＧ方式においては、プロフィルとして、ＳＩＭＰＬＥ、ＭＡＩＮ、ＳＮＲ、ＳＰＡＴＩＡＬ及びＨＩＧＨが定義され、レベルとしてＬＯＷ、ＭＡＩＮ、ＨＩＧＨ１４４０及びＨＩＧＨが定義されている。メインプロフィルとメインレベルを組み合わせたＭＰ＠ＭＬ(Main profile at main level)（以下、「ＳＤ」という。）は、現行テレビジョン方式に対応したものである。一方、メインプロフィルとハイレベルを組み合わせたＭＰ＠ＨＬ(Main Profile at High level)（以下、「ＨＤ」という。）等はＨＤＴＶ方式に対応したものである。

既に、デジタルＢＳ放送、デジタルＣＳ放送、地上波デジタル放送が始まっており、これらの放送では、ＳＤデータのみならずＨＤデータも家庭で受信できるようになっている。従って、ＨＤデータに対応した大画面モニタも次第に普及しようとしている。

しかし、ＨＤデータを記録するためには大容量の記録媒体が必要である。一方、現在市場に登場しているハーディスクドライブは、ＨＤデータを長時間記録する程度の記憶容量を備えていない。また、現在普及しているＤＶＤ(Digital Versatile Disc)も、ＨＤデータを長時間記録する程度の記憶容量を備えていない。

そこで、ＨＤデータで放送されたテレビ番組を長時間記録するために、受信したＨＤデータをＳＤデータに変換する必要が生じている。

ＨＤデータをＳＤデータに変換するためには、基本的には、ＨＤデータを復号化し、何らかの手段により画素数を削減し、その後、ＳＤデータに符号化する必要がある。

そこで、復号化の過程で得られるＤＣＴ係数をダウンサンプリングして、ダウンサンプリングされたＤＣＴ係数を符号化装置に渡す変換装置が開示されている（例えば、特許文献１乃至５）。

また、復号化により得た画像データを水平方向及び垂直方向にダウンサンプリングして、ダウンサンプリング後の画像データを符号化装置に渡す変換装置が開示されている（例えば、特許文献６）
特開平６−２２２９１号公報 特開平１０−２６２２５２号公報 特開２００１−２８５８６３号公報 特開２００１−２８５８７５号公報 特開２００２−３４０４１号公報 特開２０００−７８５６８号公報

しかし、特許文献１乃至５に記載の発明によれば、ＤＣＴ係数を入力することができる特殊な符号化装置が必要となり、汎用的な符号化装置を利用することができない。

また、特許文献６に記載の発明では、次に述べるような問題点があった。

すなわち、ＨＤデータの復号化装置及びＳＤデータの符号化装置の内部では、成分（輝度成分（以下、「Ｙ成分」という。）、第１色差成分（以下、「Ｕ成分」という。）、第２色差成分（以下、「Ｖ成分」という。））毎の処理をまとめて行うためにＩＹＵＶと呼ばれる形式の信号が用いられている。他方、ＨＤデータの復号化装置とＳＤデータの符号化装置とのインターフェースには、表示装置やキャプチャ装置との互換性も考慮して、ＹＵＹ２と呼ばれる形式の信号が用いられている。従って、ＨＤデータの復号化装置は、ＩＹＵＶ形式からＹＵＹ２形式への変換を行わなければならない。また、ＳＤデータの符号化装置は、ＹＵＹ２形式からＩＹＵＹ形式への逆変換を行わなければならない。

更に、ＨＤデータの復号化装置において、ＩＤＣＴ(Inverse Discrete Cosine Transform)部は、ワード形式のデータを出力するため、ＨＤデータの復号化装置は、ワード形式からＩＹＵＶ形式への変換も行わなければならない。

更に、ＳＤデータの符号化装置において、ＤＣＴ(Discrete Cosine Transform)部は、ワード形式のデータを入力し、ＩＤＣＴ部は、ワード形式のデータを出力するため、ＳＤデータの符号化装置は、ＤＣＴ部の前段において、ＩＹＵＶ形式からワード形式への変換を行い、ＩＤＣＴ部の後段において、ワード形式からＩＹＵＶ形式への変換を行わなければならない。

ここで、各形式のデータについて説明する。

まず、図１を参照してＩＹＵＶ形式のデータについて説明すると、Ｙ成分のサンプリング間隔とＵ成分のサンプリング間隔とＶ成分のサンプリング間隔の比率は、水平方向に１：２：２であり、垂直方向に１：２：２である。従って、１ライン当たりのＹ成分のサンプル数をＬとすると、２ライン分のＹ成分のデータＹ０〜Ｙ（２Ｌ−１）には、１ライン分のＵ成分のデータＵ０〜Ｕ（Ｌ／２−１）と１ライン分のＶ成分のデータＶ０〜Ｖ（Ｌ／２−１）が対応する。そして、各成分毎に処理を行うために、１フレーム分のＹ成分のデータと１フレーム分のＵ成分のデータと１フレーム分のＶ成分のデータは、混在しない。

次に、図２を参照してＹＵＹ２形式のデータについて説明すると、Ｙ成分のサンプリング間隔とＵ成分のサンプリング間隔とＶ成分のサンプリング間隔の比率は、水平方向に１：２：２であり、垂直方向に１：１：１である。そして、データの並び替え無しで表示を行うために、Ｙ成分、Ｕ成分及びＶ成分は図２に示すように混在して並んでいる。

次に、図３を参照して、ワード形式のデータについて説明すると、Ｙ成分とＵ成分とＶ成分との間のサンプリング間隔の比率とデータ数の比率は、ＩＹＵＶ形式と同様であるが、２バイト当たり１バイトが００Ｈの値を有するバイトである。

次に、ワード形式からＩＹＵＶ形式への変換、ＩＹＵＶ形式からワード形式への変換、ＩＹＵＶ形式からＹＵＹ２形式への変換、ＹＵＹ２形式からＩＹＵＶ形式への逆変換を、インテル社のＭＭＸ（登録商標）(Multi Media eXtension)の命令セットを有するｘ８６系プロセッサで行う場合について説明する。

まず、図４を参照して、ワード形式からＩＹＵＶ形式への変換について説明すると、１つのpackuswb命令により８つのＹ成分サンプルが得られ、１つのpackuswb命令により８つのＵ成分サンプルが得られ、１つのpackuswb命令により８つのＶ成分サンプルが得られる。

なお、図４においては、１つの四角は１バイトを表し、１つのデータが１６ビットワードで表される場合には、下位バイトは左に上位バイトは右に記載されている。他の同様な図においても同様である。

次に、図５を参照して、ＩＹＵＶ形式からワード形式への変換について説明すると、３つのpunpcklbw命令により４つのＹ成分サンプル、４つのＵ成分サンプル及び４つのＶ成分サンプルが得られる。

次に、図６を参照して、ＩＹＵＶ形式からＹＵＹ２形式への変換について説明すると、３つのpunpcklbw命令により８つのＹ成分サンプル、４つのＵ成分サンプル及び４つのＶ成分サンプルが得られる。

次に、図７及び図８を参照して、ＹＵＹ２形式からＩＹＵＶ形式への逆変換について説明すると、２つのpand命令により８つのＹ成分サンプルが得られ、６つのpsrlw命令と２つのpand命令により８つのＵ成分サンプル及び８つのＶ成分サンプルが得られる。

このように、ワード形式からＩＹＵＶ形式への変換、ＩＹＵＶ形式からＹＵＹ２形式への変換、ＹＵＹ２形式からＩＹＵＶ形式への逆変換は、多数の命令を必要としていた。従って、ＨＤデータからＳＤデータへの変換のための総処理時間のかなりの部分がこれらの変換のために費やされていた。そして、これはリアルタイムでのＨＤデータからＳＤデータへの変換を実現することの障害となっていた。リアルタイムでＨＤデータからＳＤデータへの変換を行えないと、ＨＤデータの放送を受信しながらの同時記録が不可能となる。

そこで、本発明は、ＨＤデータからＳＤデータへの変換を高速化することを可能とする画像符号化方法、画像符号化装置及び画像符号化プログラム、画像復号化方法、画像復号化装置及び画像復号化プログラム並びに画像変換方法、画像変換装置及び画像変換プログラムを提供することを目的とする。

本発明の第１の観点によれば、符号化画像データを復号化することによりワード形式で表される輝度データ、ワード形式で表される第１色差データ及びワード形式で表される第２色差データを得る復号化ステップと、前記ワード形式で表される輝度データをバイト形式で表される輝度データに変換する輝度データ変換ステップと、前記ワード形式で表される第１色差データと前記ワード形式で表される第２色差データとをバイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって１画素毎に交互に並んだものに変換する色差データ変換ステップと、を備え、ワード形式で表されるとは、有効な下位８ビットに値がゼロのダミーの上位８ビットを追加することにより表されることであることを特徴とする画像復号化方法が提供される。

本発明の第２の観点によれば、符号化画像データを復号化することによりワード形式で表される輝度データ、ワード形式で表される第１色差データ及びワード形式で表される第２色差データを得る復号化手段と、前記ワード形式で表される輝度データをバイト形式で表される輝度データに変換する輝度データ変換手段と、前記ワード形式で表される第１色差データと前記ワード形式で表される第２色差データとをバイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって１画素毎に交互に並んだものに変換する色差データ変換手段と、を備え、ワード形式で表されるとは、有効な下位８ビットに値がゼロのダミーの上位８ビットを追加することにより表されることであることを特徴とする画像復号化装置が提供される。

本発明によれば、変換に要する命令数を削減することができるので、画像復号化方法、画像符号化方法、画像変換方法の実行時間を削減することができる。

以下、図面を参照して本発明を実施するための最良の形態について詳細に説明する。

本実施形態による画像変換装置は、画像復号化装置と画像符号化装置を備える。

図９は、本発明の実施形態による画像復号化装置を示す。

図９を参照すると、本発明の実施形態による画像復号化装置は、可変長復号化部１０１、逆量子化部１０２、ＩＤＣＴ部１０３、パック化部１０４、加算部１０５、後フレームメモリ１０６、前フレームメモリ１０７、動き補償部１０８、スイッチ１０９、画像縮小部１１０及び並び替え部１１１を備える。

なお、この画像復号化装置は、ハードウェアによって実現することもできるが、コンピュータをこの画像復号化装置として機能させるためのプログラムをコンピュータが読み込んで実行することによっても実現することができる。

以下の説明は、特にＣＰＵ内部のレジスタを使った処理に関してはコンピュータにより画像復号化装置を実現している場合について行うが、ＣＰＵ内部は、プログラマブルなハードウェアにより実現されているのであるので、本発明に関連する命令を実現する時のＣＰＵと同様な構成をプログラマブル又は固定的に有するハードウェアにも適用できる。

可変長復号化部１０１は、ＨＤデータのうちＨＤ ＭＰＥＧビデオ符号を可変長復号化し、量子化されたＤＣＴ係数及び動きベクトル等を出力する。

逆量子化部１０２は、可変長復号化部１０１から量子化されたＤＣＴ係数を入力し、これを逆量子化し、ＤＣＴ係数を出力する。このＤＣＴ係数はワード形式データで表される。ワード形式データについては、既に、図３を参照して説明した。

ＩＤＣＴ部１０３は、逆量子化部１０２からＤＣＴ係数を入力し、これを逆離散コサイン変換し、空間領域データを出力する。この空間領域データもワード形式で表される。

パック化部１０４は、ワード形式で表される空間領域データを本発明によるＹ／ＵＶパック形式の空間領域データに変換する。

ここで、図１０を参照してＹ／ＵＶパック形式について説明すると、Ｙ成分のサンプリング間隔とＵ成分のサンプリング間隔とＶ成分のサンプリング間隔の比率は、ＩＹＵＶ形式と同様に、水平方向に１：２：２であり、垂直方向に１：２：２である。従って、１ライン当たりのＹ成分のサンプル数をＬとすると、２ライン分のＹ成分のデータＹ０〜Ｙ（２Ｌ−１）には、１ライン分のＵ成分のデータＵ０〜Ｕ（Ｌ／２−１）と１ライン分のＶ成分のデータＶ０〜Ｖ（Ｌ／２−１）が対応する。しかし、ＩＹＵＶ形式では、１フレーム分のＵ成分のデータと１フレーム分のＶ成分のデータは、混在しないのに対し、Ｙ／ＵＶパック形式では、図１０に示すように、Ｕ成分のバイトとＶ成分のバイトが交互に並ぶ。このように、Ｕ成分とＶ成分が混在していても、マクロブロック単位で画像処理を行うので問題はない。

図１１を参照して、パック化部１０４が行うワード形式からＹ／ＵＶパック形式への変換について説明すると、１つのpackuswb命令と１つのpsllw命令と１つのpor命令により、８つのＹ成分サンプル、４つのＵ成分サンプル及び４つのＶ成分サンプルが得られる。

packuswb命令の名称は「Pack words into bytes with unsigned saturation」であり、packuswb命令を実現するためのハードウェアは図１２に示すとおりである。図１２において、Ｄ０〜Ｄ７は第１レジスタを示し、Ｓ０〜Ｓ７は第２レジスタを示し、ＦＦ０〜ＦＦ７はＤタイプフリップフロップを示す。クロックがＤタイプフリップフロップに入力されると、Ｄ０、Ｄ２、Ｄ４、Ｄ６、Ｓ０、Ｓ２、Ｓ４及びＳ６の内容がそれぞれＤ０〜Ｄ７に格納される。

psllw命令の名称は「Shift packed words left logical」であり、psllw命令を実現するためのハードウェアは図１３に示すとおりである。図１３において、Ｘ０〜Ｘ３は第１レジスタを示し、ＢＳ０〜ＢＳ３はバレルシフタを示し，ＦＦ０〜ＦＦ３はＤタイプフリップフロップを示す。シフトビット数がバレルシフタに入力されクロックがＤタイプフリップフロップに入力されると、Ｘ０、Ｘ１、Ｘ２及びＸ３の内容がそれぞれそのビット数だけ左にシフトされ、Ｘ０、Ｘ１、Ｘ２及びＸ３に格納される。シフトにより空いた部分にはゼロが格納される。

por命令の名称は「Packed or」であり、por命令を実現するためのハードウェアは図１４に示すとおりである。図１４において、Ｄ０〜Ｄ７は第１レジスタを示し、Ｓ０〜Ｓ７は第２レジスタを示し、ＯＲはＯＲゲートを示し、ＦＦ０〜ＦＦ７はＤタイプフリップフロップを示す。クロックがＤタイプフリップフロップに入力されると、Ｄ０の内容とＳ０の内容の論理和〜Ｄ７の内容とＳ７の内容の論理和がそれぞれＤ０〜Ｄ７に格納される。

加算部１０５は、パック化部１０４から供給される空間領域データにスイッチ１０９から供給される空間領域データに加算する。加算部１０５の出力は、Ｙ／ＵＶパック形式に従う。

後フレームメモリ１０６及び前フレームメモリ１０７は、Ｉピクチャの空間領域データ又はＰピクチャの空間領域データを格納する。

動き補償部１０８は、可変長復号化部１０１から供給される動きベクトルに従って、後フレームメモリ１０６又は前フレームメモリ１０７から読み出される空間領域データをマクロブロック単位で空間移動させる。

スイッチ１０９は、Ｉピクチャを復号する場合にはゼロを選択し、Ｐピクチャ又はＢピクチャを復号する場合には動き補償部１０８から供給される空間領域データを選択する。

画像縮小部１１０は、加算部１０５から供給されるＹ／ＵＶパック形式の空間領域データを例えば１２８０×７２０画素から７２０×４８０画素にダウンサンプリングする。画像縮小部１１０が出力する空間領域データもＹ／ＵＶパック形式に従う。

並び替え部１１１は、Ｙ／ＵＶパック形式の空間領域データをＹＵＹ２形式の空間領域データに変換する。ＹＵＹ２形式は図２を参照して説明したとおりである。

図１５を参照して、並び替え部１１１が行うＹ／ＵＶパック形式からＹＵＹ２形式への変換について説明すると、２つのpunpcklbw命令により、８つのＹ成分サンプル、４つのＵ成分サンプル及び４つのＶ成分サンプルが得られる。

punpcklbw命令の名称は「Unpack low-order bytes」であり、punpcklbw命令を実現するためのハードウェアは図１６に示すとおりである。図１６において、Ｄ０〜Ｄ７は第１レジスタを示し、Ｓ０〜Ｓ７は第２レジスタを示し、ＦＦ０〜ＦＦ７はＤタイプフリップフロップを示す。クロックがＤタイプフリップフロップに入力されると、Ｄ０、Ｄ１、Ｄ２、Ｄ３、Ｓ０、Ｓ１、Ｓ２及びＳ３の内容がそれぞれＤ０〜Ｄ７に格納される。

並び替え部１１１が出力するＹＵＹ２形式の空間領域データは、従来の機器と互換性があるため、従来からのモニタや画像符号化装置に供給することができる。

図１７は、本発明の実施形態による画像符号化装置を示す。

図１７を参照すると、本発明の実施形態による画像符号化装置は、逆並び替え部１４１、選択部１４２、減算器１４３、アンパック部１４４、ＤＣＴ部１４５、量子化部１４６、可変長符号化部１４７、逆量子化部１４８、ＩＤＣＴ部１４９、パック部１５０、加算器１５１、後フレームメモリ１５２、前フレームメモリ１５３、動き検索部１５４、動き補償部１５５及びスイッチ１５６を備える。

なお、この画像符号化装置は、ハードウェアによって実現することもできるが、コンピュータをこの画像符号化装置として機能させるためのプログラムをコンピュータが読み込んで実行することによっても実現することができる。

以下の説明は、特にＣＰＵ内部のレジスタを使った処理に関してはコンピュータにより画像符号化装置を実現している場合について行うが、ＣＰＵ内部は、プログラマブルなハードウェアにより実現されているのであるので、本発明に関連する命令を実現する時のＣＰＵと同様な構成をプログラマブル又は固定的に有するハードウェアにも適用できる。

逆並び替え部１４１は、ＹＵＹ２形式の空間領域データをＹ／ＵＶパック形式の空間領域に逆変換する。

図１８を参照して、逆並び替え部１４１が行うＹＵＹ２形式からＹ／ＵＶパック形式への変換について説明すると、２つのpand命令、４つのpsrlw命令及び３つのpackuswb命令により、８つのＹ成分サンプル、４つのＵ成分サンプル及び４つのＶ成分サンプルが得られる。

pslrw命令の名称は「Shift packed words right logical」であり、pslrw命令を実現するためのハードウェアは図１３に示すとおりである。図１３において、Ｘ０〜Ｘ３は第１レジスタを示し、ＢＳ０〜ＢＳ３はバレルシフタを示し，ＦＦ０〜ＦＦ３はＤタイプフリップフロップを示す。シフトビット数がバレルシフタに入力されクロックがＤタイプフリップフロップに入力されると、Ｘ０、Ｘ１、Ｘ２及びＸ３の内容がそれぞれそのビット数だけ右にシフトされ、Ｘ０、Ｘ１、Ｘ２及びＸ３に格納される。シフトにより空いた部分にはゼロが格納される。

pand命令の名称は「Packed and」であり、pand命令を実現するためのハードウェアは図１９に示すとおりである。図１９において、Ｄ０〜Ｄ７は第１レジスタを示し、Ｓ０〜Ｓ７は第２レジスタを示し、ＡＮＤはＡＮＤゲートを示し、ＦＦ０〜ＦＦ７はＤタイプフリップフロップを示す。クロックがＤタイプフリップフロップに入力されると、Ｄ０の内容とＳ０の内容の論理積〜Ｄ７の内容とＳ７の内容の論理積がそれぞれＤ０〜Ｄ７に格納される。

逆並び替え部１４１が入力するＹＵＹ２形式の空間領域データは、従来の機器と互換性があるため、従来からのキャプチャ装置や画像復号化装置から入力することができる。

選択部１４２は、入力インターフェースから供給されるＹ／ＵＶパック形式の空間領域データ又は逆並び替え部１４１から供給されるＹ／ＵＶパック形式の空間領域データを選択する。

図９に示す画像復号化装置と図１７に示す画像符号化装置を接続する場合には、画像復号化装置から画像符号化装置へ空間領域データをＹ／ＵＶパック形式で供給することができるので、並び替え部１１１及び逆並び替え部１４１が不要となる。

減算器１４３は、選択部１４２から供給されるＹ／ＵＶパック形式の空間領域データからスイッチ１５６からＹ／ＵＶパック形式で供給される空間領域データを減算する。

アンパック部１４４は、減算器１４３からＹ／ＵＶパック形式の空間領域データを入力し、これをワード形式の空間領域データに変換する。

図２０を参照して、アンパック化部１４４が行うＹ／ＵＶパック形式からワード形式への変換について説明すると、１つのpunpcklbw命令と１つのpand命令と１つのpsrlw命令により、４つのＹ成分サンプル、４つのＵ成分サンプル及び４つのＶ成分サンプルが得られる。

punpckhbw命令の名称は「Unpack how-order bytes」であり、punpckhbw命令を実現するためのハードウェアは図２１に示すとおりである。図２１において、Ｄ０〜Ｄ７は第１レジスタを示し、Ｓ０〜Ｓ７は第２レジスタを示し、ＦＦ０〜ＦＦ７はＤタイプフリップフロップを示す。クロックがＤタイプフリップフロップに入力されると、Ｄ４、Ｄ５、Ｄ６、Ｄ７、Ｓ４、Ｓ５、Ｓ６及びＳ７の内容がそれぞれＤ０〜Ｄ７に格納される。

次に、図９、図２２及び図２３を参照して、図９に示す画像復号化装置の動作について説明する。

図２２を参照すると、まず、画像符号化装置との間でインターフェース形式を決定する（ステップＳ２０１）。図１７に示す画像符号化装置が接続相手である場合には、インターフェース形式をＹ／ＵＶパック形式に決定する。それ以外の装置が接続相手である場合には、インターフェース形式をＹＵＹ２パック形式に決定する。

次に、ＨＤ ＭＰＥＧビデオ符号を入力する（ステップＳ２０２）。

次に、１フレームを伸張して、第１Ｙ／ＵＶパック形式データを生成する（ステップＳ２０３）。ステップＳ２０３の詳細については後述する。

次に、画像縮小部１１０は、画像を縮小して第２Ｙ／ＵＶパック形式データを生成する（ステップＳ２０４）。

次に、ステップＳ２０１で決定したインターフェース形式はＹ／ＵＶパック形式であるか否かを判断する（ステップＳ２０５）。

そうである場合には（ステップＳ２０５でＹＥＳ）、画像符号化装置に第２Ｙ／ＵＶパック形式データを供給する（ステップＳ２０６）。

そうでない場合には（ステップＳ２０５でＮＯ）、並び替え部１１１は、第２Ｙ／ＵＶパック形式データからＹＵＹ２形式データを生成する（ステップＳ２０７）。

次に、画像符号化装置にＹＵＹ２形式データを供給する（ステップＳ２０８）。

次に、全フレームについての処理が終了したか否かを判断し（ステップＳ２０９）。そうでなければ（ステップＳ２０９でＮＯ）、ステップＳ２０２に戻り、次のフレームの処理に入る。そうであれば（ステップＳ２０９でＹＥＳ）、処理を終了する。

次に、ステップＳ２０３の詳細について図２３を参照して説明する。

図２３を参照すると、まず、現在のピクチャの種別を判断する（ステップＳ３０１）。現在のピクチャがＩピクチャであればステップＳ３０２に進み、現在のピクチャがＰピクチャであればステップＳ３０８に進み、現在のピクチャがＢピクチャであればステップＳ３１８に進む。

ステップＳ３０２では、可変長復号化部１０１が可変長復号を行い、量子化されたＤＣＴ係数及び動きベクトルを出力する。

次に、逆量子化部１０２は、量子化されたＤＣＴ係数を逆量子化して、ＤＣＴ係数を出力する（ステップＳ３０３）。

次に、ＩＤＣＴ部１０３は、ＤＣＴ係数を逆離散コサイン変換して、ワード形式の空間領域データを出力する（ステップＳ３０４）。

次に、パック化部１０４は、ワード形式の空間領域データをＹ／ＵＶパック形式の空間領域データに変換する（ステップＳ３０５）。

次に、後フレームメモリ１０６にＹ／ＵＶパック形式の空間領域データを書き込む（ステップＳ３０６）。

次に、Ｙ／ＵＶパック形式の空間領域データを画像縮小部１１０に出力する（ステップＳ３０７）。

ステップＳ３０８では、可変長復号化部１０１が可変長復号を行い、量子化されたＤＣＴ係数及び動きベクトルを出力する。

次に、逆量子化部１０２は、量子化されたＤＣＴ係数を逆量子化して、ＤＣＴ係数を出力する（ステップＳ３０９）。

次に、ＩＤＣＴ部１０３は、ＤＣＴ係数を逆離散コサイン変換して、ワード形式の空間領域データを出力する（ステップＳ３１０）。

次に、パック化部１０４は、ワード形式の空間領域データをＹ／ＵＶパック形式の空間領域データに変換する（ステップＳ３１１）。

次に、後フレームメモリ１０６の内容を前フレームメモリ１０７に転送する（ステップＳ３１２）。この転送は、参照ポインタの操作によって前フレームと後フレームを入れ替えることにより実現してもよい。

次に、参照フレームのＹ／ＵＶパック形式の空間領域データを前フレームメモリ１０７から読み出す（ステップＳ３１３）。

次に、動き補償部１０８は、ステップＳ３１３で読み出した参照フレームのデータを可変長復号化部１０１から入力する動きベクトルに従ってマクロブロック単位で空間移動させる（ステップＳ３１４）。

次に、加算部１０５は、パック化部１０４から入力する空間領域データを動き補償部１０８からスイッチ１０９を介して入力する空間領域データに加算する（ステップＳ３１５）。

次に、ステップＳ３１５の加算により得られた復号Ｙ／ＵＶパック形式データを後フレームメモリ１０６に書き込み（ステップＳ３１６）、画像縮小部に出力する（ステップＳ３１７）。

ステップＳ３１８乃至Ｓ３２７は、ステップＳ３０８乃至Ｓ３１７と同様であるが、Ｂピクチャに関する処理を行うので、Ｐピクチャに関する処理中のステップＳ３１３では参照フレームのＹ／ＵＶパック形式の空間領域データを前フレームメモリ１０７から読み出すのに対し、これに対応するステップＳ３２３では参照フレームのＹ／ＵＶパック形式の空間領域データを前フレームメモリ１０７及び後フレームメモリ１０６から読み出す。

次に、図１７、図２４及び図２５を参照して、図１７に示す画像符号化装置の動作について説明する。

図２４を参照すると、まず、画像復号化装置との間でインターフェース形式を決定する（ステップＳ２２１）。図９に示す画像復号化装置が接続相手である場合には、インターフェース形式をＹ／ＵＶパック形式に決定する。それ以外の装置が接続相手である場合には、インターフェース形式をＹＵＹ２パック形式に決定する。

次に、ステップＳ２２１で決定したインターフェース形式はＹ／ＵＶパック形式であるか否かを判断する（ステップＳ２２２）。

そうである場合には（ステップＳ２２２でＹＥＳ）、選択部１４２は、画像復号化装置から第２Ｙ／ＵＶパック形式データを入力する（ステップＳ２２３）。

そうでない場合には（ステップＳ２２２でＮＯ）、逆並び替え部１４１は、画像復号化装置からＹＵＹ２形式データを入力し（ステップＳ２２４）、これを第３Ｙ／ＵＶパック形式データに変換する（ステップＳ２２５）。

次に、現在の１フレームを圧縮して、ＳＤ ＭＰＥＧビデオ符号を生成する（ステップＳ２２６）。ステップＳ２２６の詳細については後述する。

次に、ステップＳ２２６で生成したＳＤ ＭＰＥＧビデオ符号を出力する（ステップＳ２２７）。

次に、全フレームについての処理が終了したか否かを判断し（ステップＳ２２８）。そうでなければ（ステップＳ２２８でＮＯ）、ステップＳ２２２に戻り、次のフレームの処理に入る。そうであれば（ステップＳ２２２８でＹＥＳ）、処理を終了する。

次に、ステップＳ２２６の詳細について図２５を参照して説明する。

図２５を参照すると、まず、現在のピクチャの種別を判断する（ステップＳ４０１）。現在のピクチャがＩピクチャであればステップＳ４０２に進み、現在のピクチャがＰピクチャであればステップＳ４１１に進み、現在のピクチャがＢピクチャであればステップＳ４２６に進む。

ステップＳ４０２では、アンパック化部１４４は、選択部１４２から減算器１４３を介して入力したＹ／ＵＶパック形式データをワード形式データに変換する（ステップＳ４０２）。

次に、ＤＣＴ部１４５は、アンパック部１４４から入力したワード形式の空間領域データを離散コサイン変換にかけて、ＤＣＴ係数を出力する（ステップＳ４０３）。

次に、量子化部１４６は、ＤＣＴ部１４５から入力したＤＣＴ係数を量子化して、量子化されたＤＣＴ係数を出力する（ステップＳ４０４）。

次に、可変長符号化部１４７は、量子化部１４６から入力した量子化されたＤＣＴ係数を可変長符号化する（ステップＳ４０５）。

次に、逆量子化部１４８は、量子化部１４６から入力した量子化されたＤＣＴ係数を逆量子化して、ワード形式のＤＣＴ係数を出力する（ステップＳ４０６）。

次に、ＩＤＣＴ部１４９は、逆量子化部１４８から入力したワード形式のＤＣＴ係数を逆離散コサイン変換にかけ、ワード形式の空間領域データを出力する（ステップＳ４０７）。

次に、パック化部１５０は、逆量子化部１４８から入力したワード形式の空間領域データをＹ／ＵＶパック形式の空間領域データに変換する（ステップＳ４０８）。

次に、パック化部１５０が出力したＹ／ＵＶパック形式の空間領域データを後フレームメモリ１５２に書き込む（ステップＳ４０９）。

次に、ステップＳ４０５で生成した可変長符号をＳＤ ＭＰＥＧビデオ符号として出力する（ステップＳ４１０）。

ステップＳ４１１では、後フレームメモリ１５２の内容を前フレームメモリ１５３に転送する。この転送は、参照ポインタの操作によって前フレームと後フレームを入れ替えることにより実現してもよい。

次に、動き検索部１５４は、選択部１４２から入力するＹ／ＵＶパック形式の空間領域データと前フレームメモリ１５３から入力するＹ／ＵＶパック形式の空間領域データを基にマクロブロック毎に動きベクトルを検索する（ステップＳ４１２）。

次に、参照フレームのＹ／ＵＶパック形式の空間領域データを前フレームメモリ１５３から読み出す（ステップＳ４１３）。

次に、動き補償部１５５は、ステップＳ４１３で読み出した参照フレームのデータを動き検索部１５４から入力する動きベクトルに従ってマクロブロック単位で空間移動させる（ステップＳ４１４）。

次に、減算器１４３は、選択部１４２から入力するＹ／ＵＶパック形式の空間領域データから動き補償部１５５からスイッチ１５６を介して入力する参照フレームのＹ／ＵＶパック形式の空間領域データを減算する（ステップＳ４１５）。

次に、アンパック化部１４４は、減算器１４３から入力するＹ／ＵＶパック形式の空間領域差分データをワード形式の空間領域差分データに変換する（ステップＳ４１６）。

次に、ＤＣＴ部１４５は、アンパック部１４４から入力するワード形式の空間領域差分データに離散コサイン変換をかけ、ワード形式のＤＣＴ係数を出力する（ステップＳ４１７）。

次に、量子化部１４６は、ＤＣＴ部１４５から入力したＤＣＴ係数を量子化して、量子化されたＤＣＴ係数を出力する（ステップＳ４１８）。

次に、可変長符号化部１４７は、量子化部１４６から入力した量子化されたＤＣＴ係数を可変長符号化する（ステップＳ４１９）。

次に、逆量子化部１４８は、量子化部１４６から入力した量子化されたＤＣＴ係数を逆量子化して、ワード形式のＤＣＴ係数を出力する（ステップＳ４４２０）。

次に、ＩＤＣＴ部１４９は、逆量子化部１４８から入力したワード形式のＤＣＴ係数を逆離散コサイン変換にかけ、ワード形式の空間領域データを出力する（ステップＳ４２１）。

次に、パック化部１５０は、逆量子化部１４８から入力するワード形式の空間領域データをＹ／ＵＶパック形式の空間領域差分データに変換する（ステップＳ４２２）。

次に、加算器１５１は、動き補償部１５５から入力する動き補償された参照フレームのＹ／ＵＶパック形式の空間領域データにパック化部１５０から入力するＹ／ＵＶパック形式の空間領域差分データを加算して、現フレームの空間領域復元データを生成する（ステップＳ４２３）。

次に、ステップＳ４２３の加算により得られたＹ／ＵＶパック形式の空間領域復元データを後フレームメモリ１５２に書き込む（ステップＳ４２４）。

次に、ステップＳ４１９で生成した可変長符号をＳＤ ＭＰＥＧビデオ符号として出力する（ステップＳ４２５）。

ステップＳ４２６では、後フレームメモリ１５２の内容を前フレームメモリ１５３に転送する。この転送は、参照ポインタの操作によって前フレームと後フレームを入れ替えることにより実現してもよい。

次に、動き検索部１５４は、選択部１４２から入力するＹ／ＵＶパック形式の空間領域データと前フレームメモリ１５３から入力するＹ／ＵＶパック形式の空間領域データと後フレームメモリ１５２から入力するＹ／ＵＶパック形式の空間領域データを基にマクロブロック毎に動きベクトルを検索する（ステップＳ４２７）。

次に、参照フレームのＹ／ＵＶパック形式の空間領域データを前フレームメモリ１５３及び後フレームメモリ１５２から読み出す（ステップＳ４２８）。

次に、動き補償部１５５は、ステップＳ４２８で読み出した参照フレームのデータを動き検索部１５４から入力する動きベクトルに従ってマクロブロック単位で空間移動させる（ステップＳ４２９）。

次に、減算器１４３は、選択部１４２から入力するＹ／ＵＶパック形式の空間領域データから動き補償部１５５からスイッチ１５６を介して入力する参照フレームのＹ／ＵＶパック形式の空間領域データを減算する（ステップＳ４３０）。

次に、アンパック化部１４４は、減算器１４３から入力するＹ／ＵＶパック形式の空間領域差分データをワード形式の空間領域差分データに変換する（ステップＳ４３１）。

次に、ＤＣＴ部１４５は、アンパック部１４４から入力するワード形式の空間領域差分データに離散コサイン変換をかけ、ワード形式のＤＣＴ係数を出力する（ステップＳ４３２）。

次に、量子化部１４６は、ＤＣＴ部１４５から入力したＤＣＴ係数を量子化して、量子化されたＤＣＴ係数を出力する（ステップＳ４３３）。

次に、可変長符号化部１４７は、量子化部１４６から入力した量子化されたＤＣＴ係数を可変長符号化する（ステップＳ４３４）。

次に、ステップＳ４３４で生成した可変長符号をＳＤ ＭＰＥＧビデオ符号として出力する（ステップＳ４３５）。

次に、ＩＹＵＶ形式のデータの代わりにＹ／ＵＶパック形式のデータを利用することによる効果について説明する。

１マクロブロックの空間領域には、２５６個（＝（８×２）＾２個）のＹ成分サンプル、６４個（＝８＾２個）のＵ成分サンプル、６４個（＝８＾２個）のＶ成分サンプルがある。

まず、従来のパック化部により行われるワード形式からＩＹＵＶ形式への変換と本発明のパック化部１０４及びパック化部１５０により行われるワード形式からＹ／ＵＶパック形式への変換を比較する。

従来例によれば、図４から明らかなように、１マクロブロックの範囲でワード形式からＩＹＵＶ形式への変換を行うためには、Ｙ成分サンプルについては３２個（＝２５６／８個）のpackuswb命令、Ｕ成分サンプルについては８個（＝６４／８個）のpackuswb命令、Ｖ成分サンプルについては８個（＝６４／８個）のpackuswb命令が必要である。従って、１マクロブロックの範囲でワード形式からＩＹＵＶ形式への変換を行うためには、全成分については４８個（＝３２＋８＋８個）の命令が必要である。

一方、本発明によれば、図１１から明らかなように、１マクロブロックの範囲でワード形式からＹ／ＵＶパック形式への変換を行うためには、Ｙ成分サンプルについては３２個（＝２５６／８個）のpackuswb命令、Ｕ成分及びＶ成分については１６個（＝６４／４個）のpsllw命令及び１６個（＝６４／４個）のpor命令が必要である。従って、１マクロブロックの範囲でワード形式からＹ／ＵＶパック形式への変換を行うためには、全成分については６４個（＝３２＋１６＋１６個）の命令が必要である。

従って、従来のパック化部により行われるワード形式からＩＹＵＶ形式への変換に対して、本発明のパック化部１０４及びパック化部１５０により行われるワード形式からＹ／ＵＶパック形式への変換は、１６個（＝６４−４８個）多い命令を必要とする。

次に、従来のアンパック化部により行われるＩＹＵＶ形式からワード形式への変換と本発明のアンパック化部１４４により行われるＹ／ＵＶパック形式からワード形式への変換を比較する。

従来例によれば、図５から明らかなように、１マクロブロックの範囲でＩＹＵＶ形式からワード形式への変換を行うためには、Ｙ成分サンプルについては６４個（＝２５６／４個）のpunpcklbw命令、Ｕ成分サンプルについては１６個（＝６４／４個）のpunpcklbw命令、Ｖ成分サンプルについては１６個（＝６４／４個）のpunpcklbw命令が必要である。従って、１マクロブロックの範囲でＩＹＵＶ形式からワード形式への変換を行うためには、全成分については９６個（＝６４＋１６＋１６個）の命令が必要である。

一方、本発明によれば、図２０から明らかなように、１マクロブロックの範囲でＹ／ＵＶパック形式からワード形式への変換を行うためには、Ｙ成分サンプルについては６４個（＝２５６／４個）のpunpcklbw命令、Ｕ成分については１６個（＝６４／４個）のpand命令、Ｖ成分については１６個（＝６４／４個）のpsrlw命令が必要である。従って、１マクロブロックの範囲でＹ／ＵＶパック形式からワード形式への変換を行うためには、全成分については９６個（＝６４＋１６＋１６個）の命令が必要である。

従って、従来のアンパック化部により行われるＩＹＵＶ形式からワード形式への変換に対して、本発明のアンパック化部１４４により行われるＹ／ＵＶパック形式からワード形式への変換は、同数の命令を必要とする。

次に、従来の並び替え部により行われるＩＹＵＶ形式からＹＵＹ２形式への変換と本発明の並び替え部１１１により行われるＹ／ＵＶパック形式からＹＵＹ２形式への変換を比較する。

ＹＵＹ２形式では、１マクロブロックには２５６個のＹ成分サンプル、１２８個のＵ成分サンプル、１２８個のＶ成分サンプルが含まれる。

従来例によれば、図６から明らかなように、１マクロブロックの範囲でＩＹＵＶ形式からＹＵＹ２形式への変換を全成分について行うためには、９６個（＝３×２５６／８個）のpunpcklbw命令が必要である。

一方、本発明によれば、図１５から明らかなように、１マクロブロックの範囲でＹ／ＵＶパック形式からＹＵＹ２形式への変換を全成分について行うためには、６４個（＝２×２５６／８個）のpunpcklbw命令が必要である。

従って、従来の並び替え部により行われるＩＹＵＶ形式からＹＵＹ２形式への変換に対して、本発明の並び替え部１１１により行われるＹ／ＵＶパック形式からＹＵＹ２形式への変換は、３２個（＝９６−６４個）少ない命令を必要とする。

次に、従来の逆並び替え部により行われるＹＵＹ２形式からＩＹＵＶ形式への変換と本発明の逆並び替え部１４１により行われるＹＵＹ２形式からＹ／ＵＶパック形式への変換を比較する。

従来例によれば、図７及び図８から明らかなように、１マクロブロックの範囲でＹＵＹ２形式からＩＹＵＶ形式への変換を行うためには、Ｙ成分サンプルについては６４個（＝２×２５６／８個）のpand命令及び３２個（＝２５６／８個）のpackuswb命令、Ｕ成分サンプル及びＶ成分サンプルについては４８個（＝６×６４／８個）のpsrlw命令、３２個（＝４×６４／８個）のpackuswb命令及び１６個（＝２×６４／８個）のpand命令が必要である。従って、１マクロブロックの範囲でＹＵＹ２形式からＩＹＵＶ形式への変換を行うためには、全成分については１９２個（＝（６４＋３２）＋（４８＋３２＋１６）個）の命令が必要である。

一方、本発明によれば、図１８から明らかなように、１マクロブロックの範囲でＹＵＹ２形式からＹ／ＵＶパック形式への変換を行うためには、Ｙ成分サンプルについては６４個（＝２×２５６／８個）のpand命令及び３２個（＝２５６／８個）のpackuswb命令、Ｕ成分サンプル及びＶ成分サンプルについては３２個（＝４×６４／８個）のpsrlw命令及び１６個（＝２×６４／８個）のpackuswb命令が必要である。従って、１マクロブロックの範囲でＹＵＹ２形式からＹ／ＵＶパック形式への変換を行うためには、全成分については１４４個（＝（６４＋３２）＋（３２＋１６）個）の命令が必要である。

従って、従来の逆並び替え部により行われるＹＵＹ２形式からＩＹＵＶ形式への変換に対して、本発明の逆並び替え部１４１により行われるＹＵＹ２形式からＹ／ＵＶパック形式への変換は、４８個（＝１９２−１４４個）少ない命令を必要とする。

上述した比較を表１にまとめる。

また、ＨＤの画面サイズを１２８０×７２０画素、ＳＤの画面サイズを７２０×４８０画素とすると、両者の画素数の比率は１：０．３７５となる。そして、画像復号化装置は、パック化部及び並び替え部を備えるが、アンパック化部及び逆並び替え部を備えない。また、画像符号化装置はパック化部、アンパック化部及び逆並び替え部を備えるが、並び替え部を備えない。そうすると、命令数の重み付けは表２に示すとおりとなる。表１における重み１は表２における合計と等しい。

また、ＨＤからＳＤへの変換を行わない場合には、命令数の重み付けは表３に示すとおりとなる。表１における重み２は表３における合計と等しい。

表１の最下行に示すように、単純に増減数を比較すると、本発明による命令数は、従来例による命令数よりも１５％少ない。また、重み１を考慮すると、本発明による命令数は、従来例による命令数よりも６％少ない。更に、重み２を考慮すると、本発明による命令数は、従来例による命令数よりも１１％少ない。

本発明は、画像データを復号化するため、画像データを符号化するため、そして、画像データを変換するために利用することができる。

ＩＹＵＶ形式で表される画像データを示す図である。 ＹＵＹ２形式で表される画像データを示す図である。 ワード形式で表される画像データを示す図である。 ワード形式からＩＹＵＶ形式への変換を示す図である。 ＩＹＵＶ形式からワード形式への変換を示す図である。 ＩＹＵＶ形式からＹＵＹ２形式への変換を示す図である。 ＹＵＹ２形式からＩＹＵＶ形式への変換を示す第１の図である。 ＹＵＹ２形式からＩＹＵＶ形式への変換を示す第２の図である。 本発明の実施形態による画像復号化装置の構成を示すブロック図である。 本発明の実施形態によるＹ／ＵＶパック形式で表される画像データを示す図である。 本発明の実施形態によるワード形式からＹ／ＵＶパック形式への変換を示す図である。 packuswb命令を実現する回路を示す図である。 psrlw命令及びpsllw命令を実現する回路を示す図である。 por命令を実現する回路を示す図である。 本発明の実施形態によるＹ／ＵＶパック形式からＹＵＹ２形式への変換を示す図である。 punpcklbw命令を実現する回路を示す図である。 本発明の実施形態による画像符号化装置の構成を示すブロック図である。 本発明の実施形態によるＹＵＹ２形式からＹ／ＵＶパック形式への変換を示す図である。 pand命令を実現する回路を示す図である。 本発明の実施形態によるＹ／ＵＶパック形式からワード形式への変換を示す図である。 punpckhbw命令を実現する回路を示す図である。 本発明の実施形態による画像復号化方法を示すフローチャートである。 図２２に示すフレーム伸張方法を示すフローチャートである。 本発明の実施形態による画像符号化方法を示すフローチャートである。 図２４に示すフレーム圧縮方法を示すフローチャートである。

符号の説明

１０１ 可変長復号化部
１０２ 逆量子化部
１０３ ＩＤＣＴ部
１０４ パック化部
１０５ 加算部
１０６ 後フレームメモリ
１０７ 前フレームメモリ
１０８ 動き補償部
１０９ スイッチ
１１０ 画像縮小部
１１１ 並び替え部
１４１ 逆並び替え部
１４２ 選択部
１４３ 減算器
１４４ アンパック部
１４５ ＤＣＴ部
１４６ 量子化部
１４７ 可変長符号化部
１４８ 逆量子化部
１４９ ＩＤＣＴ部
１５０ パック部
１５１ 加算器
１５２ 後フレームメモリ
１５３ 前フレームメモリ
１５４ 動き検索部
１５５ 動き補償部
１５６ スイッチ

Claims (29)

1. 符号化画像データを復号化することによりワード形式で表される輝度データ、ワード形式で表される第１色差データ及びワード形式で表される第２色差データを得る復号化ステップと、
   前記ワード形式で表される輝度データをバイト形式で表される輝度データに変換する輝度データ変換ステップと、
   前記ワード形式で表される第１色差データと前記ワード形式で表される第２色差データとをバイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって１画素毎に交互に並んだものに変換する色差データ変換ステップと、
   を備え、
   ワード形式で表されるとは、有効な下位８ビットに値がゼロのダミーの上位８ビットを追加することにより表されることであることを特徴とする画像復号化方法。
2. 請求項１に記載の画像復号化方法において、
   前記輝度データ変換ステップは、
   前記ワード形式で表される輝度データの下位８ビットを前記バイト形式で表される輝度データとして選択するステップを備えることを特徴とする画像復号化方法。
3. 請求項１に記載の画像復号化方法において、
   前記色差データ変換ステップは、
   前記ワード形式の第２色差データを８ビット右シフトするステップと、
   シフトされた前記ワード形式の第２色差データと前記ワード形式の第１色差データとの論理和演算をビット毎に行うステップと、
   を備えることを特徴とする画像復号化方法。
4. 請求項１に記載の画像復号化方法において、
   前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものを、偶数番目の前記バイト形式で表される輝度データ、前記バイト形式で表される第１色差データ、奇数番目の前記バイト形式で表される輝度データ及び前記バイト形式で表される第２色差データであってこの順に並んだものに変換する輝度データ／色差データ変換ステップを更に備えることを特徴とする画像復号化方法。
5. 請求項１に記載の画像復号化方法において、
   前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものは第１画像をあらわすものであり、
   前記第１画像を表す前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものを前記第１画像よりも画素数が少ない第２画像を表す前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものに変換する画像縮小ステップを更に備えることを特徴とする画像復号化方法。
6. バイト形式で表される輝度データをワード形式で表される輝度データに逆変換する輝度データ逆変換ステップと、
   バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって１画素毎に交互に並んだものをワード形式で表される第１色差データとワード形式で表される第２色差データに逆変換する色差データ逆変換ステップと、
   前記ワード形式で表される輝度データ、前記ワード形式で表される第１色差データ及び前記ワード形式で表される第２色差データより符号化画像データを生成する符号化ステップと、
   を備え、
   ワード形式で表されるとは、有効な下位８ビットに値がゼロのダミーの上位８ビットを追加することにより表されることであることを特徴とする画像符号化方法。
7. 請求項６に記載の画像符号化方法において、
   前記輝度逆変換ステップは、
   前記バイト形式で表される輝度データにゼロのビット列を追加して前記ワード形式で表される輝度データを生成するステップを備えることを特徴とする画像符号化方法。
8. 請求項６に記載の画像符号化方法において、
   前記色差データ逆変換ステップは、
   前記バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものと所定のマスクパターンとの論理積演算をビット毎に行うことにより前記ワード形式で表される第１色差データを得るステップと、
   前記バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものをインテル社のＭＭＸの命令セット中のｐｓｒｌｗ命令により所定ビット数シフトすることにより前記ワード形式で表される第２色差データを得るステップと、
   を備え、
   前記所定のマスクパターンとは、ＦＦ００ＦＦ００ＦＦ００ＦＦ００Ｈであることを特徴とする画像符号化方法。
9. 請求項６に記載の画像符号化方法において、
   偶数番目の前記バイト形式で表される輝度データ、前記バイト形式で表される第１色差データ、奇数番目の前記バイト形式で表される輝度データ及び前記バイト形式で表される第２色差データであってこの順に並んだものを、前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものに逆変換する輝度データ／色差データ逆変換ステップを更に備えることを特徴とする画像符号化方法。
10. 請求項６に記載の画像符号化方法において、
    前記ワード形式で表される輝度データをバイト形式で表される輝度データに変換する輝度データ変換ステップと、
    前記ワード形式で表される前記第１色差データとワード形式で表される第２色差データとをバイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものに変換する色差データ変換ステップと、
    前記輝度データ変換ステップにより得られた前記バイト形式で表される輝度データと前記色差データ変換ステップにより得られた前記バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものを基に画像データの局所復号化を行う局所復号化ステップと、
    を更に備えることを特徴とする画像符号化方法。
11. 請求項１０に記載の画像符号化方法において、
    前記輝度データ変換ステップは、
    前記ワード形式で表される輝度データの下位８ビットを前記バイト形式で表される輝度データとして選択するステップを備えることを特徴とする画像符号化方法。
12. 請求項１０に記載の画像符号化方法において、
    前記色差データ変換ステップは、
    前記ワード形式の第２色差データを８ビット右シフトするステップと、
    シフトされた前記ワード形式の第２色差データと前記ワード形式の第１色差データとの論理和演算をビット毎に行うステップと、
    を備えることを特徴とする画像符号化方法。
13. 請求項１乃至５の何れか１項に記載の画像復号化方法と請求項６乃至１２の何れか１項に記載の画像符号化方法を備えることを特徴とする画像変換方法。
14. 符号化画像データを復号化することによりワード形式で表される輝度データ、ワード形式で表される第１色差データ及びワード形式で表される第２色差データを得る復号化手段と、
    前記ワード形式で表される輝度データをバイト形式で表される輝度データに変換する輝度データ変換手段と、
    前記ワード形式で表される第１色差データと前記ワード形式で表される第２色差データとをバイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって１画素毎に交互に並んだものに変換する色差データ変換手段と、
    を備え、
    ワード形式で表されるとは、有効な下位８ビットに値がゼロのダミーの上位８ビットを追加することにより表されることであることを特徴とする画像復号化装置。
15. 請求項１４に記載の画像復号化装置において、
    前記輝度データ変換手段は、
    前記ワード形式で表される輝度データの下位８ビットを前記バイト形式で表される輝度データとして選択する手段を備えることを特徴とする画像復号化装置。
16. 請求項１４に記載の画像復号化装置において、
    前記色差データ変換手段は、
    前記ワード形式の第２色差データを８ビット右シフトする手段と、
    シフトされた前記ワード形式の第２色差データと前記ワード形式の第１色差データとの論理和演算をビット毎に行う手段と、
    を備えることを特徴とする画像復号化装置。
17. 請求項１４に記載の画像復号化装置において、
    前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものを、偶数番目の前記バイト形式で表される輝度データ、前記バイト形式で表される第１色差データ、奇数番目の前記バイト形式で表される輝度データ及び前記バイト形式で表される第２色差データであってこの順に並んだものに変換する輝度データ／色差データ変換手段を更に備えることを特徴とする画像復号化装置。
18. 請求項１４に記載の画像復号化装置において、
    前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものは第１画像をあらわすものであり、
    前記第１画像を表す前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものを前記第１画像よりも画素数が少ない第２画像を表す前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものに変換する画像縮小手段を更に備えることを特徴とする画像復号化装置。
19. バイト形式で表される輝度データをワード形式で表される輝度データに逆変換する輝度データ逆変換手段と、
    バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって１画素毎に交互に並んだものをワード形式で表される第１色差データとワード形式で表される第２色差データに逆変換する色差データ逆変換手段と、
    前記ワード形式で表される輝度データ、前記ワード形式で表される第１色差データ及び前記ワード形式で表される第２色差データより符号化画像データを生成する符号化手段と、
    を備え、
    ワード形式で表されるとは、有効な下位８ビットに値がゼロのダミーの上位８ビットを追加することにより表されることであることを特徴とする画像符号化装置。
20. 請求項１９に記載の画像符号化装置において、
    前記輝度逆変換手段は、
    前記バイト形式で表される輝度データにゼロのビット列を追加して前記ワード形式で表される輝度データを生成する手段を備えることを特徴とする画像符号化装置。
21. 請求項１９に記載の画像符号化装置において、
    前記色差データ逆変換手段は、
    前記バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものと所定のマスクパターンとの論理積演算をビット毎に行うことにより前記ワード形式で表される第１色差データを得る手段と、
    前記バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものをインテル社のＭＭＸの命令セット中のｐｓｒｌｗ命令により所定ビット数シフトすることにより前記ワード形式で表される第２色差データを得る手段と、
    を備え、
    前記所定のマスクパターンとは、ＦＦ００ＦＦ００ＦＦ００ＦＦ００Ｈであることを特徴とする画像符号化装置。
22. 請求項１９に記載の画像符号化装置において、
    偶数番目の前記バイト形式で表される輝度データ、前記バイト形式で表される第１色差データ、奇数番目の前記バイト形式で表される輝度データ及び前記バイト形式で表される第２色差データであってこの順に並んだものを、前記バイト形式で表される輝度データと前記バイト形式で表される第１色差データ及び前記バイト形式で表される第２色差データであって交互に並んだものに逆変換する輝度データ／色差データ逆変換手段を更に備えることを特徴とする画像符号化装置。
23. 請求項１９に記載の画像符号化装置において、
    前記ワード形式で表される輝度データをバイト形式で表される輝度データに変換する輝度データ変換手段と、
    前記ワード形式で表される前記第１色差データとワード形式で表される第２色差データとをバイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものに変換する色差データ変換手段と、
    前記輝度データ変換手段により得られた前記バイト形式で表される輝度データと前記色差データ変換手段により得られた前記バイト形式で表される第１色差データ及びバイト形式で表される第２色差データであって交互に並んだものを基に画像データの局所復号化を行う局所復号化手段と、
    を更に備えることを特徴とする画像符号化装置。
24. 請求項２３に記載の画像符号化装置において、
    前記輝度データ変換手段は、
    前記ワード形式で表される輝度データの下位８ビットを前記バイト形式で表される輝度データとして選択する手段を備えることを特徴とする画像符号化装置。
25. 請求項２３に記載の画像符号化装置において、
    前記色差データ変換手段は、
    前記ワード形式の第２色差データを８ビット右シフトする手段と、
    シフトされた前記ワード形式の第２色差データと前記ワード形式の第１色差データとの論理和演算をビット毎に行う手段と、
    を備えることを特徴とする画像符号化装置。
26. 請求項１４乃至１８の何れか１項に記載の画像復号化装置と請求項１９乃至２５の何れか１項に記載の画像符号化装置を備えることを特徴とする画像変換装置。
27. 請求項１乃至５の何れか１項に記載の画像復号化方法をコンピュータに行わせるためのプログラム。
28. 請求項６乃至１２の何れか１項に記載の画像符号化方法をコンピュータに行わせるためのプログラム。
29. 請求項１３に記載の画像変換方法をコンピュータに行わせるためのプログラム。

Images