JPH08336134A - 動画像圧縮符号化方法、動画像圧縮符号化装置、動画像復号方法、動画像復号装置、及び、記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 ＭＰＥＧ方式等による動画像圧縮技術による
符号・復号時の画質の向上を図る。 【解決手段】 入力される動画像を垂直位置により異な
るサブサンプリング（ラインオフセットサブサンプリン
グ）を行い画素を間引いて圧縮符号化を行う。そして、
復号時に間引いた画素を補間（内挿）することにより、
斜め方向の周波数成分を減衰させてから、符号化する。
これにより、復号時の画質の向上を図る。また、この際
に同時にサンプリング内容に関する情報を出力し、復号
時に入力されたサブサンプリング内容を示す情報に基
き、符号化時のサブサンプリング対応する内挿補間を行
う。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は入力動画像をサブサ
ンプリングを行って符号化する動画像の圧縮符号化方
法、及び装置、並びに符号化された動画像を内挿補間を
行って出力する復号手段及び装置、並びにサブサンプリ
ングされて圧縮符号化されたデータを記録する記録媒体
に関するものである。

【０００２】

【従来の技術】動画像の圧縮符号化としては、MPEG(ISO
/IEC 11172(MPEG1)、ISO/IEC 13818(MPEG2))に代表され
るDCT(Discrete Cosine Transform)及び量子化を用い、
画像単位内圧縮と画像単位間圧縮を折り混ぜて行う手法
が多く用いられている。これらの動画像の圧縮符号化方
式においては、まず画像データを全てマクロブロックと
呼ばれる小領域に分割し、その領域毎に圧縮処理を行
う。

【０００３】ここで、画像単位内圧縮とは、その圧縮デ
ータのみで復号が可能な圧縮形態であり、画像単位間圧
縮とは、他の画像データとの相関を利用し、その動き及
び差分を用いて圧縮符号化を行うものである。画像単位
内圧縮においては、その画像内部の全てのマクロブロッ
クはそのまま二次元離散余弦変換(DCT)が行われ、空間
周波数成分が求められる。

【０００４】これに量子化と呼ばれる行列除算が行われ
る。これは、周波数成分を所定の値を持った行列で除算
するものである。そして、その行列値以下の精度を落と
すことが可能となる。そして人間の視覚特性が高周波側
に対して鈍感であることを利用して、低周波側に高周波
側よりも多くの符号を割当てる。

【０００５】復号装置側では、可変長復号によって得ら
れた量子化データとこの量子化行列を乗算することによ
り、空間周波数成分を復元することが可能になる。次に
画像単位間圧縮においては、このマクロブロック毎に、
参照される画像からの動きベクトルを求め、そのマクロ
ブロックに最も近い領域を検出する。そしてその領域と
該当マクロブロックデータとの差分に対し、二次元離散
余弦変換(DCT)を行い、量子化を行い、圧縮符号化を行
う。

【０００６】この差分データと前記動きベクトルが符号
化される。

【０００７】この手法では、画角の増大によって符号化
する画素数が膨大な数になるめに、各符号化単位毎(MPE
Gにおけるマクロブロック等)に配分できるデータ量が減
少してしまい、各領域毎の高周波成分に与えるデータ量
が少なくなる。これらの符号化単位においては、ヘッダ
や動きベクトル等の最低限必要なデータを符号化しなく
てはならず、実際に画像データに分配するデータ量が極
端に減少し、復号画像の画質が低下してしまう。

【０００８】また動きベクトルの演算処理も、この数が
増えることにより膨大な量となってしまう。このため、
例えばMPEG1(ISO/IEC11172)では、入力画像データの高
周波成分を半分にして、大幅に画質をぼやかした後に、
画素を間引くことにより、データ量を効率的に削減して
いる。

【０００９】そして、復号側では復号して得られた画像
データを内挿補間し、画像を復元している。この方法で
は、水平方向の周波数成分が半分に減衰するため、画質
の点で問題があった。また、人間の視覚特性は斜め方向
に対して鈍感であることが多方面で報告されており、斜
め方向の周波数成分を除去しても主観的な画質は大きく
劣化しないと言われている。

【００１０】DCTと量子化による圧縮手法においては、
この斜め方向の周波数成分も水平方向、垂直方向と同様
に均等に符号を割当てることになるため、実際には主観
的な画質に余り寄与しない斜め方向の符号が多くなって
しまうことがあった。

【００１１】

【発明が解決しようとする課題】本発明は、動画像圧縮
を行う場合に、画素列の垂直位置に従って異なるサブサ
ンプリングを行うことにより、復号時の画質の向上を実
現するものである。また、本発明は、動画像の符号化前
に間引き処理を行ってデータ量の圧縮を行う場合に、こ
の間引き処理を動画像の動きに応じて適応的に行って、
画質の向上を実現するものである。

【００１２】

【課題を解決するための手段】このような課題を解決す
るために本発明では、動画像を圧縮符号化する場合に入
力動画像に対し垂直位置により異なるサブサンプリング
を行い、サブサンプリングされた画像を圧縮符号化する
ことを第１の特徴とする。本発明は、動画像を圧縮符号
化する場合に、入力動画像に対し垂直位置により異なる
サブンサンプリングを行い、サブサンプリングされた画
像を圧縮符号化し、同時にサブサンプリング内容を示す
情報を出力することを第２の特徴とする。

【００１３】本発明は、動画像を圧縮符号化する場合
に、入力動画像に対しラインオフセットサブサンプリン
グを行い、サブサンプリングされた画像を圧縮符号化す
ることを第３の特徴とする。本発明は、動画像を圧縮符
号化する場合に、入力動画像に対しラインオフセットサ
ブサンプリングを行い、サブサンプリングされた画像を
圧縮符号化し、同時にラインオフセットサブサンプリン
グした旨の情報を出力することを第４の特徴とする。

【００１４】本発明は、動画像を圧縮符号化する場合
に、入力動画像の動きを検出し、それに従い、入力動画
像に対し異なるサブサンプリングを行い、サブサンプリ
ングされた画像を圧縮符号化することを第５の特徴とす
る。本発明は、動画像を圧縮符号化する場合に、入力動
画像の動きを検出し、それに従い、入力動画像に対し異
なるサブサンプリングを行い、サブサンプリングされた
画像を圧縮符号化し、サブサンプリングの内容を出力す
ることを第６の特徴とする。

【００１５】本発明は、動画像を圧縮符号化する場合
に、入力動画像の動きを検出し、それに従い、入力動画
像に対し異なるサブサンプリングを行い、サブサンプリ
ングされた画像を重み付け加算し、得られた画像データ
を圧縮符号化することを第７の特徴とする。本発明は、
動画像を圧縮符号化する場合に、入力動画像の動きを検
出し、それに従い、入力動画像に対し異なるサブサンプ
リングを行い、サブサンプリングされた画像を重み付け
加算し、得られた画像データを圧縮符号化し、サブサン
プリングの内容と重み付け内容を出力することを第８の
特徴とする。

【００１６】本発明は、動画像を圧縮符号化する装置に
おいて、入力されている動画像信号の垂直位置を検出
し、その検出結果に従ってサブサンプリング点を変更し
て、入力された動画像信号をサブサンプリングし、サブ
サンプリングされた動画像信号を圧縮符号化することを
第９の特徴とする。本発明は、動画像を圧縮符号化する
装置において、入力されている動画像信号の垂直位置を
検出し、その検出結果に従ってサブサンプリング点を変
更して、入力された動画像信号をサブサンプリングし、
サブサンプリングされた動画像信号を圧縮符号化し、サ
ンプリング情報を出力することを第１０の特徴とする。

【００１７】本発明は、動画像を圧縮符号化する装置に
おいて、入力されている動画像信号の垂直位置を検出
し、その検出結果に従ってラインオフセットサブサンプ
リングし、サブサンプリングされた動画像信号を圧縮符
号化することを第１１の特徴とする。本発明は、動画像
を圧縮符号化する装置において、入力されている動画像
信号の垂直位置を検出し、その検出結果に従ってライン
オフセットサブサンプリングし、サブサンプリングされ
た動画像信号を圧縮符号化し、サンプリング内容に符号
化データにラインオフセットサブサンプリングした旨の
情報を出力することを第１２の特徴とする。

【００１８】本発明は、動画像を圧縮符号化する装置に
おいて、入力されている動画像信号に対してそれぞれ異
なる複数種類のサブサンプリング処理を行い、入力動画
像信号の動き量を検出し、検出された動き量に従って複
数種類のサブサンプリング出力の中から一つの出力を選
択し、圧縮符号化を行うことを第１３の特徴とする。本
発明は、動画像を圧縮符号化する装置において、入力さ
れている動画像信号に対してそれぞれ異なる複数種類の
サブサンプリング処理を行い、入力動画像信号の動き量
を検出し、検出された動き量に従って複数種類のサブサ
ンプリング出力の中から一つの出力を選択し、圧縮符号
化を行い、選択されたサブサンプリングに対応する情報
を符号化し、圧縮符号化時の出力符号列に挿入すること
を第１４の特徴とする。

【００１９】本発明は、動画像を圧縮符号化する装置に
おいて、入力されている動画像信号に対して伝送画素数
が同じでそれぞれ形態が異なる複数種類のサブサンプリ
ング処理を行い、入力動画像信号の動き量を検出し、検
出された動き量に従って複数種類のサブサンプリング出
力を重み付け加算を行い、その出力を圧縮符号化を行う
ことを第１５の特徴とする。

【００２０】本発明は、動画像を圧縮符号化する装置に
おいて、入力されている動画像信号に対して伝送画素数
が同じでそれぞれ形態が異なる複数種類のサブサンプリ
ング処理を行い、入力動画像信号の動き量を検出し、検
出された動き量に従って複数種類のサブサンプリング出
力を重み付け加算を行い、その出力を圧縮符号化を行
い、重み付け加算時の演算情報を符号化し、圧縮符号化
時の出力符号列に挿入することを第１６の特徴とする。

【００２１】本発明は、動画像を圧縮符号化する装置に
おいて、入力されている動画像信号に対して伝送画素数
が同じでそれぞれ形態が異なる複数種類のサブサンプリ
ング処理を行い、入力動画像信号の動き量を検出し、検
出された動き量に従って複数種類のサブサンプリング出
力を重み付け加算を行い、その出力を圧縮符号化を行
い、重み付け比率を符号化し、圧縮符号化時の出力符号
列に挿入することを第１７の特徴とする。

【００２２】本発明は、動画像を圧縮符号化する装置に
おいて、入力されている動画像信号に対して伝送画素数
が同じでそれぞれ形態が異なる複数種類のサブサンプリ
ング処理を行い、入力動画像信号の動き量を検出し、検
出された動き量に従って複数種類のサブサンプリング出
力を重み付け加算を行い、その出力を圧縮符号化を行
い、重み付け加算時の動き情報及びサブサンプリング情
報のいずれかもしくは両方を符号化し、圧縮符号化時の
出力符号列に挿入することを第１８の特徴とする。

【００２３】本発明は、入力動画像信号に対してｎ（ｎ
≧２）フレーム周期でサブサンプリング位相を順次変化
させるフレームオフセットサブサンプリングによって間
引を行い、その出力を圧縮符号化し、入力動画像の各領
域における動き量を検出し、動き量を符号化して出力す
ることを第１９の特徴とする。本発明は、入力動画像信
号に対してｎ（ｎ≧２）フレーム周期でサブサンプリン
グ位相を順次変化させるフレームオフセットサブサンプ
リングによって間引を行い、その出力を圧縮符号化し、
入力動画像の各領域における動き量を検出し、動き量を
符号化して入力動画像信号が圧縮符号化された符号化列
に挿入することを第２０の特徴とする。

【００２４】本発明は、入力動画像信号の動き量を検出
し、その動き量に従って入力動画像信号に対してサブサ
ンプリングを行い、出力を圧縮符号化し、サブサンプリ
ングによる間引を施した旨の情報を符号化して出力する
ことを第２１の特徴とする。本発明は、入力動画像信号
の動き量を検出し、その動き量に従って入力動画像信号
に対してサブサンプリングを行い、出力を圧縮符号化
し、サブサンプリングの位相情報を符号化して出力する
ことを第２２の特徴とする。

【００２５】本発明は、動画像圧縮符号化データを復号
する場合に、入力された動画像圧縮符号化データを復号
し、復号されたデータの垂直位置により異なる内挿補間
を行うことを２３の特徴とする。本発明は、動画像圧縮
符号化データを復号する場合に、入力された動画像圧縮
符号化データを復号し、同時に入力された符号化時のサ
ブサンプリング内容を示す情報に従い、復号されたデー
タの内挿補間を行うことを第２４の特徴とする。

【００２６】本発明は、動画像圧縮符号化データを復号
する場合に、入力された動画像圧縮符号化データを復号
し、同時に入力された符号化時のサブサンプリング内容
と、重み付け内容を示す情報に従い、復号されたデータ
の内挿補間を行なったデータをそれぞれ重み付け加算を
行い、画像として出力することを第２５の特徴とする。

【００２７】本発明は、動画像圧縮符号化データを復号
する場合に、入力された動画像圧縮符号化データを復号
し、同時に入力された符号化時の動き情報に従い、復号
されたデータの内挿補間を行い、画像として出力するこ
とを第２６の特徴とする。本発明は、動画像圧縮符号化
データを復号する場合に、入力された動画像圧縮符号化
データを復号し、同時に入力された動き情報に従い、復
号されたデータを内挿補間を行った後、重み付け加算を
行い、画像として出力することを第２７の特徴とする。

【００２８】本発明は、動画像圧縮符号化データを復号
する場合に、入力された動画像圧縮符号化データを復号
し、復号されたデータの垂直位置により異なる内挿補間
を行うことを第２８の特徴とする。本発明は、動画像圧
縮符号化データを復号する場合に、入力された動画像圧
縮符号化データを復号し、同時に入力された符号化時の
サブサンプリング内容を示す情報に従い、復号されたデ
ータの内挿補間を行うことを第２９の特徴とする。

【００２９】本発明は、動画像圧縮符号化データを復号
する装置において、入力された圧縮符号化データを復号
し、出力データの垂直位置を検出し、検出結果と同時に
入力されたサンプリング情報に基いて復号された動画像
データを内挿補間することを第３０の特徴とする。本発
明は、動画像圧縮符号化データを復号する装置におい
て、入力されたデータから画素符号化データとサブサン
プリング情報とを分離し、圧縮符号化データを復号し、
復号出力をサブサンプリング情報に従って内挿補間の形
態を変更して内挿補間を行い、画像データとして出力す
ることを第３１の特徴とする。

【００３０】本発明は、動画像圧縮符号化データを復号
する装置において、入力されたデータから画素符号化デ
ータとサブサンプリング情報とを分離し、圧縮符号化デ
ータを復号し、復号出力をサブサンプリング情報に従っ
て行う内挿補間の形態を選択して内挿補間を行い、画像
データとして出力することを第３２の特徴とする。本発
明は、動画像圧縮符号化データを復号する装置におい
て、入力されたデータから画素符号化データとサブサン
プリング情報とを分離し、圧縮符号化データを復号し、
復号出力を複数種類の内挿補間を行い、サブサンプリン
グ情報に従って内挿補間の出力を重み付け加算を行い、
画像データとして出力することを第３３の特徴とする。

【００３１】本発明は、動画像圧縮符号化データを復号
する装置において、入力されたデータから画素符号化デ
ータとサブサンプリング情報とを分離し、圧縮符号化デ
ータを復号し、復号出力を複数種類の内挿補間を行い、
サブサンプリング情報に従って内挿補間の出力を重み付
け加算を行い、画像データとして出力することを第３４
の特徴とする。

【００３２】本発明は、動画像圧縮符号化データを復号
する装置において、入力されたデータから画素符号化デ
ータとサブサンプリング情報とを分離し、圧縮符号化デ
ータを復号し、復号出力をフレーム間補間及びフレーム
内補間を行い、サブサンプリング情報に従ってフレーム
間補間とフレーム内補間の出力を選択し、画像データと
して出力することを第３５の特徴とする。

【００３３】本発明は、動画像圧縮符号化データを復号
する装置において、入力されたデータから画素符号化デ
ータとサブサンプリング情報とを分離し、圧縮符号化デ
ータを復号し、復号出力をフレーム間補間及びフレーム
内補間を行い、サブサンプリング情報に従ってフレーム
間補間とフレーム内補間の出力を補間の出力を重み付け
加算し、画像データとして出力することを第３６の特徴
とする。

【００３４】本発明は、動画像圧縮符号化データを復号
する装置において、入力されたデータから画素符号化デ
ータとサブサンプリング情報とを分離し、圧縮符号化デ
ータを復号し、復号出力をフレーム間補間及びフレーム
内補間を行い、復号出力もしくは両補間出力から動き情
報を検出し、この動き情報に従ってフレーム間補間とフ
レーム内補間の出力を選択し、画像データとして出力す
ることを第３７の特徴とする。

【００３５】本発明は、動画像圧縮符号化データを復号
する装置において、入力されたデータから画素符号化デ
ータとサブサンプリング情報とを分離し、圧縮符号化デ
ータを復号し、復号出力をフレーム間補間及びフレーム
内補間を行い、復号出力もしくは両補間出力から動き情
報を検出し、この動き情報に従ってフレーム間補間とフ
レーム内補間の出力を重み付け加算し、画像データとし
て出力することを第３８の特徴とする。

【００３６】本発明は、動画像圧縮符号化データを復号
する装置において、入力された圧縮符号化データを復号
し、復号出力をフレーム間補間及びフレーム内補間を行
い、符号化データ内から動き情報を抽出し、この動き情
報に従ってフレーム間補間とフレーム内補間の出力を選
択し、画像データとして出力することを第３９の特徴と
する。

【００３７】本発明は、動画像圧縮符号化データを復号
する装置において、入力された圧縮符号化データを復号
し、復号出力をフレーム間補間及びフレーム内補間を行
い、符号化データ内から動き情報を抽出し、この動き情
報に従ってフレーム間補間とフレーム内補間の出力を重
み付け加算し、画像データとして出力することを第４０
の特徴とする。本発明は、動画像圧縮符号化データを記
録した記録媒体において、該符号化データの圧縮符号化
時に用いたサブサンプリング内容を示す情報を記録した
ことを第４１の特徴とする。

【００３８】本発明は、動画像圧縮符号化データを記録
した記録媒体において、該符号化データの圧縮符号化時
に用いたサブサンプリング内容を示す情報と重み付けを
示す情報を記録したことを第４２の特徴とする。本発明
は、動画像圧縮符号化データを記録した記録媒体におい
て、該符号化データの圧縮符号化時に用いた動き情報を
記録したことを第４３の特徴とする。

【００３９】本発明は、動画像を圧縮符号化する場合
に、入力された動画像にサブサンプリングを施し、出力
画像データをＭＰＥＧ、Ｈ．２６１等のフレーム間圧縮
符号化を行うことを第４４の特徴とする。本発明は、動
画像を圧縮符号化する装置において、入力された動画像
にサブサンプリングを施し、出力画像データをＭＰＥ
Ｇ、Ｈ．２６１等のフレーム間圧縮符号化を行うことを
第４５の特徴とする。

【００４０】本発明は、動画像を復号する場合におい
て、入力された動画像符号化データをＭＰＥＧ、Ｈ．２
６１等のフレーム間圧縮符号化に基づいた復号を行い、
内挿補間を行うことを第４６の特徴とする。本発明は、
動画像を復号する装置において、入力された動画像符号
化データをＭＰＥＧ、Ｈ．２６１等のフレーム間圧縮符
号化に基づいた復号を行い、内挿補間を行うことを第４
７の特徴とする。 ［作用］第１の請求項によれば、入力された動画像がそ
の垂直位置によって異なるサブサンプリングが行われ、
符号化される。

【００４１】第２の請求項によれば、入力された動画像
がその垂直位置によって異なるサブサンプリングが行わ
れ、符号化され、そのサブサンプリング内容を示す情報
が出力される。第３の請求項によれば、入力された動画
像がラインオフセットサブサンプリングされて符号化さ
れる。

【００４２】第４の請求項によれば、入力された動画像
がラインオフセットサブサンプリングされて符号化さ
れ、ラインオフセットサブサンプリングされた旨の情報
が出力される。第５の請求項によれば、入力された動画
像の動き情報が検出され、その動き情報に基いて異なる
形態のサブサンプリングが為され、符号化される。

【００４３】第６の請求項によれば、入力された動画像
の動き情報が検出され、その動き情報に基いて異なる形
態のサブサンプリングが為され、符号化され、同時にサ
ブサンプリングの内容を示す情報が出力される。第７の
請求項によれば、入力された動画像の動き情報が検出さ
れ、その動き情報に基いて異なる形態のサブサンプリン
グが為され、重み付け加算され、符号化される。

【００４４】第８の請求項によれば、入力された動画像
の動き情報が検出され、その動き情報に基いて異なる形
態のサブサンプリングが為され、重み付け加算され、符
号化され、同時にサブサンプリングの内容と重み付け内
容を示す情報が出力される。第９の請求項によれば、入
力された動画像がその垂直位置によって異なるサブサン
プリングが行われ、符号化される。

【００４５】第１０の請求項によれば、入力された動画
像がその垂直位置によって異なるサブサンプリングが行
われ、符号化され、そのサブサンプリング内容を示す情
報が出力される。第１１の請求項によれば、入力された
動画像がラインオフセットサブサンプリングされて符号
化される。

【００４６】第１２の請求項によれば、入力された動画
像がラインオフセットサブサンプリングされて符号化さ
れ、ラインオフセットサブサンプリングした旨の情報が
出力される。第１３の請求項によれば、入力された動画
像に異なる複数のサブサンプリングが施され、入力動画
像に対して動き検出が為され、その動き量に従って複数
のサブサンプリングの中から出力が選択され、符号化さ
れる。

【００４７】第１４の請求項によれば、入力された動画
像に異なる複数のサブサンプリングが施され、入力動画
像に対して動き検出が為され、その動き量に従って複数
のサブサンプリングの中から出力が選択され、符号化さ
れ、選択されたサブサンプリングに対応する情報が符号
化され、画像符号化された符号列に挿入される。第１５
の請求項によれば、入力された動画像に異なる複数のサ
ブサンプリングが施され、入力動画像に対して動き検出
が為され、その動き量に従って複数のサブサンプリング
の出力が重み付け加算され、符号化される。

【００４８】第１６の請求項によれば、入力された動画
像に異なる複数のサブサンプリングが施され、入力動画
像に対して動き検出が為され、その動き量に従って複数
のサブサンプリングの中から出力が重み付け加算され、
符号化され、演算時の情報が符号化され、画像符号化さ
れた符号列に挿入される。第１７の請求項によれば、入
力された動画像に異なる複数のサブサンプリングが施さ
れ、入力動画像に対して動き検出が為され、その動き量
に従って複数のサブサンプリングの中から出力が重み付
け加算され、符号化され、重み付けの情報が符号化さ
れ、画像符号化された符号列に挿入される。

【００４９】第１８の請求項によれば、入力された動画
像に異なる複数のサブサンプリングが施され、入力動画
像に対して動き検出が為され、その動き量に従って複数
のサブサンプリングの中から出力が重み付け加算され、
符号化され、動き情報とサブサンプリング情報のいずれ
かもしくは両方が符号化され、画像符号化された符号列
に挿入される。

【００５０】第１９の請求項によれば、入力された動画
像にｎ（ｎ≧２）フレーム周期でサブサンプリング位相
を順次変化させるフレームオフセットサブサンプリング
が施され、圧縮符号化され、入力動画像の各領域におけ
る動き量が検出され、動き量が符号化される。第２０の
請求項によれば、入力された動画像にｎ（ｎ≧２）フレ
ーム周期でサブサンプリング位相を順次変化させるフレ
ームオフセットサブサンプリングが施され、圧縮符号化
され、入力動画像の各領域における動き量が検出され、
動き量およサブサンプリング情報の両方もしくはいずれ
かが符号化される。

【００５１】第２１の請求項によれば、入力された動画
像にサブサンプリングが為され、符号化され、そのサブ
サンプリングを行った旨の情報が符号化される。第２２
の請求項によれば、入力された動画像にサブサンプリン
グが為され、符号化され、そのサブサンプリングの位相
情報が符号化される。第２３の請求項によれば、入力さ
れた動画像圧縮符号化データが復号され、復号されたデ
ータの垂直位置により異なる内挿補間が行われる。

【００５２】第２４の請求項によれば、入力された動画
像圧縮符号化データが復号され、同時に入力されたサブ
サンプリング内容を示す情報に従い、復号されたデータ
の内挿補間が行われる。第２５の請求項によれば、入力
された動画像圧縮符号化データが復号され、同時に入力
されたサブサンプリング内容と、重み付け内容を示す情
報に従い、復号されたデータの内挿補間を行ったデータ
を重み付け加算が行われ、画像として出力される。

【００５３】第２６の請求項によれば、入力された動画
像圧縮符号化データが復号され、同時に入力された動き
情報に従い、復号されたデータの内挿補間が行われ、画
像として出力される。第２７の請求項によれば、入力さ
れた動画像圧縮符号化データが復号され、同時に入力さ
れた動き情報に従い内挿補間が為され、その重み付け加
算が行われ、画像として出力される。

【００５４】第２８の請求項によれば、入力された動画
像圧縮符号化データが復号され、復号されたデータの垂
直位置により異なる内挿補間が行われる。第２９の請求
項によれば、入力された動画像圧縮符号化データが復号
され、同時に入力された符号化時のサブサンプリング内
容を示す情報に従い、復号されたデータの内挿補間が行
われ、画像データとして出力される。

【００５５】第３０の請求項によれば、入力された動画
像圧縮符号化データが復号され、同時に入力された符号
化時のサブサンプリング情報に従って、復号されたデー
タに内挿補間が為され、画像データとして出力される。
第３１の請求項によれば、入力された動画像圧縮符号化
データが復号され、同時に入力された符号化時のサブサ
ンプリング情報に従って、復号されたデータに異なる内
挿補間が為され、画像データとして出力される。

【００５６】第３２の請求項によれば、入力された動画
像圧縮符号化データが復号され、復号されたデータが複
数の異なる内挿補間が為され、圧縮符号化データと同時
に入力されたサブサンプリング情報に従って複数の内挿
出力から一つが選択され、画像として出力される。第３
３の請求項によれば、入力された動画像圧縮符号化デー
タが復号され、復号されたデータが複数の異なる内挿補
間が為され、圧縮符号化データと同時に入力されたサブ
サンプリング情報に従って複数の内挿出力の重み付け加
算が為され、画像として出力される。

【００５７】第３４の請求項によれば、入力された動画
像圧縮符号化データが復号され、復号されたデータが複
数の異なる内挿補間が為され、圧縮符号化データと同時
に入力されたサブサンプリング情報に従って複数の内挿
出力の重み付け加算が為され、画像として出力される。
第３５の請求項によれば、入力された動画像圧縮符号化
データが復号され、復号されたデータがフレーム内補間
とフレーム間補間が為され、圧縮符号化データと同時に
入力された動き情報に従って、フレーム内補間出力とフ
レーム間出力の一方が選択され、画像として出力され
る。

【００５８】第３６の請求項によれば、入力された動画
像圧縮符号化データが復号され、復号されたデータがフ
レーム内補間とフレーム間補間が為され、圧縮符号化デ
ータと同時に入力された動き情報に従って、フレーム内
補間出力とフレーム間出力の重み付け加算が為され、画
像として出力される。第３７の請求項によれば、入力さ
れた動画像圧縮符号化データが復号され、復号されたデ
ータがフレーム内補間とフレーム間補間が為され、復号
データ、もしくは両補間データのうちのいずれかから動
き検出が為され、この動き量に従って、フレーム内補間
出力とフレーム間出力の一方が選択され、画像として出
力される。

【００５９】第３８の請求項によれば、入力された動画
像圧縮符号化データが復号され、復号されたデータがフ
レーム内補間とフレーム間補間が為され、復号データ、
もしくは両補間データのうちのいずれかから動き検出が
為され、この動き量に従って、フレーム内補間出力とフ
レーム間出力の重み付け加算が為され、画像として出力
される。

【００６０】第３９の請求項によれば、入力された動画
像圧縮符号化データが復号され、復号されたデータがフ
レーム内補間とフレーム間補間が為され、復号データ内
から得られた動き量に従って、フレーム内補間出力とフ
レーム間出力の一方が選択され、画像として出力され
る。第４０の請求項によれば、入力された動画像圧縮符
号化データが復号され、復号されたデータがフレーム内
補間とフレーム間補間が為され、復号データ内から得ら
れた動き量に従って、フレーム内補間出力とフレーム間
出力の重み付け加算が為され、画像として出力される。

【００６１】第４１の請求項によれば、動画像符号化デ
ータと、該符号化データの圧縮符号化時に用いたサブサ
ンプリング内容を示す情報が記録される。第４２の請求
項によれば、動画像符号化データと、該符号化データの
圧縮符号化時に用いたサブサンプリング内容と、その重
み付けを示す情報が記録される。第４３の請求項によれ
ば、動画像符号化データと、該符号化データの動き情報
を示す情報が記録される。

【００６２】第４４の請求項によれば、入力された動画
像信号にサブサンプリングが為され、ＭＰＥＧ方式、
Ｈ．２６１方式等の動きベクトル検出によるフレーム間
圧縮符号化を含む符号化が為される。第４５の請求項に
よれば、入力された動画像信号にサブサンプリングが為
され、ＭＰＥＧ方式、Ｈ．２６１方式等の動きベクトル
検出によるフレーム間圧縮符号化を含む符号化が為され
る。

【００６３】第４６の請求項によれば、入力された動画
像符号化データが、ＭＰＥＧ方式、Ｈ．２６１方式等の
動きベクトル検出によるフレーム間圧縮符号化を含む符
号化に対応して復号が為され、復号出力に対して内挿補
間が為される。第４７の請求項によれば、入力された動
画像符号化データが、ＭＰＥＧ方式、Ｈ．２６１方式等
の動きベクトル検出によるフレーム間圧縮符号化を含む
符号化に対応して復号が為され、復号出力に対して内挿
補間が為される。

【００６４】

【実施の形態】本発明を説明する。説明を簡単にするた
めに、まず、画像の画素の処理の一例を説明する。図５
に、サブサンプリング手法の一例を示す。尚、このサブ
サンプリング手法自体は、周知のラインオフセットサブ
サンプリングである。

【００６５】図５は、フィールド画像の場合を示してい
る。図５Ａの黒点で位置を表した画素51はサンプリング
点であり、白点で位置を表した画素52は除去点である。
このようにライン毎にサブサンプリング点を変更する。

【００６６】そして、これらを図５Ｂのように並び換え
らる。この後に、動きベクトル検出、DCT及び量子化処
理を行い符号化する。復号側ではサンプリング画素をも
との黒点の位置に並べ換え、図５Ａと同じ形に白点位置
の画素を黒点位置の画素から内挿補間する。

【００６７】このような方法により、水平方向及び垂直
方向の周波数成分は損なわれず、斜め方向の周波数成分
だけが図５Ｃのように半分に減少されることになる。人
間の視覚特性は、周知の如く、斜め方向の周波数成分に
対して鈍感なため、これらを削減しても主観的な画質に
は大きな影響を及ぼさないことになる。このため、符号
化側でこのようなサブサンプリングを行った動画像デー
タを符号化し、復号側では復号手段により復号された動
画像データをサブサンプリング条件に従って内挿補間す
る。

【００６８】これにより、主観的な画質を劣化させるこ
となく圧縮後データ量を削減することができる。また、
このようなサブサンプリングを行わずに符号化を行った
場合に対し、同じビットレートでの復号時の画質を向上
が期待できる。また、このように実際の画角を縮小する
ことにより、動きベクトルの検索範囲を大きくすること
ができる。

【００６９】動きベクトルの判断は、MPEG等の画像単位
間圧縮を用いる動画像圧縮符号化方式では、非常に膨大
な量の演算を必要とする。特に高画質な画像を必要とす
る場合には広い範囲での動き検出を行う必要があり、そ
の範囲拡大のためには複雑なハードウェアが必要にな
る。しかし、上記のようなサブサンプリングを行えば、
画質を損なうことなく画角が小さくでき、同一の素子を
用いて検出可能な動き補償の範囲が実質的に拡大できる
ことになる。

【００７０】以下、各実施例について説明する。

【００７１】[第１実施例]図1を参照しつつ、本発明の
第１実施例を説明する。図1は、動画像圧縮符号化装置
の一例を示す。12は、画像データのサブサンプリングを
行うサブサンプリング手段である。13は、サブサンプリ
ング手段から出力された動画像データを符号化する圧縮
符号化手段である。

【００７２】14は、入力された動画像の垂直位置を検出
する検出手段である。15は、検出手段の出力に従いサブ
サンプリング点をサブサンプリング手段に指示する指示
手段である。サブサンプリング手段12及び検出手段14に
入力された動画像信号は、検出手段14により画像の垂直
位置が検出される。

【００７３】この手段14は、例えば、動画像信号と時分
割多重して入力された水平同期信号をエッジ検出し、そ
の数をカウントするカウンタとして構成することができ
る。そして、この検出手段14の出力を受けて指示手段15
が、サブサンプリング手段12に対してサブサンプリング
条件を指示する。この手段15は、例えば、検出手段14か
ら出力された垂直アドレスに対するROMもしくはワイヤ
ードロジック、簡単なCPUで構成できる。

【００７４】サブサンプリング手段12は、指示手段15の
指示に従い、入力された動画像データのサブサンプリン
グ処理を行う画素を変更する。このサブサンプリング手
段12は、間引き処理を行うと共にフィルタ処理も行って
いる。このサブサンプリング手段12の出力を圧縮符号化
手段13に入力し、圧縮符号化が行われ、符号化データが
出力される。

【００７５】この圧縮符号化手法としては、MPEG、Moti
on JPEG、H261等の種々の動画像の圧縮手法を用いるこ
とが可能である。

【００７６】[第２実施例]図2に、本発明の第２実施例
を示す。この第２実施例も動画像圧縮符号化装置であ
る。

【００７７】尚、図１と同じ機能を有する手段には同じ
番号を付し説明を省略する。21は、出力手段である。入
力された動画像信号は、検出手段14により画像の垂直位
置が検出される。そして、この検出手段14の出力を受け
て指示手段15が、サブサンプリング手段12に対してサブ
サンプリング条件を指示する。

【００７８】サブサンプリング手段12は、指示手段15の
指示に従い入力された動画像データのサブサンプリング
処理を行う。このサブサンプリング手段12の出力を圧縮
符号化手段13に入力し、圧縮符号化が行われる。この圧
縮符号化手法としては、MPEG、Motion JPEG、H261等の
種々の動画像の圧縮手法を用いることが可能である。

【００７９】この圧縮符号化手段13の出力と同時に、指
示手段15の指示内容に従って出力手段21がサンプリング
に関する情報を出力する。この情報としては、いくつか
の形態がある。まず、出力の有無によりサブサンプリン
グの有無を表す。また、サブサンプリングの方法の違い
により、「レベルを変更する」「複数のビットを用いて
出力する」「可変長符号として出力する」等の形態が可
能である。

【００８０】これは、サンプリングを行った画像を復号
装置において判別し、適切な内挿補間を行うためのもの
で、受信された信号、もしくは符号の有無により復号装
置は内挿補間の実行の有無を判断すればよく、サブサン
プリングを行わないシステムとの互換性を実現できる。
また、出力された符号化データ及びサブサンプリング内
容を示す情報は、時分割多重化やレベル多重化、もしく
はセクタインタリーブ等の処理が行われ、記録媒体に記
録されたり、通信路に送信されることになる。

【００８１】また、例えば、記録媒体の場合には、別の
同期再生が可能な記録媒体を用いたり、通信路の場合に
は同時受信が可能な別チャンネルを用いることもある。
尚、第２実施例では、出力手段21は、サブサンプリング
の指示手段15からサブサンプリング内容を示す情報を
得、それを出力することとしているが、これらの情報は
サブサンプリング手段12自体から得ても構わないし、出
力手段21の上でROMデータとして保有しておくことも可
能である。

【００８２】尚、第２実施例では、圧縮符号化手段13か
ら出力された符号化データとサブサンプリング内容を示
す情報を出力することとなっているが、これは圧縮符号
化時に、例えば、MPEG符号化におけるユーザ領域に挿入
するといったように、圧縮データ内にこの符号を挿入す
るように圧縮符号化手段13を構成してもよい。又、第２
実施例では、圧縮符号化手段13から出力された符号化デ
ータとサブサンプリング内容を示す情報を単に出力、も
しくは符号として出力することとなっているが、これは
圧縮符号化した符号に別の形、例えば光ディスク(CD,CD
-ROM,LD, LD-ROM等)のセクタ構造で、動画像の圧縮デー
タと別セクタにこの情報を記録してもよいし、レベル多
重や時分割多重等の多重化方式でデータに挿入してもよ
い。

【００８３】[第３実施例]図3を参照しつつ、本発明の
第３実施例を説明する。図３は、動画像復号装置の一例
を示す。31は、入力された符号化データを復号する動画
像復号手段である。33は、サブサンプリングされた画像
データを内挿補間する内挿補間手段である。

【００８４】34は、画素データの垂直位置を検出する検
出手段である。35は、検出手段の検出結果に従い、内挿
方法を内挿補間手段33に指示する指示手段である。復号
手段31に入力された符号化データは、この復号手段31に
より画像データに復号される。

【００８５】復号手段31から出力された動画像データ
は、検出手段34と内挿補間手段33に入力される。この符
号化手法としては、MPEG、Motion JPEG、H261等の種々
の動画像の圧縮手法を用いることが可能である。検出手
段34では、出力された画素の垂直位置が検出される。

【００８６】この検出手段34は、例えば、動画像信号と
時分割多重して入力された水平同期信号をエッジ検出
し、その数をカウントするカウンタとして構成すること
ができる。そして、この検出手段34の出力を受けて指示
手段35が、内挿補間手段33に対して内挿条件を指示す
る。

【００８７】この指示手段35は、例えば、検出手段34か
ら出力された垂直アドレスに対するROMもしくはワイヤ
ードロジック、簡単なCPUで構成できる。

【００８８】内挿補間手段33は、サブサンプリングされ
た画像の内挿補間を行う。これにより、サブサンプリン
グされて圧縮符号化された動画像データを、もとの画角
に復元再生する。この結果、サブサンプリング処理を行
わずに同じビットレートで符号化した場合と比較して、
高画質な画像として出力することが可能となる。

【００８９】[第４実施例]図４を参照しつつ、本発明の
第４実施例を説明する。図４は、動画像復号装置の一例
を示す。図４において、第３実施例と同一部分には同じ
符号を付した。43は、内挿補間手段である。

【００９０】入力された符号化データは、復号手段31に
より画像データに復号される。復号手段31から出力され
た動画像データは、検出手段34と内挿補間手段43に入力
される。

【００９１】検出手段34では、出力された画素の垂直位
置が検出される。この検出手段34は、例えば、動画像信
号と時分割多重して入力された水平同期信号をエッジ検
出し、その数をカウントするカウンタとして構成するこ
とができる。そして、この検出手段34の出力を受けて指
示手段35が、内挿補間手段43に対して内挿条件を指示す
る。

【００９２】この指示手段35は、例えば、検出手段34か
ら出力された垂直アドレスに対するROMもしくはワイヤ
ードロジック、簡単なCPUで構成できる。内挿補間手段4
3は、サブサンプリングされた画像の内挿補間を行う。
この際に図示されない入力手段から入力された、符号化
時のサブサンプリングに関する情報に従い、内挿補間が
行われる。

【００９３】これにより、符号化時のサブサンプリング
形態に対応した内挿補間が可能になる。また、この符号
化時のサブサンプリング内容を示す情報の有無を判定す
ることにより、通常のデコード画像を表示するか、内挿
補間を行い画像を出力するのかを決定することができ、
従来の復号装置との互換性が実現できる。

【００９４】尚、符号化時のサブサンプリング内容を示
す情報は、図４では内挿補間手段43に入力されることに
なっているが、これは指示手段35に対して入力し、それ
に従って指示を変更する形式でも良い。この場合には、
例えば指示手段35の構成を、検出手段34の出力するアド
レスを入力とするROMとし、その上位バンクにサブサン
プリング内容を示す情報を入力するといった構成で実現
できる。

【００９５】[第５実施例]図６を参照しつつ、本発明の
第５実施例を説明する。図６は、動画像の圧縮符号化デ
ータと、符号化時のサブサンプリング内容を示す情報と
を、記録媒体に記録するものである。尚、図２の第２実
施例と同じ機能のブロックには同じ番号を付している。

【００９６】61は、多重化手段である。62は、記録媒体
書込手段である。63は、記録媒体である。この記録媒体
63の記録形式としてはまず、圧縮符号化データと符号化
時のサブサンプリング内容を示す情報を別々に記録媒体
内に記録するものがある。

【００９７】これは、例えば、CD-ROMの場合などでは、
符号化時のサブサンプリング内容を示す情報のみを別の
セクタに記録するという形態に相当する。また、この他
にもデータに多重化(レベル多重化、時分割多重化)して
記録する構成も可能である。この第５実施例の動作を説
明する。

【００９８】圧縮符号化手段13及び出力手段21から出力
された、動画像の符号化データとサブサンプリング内容
を示す情報は、多重化手段61に入力される。そして、こ
こで記録媒体の形態に応じて、またデコーダ側のフォー
マットに応じて時分割多重化、レベル多重化、セクタイ
ンタリーブ等が行われる。多重化されたデータは、記録
媒体書込手段62に入力され、記録媒体63にデータが記録
される。この記録媒体としては、光ディスク(CD,CD-RO
M, LD, LD-ROM等)、磁気ディスク(ハードディスク等)、
光磁気ディスク(CD-MO, MD等)、光・磁気テープ等、種
々の記録媒体が使用可能である。

【００９９】他の方法としては、例えば、MPEGの場合に
は、動画像領域内、及びシステム領域内にユーザ領域と
呼ばれる、データを書き込む側が自由に使用できる領域
が割当てられており、この領域にサブサンプリング内容
を示す情報を記録することができる。このような方法で
は、図6の多重化手段61が符号化手段13に内包された形
態となり、符号化手段13においてこれらのデータが挿入
される。

【０１００】[第６実施例]図７を参照しつつ、本発明の
第６実施例を説明する。図７は、動画像符号化装置であ
る。図中、間引手段７１は、サブサンプリングによって
間引処理を行い伝送画素を削減する、また、必要に応じ
て間引による折り返しなどの妨害を除去することを目的
とした帯域制限フィルタを備えている。

【０１０１】この図７の装置の説明の前にサブサンプリ
ング処理について説明する。サブサンプリングによる間
引手法を図８〜図１３を参照しつつ説明する。図８は、
フィールド内サブサンプリングによる間引手法の時間的
変化を示す一例である。フィールドＦ１，Ｆ２，Ｆ３は
時間的に連続する３つのフィールドを示す。

【０１０２】また、ブロックＢ１，Ｂ２，Ｂ３はフィー
ルドＦ１，Ｆ２，Ｆ３の空間的に同一位置の領域から
（３×３）の領域を切り出したもので伝送画素を○、非
伝送画素を×として示している。このように各フィール
ド毎に５の目格子状の同一パターンで１／２に間引を行
う。インタレース方式の画像（現行のＴＶ放送、ＮＴＳ
Ｃ、ＰＡＬなど）では、２つのフィールド（奇フィール
ドと偶フィールド）の垂直位置が異なるため、各フィー
ルドに対して、前記の如く、同一のパターンでの間引を
行うと、伝送画素の配置は画面上では図９に示すように
なる。

【０１０３】画面上では、少しいびつな配置になるが、
各フィールド面では５の目格子状になり、水平および時
間方向の画質劣化が少ない。また、サンプリングパター
ンが一定のため再生に必要な位相情報といったサブサン
プリング情報が不要である。図１０は、別のフィールド
内サブサンプリングによる伝送画素の配置を示す図であ
る。

【０１０４】図９とは異なり、４フィールドで１周期構
成とし、静止画像の画質を改善しようとするものであ
る。但し、画質面では優位ではあるがフレーム毎にサブ
サンプリングの位相が異なるため位相等のサブサンプリ
ング情報の伝送が不可欠となる。図１１は、別の手法、
フィールド間サブサンプリングによる間引手法の時間的
変化を示す一例である。

【０１０５】フィールドＧ１，Ｇ２，Ｇ３，Ｇ４は、時
間的に連続する４つのフィールドを示す。また、ブロッ
クＣ１は、連続する２つのフィールドＧ１，Ｇ２から構
成される画面（フレーム）の空間的に同一位置の領域か
ら（３×３）の領域を切り出したもので伝送画素を○、
非伝送画素を×として示している。同様に、ブロックＣ
２は、連続する２つのフィールドＧ３，Ｇ４から構成さ
れる画面（フレーム）の空間的に同一位置の領域から
（３×３）の領域を切り出したもので、伝送画素を○、
非伝送画素を×として示している。このように各フィー
ルド毎に５の目格子状の同一パターンで１／２に間引を
行う。

【０１０６】インタレース方式の画像（現行のＴＶ放
送、ＮＴＳＣ、ＰＡＬなど）では、奇フィールドと偶フ
ィールドの２つのフィールドから１フレーム（画面）が
構成され、例えば、ＭＰＥＧ２のフレーム構造による符
号化方式では、この画面単位で符号化が行われる。各フ
レーム単位で同一のサブサンプリングパターンによる間
引が行われ、伝送画素の配置は、図１２に示すようにな
る。

【０１０７】画面上で５の目格子状の配置になり、間引
による画質劣化が少ない。また、サンプリングパターン
が一定のため再生に必要な位相情報といったサブサンプ
リング情報が不要である。図１３は、別のフィールド間
サブサンプリングによる伝送画素の配置を示す図であ
る。図１２とは異なり４フィールドで１周期構成とし、
静止画像の画質を改善しようとするものである。

【０１０８】但し、画質面では優位ではあるがフレーム
毎にサブサンプリングの位相が異なるため再生のために
位相等のサブサンプリング情報の伝送が不可欠となる。
上記のように、間引手段として、いくつか例を示した
が、本願はこれに限定されるものではない。サブサンプ
リングによる間引処理によって伝送画素を所定の数に減
少させるものであればいかなる間引手段であってよい。

【０１０９】また、説明した間引手段は、伝送画素を１
／２に削減させるものであるが、本願の間引手段は、サ
ブサンプリングにより伝送画素数を予め定めた所定の比
率で減少させるものであればよい。また、圧縮符号化手
段７２としては、例えば、MPEG、MPEG2、Motion JPEG,H
261などの直交変換と量子化による圧縮符号化方式や、
直交変換を用いず、直接画素値を画素値のダイナミック
レンジに対応して量子化ステップを変化させて符号量を
削減するといった量子化による圧縮符号化手段などの符
号化後の符号量を削減して一定の伝送レートの符号列を
作成するものである。

【０１１０】図７に従って処理の流れを説明する。入力
動画信号は、間引手段７１に入力されサブサンプリング
による間引処理で伝送画素を例えば1/2に削減される。
次いで、間引手段７１からの出力を圧縮符号化手段７２
に入力して、例えばMPEG2ビデオの符号化アルゴリズム
に従って、所定の伝送レートの符号列を出力する。

【０１１１】このとき、間引手段７１は、再生に必要な
サブサンプリング情報（間引情報）を発生し出力する。
このサブサンプリング情報とは、サブサンプリングを実
施した旨を示す制御信号やサブサンプリングの種類、位
相情報などである。尚、この第６実施例では、サブサン
プリング情報を出力したが、圧縮符号化手段７２が、符
号化画像単位内で常に一定のパターンを持つ、フレーム
完結、フィールド完結と言ったサブサンプリングによる
間引を行えば、サブサンプリング情報を必要としない場
合もある。

【０１１２】[第７実施例]図１４を参照しつつ、本発明
の第７実施例を説明する。図１４は、動画像符号化装置
である。この第７実施例は、図７の第６実施例に対して
挿入手段７３を加えたもので、ある。

【０１１３】この挿入手段７３は、入力動画像を符号化
した符号列の再生に必要なサブサンプリング情報（間引
情報）を符号化し所定の位置に挿入し、１つの符号列と
して出力するものである。例えば、圧縮符号化手段７２
を、MPEG2ビデオによる圧縮符号化であるとすれば、シ
ーケンスヘッダあるいはGOPヘッダといった上位ヘッダ
に存在するユーザデータ領域にサブサンプリングを実施
した旨を示す付加情報を、フレーム毎に存在するピクチ
ャヘッダのユーザデータ領域にそのフレームにおけるサ
ブサンプリング位相情報を挿入する。

【０１１４】尚、ここでは、特定のサブサンプリング情
報（間引情報）をユーザ領域に挿入したが、本願は、こ
れに限定されるものでない。つまり、再生で必要な若し
くは間引処理に用いたサブサンプリング情報（間引情
報）を、画像送符号列と分離可能な位置に挿入し、一つ
の符号列を構成できればよい。

【０１１５】[第８実施例]図１５を参照しつつ、本発明
の第８実施例を説明する。図１５は、動画像符号化装置
である。図中、図１４と共通のブロックについては説明
を割愛する。それぞれサブサンプリングパターンの異な
る複数の間引手段８１ａ，８１ｂ，…，８１ｎを備え
る。又、動き検出手段８２と切換手段８３を備えてい
る。

【０１１６】入力画像が、間引手段８１ａ，８１ｂ，
…，８１ｎおよび動き検出手段８２に入力される。間引
手段８１ａ、８１ｂ、…、８１ｎでは、それぞれのサブ
サンプリングパターンに従って間引を行い伝送画素数を
減少させる。動き検出手段８２では、入力動画像の動き
量を検出し、前記複数の間引手段から一つを選択する選
択信号を出力する。

【０１１７】切換手段８３は、動き検出手段８２からの
前記選択信号に従い間引手段８１ａ，８１ｂ，…，８１
ｎのいずれかの出力を選択し、圧縮符号化手段７２に入
力する。圧縮符号化手段７２は、切換手段８３の出力を
圧縮符号化して画像符号列として出力する。

【０１１８】挿入手段７７は、選択された間引手段の種
類と、再生に必要なサブサンプリング位相情報といった
サブサンプリング情報（間引情報）を符号化し、圧縮符
号化手段７２の出力である画像符号列の所定の位置に挿
入する。この第８実施例では、挿入手段７７を挿入手段
７３のごとく説明したが、これは前記挿入手段７３の機
能に限定するものではなく、第６実施例のように動画符
号列とサブサンプリング情報を別々に出力し、伝送路上
で多重して伝送する場合若しくは同一記録媒体上に記録
する場合等の別に画像符号化列に対応するサブサンプリ
ング情報を付加するようにしてもよい。

【０１１９】[第９実施例]図１６を参照しつつ、本発明
の第９実施例を説明する。図１６は、動画像符号化装置
である。この第９実施例では、第８実施例において備え
る複数の間引手段を２種類に限定する。

【０１２０】第１の間引手段８５は、時間方向の解像度
が良好で動き領域に対して有効なフィールド内サブサン
プリングによる間引を行うものとする。そして、第２の
間引手段８６は、水平及び垂直解像度が良好で静止領域
に有効なフィールド間サブサンプリングによる間引を行
うものとする。切換手段８３は、動き検出手段８２の出
力に従って、動きの多い画面では第１の間引手段８５の
出力を選択する。そして、動きの少ない画面では第２の
間引手段の出力を選択する。

【０１２１】この選択出力は、圧縮符号化手段７２に入
力される。

【０１２２】[第１０実施例]図１７を参照しつつ、本発
明の第１０実施例を説明する。図１７は、動画像符号化
装置である。この第１０実施例は、第８実施例における
動き検出手段８２を動き検出手段８７に置き換え、切換
手段８３を重み付け加算手段８８に置き換えたものであ
る。

【０１２３】動き検出手段８７は、入力動画像の動き量
を検出し、前記複数の間引手段の出力を重み付け加算す
る重み付け加算比率を決定し出力する。重み付け加算手
段８８は、前記動き検出手段８７の出力に従って複数の
間引手段８１ａ，８１ｂ，…，８１ｎの出力を重み付け
加算する。圧縮符号化手段７２は、前記重み付け加算手
段８８の出力を圧縮符号化して画像符号列として出力す
る。

【０１２４】挿入手段７７は、間引手段からの出力の重
み付け加算比率や、再生に必要なサブサンプリング位相
情報といった情報を符号化して画像符号列の中に挿入す
る。第１０実施例では、挿入手段７７を前記挿入手段７
３のごとく説明したが、本願の挿入手段７７を、第６実
施例のように動画符号列とサブサンプリング情報を別々
に出力し、伝送路上で多重して伝送する場合若しくは同
一記録媒体上に記録する場合等においては、画像符号化
列とは別にサブサンプリング情報を伝送若しくは記録し
てもよい。

【０１２５】[第１１実施例]図１８を参照しつつ、本発
明の第１１実施例を説明する。図１８は、動画像符号化
装置である。この第１１実施例は、第１０実施例におい
て備える複数の間引手段を２種類に限定する。

【０１２６】第１の間引手段８５は、時間方向の解像度
が良好で動きある動き領域に対して有効なフィールド内
サブサンプリングによる間引を行うものとする。第２の
間引手段８６は、水平及び垂直解像度が良好で静止領域
に有効なフィールド間サブサンプリングによる間引を行
うものとする。重み付け加算手段８８は、動き検出８７
の出力に従って、動きの多い画面では第１の間引手段８
５の出力の比率を多く、動きの少ない画面では第２の間
引手段８６の出力の比率が大きくなるように重み付け加
算を行い、前記重み付け加算出力を圧縮符号化手段７２
に入力する。

【０１２７】[第１２実施例]図１９を参照しつつ、本発
明の第１２実施例を説明する。図１９は、動画像符号化
装置である。間引手段８９は、図１０、図１３に示すよ
うなフレーム周期で伝送画素の位相の反転するフレーム
オフセットサブサンプリングによる間引手段である。

【０１２８】動き検出手段９０は、画像データを入力と
して再生時に用いる動き情報を検出する手段である。間
引手段８９の出力は、圧縮符号化手段７２に入力され符
号化される。挿入手段７７は、圧縮符号化１２からの符
号列に対して、動き検出手段９０からの動き情報を符号
化し、圧縮符号化手段７２から出力される画像符号列の
所定の位置に挿入する。

【０１２９】[第１３実施例]図２０を参照しつつ、本発
明の第１３実施例を説明する。図２０は、動画像復号装
置である。この第１３実施例は、第６実施例の動画像符
号化装置に対する動画像復号装置である。

【０１３０】復号手段７５は、前記圧縮符号化手段７２
と対をなす符号化手段であり、例えばMPEG、MPEG2、Mot
ion JPEG,H261などの直交変換と量子化による圧縮符号
化方式や、直接画素値を画素値のダイナミックレンジに
対応して量子化ステップを変化させて符号量を削減する
といった量子化による圧縮符号化手段などで符号化され
た符号列から画像を再生する手段である。

【０１３１】内挿補間手段７６は、復号手段７５の出力
を入力とし、別に入力されるサブサンプリング情報（間
引情報）に従って内挿補間を行い再生画像を出力する。
但し、サブサンプリングの方法によってはサブサンプリ
ング情報（間引情報）を必要としない場合も存在する。
内挿補間手段７６は、例えば、０挿入回路と帯域制限フ
ィルタによって構成できる。

【０１３２】[第１４実施例]図２１を参照しつつ、本発
明の第１４実施例を説明する。図２１は、動画像復号装
置である。この第１４実施例は、第７実施例の動画像符
号化装置に対する動画像復号装置である。

【０１３３】この第１４実施例は、第１３実施例に対し
て符号分離手段７４を付加したものである。第１４実施
例の動画像符号化装置では、サブサンプリング情報（間
引情報）を出力した符号列の中に挿入してくる。従っ
て、符号分離手段７４では、このサブサンプリング情報
（間引情報）を抽出して内挿補間手段７６に与える手段
である。

【０１３４】本実施例では、符号分離手段７４として入
力符号列の中から画像符号列以外の付加情報を抽出する
よう構成されている。しかし、本願は、符号分離手段と
して、入力符号列を画像符号列とサブサンプリング情報
（間引情報）に分離し、前記分離画像符号列を復号手段
７５へ出力する符号分離手段を採用してもよい。また、
サブサンプリング情報（間引情報）が伝送路上に異なる
手段で多重され伝送されてくる場合若しくは同一記録媒
体上に記録されている場合に、前記サブサンプリング情
報（間引情報）を分離し出力するようにしてもよい。

【０１３５】[第１５実施例]図２２を参照しつつ、本発
明の第１５実施例を説明する。図２２は、動画像復号装
置である。この第１５実施例は、第８実施例の動画像符
号化装置に対する動画像復号装置である。

【０１３６】符号分離手段７４と、復号手段７５と、前
記第８実施例における複数の間引手段２１ａ，２１ｂ，
…，２１とそれぞれ対をなす複数の内挿補間手段９１
ａ，９１ｂ，…，９１ｎと、内挿補間手段のいずれかの
出力を選択し再生画像とする切換手段９２とを、備え
る。符号分離手段７４は、符号列の中に多重されたサブ
サンプリング情報（間引情報）を抽出して、各内挿補間
手段９１ａ、９１ｂ、…、９１ｎや切換手段９２に供給
する。このサブサンプリング情報は、例えば、前記各サ
ブサンプリングにおける位相情報、選択間引手段等の情
報である。

【０１３７】前記各内挿補間手段９１ａ，９１ｂ，…，
９１ｎは、再生に必要な位相情報に基づき復号手段７５
の出力に対して内挿処理を施し内挿画像を出力する。切
換手段９２は、符号分離手段７４で分離されたサブサン
プリング情報に基づき内挿補間手段９１ａ，９１ｂ，
…，９１ｎのいずれか一つを選択し再生画像として出力
する。

【０１３８】尚、この実施例では、切換手段９２は、内
挿補間手段９１ａ，９１ｂ，…，９１ｎのいずれか一つ
の出力を、選択し出力するスイッチであるが、この切換
手段としては、内挿補間手段９１ａ，９１ｂ，…，９１
ｎのいずれか一つの動作を許容する動作制御回路であっ
てもよい。

【０１３９】[第１６実施例]図２３を参照しつつ、本発
明の第１６実施例を説明する。図２３は、動画像復号装
置である。この第１６実施例は、第９実施例の動画像符
号化装置に対する動画像復号装置である。

【０１４０】第９実施例の第１の間引手段８５に対する
フィールド内内挿補間手段９４と、第２の間引手段８６
に対するフィールド間内挿補間手段９５と、この２つの
補間手段９４，９５の出力の内いずれか一方を選択して
出力する切換手段９２を備える。

【０１４１】[第１７実施例]図２４を参照しつつ、本発
明の第１７実施例を説明する。図２４は、動画像復号装
置である。この第１７実施例は、第１０実施例の動画像
符号化装置に対する動画像復号装置である。

【０１４２】符号分離手段７４と、復号手段７５と、前
記第３実施例における複数の間引手段８１ａ，８１ｂ，
…，８１nとそれぞれ対をなす複数の内挿補間手段９１
ａ，９１ｂ，…，９１ｎと、重み付け加算手段９３とを
備える。符号分離手段７４は、符号列の中に多重された
サブサンプリング情報、例えば、前記各サブサンプリン
グにおける位相情報、各間引出力の重み付け加算比率等
の再生に必要な情報を抽出して、各内挿補間手段９１
ａ，９１ｂ，…，９１ｎや重み付け加算手段９３に供給
する。

【０１４３】重み付け加算手段９３では、前記重み付け
加算比に準じて前記各内挿補間手段９１ａ，９１ｂ，
…，９１ｎの出力を多重して再生画像として出力する。

【０１４４】[第１８実施例]図２５を参照しつつ、本発
明の第１８実施例を説明する。図２５は、動画像復号装
置である。この第１８実施例は、第１１実施例の動画像
符号化装置に対する動画像復号装置である。

【０１４５】第１１実施例における第１の間引手段８５
に対応して、フィールド内内挿を行う第１の補間手段９
４と、第２の間引手段８６に対応して、フィールド間内
挿を行う第２の補間手段９５と、符号化時に符号列に挿
入した重み付け加算比率を含むサブサンプリング情報
（間引情報）を分離する符号分離手段７４と、この２つ
の内挿補間手段９４，９５の内挿出力を前記重み付け加
算比率に準じて重み付け加算する重み付け加算手段８３
とを、備える。

【０１４６】[第１９実施例]図２６を参照しつつ、本発
明の第１９実施例を説明する。図２６は、動画像復号装
置である。この第１９実施例は、第１２実施例の動画像
符号化装置に対する動画像復号装置である。

【０１４７】第１２実施例の数フレーム周期でサブサン
プリングの位相が変化するフレームオフセットサブサン
プリングによる間引手段８９において、例えば、図１
０、図１３のごとくフレーム周期でサブサンプリングの
位相が反転するサブサンプリングによって間引され、圧
縮符号化された画像符号列を入力とする。復号手段７５
は、動き補償による圧縮符号化によって符号化された符
号列から伝送画素を復元する。

【０１４８】フレーム間内挿補間手段９４は、復号手段
７５の復元画像を入力としフレームオフセットにいる伝
送画素の位相にしたがって連続する４フィールドから内
挿補間を行って空間解像度の高い再生画像を得る。フレ
ーム内内挿補間手段９５は、復号手段７５の復元画像を
入力としフレームオフセットにいる伝送画素の位相にし
たがって、符号化時にフレーム内サブサンプリングが施
されている場合には単一フレームのみから、符号化時に
フィールド内サブサンプリングが施されている場合には
単一フィールドのみから内挿補間を行い時間解像度の高
い再生画像を得る。

【０１４９】第１２実施例の動画像符号化装置では、動
き検出手段９０で検出した動き情報を画像符号列と共に
伝送している。符号分離手段７４では、内挿補間に必要
なサブサンプリング情報（間引情報）および動き情報を
分離し、前記サブサンプリング情報をフレーム間内挿補
間手段９４やフレーム内内挿補間手段９５に、動き情報
から算出した重み付け加算比率を重み付け加算手段９３
に分配する。

【０１５０】重み付け加算手段９３は、重み付け加算比
率に従って２つの内挿補間手段９４，９５の出力を重み
付け加算して再生画像として出力する。なお、重み付け
加算手段９３において、２つの内挿補間手段９７，９８
の出力のいずれか一方を選択して出力するようにしても
よい。

【０１５１】[第２０実施例]図２７を参照しつつ、本発
明の第２０実施例を説明する。図２７は、動画像復号装
置である。この第２０実施例は、第６または第７実施例
の符号化装置において、間引手段７１を図１０，図１３
に示すようなフレーム周期で伝送画素の位相の反転する
フレームオフセットサブサンプリングによる間引手段８
９として符号化した時の動画像復号装置である。

【０１５２】動き検出手段９０は、復号手段７５の復号
後の画像を入力とし動き量に従って重み付け加け比率を
演算する。重み付け加算手段９３は、動き検出手段９０
からの前記重み付け加算比率に従って前記２つの内挿補
間手段９４，９５の出力を重み付け加算し再生画像とし
て出力する。

【０１５３】尚、この実施例では、動き検出手段９０
は、復号手段７５の出力で動き検出を行っている。しか
し、動き検出手段９０は、フレーム間内挿補間手段９
４、または、フレーム内挿補間手段９５の出力から動き
検出を行ってもよい。また、これらの内の複数の出力か
ら動き検出を行ってよい。

【０１５４】[第２１実施例]図２８を参照しつつ、本発
明の第２１実施例を説明する。図２８は、動画像復号装
置である。この第２１実施例は、第６または第７実施例
の符号化装置において間引手段７１を図１０、図１３に
示すようなフレーム周期で伝送画素の位相の反転するフ
レームオフセットサブサンプリングによる間引手段と
し、圧縮符号化手段７２をフレーム間またはフィールド
間動き補償を用いた圧縮符号化手段としたときの動画像
復号装置である。

【０１５５】復号手段７５は、前記動き補償による圧縮
符号化によって符号化された符号列から伝送画素を復元
する。動き検出手段９９は、復号手段７５の処理途中で
動き補償に用いる動き情報や差分画素値等の復号化以前
のデータから復号後の動き領域や動きの量等の動き情報
を検出し、重み付け加算比率として出力する。

【０１５６】

【発明の効果】本発明によれば、動画像の圧縮符号化方
法及び圧縮符号化装置において、入力された動画像信号
を垂直位置によって異なったサブサンプリング処理する
ことにより、画質を大きく劣化させることなく画角を減
少することができ、復号時の再生動画像の画質を向上す
ることができる。

【０１５７】また、符号化時のサブサンプリング内容を
示す情報を出力することにより、復号装置側においてこ
の情報を検出し、内挿補間の有無を判定することが可能
になり、サブサンプリング処理を行わないシステムとの
互換性を実現できる。

【０１５８】また、動画像の復号方法及び復号装置にお
いて、入力された符号化データを復号した場合に、出力
された動画像データをその垂直位置に従って符号化時に
対応した内挿補間を行うことにより、符号化時に画質を
大きく劣化させることなく画角を減少することが可能と
なり、復号時の再生動画像の画質を向上することができ
る。

【０１５９】また、符号化時のサブサンプリング内容を
示す情報を検出し、内挿補間の有無を判定することによ
り、サブサンプリング処理を行わないシステムとの互換
性を実現できる。また、動画像データの記録媒体におい
て、動画像符号化データと、該符号化データの圧縮符号
化時に用いたサブサンプリング内容を示す情報が記録さ
れるために、これらのデータを復号する際に符号化時の
サブサンプリング形態に対応した内挿補間をすることが
可能となる。

【０１６０】また、復号装置側において、符号化時のサ
ブサンプリング内容を示す情報を検出し、内挿補間の有
無を判定することにより、サブサンプリング処理を行わ
ないシステムとの互換性を実現できる。符号化時に画質
を大きく劣化させることなく画角を減少することが可能
となり、復号時の再生動画像の画質を向上することがで
きる。

【０１６１】また、本発明によれば、ラインオフセット
サブサンプルにより、画質を余り落とすこと無く符号化
時の情報量を低減できる。且つ、サブサンプル処理の後
の符号化手段が動きベクトルを検出し、この動きベクト
ルを利用して画像圧縮を行う符号化方式であれば、この
動きベクトルのサーチ範囲を広範囲と出来る。

【０１６２】また、本発明によれば、動画像の圧縮符号
化方法及び圧縮符号化装置において、入力された動画像
信号を動き情報に従って異なったサブサンプリング処理
又は内挿処理（補間処理）をすることにより、画質を大
きく劣化させることなく効率的に画角を減少することが
でき、復号時の再生動画像の画質を向上することができ
る。

【０１６３】また、符号化時のサブサンプリング内容を
示すサブサンプリング情報を出力することにより、復号
装置側においてこの情報を検出し、内挿補間の有無を判
定することが可能になり、サブサンプリング処理を行わ
ないシステムとの互換性を実現できる。

【図面の簡単な説明】

【図１】本発明の第１実施例を示す図である。

【図２】本発明の第２実施例を示す図である。

【図３】本発明の第３実施例を示す図である。

【図４】本発明の第４実施例を示す図である。

【図５】ラインオフセットサブサンプリング及びその特
性を示す説明図である。

【図６】本発明の第５実施例を示す図である。

【図７】第６実施例を示す符号化装置の構成図である。

【図８】フィールド内サブサンプリングを説明する説明
図である。

【図９】フィールド内サブサンプリングパターンの一例
を示す図である。

【図１０】フィールド内サブサンプリングパターンの別
の一例を示す図であ。

【図１１】フィールド間サブサンプリングを説明するた
めの説明図である。

【図１２】フィールド間サブサンプリングパターンの一
例を示す図である。

【図１３】フィールド間サブサンプリングパターンの別
の一例を示す図である。

【図１４】第７実施例を示す符動画像号化装置の構成図
である。

【図１５】第８実施例を示す符動画像号化装置の構成図
である。

【図１６】第９実施例を示す動画像符号化装置の構成図
である。

【図１７】第１０実施例を示す動画像符号化装置の構成
図である。

【図１８】第１１実施例を示す動画像符号化装置の構成
図である。

【図１９】第１２実施例を示す動画像符号化装置の構成
図である。

【図２０】第１３実施例を示す動画像復号装置の構成図
である。

【図２１】第１４実施例を示す動画像復号装置の構成図
である。

【図２２】第１５実施例を示す動画像復号装置の構成図
である。

【図２３】第１６実施例を示す動画像復号装置の構成図
である。

【図２４】第１７実施例を示す動画像復号装置の構成図
である。

【図２５】第１８実施例を示す動画像復号装置の構成図
である。

【図２６】第１９実施例を示す動画像復号装置の構成図
である。

【図２７】第２０実施例を示す動画像復号装置の構成図
である。

【図２８】第２１実施例を示す動画像復号装置の構成図
である。

【符号の説明】

１２・・・・・サブサンプリング手段、 １３・・・・・圧縮符号化手段 １４・・・・・検出手段、 １５・・・・・指示手段、 ２１・・・・・出力手段、 ３１・・・・・復号手段、 ３３・・・・・内挿補間手段、 ３４・・・・・検出手段、 ３５・・・・・指示手段、 ４３・・・・・内挿補間手段。 ７１・・・・・間引手段、 ７２・・・・・圧縮符号化手段、 ７３・・・・・挿入手段、 ７４・・・・・符号分離手段、 ７５・・・・・復号手段、 ７６・・・・・内挿補間手段、 ７７・・・・・挿入手段、 ８１ａ…８１ｎ・・・・・間引手段、 ８２・・・・・動き検出手段、 ８３・・・・・切換手段、 ８５・・・・・フィールド内サブサンプリングによる第
１の間引手段、 ８６・・・・・フィールド間サブサンプリングによる第
２の間引手段、 ８７・・・・・動き検出手段、 ８８・・・・・重み付け加算手段、 ８９・・・・・フレームオフセットサブサンプリングに
よる間引手段、 ９０・・・・・動き検出手段、 ９１ａ…９１ｎ・・・・・内挿補間手段、 ９２・・・・・切換手段、 ９３・・・・・重み付け加算手段、 ９４・・・・・フィールド内内挿による第１の補間手
段、 ９５・・・・・フィールド間内挿による第２の補間手
段、 ９６・・・・・フレーム間内挿補間手段 ９７・・・・・フレーム内内挿補間手段 ９９・・・・・動き検出手段。

フロントページの続き (72)発明者 国狭 亜輝臣 大阪府守口市京阪本通２丁目５番５号 三 洋電機株式会社内 (72)発明者 田岡 峰樹 大阪府守口市京阪本通２丁目５番５号 三 洋電機株式会社内 (72)発明者 伊藤 修朗 大阪府守口市京阪本通２丁目５番５号 三 洋電機株式会社内

Claims (47)

【特許請求の範囲】
1. 【請求項１】 入力動画像信号に垂直位置により異なる
   サブサンプリング処理を行い、サブサンプリングされた
   画像を圧縮符号化することを特徴とする動画像圧縮符号
   化方法。
2. 【請求項２】 入力動画像信号に垂直位置により異なる
   サブサンプリング処理を行い、サブサンプリングされた
   画像を圧縮符号化し、同時にサブサンプリングの内容を
   示す情報を出力することを特徴とする動画像圧縮符号化
   方法。
3. 【請求項３】 入力動画像信号にラインオフセットサブ
   サンプリング処理を行い、サブサンプリングされた画像
   を圧縮符号化することを特徴とする動画像圧縮符号化方
   法。
4. 【請求項４】 入力動画像信号にラインオフセットサブ
   サンプリング処理を行い、サブサンプリングされた画像
   信号を圧縮符号化し、同時にラインオフセットサブサン
   プリングを行った旨の情報を出力することを特徴とする
   動画像圧縮符号化方法。
5. 【請求項５】 入力動画像信号の動き情報を検出し、そ
   の動き情報に基づいて異なる形態のサブサンプリングを
   行い、サブサンプリングされた画像を圧縮符号化するこ
   とを特徴とする動画像圧縮符号化方法。
6. 【請求項６】 入力動画像信号の動き情報を検出し、そ
   の動き情報に基づいて異なる形態のサブサンプリングを
   行い、サブサンプリングされた画像を圧縮符号化し、同
   時にサブサンプリングの内容を示す情報を出力すること
   を特徴とする動画像圧縮符号化方法。
7. 【請求項７】 入力動画像信号の動き情報を検出し、そ
   の動き情報に基づいて異なる形態のサブサンプリングを
   行い、それぞれの出力データを重み付け加算を行い、圧
   縮符号化することを特徴とする動画像圧縮符号化方法。
8. 【請求項８】 入力動画像信号の動き情報を検出し、そ
   の動き情報に基づいて異なる形態のサブサンプリングを
   行い、それぞれの出力データを重み付け加算を行い、圧
   縮符号化し、同時にサブサンプリングの内容と重み付け
   内容を示す情報を出力することを特徴とする動画像圧縮
   符号化方法。
9. 【請求項９】 入力された動画像信号にサブサンプリン
   グ処理を行うサブサンプリング手段(12)と、 入力されている動画像信号の垂直位置を検出する検出手
   段(14)と、 前記検出手段(14)から得られた結果に従い、サブサンプ
   リング点を前記サブサンプリング手段(12)に指示する指
   示手段(15)と、 前記サブサンプリング出力された動画像信号を圧縮符号
   化する圧縮符号化手段(13)とを有することを特徴とする
   動画像圧縮符号化装置。
10. 【請求項１０】 入力された動画像信号にサブサンプリ
    ング処理を行うサブサンプリング手段(12)と、 入力されている動画像信号の垂直位置を検出する検出手
    段(14)と、前記検出手段(14)から得られた結果に従い、
    サブサンプリング点を前記サブサンプリング手段(12)に
    指示する指示手段(15)と、 前記サブサンプリング手段(12)から出力された動画像信
    号を圧縮符号化する圧縮符号化手段(13)と、 前記指示手段(15)のサンプリング内容に従いサンプリン
    グ情報を出力する出力手段(21)とを有することを特徴と
    する動画像圧縮符号化装置。
11. 【請求項１１】 入力された動画像信号の垂直位置を検
    出する検出手段(14)と、 前記検出手段(14)の出力に従い、入力された動画像信号
    にラインオフセットサブサンプリング処理を行うライン
    オフセットサブサンプリング手段(12)と、 前記サブサンプリング手段(12)から出力された動画像信
    号を圧縮符号化する圧縮符号化手段(13)とを有すること
    を特徴とする動画像圧縮符号化装置。
12. 【請求項１２】 入力された動画像信号の垂直位置を検
    出する検出手段(14)と、 前記検出手段(14)の出力に従い、入力された動画像信号
    にラインオフセットサブサンプリング処理を行うライン
    オフセットサブサンプリング手段(12)と、 前記サブサンプリング手段(12)から出力された動画像信
    号を圧縮符号化する圧縮符号化手段(13)と、 動画像データがラインオフセットサブサンプリングされ
    たことを示すデータを出力する出力手段(21)とを有する
    ことを特徴とする動画像圧縮符号化装置。
13. 【請求項１３】 入力動画像信号に対してそれぞれ異な
    るサブサンプリングによる間引処理を施す複数の間引手
    段(81a〜81n)(85,86)と、 入力動画像信号の動き量を検出する動き検出手段(82)
    と、 前記動き検出手段(82)の出力に従って、前記複数のサブ
    サンプリングによる間引手段の出力の中から一つを選択
    して出力する切換手段(83)と、 この切換手段(83)により選択された出力を圧縮符号化す
    る圧縮符号化手段(72)とを有することを特徴とする動画
    像圧縮符号化装置。
14. 【請求項１４】 入力動画像信号に対してそれぞれ異な
    るサブサンプリングによる間引処理を施す複数の間引手
    段(81a〜81n)(85,86)と、 入力動画像信号の動き量を検出する動き検出手段(82)
    と、 前記動き検出手段(82)の出力に従って、前記複数のサブ
    サンプリングによる間引手段の出力の中から一つを選択
    して出力する切換手段(83)と、 前記切換手段(83)により選択された出力を圧縮符号化す
    る圧縮符号化手段(72)と前記切換手段(72)の選択したサ
    ブサンプリングに対応するサブサンプリング情報を符号
    化し、前記圧縮符号化手段(72)の出力である符号列の所
    定の位置に挿入する挿入手段(77)とを有することを特徴
    とする動画像圧縮符号化装置。
15. 【請求項１５】 入力動画像信号に対して伝送画素数が
    同じで、それぞれ形態が異なるサブサンプリングによる
    間引処理を施す複数の間引手段(81a〜81n)(85,86)と、 入力動画像信号の動き量を検出する動き検出手段(87)
    と、 この動き検出手段(87)の出力に従って決められた比率
    で、前記複数のサブサンプリングによる間引手段の出力
    を重み付け加算を行う演算手段(88)と、 前記演算手段の出力を圧縮符号化する圧縮符号化手段(7
    2)とを有することを特徴とする動画像圧縮符号化装置。
16. 【請求項１６】 入力動画像信号に対して伝送画素数が
    同じで、それぞれ形態が異なるサブサンプリングによる
    間引処理を施す複数の間引手段(81a〜81n)(85,86)と、 入力動画像信号の動き量を検出する動き検出手段(87)
    と、 前記動き検出手段(87)の出力に従って決められた比率
    で、前記複数のサブサンプリングによる間引手段の出力
    を重み付け加算を行う演算手段(88)と、 前記演算手段(88)の出力を圧縮符号化する圧縮符号化手
    段(72)と、 前記演算手段(88)で用いられた演算情報を符号化し、前
    記圧縮符号化手段(72)の出力である符号列の所定の位置
    に挿入する挿入手段(77)とを有することを特徴とする動
    画像圧縮符号化装置。
17. 【請求項１７】 前記挿入手段(77)で符号化される演算
    情報は、重み付け比率である請求項１６に記載の動画像
    圧縮符号化装置。
18. 【請求項１８】 前記挿入手段(77)で符号化される演算
    情報は、前記動き検出手段(88)から得られた動き情報及
    びサブサンプリング情報のいずれかまたは両方である請
    求項１６に記載の動画像圧縮符号化装置。
19. 【請求項１９】 入力動画像信号に対してｎ（ｎ≧２）
    フレーム周期でサブサンプリング位相を順次変化させる
    フレームオフセットサブサンプリングによって間引を行
    う間引手段(89)と、 前記間引手段(89)の出力を圧縮符号化する圧縮符号化手
    段(72)と、 入力動画像信号の各領域における動き量を検出する動き
    検出手段(90)と、 前記動き検出手段の出力を符号化して出力する動き符号
    化手段(77)とを有することを特徴とする動画像圧縮符号
    化装置。
20. 【請求項２０】 入力動画像信号に対してｎ（ｎ≧２）
    フレーム周期でサブサンプリング位相を順次変化させる
    フレームオフセットサブサンプリングによって間引を行
    う間引手段(89)と、 前記間引手段(89)の出力を圧縮符号化する圧縮符号化手
    段(72)と、 入力動画像信号の各領域における動き量を検出する動き
    検出手段(90)と、 前記動き情報及びサブサンプリング情報の両方もしくは
    いずれかを符号化し、前記圧縮符号化手段(72)からの出
    力である符号列の所定の位置に挿入する挿入手段(77)
    と、 を有することを特徴とする動画像圧縮符号化装置。
21. 【請求項２１】 前記サブサンプリング情報とは、サブ
    サンプリングによる間引を施した旨の情報である請求項
    １４もしくは請求項１８もしくは請求項２０のいずれか
    １項に記載の動画像圧縮符号化装置。
22. 【請求項２２】 前記サブサンプリング情報とは、サブ
    サンプリングの位相情報である請求項１４もしくは請求
    項１８もしくは請求項２０のいずれか１項に記載の動画
    像圧縮符号化装置。
23. 【請求項２３】 入力された動画像圧縮符号化データを
    復号し、復号されたデータの垂直位置により異なる内挿
    補間を行うことを特徴とする動画像復号方法。
24. 【請求項２４】 入力された動画像圧縮符号化データを
    復号し、同時に入力されたサブサンプリング内容を示す
    情報に従い、復号されたデータの内挿補間を行うことを
    特徴とする動画像復号方法。
25. 【請求項２５】 入力された動画像圧縮符号化データを
    復号し、同時に入力されたサブサンプリング内容と、重
    み付け内容を示す情報に従い、復号されたデータの内挿
    補間を行ったデータをそれぞれ重み付け加算を行い、画
    像として出力することを特徴とする動画像復号方法。
26. 【請求項２６】 入力された動画像圧縮符号化データを
    復号し、同時に入力された動き情報に従い、復号された
    データの内挿補間を行い、画像として出力することを特
    徴とする動画像復号方法。
27. 【請求項２７】 入力された動画像圧縮符号化データを
    復号し、同時に入力された動き情報に従い、復号された
    データの内挿補間を行った後、その重み付け加算を行
    い、 画像として出力することを特徴とする動画像復号
    方法。
28. 【請求項２８】 入力された圧縮符号化データを復号す
    る復号手段(31)と、 前記復号手段の出力データの垂直位置を検出する検出手
    段(34)と、 前記検出手段(34)の出力に従い、入力された動画像デー
    タを内挿補間する内挿補間手段(33)とを有することを特
    徴とする動画像復号装置。
29. 【請求項２９】 入力された圧縮符号化データを復号す
    る復号手段(31)と、 前記復号手段の出力データの垂直位置を検出する検出手
    段(34)と、 圧縮符号化した際のサブサンプリング内容を示す情報
    と、前記検出手段(34)の出力に従い入力された動画像デ
    ータを内挿補間する内挿補間手段(33)とを有することを
    特徴とする動画像復号装置。
30. 【請求項３０】 入力された符号化データからサブサン
    プリング情報を分離する分離手段(74)と、 前記画像符号化データを復号する復号手段(75)と、 前記分離手段のサブサンプリング情報出力に従って、前
    記復号手段の出力に内挿補間を行い、画像データとして
    出力する補間手段(76)とを有することを特徴とする動画
    像復号装置。
31. 【請求項３１】 入力された符号化データからサブサン
    プリング情報を分離する分離手段(74)と、 前記画像符号化データを復号する復号手段(75)と、 前記分離手段(74)のサブサンプリング情報出力に従っ
    て、前記復号手段(75)の出力に対して行う内挿補間の形
    態を変更し、画像データとして出力する補間手段(76)と
    を有することを特徴とする動画像復号装置。
32. 【請求項３２】 入力された符号化データからサブサン
    プリング情報を分離する分離手段(74)と、 前記画像符号化データを復号する復号手段(75)と、 前記復号手段(75)の出力に対しそれぞれ異なる内挿補間
    を行う複数の補間手段(91a〜91n)(94,95)と、 前記分離手段のサブサンプリング情報出力に従って、前
    記複数の補間手段の出力の中から一つを選択して画像デ
    ータとして出力する切換手段(92)とを有することを特徴
    とする動画像復号装置。
33. 【請求項３３】 入力された符号化データからサブサン
    プリング情報を分離する分離手段(74)と、 前記画像符号化データを復号する復号手段(75)と、 前記復号手段(75)のサブサンプリング情報出力に従っ
    て、前記復号手段(75)の出力に複数種類の内挿補間を施
    し、その重み付け加算を行い、画像データとして出力す
    る補間手段(91a〜91n,93)(94,95,93)とを有することを
    特徴とする動画像復号装置。
34. 【請求項３４】 入力された符号化データからサブサン
    プリング情報を分離する分離手段(74)と、 前記画像符号化データを復号する復号手段(75)と、 前記分離手段(74)の画像符号化データを復号する復号手
    段(75)と、 前記復号手段(75)の出力に対しそれぞれ異なる内挿補間
    を行う複数の内挿補間手段(91a〜91n)(94,95)と、 前記分離手段のサブサンプリング情報出力に従って、前
    記複数の内挿補間手段の出力を重み付け加算を行い、画
    像データとして出力する演算手段(93)とを有することを
    特徴とする動画像復号装置。
35. 【請求項３５】 入力された符号化データからサブサン
    プリング情報を分離する分離手段(74)と、 前記画像符号化データを復号する復号手段(75)と、 前記復号手段(75)の出力に対し複数フレームから内挿補
    間を行うフレーム間補間手段(94)と、 前記復号手段(94)の出力に対し符号化単位画像内で内挿
    補間を行うフレーム内補間手段(95)と、 前記分離手段(74)の動き情報出力に従って、前記フレー
    ム間補間手段の出力と前記フレーム内補間手段の出力と
    を切換えて画像データとして出力する切換手段(93)とを
    有することを特徴とする動画像復号装置。
36. 【請求項３６】 入力された符号化データからサブサン
    プリング情報を分離する分離手段(74)と、 前記画像符号化データを復号する復号手段(75)と、 前記復号手段の出力に対し複数フレームから内挿補間を
    行うフレーム間補間手段(94)と、 前記復号手段の出力に対し符号化単位画像内で内挿補間
    を行うフレーム内補間手段(95)と、 前記分離手段の動き情報出力に従って、前記フレーム間
    補間手段の出力と前記フレーム内補間手段の出力とを重
    み付け加算を行って画像データとして出力する演算手段
    (93)とを有することを特徴とする動画像復号装置。
37. 【請求項３７】 入力された符号化データから画像符号
    化データを復号する復号手段(75)と、 前記復号手段の出力に対し複数フレームから内挿補間を
    行うフレーム間補間手段(94)と、 前記復号手段の出力に対し符号化単位画像内で内挿補間
    を行うフレーム間補間手段(95)と、 前記復号手段(75)の出力もしくは前記フレーム間補間手
    段の出力もしくは前記フレーム内補間手段の出力の何れ
    かから、再生画像内の各領域における動き量を検出する
    動き検出手段(90)と、 前記動き検出手段(90)から得られた動き量に従って、前
    記フレーム間補間手段の出力と前記フレーム内補間手段
    の出力とを切換えて画像データとして出力する切換手段
    (93)とを有することを特徴とする動画像復号装置。
38. 【請求項３８】 入力された符号化データから画像符号
    化データを復号する復号手段(75)と、 前記復号手段(75)の出力に対し複数フレームから内挿補
    間を行うフレーム間補間手段(94)と、 前記復号手段の出力に対し符号化単位画像内で内挿補間
    を行うフレーム内補間手段(95)と、 前記復号手段の出力もしくは前記フレーム間補間手段の
    出力もしくは前記フレーム内補間手段の出力の何れかか
    ら、再生画像内の各領域における動き量を検出する動き
    検出手段(90)と、 前記動き検出手段から得られた動き量に従って、前記フ
    レーム間補間手段の出力と前記フレーム内補間手段の出
    力とを重み付け加算を行って画像データとして出力する
    演算手段(93)とを有することを特徴とする動画像復号装
    置。
39. 【請求項３９】 入力された符号化データを復号する復
    号手段(75)と、 前記復号手段(75)の出力に対し複数フレームから内挿補
    間を行うフレーム間補間手段(94)と、 前記復号手段(75)の出力に対し符号化単位画像内で内挿
    補間を行うフレーム内補間手段(95)と、 前記復号手段(75)から得られた、再生画像の各領域にお
    ける動き情報を用いて前記フレーム間補間及びフレーム
    内補間の何れかを切換えて画像データとして出力する切
    換手段(99,93)とを有することを特徴とする動画像復号
    装置。
40. 【請求項４０】 入力された符号化データを復号する復
    号手段(75)と、 前記復号手段(75)の出力に対し複数フレームから内挿補
    間を行うフレーム間補間手段(95)と、 前記復号手段(75)の出力に対し符号化単位画像内で内挿
    補間を行うフレーム内補間手段(95)と、 前記復号手段(75)から得られた、再生画像の各領域にお
    ける動き情報を用いて前記フレーム間補間及びフレーム
    内補間の出力を重み付け加算を行い、画像データとして
    出力する演算手段(99,93)とを有することを特徴とする
    動画像復号装置。
41. 【請求項４１】 動画像符号化データと、該符号化デー
    タの圧縮符号化時のサブサンプリング内容を示す情報を
    記録したことを特徴とする記録媒体。
42. 【請求項４２】 動画像符号化データと、該符号化デー
    タの圧縮符号化時のサブサンプリング内容と、その重み
    付けを示す情報を記録したことを特徴とする記録媒体。
43. 【請求項４３】 動画像符号化データと、該符号化デー
    タの動き情報を記録したことを特徴とする記録媒体。
44. 【請求項４４】 前記圧縮符号化は、ＭＰＥＧ方式、
    Ｈ．２６１方式等の動きベクトル検出によりフレーム間
    圧縮符号化を含むことを特徴とする、請求項１〜７のい
    ずれか１項に記載の動画像圧縮符号化方法。
45. 【請求項４５】 前記圧縮符号化手段(13)は、ＭＰＥＧ
    方式、Ｈ．２６１方式等の動きベクトル検出によるフレ
    ーム間圧縮符号化手段であることを特徴とする、請求項
    ８〜２２のいずれか１項に記載の動画像圧縮符号化装
    置。
46. 【請求項４６】 前記復号は、ＭＰＥＧ方式、Ｈ．２６
    １方式等の動きベクトル検出によるフレーム間圧縮情報
    の復号であることを特徴とする請求項２３〜２７のいず
    れか１項に記載の動画像復号方法。
47. 【請求項４７】 前記復号手段(31)は、ＭＥＰＧ方式、
    Ｈ．２６１方式等の動きベクトル検出によるフレーム間
    圧縮情報の復号であることを特徴とする請求項２８〜４
    ０記載の動画像復号装置。