JP4154772B2

JP4154772B2 - 画像情報変換装置および変換方法

Info

Publication number: JP4154772B2
Application number: JP32357698A
Authority: JP
Inventors: 哲二郎近藤; 俊彦浜松; 正明服部; 泰史野出
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1998-11-13
Filing date: 1998-11-13
Publication date: 2008-09-24
Anticipated expiration: 2018-11-13
Also published as: JP2000152233A

Description

【０００１】
【発明の属する技術分野】
この発明は、ＭＰＥＧ２（Moving Picture Expert Group phase ２) の規定に従う画像間圧縮符号化および伸長復号化によって生成される復元画像信号について画質を改善する機能を有する画像情報変換装置および変換方法に関する。
【０００２】
【従来の技術】
画像信号の圧縮符号化方式としてＭＰＥＧ２規格による符号化方式が従来から用いられている。ＭＰＥＧ２規格による送受信システムでは、送信すべき画像信号に対してＭＰＥＧ２規格による圧縮符号化処理を施して送信し、また、受信した画像信号に対して、ＭＰＥＧ２規格による圧縮符号化処理に対応する伸長復号化を施すことにより、元の画像信号を復元する。
【０００３】
ここで、ＭＰＥＧ２規格による圧縮符号化処理には、ＤＣＴ(Discrete Cosine Transform) 処理が含まれる。ＤＣＴ処理として、フィールドＤＣＴ処理，フレームＤＣＴ処理の何れかがマクロブロックを単位として切替えて行われる。
【０００４】
このようなＭＰＥＧ２規格による送受信システムにおいては、受信側で復元される画像信号に、高域部分のぼけ、ブロック歪み等の部分的な不具合が生じることがあった。
【０００５】
【発明が解決しようとする課題】
上述したような不具合に対処するために、受信側で復元される画像信号に対してクラス分類適応処理を利用した画像情報変換を施すことにより、画質を改善することが考えられる。この場合、フィールドＤＣＴ処理／フレームＤＣＴ処理の切替えに起因して、ぼけの改善が不充分となるおそれ、あるいはブロック歪みが強調されるおそれがある。
【０００６】
従って、この発明の目的は、ＭＰＥＧ２規格による符号化方式を用いた送受信システムにおいて、より良好な画質を得ることが可能な画像情報変換装置および変換方法を提供することにある。
【０００７】
【課題を解決するための手段】
請求項１の発明は、伸長復号化された入力画像信号から注目画素の近傍となる第１の画素領域を抽出する第１の領域切り出し手段と、
入力画像信号について、圧縮符号化時にフィールド内ＤＣＴ処理／フレーム内ＤＣＴ処理の何れがなされたかをマクロブロックを単位として識別し、識別結果を出力するフィールド／フレーム処理識別手段と、
第１の領域切り出し手段から供給される画素データに符号化を施し、符号化コードを生成し、フィールド／フレーム処理識別手段から出力される識別結果に対応するコードを生成し、生成された符号化コードおよび識別結果に対応するコードを特徴量として抽出する特徴量抽出手段と、
特徴量抽出手段から抽出された符号化コードおよび識別結果に対応するコードに対応してクラスコードを生成するクラスコード生成手段と、
予め決定された予測係数を記憶し、記憶した予測係数の内から、クラスコードに対応する予測係数を出力する係数記憶手段と、
入力画像信号から注目画素の近傍となる第２の画素領域を抽出する第２の領域切り出し手段と、
第２の領域切り出し手段から供給される画素データと、係数記憶手段から供給される予測係数とを用いた重み付け加算を行って画素値を生成する演算処理手段と
を有し、ＭＰＥＧ２規格に従って圧縮符号化された画像信号を伸長復号化することによって生成される入力画像信号に画像情報変換を施す画像情報変換装置である。
【０００８】
請求項６の発明は、伸長復号化された入力画像信号から注目画素の近傍となる第１の画素領域を抽出する第１の領域切り出しステップと、
入力画像信号について、圧縮符号化時にフィールド内ＤＣＴ処理／フレーム内ＤＣＴ処理の何れがなされたかをマクロブロックを単位として識別し、識別結果を出力するフィールド／フレーム処理識別ステップと、
第１の領域切り出しステップから供給される画素データに符号化を施し、符号化コードを生成し、フィールド／フレーム処理識別ステップから出力される識別結果に対応するコードを生成し、生成された符号化コードおよび識別結果に対応するコードを特徴量として抽出する特徴量抽出ステップと、
特徴量抽出ステップから抽出された符号化コードおよび識別結果に対応するコードに対応してクラスコードを生成するクラスコード生成ステップと、
予め決定された予測係数を記憶し、記憶した予測係数の内から、クラスコードに対応する予測係数を出力する係数記憶ステップと、
入力画像信号から注目画素の近傍となる第２の画素領域を抽出する第２の領域切り出しステップと、
第２の領域切り出しステップから供給される画素データと、係数記憶ステップから供給される予測係数とを用いた重み付け加算を行って画素値を生成する演算処理ステップと
を有し、ＭＰＥＧ２規格に従って圧縮符号化された画像信号を伸長復号化することによって生成される入力画像信号に画像情報変換を施す画像情報変換方法である。
【０００９】
以上のような発明によれば、圧縮符号化時になされたＤＣＴ処理の種類（モード）に的確に応じたクラス分類適応処理を行うことが可能となる。
【００１０】
【発明の実施の形態】
この発明の一実施形態についての説明に先立ち、理解を容易とするために、クラス分類適応処理について説明する。まず、図１を参照して、予測画像信号の生成に係る構成について説明する。入力画像信号が領域切り出し回路１０、１２に供給される。ここでは、入力画像信号は、ＭＰＥＧ２規格による送受信システムにおいて受信側で復元される画像信号である。領域切り出し回路１０は、入力画像信号から所定の画素領域を抽出し、抽出した画素領域に係る画素データを特徴量抽出回路１３に供給する。
【００１１】
特徴量抽出回路１３は、供給される画素データに１ビットＡＤＲＣ等の処理を施すことによってＡＤＲＣコードを生成し、生成したＡＤＲＣコードをクラスコード発生回路１４に供給する。クラスコード発生回路１４は、供給されるＡＤＲＣコードに基づいて、クラス分類の結果を表すクラスコードを発生してＲＯＭ１５に供給する。ＲＯＭ１５は、供給されるクラスコードに対応する係数データを推定演算回路１６に供給する。ここで、予測係数は後述するようにして予め決定され、クラス毎に、より具体的にはクラスコードをアドレスとする等の形態でＲＯＭ１５に記憶されている。なお、領域切り出し回路１０が抽出する、クラス分類に使用される画素領域をクラスタップと称する。
【００１２】
一方、領域切り出し回路１２は、入力画像信号から所定の画素領域を抽出し、抽出した画素領域の画素データを推定演算回路１６に供給する。推定演算回路１６は、領域切り出し回路１２から供給される画素データと、ＲＯＭ１５から供給される予測係数とに基づいて以下の式（１）に従う積和演算を行うことによって予測画像信号を生成する。ここで、領域切り出し回路１２が抽出する、積和演算に使用される画素領域を予測タップと称する。
【００１３】
ｙ＝ｗ₁×ｘ₁＋ｗ₂×ｘ₂＋‥‥＋ｗ_n×ｘ_n （１）
ここで、ｘ₁，‥‥，ｘ_nが各予測タップであり、ｗ₁，‥‥，ｗ_nが各予測係数である。
【００１４】
次に、学習すなわちクラス毎の予測係数を求める処理について説明する。一般的には、クラス分類適応処理によって予測されるべき画像信号と同一な信号形式の画像信号（以下、教師信号と称する）と、教師信号にクラス分類適応処理の目的とされる画像情報変換に関連した処理を行うことによって得られる画像信号とに基づく所定の演算処理によって予測係数が決定される。ＭＰＥＧ２規格等に従う画像信号の圧縮符号化／伸長復号化によって生じる高域部分のぼけ、ブロック歪み等を改善して画質を向上させるためになされるクラス分類適応処理においては、学習は、例えば図２に示すような構成によって行われる。
【００１５】
所定の画像信号が教師信号としてＭＰＥＧ２エンコーダ２０と、正規方程式加算回路２６とに供給される。ＭＰＥＧ２エンコーダ２０は、教師信号にＭＰＥＧ２規格に従う圧縮符号化を施し、圧縮符号化信号をＭＰＥＧ２デコーダ２１に供給する。ＭＰＥＧ２デコーダ２１は、供給される圧縮符号化信号を伸長復号化処理して復元画像信号を生成し、生成した復元画像信号を領域切り出し回路２２と、特徴量抽出回路２３とに供給する。ここで、ＭＰＥＧ２デコーダ２１の出力は、高域部分のぼけ、ブロック歪み等を含んでいる。
【００１６】
特徴量抽出回路２３は、ＭＰＥＧ２デコーダ２１の出力に１ビットＡＤＲＣ等の処理を施すことによってＡＤＲＣコードを生成し、生成したＡＤＲＣコードをクラスコード発生回路２５に供給する。クラスコード発生回路２５は、供給されるＡＤＲＣコードに基づいて、分類されるクラスに対応するクラスコードを発生して正規方程式加算回路２６に供給する。
【００１７】
一方、領域切り出し回路２２は、ＭＰＥＧ２デコーダ２１の出力から所定の画素領域を予測タップとして抽出し、予測タップの画素データを正規方程式加算回路２６に供給する。正規方程式加算回路２６は、領域切り出し回路２２の出力と、教師信号とに基づく所定の演算処理によって、クラスコード発生回路２５から供給されるクラスコードに対応する予測係数を解とする正規方程式のデータを生成する。正規方程式加算回路２６の出力は、予測係数算出回路２７に供給される。予測係数算出回路２７は、供給されるデータに基づいて正規方程式を解くための演算処理を行う。この演算処理によって算出された予測係数がメモリ２８に供給され、記憶される。予測推定に係る処理を行うに先立って、図１中のＲＯＭ１５にメモリ２８の記憶内容がロードされる。
【００１８】
正規方程式について以下に説明する。上述の式（１）において、学習前は予測係数ｗ₁，‥‥，ｗ_nが未定係数である。学習は、クラス毎に複数の教師信号を入力することによって行う。教師信号の種類数をｍと表記する場合、式（１）から、以下の式（２）が設定される。
【００１９】
ｙ_k＝ｗ₁×ｘ_k1＋ｗ₂×ｘ_k2＋‥‥＋ｗ_n×ｘ_kn （２）
（ｋ＝１，２，‥‥，ｍ）
ｍ＞ｎの場合、予測係数ｗ₁，‥‥，ｗ_nは一意に決まらないので、誤差ベクトルｅの要素ｅ_kを以下の式（３）で定義して、式（４）によって定義される誤差ベクトルｅを最小とするように予測係数を定めるようにする。すなわち、いわゆる最小２乗法によって予測係数を一意に定める。
【００２０】
ｅ_k＝ｙ_k−｛ｗ₁×ｘ_k1＋ｗ₂×ｘ_k2＋‥‥＋ｗ_n×ｘ_kn｝（３）
（ｋ＝１，２，‥‥ｍ）
【００２１】
【数１】

【００２２】
式（４）のｅ²を最小とする予測係数を求めるための実際的な計算方法としては、ｅ²を予測係数ｗ_i(i=1,2‥‥）で偏微分し（式（５））、ｉの各値について偏微分値が０となるように各予測係数ｗ_iを定めれば良い。
【００２３】
【数２】

【００２４】
式（５）から各予測係数ｗ_iを定める具体的な手順について説明する。式（６）、（７）のようにＸ_ji，Ｙ_iを定義すると、式（５）は、式（８）の行列式の形に書くことができる。
【００２５】
【数３】

【００２６】
【数４】

【００２７】
【数５】

【００２８】
式（８）が一般に正規方程式と呼ばれるものである。予測係数算出回路２７は、掃き出し法等の一般的な行列解法に従って正規方程式（８）を解くための計算処理を行って予測係数ｗ_iを算出する。
【００２９】
上述したような処理においては以下のような問題がある。すなわち、ＭＰＥＧ２規格による符号化方式では、画像の動きの程度等に応じてマクロブロックを単位としてフレームＤＣＴ処理／フィールドＤＣＴ処理が切替えられる。この点を考慮せずにクラス分類適応処理を適用すると、ぼけの改善が不充分になるおそれ、あるいはブロック歪みが強調されてしまうおそれがある。そこで、この発明は、圧縮符号化時にフレームＤＣＴ処理／フィールドＤＣＴ処理の何れが行われたかを識別し、識別結果をクラス分類の結果に反映させるようにしたものである。
【００３０】
この発明の一実施形態における、予測画像信号生成に係る構成の一例を図３に示す。なお、上述したように、入力画像信号はＭＰＥＧ２規格による送受信システムにおいて受信側で復元される画像信号である。また、図１中の構成要素と同様な構成要素には同一の符号を付し、重複する説明を省略する。フィールド／フレーム処理識別回路１１は、入力画像信号に基づいて、フィールドＤＣＴ処理／フレームＤＣＴ処理の何れが圧縮符号化時に行われたかを識別し、識別結果を領域切り出し回路１００、１２０および特徴量抽出回路１３０に供給する。領域切り出し回路１００、１２０は、それぞれ、クラスタップ、予測タップを抽出する動作を、供給される識別結果に応じて行う。
【００３１】
また、特徴量抽出回路１３０は、領域切り出し回路１００から供給される予測タップのデータに１ビットＡＤＲＣ等の処理を施すことによってＡＤＲＣコードを生成すると共に、フィールド／フレーム処理識別回路１１から供給される識別結果に対応するコードを生成する。クラスコード発生回路１４は、特徴量抽出回路１３０の出力に基づいてクラスコードを発生する。このクラスコードがフィールド／フレーム処理識別回路１１から供給される識別結果を反映するクラスを表現することになる。
【００３２】
次に、この発明の一実施形態における、予測係数の決定に係る構成の一例を図４に示す。ここで、図２中の構成要素と同様な構成要素には、同一の符号を付し、重複する説明を省略する。フィールド／フレーム処理識別回路２４は、ＭＰＥＧ２デコーダ２１の出力に基づいて、フィールドＤＣＴ処理／フレームＤＣＴ処理の何れが行われているかをマクロブロック毎に識別し、識別結果を特徴量抽出回路２３０と領域切り出し回路１２とに供給する。
【００３３】
特徴量抽出回路２３０は、ＭＰＥＧデコーダ２１の出力に１ビットＡＤＲＣ等の処理を施すことによってＡＤＲＣコードを生成すると共に、フィールド／フレーム処理識別回路２４から供給される識別結果に対応するコードを生成し、ＡＤＲＣコードと、識別結果に対応するコードとをクラスコード発生回路２５に供給する。クラスコード発生回路２５は、特徴量抽出回路２３０の出力に基づいてクラスコードを発生させる。このクラスコードがフィールド／フレーム処理識別回路２４から供給される識別結果を反映するクラスを表現することになる。
【００３４】
次に、フィールドＤＣＴ処理，およびフレームＤＣＴ処理の何れが行われているかを識別する方法について説明する。理解を容易とするために、まず、ＤＣＴ処理について図５Ａおよび図５Ｂを参照して説明する。ＭＰＥＧ規格に従う圧縮符号化においては、各マクロブロック内の画像データが８×８（画素）からなる４個のＤＣＴブロックに分割され、ＤＣＴブロックを単位としてＤＣＴ処理がなされる。ＤＣＴ処理によって生成される各係数が所定の量子化ステップで量子化されることにより、データストリームが生成される。一方、データの伸長符号化においては、ＤＣＴブロックを単位として逆ＤＣＴ処理がなされる。
【００３５】
上述したように、ＭＰＥＧ２規格においては、マクロブロックを単位として、フィールドＤＣＴ処理／フレームＤＣＴ処理とを切替えることができる。フィールドＤＣＴ処理においては、マクロブロック輝度信号を４個のブロックに分解する際に、各ＤＣＴブロックが図５Ａに示すようにフィールドで構成されるように分解する。すなわち、各ＤＣＴブロックは、マクロブロック内の奇数番目のラインのみ、または、偶数番目のラインのみの何れかから構成される。一方、フレームＤＣＴ処理では、図５Ｂに示すように、各ＤＣＴブロックがフレームで構成されるように分解する。一般に、フィールドＤＣＴ処理は動画像に対して高い圧縮効率を実現し、一方、フレームＤＣＴ処理は静止画像（動き量がある程度以上小さい画像）に対して高い圧縮効率を実現する。
【００３６】
フィールドＤＣＴ処理／フレームＤＣＴ処理の何れを選択するかについては、ＭＰＥＧ２規格上では標準化されていないが，例えばフィールド内およびフレーム内での垂直方向のライン間相関に基づいて以下のようにして選択する方法を用いることができる。ライン間相関を評価するためには、例えば垂直方向に隣接する画素間差分値の２乗を評価値として用いることができる。
【００３７】
より具体的には、フィールド内およびフレーム内で垂直方向に隣接する画素間差分値の２乗ｖａｒ１およびｖａｒ２を、それぞれ、以下の式（９）および式（１０）に従って計算する。式（９）、式（１０）において、図５に示すように、ｕ、ｖは、それぞれ、マクロブロック内の水平方向、垂直の画素位置を表現する変数である。従って、式（９）の右辺は、偶数番目の画素間差分の２乗和と、奇数番目の画素間差分の２乗和との総和を示し、かかる値が小さい程、フィールド内で垂直方向に隣接する画素間の相関が大きいことになる。また、式（１０）の右辺は、偶数番目の画素と奇数番目の画素の間の差分の２乗の総和を示し、かかる値が小さい程、フレーム内で垂直方向に隣接する画素間の相関が大きいことになる。
【００３８】
【数６】

【００３９】
【数７】

【００４０】
そして、式（９）および式（１０）に従う計算結果に基づいて、ＤＣＴ処理が以下のように選択される。
【００４１】
(a) ｖａｒ１≧ｖａｒ２→フレーム内ＤＣＴ処理
(b) ｖａｒ１＜ｖａｒ２→フィールド内ＤＣＴ処理
この発明の一実施形態においては、上述したようなＤＣＴ処理の選択に係る計算処理と同様な計算処理を入力画像信号（すなわちＭＰＥＧ２規格による送受信システムにおいて受信側で復元される画像信号）に基づいて行うことにより、入力画像信号におけるＤＣＴ処理を識別する。より具体的には、式（９）および式（１０）に従う計算を行い、その計算結果に基づいて、識別結果を表すクラス値blk ＿class を生成する。生成されるクラス値blk ＿class の一例を以下に示す。
【００４２】
(a)'ｖａｒ１≧ｖａｒ２→ フレーム内ＤＣＴと識別し、blk ＿class=１
(b)'ｖａｒ１＜ｖａｒ２→ フィールド内ＤＣＴと識別し、blk ＿class=０
（ａ）’，（ｂ）’のようにして生成される識別結果に係るクラス値blk ＿class と、一般的に用いられる１ビットＡＤＲＣによって生成される入力画像信号の波形に係るクラス値とを組み合わせてクラスコードを発生させてクラス分類適応処理を行うことにより、フィールドＤＣＴ処理／フレームＤＣＴ処理のマクロブロック毎の切替えに的確に対応することが可能となる。クラスコードｃｌａｓｓとしては，例えば次のようなものが用いられる。
【００４３】
ｃｌａｓｓ＝ａｄｒｃ＿ｃｌａｓｓ＋３２×ｂｌｋ＿ｃｌａｓｓ（１１）
次に、この発明の一実施形態におけるクラスタップおよび予測タップのタップ構造の一例を図６Ａおよび図６Ｂにそれぞれ示す。図６Ａ、図６Ｂの何れにおいても、丸は、クラスタップおよび予測タップとして抽出される画素を示す。また、二重丸が注目画素を示す。なお、この一例では、注目画素も、クラスタップおよび予測タップとして抽出される。また、四角形は、クラスタップおよび予測タップの近傍の画素を示す。なお、注目画素がマクロブロックの中央部分に位置し、クラスタップの全てがマクロブロック内に収まるような配置が処理精度等の面から理想的ではあるが、必ずしも、クラスタップの全てがマクロブロック内に収まらなくても良い。
【００４４】
上述したこの発明の一実施形態では、ＭＰＥＧ２規格による送受信システムにおいて受信側で復元される画像信号である入力画像信号に対してライン間相関を評価し、評価結果に基づいて、フィールドＤＣＴ処理／フレームＤＣＴ処理の何れが行われているかを識別し、識別結果をクラス分類結果に反映させるようにしたものである。これに対し、入力画像信号を生成するＭＰＥＧ２デコーダに入力するＭＰＥＧ２規格による圧縮符号化によって生成されたデータストリーム内から、フィールドＤＣＴ処理／フレームＤＣＴ処理の何れが行われたかに係る１ビットの情報（データストリーム内のマクロブロック層の情報に含まれる）を参照してクラス分類を行うようにしても良い。
【００４５】
この場合、より具体的には、受信されるデータストリームから所定の回路によって当該１ビットの情報を取り出してクラス分類のために用いる構成、あるいは、受信されるデータストリームに伸長復号化を施すＭＰＥＧ２デコーダにおいてデータストリームから取り出される当該１ビットの情報をクラス分類のために用いる構成等を使用することができる。
【００４６】
この発明は、上述したこの発明の一実施形態に限定されるものでは無く、この発明の主旨を逸脱しない範囲内で様々な変形や応用が可能である。
【００４７】
【発明の効果】
上述したように、この発明は、ＭＰＥＧ２規格による送受信システムにおいて受信側で復元される画像信号を入力画像信号として供給され、かかる入力画像信号にクラス分類適応処理を施す際に、圧縮符号化時にフィールド内ＤＣＴ処理／フレーム内ＤＣＴ処理の何れがなされたかをマクロブロックを単位として識別し、識別結果をＡＤＲＣ処理等による波形分類と共にクラス分類に反映させるようにしたものである。
【００４８】
このため、圧縮符号化時になされたＤＣＴ処理の種類（モード）に的確に応じたクラス分類適応処理を行うことが可能となる。
【００４９】
従って、ＭＰＥＧ２規格による送受信システムにおいて受信側で復元される画像信号に対して、クラス分類適応処理を利用して画質改善を図る際に、フィールド内ＤＣＴ処理／フレーム内ＤＣＴ処理の切替えに起因して改善の程度が不充分となることを回避することができる。
【００５０】
従って、ＭＰＥＧ２規格による送受信システムにおいて受信側で復元される画像信号の画質を向上させることができる。
【図面の簡単な説明】
【図１】一般的なクラス分類適応処理における予測推定に係る構成の一例を示すブロック図である。
【図２】ＭＰＥＧ２規格による符号化方式を用いた送受信システムに対してクラス分類適応処理を行う場合の学習に係る構成の一例を示すブロック図である。
【図３】この発明の一実施形態における予測推定に係る構成の一例を示すブロック図である。
【図４】この発明の一実施形態における学習に係る構成の一例を示すブロック図である。
【図５】ＭＰＥＧ２におけるＤＣＴモードについて説明するための略線図である。
【図６】この発明の一実施形態におけるクラスタップおよび予測タップのタップ構造の一例を示す略線図である。
【符号の説明】
１１、・・・フィールド／フレーム処理識別回路、２４・・・フィールド／フレーム処理識別回路、１３０・・・特徴量抽出回路、２３０・・・特徴量抽出回路

Claims

伸長復号化された入力画像信号から注目画素の近傍となる第１の画素領域を抽出する第１の領域切り出し手段と、
上記入力画像信号について、圧縮符号化時にフィールド内ＤＣＴ処理／フレーム内ＤＣＴ処理の何れがなされたかをマクロブロックを単位として識別し、識別結果を出力するフィールド／フレーム処理識別手段と、
上記第１の領域切り出し手段から供給される画素データに符号化を施し、符号化コードを生成し、上記フィールド／フレーム処理識別手段から出力される上記識別結果に対応するコードを生成し、生成された上記符号化コードおよび上記識別結果に対応するコードを特徴量として抽出する特徴量抽出手段と、
上記特徴量抽出手段から抽出された上記符号化コードおよび上記識別結果に対応するコードに対応してクラスコードを生成するクラスコード生成手段と、
予め決定された予測係数を記憶し、記憶した上記予測係数の内から、上記クラスコードに対応する予測係数を出力する係数記憶手段と、
上記入力画像信号から注目画素の近傍となる第２の画素領域を抽出する第２の領域切り出し手段と、
上記第２の領域切り出し手段から供給される画素データと、上記係数記憶手段から供給される上記予測係数とを用いた重み付け加算を行って画素値を生成する演算処理手段と
を有し、ＭＰＥＧ２規格に従って圧縮符号化された画像信号を伸長復号化することによって生成される入力画像信号に画像情報変換を施す画像情報変換装置。
上記フィールド／フレーム処理識別手段は、
フィールド内およびフレーム内で、垂直方向のライン間相関を比較することによって識別結果を得る
請求項１に記載の画像情報変換装置。
上記フィールド／フレーム処理識別手段は、
フィールド内、フレーム内でそれぞれ垂直方向に隣接する画素間差分値の２乗和を計算し、計算値をライン間相関の評価値として使用する
請求項２に記載の画像情報変換装置。
上記特徴量抽出手段は、
上記第１の領域切り出し手段から供給される画素データにＡＤＲＣ処理を施すことによってＡＤＲＣコードを生成し、
上記ＡＤＲＣコードと、上記識別結果に対応するコードとを上記特徴量として抽出し、
上記クラスコード生成手段は、
上記ＡＤＲＣコードと、上記識別結果に対応するコードとを付加し、上記クラスコードを生成する
請求項１に記載の画像情報変換装置。
上記予測係数は、
所定の画像信号にＭＰＥＧ２規格に従う圧縮符号化および伸長復号化を施す画像信号復元手段と、
上記入力画像信号について、圧縮符号化時にフィールド内ＤＣＴ処理／フレーム内ＤＣＴ処理の何れがなされたかをマクロブロックを単位として識別し、識別結果を示すコードを出力する学習用フィールド／フレーム処理識別手段と、
上記画像信号復元手段の出力から注目画素の近傍となる第１の画素領域を抽出し、抽出した上記第１の画素領域に係る画素データと、上記学習用フィールド／フレーム処理識別手段から出力される上記識別結果を示すコードとを特徴量として抽出する学習用特徴量抽出手段と、
上記学習用特徴量抽出手段から出力された上記第１の画素領域に係る画素データと、上記識別結果を示すコードに対応してクラスコードを生成する学習用クラスコード生成手段と、
上記画像信号復元手段の出力から注目画素の近傍となる第２の画素領域を抽出する学習用領域切り出し手段と、
上記所定の画像信号と、上記学習用クラスコード生成手段から供給される上記識別結果を示すコードと、上記学習用領域切り出し手段から供給される上記第２の画素領域とを用いて、正規方程式を解くためのデータを生成する正規方程式加算手段と、
上記正規方程式加算手段から供給されるデータに基づいて所定の演算処理を行うことにより、上記予測係数を算出する予測係数算出手段とを備える予測係数決定手段によって決定される
請求項１に記載の画像情報変換装置。
伸長復号化された入力画像信号から注目画素の近傍となる第１の画素領域を抽出する第１の領域切り出しステップと、
上記入力画像信号について、圧縮符号化時にフィールド内ＤＣＴ処理／フレーム内ＤＣＴ処理の何れがなされたかをマクロブロックを単位として識別し、識別結果を出力するフィールド／フレーム処理識別ステップと、
上記第１の領域切り出しステップから供給される画素データに符号化を施し、符号化コードを生成し、上記フィールド／フレーム処理識別ステップから出力される上記識別結果に対応するコードを生成し、生成された上記符号化コードおよび上記識別結果に対応するコードを特徴量として抽出する特徴量抽出ステップと、
上記特徴量抽出ステップから抽出された上記符号化コードおよび上記識別結果に対応するコードに対応してクラスコードを生成するクラスコード生成ステップと、
予め決定された予測係数を記憶し、記憶した上記予測係数の内から、上記クラスコードに対応する予測係数を出力する係数記憶ステップと、
上記入力画像信号から注目画素の近傍となる第２の画素領域を抽出する第２の領域切り出しステップと、
上記第２の領域切り出しステップから供給される画素データと、上記係数記憶ステップから供給される上記予測係数とを用いた重み付け加算を行って画素値を生成する演算処理ステップと
を有し、ＭＰＥＧ２規格に従って圧縮符号化された画像信号を伸長復号化することによって生成される入力画像信号に画像情報変換を施す画像情報変換方法。