JP2003209811A - 映像信号処理装置および方法、記録媒体、並びにプログラム - Google Patents
映像信号処理装置および方法、記録媒体、並びにプログラムInfo
- Publication number
- JP2003209811A JP2003209811A JP2002007340A JP2002007340A JP2003209811A JP 2003209811 A JP2003209811 A JP 2003209811A JP 2002007340 A JP2002007340 A JP 2002007340A JP 2002007340 A JP2002007340 A JP 2002007340A JP 2003209811 A JP2003209811 A JP 2003209811A
- Authority
- JP
- Japan
- Prior art keywords
- block
- motion compensation
- motion
- motion vector
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 動き補償を施したブロックの境界付近に発生
した画素の不連続を補正する。 【解決手段】 境界補正部６は、横方向に連続して配置
された画素Ｐｂ乃至ｐｇを、画素Ｐｂ’乃至Ｐｇ’に変
換する。具体的には、境界補正の評価値として、ブロッ
クの境界を挟んでいる画素Ｐｄと画素Ｐｅの差分Δを算
出し、境界補正の評価値（差分Δ）が所定の閾値以上で
ある場合、境界からの距離に応じて小さくなる所定の係
数を差分Δに乗算した値を、画素Ｐｂ乃至ｐｇに対して
減算または加算して、画素Ｐｂ’乃至Ｐｇ’に変換す
る。例えば、 画素Ｐｂ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２
／３）・（２／３） 画素Ｐｃ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２
／３） 画素Ｐｄ’＝Ｐｄ−Δ・（１／２）・（２／３）
した画素の不連続を補正する。 【解決手段】 境界補正部６は、横方向に連続して配置
された画素Ｐｂ乃至ｐｇを、画素Ｐｂ’乃至Ｐｇ’に変
換する。具体的には、境界補正の評価値として、ブロッ
クの境界を挟んでいる画素Ｐｄと画素Ｐｅの差分Δを算
出し、境界補正の評価値（差分Δ）が所定の閾値以上で
ある場合、境界からの距離に応じて小さくなる所定の係
数を差分Δに乗算した値を、画素Ｐｂ乃至ｐｇに対して
減算または加算して、画素Ｐｂ’乃至Ｐｇ’に変換す
る。例えば、 画素Ｐｂ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２
／３）・（２／３） 画素Ｐｃ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２
／３） 画素Ｐｄ’＝Ｐｄ−Δ・（１／２）・（２／３）
Description
【０００１】
【発明の属する技術分野】本発明は、映像信号処理装置
および方法、記録媒体、並びにプログラムに関し、例え
ば、映像信号を構成する画像に対して、ブロック単位で
動き補償処理を施す場合に用いて好適な映像信号処理装
置および方法、記録媒体、並びにプログラムに関する。
および方法、記録媒体、並びにプログラムに関し、例え
ば、映像信号を構成する画像に対して、ブロック単位で
動き補償処理を施す場合に用いて好適な映像信号処理装
置および方法、記録媒体、並びにプログラムに関する。
【０００２】
【従来の技術】例えば、フィールド画像から構成される
インタレース映像信号をフレーム画像から構成されるプ
ログレッシブ画像信号に変換する処理や、MPEG(Moving
Picture Experts Group)方式を用いて映像信号を圧縮符
号化する処理においては、画像に対して動き補償処理が
施される（施されない場合もある）。
インタレース映像信号をフレーム画像から構成されるプ
ログレッシブ画像信号に変換する処理や、MPEG(Moving
Picture Experts Group)方式を用いて映像信号を圧縮符
号化する処理においては、画像に対して動き補償処理が
施される（施されない場合もある）。
【０００３】従来の動き補償処理は、画像を所定の領域
（ブロック）に分割する処理、各ブロックの動きベクト
ルを検出する処理、および検出した動きベクトルを用い
て各ブロックの動き補償を行う処理から成る。
（ブロック）に分割する処理、各ブロックの動きベクト
ルを検出する処理、および検出した動きベクトルを用い
て各ブロックの動き補償を行う処理から成る。
【０００４】従来の動き補償処理について、図１に示す
インタレース映像信号を構成する連続した２枚のフィー
ルド画像を参照して説明する。なお、図１Ａに示すフィ
ールド画像Ｆt-1は、図１Ｂに示すフィールド画像Ｆtに
対して１フィールド前のものであり、画像内で物体Ｏ
が、背景が異なる左上から右下の方向に移動していると
する。また、画像内の波線は分割されたブロックの境界
を示している。
インタレース映像信号を構成する連続した２枚のフィー
ルド画像を参照して説明する。なお、図１Ａに示すフィ
ールド画像Ｆt-1は、図１Ｂに示すフィールド画像Ｆtに
対して１フィールド前のものであり、画像内で物体Ｏ
が、背景が異なる左上から右下の方向に移動していると
する。また、画像内の波線は分割されたブロックの境界
を示している。
【０００５】動きベクトルを検出する処理は、フィール
ド画像Ｆtの各ブロックに対し、例えばブロックマッチ
ング法を適用して、フィールド画像Ｆt-1内の対応する
領域を探索し、対応するブロック対の相対的な位置の差
を各ブロックの動きベクトルを検出する。
ド画像Ｆtの各ブロックに対し、例えばブロックマッチ
ング法を適用して、フィールド画像Ｆt-1内の対応する
領域を探索し、対応するブロック対の相対的な位置の差
を各ブロックの動きベクトルを検出する。
【０００６】図１の場合、フィールド画像Ｆtにおける
物体Ｏを含むブロックｂに対しては、フィールド画像Ｆ
t-1内のブロックｂ’が対応するブロックとして検索さ
れ、ブロックｂとブロックｂ’の相対的な位置の差が動
きベクトルとして検出される。
物体Ｏを含むブロックｂに対しては、フィールド画像Ｆ
t-1内のブロックｂ’が対応するブロックとして検索さ
れ、ブロックｂとブロックｂ’の相対的な位置の差が動
きベクトルとして検出される。
【０００７】フィールド画像Ｆt-1に対する動き補処理
では、図１Ｃに示すように、物体Ｏを含むブロックｂ’
が検出した動きベクトルに従って移動される。なお、物
体Ｏを含まないブロックに対しては、検出される動きベ
クトルが０であるので動き補償は施されない。
では、図１Ｃに示すように、物体Ｏを含むブロックｂ’
が検出した動きベクトルに従って移動される。なお、物
体Ｏを含まないブロックに対しては、検出される動きベ
クトルが０であるので動き補償は施されない。
【０００８】
【発明が解決しようとする課題】図１Ｃから明らかなよ
うに、物体Ｏだけが実際に移動しているにも拘わらず、
動き補償はブロック単位で施されるので、物体Ｏの周囲
の画素も移動されてしまう。これにより、動き補償を施
した画像のブロックの境界付近の画素に信号の不連続が
発生してしまう課題があった。
うに、物体Ｏだけが実際に移動しているにも拘わらず、
動き補償はブロック単位で施されるので、物体Ｏの周囲
の画素も移動されてしまう。これにより、動き補償を施
した画像のブロックの境界付近の画素に信号の不連続が
発生してしまう課題があった。
【０００９】また、ブロック単位で動きベクトルを検出
しているので、ブロック内に異なる動きを示す複数の物
体が含まれていた場合にも当該ブロックに対する動きベ
クトルは１つだけ検出（算出）されることになるので、
動き量と異なる補償が施されてしまう課題があった。
しているので、ブロック内に異なる動きを示す複数の物
体が含まれていた場合にも当該ブロックに対する動きベ
クトルは１つだけ検出（算出）されることになるので、
動き量と異なる補償が施されてしまう課題があった。
【００１０】本発明はこのような状況に鑑みてなされた
ものであり、動き補償を施したブロックの境界付近に発
生した画素の不連続を補正できるようにすることを目的
とする。
ものであり、動き補償を施したブロックの境界付近に発
生した画素の不連続を補正できるようにすることを目的
とする。
【００１１】
【課題を解決するための手段】本発明の映像信号処理装
置は、画像を所定のブロックに分割し、各ブロックに対
する動きベクトルを検出する動きベクトル検出手段と、
動きベクトル検出手段によって検出された動きベクトル
に基づき、画像に対してブロック単位で動き補償を施す
動き補償手段と、動き補償手段によってブロック単位で
動き補償が施された画像のブロックの境界に発生した画
素の不連続を検出する検出手段と、検出手段によって検
出された画素の不連続を補正する補正手段とを含むこと
を特徴とする。
置は、画像を所定のブロックに分割し、各ブロックに対
する動きベクトルを検出する動きベクトル検出手段と、
動きベクトル検出手段によって検出された動きベクトル
に基づき、画像に対してブロック単位で動き補償を施す
動き補償手段と、動き補償手段によってブロック単位で
動き補償が施された画像のブロックの境界に発生した画
素の不連続を検出する検出手段と、検出手段によって検
出された画素の不連続を補正する補正手段とを含むこと
を特徴とする。
【００１２】前記動き補償手段は、動きベクトル検出手
段によって検出された動きベクトルに対応する評価値に
基づき、画像に対してブロック単位で動き補償を施すか
否かを決定するようにすることができる。
段によって検出された動きベクトルに対応する評価値に
基づき、画像に対してブロック単位で動き補償を施すか
否かを決定するようにすることができる。
【００１３】前記検出手段は、動き補償手段の補償結果
に基づき、ブロックの境界に発生した画素の不連続を検
出するようにすることができる。
に基づき、ブロックの境界に発生した画素の不連続を検
出するようにすることができる。
【００１４】前記検出手段は、動き補償手段の補償結果
と、動き補償を施さない場合の結果との比較結果に基づ
き、ブロックの境界に発生した画素の不連続を検出する
ようにすることができる。
と、動き補償を施さない場合の結果との比較結果に基づ
き、ブロックの境界に発生した画素の不連続を検出する
ようにすることができる。
【００１５】前記検出手段は、ブロックの境界を挟んで
隣接するブロック対に同一の動きベクトルを用いて動き
補償を施した結果に基づき、ブロックの境界に発生した
画素の不連続を検出するようにすることができる。
隣接するブロック対に同一の動きベクトルを用いて動き
補償を施した結果に基づき、ブロックの境界に発生した
画素の不連続を検出するようにすることができる。
【００１６】本発明の映像信号処理方法は、画像を所定
のブロックに分割し、各ブロックに対する動きベクトル
を検出する動きベクトル検出ステップと、動きベクトル
検出ステップの処理で検出された動きベクトルに基づ
き、画像に対してブロック単位で動き補償を施す動き補
償ステップと、動き補償ステップの処理でブロック単位
で動き補償が施された画像のブロックの境界に発生した
画素の不連続を検出する検出ステップと、検出ステップ
の処理で検出された画素の不連続を補正する補正ステッ
プとを含むことを特徴とする。
のブロックに分割し、各ブロックに対する動きベクトル
を検出する動きベクトル検出ステップと、動きベクトル
検出ステップの処理で検出された動きベクトルに基づ
き、画像に対してブロック単位で動き補償を施す動き補
償ステップと、動き補償ステップの処理でブロック単位
で動き補償が施された画像のブロックの境界に発生した
画素の不連続を検出する検出ステップと、検出ステップ
の処理で検出された画素の不連続を補正する補正ステッ
プとを含むことを特徴とする。
【００１７】本発明の記録媒体のプログラムは、画像を
所定のブロックに分割し、各ブロックに対する動きベク
トルを検出する動きベクトル検出ステップと、動きベク
トル検出ステップの処理で検出された動きベクトルに基
づき、画像に対してブロック単位で動き補償を施す動き
補償ステップと、動き補償ステップの処理でブロック単
位で動き補償が施された画像のブロックの境界に発生し
た画素の不連続を検出する検出ステップと、検出ステッ
プの処理で検出された画素の不連続を補正する補正ステ
ップとを含むことを特徴とする。
所定のブロックに分割し、各ブロックに対する動きベク
トルを検出する動きベクトル検出ステップと、動きベク
トル検出ステップの処理で検出された動きベクトルに基
づき、画像に対してブロック単位で動き補償を施す動き
補償ステップと、動き補償ステップの処理でブロック単
位で動き補償が施された画像のブロックの境界に発生し
た画素の不連続を検出する検出ステップと、検出ステッ
プの処理で検出された画素の不連続を補正する補正ステ
ップとを含むことを特徴とする。
【００１８】本発明のプログラムは、画像を所定のブロ
ックに分割し、各ブロックに対する動きベクトルを検出
する動きベクトル検出ステップと、動きベクトル検出ス
テップの処理で検出された動きベクトルに基づき、画像
に対してブロック単位で動き補償を施す動き補償ステッ
プと、動き補償ステップの処理でブロック単位で動き補
償が施された画像のブロックの境界に発生した画素の不
連続を検出する検出ステップと、検出ステップの処理で
検出された画素の不連続を補正する補正ステップとをコ
ンピュータに実行させることを特徴とする。
ックに分割し、各ブロックに対する動きベクトルを検出
する動きベクトル検出ステップと、動きベクトル検出ス
テップの処理で検出された動きベクトルに基づき、画像
に対してブロック単位で動き補償を施す動き補償ステッ
プと、動き補償ステップの処理でブロック単位で動き補
償が施された画像のブロックの境界に発生した画素の不
連続を検出する検出ステップと、検出ステップの処理で
検出された画素の不連続を補正する補正ステップとをコ
ンピュータに実行させることを特徴とする。
【００１９】本発明の映像信号処理装置および方法、並
びにプログラムにおいては、検出された動きベクトルに
基づき、画像に対してブロック単位で動き補償が施さ
れ、ブロック単位で動き補償が施された画像のブロック
の境界に発生した画素の不連続が検出され、検出された
画素の不連続が補正される。
びにプログラムにおいては、検出された動きベクトルに
基づき、画像に対してブロック単位で動き補償が施さ
れ、ブロック単位で動き補償が施された画像のブロック
の境界に発生した画素の不連続が検出され、検出された
画素の不連続が補正される。
【００２０】
【発明の実施の形態】本発明を適用した映像信号処理装
置の構成例について、図２を参照して説明する。この映
像信号処理装置１は、入力されるフィールド画像を１フ
ィールド周期だけ遅延するフィールドメモリ２、入力さ
れるフィールド画像Ｆt-1，Ｆtにブロックマッチング法
を適用して各ブロックの動きベクトルを検出し、検出し
た各ブロックに対する動きベクトルと、動きベクトルを
検出したときの評価値（フィールド画像Ｆt-1のブロッ
クと、フィールド画像Ｆtのブロックとの対応する画素
対の差分値の総和）を動き補償判定部４に出力する動き
ベクトル検出部３、動きベクトル検出部３から入力され
る各ブロックに対応する動きベクトルの評価値に基づい
て、各ブロックに対する動き補償を行うか否かを判定す
る動き補償判定部４、動き補償判定部４の判定結果に対
応して、入力されたフィールド画像Ｆt-1にブロック単
位の動き補償を施す動き補償部５、動き補償が施された
フィールド画像Ｆt-1の実際に動き補償が施されたブロ
ックの境界付近に発生する画素の不連続を補正する境界
補正部６、および記録媒体７のプログラムに基づき各部
を制御する制御部８から構成される。
置の構成例について、図２を参照して説明する。この映
像信号処理装置１は、入力されるフィールド画像を１フ
ィールド周期だけ遅延するフィールドメモリ２、入力さ
れるフィールド画像Ｆt-1，Ｆtにブロックマッチング法
を適用して各ブロックの動きベクトルを検出し、検出し
た各ブロックに対する動きベクトルと、動きベクトルを
検出したときの評価値（フィールド画像Ｆt-1のブロッ
クと、フィールド画像Ｆtのブロックとの対応する画素
対の差分値の総和）を動き補償判定部４に出力する動き
ベクトル検出部３、動きベクトル検出部３から入力され
る各ブロックに対応する動きベクトルの評価値に基づい
て、各ブロックに対する動き補償を行うか否かを判定す
る動き補償判定部４、動き補償判定部４の判定結果に対
応して、入力されたフィールド画像Ｆt-1にブロック単
位の動き補償を施す動き補償部５、動き補償が施された
フィールド画像Ｆt-1の実際に動き補償が施されたブロ
ックの境界付近に発生する画素の不連続を補正する境界
補正部６、および記録媒体７のプログラムに基づき各部
を制御する制御部８から構成される。
【００２１】映像信号処理装置１の動作について説明す
る。映像信号処理装置１においては、インタレース映像
信号を構成するフィールド画像がフィールドメモリ２、
動きベクトル検出部３、動き補償部５に順次入力され
る。フィールドメモリ２では、入力されたフィールド画
像が１フィールド周期だけ遅延されて、動きベクトル検
出部３、および動き補償部５に供給される。
る。映像信号処理装置１においては、インタレース映像
信号を構成するフィールド画像がフィールドメモリ２、
動きベクトル検出部３、動き補償部５に順次入力され
る。フィールドメモリ２では、入力されたフィールド画
像が１フィールド周期だけ遅延されて、動きベクトル検
出部３、および動き補償部５に供給される。
【００２２】したがって、映像信号処理装置１に入力さ
れるフィールド画像をＦtとすれば、動きベクトル検出
部３および動き補償部５には、連続するフィールド画像
Ｆt- 1，Ｆtが同時に入力されることになる。
れるフィールド画像をＦtとすれば、動きベクトル検出
部３および動き補償部５には、連続するフィールド画像
Ｆt- 1，Ｆtが同時に入力されることになる。
【００２３】動きベクトル検出部３では、入力されたフ
ィールド画像Ｆt-1，Ｆtにブロックマッチング法が適用
されて各ブロックの動きベクトルが検出され、検出され
た各ブロックに対する動きベクトルと、動きベクトルを
検出したときの評価値が動き補償判定部４に出力され
る。
ィールド画像Ｆt-1，Ｆtにブロックマッチング法が適用
されて各ブロックの動きベクトルが検出され、検出され
た各ブロックに対する動きベクトルと、動きベクトルを
検出したときの評価値が動き補償判定部４に出力され
る。
【００２４】動き補償判定部４では、動きベクトル検出
部３から入力された各ブロックの動きベクトルの評価値
に基づき、各ブロックに対して動き補償を行うか否かを
判定し、判定結果を動きベクトルとともに動き補償部５
に出力する。具体的には、評価値が所定の評価値以上で
ある場合、動き補償を行うと判定し、反対に、評価値が
所定の評価値未満である場合、動き補償を行わないと判
定する。
部３から入力された各ブロックの動きベクトルの評価値
に基づき、各ブロックに対して動き補償を行うか否かを
判定し、判定結果を動きベクトルとともに動き補償部５
に出力する。具体的には、評価値が所定の評価値以上で
ある場合、動き補償を行うと判定し、反対に、評価値が
所定の評価値未満である場合、動き補償を行わないと判
定する。
【００２５】動き補償部５では、動き補償判定部４の判
定結果に対応して、例えば図１Ｃに示したように、入力
されたフィールド画像Ｆt-1にブロック単位の動き補償
が施されて境界補正部６に出力される。境界補正部６
は、動き補償が施されたフィールド画像Ｆt-1のうちの
実際に動き補償が施されたブロックの境界付近に画素信
号の不連続が発生している場合、それを補正する。
定結果に対応して、例えば図１Ｃに示したように、入力
されたフィールド画像Ｆt-1にブロック単位の動き補償
が施されて境界補正部６に出力される。境界補正部６
は、動き補償が施されたフィールド画像Ｆt-1のうちの
実際に動き補償が施されたブロックの境界付近に画素信
号の不連続が発生している場合、それを補正する。
【００２６】境界補正部６の動作について、図３乃至図
５を参照して説明する。図３は、図１Ｃに示した動き補
償が施されたフィールド画像Ｆt-1のうち、実際に動き
補償が施された物体Ｏを含むブロック付近の拡大図であ
る。図４は、図３に波線で示す領域２１内に横方向に配
置された画素Ｐａ乃至ｐｈの信号値（輝度、色差信号
等）を示している。画素Ｐｄと画素Ｐｅの間にブロック
の境界があり、ここに信号の不連続が存在する。
５を参照して説明する。図３は、図１Ｃに示した動き補
償が施されたフィールド画像Ｆt-1のうち、実際に動き
補償が施された物体Ｏを含むブロック付近の拡大図であ
る。図４は、図３に波線で示す領域２１内に横方向に配
置された画素Ｐａ乃至ｐｈの信号値（輝度、色差信号
等）を示している。画素Ｐｄと画素Ｐｅの間にブロック
の境界があり、ここに信号の不連続が存在する。
【００２７】境界補正部６は、横方向に連続して配置さ
れた画素Ｐｂ乃至ｐｇを、画素Ｐｂ’乃至Ｐｇ’に変換
する。具体的には、境界補正の評価値として、ブロック
の境界を挟んでいる画素Ｐｄと画素Ｐｅの差分Δを算出
し、境界補正の評価値（差分Δ）が所定の閾値以上であ
る場合、次式のように、境界からの距離に応じて小さく
なる所定の係数を差分Δに乗算した値を、画素Ｐｂ乃至
ｐｇに対して減算または加算して、画素Ｐｂ’乃至Ｐ
ｇ’に変換する。 画素Ｐｂ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２／３）・（２／３） 画素Ｐｃ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２／３） 画素Ｐｄ’＝Ｐｄ−Δ・（１／２）・（２／３） 画素Ｐｅ’＝Ｐｅ＋Δ・（１／２）・（２／３） 画素Ｐｆ’＝Ｐｆ＋Δ・（１／２）・（２／３）・（２／３） 画素Ｐｇ’＝Ｐｇ＋Δ・（１／２）・（２／３）・（２／３）・（２／３）
れた画素Ｐｂ乃至ｐｇを、画素Ｐｂ’乃至Ｐｇ’に変換
する。具体的には、境界補正の評価値として、ブロック
の境界を挟んでいる画素Ｐｄと画素Ｐｅの差分Δを算出
し、境界補正の評価値（差分Δ）が所定の閾値以上であ
る場合、次式のように、境界からの距離に応じて小さく
なる所定の係数を差分Δに乗算した値を、画素Ｐｂ乃至
ｐｇに対して減算または加算して、画素Ｐｂ’乃至Ｐ
ｇ’に変換する。 画素Ｐｂ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２／３）・（２／３） 画素Ｐｃ’＝Ｐｃ−Δ・（１／２）・（２／３）・（２／３） 画素Ｐｄ’＝Ｐｄ−Δ・（１／２）・（２／３） 画素Ｐｅ’＝Ｐｅ＋Δ・（１／２）・（２／３） 画素Ｐｆ’＝Ｐｆ＋Δ・（１／２）・（２／３）・（２／３） 画素Ｐｇ’＝Ｐｇ＋Δ・（１／２）・（２／３）・（２／３）・（２／３）
【００２８】なお、上式における所定の係数は一例であ
り、他の値を用いるようにしてもよい。また、上述した
ように、ブロックの境界を挟む３画素ずつを補正するこ
とは、補正の一例であって、例えばブロックの境界を挟
む２画素ずつ、あるいは４画素ずつを補正するようにし
てもよい。
り、他の値を用いるようにしてもよい。また、上述した
ように、ブロックの境界を挟む３画素ずつを補正するこ
とは、補正の一例であって、例えばブロックの境界を挟
む２画素ずつ、あるいは４画素ずつを補正するようにし
てもよい。
【００２９】図５は、境界補正部６の処理を説明するフ
ローチャートである。この処理は、図１Ｃに示したよう
な動き補償が施されたフィールド画像Ｆt-1の各画素を
順次処理対象として実行される。
ローチャートである。この処理は、図１Ｃに示したよう
な動き補償が施されたフィールド画像Ｆt-1の各画素を
順次処理対象として実行される。
【００３０】ステップＳ１において、境界補正部６は、
処理対象である画素がブロックの境界付近の画素（例え
ば、図４に示す画素Ｐｂ乃至Ｐｇにように、境界までの
間に存在する画素の数が２以下である画素）であるか否
かを判定する。境界付近の画素であると判定された場
合、処理はステップＳ２に進む。
処理対象である画素がブロックの境界付近の画素（例え
ば、図４に示す画素Ｐｂ乃至Ｐｇにように、境界までの
間に存在する画素の数が２以下である画素）であるか否
かを判定する。境界付近の画素であると判定された場
合、処理はステップＳ２に進む。
【００３１】ステップＳ２において、境界補正部６は、
処理対象である画素の付近に存在する境界が、動き補償
されたブロックの境界であるか否かを判定する。動き補
償されたブロックの境界であると判定された場合、処理
はステップＳ３に進む。ステップＳ３において、境界補
正部６は、処理対象である画素の付近に存在する、動き
補正されたブロックの境界で隣接するブロックが、当該
動き補償されたブロックと同一の動きベクトルに基づい
て動き補償されているか否かを判定する。隣接するブロ
ックが、同一の動きベクトルに基づいて動き補償されて
いないと判定された場合、処理はステップＳ４に進む。
処理対象である画素の付近に存在する境界が、動き補償
されたブロックの境界であるか否かを判定する。動き補
償されたブロックの境界であると判定された場合、処理
はステップＳ３に進む。ステップＳ３において、境界補
正部６は、処理対象である画素の付近に存在する、動き
補正されたブロックの境界で隣接するブロックが、当該
動き補償されたブロックと同一の動きベクトルに基づい
て動き補償されているか否かを判定する。隣接するブロ
ックが、同一の動きベクトルに基づいて動き補償されて
いないと判定された場合、処理はステップＳ４に進む。
【００３２】ステップＳ４において、境界補正部６は、
処理対象としている画素の付近に存在する境界に対する
境界補正の評価値（境界を挟む画素対の差分Δ）を算出
する。なお、境界補正に対する評価値は、必ずしもステ
ップＳ４に毎に算出する必要はなく、既に算出されてい
る場合、それを流用すればよい。
処理対象としている画素の付近に存在する境界に対する
境界補正の評価値（境界を挟む画素対の差分Δ）を算出
する。なお、境界補正に対する評価値は、必ずしもステ
ップＳ４に毎に算出する必要はなく、既に算出されてい
る場合、それを流用すればよい。
【００３３】ステップＳ５において、境界補正部６は、
ステップＳ４で算出した境界補正の評価値が所定の閾値
以上であるか否かを判定し、境界補正の評価値が所定の
閾値以上であると判定した場合、ステップＳ６に進む。
ステップＳ６において、境界補正部６は、図４を参照し
て上述したように、処理対象である画素の信号を変換す
る。
ステップＳ４で算出した境界補正の評価値が所定の閾値
以上であるか否かを判定し、境界補正の評価値が所定の
閾値以上であると判定した場合、ステップＳ６に進む。
ステップＳ６において、境界補正部６は、図４を参照し
て上述したように、処理対象である画素の信号を変換す
る。
【００３４】なお、ステップＳ１において、境界付近の
画素ではないと判定された場合、ステップＳ２におい
て、処理対象である画素の付近に存在する境界が、動き
補償されたブロックの境界ではないと判定された場合、
ステップＳ３において、隣接するブロックが、同一の動
きベクトルに基づいて動き補償されていると判定された
場合、あるいは、ステップＳ５において、境界補正の評
価値が所定の閾値以上ではないと判定された場合、以降
の処理は実行されずに終了し、この後、次の画素が処理
対象とされて、ステップＳ１以降の処理が開始されるこ
とになる。以上、境界補正部６による処理の説明を終了
する。
画素ではないと判定された場合、ステップＳ２におい
て、処理対象である画素の付近に存在する境界が、動き
補償されたブロックの境界ではないと判定された場合、
ステップＳ３において、隣接するブロックが、同一の動
きベクトルに基づいて動き補償されていると判定された
場合、あるいは、ステップＳ５において、境界補正の評
価値が所定の閾値以上ではないと判定された場合、以降
の処理は実行されずに終了し、この後、次の画素が処理
対象とされて、ステップＳ１以降の処理が開始されるこ
とになる。以上、境界補正部６による処理の説明を終了
する。
【００３５】ところで、境界付近の画素を補正するか否
かの判定に、補償を行わなかった場合の差分や、隣接す
る領域にも同じベクトルで補償を施した場合に補償され
た画素（例えば図４の画素Ｐｗ乃至Ｐｚ）を利用するこ
ともできる。
かの判定に、補償を行わなかった場合の差分や、隣接す
る領域にも同じベクトルで補償を施した場合に補償され
た画素（例えば図４の画素Ｐｗ乃至Ｐｚ）を利用するこ
ともできる。
【００３６】これは画素Ｐａ乃至Ｐｄが動き補償を施さ
ないブロックに属し、画素Ｐｅ乃至Ｐｈが動き補償を施
したブロックに属する場合、この画素Ｐｅ乃至Ｐｈの動
き補償を行わなかった場合に、このブロックに属する画
素Ｐｗ乃至Ｐｚと比較し、動き補償を施したことによっ
てブロックの境界に不連続が発生したか否かを判定する
ことで、動き補償を施さなかった場合でも不連続がある
場合に補正を行わないようにすることができる。
ないブロックに属し、画素Ｐｅ乃至Ｐｈが動き補償を施
したブロックに属する場合、この画素Ｐｅ乃至Ｐｈの動
き補償を行わなかった場合に、このブロックに属する画
素Ｐｗ乃至Ｐｚと比較し、動き補償を施したことによっ
てブロックの境界に不連続が発生したか否かを判定する
ことで、動き補償を施さなかった場合でも不連続がある
場合に補正を行わないようにすることができる。
【００３７】また、画素Ｐａ乃至Ｐｄが属するブロック
と、画素Ｐｅ乃至Ｐｈが属するブロックがそれぞれ異な
る動きベクトルを用いて動き補償された場合、画素Ｐｅ
乃至Ｐｈが属するブロックの動き補償を、画素Ｐａ乃至
Ｐｄが属するブロックの動き補償に用いた動きベクトル
を用いて補償した場合の画素Ｐｗ乃至Ｐｚを用いて同様
の判定を行うようにしてもよい。
と、画素Ｐｅ乃至Ｐｈが属するブロックがそれぞれ異な
る動きベクトルを用いて動き補償された場合、画素Ｐｅ
乃至Ｐｈが属するブロックの動き補償を、画素Ｐａ乃至
Ｐｄが属するブロックの動き補償に用いた動きベクトル
を用いて補償した場合の画素Ｐｗ乃至Ｐｚを用いて同様
の判定を行うようにしてもよい。
【００３８】ところで、上述した一連の処理は、ハード
ウェアにより実行させることもできるが、ソフトウェア
により実行させることもできる。一連の処理をソフトウ
ェアにより実行させる場合には、そのソフトウェアを構
成するプログラムが、専用のハードウェアに組み込まれ
ているコンピュータ、または、各種のプログラムをイン
ストールすることで、各種の機能を実行することが可能
な、例えば汎用のパーソナルコンピュータなどに、図２
の記録媒体７などからインストールされる。
ウェアにより実行させることもできるが、ソフトウェア
により実行させることもできる。一連の処理をソフトウ
ェアにより実行させる場合には、そのソフトウェアを構
成するプログラムが、専用のハードウェアに組み込まれ
ているコンピュータ、または、各種のプログラムをイン
ストールすることで、各種の機能を実行することが可能
な、例えば汎用のパーソナルコンピュータなどに、図２
の記録媒体７などからインストールされる。
【００３９】この記録媒体は、コンピュータとは別に、
ユーザにプログラムを提供するために配布される、プロ
グラムが記録されている磁気ディスク（フロッピディス
クを含む）、光ディスク（CD-ROM(Compact Disc-Read O
nly Memory)、DVD(Digital Versatile Disc)を含む）、
光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは
半導体メモリなどよりなるパッケージメディアにより構
成されるだけでなく、コンピュータに予め組み込まれた
状態でユーザに提供される、プログラムが記録されてい
るROMやハードディスクなどで構成される。
ユーザにプログラムを提供するために配布される、プロ
グラムが記録されている磁気ディスク（フロッピディス
クを含む）、光ディスク（CD-ROM(Compact Disc-Read O
nly Memory)、DVD(Digital Versatile Disc)を含む）、
光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは
半導体メモリなどよりなるパッケージメディアにより構
成されるだけでなく、コンピュータに予め組み込まれた
状態でユーザに提供される、プログラムが記録されてい
るROMやハードディスクなどで構成される。
【００４０】なお、本明細書において、記録媒体に記録
されるプログラムを記述するステップは、記載された順
序に従って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。
されるプログラムを記述するステップは、記載された順
序に従って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。
【００４１】
【発明の効果】以上のように、本発明の映像信号処理装
置および方法、並びにプログラムによれば、動き補償を
施したブロックの境界付近に発生した画素の不連続を補
正することが可能となる。
置および方法、並びにプログラムによれば、動き補償を
施したブロックの境界付近に発生した画素の不連続を補
正することが可能となる。
【図１】従来の動き補償処理を説明するための図であ
る。
る。
【図２】本発明を適用した映像信号処理装置１の構成例
を示すブロック図である。
を示すブロック図である。
【図３】動き補償されたブロックを示す図である。
【図４】境界補正部６の処理を説明するための図であ
る。
る。
【図５】境界補正部６の処理を説明するフローチャート
である。
である。
１ 映像信号処理装置， ２ フィールドメモリ， ３
動きベクトル検出部， ４ 動き補償判定部， ５
動き補償部， ６ 境界補正部， ７ 制御部， ８
記録媒体
動きベクトル検出部， ４ 動き補償判定部， ５
動き補償部， ６ 境界補正部， ７ 制御部， ８
記録媒体
─────────────────────────────────────────────────────
フロントページの続き
(72)発明者 福田 京子
東京都品川区北品川６丁目７番35号 ソニ
ー株式会社内
(72)発明者 宮田 勝成
東京都品川区北品川６丁目７番35号 ソニ
ー株式会社内
(72)発明者 太田 正志
東京都品川区北品川６丁目７番35号 ソニ
ー株式会社内
Ｆターム(参考） 5C059 MA00 NN01 NN28 PP04 PP16
PP25 PP26 TA61 TB08 TC12
TC33 TC42 TD05 TD12 UA02
5C063 AA07 BA04 BA12 CA11
5J064 AA01 BA13 BB04 BC01 BC14
BC29 BC30 BD03
Claims (8)
- 【請求項１】 映像信号を構成する画像に対し、ブロッ
ク単位で動き補償を施す映像信号処理装置において、 前記画像を所定のブロックに分割し、各ブロックに対す
る動きベクトルを検出する動きベクトル検出手段と、 前記動きベクトル検出手段によって検出された前記動き
ベクトルに基づき、前記画像に対して前記ブロック単位
で動き補償を施す動き補償手段と、 前記動き補償手段によってブロック単位で動き補償が施
された前記画像の前記ブロックの境界に発生した画素の
不連続を検出する検出手段と、 前記検出手段によって検出された前記画素の不連続を補
正する補正手段とを含むことを特徴とする映像信号処理
装置。 - 【請求項２】 動き補償手段は、前記動きベクトル検出
手段によって検出された前記動きベクトルに対応する評
価値に基づき、前記画像に対して前記ブロック単位で動
き補償を施すか否かを決定することを特徴とする請求項
１に記載の映像信号処理装置。 - 【請求項３】 前記検出手段は、前記動き補償手段の補
償結果に基づき、前記ブロックの前記境界に発生した画
素の不連続を検出することを特徴とする請求項１に記載
の映像信号処理装置。 - 【請求項４】 前記検出手段は、前記動き補償手段の補
償結果と、動き補償を施さない場合の結果との比較結果
に基づき、前記ブロックの前記境界に発生した画素の不
連続を検出することを特徴とする請求項１に記載の映像
信号処理装置。 - 【請求項５】 前記検出手段は、前記ブロックの前記境
界を挟んで隣接するブロック対に同一の動きベクトルを
用いて動き補償を施した結果に基づき、前記ブロックの
前記境界に発生した画素の不連続を検出することを特徴
とする請求項１に記載の映像信号処理装置。 - 【請求項６】 映像信号を構成する画像に対し、ブロッ
ク単位で動き補償を施す映像信号処理装置の映像信号処
理方法において、 前記画像を所定のブロックに分割し、各ブロックに対す
る動きベクトルを検出する動きベクトル検出ステップ
と、 前記動きベクトル検出ステップの処理で検出された前記
動きベクトルに基づき、前記画像に対して前記ブロック
単位で動き補償を施す動き補償ステップと、 前記動き補償ステップの処理でブロック単位で動き補償
が施された前記画像の前記ブロックの境界に発生した画
素の不連続を検出する検出ステップと、 前記検出ステップの処理で検出された前記画素の不連続
を補正する補正ステップとを含むことを特徴とする映像
信号処理方法。 - 【請求項７】 映像信号を構成する画像に対し、ブロッ
ク単位で動き補償を施すためのプログラムであって、 前記画像を所定のブロックに分割し、各ブロックに対す
る動きベクトルを検出する動きベクトル検出ステップ
と、 前記動きベクトル検出ステップの処理で検出された前記
動きベクトルに基づき、前記画像に対して前記ブロック
単位で動き補償を施す動き補償ステップと、 前記動き補償ステップの処理でブロック単位で動き補償
が施された前記画像の前記ブロックの境界に発生した画
素の不連続を検出する検出ステップと、 前記検出ステップの処理で検出された前記画素の不連続
を補正する補正ステップとを含むことを特徴とするコン
ピュータが読み取り可能なプログラムが記録されている
記録媒体。 - 【請求項８】 映像信号を構成する画像に対し、ブロッ
ク単位で動き補償を施すコンピュータに、 前記画像を所定のブロックに分割し、各ブロックに対す
る動きベクトルを検出する動きベクトル検出ステップ
と、 前記動きベクトル検出ステップの処理で検出された前記
動きベクトルに基づき、前記画像に対して前記ブロック
単位で動き補償を施す動き補償ステップと、 前記動き補償ステップの処理でブロック単位で動き補償
が施された前記画像の前記ブロックの境界に発生した画
素の不連続を検出する検出ステップと、 前記検出ステップの処理で検出された前記画素の不連続
を補正する補正ステップとを実行させるプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002007340A JP2003209811A (ja) | 2002-01-16 | 2002-01-16 | 映像信号処理装置および方法、記録媒体、並びにプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002007340A JP2003209811A (ja) | 2002-01-16 | 2002-01-16 | 映像信号処理装置および方法、記録媒体、並びにプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003209811A true JP2003209811A (ja) | 2003-07-25 |
Family
ID=27645882
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002007340A Withdrawn JP2003209811A (ja) | 2002-01-16 | 2002-01-16 | 映像信号処理装置および方法、記録媒体、並びにプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003209811A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013054750A1 (ja) * | 2011-10-14 | 2013-04-18 | ソニー株式会社 | 画像処理装置および方法、プログラム、並びに記録媒体 |
-
2002
- 2002-01-16 JP JP2002007340A patent/JP2003209811A/ja not_active Withdrawn
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013054750A1 (ja) * | 2011-10-14 | 2013-04-18 | ソニー株式会社 | 画像処理装置および方法、プログラム、並びに記録媒体 |
| CN103858432A (zh) * | 2011-10-14 | 2014-06-11 | 索尼公司 | 图像处理装置、方法、程序以及记录介质 |
| US9509993B2 (en) | 2011-10-14 | 2016-11-29 | Sony Corporation | Image processing device and method, program, and recording medium |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7936950B2 (en) | Apparatus for creating interpolation frame | |
| US20080002774A1 (en) | Motion vector search method and motion vector search apparatus | |
| KR101622363B1 (ko) | 필름 모드 또는 카메라 모드의 검출을 위한 방법 | |
| US20090268097A1 (en) | Scene change detection method and related apparatus according to summation results of block matching costs associated with at least two frames | |
| JP3960258B2 (ja) | 信号処理装置および信号処理方法 | |
| JP4145837B2 (ja) | ブロックに基いた動き補償装置および方法 | |
| US8411974B2 (en) | Image processing apparatus, method, and program for detecting still-zone area | |
| US8750635B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
| US8538070B2 (en) | Motion detecting method and apparatus thereof | |
| KR101167645B1 (ko) | 장면 전환 검출 방법 및 장치 | |
| KR101208680B1 (ko) | 영상디스플레이장치 및 컬러왜곡 보상방법 | |
| US20120274845A1 (en) | Image processing device and method, and program | |
| US8244055B2 (en) | Image processing apparatus and method, and program | |
| JP5839848B2 (ja) | 画像処理装置、画像処理方法 | |
| CN111294545B (zh) | 图像数据插值方法及装置、存储介质、终端 | |
| US8509552B1 (en) | Digital image processing error concealment method | |
| JP2003209811A (ja) | 映像信号処理装置および方法、記録媒体、並びにプログラム | |
| JP2009303108A (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
| US8768088B2 (en) | Error concealment method and device | |
| US8472787B2 (en) | Method and apparatus for detecting a noise value of a video signal | |
| JP2007243627A (ja) | ビデオ信号処理装置 | |
| JP2005229166A (ja) | 映像信号のノイズ量測定装置および測定方法 | |
| JP4902510B2 (ja) | 符号化装置及び符号化方法 | |
| JP4039273B2 (ja) | 動きベクトル検出装置 | |
| JP2002290977A (ja) | 動きベクトル検出装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20050405 |