JP2869844B2 - 駒数変換機能を有する画像信号処理装置 - Google Patents
駒数変換機能を有する画像信号処理装置Info
- Publication number
- JP2869844B2 JP2869844B2 JP28992493A JP28992493A JP2869844B2 JP 2869844 B2 JP2869844 B2 JP 2869844B2 JP 28992493 A JP28992493 A JP 28992493A JP 28992493 A JP28992493 A JP 28992493A JP 2869844 B2 JP2869844 B2 JP 2869844B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- motion
- difference
- reference image
- motion vector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Description
【０００１】
【産業上の利用分野】本発明は映画などのフィルム画像
より作成されたディジタル圧縮画像から駒数変換をして
伸長された画像信号を得る画像信号処理装置に関する。
さらに具体的には、たとえば、毎秒２４駒のフィルム画
像から動きの滑らかな毎秒６０フィールドのディジタル
テレビ画像信号を得る新規な処理装置を提供しようとす
るものである。
より作成されたディジタル圧縮画像から駒数変換をして
伸長された画像信号を得る画像信号処理装置に関する。
さらに具体的には、たとえば、毎秒２４駒のフィルム画
像から動きの滑らかな毎秒６０フィールドのディジタル
テレビ画像信号を得る新規な処理装置を提供しようとす
るものである。
【０００２】
【従来の技術】アナログ・ビデオ伝送においては、送信
側の駒数（フィールド周波数）と受信側の駒数が一致し
ていなければならず、送信側において毎秒２４駒の映像
から毎秒６０フィールドの映像信号を作成して送信して
いた。このような技術については、下記の文献に紹介さ
れている。
側の駒数（フィールド周波数）と受信側の駒数が一致し
ていなければならず、送信側において毎秒２４駒の映像
から毎秒６０フィールドの映像信号を作成して送信して
いた。このような技術については、下記の文献に紹介さ
れている。
【０００３】文献： 石田 順一 「放送とニューメデ
ィア」 丸善 平成 ４年 ４月３０日 発行 ３５，
３６頁 スタジオ制作機器の項
ィア」 丸善 平成 ４年 ４月３０日 発行 ３５，
３６頁 スタジオ制作機器の項
【０００４】図４を用いてその内容について説明する
と、フィルムの毎秒２４駒という駒数をテレビのフィー
ルド数に変換する技術には、毎秒６０フィールドのテレ
ビ方式の国では毎秒２４駒の画像５１（または、５３）
からはそれと同じ２枚の変換後の画像６１，６２（また
は、６６，６７）を、画像５２（または、５４）からは
それと同じ３枚の変換後の画像６３〜６５（または、６
８〜７０）を作成して駒数変換をする２−３変換方式
を、５０フィールド圏ではフィルムの給送を毎秒２５駒
に早めて２−２変換（フィルム１駒から２フィールドず
つ読み出す）することにより実現していた。一方、映画
館での上映でも毎秒２４駒の映写ではフリッカが大きい
ため、１駒を２回照射して毎秒４８回画像を映写するこ
とによりフリッカの軽減を図っている。しかし、動きの
再現については毎秒２４駒相当であり十分な再現特性で
はないが、映画の画面はそれほど明るくないため、動き
の再現についてあまり気にならないのが実態である。
と、フィルムの毎秒２４駒という駒数をテレビのフィー
ルド数に変換する技術には、毎秒６０フィールドのテレ
ビ方式の国では毎秒２４駒の画像５１（または、５３）
からはそれと同じ２枚の変換後の画像６１，６２（また
は、６６，６７）を、画像５２（または、５４）からは
それと同じ３枚の変換後の画像６３〜６５（または、６
８〜７０）を作成して駒数変換をする２−３変換方式
を、５０フィールド圏ではフィルムの給送を毎秒２５駒
に早めて２−２変換（フィルム１駒から２フィールドず
つ読み出す）することにより実現していた。一方、映画
館での上映でも毎秒２４駒の映写ではフリッカが大きい
ため、１駒を２回照射して毎秒４８回画像を映写するこ
とによりフリッカの軽減を図っている。しかし、動きの
再現については毎秒２４駒相当であり十分な再現特性で
はないが、映画の画面はそれほど明るくないため、動き
の再現についてあまり気にならないのが実態である。
【０００５】ハイビジョンのように大画面で、かつ高輝
度の画像を扱うシステムでは毎秒２４駒の動き再現では
十分ではなく、動きの不連続を生ずる。とくに２−３変
換方式を使用しているときには、フィルム１駒から２フ
ィールドと３フィールドを再現する画像５１，５２（ま
たは、５３，５４）の２駒で１周期となるため、毎秒１
２駒周期での動きの繰返しが生ずるようになり、画像５
１〜５５中の太い枠で示した動く物体Ａの時間の経過と
ともに動く軌跡を連ねた直線の矢印１２１に対して、駒
数変換後の画像６１〜７１の太い枠で示した動く物体Ａ
の時間の経過とともに動く軌跡を連ねた矢印１２３は直
線状にならないために、動きの不連続（ジャダー）が非
常に目立つようになり、従来より改善が望まれていた。
駒数変換時のジャダーを改善する方法に、動き補正型の
駒数変換技術がある。
度の画像を扱うシステムでは毎秒２４駒の動き再現では
十分ではなく、動きの不連続を生ずる。とくに２−３変
換方式を使用しているときには、フィルム１駒から２フ
ィールドと３フィールドを再現する画像５１，５２（ま
たは、５３，５４）の２駒で１周期となるため、毎秒１
２駒周期での動きの繰返しが生ずるようになり、画像５
１〜５５中の太い枠で示した動く物体Ａの時間の経過と
ともに動く軌跡を連ねた直線の矢印１２１に対して、駒
数変換後の画像６１〜７１の太い枠で示した動く物体Ａ
の時間の経過とともに動く軌跡を連ねた矢印１２３は直
線状にならないために、動きの不連続（ジャダー）が非
常に目立つようになり、従来より改善が望まれていた。
駒数変換時のジャダーを改善する方法に、動き補正型の
駒数変換技術がある。
【０００６】図５には、動き補正型駒数変換の動画像の
再現状況を示している。映画の毎秒２４駒（画像５１〜
５５）のシステムでの動きの再現は、同図中の太い枠で
示した動いている物体Ａにはかなり大きな運動の跳びが
あるが、時間的には等間隔であるので、映写時には動き
の再現性は十分とはいえないが不自然さはそれほど大き
くない。しかし、映画館で１駒２回照射を行ったり、図
４のように２−３変換により６０フィールドに変換する
と、本来、当間隔であるべき動きの再現が不連続に行わ
れることになり大きなジャダーが発生する。その原因
は、とくに２−３変換では図４の矢印１２３に示すよう
に、フィルムの各駒が２フィールドと３フィールドで交
互に再現されることにある。
再現状況を示している。映画の毎秒２４駒（画像５１〜
５５）のシステムでの動きの再現は、同図中の太い枠で
示した動いている物体Ａにはかなり大きな運動の跳びが
あるが、時間的には等間隔であるので、映写時には動き
の再現性は十分とはいえないが不自然さはそれほど大き
くない。しかし、映画館で１駒２回照射を行ったり、図
４のように２−３変換により６０フィールドに変換する
と、本来、当間隔であるべき動きの再現が不連続に行わ
れることになり大きなジャダーが発生する。その原因
は、とくに２−３変換では図４の矢印１２３に示すよう
に、フィルムの各駒が２フィールドと３フィールドで交
互に再現されることにある。
【０００７】これを改善するのが図５に示す動き補正方
式であり、連続する２駒の映画フィルムの画像５１と５
２から動いている部分の動きの大きさと方向（動きベク
トル３１−１〜３１−３）を検出し、その物体が１／６
０秒後に存在する位置を動きベクトルに基づいて予測し
た中間の画像６２ｃ，６３ｃをつくって挿入してやれ
ば、滑らかな動きが再現できる。同様な画像５２，５３
によって中間の画像６４ｃ，６５ｃを、画像５３，５４
によって中間の画像６７ｃ，６８ｃを画像５４，５５に
よって中間の画像６９ｃ，７０ｃを作成し、画像６６と
７１は画像５３と５５に同じものとしている。このよう
な動き補正型の駒数変換を行うと、図５に示すように動
きの跳びは１／６０秒刻みと細かくなり、かつ、直線の
矢印１２２の示すようにその不連続性もなく滑らかな動
画を再現できる。
式であり、連続する２駒の映画フィルムの画像５１と５
２から動いている部分の動きの大きさと方向（動きベク
トル３１−１〜３１−３）を検出し、その物体が１／６
０秒後に存在する位置を動きベクトルに基づいて予測し
た中間の画像６２ｃ，６３ｃをつくって挿入してやれ
ば、滑らかな動きが再現できる。同様な画像５２，５３
によって中間の画像６４ｃ，６５ｃを、画像５３，５４
によって中間の画像６７ｃ，６８ｃを画像５４，５５に
よって中間の画像６９ｃ，７０ｃを作成し、画像６６と
７１は画像５３と５５に同じものとしている。このよう
な動き補正型の駒数変換を行うと、図５に示すように動
きの跳びは１／６０秒刻みと細かくなり、かつ、直線の
矢印１２２の示すようにその不連続性もなく滑らかな動
画を再現できる。
【０００８】動き補正型の駒数変換装置は、スタジオ制
作機器としてレーザ・テレシネ用にＮＨＫ放送技術研究
所で開発されたものであり、その変換画像は動画像の再
現性が大幅に向上し、フィルムからの再現画像でありな
がらテレビ・カメラからの画像を見るかのごとくスムー
ズな動きを再現できる。
作機器としてレーザ・テレシネ用にＮＨＫ放送技術研究
所で開発されたものであり、その変換画像は動画像の再
現性が大幅に向上し、フィルムからの再現画像でありな
がらテレビ・カメラからの画像を見るかのごとくスムー
ズな動きを再現できる。
【０００９】一方、動画像伝送に関する国際標準方式Ｍ
ＰＥＧ１および２において、ＭＰＥＧ２方式ディジタル
画像圧縮は、ＭＰＥＧ１よりも高画質な画像信号が扱え
るために、映画などのフィルム画像を参照画像と現画像
の間の動きベクトルや差分情報を用いて画質を落とさず
に画像情報を動き補償型画像圧縮してディジタル伝送す
ることが可能になっている。ＭＰＥＧ２方式では、毎秒
２４枚の画像を圧縮符号化し、毎秒６０フィールドに駒
数変換をする伸長時に１枚おきに２フィールド間出力と
３フィールド間出力を繰返す処理（テレシネ）を行うよ
うにするフラグが規定されている。このフラグを活用す
ると、毎秒６０フィールド枚（３０枚の画像）送信する
必要が無く毎秒２４枚の画像を送るのみでよいから、伝
送すべき情報量を２０％削減することが可能である。こ
の場合には受信機側で受信した毎秒２４枚の画像から毎
秒６０フィールド枚（３０枚の画像）を作成する必要が
ある。
ＰＥＧ１および２において、ＭＰＥＧ２方式ディジタル
画像圧縮は、ＭＰＥＧ１よりも高画質な画像信号が扱え
るために、映画などのフィルム画像を参照画像と現画像
の間の動きベクトルや差分情報を用いて画質を落とさず
に画像情報を動き補償型画像圧縮してディジタル伝送す
ることが可能になっている。ＭＰＥＧ２方式では、毎秒
２４枚の画像を圧縮符号化し、毎秒６０フィールドに駒
数変換をする伸長時に１枚おきに２フィールド間出力と
３フィールド間出力を繰返す処理（テレシネ）を行うよ
うにするフラグが規定されている。このフラグを活用す
ると、毎秒６０フィールド枚（３０枚の画像）送信する
必要が無く毎秒２４枚の画像を送るのみでよいから、伝
送すべき情報量を２０％削減することが可能である。こ
の場合には受信機側で受信した毎秒２４枚の画像から毎
秒６０フィールド枚（３０枚の画像）を作成する必要が
ある。
【００１０】
【発明が解決しようとする課題】毎秒２４駒のフィルム
から毎秒６０フィールドのテレビ画像を得る２−３変換
方式による駒数変換は簡単な回路構成で実現できるとい
う特徴を有するが、図４に示したように大きいジャダー
が発生するために動きの滑らかな動画を再現できなかっ
た。この問題点を解決するために、図５に示す動きベク
トルを用いた動き補正型の駒数変換方式は、動きベクト
ルを検出する回路の規模が膨大となるために、引用され
た文献にあるようにスタジオ制作機器に用いることはで
きても、個々の画像受信機または再生機に動きベクトル
を検出する回路を設けることは困難であり、２４駒の画
像信号を受信して受信側で動き補正型の駒数変換をする
ことはできないという解決されねばならない課題があっ
た。
から毎秒６０フィールドのテレビ画像を得る２−３変換
方式による駒数変換は簡単な回路構成で実現できるとい
う特徴を有するが、図４に示したように大きいジャダー
が発生するために動きの滑らかな動画を再現できなかっ
た。この問題点を解決するために、図５に示す動きベク
トルを用いた動き補正型の駒数変換方式は、動きベクト
ルを検出する回路の規模が膨大となるために、引用され
た文献にあるようにスタジオ制作機器に用いることはで
きても、個々の画像受信機または再生機に動きベクトル
を検出する回路を設けることは困難であり、２４駒の画
像信号を受信して受信側で動き補正型の駒数変換をする
ことはできないという解決されねばならない課題があっ
た。
【００１１】
【課題を解決するための手段】ＭＰＥＧ２のディジタル
画像圧縮では動き補償型画像圧縮を用いているため、参
照画像と現画像との間の動きベクトルと、参照画像と現
画像との間の動き補償後の差分情報が伝送される。この
動きベクトルと差分情報を用いて内挿されるべき画像を
再生して伸長処理をするようにした。すなわち、画像圧
縮されて入力される２４駒の画像から毎秒６０フィール
ドの再生画像を得るために、２４駒から６０フィールド
の画面周期の変換（駒数変換）をする制御回路におい
て、内挿すべきフィールドの位置に対応した動き係数，
差分係数および差分動き係数を作成する。動きベクトル
には動き係数を乗じて参照画像用動きベクトルを得て、
これを用いて参照画像を動き補償処理して動き補償後の
参照画像を得る。差分画像には差分係数を乗じて振幅補
償後の差分画像を得る。動きベクトルに差分動き係数を
乗じて差分動きベクトルを得てこれを用いて振幅補償後
の差分画像を動き補償処理して動き補償後の差分画像を
得る。動き補償後の参照画像に動き補償後の差分画像を
加算して内挿すべきフィールドの再生画像を得るように
した。
画像圧縮では動き補償型画像圧縮を用いているため、参
照画像と現画像との間の動きベクトルと、参照画像と現
画像との間の動き補償後の差分情報が伝送される。この
動きベクトルと差分情報を用いて内挿されるべき画像を
再生して伸長処理をするようにした。すなわち、画像圧
縮されて入力される２４駒の画像から毎秒６０フィール
ドの再生画像を得るために、２４駒から６０フィールド
の画面周期の変換（駒数変換）をする制御回路におい
て、内挿すべきフィールドの位置に対応した動き係数，
差分係数および差分動き係数を作成する。動きベクトル
には動き係数を乗じて参照画像用動きベクトルを得て、
これを用いて参照画像を動き補償処理して動き補償後の
参照画像を得る。差分画像には差分係数を乗じて振幅補
償後の差分画像を得る。動きベクトルに差分動き係数を
乗じて差分動きベクトルを得てこれを用いて振幅補償後
の差分画像を動き補償処理して動き補償後の差分画像を
得る。動き補償後の参照画像に動き補償後の差分画像を
加算して内挿すべきフィールドの再生画像を得るように
した。
【００１２】
【作用】動きベクトルと差分画像をもとに高度の内挿処
理をした滑らかな動きの画像を得ることができる。毎秒
２４駒分の画像を動きベクトルと差分情報とともに画像
圧縮して伝送路を介して受けるから、毎秒６０フィール
ド（３０枚の画像）の圧縮画像情報を受けた場合よりも
伝送情報は２０％削減される。ＭＰＥＧ２によるなら
ば、動きベクトルと差分情報がともに伝送路によって送
られてくるから、その場合には新たに動きベクトル検出
回路を設ける必要もなく、小規模の回路で実現できる。
理をした滑らかな動きの画像を得ることができる。毎秒
２４駒分の画像を動きベクトルと差分情報とともに画像
圧縮して伝送路を介して受けるから、毎秒６０フィール
ド（３０枚の画像）の圧縮画像情報を受けた場合よりも
伝送情報は２０％削減される。ＭＰＥＧ２によるなら
ば、動きベクトルと差分情報がともに伝送路によって送
られてくるから、その場合には新たに動きベクトル検出
回路を設ける必要もなく、小規模の回路で実現できる。
【００１３】
【実施例】図１には本発明の一実施例が示されている。
入力端子５からは、動きベクトルおよび差分情報を用い
た動き補償型画像圧縮された画像信号が毎秒２４枚入力
されて、画像復元回路１１に印加される。画像復元回路
１１では、動きベクトルおよび差分情報を分離復元し
て、動きベクトル３１と差分画像３２とを出力し、動き
ベクトル３１（図５の３１−１〜３１−３）を乗算回路
２１および２３に印加し、圧縮された画像信号から原画
像５１〜５５（図５）を復元し、参照画像として参照画
像記憶回路１２に記憶する。記憶された参照画像は動き
補償回路１３に印加される。
入力端子５からは、動きベクトルおよび差分情報を用い
た動き補償型画像圧縮された画像信号が毎秒２４枚入力
されて、画像復元回路１１に印加される。画像復元回路
１１では、動きベクトルおよび差分情報を分離復元し
て、動きベクトル３１と差分画像３２とを出力し、動き
ベクトル３１（図５の３１−１〜３１−３）を乗算回路
２１および２３に印加し、圧縮された画像信号から原画
像５１〜５５（図５）を復元し、参照画像として参照画
像記憶回路１２に記憶する。記憶された参照画像は動き
補償回路１３に印加される。
【００１４】画像圧縮されて入力される毎秒２４駒の画
像から毎秒６０フィールドへの画面周期の変換（駒数変
換）をするべく制御する画面周期制御回路１５では、参
照画像の間に内挿すべきフィールドの位置に対応した動
き係数３４，差分係数３５および差分動き係数３６と記
録回路１６を制御する信号を作成する。
像から毎秒６０フィールドへの画面周期の変換（駒数変
換）をするべく制御する画面周期制御回路１５では、参
照画像の間に内挿すべきフィールドの位置に対応した動
き係数３４，差分係数３５および差分動き係数３６と記
録回路１６を制御する信号を作成する。
【００１５】乗算回路２１では動きベクトル３１に動き
係数３４を乗じて参照用動きベクトル３７を得て動き補
償回路１３に印加する。動き補償回路１３では参照画像
を参照用動きベクトル３７により移動して動き補償後の
参照画像４１を得る。
係数３４を乗じて参照用動きベクトル３７を得て動き補
償回路１３に印加する。動き補償回路１３では参照画像
を参照用動きベクトル３７により移動して動き補償後の
参照画像４１を得る。
【００１６】差分画像３２は差分係数３５を乗算回路２
２において乗算され、振幅補償後の差分画像３８を得
て、これを動き補償回路１４に印加する。乗算回路２３
に印加された動きベクトル３１は差分動き係数３６を乗
算されて、差分動きベクトル３９を得て、動き補償回路
１４に印加され、そこで振幅補償後の差分画像３８を動
き補償して動き補償後の差分画像４２が得られる。動き
補償後の差分画像４１および動き補償後の差分画像４２
は加算回路２６で加算されて、内挿画像が生成され、そ
れは一旦、記憶回路１６に記憶されて出力周期に同期し
て出力端子９より出力され、記憶された画像が画像５
２，５３，５４（図５）であるときには次回の参照画像
とするために画面周期制御回路１５からの制御用の信号
により参照画像記憶回路１２に印加されそこに記憶され
る。
２において乗算され、振幅補償後の差分画像３８を得
て、これを動き補償回路１４に印加する。乗算回路２３
に印加された動きベクトル３１は差分動き係数３６を乗
算されて、差分動きベクトル３９を得て、動き補償回路
１４に印加され、そこで振幅補償後の差分画像３８を動
き補償して動き補償後の差分画像４２が得られる。動き
補償後の差分画像４１および動き補償後の差分画像４２
は加算回路２６で加算されて、内挿画像が生成され、そ
れは一旦、記憶回路１６に記憶されて出力周期に同期し
て出力端子９より出力され、記憶された画像が画像５
２，５３，５４（図５）であるときには次回の参照画像
とするために画面周期制御回路１５からの制御用の信号
により参照画像記憶回路１２に印加されそこに記憶され
る。
【００１７】図２には参照画像５１（図５の画像５１に
同じ）から動きベクトル３１および差分画像３２を用い
て画像５２（図５の画像５２に対応するが物体Ａの形状
が変化している）を得る様子が示されている。画像５１
（または５５）はすべての画像データが伝送されてきて
おり、これを参照画像として使用し、画像５２（または
５３，５４）を得ようとしている。参照画像５１の長方
形の動く物体Ａは下方に移動し、さらにその形状が台形
の物体Ｃに変化している。この参照画像５１を画像復元
回路１１で復元して参照画像記憶回路１２に記憶し、動
き補償回路１３に加えている。画像復元回路１１からは
物体Ａの移動量と方向を示す動きベクトル３１（図５の
３１−１）と３角形の物体Ｂを示した差分画像３２（参
照画像５１の物体Ａと画像５２の物体Ｃの差の画像）が
出力され、画面周期制御回路１５から出力される動き係
数３４，差分係数３５の値は、画像５２（または５３，
５４）を得る場合には、それぞれ１であり、差分画像３
２は画像５２（あるいは５３，５４）においては移動す
る必要がないから差分動き係数３６の値は０を示してい
る。
同じ）から動きベクトル３１および差分画像３２を用い
て画像５２（図５の画像５２に対応するが物体Ａの形状
が変化している）を得る様子が示されている。画像５１
（または５５）はすべての画像データが伝送されてきて
おり、これを参照画像として使用し、画像５２（または
５３，５４）を得ようとしている。参照画像５１の長方
形の動く物体Ａは下方に移動し、さらにその形状が台形
の物体Ｃに変化している。この参照画像５１を画像復元
回路１１で復元して参照画像記憶回路１２に記憶し、動
き補償回路１３に加えている。画像復元回路１１からは
物体Ａの移動量と方向を示す動きベクトル３１（図５の
３１−１）と３角形の物体Ｂを示した差分画像３２（参
照画像５１の物体Ａと画像５２の物体Ｃの差の画像）が
出力され、画面周期制御回路１５から出力される動き係
数３４，差分係数３５の値は、画像５２（または５３，
５４）を得る場合には、それぞれ１であり、差分画像３
２は画像５２（あるいは５３，５４）においては移動す
る必要がないから差分動き係数３６の値は０を示してい
る。
【００１８】そこで、動きベクトル３１がそのまま乗算
器２１から内挿用動きベクトル３７として出力され、破
線で示した参照画像５１における物体Ａの位置から、動
き補償回路１３で動きベクトル３１の分だけ物体Ａを下
方に移動して動き補償後の参照画像４１を得る。
器２１から内挿用動きベクトル３７として出力され、破
線で示した参照画像５１における物体Ａの位置から、動
き補償回路１３で動きベクトル３１の分だけ物体Ａを下
方に移動して動き補償後の参照画像４１を得る。
【００１９】差分画像３２もその値が１である差分係数
３５を乗じられて、そのまま振幅補償後の差分画像３８
として乗算回路２２から動き補償回路１４に印加され
る。一方、乗算回路２３に印加されている差分動き係数
３６の値は０であるから、差分動きベクトル３９の値は
０であり、差分画像３２は動き補償が０で、そのまま動
き補償後の差分画像４２として出力され、加算回路２６
で加算されて台形の物体Ｃを含む画像５２が得られる。
画像５２は記憶回路１６に記憶されるとともに、次回の
画像５３を得るときの参照画像とするべく参照画像記憶
回路１２に記憶される。
３５を乗じられて、そのまま振幅補償後の差分画像３８
として乗算回路２２から動き補償回路１４に印加され
る。一方、乗算回路２３に印加されている差分動き係数
３６の値は０であるから、差分動きベクトル３９の値は
０であり、差分画像３２は動き補償が０で、そのまま動
き補償後の差分画像４２として出力され、加算回路２６
で加算されて台形の物体Ｃを含む画像５２が得られる。
画像５２は記憶回路１６に記憶されるとともに、次回の
画像５３を得るときの参照画像とするべく参照画像記憶
回路１２に記憶される。
【００２０】図３には参照画像５１と差分画像３２と動
きベクトル３１から作成された参照用動きベクトル３７
を用いて内挿用の画像６２ｃを得る様子が示されてい
る。図５を参照しながら説明すると、毎秒２４駒の画像
５１と５２の時間間隔Ｔ5 は２４分の１秒であり、毎秒
６０フィールドの画像６１と６２ｃの間隔は６０分の１
秒であるから、参照画像５１と内挿用の画像６２ｃとの
時間間隔Ｔ6 に対する駒数変換前の画像５１と５２の周
期１／Ｔ5 の周期時間積Ｐは、Ｐ＝Ｔ6 ／Ｔ5 ＝０．４
である。
きベクトル３１から作成された参照用動きベクトル３７
を用いて内挿用の画像６２ｃを得る様子が示されてい
る。図５を参照しながら説明すると、毎秒２４駒の画像
５１と５２の時間間隔Ｔ5 は２４分の１秒であり、毎秒
６０フィールドの画像６１と６２ｃの間隔は６０分の１
秒であるから、参照画像５１と内挿用の画像６２ｃとの
時間間隔Ｔ6 に対する駒数変換前の画像５１と５２の周
期１／Ｔ5 の周期時間積Ｐは、Ｐ＝Ｔ6 ／Ｔ5 ＝０．４
である。
【００２１】画面周期制御回路１５では、画像６２ｃに
対応する動き係数３４として周期時間積Ｐ（＝０．４）
を、同じく差分係数３５として周期時間積Ｐを、同じく
差分動き係数３６として１−Ｐ（＝０．６）を出力す
る。そこで乗算回路２１から得られる内挿用として用い
る参照画像用動きベクトル３７の値は、動きベクトル３
１の値に周期時間積Ｐを乗じたものとなり、これを用い
て動き補償回路１３により動き補償後の参照画像４１が
得られる。ここで動き補償後の参照画像４１内の破線で
示した長方形は参照画像５１の物体Ａの位置を表わして
いる。
対応する動き係数３４として周期時間積Ｐ（＝０．４）
を、同じく差分係数３５として周期時間積Ｐを、同じく
差分動き係数３６として１−Ｐ（＝０．６）を出力す
る。そこで乗算回路２１から得られる内挿用として用い
る参照画像用動きベクトル３７の値は、動きベクトル３
１の値に周期時間積Ｐを乗じたものとなり、これを用い
て動き補償回路１３により動き補償後の参照画像４１が
得られる。ここで動き補償後の参照画像４１内の破線で
示した長方形は参照画像５１の物体Ａの位置を表わして
いる。
【００２２】図３の動き補償後の差分画像４２は、差分
画像３２の振幅に差分係数３５の値（Ｐ＝０．４）を乗
じた振幅（振幅の大きさは斜線の密度で表わしている。
密度の大きい方が振幅も大）をもち、破線で示した差分
画像３２の物体Ｂの位置から、動きベクトル３１の値に
１−Ｐ（＝０．６）を乗じた値の差分動きベクトル３９
だけ上方へ移動している。
画像３２の振幅に差分係数３５の値（Ｐ＝０．４）を乗
じた振幅（振幅の大きさは斜線の密度で表わしている。
密度の大きい方が振幅も大）をもち、破線で示した差分
画像３２の物体Ｂの位置から、動きベクトル３１の値に
１−Ｐ（＝０．６）を乗じた値の差分動きベクトル３９
だけ上方へ移動している。
【００２３】動き補償後の参照画像４１と動き補償後の
差分画像４２は加算回路２６で加算されて台形の物体Ｃ
を含む内挿用の画像６２ｃが得られる。この台形の物体
Ｃの長方形の部分に対して３角形の部分の振幅（明る
さ）は４０％である。画像６２ｃ中に示された破線は、
画像５２（図２参照）の位置を示している。
差分画像４２は加算回路２６で加算されて台形の物体Ｃ
を含む内挿用の画像６２ｃが得られる。この台形の物体
Ｃの長方形の部分に対して３角形の部分の振幅（明る
さ）は４０％である。画像６２ｃ中に示された破線は、
画像５２（図２参照）の位置を示している。
【００２４】内挿用の画像６３ｃを作成するときには、
参照画像５１と作成されるべき画像６３ｃの時間間隔Ｔ
6 （６０分の２秒）に対する駒数変換前の画像５１と５
２の周期１／Ｔ5 （Ｔ5 ＝２４分の１秒）の周期時間積
Ｐ＝Ｔ6 ／Ｔ5 ＝０．８であり、動き係数３４と差分係
数３５はＰ＝０．４の値を、差分動き係数３６は１−Ｐ
＝０．２の値を示すことになる。
参照画像５１と作成されるべき画像６３ｃの時間間隔Ｔ
6 （６０分の２秒）に対する駒数変換前の画像５１と５
２の周期１／Ｔ5 （Ｔ5 ＝２４分の１秒）の周期時間積
Ｐ＝Ｔ6 ／Ｔ5 ＝０．８であり、動き係数３４と差分係
数３５はＰ＝０．４の値を、差分動き係数３６は１−Ｐ
＝０．２の値を示すことになる。
【００２５】画像５２を作成するときには、参照画像５
１と作成されるべき画像５２の時間間隔Ｔ6 （２４分の
１秒）は、駒数変換前の画像５１と５２の時間間隔Ｔ5
に等しくＴ6 ＝Ｔ5 であるから、その周期時間積Ｐ＝Ｔ
6 ／Ｔ5 ＝１である。そこで画面周期制御回路１５で
は、画像５２を作成するのに必要な動き係数３４にはＰ
＝１の値を、差分係数３５にはＰ＝１の値を、差分動き
係数３６には１−Ｐ＝０の値を出力する。すなわち、図
２で示した動作により画像５２が得られ、これが記憶回
路１６に記憶されると同時に、次回の処理作業における
参照画像とするべく、画像５２が参照画像記憶回路１２
にも格納される。
１と作成されるべき画像５２の時間間隔Ｔ6 （２４分の
１秒）は、駒数変換前の画像５１と５２の時間間隔Ｔ5
に等しくＴ6 ＝Ｔ5 であるから、その周期時間積Ｐ＝Ｔ
6 ／Ｔ5 ＝１である。そこで画面周期制御回路１５で
は、画像５２を作成するのに必要な動き係数３４にはＰ
＝１の値を、差分係数３５にはＰ＝１の値を、差分動き
係数３６には１−Ｐ＝０の値を出力する。すなわち、図
２で示した動作により画像５２が得られ、これが記憶回
路１６に記憶されると同時に、次回の処理作業における
参照画像とするべく、画像５２が参照画像記憶回路１２
にも格納される。
【００２６】作成されるべき画像が内挿用の画像６４ｃ
である場合には参照画像には画像５２が使用され、動き
ベクトル３１として図５の３１−２が使用される。この
とき、参照画像５２と作成されるべき内挿用の画像６４
ｃの時間間隔Ｔ6 （１２０分の１秒）と駒数変換前の画
像５２と５３の時間間隔Ｔ5 （２４分の１秒）の周期時
間積Ｐは、Ｐ＝Ｔ6 ／Ｔ5 ＝０．２である。そこで画面
周期制御回路１５では、内挿用の画像６４ｃを作成する
ための動き係数３４にはＰ＝０．２の値を、差分係数３
５にはＰ＝０．２の値を、差分動き係数３６には１−Ｐ
＝０．８の値を出力する。
である場合には参照画像には画像５２が使用され、動き
ベクトル３１として図５の３１−２が使用される。この
とき、参照画像５２と作成されるべき内挿用の画像６４
ｃの時間間隔Ｔ6 （１２０分の１秒）と駒数変換前の画
像５２と５３の時間間隔Ｔ5 （２４分の１秒）の周期時
間積Ｐは、Ｐ＝Ｔ6 ／Ｔ5 ＝０．２である。そこで画面
周期制御回路１５では、内挿用の画像６４ｃを作成する
ための動き係数３４にはＰ＝０．２の値を、差分係数３
５にはＰ＝０．２の値を、差分動き係数３６には１−Ｐ
＝０．８の値を出力する。
【００２７】他の画像５３〜５５や６５ｃ〜７０ｃも同
様にして作成される。これらの画像が連続して毎秒６０
フィールド出力されるから、図５の直線の矢印１２２の
示すように滑らかな動きをする動画像が受信機側におい
て得られる。
様にして作成される。これらの画像が連続して毎秒６０
フィールド出力されるから、図５の直線の矢印１２２の
示すように滑らかな動きをする動画像が受信機側におい
て得られる。
【００２８】以上の説明では、理解を容易にするために
物体の動きを伝送し、駒数変換して再生する場合を説明
したが、実際の装置においては、画面を多くの小さな部
分に分割し、それぞれの部分の動きベクトルが伝送され
るが、それぞれの部分についての動作は上述したものに
同じである。
物体の動きを伝送し、駒数変換して再生する場合を説明
したが、実際の装置においては、画面を多くの小さな部
分に分割し、それぞれの部分の動きベクトルが伝送され
るが、それぞれの部分についての動作は上述したものに
同じである。
【００２９】
【発明の効果】以上の説明から明らかなように、本発明
によるならば、動きベクトルを用いた動き補償型画像圧
縮により駒数変換前の画像を受けて、内挿処理により、
伸長された滑らかな動きをする駒数変換後の画像を簡単
な回路で実現することができる。したがって、本発明の
効果は極めて大きい。
によるならば、動きベクトルを用いた動き補償型画像圧
縮により駒数変換前の画像を受けて、内挿処理により、
伸長された滑らかな動きをする駒数変換後の画像を簡単
な回路で実現することができる。したがって、本発明の
効果は極めて大きい。
【図１】本発明の装置を示す回路構成図である。
【図２】図１に示した装置における画像処理の様子を説
明するための画像処理図である。
明するための画像処理図である。
【図３】図２とともに図１に示した装置における画像処
理の様子を説明するための画像処理図である。
理の様子を説明するための画像処理図である。
【図４】従来の２−３変換方式による画像処理の様子を
説明するための画像処理図である。
説明するための画像処理図である。
【図５】従来の動き補償型の変換方式による画像処理の
様子を説明するための画像処理図である。
様子を説明するための画像処理図である。
５ 入力端子 ９ 出力端子 １１ 画像復元回路 １２ 参照画像記憶回路 １３，１４ 動き補償回路 １５ 画面周期制御回路 １６ 記憶回路 ２１〜２３ 乗算回路 ２６ 加算回路 ３１ 動きベクトル ３２ 差分画像 ３４ 動き係数 ３５ 差分係数 ３６ 差分動き係数 ３７ 参照画像用動きベクトル ３８ 振幅補償後の差分画像 ３９ 差分動きベクトル ４１ 動き補償後の参照画像 ４２ 動き補償後の差分画像 ５１〜５５，６１〜７１ 画像 １２１〜１２３ 矢印 Ａ〜Ｃ 物体
フロントページの続き (72)発明者 坂口 俊文 東京都渋谷区代々木４丁目36番19号 株 式会社 グラフィックス・コミュニケー ション・ラボラトリーズ 内 (72)発明者 進藤 朋行 東京都渋谷区代々木４丁目36番19号 株 式会社 グラフィックス・コミュニケー ション・ラボラトリーズ 内 (72)発明者 綿谷 由純 東京都渋谷区代々木４丁目36番19号 株 式会社 グラフィックス・コミュニケー ション・ラボラトリーズ 内 (58)調査した分野(Int.Cl.6，ＤＢ名) H04N 5/253 H04N 7/01 H04N 7/137
Claims (8)
- 【請求項１】 参照画像と次回の動作においては前記参
照画像ともなり得る圧縮画像との間の動きベクトル（３
１）を含む動き補償型圧縮された画像情報を受けて、伸
長された再生画像を得る駒数変換機能を有する画像信号
処理装置において、 前記参照画像と前記圧縮画像の周期（１／Ｔ5 ）と前記
参照画像と前記再生されるべき画像の時間間隔（Ｔ6 ）
とから所定の係数（３４）を得て制御するための画面周
期制御手段（１５）と、 前記所定の係数を前記動きベクトルに乗じて参照画像用
動きベクトル（３７）を得るための参照画像用動きベク
トル乗算手段（２１）と、 前記参照画像を前記参照画像用動きベクトルを用いて動
き補償した参照画像を前記再生画像として得る手段（１
２，１３）とを含む駒数変換機能を有する画像信号処理
装置。 - 【請求項２】 参照画像と次回の動作においては前記参
照画像ともなり得る圧縮画像との間の動きベクトル（３
１）および差分画像（３２）を含む動き補償型圧縮され
た画像情報を受けて、伸長された再生画像を得る駒数変
換機能を有する画像信号処理装置において、 前記参照画像と前記圧縮画像の周期（１／Ｔ5 ）と前記
参照画像と前記再生されるべき画像の時間間隔（Ｔ6 ）
とから所定の係数（３４，３５）を得て制御するための
画面周期制御手段（１５）と、 前記所定の係数を前記動きベクトルに乗じて参照画像用
動きベクトル（３７）を得るための参照画像用動きベク
トル乗算手段（２１）と、 前記参照画像を前記参照画像用動きベクトルを用いて動
き補償した動き補償後の参照画像（４１）を得る手段
（１３）と、 前記所定の係数を前記差分画像に乗じて振幅補償後の差
分画像（３８）を得るための差分画像乗算手段（２２）
と、 前記動き補償後の参照画像と前記振幅補償後の差分画像
とを加算して前記再生画像を得るための加算手段（２
６）とを含む駒数変換機能を有する画像信号処理装置。 - 【請求項３】 参照画像と次回の動作においては前記参
照画像ともなり得る圧縮画像との間の動きベクトル（３
１）および差分画像（３２）を含む動き補償型圧縮され
た画像情報を受けて、伸長された再生画像を得る駒数変
換機能を有する画像信号処理装置において、 前記参照画像と前記圧縮画像の周期（１／Ｔ5 ）と前記
参照画像と前記再生されるべき画像の時間間隔（Ｔ6 ）
とから所定の係数（３４，３６）を得て制御するための
画面周期制御手段（１５）と、 前記所定の係数を前記動きベクトルに乗じて参照画像用
動きベクトル（３７）を得るための参照画像用動きベク
トル乗算手段（２１）と、 前記参照画像を前記参照画像用動きベクトルを用いて動
き補償後の参照画像（４１）を得る手段（１２，１３）
と前記所定の係数を前記動きベクトルに乗じて前記差分
画像を移動せしめるための差分動きベクトル（３９）を
得るための差分動きベクトル乗算手段（２３）と、 前記差分画像を前記差分動きベクトルを用いて動き補償
した動き補償後の差分画像（４２）を得るための差分画
像動き補償手段（１４）と、 前記動き補償後の参照画像（４１）と前記動き補償後の
差分画像（４２）とを加算して前記再生画像を得るため
の加算手段（２６）とを含む駒数変換機能を有する画像
信号処理装置。 - 【請求項４】 参照画像と次回の動作においては前記参
照画像ともなり得る圧縮画像との間の動きベクトル（３
１）および差分画像（３２）を含む動き補償型圧縮され
た画像情報を受けて、伸長された再生画像を得る駒数変
換機能を有する画像信号処理装置において、 前記参照画像と前記圧縮画像の周期（１／Ｔ5 ）と前記
参照画像と前記再生されるべき画像の時間間隔（Ｔ6 ）
との積である周期時間積（Ｐ＝Ｔ6 ／Ｔ5 ）を得て、前
記周期時間積から前記参照画像を動き補償するための参
照画像用動きベクトル（３７）を得るための参照画像用
動き係数（３４）を得て出力し、前記周期時間積から前
記差分画像の振幅を補償して振幅補償後の差分画像（３
８）を得るための差分係数（３５）を得て出力し、前記
周期時間積から前記差分画像を動き補償する差分動きベ
クトル（３９）を得るための差分動き係数（３６）を得
て出力する画面周期制御手段（１５）と、 前記動きベクトルに前記参照画像用動き係数を乗じて前
記参照画像用動きベクトルを得るための参照画像用動き
ベクトル乗算手段（２１）と、 前記差分画像に前記差分係数を乗じて前記振幅補償後の
差分画像を得るための差分画像乗算手段（２２）と、 前記動きベクトルに前記差分動き係数を乗じて前記差分
動きベクトルを得るための差分動きベクトル乗算手段
（２３）と、 前記参照画像を前記参照画像用動きベクトルを用いて動
き補償した動き補償後の参照画像（４１）を得るための
参照画像動き補償手段（１３）と、 前記振幅補償後の差分画像を前記差分動きベクトルを用
いて動き補償した動き補償後の差分画像（４２）を得る
ための差分画像動き補償手段（１４）と、 前記動き補償後の参照画像（４１）と前記動き補償後の
差分画像（４２）とを加算して前記再生画像を出力する
ための加算手段（２６）とを含む駒数変換機能を有する
画像信号処理装置。 - 【請求項５】 前記参照画像用動き係数（３４）が前記
周期時間積（Ｐ）に実質的に等しく、 前記差分係数（３５）が前記周期時間積（Ｐ）に実質的
に等しい請求項４の駒数変換機能を有する画像信号処理
装置。 - 【請求項６】 前記差分動き係数（３６）が１から前記
周期時間積を引いた値（１−Ｐ）に実質的に等しい請求
項４の駒数変換機能を有する画像信号処理装置。 - 【請求項７】 前記参照画像用動き係数（３４）が前記
周期時間積（Ｐ）に実質的に等しく、 前記差分係数（３５）が前記周期時間積（Ｐ）に実質的
に等しく、 前記差分動き係数（３６）が１から前記周期時間積を引
いた値（１−Ｐ）に実質的に等しい請求項４の駒数変換
機能を有する画像信号処理装置。 - 【請求項８】 前記参照画像と前記圧縮画像の時間間隔
（Ｔ5 ）が２４分の１秒であり、 前記再生画像の時間間隔（Ｔ6 ）が２９．２７分の１
秒，３０分の１秒，５９．９４分の１秒および６０分の
１秒のうちのいずれかである請求項１，２，３または４
の駒数変換機能を有する画像信号処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28992493A JP2869844B2 (ja) | 1993-10-26 | 1993-10-26 | 駒数変換機能を有する画像信号処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28992493A JP2869844B2 (ja) | 1993-10-26 | 1993-10-26 | 駒数変換機能を有する画像信号処理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH07123291A JPH07123291A (ja) | 1995-05-12 |
| JP2869844B2 true JP2869844B2 (ja) | 1999-03-10 |
Family
ID=17749528
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP28992493A Expired - Lifetime JP2869844B2 (ja) | 1993-10-26 | 1993-10-26 | 駒数変換機能を有する画像信号処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2869844B2 (ja) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4552263B2 (ja) * | 2000-04-03 | 2010-09-29 | ソニー株式会社 | ディジタル信号処理装置および方法、並びにディジタル画像信号処理装置および方法 |
| JP4552262B2 (ja) * | 2000-04-03 | 2010-09-29 | ソニー株式会社 | ノイズ低減装置および方法 |
| JP4552261B2 (ja) * | 2000-04-03 | 2010-09-29 | ソニー株式会社 | ディジタル情報変換装置および方法、並びに画像情報変換装置および方法 |
| US7020197B2 (en) | 2001-08-24 | 2006-03-28 | Sanyo Electric Co., Ltd. | Telecine converting method |
| JP2005006275A (ja) * | 2002-11-22 | 2005-01-06 | Matsushita Electric Ind Co Ltd | 補間フレーム作成装置、補間フレーム作成方法、および補間フレーム作成プログラム |
| EP1422928A3 (en) | 2002-11-22 | 2009-03-11 | Panasonic Corporation | Motion compensated interpolation of digital video signals |
| JP6222514B2 (ja) * | 2012-01-11 | 2017-11-01 | パナソニックＩｐマネジメント株式会社 | 画像処理装置、撮像装置、およびコンピュータブログラム |
-
1993
- 1993-10-26 JP JP28992493A patent/JP2869844B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JPH07123291A (ja) | 1995-05-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6069664A (en) | Method and apparatus for converting a digital interlaced video signal from a film scanner to a digital progressive video signal | |
| US5335013A (en) | Method and apparatus for video camera image film simulation | |
| US7536089B2 (en) | Image signal reproduction apparatus | |
| WO2000007370A1 (en) | Color video processing system and method | |
| JP3495485B2 (ja) | 画像変換装置 | |
| JP4475225B2 (ja) | 映像信号伝送システム、撮像装置、信号処理装置および映像信号伝送方法 | |
| JP2869844B2 (ja) | 駒数変換機能を有する画像信号処理装置 | |
| JPH06205439A (ja) | 映像信号記録装置 | |
| JPS5877373A (ja) | テレビジヨン信号処理回路 | |
| JP2000259146A (ja) | 画像表示装置 | |
| US5216505A (en) | Scanning line interpolation circuit | |
| JPH04323988A (ja) | サンプリングレート変換方式 | |
| JP3071526B2 (ja) | Ｍｕｓｅデコーダ | |
| JP2002185980A (ja) | マルチフォーマット記録再生装置 | |
| JP2928561B2 (ja) | テレビジョン信号の形成方法及び装置 | |
| KR20060132877A (ko) | 모션 보상 시간적 보간법을 사용하여 비디오를디인터레이스하기 위한 방법 및 장치 | |
| US6366324B1 (en) | Transmitting sequentially scanned images through a channel intended for interlaced images | |
| JP2735305B2 (ja) | 走査線補間方法及び走査線補間回路 | |
| JP2557474B2 (ja) | Ｍｕｓｅデコーダの静止表示制御回路 | |
| WO2001078384A1 (fr) | Dispositif de traitement de l'image | |
| JPH11220702A (ja) | 映像記録及び再生装置、映像表示装置、及び映像伝送方式 | |
| JPH11215403A (ja) | 映像信号処理装置 | |
| JP3012656B2 (ja) | Ｍｕｓｅ信号処理装置 | |
| JPH03250881A (ja) | テレビジョン信号の処理方法および回路 | |
| JPH0575968A (ja) | 画像情報記録再生装置 |