JPH03263989A - 画像処理装置 - Google Patents
画像処理装置Info
- Publication number
- JPH03263989A JPH03263989A JP2063637A JP6363790A JPH03263989A JP H03263989 A JPH03263989 A JP H03263989A JP 2063637 A JP2063637 A JP 2063637A JP 6363790 A JP6363790 A JP 6363790A JP H03263989 A JPH03263989 A JP H03263989A
- Authority
- JP
- Japan
- Prior art keywords
- block
- frame
- data
- picture
- frames
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000015654 memory Effects 0.000 claims abstract description 37
- 239000013598 vector Substances 0.000 claims abstract description 22
- 238000001514 detection method Methods 0.000 claims abstract description 5
- 239000000284 extract Substances 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
Landscapes
- Color Television Systems (AREA)
- Television Systems (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
［産業上の利用分野］
本発明は映像信号のフレーム数を変換処理する画像処理
装置に関する。
装置に関する。
［従来の技術］
本出願人は、インクレース方式の映像信号を、ノンイン
タレース方式の映像信号に変換する画像処理装置（映像
信号変換装置）を、特願平１−２７１００６号として先
に提案した。
タレース方式の映像信号に変換する画像処理装置（映像
信号変換装置）を、特願平１−２７１００６号として先
に提案した。
この先の提案を、第４図を参照して簡単に説明すると、
次のようになる。
次のようになる。
例えば、ＮＴＳＣ方式の映像信号は、１秒当り６０フイ
ールドで構成されている（第４図（ａ））。
ールドで構成されている（第４図（ａ））。
この連続する２フイールドを１フレームとして１秒当り
３０フレームの動画像として表示すれば、フリッカは発
生しない。しかしながら、静止画として表示すると、各
フィールドの画像は１／６０秒の時間差があるため、縦
方向の相関が低く、空間周波数が高くなるので、フリッ
カが発生する（第４図（ｂ））。
３０フレームの動画像として表示すれば、フリッカは発
生しない。しかしながら、静止画として表示すると、各
フィールドの画像は１／６０秒の時間差があるため、縦
方向の相関が低く、空間周波数が高くなるので、フリッ
カが発生する（第４図（ｂ））。
そこで、１フレームの画像をフリッカのない静止画とし
て前処理する（第４図（Ｃ））。このようにすると、画
像のエントロピーが低くなり、画像圧縮して、高能率に
、符号量を前隅することができる（第４図（ｄ））。
て前処理する（第４図（Ｃ））。このようにすると、画
像のエントロピーが低くなり、画像圧縮して、高能率に
、符号量を前隅することができる（第４図（ｄ））。
［発明が解決しようとする課題］
しかしながら、先の提案においては、１秒当り３０フレ
ームの静止画を動画として表示した場合、例えば、ＴＶ
カメラがパンしている際の柱や、走行中の車から撮影し
た際の電柱等のように、等速運動をしている物体にフリ
ッカが現われ、動画としての画質が劣化する問題点があ
る。
ームの静止画を動画として表示した場合、例えば、ＴＶ
カメラがパンしている際の柱や、走行中の車から撮影し
た際の電柱等のように、等速運動をしている物体にフリ
ッカが現われ、動画としての画質が劣化する問題点があ
る。
本発明はこのような状況に鑑みてなされたもので、フリ
ッカのない動画像を得るものである。
ッカのない動画像を得るものである。
［課題を解決するための手段］
本発明の画像処理装置は、連続する２つの静止画像フレ
ームの一方を記憶する第１のフレームメモリと、連続す
る２つの静止画像フレームの他方を記憶する第２のフレ
ームメモリと、第１および第２のフレームメモリに記憶
された画像データから、所定の数の画素データを１ブロ
ックとして抽出し、各ブロック毎に２つのフレーム間に
おける動きベクトルを演算する動き検出回路と、２つの
フレームのうち一方の、動きベクトルの１／２の値に対
応するデータと、２つのフレームの他方の、動きベクト
ルの１／２の値に対応するデータの平均値を演算する平
均値回路とを備える。
ームの一方を記憶する第１のフレームメモリと、連続す
る２つの静止画像フレームの他方を記憶する第２のフレ
ームメモリと、第１および第２のフレームメモリに記憶
された画像データから、所定の数の画素データを１ブロ
ックとして抽出し、各ブロック毎に２つのフレーム間に
おける動きベクトルを演算する動き検出回路と、２つの
フレームのうち一方の、動きベクトルの１／２の値に対
応するデータと、２つのフレームの他方の、動きベクト
ルの１／２の値に対応するデータの平均値を演算する平
均値回路とを備える。
［作用コ
上記構成の画像処理装置においては、連続する一方のフ
レームのブロックが、動きベクトルの１／またけ他方の
ブロックの方向に移動した位置の画素データが求められ
る。同様に、他方のフレームのブロックが動きベクトル
の１／またけ一方のフレームの方向に移動した位置の画
素データが求められる。そして、両者の平均値が求めら
れ、これが２つのフレームの中間の補間フレームとされ
る。
レームのブロックが、動きベクトルの１／またけ他方の
ブロックの方向に移動した位置の画素データが求められ
る。同様に、他方のフレームのブロックが動きベクトル
の１／またけ一方のフレームの方向に移動した位置の画
素データが求められる。そして、両者の平均値が求めら
れ、これが２つのフレームの中間の補間フレームとされ
る。
従って、フリッカのない動画像が得られる。
［実施例］
第１図は本発明の画像処理装置の一実施例の構成を示し
ている。
ている。
図示せぬ回路によりディジタル化された画像データが、
フレームメモリ１乃至４に供給され、フレームメモリ１
．３にはフレームＯが、フレームメモリ２．４には、フ
レームＯに続く次のフレーム１が、それぞれ記憶される
。
フレームメモリ１乃至４に供給され、フレームメモリ１
．３にはフレームＯが、フレームメモリ２．４には、フ
レームＯに続く次のフレーム１が、それぞれ記憶される
。
動き検出回路５は、フレームメモリ１（第１のフレーム
メモリ）とフレームメモリ２（第２のフレームメモリ）
に記憶されたデータから、所定の数（例えばｎＸｎ個、
あるいはｎＸｍ個）の画素データを１ブロックとして抽
出し、そのブロックの動きベクトルを演算し、検出する
。
メモリ）とフレームメモリ２（第２のフレームメモリ）
に記憶されたデータから、所定の数（例えばｎＸｎ個、
あるいはｎＸｍ個）の画素データを１ブロックとして抽
出し、そのブロックの動きベクトルを演算し、検出する
。
すなわち、いま、第２図（ａ）に示すフレームＯのブロ
ックＡが、第２図（ｂ）に示すフレーム１においては、
ブロックＢの位置に移動したとすると、Ｘ軸方向（図中
左右方向）の動きベクトルｍｖｘ［］［］と、ｙ軸方向
（図中上下方向）の動きベクトルｍｖｙ［］［］が演算
きれる。この演算は次のように行なわれる。すなわち、
第２図（ｂ）に示すように、サーチブロックＡを所定の
サーチ範囲りの中で画素単位毎に移動させ、画素単位毎
に差分の絶対値和を求める。そして、その絶対値和が最
小となる値が動きベクトルとされる。
ックＡが、第２図（ｂ）に示すフレーム１においては、
ブロックＢの位置に移動したとすると、Ｘ軸方向（図中
左右方向）の動きベクトルｍｖｘ［］［］と、ｙ軸方向
（図中上下方向）の動きベクトルｍｖｙ［］［］が演算
きれる。この演算は次のように行なわれる。すなわち、
第２図（ｂ）に示すように、サーチブロックＡを所定の
サーチ範囲りの中で画素単位毎に移動させ、画素単位毎
に差分の絶対値和を求める。そして、その絶対値和が最
小となる値が動きベクトルとされる。
大きく動いている物体はフリッカとして認識すれないの
で、サーチ範囲は、フリッカとして視覚的に問題になる
範囲に限定される。画面のサイズが、例えば、７２０Ｘ
４８０画素である場合、サーチ範囲は±１５画素程度で
よいことが、実験的に確認されている。
で、サーチ範囲は、フリッカとして視覚的に問題になる
範囲に限定される。画面のサイズが、例えば、７２０Ｘ
４８０画素である場合、サーチ範囲は±１５画素程度で
よいことが、実験的に確認されている。
このようにして求められた動きベクトルは、メモリ６に
記憶される。尚、このデータは、フレームメモリ３と４
にフレームＯとフレーム１のデータが記憶されたタイミ
ングで出力されるように、必要に応じて遅延される。乗
算Ｍ７はメモリ６に記憶された動きベクトルに係数１７
２を乗算して加算器９に出力する。また、乗算器８はメ
モリ６に記憶された動きベクトルに係数（−１／２）を
乗算して加算器１０に出力する。
記憶される。尚、このデータは、フレームメモリ３と４
にフレームＯとフレーム１のデータが記憶されたタイミ
ングで出力されるように、必要に応じて遅延される。乗
算Ｍ７はメモリ６に記憶された動きベクトルに係数１７
２を乗算して加算器９に出力する。また、乗算器８はメ
モリ６に記憶された動きベクトルに係数（−１／２）を
乗算して加算器１０に出力する。
ブロックアドレス発生器１１は加算器９に、ブロックＡ
のアドレスを、加算器１０に、ブロックＢのアドレスを
、それぞれ出力している。加算器９．１０は、それぞれ
乗算器７，８より入力されたデータと、ブロックアドレ
ス発生器１１より入力されたデータを加算して、フレー
ムメモリ３．４に出力する。
のアドレスを、加算器１０に、ブロックＢのアドレスを
、それぞれ出力している。加算器９．１０は、それぞれ
乗算器７，８より入力されたデータと、ブロックアドレ
ス発生器１１より入力されたデータを加算して、フレー
ムメモリ３．４に出力する。
すなわち、第２図（Ｃ）に示すように、フレームメモリ
３には、フレームＯにおけるブロック八を、ブロックＢ
の方向に、動きベクトルの１／２だけ移動したブロック
のアドレスが入力される。また、フレームメモリ４には
、フレーム１におけるブロックＢを、ブロックへの方向
に、動きベクトルの１／またけ移動したブロックのアド
レスが入力される。
３には、フレームＯにおけるブロック八を、ブロックＢ
の方向に、動きベクトルの１／２だけ移動したブロック
のアドレスが入力される。また、フレームメモリ４には
、フレーム１におけるブロックＢを、ブロックへの方向
に、動きベクトルの１／またけ移動したブロックのアド
レスが入力される。
フレームメモリ３．４は、入力されたアドレスのブロッ
クのデータを加算器１２に出力する。加算器１２はフレ
ームメモリ３．４の出力を加算して、乗算器１３に出力
する。乗算器１３ζよ加算器１２の出力に係数１／２を
乗算してフレームメモリ１４に供給する。
クのデータを加算器１２に出力する。加算器１２はフレ
ームメモリ３．４の出力を加算して、乗算器１３に出力
する。乗算器１３ζよ加算器１２の出力に係数１／２を
乗算してフレームメモリ１４に供給する。
このようにして、フレームメモリ１４（こは、フレーム
メモリ３と４から読み出されたプロ・ンクのデータの平
均値により構成されるプロ・νり（第２図（Ｃ）におけ
るブロックＣ）のデータが書き込まれる。
メモリ３と４から読み出されたプロ・ンクのデータの平
均値により構成されるプロ・νり（第２図（Ｃ）におけ
るブロックＣ）のデータが書き込まれる。
すなわち、この実施例の場合、乗算ｉ？、 ８゜１３
、フレームメモリ３，４、加算器９，１０゜１２等が、
平均値回路を構成している。
、フレームメモリ３，４、加算器９，１０゜１２等が、
平均値回路を構成している。
マルチプレクサ（ＭＰＸ）１５は、フレームメモリ４の
出力と、フレームメモリ１４の出力とを、交互に選択し
て出力する。
出力と、フレームメモリ１４の出力とを、交互に選択し
て出力する。
これにより、第３図（ａ）乃至（ｄ）に示すように、従
来の場合（第４図（ａ）乃至（ｄ））と同様に、圧縮さ
れた画像データに、同図（ｅ）に示すように、静止画を
補間し、１秒当り６０フレームの画像を得ることができ
る。この画像においては、静止画としても、また、動画
としても、フリッカが現われない。
来の場合（第４図（ａ）乃至（ｄ））と同様に、圧縮さ
れた画像データに、同図（ｅ）に示すように、静止画を
補間し、１秒当り６０フレームの画像を得ることができ
る。この画像においては、静止画としても、また、動画
としても、フリッカが現われない。
以上の補間動作を数式を用いて表わすと、次のようにな
る。
る。
ｉｎｐ［ｘｂＸ ８＋ｐｉｘ］ ［ｙｂＸ ８＋１ｉｎ
ｅ］＝（ＦＯ［ｘｂＸ ８＋ｐｉｘ＋ｍｖｘ［ｘｂ］
［ｙｂ］／２］［ｙｂｘ８＋１ｉｎｅ＋ｍｖｙ［ｘｂ］
［ｙｂｌ／２］＋Ｆ１［ｘｂ Ｘ ８＋ｐｉｘ−ｍｖｘ
［ｘｂ］［ｙｂ］／２］［ｙｂ Ｘ ８＋ｌｉｎｅ−ｍ
ｖｘ ［ｘｂ］ ［ｙｂ］／２］ ）／２ここで、各記
号は、それぞれ次の意味を表わしている。
ｅ］＝（ＦＯ［ｘｂＸ ８＋ｐｉｘ＋ｍｖｘ［ｘｂ］
［ｙｂ］／２］［ｙｂｘ８＋１ｉｎｅ＋ｍｖｙ［ｘｂ］
［ｙｂｌ／２］＋Ｆ１［ｘｂ Ｘ ８＋ｐｉｘ−ｍｖｘ
［ｘｂ］［ｙｂ］／２］［ｙｂ Ｘ ８＋ｌｉｎｅ−ｍ
ｖｘ ［ｘｂ］ ［ｙｂ］／２］ ）／２ここで、各記
号は、それぞれ次の意味を表わしている。
ｉｎｐ［］［］’補間フレームの画素データＦｏｅ］
［］ ：フレームＯの画素データＦ１［］［］：フレー
ム１の画素データ■ｖｘ［］ ［］、ｉ＋ｖｙ［）［］
：動きベクトルデータｘｂ＋ｙｂ’ フレーム内ブ
ロックアドレス１ｉｎｅ＋ｐｉｘニブロック内の画素ア
ドレス以上の演算がブロック単位に行なわれ、補間フレ
ームが構成される。フレームの上下左右の端部において
補間データがフレームからはみ出す場合は、フレームの
端部のデータがホールドきれ、その値が代用される。
［］ ：フレームＯの画素データＦ１［］［］：フレー
ム１の画素データ■ｖｘ［］ ［］、ｉ＋ｖｙ［）［］
：動きベクトルデータｘｂ＋ｙｂ’ フレーム内ブ
ロックアドレス１ｉｎｅ＋ｐｉｘニブロック内の画素ア
ドレス以上の演算がブロック単位に行なわれ、補間フレ
ームが構成される。フレームの上下左右の端部において
補間データがフレームからはみ出す場合は、フレームの
端部のデータがホールドきれ、その値が代用される。
［発明の効果］
以上のように、本発明の画像処理装置（こよれ（ｆ、連
続する一方のフレームのブロックを、動きベクトルの１
／またけ他方のブロックの方向むこ移動した位置の画素
データと、他方のフレームのブロックを、動きベクトル
の１／２だけ一方のブロックの方向に移動した位置の画
素データの平均値を求めるようにしたので、フリッカの
ない静止画像を補間し、フリッカのない動画像を得るこ
とか可能になる。
続する一方のフレームのブロックを、動きベクトルの１
／またけ他方のブロックの方向むこ移動した位置の画素
データと、他方のフレームのブロックを、動きベクトル
の１／２だけ一方のブロックの方向に移動した位置の画
素データの平均値を求めるようにしたので、フリッカの
ない静止画像を補間し、フリッカのない動画像を得るこ
とか可能になる。
第１図は本発明の画像処理装置の一実施例の構成を示す
ブロック図、第２図（ａ）乃至（ｃ）および第３図は、
第１図の実施例の動作を説明する図、第４図は従来の画
像処理装置の一例の動作を説明する図である。 １乃至４，１４・・・フレームメモリ、５・・・動き検
出回路、６・・・メモリ、？、 ８． １３・・・乗
算器、９゜１０．１２・・・加算器、１１・・・ブロッ
クアドレス発生器、１５・・・マルチプレクサ。
ブロック図、第２図（ａ）乃至（ｃ）および第３図は、
第１図の実施例の動作を説明する図、第４図は従来の画
像処理装置の一例の動作を説明する図である。 １乃至４，１４・・・フレームメモリ、５・・・動き検
出回路、６・・・メモリ、？、 ８． １３・・・乗
算器、９゜１０．１２・・・加算器、１１・・・ブロッ
クアドレス発生器、１５・・・マルチプレクサ。
Claims (1)
- 【特許請求の範囲】 連続する２つの静止画像フレームの一方を記憶する第１
のフレームメモリと、 連続する２つの静止画像フレームの他方を記憶する第２
のフレームメモリと、 前記第１および第２のフレームメモリに記憶された画像
データから、所定の数の画素データを１ブロックとして
抽出し、各ブロック毎に２つの前記フレーム間における
動きベクトルを演算する動き検出回路と、 ２つの前記フレームのうち一方の、前記動きベクトルの
１／２の値に対応するデータと、２つの前記フレームの
他方の、前記動きベクトルの１／２の値に対応するデー
タの平均値を演算する平均値回路とを備える画像処理装
置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2063637A JPH03263989A (ja) | 1990-03-13 | 1990-03-13 | 画像処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2063637A JPH03263989A (ja) | 1990-03-13 | 1990-03-13 | 画像処理装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH03263989A true JPH03263989A (ja) | 1991-11-25 |
Family
ID=13235070
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2063637A Pending JPH03263989A (ja) | 1990-03-13 | 1990-03-13 | 画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH03263989A (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5568615A (en) * | 1992-06-12 | 1996-10-22 | The Dow Chemical Company | Stealth interface for process control computers |
| JP2009516864A (ja) * | 2005-11-23 | 2009-04-23 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | マルチビューディスプレイ装置のためのビューの描画 |
| US8244112B2 (en) | 2008-01-31 | 2012-08-14 | Canon Kabushiki Kaisha | Video processing apparatus and controlling method for same |
| US8259226B2 (en) | 2006-11-24 | 2012-09-04 | Sharp Kabushiki Kaisha | Image display device |
| US8675051B2 (en) | 2010-04-14 | 2014-03-18 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
-
1990
- 1990-03-13 JP JP2063637A patent/JPH03263989A/ja active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5568615A (en) * | 1992-06-12 | 1996-10-22 | The Dow Chemical Company | Stealth interface for process control computers |
| JP2009516864A (ja) * | 2005-11-23 | 2009-04-23 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | マルチビューディスプレイ装置のためのビューの描画 |
| US9036015B2 (en) | 2005-11-23 | 2015-05-19 | Koninklijke Philips N.V. | Rendering views for a multi-view display device |
| US8259226B2 (en) | 2006-11-24 | 2012-09-04 | Sharp Kabushiki Kaisha | Image display device |
| US8244112B2 (en) | 2008-01-31 | 2012-08-14 | Canon Kabushiki Kaisha | Video processing apparatus and controlling method for same |
| US8675051B2 (en) | 2010-04-14 | 2014-03-18 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5642170A (en) | Method and apparatus for motion compensated interpolation of intermediate fields or frames | |
| US5784115A (en) | System and method for motion compensated de-interlacing of video frames | |
| JP3500634B2 (ja) | 動きベクトル検出装置 | |
| CA2146884A1 (en) | Motion adaptive scan-rate conversion using directional edge interpolation | |
| US20090115909A1 (en) | Method and System for Motion Estimation Around a Fixed Reference Vector Using a Pivot-Pixel Approach | |
| KR100727795B1 (ko) | 모션 추정 | |
| JP2005517251A (ja) | ピクセル群の動きベクトルを推定する方法及びユニット | |
| JPH03263989A (ja) | 画像処理装置 | |
| JP2003189256A (ja) | 画像信号処理装置及び方法 | |
| AU2004200237B2 (en) | Image processing apparatus with frame-rate conversion and method thereof | |
| US20120098942A1 (en) | Frame Rate Conversion For Stereoscopic Video | |
| JPH08149421A (ja) | 動きベクトルを用いた動き内挿方法および動き内挿回路 | |
| JPH03280681A (ja) | 動きベクトルを用いた動き内挿方法及び装置 | |
| JP4179089B2 (ja) | 動画像補間用動き推定方法及び動画像補間用動き推定装置 | |
| EP0648046B1 (en) | Method and apparatus for motion compensated interpolation of intermediate fields or frames | |
| JP4910579B2 (ja) | 画像信号処理装置、画像信号処理方法、およびプログラム | |
| JPH0279584A (ja) | 画像動き検出装置 | |
| JPH08186802A (ja) | 飛び越し走査画像の補間画素作成方法 | |
| JP2008118340A (ja) | 動きベクトル検出装置及びビデオ信号処理装置 | |
| JP4354799B2 (ja) | 補間画像生成方法および装置 | |
| JPS59210773A (ja) | テレビジヨン信号処理回路 | |
| JPH08223540A (ja) | 動きベクトルを用いた動き内挿方法および動き内挿回路ならびに動きベクトル検出方法および動きベクトル検出回路 | |
| KR0170678B1 (ko) | 움직임 추정방법 | |
| JP3013898B2 (ja) | Ｔｖ信号における動きベクトルを用いた動き内挿方法 | |
| KR20010073388A (ko) | 프레임 레이트 변환 장치 및 그 방법 |