JP5177828B2 - 画像レート変換方法及び画像レート変換装置 - Google Patents
画像レート変換方法及び画像レート変換装置 Download PDFInfo
- Publication number
- JP5177828B2 JP5177828B2 JP2005088995A JP2005088995A JP5177828B2 JP 5177828 B2 JP5177828 B2 JP 5177828B2 JP 2005088995 A JP2005088995 A JP 2005088995A JP 2005088995 A JP2005088995 A JP 2005088995A JP 5177828 B2 JP5177828 B2 JP 5177828B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- interpolation
- activity
- inter
- motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Description
動画像入力端子1より入来する動画像は、一旦画像バッファ2に蓄えられる。この画像は3種類の補間器、順方向補間器3、双方向補間器4、逆方向補間器5に与えられ、それぞれの補間器で形成された補間画像は適応補間選択器6に与えられる。適応補間選択器6は、それぞれの補間画像の品質を判断し、ブロック単位で適当な補間画像を選択する。このようにして得られた補間画像は画像順制御器8に与えられる。画像順制御器8は、画像バッファ2から与えられる入力動画像と、適応補間選択器6から与えられる補間画像を、適正な順番になるようにして出力する。このようにして画像レートが変換された動画像信号が動画像出力9より出力される。
本発明の第1の実施例の画像レート変換方法及び画像レート変換装置について説明する。図1は、その構成を示したもので、図3の従来例と同一構成要素には同一符号を記してある。図1には、図3と比較して動き推定器10、活性度検出器11、モード判定器12、画像スイッチ7が追加されている。
動画像入力端子1より入来する動画像信号は、画像バッファ2に与えられる。画像バッファ2は、数フレーム分の画像を保持し、保持された画像は処理に合わせて適時出力される。順方向補間器3、双方向補間器4、逆方向補間器5へは、補間画像形成のための画像信号が与えられる。それぞれの補間器は、所定のフレーム間で動き推定を行い、動きベクトルを決定し、その動きベクトルに従って、参照画像を動き補償して補間画像を形成する。この様子を図6に示す。
画像スイッチ7は、順方向補間画像と逆方向補間画像と適応補間画像を、モード判定器12から与えられる補間モード情報に従って画像単位で切替える。選択された最終的な補間画像は画像順制御器8に与えられる。なお、処理機能を明確にするために適応補間選択器6と画像スイッチ7を分離して示したが、画像単位の切替え処理はブロック単位の切替え処理で実現できるので、適応補間選択器6の動作を画像内ブロック共通としても実現できる。
画像バッファ2で一時蓄えられた画像は、動き推定器10に与えられる。動き推定器10は、補間対象画像の前後の画像間で動き推定を行う。この動き推定は、双方向補間器4で行われる動き推定と類似するので、処理を兼ねることも可能である。動き推定器10は求められた動きベクトル(MV)と、動き推定で算出した各ブロックの最小ブロックマッチング誤差量を活性度検出器11に与える。
本発明の第2の実施例の画像レート変換方法及び画像レート変換装置について説明する。図2は、その構成を示したもので、図1の第1の実施例と同一構成要素には同一符号を記してある。図2には、図1と比較して順方向補間器3、双方向補間器4、逆方向補間器5、適応補間選択器6の代わりに動き補償補間器22があり、画像バッファ21、画像スイッチ23の動作が異なる。以下、第1の実施例と動作が異なる部分のみ説明する。
本発明の第3の実施例の画像レート変換方法及び画像レート変換装置について説明する。これは、図1の第1の実施例と図2の第2の実施例を組み合わせたものである。構成は図示しないが、図1とほぼ同じで、違いは画像スイッチ7とモード判定器12の動作のみである。
画像スイッチ7の選択肢として、画像バッファ2の出力も加わり、非通常補間モードは、片方向補間と、動き補償なし片方向補間の2段階となる。これに合わせてモード判定も2段階となる。
Claims (4)
- 動き補償を用いた画像間補間により動画像の画像レートを変換する画像レート変換方法であって、
入来画像の画像間でブロック単位の動きベクトルを求める動き推定と、
前記動きベクトルのブロック間相関を、前記画像を構成する全ブロック分まとめた1画像の動きベクトル活性度と、前記動きベクトルのマッチング誤差を、前記画像を構成する全ブロック分まとめた1画像のマッチング誤差である画像間活性度とを活性度として出力し、または前記画像間活性度を活性度として出力する活性度検出と、
前記活性度を所定値と比較し、比較対象の活性度が前記画像間活性度である場合に前記画像間活性度が第1の所定値(T M1 )より高いときは、片方向補間モードを指定する補間モード情報を出力し、比較対象の活性度が前記動きベクトル活性度および前記画像間活性度である場合に前記比較対象の活性度の一方が第2の所定値(T v1 、T M1 )より高いとき、または前記比較対象の活性度の双方が第3の所定値(T v2 、T M2 )より高いときは、片方向補間モードを指定する補間モード情報を出力し、それ以外の場合には通常補間モードを指定する補間モード情報を出力する補間モード判定と、
前後の画像から動き補償画像間補間により、ブロック単位で補間方向が異なる補間画像を形成する補間処理と、
片方向の画像のみから全ブロックの補間方向が同一の補間画像を形成する補間処理と、
前記補間モード情報が通常補間モードを指定する場合は、前記ブロック単位で補間方向が異なる補間画像を出力し、前記補間モード情報が片方向補間モードを指定する場合は、前記片方向の画像のみから全ブロックの補間方向が同一の補間画像を出力する切替処理と、
前記切替処理によって出力された補間画像と、入来画像を所定の時間関係で配置して出力する配置変換とを行い、
前記第2の所定値(T v1 、T M1 )は、対応する前記第3の所定値(T v2 、T M2 )よりも大きいことを特徴とする画像レート変換方法。 - 動き補償を用いた画像間補間により動画像の画像レートを変換する画像レート変換方法であって、
入来画像の画像間でブロック単位の動きベクトルを求める動き推定と、
前記動きベクトルのブロック間相関を、前記画像を構成する全ブロック分まとめた1画像の動きベクトル活性度と、前記動きベクトルのマッチング誤差を、前記画像を構成する全ブロック分まとめた1画像のマッチング誤差である画像間活性度とを活性度として出力し、または前記画像間活性度を活性度として出力する活性度検出と、
前記活性度を所定値と比較し、比較対象の活性度が前記画像間活性度である場合に前記画像間活性度が第1の所定値(T M1 )より高いときは、繰り返しモードを指定する補間モード情報を出力し、比較対象の活性度が前記動きベクトル活性度および前記画像間活性度である場合に前記比較対象の活性度の一方が第2の所定値(T v1 、T M1 )より高いとき、または前記比較対象の活性度の双方が第3の所定値(T v2 、T M2 )より高いときは、繰り返しモードを指定する補間モード情報を出力し、それ以外の場合には通常補間モードを指定する補間モード情報を出力する補間モード判定と、
ブロック単位で動き補償画像間補間を施すことにより、ブロック単位で動き補償された補間画像を形成する補間処理と、
前記補間モード情報が通常補間モードを指定する場合は、前記ブロック単位で動き補償された補間画像を出力し、前記補間モード情報が繰返しモードを指定する場合は、隣接フレームをそのまま補間画像として出力する切替処理と、
前記切替処理によって出力された補間画像と、入来画像を所定の時間関係で配置して出力する配置変換とを行い、
前記第2の所定値(T v1 、T M1 )は、対応する前記第3の所定値(T v2 、T M2 )よりも大きいことを特徴とする画像レート変換方法。 - 動き補償を用いた画像間補間により動画像の画像レートを変換する画像レート変換装置であって、
入来画像の画像間でブロック単位の動きベクトルを求める動き推定手段(10)と、
前記動きベクトルのブロック間相関を、前記画像を構成する全ブロック分まとめた1画像の動きベクトル活性度と、前記動きベクトルのマッチング誤差を、前記画像を構成する全ブロック分まとめた1画像のマッチング誤差である画像間活性度とを活性度として出力し、または前記画像間活性度を活性度として出力する活性度検出手段(11)と、
前記活性度を所定値と比較し、比較対象の活性度が前記画像間活性度である場合に前記画像間活性度が第1の所定値(T M1 )より高いときは、片方向補間モードを指定する補間モード情報を出力し、比較対象の活性度が前記動きベクトル活性度および前記画像間活性度である場合に前記比較対象の活性度の一方が第2の所定値(T v1 、T M1 )より高いとき、または前記比較対象の活性度の双方が第3の所定値(T v2 、T M2 )より高いときは、片方向補間モードを指定する補間モード情報を出力し、それ以外の場合には通常補間モードを指定する補間モード情報を出力する補間モード判定手段(12)と、
前後の画像から動き補償画像間補間により、ブロック単位で補間方向が異なる補間画像を形成する補間手段(4)と、
片方向の画像のみから全ブロックの補間方向が同一の補間画像を形成する補間手段(3、5)と、
前記補間モード情報が通常補間モードを指定する場合は、前記ブロック単位で補間方向が異なる補間画像を出力し、前記補間モード情報が片方向補間モードを指定する場合は、前記片方向の画像のみから全ブロックの補間方向が同一の補間画像を出力する切替手段(6、7)と、
前記切替手段が出力した補間画像と、入来画像を所定の時間関係で配置して出力する配置変換手段(8)とを有し、
前記第2の所定値(T v1 、T M1 )は、対応する前記第3の所定値(T v2 、T M2 )よりも大きいことを特徴とする画像レート変換装置。 - 動き補償を用いた画像間補間により動画像の画像レートを変換する画像レート変換装置であって、
入来画像の画像間でブロック単位の動きベクトルを求める動き推定手段(10)と、
前記動きベクトルのブロック間相関を、前記画像を構成する全ブロック分まとめた1画像の動きベクトル活性度と、前記動きベクトルのマッチング誤差を、前記画像を構成する全ブロック分まとめた1画像のマッチング誤差である画像間活性度とを活性度として出力し、または前記画像間活性度を活性度として出力する活性度検出手段と(11)、
前記活性度を所定値と比較し、比較対象の活性度が前記画像間活性度である場合に前記画像間活性度が第1の所定値(T M1 )より高いときは、繰り返しモードを指定する補間モード情報を出力し、比較対象の活性度が前記動きベクトル活性度および前記画像間活性度である場合に前記比較対象の活性度の一方が第2の所定値(T v1 、T M1 )より高いとき、または前記比較対象の活性度の双方が第3の所定値(T v2 、T M2 )より高いときは、繰り返しモードを指定する補間モード情報を出力し、それ以外の場合には通常補間モードを指定する補間モード情報を出力する補間モード判定手段(24)と、
ブロック単位で動き補償画像間補間を施すことにより、ブロック単位で動き補償された補間画像を形成する補間手段(22)と、
前記補間モード情報が通常補間モードを指定する場合は、前記ブロック単位で動き補償された補間画像を出力し、前記補間モード情報が繰返しモードを指定する場合は、隣接フレームをそのまま補間画像として出力する切替手段(23)と、
前記切替手段が出力した補間画像と、入来画像を所定の時間関係で配置して出力する配置変換手段(8)とを有し、
前記第2の所定値(T v1 、T M1 )は、対応する前記第3の所定値(T v2 、T M2 )よりも大きいことを特徴とする画像レート変換装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005088995A JP5177828B2 (ja) | 2005-03-25 | 2005-03-25 | 画像レート変換方法及び画像レート変換装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005088995A JP5177828B2 (ja) | 2005-03-25 | 2005-03-25 | 画像レート変換方法及び画像レート変換装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006270823A JP2006270823A (ja) | 2006-10-05 |
JP5177828B2 true JP5177828B2 (ja) | 2013-04-10 |
Family
ID=37206261
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005088995A Active JP5177828B2 (ja) | 2005-03-25 | 2005-03-25 | 画像レート変換方法及び画像レート変換装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5177828B2 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB0618323D0 (en) * | 2006-09-18 | 2006-10-25 | Snell & Wilcox Ltd | Method and apparatus for interpolating an image |
JP4438795B2 (ja) | 2006-12-28 | 2010-03-24 | 株式会社日立製作所 | 映像変換装置、映像表示装置、映像変換方法 |
JP4956239B2 (ja) * | 2007-03-13 | 2012-06-20 | 三洋電機株式会社 | フレームレート変換装置および映像表示装置 |
JP4513819B2 (ja) | 2007-03-19 | 2010-07-28 | 株式会社日立製作所 | 映像変換装置、映像表示装置、映像変換方法 |
JP5029112B2 (ja) * | 2007-04-13 | 2012-09-19 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
JP5145887B2 (ja) * | 2007-07-13 | 2013-02-20 | 富士通株式会社 | フレーム補間装置および方法 |
JP5067061B2 (ja) * | 2007-08-02 | 2012-11-07 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
JP2009077382A (ja) * | 2007-08-27 | 2009-04-09 | Sony Corp | 画像処理装置および方法、並びにプログラム |
JP5200788B2 (ja) * | 2008-09-09 | 2013-06-05 | 富士通株式会社 | 映像信号処理装置、映像信号処理方法および映像信号処理プログラム |
JP4692913B2 (ja) * | 2009-10-08 | 2011-06-01 | 日本ビクター株式会社 | フレームレート変換装置及び方法 |
WO2011067869A1 (ja) * | 2009-12-01 | 2011-06-09 | パナソニック株式会社 | 画像処理装置及び画像処理方法 |
JP4735779B2 (ja) * | 2011-01-12 | 2011-07-27 | 日本ビクター株式会社 | 補間画素データ生成装置及び方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2508685B2 (ja) * | 1987-02-25 | 1996-06-19 | ソニー株式会社 | 動き検出回路 |
JP4092773B2 (ja) * | 1998-04-14 | 2008-05-28 | 株式会社日立製作所 | 画像信号のフレーム数変換方法および装置 |
JP2002185969A (ja) | 2000-10-02 | 2002-06-28 | Toshiba Corp | 動画像符号化データの形式変換方法及び装置 |
JP4244685B2 (ja) * | 2003-04-15 | 2009-03-25 | 日本ビクター株式会社 | 動画像時間軸補間方法及び動画像時間軸補間装置 |
-
2005
- 2005-03-25 JP JP2005088995A patent/JP5177828B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2006270823A (ja) | 2006-10-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5177828B2 (ja) | 画像レート変換方法及び画像レート変換装置 | |
US6118488A (en) | Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection | |
US8284306B2 (en) | Method and unit to process an image signal involving frame rate conversion to improve image quality | |
CN100417188C (zh) | 块模式自适应运动补偿 | |
KR20060047556A (ko) | 필름 모드 검출 방법과, 필름 모드 검출기와, 움직임 보상방법 및 움직임 보상기 | |
JP2004064788A (ja) | デインタレーシング装置及び方法 | |
KR20060047638A (ko) | 필름 모드 판정 방법, 움직임 보상 화상 처리 방법, 필름모드 검출기 및 움직임 보상기 | |
JP2008098691A (ja) | 映像処理装置 | |
CN101521785A (zh) | 视频信号处理设备和方法 | |
US8134643B2 (en) | Synthesized image detection unit | |
EP1536643A1 (en) | Image conversion device and image conversion method | |
JP3293561B2 (ja) | 画像表示装置及び画像表示方法 | |
JP2005318622A (ja) | 逆フィルムモード外挿方法 | |
JP2007274411A (ja) | プルダウン信号検出装置およびプルダウン信号検出方法並びに順次走査変換装置および順次走査変換方法 | |
US7868948B2 (en) | Mage signal processing apparatus, image signal processing method and program for converting an interlaced signal into a progressive signal | |
JP2003189259A (ja) | 画像信号処理装置及び方法 | |
US7187417B2 (en) | Video signal processing apparatus that performs frame rate conversion of a video signal | |
KR20040105594A (ko) | 움직임정보처리 방법 및 장치 | |
EP1526730A1 (en) | Image conversion device and image conversion method | |
JP4179089B2 (ja) | 動画像補間用動き推定方法及び動画像補間用動き推定装置 | |
JP3898546B2 (ja) | 画像走査変換方法及び装置 | |
KR100827214B1 (ko) | 비디오 스캔 레이트 전환을 위한 움직임 보상 업컨버전 | |
EP1418754A2 (en) | Progressive conversion of interlaced video based on coded bitstream analysis | |
KR100710236B1 (ko) | 화소 보간 장치 및 화소 보간 방법 | |
JP2007104652A (ja) | 画像信号処理装置、画像信号処理方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20080222 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20080222 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080229 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20080222 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110126 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110201 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110331 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110426 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20111012 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121026 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121207 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130107 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5177828 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |