JP4600530B2 - 画像処理装置および画像処理方法、並びにプログラム - Google Patents
画像処理装置および画像処理方法、並びにプログラム Download PDFInfo
- Publication number
- JP4600530B2 JP4600530B2 JP2008157666A JP2008157666A JP4600530B2 JP 4600530 B2 JP4600530 B2 JP 4600530B2 JP 2008157666 A JP2008157666 A JP 2008157666A JP 2008157666 A JP2008157666 A JP 2008157666A JP 4600530 B2 JP4600530 B2 JP 4600530B2
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- pixel
- pixels
- reliability
- reference block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
- H04N5/145—Movement estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
- H04N7/014—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
・・・(1)
・・・(2)
・・・(4)
Claims (8)
- 時間的に異なる複数のフレームの入力画像から、前記フレームを構成する第1の画素の動きベクトルと、前記第1の画素の周囲にある複数の第2の画素の各々の動きベクトルとを検出し、前記複数の第2の画素の各々の動きベクトルの信頼度を求める動きベクトル検出手段と、
前記複数の第2の画素の各々の動きベクトルの信頼度を用いて、前記第1の画素から信頼度が増加する方向に並ぶ画素を、前記複数の第2の画素より参照ブロックとして選択し、前記第1の画素と前記参照ブロックに含まれる各画素との距離および前記参照ブロックに含まれる各画素の前記信頼度に基づき、前記参照ブロックに含まれる各画素の前記動きベクトルの評価値を求める動きベクトル評価手段と、
前記参照ブロックに含まれる各画素の動きベクトルの評価値と前記参照ブロックに含まれる各画素の動きベクトルに基づき、前記第1の画素の動きベクトルを修正する動きベクトル修正手段と
を備える画像処理装置。 - 前記動きベクトル評価手段は、前記複数の第2の画素の各々の動きベクトルの信頼度の微分値を求め、前記微分値に基づいて前記参照ブロックを選択する
請求項1に記載の画像処理装置。 - 前記動きベクトル検出手段は、前記複数の第2の画素の各々の動きベクトルに対応する前記複数のフレームのブロックの差分絶対値を、予め設定された閾値で正規化することにより、前記複数の第2の画素の各々の動きベクトルの信頼度を求める
請求項1に記載の画像処理装置。 - 前記動きベクトル修正手段は、水平方向および垂直方向に並ぶ画素から構成される前記参照ブロックについて、前記参照ブロックに含まれる各画素の動きベクトルの値ごとに、その動きベクトルの評価値を累積し、累積値が最大となる前記動きベクトルの値が、修正後の前記第1の画素の動きベクトルの値となるように、前記第1の画素の動きベクトルを修正する
請求項1に記載の画像処理装置。 - 前記第1の画素の動きベクトルの信頼度と所定の閾値とを比較した結果に基づき、前記第1の画素の動きベクトルの信頼度を用いて、修正前の前記第1の画素の動きベクトルと修正後の前記第1の画素の動きベクトルを加算し、最終的な前記第1の画素の動きベクトルを決定する決定手段
をさらに備え、
前記動きベクトル検出手段は、前記第1の画素の動きベクトルの信頼度も求める
請求項1に記載の画像処理装置。 - 前記動きベクトル評価手段は、前記複数の第2の画素の各々の動きベクトルの信頼度に対して、前記第1の画素と前記第2の画素との距離に応じた重みで重み付けすることにより、前記複数の第2の画素の各々の動きベクトルの評価値を求め、
前記第1の画素と、前記複数の第2の画素のうちの前記参照ブロック以外の画素との距離に応じた重みは0である
請求項1に記載の画像処理装置。 - 入力画像を処理する画像処理装置による画像処理方法であって、
前記画像処理装置が、時間的に異なる複数のフレームの前記入力画像から、前記フレームを構成する第1の画素の動きベクトルと、前記第1の画素の周囲にある複数の第2の画素の各々の動きベクトルとを検出し、前記複数の第2の画素の各々の動きベクトルの信頼度を求める動きベクトル検出ステップと、
前記画像処理装置が、前記複数の第2の画素の各々の動きベクトルの信頼度を用いて、前記第1の画素から信頼度が増加する方向に並ぶ画素を、前記複数の第2の画素より参照ブロックとして選択し、前記第1の画素と前記参照ブロックに含まれる各画素との距離および前記参照ブロックに含まれる各画素の前記信頼度に基づき、前記参照ブロックに含まれる各画素の前記動きベクトルの評価値を求める動きベクトル評価ステップと、
前記画像処理装置が、前記参照ブロックに含まれる各画素の動きベクトルの評価値と前記参照ブロックに含まれる各画素の動きベクトルに基づき、前記第1の画素の動きベクトルを修正する動きベクトル修正ステップと
を含む画像処理方法。 - 時間的に異なる複数のフレームの入力画像から、前記フレームを構成する第1の画素の動きベクトルと、前記第1の画素の周囲にある複数の第2の画素の各々の動きベクトルとを検出し、前記複数の第2の画素の各々の動きベクトルの信頼度を求める動きベクトル検出手段と、
前記複数の第2の画素の各々の動きベクトルの信頼度を用いて、前記第1の画素から信頼度が増加する方向に並ぶ画素を、前記複数の第2の画素より参照ブロックとして選択し、前記第1の画素と前記参照ブロックに含まれる各画素との距離および前記参照ブロックに含まれる各画素の前記信頼度に基づき、前記参照ブロックに含まれる各画素の前記動きベクトルの評価値を求める動きベクトル評価手段と、
前記参照ブロックに含まれる各画素の動きベクトルの評価値と前記参照ブロックに含まれる各画素の動きベクトルに基づき、前記第1の画素の動きベクトルを修正する動きベクトル修正手段と
を備える
画像処理装置として、コンピュータを機能させるためのプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008157666A JP4600530B2 (ja) | 2008-06-17 | 2008-06-17 | 画像処理装置および画像処理方法、並びにプログラム |
EP09251508.9A EP2136548B1 (en) | 2008-06-17 | 2009-06-08 | Image processing apparatus, image processing method, and program |
CN2009101491495A CN101610415B (zh) | 2008-06-17 | 2009-06-17 | 图像处理设备和图像处理方法 |
US12/486,094 US8391623B2 (en) | 2008-06-17 | 2009-06-17 | Image processing apparatus and image processing method for determining motion vectors |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008157666A JP4600530B2 (ja) | 2008-06-17 | 2008-06-17 | 画像処理装置および画像処理方法、並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009303108A JP2009303108A (ja) | 2009-12-24 |
JP4600530B2 true JP4600530B2 (ja) | 2010-12-15 |
Family
ID=41171097
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008157666A Expired - Fee Related JP4600530B2 (ja) | 2008-06-17 | 2008-06-17 | 画像処理装置および画像処理方法、並びにプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US8391623B2 (ja) |
EP (1) | EP2136548B1 (ja) |
JP (1) | JP4600530B2 (ja) |
CN (1) | CN101610415B (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4958756B2 (ja) * | 2007-12-13 | 2012-06-20 | キヤノン株式会社 | 撮像装置及びその制御方法及びプログラム |
JP5791241B2 (ja) * | 2010-07-16 | 2015-10-07 | キヤノン株式会社 | 画像処理方法、画像処理装置、およびプログラム |
CN101950423B (zh) * | 2010-09-06 | 2012-08-29 | 北京航空航天大学 | 一种运动方向异常物体检测方法和装置 |
JP6619565B2 (ja) * | 2015-05-21 | 2019-12-11 | オリンパス株式会社 | 画像処理装置、画像処理方法およびプログラム |
KR20170075065A (ko) * | 2015-12-22 | 2017-07-03 | 에스케이하이닉스 주식회사 | 메모리 시스템 동작 방법 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0322977B2 (ja) * | 1982-06-11 | 1991-03-28 | Ii Ai Deyuhon De Nimoasu Ando Co | |
JP2004274628A (ja) * | 2003-03-11 | 2004-09-30 | Sony Corp | 動き検出装置、動き検出方法及びプログラム |
JP2005229169A (ja) * | 2004-02-10 | 2005-08-25 | Shibasoku:Kk | 映像信号処理装置 |
JP2006186504A (ja) * | 2004-12-27 | 2006-07-13 | Sony Corp | 画像処理装置および方法、記録媒体、並びにプログラム |
JP3935500B2 (ja) * | 2005-01-14 | 2007-06-20 | 株式会社モルフォ | 動きベクトル演算方法とこの方法を用いた手ぶれ補正装置、撮像装置、並びに動画生成装置 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USRE39279E1 (en) * | 1991-11-08 | 2006-09-12 | Matsushita Electric Industrial Co., Ltd. | Method for determining motion compensation |
JPH0973540A (ja) | 1995-09-04 | 1997-03-18 | Sharp Corp | 動きベクトル算出装置 |
US6442203B1 (en) * | 1999-11-05 | 2002-08-27 | Demografx | System and method for motion compensation and frame rate conversion |
FI108900B (fi) * | 1999-12-28 | 2002-04-15 | Martti Kesaeniemi | Optinen vuo ja kuvan muodostaminen |
KR100875743B1 (ko) | 2001-01-16 | 2008-12-26 | 엔엑스피 비 브이 | 모션 보상된 보간에서 헤일로 효과를 감소시키는 방법 |
KR100396558B1 (ko) * | 2001-10-25 | 2003-09-02 | 삼성전자주식회사 | 적응 움직임 보상형 프레임 및/또는 레이트 변환 장치 및그 방법 |
JP4030830B2 (ja) * | 2002-08-13 | 2008-01-09 | 日本電気株式会社 | 縞模様画像鑑定装置および縞模様画像鑑定方法 |
AU2003265075A1 (en) * | 2002-10-22 | 2004-05-13 | Koninklijke Philips Electronics N.V. | Image processing unit with fall-back |
US20040258154A1 (en) * | 2003-06-19 | 2004-12-23 | Microsoft Corporation | System and method for multi-stage predictive motion estimation |
EP1589763A2 (en) * | 2004-04-20 | 2005-10-26 | Sony Corporation | Image processing apparatus, method and program |
KR100843083B1 (ko) * | 2005-12-14 | 2008-07-02 | 삼성전자주식회사 | 움직임 추정 기반 프레임 보간을 위한 장치 및 방법 |
GB0614567D0 (en) * | 2006-07-21 | 2006-08-30 | Snell & Wilcox Ltd | Motion vector interpolation |
JP2008042332A (ja) * | 2006-08-02 | 2008-02-21 | Toshiba Corp | 補間フレーム作成方法及び補間フレーム作成装置 |
KR100829098B1 (ko) | 2006-10-10 | 2008-05-19 | 삼성전자주식회사 | 움직임 추정장치 및 움직임 추정방법 |
WO2009032255A2 (en) * | 2007-09-04 | 2009-03-12 | The Regents Of The University Of California | Hierarchical motion vector processing method, software and devices |
-
2008
- 2008-06-17 JP JP2008157666A patent/JP4600530B2/ja not_active Expired - Fee Related
-
2009
- 2009-06-08 EP EP09251508.9A patent/EP2136548B1/en not_active Not-in-force
- 2009-06-17 CN CN2009101491495A patent/CN101610415B/zh not_active Expired - Fee Related
- 2009-06-17 US US12/486,094 patent/US8391623B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0322977B2 (ja) * | 1982-06-11 | 1991-03-28 | Ii Ai Deyuhon De Nimoasu Ando Co | |
JP2004274628A (ja) * | 2003-03-11 | 2004-09-30 | Sony Corp | 動き検出装置、動き検出方法及びプログラム |
JP2005229169A (ja) * | 2004-02-10 | 2005-08-25 | Shibasoku:Kk | 映像信号処理装置 |
JP2006186504A (ja) * | 2004-12-27 | 2006-07-13 | Sony Corp | 画像処理装置および方法、記録媒体、並びにプログラム |
JP3935500B2 (ja) * | 2005-01-14 | 2007-06-20 | 株式会社モルフォ | 動きベクトル演算方法とこの方法を用いた手ぶれ補正装置、撮像装置、並びに動画生成装置 |
Also Published As
Publication number | Publication date |
---|---|
CN101610415A (zh) | 2009-12-23 |
EP2136548B1 (en) | 2016-08-17 |
EP2136548A3 (en) | 2010-07-28 |
US8391623B2 (en) | 2013-03-05 |
US20090310876A1 (en) | 2009-12-17 |
CN101610415B (zh) | 2012-11-14 |
JP2009303108A (ja) | 2009-12-24 |
EP2136548A2 (en) | 2009-12-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8860829B2 (en) | Image processing device, image processing method, and image processing program | |
US9055217B2 (en) | Image compositing apparatus, image compositing method and program recording device | |
KR100573696B1 (ko) | 패턴 분석에 기반한 움직임 벡터 보정 장치 및 방법 | |
US8204124B2 (en) | Image processing apparatus, method thereof, and program | |
JP4600530B2 (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
US20070133685A1 (en) | Motion estimating apparatus and motion estimating method | |
WO2011067870A1 (ja) | 画像処理装置および画像処理方法 | |
US20100080299A1 (en) | Frame frequency conversion apparatus, frame frequency conversion method, program for achieving the method, computer readable recording medium recording the program, motion vector detection apparatus, and prediction coefficient generation apparatus | |
JP5091994B2 (ja) | 動きベクトル検出装置 | |
JP5669599B2 (ja) | 画像処理装置及びその制御方法 | |
JP2007251688A (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
TW201345262A (zh) | 影像處理電路及影像處理方法 | |
US20100150462A1 (en) | Image processing apparatus, method, and program | |
US20120308080A1 (en) | Image processing apparatus, image processing method, and program | |
US8111325B2 (en) | Image processing apparatus and method and program | |
US8244055B2 (en) | Image processing apparatus and method, and program | |
JP2013074571A (ja) | 画像処理装置および方法、プログラム、並びに記録媒体 | |
US20090310679A1 (en) | Video processing apparatus and methods | |
JP2012227791A (ja) | 画像処理装置および方法、プログラム、並びに記録媒体 | |
JP2013005062A (ja) | 画像処理装置、画像処理方法 | |
US20120328208A1 (en) | Information processing apparatus, information processing method, program, and recording medium | |
JP2006186504A (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
JP4881812B2 (ja) | フリッカ補正装置及びフリッカ補正方法 | |
JP5067061B2 (ja) | 画像処理装置および方法、並びにプログラム | |
JP4486487B2 (ja) | スミア補正装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100330 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100629 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100813 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100831 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100913 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131008 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131008 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |