JP2019092013A - 画像生成装置、画像生成方法及び画像生成プログラム - Google Patents
画像生成装置、画像生成方法及び画像生成プログラム Download PDFInfo
- Publication number
- JP2019092013A JP2019092013A JP2017218550A JP2017218550A JP2019092013A JP 2019092013 A JP2019092013 A JP 2019092013A JP 2017218550 A JP2017218550 A JP 2017218550A JP 2017218550 A JP2017218550 A JP 2017218550A JP 2019092013 A JP2019092013 A JP 2019092013A
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- value
- image generation
- unit
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Picture Signal Circuits (AREA)
- Television Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
図1は、画像生成装置1の構成の例を示す図である。画像生成装置1は、画像を生成する装置である。画像生成装置1は、動きボケ及び重畳雑音が低減されたリアルタイム再生用の画像を生成する。画像生成装置1は、入力画像記憶部10と、初期合成画像生成部20と、合成画像記憶部30と、合成画像更新部40と、更新終了判定部50とを備える。
局所近傍領域設定部42は、予め定められた順序に基づいて、参照フレーム群から参照フレームを選択する。局所近傍領域設定部42は、対象画素の局所近傍画素を対象フレームに設定する。
図5は、画像生成装置1の動作の例を示すフローチャートである。画像生成装置1は、フィルタリング対象となる画像データを取得する(ステップS1)。初期合成画像生成部20は、取得された画像データに基づいて初期合成画像を生成する(ステップS2)。
初期合成画像生成部20は、参照フレーム内の全ての参照画素に対して、ステップS2a−4からステップS2a−7までの処理を繰り返す(ステップS2a−3)。
初期合成画像生成部20は、対応位置情報に基づいて、対応位置の近傍の整数画素位置の画素(近傍画素)を参照画素として設定する(ステップS2a−5)。
初期合成画像生成部20は、取得された画像データの全ての参照フレームの近似値及び対象画素値の平均値を、対象画素値の更新値として合成画像記憶部30に出力する(ステップS2a−8)。
ステップS2−3の詳細を説明する。
対応位置同定部23は、局所近傍領域Fb(x,y)と対応点の局所近傍領域との差分二乗和を最小化する参照フレーム内の位置を、式(1)のように同定する。
ステップS2−4−1(参照画素の設定)の詳細を説明する。
式(3)における、第(t−rt)フレームにおける対応位置での画素(x−V(x,t−rt),y−V(y,t−rt))と、その近傍に位置する画素(x−V(x,t−rt)+1,y−V(y,t−rt)),(x−V(x,t−rt),y−V(y,t−rt)+1),(x−V(x,t−rt)+1,y−V(y,t−rt)+1)とについて、各々の局所近傍領域を考える。
ステップS2−4−2の詳細を説明する。
合成画像生成部24は、近似誤差電力E(x,y,t−rt)を最小化する重み係数w0,w1,w2,w3を算出する。合成画像生成部24は、重み係数w0,w1,w2を、式(7)に基づいて算出する。
ステップS2−4−3の詳細を説明する。
合成画像生成部24は、式(11)に示された重み係数を各参照画素の画素値に式(12)のように乗算することによって、対象画素値の近似値を算出する。合成画像生成部24は、局所近傍領域単位で画素値に重み係数を乗じるのではなく、画素単位で画素値に重み係数を乗じる。合成画像生成部24は、rt枚の参照フレーム(第(t−rt)フレーム、(t=1,…,rt))に対する参照画素値を、式(12)のように算出する。
合成画像生成部24は、式(12)のように表されるrt枚の参照フレームに対する参照画素値に基づいて、式(14)のように対象画素値を更新する。
Claims (4)
- 対象フレームと複数の参照フレームとを取得する動画像取得部と、
前記対象フレーム内の対象画素ごとに前記参照フレーム内の第1対応位置を検出する第1検出部と、
前記第1対応位置の近傍の第1参照画素ごとに、画素値の第1重み係数を生成する第1重み生成部と、
前記第1参照画素の画素値と前記第1重み係数とに基づいて、前記対象画素の画素値の第1近似値を生成する第1近似値生成部と、
前記第1近似値に基づいて、前記対象画素の画素値を更新する第1更新処理部と、
を備える画像生成装置。 - 更新された画素値の前記対象画素ごとに前記参照フレームの第2対応位置を検出する第2検出部と、
前記第2対応位置の近傍の第2参照画素ごとに、画素値の第2重み係数を生成する第2重み生成部と、
前記第2参照画素の画素値と前記第2重み係数とに基づいて、更新された画素値の前記対象画素の画素値の第2近似値を生成する第2近似値生成部と、
前記第2近似値に基づいて、更新された画素値の前記対象画素の画素値を再び更新する第2更新処理部と、
を更に備える、請求項1に記載の画像生成装置。 - 画像生成装置が実行する画像生成方法であって、
対象フレームと複数の参照フレームとを取得するステップと、
前記対象フレーム内の対象画素ごとに前記参照フレーム内の第1対応位置を検出するステップと、
前記第1対応位置の近傍の第1参照画素ごとに、画素値の第1重み係数を生成するステップと、
前記第1参照画素の画素値と前記第1重み係数とに基づいて、前記対象画素の画素値の第1近似値を生成するステップと、
前記第1近似値に基づいて、前記対象画素の画素値を更新するステップと
を含む画像生成方法。 - コンピュータに、
対象フレームと複数の参照フレームとを取得する手順と、
前記対象フレーム内の対象画素ごとに前記参照フレーム内の第1対応位置を検出する手順と、
前記第1対応位置の近傍の第1参照画素ごとに、画素値の第1重み係数を生成する手順と、
前記第1参照画素の画素値と前記第1重み係数とに基づいて、前記対象画素の画素値の第1近似値を生成する手順と、
前記第1近似値に基づいて、前記対象画素の画素値を更新する手順と
を実行させるための画像生成プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017218550A JP6792541B2 (ja) | 2017-11-13 | 2017-11-13 | 画像生成装置、画像生成方法及び画像生成プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017218550A JP6792541B2 (ja) | 2017-11-13 | 2017-11-13 | 画像生成装置、画像生成方法及び画像生成プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019092013A true JP2019092013A (ja) | 2019-06-13 |
JP6792541B2 JP6792541B2 (ja) | 2020-11-25 |
Family
ID=66836725
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017218550A Active JP6792541B2 (ja) | 2017-11-13 | 2017-11-13 | 画像生成装置、画像生成方法及び画像生成プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6792541B2 (ja) |
-
2017
- 2017-11-13 JP JP2017218550A patent/JP6792541B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP6792541B2 (ja) | 2020-11-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101830804B1 (ko) | 적응 필터링을 이용한 디지털 이미지 안정화 방법 | |
US8508605B2 (en) | Method and apparatus for image stabilization | |
US9262684B2 (en) | Methods of image fusion for image stabilization | |
US10672108B2 (en) | Image processing apparatus, image processing method, and image processing program | |
RU2461979C2 (ru) | Устройство видеоотображения | |
JP4564564B2 (ja) | 動画像再生装置、動画像再生方法および動画像再生プログラム | |
JP2008541508A (ja) | 動き安定化 | |
US10026155B1 (en) | Image-processing apparatus | |
JP2007181674A (ja) | ブロック整合及び動き補償補間を利用した映像形成方法 | |
KR20100139030A (ko) | 이미지들의 수퍼 해상도를 위한 방법 및 장치 | |
CN106210448B (zh) | 一种视频图像抖动消除处理方法 | |
US9245316B2 (en) | Image processing device, image processing method and non-transitory computer readable medium | |
US20110058610A1 (en) | Methods and Systems for Motion Estimation with Nonlinear Motion-Field Smoothing | |
WO2014069103A1 (ja) | 画像処理装置 | |
JP2015060593A (ja) | 画像をフィルタリングするための方法および装置 | |
Jeong et al. | Multi-frame example-based super-resolution using locally directional self-similarity | |
JP4385077B1 (ja) | 動きベクトル検出装置および画像処理装置 | |
JP6017279B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6221333B2 (ja) | 画像処理装置、画像処理回路及び画像処理方法 | |
JP6836495B2 (ja) | 画像生成装置、画像生成方法及び画像生成プログラム | |
JP2018033080A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6792541B2 (ja) | 画像生成装置、画像生成方法及び画像生成プログラム | |
JP5928465B2 (ja) | 劣化復元システム、劣化復元方法およびプログラム | |
JP5448983B2 (ja) | 解像度変換装置及び方法、走査線補間装置及び方法、並びに映像表示装置及び方法 | |
JP2006215657A (ja) | 動きベクトル検出方法、動きベクトル検出装置、動きベクトル検出プログラム及びプログラム記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191218 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201023 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201104 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201106 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6792541 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |