JP2015041819A5 - - Google Patents

Download PDF

Info

Publication number
JP2015041819A5
JP2015041819A5 JP2013170818A JP2013170818A JP2015041819A5 JP 2015041819 A5 JP2015041819 A5 JP 2015041819A5 JP 2013170818 A JP2013170818 A JP 2013170818A JP 2013170818 A JP2013170818 A JP 2013170818A JP 2015041819 A5 JP2015041819 A5 JP 2015041819A5
Authority
JP
Japan
Prior art keywords
image
motion vector
detection
geometric deformation
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013170818A
Other languages
Japanese (ja)
Other versions
JP6231816B2 (en
JP2015041819A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2013170818A priority Critical patent/JP6231816B2/en
Priority claimed from JP2013170818A external-priority patent/JP6231816B2/en
Publication of JP2015041819A publication Critical patent/JP2015041819A/en
Publication of JP2015041819A5 publication Critical patent/JP2015041819A5/ja
Application granted granted Critical
Publication of JP6231816B2 publication Critical patent/JP6231816B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、上記課題に鑑みてなされ、その目的は、防振処理に要する演算量を削減し、消費電力を抑える技術を実現することである。 The present invention has been made in view of the above problems, its object is to reduce the calculation amount required for the anti-vibration processing, implementing the techniques to reduce power consumption.

上記課題を解決し、目的を達成するために、本発明の撮像装置は、画像の像振れを補正する撮像装置であって、画像を撮影する撮像手段と、前記撮像手段による撮影パラメータを取得する取得手段と、前記撮像手段から得られる第1の画像と第2の画像から動きベクトルを検出する動きベクトル検出手段と、前記動きベクトル検出手段により検出された動きベクトルを用いて、前記第1の画像と前記第2の画像の間の像振れを幾何変形パラメータとして推定する幾何変形パラメータ推定手段と、前記幾何変形パラメータ推定手段により推定された幾何変形パラメータを用いて前記第1の画像と前記第2の画像に幾何変形を施して像振れを補正する幾何変形手段と、前記撮影パラメータに基づいて、前記動きベクトル検出手段による動きベクトルの検出方法と前記幾何変形パラメータ推定手段よる幾何変形パラメータ推定方法の少なくとも一方を決定する防振制御手段と、を有する。 In order to solve the above-described problems and achieve the object, an imaging apparatus of the present invention is an imaging apparatus that corrects image shake of an image, and acquires an imaging unit that captures an image, and imaging parameters by the imaging unit. an acquiring unit, a motion vector detecting means for detecting a motion vector from the first image and the second image that obtained from the imaging means, using the motion vector detected by said motion vector detecting means, said first A geometric deformation parameter estimating means for estimating an image shake between the second image and the second image as a geometric deformation parameter, and using the geometric deformation parameter estimated by the geometric deformation parameter estimating means, the first image and the second image Geometric deformation means for correcting image blur by applying geometric deformation to the second image, and a motion vector detected by the motion vector detection means based on the imaging parameters. Having a stabilization control means for determining at least one of the detection method and the geometrical transformation parameter estimation section by geometrical transformation parameter estimation methods.

本発明によれば、防振処理に要する演算量を削減し、消費電力を抑えることができる。 According to the present invention to reduce the computation amount required for the anti-vibration processing, power consumption can be suppressed.

Claims (16)

画像の像振れを補正する撮像装置であって、
画像を撮影する撮像手段と、
前記撮像手段による撮影パラメータを取得する取得手段と、
前記撮像手段から得られる第1の画像と第2の画像から動きベクトルを検出する動きベクトル検出手段と、
前記動きベクトル検出手段により検出された動きベクトルを用いて、前記第1の画像と前記第2の画像の間の像振れを幾何変形パラメータとして推定する幾何変形パラメータ推定手段と、
前記幾何変形パラメータ推定手段により推定された幾何変形パラメータを用いて前記第1の画像と前記第2の画像に幾何変形を施して像振れを補正する幾何変形手段と、
前記撮影パラメータに基づいて、前記動きベクトル検出手段による動きベクトルの検出方法と前記幾何変形パラメータ推定手段よる幾何変形パラメータ推定方法の少なくとも一方を決定する防振制御手段と、を有することを特徴とする撮像装置。
An imaging apparatus that corrects image shake of an image,
Imaging means for taking an image;
Obtaining means for obtaining imaging parameters by the imaging means;
Motion vector detection means for detecting a motion vector from the first image and the second image that obtained from said image pickup means,
Geometric deformation parameter estimation means for estimating an image shake between the first image and the second image as a geometric deformation parameter using the motion vector detected by the motion vector detection means;
Geometric deformation means for correcting image blur by performing geometric deformation on the first image and the second image using the geometric deformation parameter estimated by the geometric deformation parameter estimation means;
An image stabilization control unit configured to determine at least one of a motion vector detection method by the motion vector detection unit and a geometric deformation parameter estimation method by the geometric deformation parameter estimation unit based on the imaging parameter; Imaging device.
前記防振制御手段は、前記撮影パラメータに応じて、前記動きベクトル検出手段による動きベクトルの検出領域の大きさと検出数の少なくともいずれかを変更することを特徴とする請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the image stabilization control unit changes at least one of a size and a detection number of a motion vector detection region by the motion vector detection unit according to the imaging parameter. . 前記動きベクトル検出手段が検出対象とする像振れの動き成分は、並進、回転、およびあおりの少なくともいずれかを含み、
前記動きベクトルの検出領域の大きさは、前記動きベクトル検出手段が検出対象とする像振れの動き成分の種類が少ないほど小さくなり、
前記動きベクトルの検出数は、前記動きベクトル検出手段が検出対象とする像振れの動き成分の種類が少ないほど少なくなることを特徴とする請求項2に記載の撮像装置。
The motion component of image blur to be detected by the motion vector detection means includes at least one of translation, rotation, and tilt,
The size of the detection area of the motion vector becomes smaller as the number of types of image blur motion components to be detected by the motion vector detection means decreases.
The imaging apparatus according to claim 2, wherein the number of motion vectors detected decreases as the number of types of image blur motion components to be detected by the motion vector detection unit decreases.
前記撮影パラメータは、前記撮像装置の焦点距離と被写体距離のいずれかを含み、
前記防振制御手段は、前記撮影パラメータとして前記焦点距離が長いほど、前記動きベクトル検出手段が検出対象とする像振れの動き成分の種類が少なくなるように制御することを特徴とする請求項1ないし3のいずれか1項に記載の撮像装置。
The shooting parameter includes either a focal length or a subject distance of the imaging device,
2. The image stabilization control unit performs control so that the number of types of image blur motion components to be detected by the motion vector detection unit decreases as the focal length increases as the imaging parameter. 4. The imaging device according to any one of items 1 to 3.
前記防振制御手段は、前記撮影パラメータとして前記焦点距離が得られない場合は、前記被写体距離を用いて前記動きベクトルの検出方法と前記幾何変形パラメータ推定方法を決定し、
前記被写体距離が長い場合は、前記被写体距離が短い場合と比べて、前記防振の対象となる像振れの動き成分の種類が少なくなるように制御することを特徴とする請求項4に記載の撮像装置。
The image stabilization control means determines the motion vector detection method and the geometric deformation parameter estimation method using the subject distance when the focal length cannot be obtained as the imaging parameter,
5. The control according to claim 4, wherein when the subject distance is long, control is performed so that there are fewer types of motion components of the image blur that are subject to image stabilization than when the subject distance is short. Imaging device.
前記防振制御手段は、前記撮影パラメータに応じて、前記幾何変形パラメータ推定手段が算出する幾何変形パラメータの数を変更することを特徴とする請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the image stabilization control unit changes the number of geometric deformation parameters calculated by the geometric deformation parameter estimation unit according to the imaging parameter. 前記撮影パラメータは、前記撮像装置の焦点距離と被写体距離のいずれかを含み、
前記防振制御手段は、前記撮影パラメータとして前記焦点距離が長いほど、前記幾何変形パラメータ推定手段が算出する幾何変形パラメータの数が少なくなるように制御することを特徴とする請求項6に記載の撮像装置。
The shooting parameter includes either a focal length or a subject distance of the imaging device,
7. The image stabilization control unit according to claim 6, wherein the image stabilization control unit controls the number of geometric deformation parameters calculated by the geometric deformation parameter estimation unit to decrease as the focal length increases as the imaging parameter. Imaging device.
前記幾何変形パラメータ推定手段は、算出された幾何変形パラメータに対して、過去に算出された幾何変形パラメータを用いた平滑化処理を行うことを特徴とする請求項6または7に記載の撮像装置。   The imaging apparatus according to claim 6 or 7, wherein the geometric deformation parameter estimation means performs a smoothing process using a geometric deformation parameter calculated in the past on the calculated geometric deformation parameter. 複数の画像を用いて動きベクトルを検出する検出手段と、  Detecting means for detecting a motion vector using a plurality of images;
前記検出手段による動きベクトルの検出に関する設定を行う設定手段と、を有し、  Setting means for performing settings relating to detection of a motion vector by the detection means,
前記検出手段は、前記複数の画像の第1の画像から、前記複数の画像の第2の画像に設定された参照領域に対応する領域を探索することにより前記動きベクトルを検出し、  The detecting means detects the motion vector by searching a region corresponding to a reference region set in the second image of the plurality of images from the first image of the plurality of images,
前記設定手段は、前記検出手段により検出される前記動きベクトルの用途に応じて、前記第2の画像に設定される参照領域の数を変更することを特徴とする撮像装置。  The image pickup apparatus, wherein the setting unit changes the number of reference regions set in the second image in accordance with a use of the motion vector detected by the detection unit.
前記設定手段は、前記検出手段により検出される前記動きベクトルの用途に応じて、前記第2の画像に設定される参照領域の配置を変更することを特徴とする請求項9に記載の撮像装置。  The imaging apparatus according to claim 9, wherein the setting unit changes an arrangement of reference regions set in the second image according to a use of the motion vector detected by the detection unit. . 複数の画像を用いて動きベクトルを検出する検出手段と、  Detecting means for detecting a motion vector using a plurality of images;
前記検出手段による動きベクトルの検出に関する設定を行う設定手段と、を有し、  Setting means for performing settings relating to detection of a motion vector by the detection means,
前記検出手段は、前記複数の画像の第1の画像から、前記複数の画像の第2の画像に設定された参照領域に対応する領域を探索することにより前記動きベクトルを検出し、  The detecting means detects the motion vector by searching a region corresponding to a reference region set in the second image of the plurality of images from the first image of the plurality of images,
前記設定手段は、前記検出手段により検出される前記動きベクトルの用途に応じて、前記第2の画像に設定される参照領域の配置を変更することを特徴とする撮像装置。  The image pickup apparatus, wherein the setting unit changes an arrangement of reference areas set in the second image in accordance with a use of the motion vector detected by the detection unit.
画像の像振れを補正する撮像装置の制御方法であって、
撮像手段による撮影パラメータを取得する取得ステップと、
前記撮像手段から得られる第1の画像と第2の画像から動きベクトルを検出する動きベクトル検出ステップと、
前記動きベクトル検出ステップにより検出された動きベクトルを用いて、前記第1の画像と前記第2の画像の間の像振れを幾何変形パラメータとして推定する幾何変形パラメータ推定ステップと、
前記幾何変形パラメータ推定ステップにより推定された幾何変形パラメータを用いて前記第1の画像と前記第2の画像に幾何変形を施して像振れを補正する幾何変形ステップと、
前記撮影パラメータに基づいて、前記動きベクトル検出ステップによる動きベクトルの検出方法と前記幾何変形パラメータ推定ステップよる幾何変形パラメータ推定方法の少なくとも一方を決定する防振制御ステップと、を有することを特徴とする撮像装置の制御方法。
An image pickup apparatus control method for correcting image blur of an image,
An acquisition step of acquiring imaging parameters by the imaging means;
A motion vector detection step of detecting a motion vector from the first image and the second image that obtained from said image pickup means,
A geometric deformation parameter estimation step for estimating an image shake between the first image and the second image as a geometric deformation parameter using the motion vector detected by the motion vector detection step;
A geometric deformation step of correcting image blur by performing geometric deformation on the first image and the second image using the geometric deformation parameter estimated by the geometric deformation parameter estimating step;
A vibration vector control step of determining at least one of a motion vector detection method by the motion vector detection step and a geometric deformation parameter estimation method by the geometric deformation parameter estimation step based on the photographing parameter. Control method of imaging apparatus.
複数の画像を用いて動きベクトルを検出する検出ステップと、  A detection step of detecting a motion vector using a plurality of images;
前記検出ステップでの動きベクトルの検出に関する設定を行う設定ステップと、を有し、  A setting step for performing settings relating to detection of motion vectors in the detection step
前記検出ステップでは、前記複数の画像の第1の画像から、前記複数の画像の第2の画像に設定された参照領域に対応する領域を探索することにより前記動きベクトルを検出し、  In the detection step, the motion vector is detected by searching a region corresponding to a reference region set in the second image of the plurality of images from the first image of the plurality of images.
前記設定ステップでは、前記検出ステップで検出される前記動きベクトルの用途に応じて、前記第2の画像に設定される参照領域の数を変更することを特徴とする撮像装置の制御方法。  In the setting step, the number of reference regions set in the second image is changed according to the use of the motion vector detected in the detection step.
複数の画像を用いて動きベクトルを検出する検出ステップと、  A detection step of detecting a motion vector using a plurality of images;
前記検出ステップでの動きベクトルの検出に関する設定を行う設定ステップと、を有し、  A setting step for performing settings relating to detection of a motion vector in the detection step,
前記検出ステップでは、前記複数の画像の第1の画像から、前記複数の画像の第2の画像に設定された参照領域に対応する領域を探索することにより前記動きベクトルを検出し、  In the detection step, the motion vector is detected by searching a region corresponding to a reference region set in the second image of the plurality of images from the first image of the plurality of images.
前記設定ステップでは、前記検出ステップで検出される前記動きベクトルの用途に応じて、前記第2の画像に設定される参照領域の配置を変更することを特徴とする撮像装置の制御方法。  In the setting step, the arrangement of the reference region set in the second image is changed according to the use of the motion vector detected in the detection step.
コンピュータを、請求項1ないし11のいずれか1項に記載された撮像装置の各手段として機能させるためのプログラム。 The program for functioning a computer as each means of the imaging device described in any one of Claims 1 thru | or 11 . コンピュータを、請求項1ないし11のいずれか1項に記載された撮像装置の各手段として機能させるためのプログラムを記憶した記憶媒体。 A storage medium storing a program for causing a computer to function as each unit of the imaging apparatus according to any one of claims 1 to 11 .
JP2013170818A 2013-08-20 2013-08-20 IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM Expired - Fee Related JP6231816B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013170818A JP6231816B2 (en) 2013-08-20 2013-08-20 IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013170818A JP6231816B2 (en) 2013-08-20 2013-08-20 IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM

Publications (3)

Publication Number Publication Date
JP2015041819A JP2015041819A (en) 2015-03-02
JP2015041819A5 true JP2015041819A5 (en) 2016-09-15
JP6231816B2 JP6231816B2 (en) 2017-11-15

Family

ID=52695763

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013170818A Expired - Fee Related JP6231816B2 (en) 2013-08-20 2013-08-20 IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM

Country Status (1)

Country Link
JP (1) JP6231816B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6667268B2 (en) 2015-11-26 2020-03-18 キヤノン株式会社 Motion vector detection device, control method therefor, and imaging device
JP6702729B2 (en) * 2016-01-18 2020-06-03 キヤノン株式会社 Light emission control device, control method thereof, control program, and imaging device
CN115022548A (en) * 2022-06-23 2022-09-06 Oppo广东移动通信有限公司 Control method, control device, electronic apparatus, and medium

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1332556C (en) * 2002-12-26 2007-08-15 三菱电机株式会社 Image processor
JP4958610B2 (en) * 2007-04-06 2012-06-20 キヤノン株式会社 Image stabilization apparatus, imaging apparatus, and image stabilization method
JP5074322B2 (en) * 2008-08-05 2012-11-14 オリンパス株式会社 Image processing apparatus, image processing method, image processing program, and imaging apparatus
JP2012085205A (en) * 2010-10-14 2012-04-26 Canon Inc Image processing apparatus, imaging device, image processing method, and image processing program
JP6046931B2 (en) * 2011-08-18 2016-12-21 キヤノン株式会社 Imaging apparatus and control method thereof

Similar Documents

Publication Publication Date Title
JP2015070328A5 (en)
JP2014150443A5 (en)
JP2017161586A5 (en)
JP2015034879A5 (en)
JP2014128015A5 (en) Imaging apparatus, image blur correction apparatus, control method thereof, program, and storage medium
JP2017097297A5 (en) Image blur correction apparatus, control method therefor, and storage medium
JP2010020758A5 (en)
JP2014126860A5 (en) Optical apparatus, image blur correction apparatus, imaging apparatus, control method therefor, program, and storage medium
JP2014126861A5 (en) Imaging apparatus, image blur correction apparatus, control method thereof, program, and storage medium
JP2014085450A5 (en) Imaging apparatus, image processing apparatus, and control method thereof
US9900512B2 (en) Apparatus, method and computer program for image stabilization
JP2015022027A5 (en)
JP2018116239A5 (en)
JP2014128014A5 (en) IMAGING DEVICE, IMAGE PROCESSING DEVICE AND ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
JP2017118296A5 (en)
JP2015005799A5 (en)
JP2016129289A5 (en)
JP2017142333A5 (en) Imaging apparatus, control method, program, storage medium
JP2018101942A5 (en)
JP2016038415A5 (en) Image processing apparatus, image processing method, program, and storage medium
JP2017102245A5 (en)
JP2015122553A5 (en) Image processing apparatus and image processing method
JP2010193058A5 (en)
JP2017010095A5 (en)
JP2016133674A5 (en)