JP2011188332A - 画像揺れ補正装置 - Google Patents
画像揺れ補正装置 Download PDFInfo
- Publication number
- JP2011188332A JP2011188332A JP2010052647A JP2010052647A JP2011188332A JP 2011188332 A JP2011188332 A JP 2011188332A JP 2010052647 A JP2010052647 A JP 2010052647A JP 2010052647 A JP2010052647 A JP 2010052647A JP 2011188332 A JP2011188332 A JP 2011188332A
- Authority
- JP
- Japan
- Prior art keywords
- image
- shake correction
- correction apparatus
- unit
- image shake
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
- H04N5/145—Movement estimation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】画像揺れ補正装置は、画像内の複数の領域の動きベクトルをそれぞれ検出する領域ベクトル検出部(102)と、複数の領域の動きベクトルのそれぞれの信頼度を判定する信頼度判定部(103)と、信頼度が低いと判定された動きベクトルが検出された領域に代えて新たな検出対象領域を領域ベクトル検出部に指示する領域指示部(105)と、信頼度が高いと判定された動きベクトルから画像全体の動きベクトルを算出する画像ベクトル算出部(106)と、画像全体の動きベクトルに応じて出力すべき画像全体を移動させて画像の揺れを補正する揺れ補正部(107)とを備えている。
【選択図】図1
Description
以上のように構成された画像揺れ補正装置においては、まず入力端子1001に少なくとも2フレーム以上の時間的に連続する画像信号が入力される。各検出領域の領域ベクトル検出部1002では、図11の1101,1102,1103,1104に示すように画像内に4つのベクトル検出領域が予め定められており、2フレーム間の各検出領域について、所定の範囲の量(i,j):imin<i<imax,jmin<j<jmax偏移した位置の信号の差Σ|ΔL|(i,j)が相関値としてそれぞれ求められ、その値の最小値を与える偏移(i′,j′)が検出され、これが各検出領域のベクトルとなる。またその相関値の最小値、平均値、最大値が求められ、ベクトルの値とともに、信頼度判定部1003および画像ベクトル決定部1006に出力される。信頼度判定部1003および画像ベクトル決定部1006では、図12のフローチャートに示すように各領域の相関値の最小値、平均値、最大値よりベクトルの信頼性が判定され、信頼性ありと判定された領域のベクトルの大きさと方向性が一致すれば、それらの平均の値が画面全体の動きベクトルと決定されて出力される。また一致しない場合は0ベクトルが出力される。揺れ補正部1007は1フィールド以上の画像信号記憶手段を持ち、ここからの信号の読みだし位置を制御することによって揺れを補正する。具体的に、図13に示すように揺れの大きい画像が入力されるとき、第n−1フレーム1301および第nフレーム1302の入力画像信号について、画像ベクトル決定部1006より入力された動きベクトル1303をもとに、その動きを補正する方向1304に読み出す画像信号の画面を1305から1306に並行移動する。また、補間等によって画面の拡大等の操作をし、揺れの少ない1画面の大きさの画像信号1307,1308を出力する(例えば、特許文献1参照)。
図9は図1の画像揺れ補正装置を搭載したネットワーク監視カメラの構成図である。このネットワーク監視カメラは撮像素子901、撮像素子駆動部902、LSI部903、外部メモリ910、監視管理部911で構成される。
103 信頼度判定部
104 カメラ制御部(輝度取得部、周波数成分取得部、旋回判定部)
105 領域指示部
106 画像ベクトル算出部
107 揺れ補正部
108 外部情報取得部
109 旋回ベクトル算出部
Claims (12)
- 画像内の複数の領域の動きベクトルをそれぞれ検出する領域ベクトル検出部と、
前記複数の領域の動きベクトルのそれぞれの信頼度を判定する信頼度判定部と、
前記信頼度が低いと判定された動きベクトルが検出された領域に代えて新たな検出対象領域を前記領域ベクトル検出部に指示する領域指示部と、
前記信頼度が高いと判定された動きベクトルから画像全体の動きベクトルを算出する画像ベクトル算出部と、
前記画像全体の動きベクトルに応じて出力すべき画像全体を移動させて画像の揺れを補正する揺れ補正部とを備えている
ことを特徴とする画像揺れ補正装置。 - 請求項1の画像揺れ補正装置において、
画像内の複数の領域の輝度を取得する輝度取得部を備え、
前記領域指示部は、輝度が比較的高い領域を前記新たな検出対象領域に決定する
ことを特徴とする画像揺れ補正装置。 - 請求項1の画像揺れ補正装置において、
画像内の複数の領域の周波数成分を取得する周波数成分取得部を備え、
前記領域指示部は、周波数成分が比較的高い領域を前記新たな検出対象領域に決定する
ことを特徴とする画像揺れ補正装置。 - 請求項3の画像揺れ補正装置において、
前記周波数成分取得部は、当該画像揺れ補正装置に入力される画像を生成する撮影手段のオートフォーカス情報から前記周波数成分を取得する
ことを特徴とする画像揺れ補正装置。 - 請求項1の画像揺れ補正装置において、
当該画像揺れ補正装置に入力される画像を生成する撮影手段が旋回動作中であるか否かを判定する旋回判定部と、
前記撮影手段の旋回動作に起因する画像の動きベクトルを算出する旋回ベクトル算出部であって、前記画像ベクトル算出部によって算出された動きベクトルと直近に自身が算出した動きベクトルとに基づいて、新たに動きベクトルを算出する旋回ベクトル算出部とを備え、
前記揺れ補正部は、前記旋回ベクトル算出部で算出された動きベクトルを加味して画像の揺れを補正する
ことを特徴とする画像揺れ補正装置。 - 請求項5の画像揺れ補正装置において、
前記旋回ベクトル算出部は、前記撮影手段に対して旋回動作の停止が指示されてから実際に旋回動作が停止するまでの前記撮影手段の旋回動作に起因する画像の動きベクトルを算出する
ことを特徴とする画像揺れ補正装置。 - 請求項1の画像揺れ補正装置において、
当該画像揺れ補正装置に入力される画像を生成する撮影手段に入力される外部情報を取得する外部情報取得部を備え、
前記領域指示部は、前記外部情報に基づいて、前記新たな検出対象領域を決定する
ことを特徴とする画像揺れ補正装置。 - 請求項7の画像揺れ補正装置において、
前記外部情報は、時刻情報である
ことを特徴とする画像揺れ補正装置。 - 請求項7の画像揺れ補正装置において、
前記外部情報は、天候情報である
ことを特徴とする画像揺れ補正装置。 - 請求項7の画像揺れ補正装置において、
前記外部情報は、風量および風向である
ことを特徴とする画像揺れ補正装置。 - 請求項7の画像揺れ補正装置において、
前記領域指示部は、前記外部情報と前記新たな検出対象領域とを対応づけて記録し、前記外部情報取得部によって直近に取得された外部情報が当該記録した外部情報と一致する場合に、当該記録した外部情報に対応づけられた領域を前記新たな検出対象領域に決定する
ことを特徴とする画像揺れ補正装置。 - 請求項1の画像揺れ補正装置を備えている
ことを特徴とする監視カメラシステム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010052647A JP5388910B2 (ja) | 2010-03-10 | 2010-03-10 | 画像揺れ補正装置および画像揺れ補正方法 |
CN201180012884.7A CN102792673B (zh) | 2010-03-10 | 2011-01-21 | 图像模糊补偿装置 |
PCT/JP2011/000338 WO2011111289A1 (ja) | 2010-03-10 | 2011-01-21 | 画像揺れ補正装置 |
US13/604,518 US8730333B2 (en) | 2010-01-21 | 2012-09-05 | Image stabilization system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010052647A JP5388910B2 (ja) | 2010-03-10 | 2010-03-10 | 画像揺れ補正装置および画像揺れ補正方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011188332A true JP2011188332A (ja) | 2011-09-22 |
JP2011188332A5 JP2011188332A5 (ja) | 2013-03-28 |
JP5388910B2 JP5388910B2 (ja) | 2014-01-15 |
Family
ID=44563127
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010052647A Active JP5388910B2 (ja) | 2010-01-21 | 2010-03-10 | 画像揺れ補正装置および画像揺れ補正方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8730333B2 (ja) |
JP (1) | JP5388910B2 (ja) |
CN (1) | CN102792673B (ja) |
WO (1) | WO2011111289A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016152007A1 (ja) * | 2015-03-25 | 2016-09-29 | パナソニックIpマネジメント株式会社 | 画像処理装置およびこれを備えた監視システムならびに画像処理方法 |
JP2021185658A (ja) * | 2020-04-28 | 2021-12-09 | アクシス アーベー | 統計ベースの電子画像安定化 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10051274B2 (en) * | 2013-10-25 | 2018-08-14 | Canon Kabushiki Kaisha | Image processing apparatus, method of calculating information according to motion of frame, and storage medium |
US9621819B2 (en) * | 2015-07-09 | 2017-04-11 | Chunghwa Picture Tubes, Ltd. | Electronic device and multimedia control method thereof |
CN106875422B (zh) * | 2017-02-06 | 2022-02-25 | 腾讯科技(上海)有限公司 | 人脸跟踪方法和装置 |
JP7325020B2 (ja) * | 2018-02-22 | 2023-08-14 | パナソニックIpマネジメント株式会社 | 検査装置及び検査方法 |
JP7071204B2 (ja) * | 2018-04-27 | 2022-05-18 | キヤノン株式会社 | 撮像システム、レンズ装置、撮像装置、及びその制御方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0429477A (ja) * | 1990-05-23 | 1992-01-31 | Matsushita Electric Ind Co Ltd | 動きベクトル検出装置及び画像ゆれ補正装置 |
JPH07135598A (ja) * | 1993-11-09 | 1995-05-23 | Fuji Photo Film Co Ltd | ビデオカメラの手振れ補正方法 |
JP2003078807A (ja) * | 2001-08-31 | 2003-03-14 | Sony Corp | 動きベクトル検出装置および方法、手振れ補正装置および方法、並びに撮像装置 |
JP2008048152A (ja) * | 2006-08-16 | 2008-02-28 | Casio Comput Co Ltd | 動画処理装置、動画撮影装置および動画撮影プログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS61269475A (ja) * | 1985-05-23 | 1986-11-28 | Toshiba Corp | 動きベクトル検出装置 |
JP2809656B2 (ja) * | 1988-12-09 | 1998-10-15 | 松下電器産業株式会社 | 画像の動きベクトル検出装置及び揺れ補正装置 |
KR950006045B1 (ko) * | 1990-05-21 | 1995-06-07 | 마쯔시다덴기산교 가부시기가이샤 | 움직임벡터검출장치 및 화상흔들림보정장치 |
EP1377040A1 (en) * | 2002-06-19 | 2004-01-02 | STMicroelectronics S.r.l. | Method of stabilizing an image sequence |
JP2005003719A (ja) * | 2003-06-09 | 2005-01-06 | Olympus Corp | 撮影装置 |
EP2052553A4 (en) * | 2006-07-26 | 2010-08-25 | Human Monitoring Ltd | IMAGE STABILIZER |
JP4886850B2 (ja) * | 2007-06-28 | 2012-02-29 | パナソニック株式会社 | 画像処理装置、画像処理方法、プログラム |
US8094714B2 (en) * | 2008-07-16 | 2012-01-10 | Sony Corporation | Speculative start point selection for motion estimation iterative search |
-
2010
- 2010-03-10 JP JP2010052647A patent/JP5388910B2/ja active Active
-
2011
- 2011-01-21 WO PCT/JP2011/000338 patent/WO2011111289A1/ja active Application Filing
- 2011-01-21 CN CN201180012884.7A patent/CN102792673B/zh active Active
-
2012
- 2012-09-05 US US13/604,518 patent/US8730333B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0429477A (ja) * | 1990-05-23 | 1992-01-31 | Matsushita Electric Ind Co Ltd | 動きベクトル検出装置及び画像ゆれ補正装置 |
JPH07135598A (ja) * | 1993-11-09 | 1995-05-23 | Fuji Photo Film Co Ltd | ビデオカメラの手振れ補正方法 |
JP2003078807A (ja) * | 2001-08-31 | 2003-03-14 | Sony Corp | 動きベクトル検出装置および方法、手振れ補正装置および方法、並びに撮像装置 |
JP2008048152A (ja) * | 2006-08-16 | 2008-02-28 | Casio Comput Co Ltd | 動画処理装置、動画撮影装置および動画撮影プログラム |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016152007A1 (ja) * | 2015-03-25 | 2016-09-29 | パナソニックIpマネジメント株式会社 | 画像処理装置およびこれを備えた監視システムならびに画像処理方法 |
JPWO2016152007A1 (ja) * | 2015-03-25 | 2018-01-11 | パナソニックIpマネジメント株式会社 | 画像処理装置およびこれを備えた監視システムならびに画像処理方法 |
US10297014B2 (en) | 2015-03-25 | 2019-05-21 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device, monitoring system provided with same, and image processing method |
JP2021185658A (ja) * | 2020-04-28 | 2021-12-09 | アクシス アーベー | 統計ベースの電子画像安定化 |
JP7123215B2 (ja) | 2020-04-28 | 2022-08-22 | アクシス アーベー | 統計ベースの電子画像安定化 |
Also Published As
Publication number | Publication date |
---|---|
US20120327254A1 (en) | 2012-12-27 |
US8730333B2 (en) | 2014-05-20 |
CN102792673A (zh) | 2012-11-21 |
CN102792673B (zh) | 2015-07-08 |
WO2011111289A1 (ja) | 2011-09-15 |
JP5388910B2 (ja) | 2014-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5388910B2 (ja) | 画像揺れ補正装置および画像揺れ補正方法 | |
US7983550B2 (en) | Focus adjusting apparatus, camera including the same, and method for adjusting focus of optical system | |
EP2211306B1 (en) | Imaging apparatus, subject tracking method and storage medium | |
US8355048B2 (en) | Subject tracking computer program product, subject tracking device and camera | |
EP2081374B1 (en) | Imaging apparatus and its control method | |
US8345109B2 (en) | Imaging device and its shutter drive mode selection method | |
US9924097B2 (en) | Apparatus, method and recording medium for image stabilization | |
JP4420906B2 (ja) | 撮像装置 | |
JP2017219635A5 (ja) | ||
JP6824710B2 (ja) | ズーム制御装置およびズーム制御方法、撮像装置 | |
JP2006311058A (ja) | 動きベクトル検出回路及びその検出方法並びに手ブレ補正装置 | |
JP4807582B2 (ja) | 画像処理装置、撮像装置及びそのプログラム | |
JP2010074315A (ja) | 被写体追尾方法及び撮像装置 | |
JP4985569B2 (ja) | 撮像装置および撮像方法 | |
JP2019092036A (ja) | 撮像装置及び制御方法 | |
JP5179859B2 (ja) | 撮像装置及び撮像方法 | |
JP2017134185A (ja) | 像ブレ補正装置、撮像装置、レンズ装置、像ブレ補正装置の制御方法、プログラム、および、記憶媒体 | |
JP2007096828A (ja) | 撮像装置 | |
JP2010104005A (ja) | 撮像装置及びそのプログラム | |
JP2010166257A (ja) | 手振れ補正装置、撮像装置、手振れ補正方法、およびプログラム | |
US20230046830A1 (en) | Image capturing apparatus that performs blur correction and method of controlling same | |
JP2006067391A (ja) | ブレ補正装置 | |
JP2011234173A (ja) | 撮像装置 | |
JP2024037524A (ja) | 撮像装置およびその制御方法 | |
JP5177513B2 (ja) | 動きベクトル検出装置およびその方法、並びに撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130213 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130213 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20130213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130507 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130702 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130910 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131008 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5388910 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |