JP2010166512A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2010166512A JP2010166512A JP2009009125A JP2009009125A JP2010166512A JP 2010166512 A JP2010166512 A JP 2010166512A JP 2009009125 A JP2009009125 A JP 2009009125A JP 2009009125 A JP2009009125 A JP 2009009125A JP 2010166512 A JP2010166512 A JP 2010166512A
- Authority
- JP
- Japan
- Prior art keywords
- distortion
- image
- unit
- input image
- motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 123
- 238000012937 correction Methods 0.000 claims abstract description 171
- 230000033001 locomotion Effects 0.000 claims abstract description 153
- 238000012545 processing Methods 0.000 claims abstract description 138
- 238000004364 calculation method Methods 0.000 claims abstract description 52
- 238000000034 method Methods 0.000 claims description 69
- 238000001514 detection method Methods 0.000 claims description 49
- 230000006866 deterioration Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 27
- 230000006835 compression Effects 0.000 description 16
- 238000007906 compression Methods 0.000 description 16
- 230000005236 sound signal Effects 0.000 description 11
- 239000013598 vector Substances 0.000 description 9
- 230000006837 decompression Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 230000007423 decrease Effects 0.000 description 5
- 239000006185 dispersion Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/689—Motion occurring during a rolling shutter mode
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
【解決手段】歪み補正部61は、撮像の際に撮像装置に生じた動きに基づいて歪みを算出する歪み算出部62と、入力画像の生成状況に基づいて歪み調整値を算出する歪み調整値算出部63と、歪みと歪み調整値とに基づいて入力画像の歪みを補正する歪み補正処理を行う歪み補正処理部64と、を備える。歪み調整値算出部63は、入力画像の生成状況に応じて歪み調整値を小さくすることで、歪み補正処理部64による歪み補正処理の補正の程度を小さくする。
【選択図】図3
Description
<基本構成>
まず、本発明の実施形態における撮像装置の基本構成について、図2に基づいて説明する。図2は、本発明の実施形態における撮像装置の基本構成について示すブロック図である。
次に、撮像装置1の基本動作について図1を用いて説明する。まず、撮像装置1は、レンズ部4より入射される光をイメージセンサ3において光電変換することによって、電気信号である画像信号を取得する。そして、イメージセンサ3は、TG部18から入力されるタイミング制御信号に同期して、所定のタイミングでAFE5に画像信号を出力する。
<基本構成>
次に、図1に示した画像処理部6に備えられる歪み補正部61について詳細に説明する。なお、以下においては説明の具体化のため、歪み補正部61によって処理される各画像の画像信号を、それぞれ画像として表現する。特に、歪み補正部61に入力される画像を「入力画像」、歪み補正部61から出力される画像を「出力画像」とする。
次に、歪み補正部61の基本動作について図4を用いて説明する。図4は、本発明の実施形態における撮像装置に備えられる歪み補正部の基本動作について示すフローチャートである。なお、図4は一つの入力画像に基づいて一つの出力画像が生成されるまでの処理を表したものである。そのため、例えば動画像の出力画像を生成する場合であれば、図4に示す動作が繰り返し行われることとなる。
図2のSTEP3における歪み調整値の算出方法や、この歪み調整値を用いた歪み補正処理の補正の程度の調整方法について説明する。最初に歪み調整値を用いた調整方法について説明し、後に歪み調整値の算出方法の各実施例について説明する。
上述の図6〜図10の説明では、STEP4の歪み補正処理において、水平方向の歪み値Dh(j)及び垂直方向の歪み値Dv(j)をそのまま用いて歪み出力画像領域41〜45を決定することとした。しかしながら、STEP3で算出される歪み調整値を用いて歪み補正処理の補正の程度を調整する場合、STEP4において下記式(1)のように算出される「調整後歪み値」を用いて歪み出力画像領域41〜45の位置を決定する。
以下、上述した歪み調整値の算出方法の各実施例について説明する。
歪み調整値の算出方法の第1実施例について説明する。本実施例では、手ぶれ補正処理の有無に基づいて歪み調整値Kh,Kvの設定を行う。
歪み調整値の算出方法の第2実施例について説明する。本実施例では、撮像装置1の固定の有無に基づいて歪み調整値Kh,Kvの設定を行う。
歪み調整値の算出方法の第3実施例について説明する。本実施例では、撮像装置1に同一方向の継続した動きが発生しているか否かに基づいて歪み調整値Kh,Kvの設定を行う。
歪み調整値の算出方法の第4実施例について説明する。本実施例では、移動物体を撮像して生成された入力画像であるか否か(即ち、入力画像内に移動物体が含まれるか否か)に基づいて、歪み調整値Kh,Kvの設定を行う。本実施例の算出方法は、動き検出部21が画像から動きを検出するものである場合に適用され得る。
歪み調整値の算出方法の第5実施例について説明する。本実施例では、動き検出部62によって検出された動きの検出結果の信頼度に基づいて歪み調整値Kh,Kvの設定を行う。なお、歪み算出部62は、検出された動きに基づいて歪みを算出するものである。そのため、動きの検出結果の信頼度とは、算出された歪みの信頼度と解釈することも可能である。
歪み調整値の算出方法の第6実施例について説明する。本実施例では、ズーム倍率に基づいて歪み調整値Kh,Kvの設定を行う。
上述した第1〜第6実施例は、組み合わせて実施することが可能である。例えば、歪み調整値算出部63が、複数の上記実施例を用いて算出したそれぞれの歪み調整値Kh,Kvを加重加算した値(総合歪み調整値)を歪み調整値情報に含ませて、歪み補正処理部64に出力することとしても構わない。そして、歪み補正処理部64が、総合歪み調整値に基づいて、入力画像に歪み補正処理を施すこととしても構わない。
また、本発明の実施形態における撮像装置1について、画像処理部6や歪み補正部61などのそれぞれの動作を、マイコンなどの制御装置が行うこととしても構わない。さらに、このような制御装置によって実現される機能の全部または一部をプログラムとして記述し、該プログラムをプログラム実行装置(例えばコンピュータ)上で実行することによって、その機能の全部または一部を実現するようにしても構わない。
2 撮像部
3 イメージセンサ
4 レンズ部
5 AFE
6 画像処理部
61 歪み補正部
62 歪み算出部
63 歪み調整値算出部
64 歪み補正処理部
7 集音部
8 音声処理部
9 圧縮処理部
10 外部メモリ
11 ドライバ部
12 伸長処理部
13 画像出力回路部
14 音声出力回路部
15 CPU
16 メモリ
17 操作部
18 TG部
19 バス
20 バス
21 動き検出部
22 入力画像生成状況通知部
Claims (6)
- 撮像を行い、露光タイミングが領域毎に異なる入力画像を生成する画像生成部と、
前記画像生成部による撮像の際に自機に生じた動きを検出する動き検出部と、
前記動き検出部によって検出された前記動きに基づいて、前記入力画像に生じた歪みを算出する歪み算出部と、
前記入力画像に対して、前記歪み算出部によって算出された前記歪みの補正を行い、出力画像を生成する歪み補正処理部と、を備え、
前記歪み補正処理部が、前記入力画像の生成状況に基づいて前記歪みを補正する程度を制御することを特徴とする撮像装置。 - 前記画像生成部が、順次撮像を行う際の位置ずれを補正する手ぶれ補正処理を行う手ぶれ補正部を備え、
前記歪み補正処理部が、前記手ぶれ補正処理が施されずに生成された前記入力画像に対する前記歪みの補正の程度を、前記手ぶれ補正処理が施されて生成された前記入力画像に対する前記歪みの補正の程度よりも小さくする、
または、前記手ぶれ補正処理が施されずに生成された前記入力画像に対して、前記歪みの補正を行わないことを特徴とする請求項1に記載の撮像装置。 - 前記歪み補正処理部が、前記動き検出部が同一方向の継続した前記動きを検出した前記入力画像に対する前記歪みの補正の程度を、同一方向の継続した前記動きが検出されなかった前記入力画像に対する前記歪みの補正の程度よりも小さくする、
または、同一方向の継続した前記動きが検出された前記入力画像に対して、前記歪みの補正を行わないことを特徴とする請求項1または請求項2に記載の撮像装置。 - 前記歪み補正処理部が、固定された前記撮像装置によって生成された前記入力画像に対して、前記歪みの補正を行わないことを特徴とする請求項1〜請求項3のいずれかに記載の撮像装置。
- 前記歪み補正処理部が、前記動き検出部が検出する前記動きの検出結果の信頼度が小さい前記入力画像ほど、前記歪みを補正する程度を小さくすることを特徴とする請求項1〜請求項4のいずれかに記載の撮像装置。
- 前記歪み補正処理部が、前記画像生成部による撮像の際のズーム倍率が小さい前記入力画像ほど、前記歪みを補正する程度を小さくすることを特徴とする請求項1〜請求項5のいずれかに記載の撮像装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009009125A JP2010166512A (ja) | 2009-01-19 | 2009-01-19 | 撮像装置 |
CN201010002526A CN101783885A (zh) | 2009-01-19 | 2010-01-08 | 摄像装置及摄像方法 |
US12/689,642 US8451336B2 (en) | 2009-01-19 | 2010-01-19 | Image sensing apparatus and image sensing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009009125A JP2010166512A (ja) | 2009-01-19 | 2009-01-19 | 撮像装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010166512A true JP2010166512A (ja) | 2010-07-29 |
Family
ID=42336654
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009009125A Pending JP2010166512A (ja) | 2009-01-19 | 2009-01-19 | 撮像装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8451336B2 (ja) |
JP (1) | JP2010166512A (ja) |
CN (1) | CN101783885A (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8643734B2 (en) | 2010-11-10 | 2014-02-04 | Apple Inc. | Automatic engagement of image stabilization |
US20120113515A1 (en) * | 2010-11-10 | 2012-05-10 | Karn Keith S | Imaging system with automatically engaging image stabilization |
JP2012222617A (ja) * | 2011-04-08 | 2012-11-12 | Sony Corp | 画像処理装置、画像処理方法、およびプログラム |
JP2015039085A (ja) * | 2011-12-14 | 2015-02-26 | パナソニック株式会社 | 画像処理装置及び画像処理方法 |
US20130314508A1 (en) * | 2012-05-25 | 2013-11-28 | Takayuki Arima | Management for super-reality entertainment |
JP2015033108A (ja) * | 2013-08-07 | 2015-02-16 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP6518115B2 (ja) * | 2015-04-13 | 2019-05-22 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理装置の制御方法、及びプログラム |
CN110213479B (zh) * | 2019-04-30 | 2021-05-04 | 北京迈格威科技有限公司 | 一种视频拍摄防抖方法和装置 |
CN110278372B (zh) * | 2019-06-26 | 2021-03-30 | Oppo广东移动通信有限公司 | 防抖方法和装置、电子设备、计算机可读存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008085552A (ja) * | 2006-09-27 | 2008-04-10 | Casio Comput Co Ltd | 撮像装置 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2863188B2 (ja) * | 1989-03-22 | 1999-03-03 | 松下電器産業株式会社 | 撮像装置 |
US5420635A (en) * | 1991-08-30 | 1995-05-30 | Fuji Photo Film Co., Ltd. | Video camera, imaging method using video camera, method of operating video camera, image processing apparatus and method, and solid-state electronic imaging device |
JP2001358999A (ja) | 2000-06-12 | 2001-12-26 | Sharp Corp | 画像入力装置 |
JP3925415B2 (ja) | 2003-01-22 | 2007-06-06 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
JP4315341B2 (ja) * | 2004-08-03 | 2009-08-19 | 富士フイルム株式会社 | 流し撮り方法および撮影装置 |
US7649549B2 (en) * | 2004-09-27 | 2010-01-19 | Texas Instruments Incorporated | Motion stabilization in video frames using motion vectors and reliability blocks |
JP4389779B2 (ja) | 2004-12-27 | 2009-12-24 | ソニー株式会社 | 撮像画像信号の歪み補正方法および撮像画像信号の歪み補正装置 |
JP2006203463A (ja) * | 2005-01-19 | 2006-08-03 | Matsushita Electric Ind Co Ltd | 画像表示方法、画像撮像方法、及び画像合成方法 |
JP4743007B2 (ja) | 2006-06-16 | 2011-08-10 | ソニー株式会社 | 画像処理装置および画像処理方法、記録媒体、並びに、プログラム |
JP4823179B2 (ja) * | 2006-10-24 | 2011-11-24 | 三洋電機株式会社 | 撮像装置及び撮影制御方法 |
JP4689687B2 (ja) | 2008-01-29 | 2011-05-25 | 株式会社モルフォ | 撮像方法および撮像装置 |
JP5197064B2 (ja) | 2008-02-23 | 2013-05-15 | 三洋電機株式会社 | ビデオカメラ |
US8253812B2 (en) | 2008-02-23 | 2012-08-28 | Sanyo Electric Co., Ltd. | Video camera which adopts a focal-plane electronic shutter system |
-
2009
- 2009-01-19 JP JP2009009125A patent/JP2010166512A/ja active Pending
-
2010
- 2010-01-08 CN CN201010002526A patent/CN101783885A/zh active Pending
- 2010-01-19 US US12/689,642 patent/US8451336B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008085552A (ja) * | 2006-09-27 | 2008-04-10 | Casio Comput Co Ltd | 撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
CN101783885A (zh) | 2010-07-21 |
US8451336B2 (en) | 2013-05-28 |
US20100182441A1 (en) | 2010-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6385212B2 (ja) | 画像処理装置及び方法、撮像装置、及び画像生成装置 | |
US7742690B2 (en) | Imaging apparatus and method for processing imaging results | |
JP5183297B2 (ja) | 画像処理装置、撮像装置及び画像処理方法 | |
JP2010166512A (ja) | 撮像装置 | |
US9723208B2 (en) | Image processing apparatus, method for controlling the same, and storage medium | |
JP6222514B2 (ja) | 画像処理装置、撮像装置、およびコンピュータブログラム | |
JP2010273245A (ja) | 撮像装置と振れ補正方法 | |
JP2010063088A (ja) | 撮像装置 | |
JP2009100373A (ja) | ノイズ低減処理装置、ノイズ低減処理方法、及び電子機器 | |
JP2012199752A (ja) | 画像処理装置と画像処理方法およびプログラム | |
JP2013165487A (ja) | 画像処理装置、撮像装置、およびプログラム | |
JP2011114823A (ja) | 画像処理装置及び撮像装置 | |
JP6037224B2 (ja) | 画像処理装置、撮像装置、およびプログラム | |
KR101721226B1 (ko) | 사용자가 원하는 시점의 정지 영상을 획득할 수 있는 디지털 영상 신호 처리 장치 및 이의 제어 방법 | |
JP4742813B2 (ja) | 画像処理装置および画像処理方法 | |
JP5261765B2 (ja) | 撮像装置及び撮像方法 | |
JP2013165488A (ja) | 画像処理装置、撮像装置、およびプログラム | |
US20120127330A1 (en) | Image pickup device | |
JP2013251862A (ja) | 撮像装置とその制御方法およびプログラム | |
JP2011155582A (ja) | 撮像装置 | |
JP5213604B2 (ja) | 撮像装置 | |
JP4969349B2 (ja) | 撮像装置及び撮像方法 | |
JP2011155420A (ja) | 手ぶれ補正装置、撮像処理方法及びプログラム | |
JP4985716B2 (ja) | 撮像装置、合焦評価領域の設定方法、及び、プログラム | |
JP2014064327A (ja) | 撮像装置と振れ補正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111222 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120926 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121002 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121203 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20130404 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20130521 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20130605 |