JP6220992B2 - 撮像装置及び像振れ補正方法 - Google Patents
撮像装置及び像振れ補正方法 Download PDFInfo
- Publication number
- JP6220992B2 JP6220992B2 JP2016566032A JP2016566032A JP6220992B2 JP 6220992 B2 JP6220992 B2 JP 6220992B2 JP 2016566032 A JP2016566032 A JP 2016566032A JP 2016566032 A JP2016566032 A JP 2016566032A JP 6220992 B2 JP6220992 B2 JP 6220992B2
- Authority
- JP
- Japan
- Prior art keywords
- acceleration
- vector
- reference vector
- unit
- image blur
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 73
- 238000000034 method Methods 0.000 title claims description 24
- 230000001133 acceleration Effects 0.000 claims description 210
- 230000003287 optical effect Effects 0.000 claims description 45
- 238000001514 detection method Methods 0.000 claims description 39
- 230000008859 change Effects 0.000 claims description 31
- 230000005484 gravity Effects 0.000 description 40
- 238000004891 communication Methods 0.000 description 16
- 230000006870 function Effects 0.000 description 16
- 230000033001 locomotion Effects 0.000 description 11
- 239000002131 composite material Substances 0.000 description 8
- 230000000875 corresponding effect Effects 0.000 description 8
- 239000011159 matrix material Substances 0.000 description 6
- 238000010295 mobile communication Methods 0.000 description 3
- 230000001276 controlling effect Effects 0.000 description 2
- 125000004122 cyclic group Chemical group 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000036962 time dependent Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/64—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
- G02B27/646—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B5/00—Adjustment of optical system relative to image or object surface other than for focusing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
- G03B2205/0007—Movement of one or more optical elements for control of motion blur
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
- G03B2205/0007—Movement of one or more optical elements for control of motion blur
- G03B2205/0015—Movement of one or more optical elements for control of motion blur by displacing one or more optical elements normal to the optical axis
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B2217/00—Details of cameras or camera bodies; Accessories therefor
- G03B2217/005—Blur detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Adjustment Of Camera Lenses (AREA)
Description
巡回型フィルタの一例:αM0+βR1
巡回型フィルタの他の例:αM0+βM1
巡回型フィルタの他の例:αM0+βR1+…+γRn(Rnは、n回前に算出された基準ベクトル)
巡回型フィルタの他の例:αM0+βM1+…+γMn(Mnは、n回前に得られた合成ベクトル)
なお、この場合も、各合成ベクトル又は各基準ベクトルに乗算される重み係数の総和は1である。
G0a(x)=G0(x)+α{G0(x)−R(x)}
G0a(y)=G0(y)+α{G0(y)−R(y)}
G0a(z)=G0(z)+α{G0(z)−R(z)}
2 撮像光学系
2a 可動レンズ(フォーカスレンズ)
3 撮像素子
4 焦点調節部
5 フォーカス駆動部
6 制御部
20 加速度検出部
21 補正駆動部
22x,22y,22z 加速度センサ
23 基準ベクトル生成部
24,34 振れ補正制御部
31 角速度検出部
32 重力加速度推定部
33 重力加速度補正部
Claims (10)
- 直交3軸の各軸方向の加速度を検出する加速度検出部と、
前記加速度検出部によって検出された前記直交3軸の各軸方向の加速度の合成ベクトルの大きさと重力加速度の大きさとの差分が所定の閾値以下である場合の前記合成ベクトルを用いて基準ベクトルを生成する基準ベクトル生成部と、
前記加速度検出部によって検出された前記直交3軸の各軸方向の加速度に基づき、前記基準ベクトルを用いて、少なくとも撮像光学系の光軸に垂直な直交2軸の各軸方向の並進振れによる像振れを補正する振れ補正部と、
撮像装置の姿勢変化に連動して回転する前記直交3軸の座標系での重力加速度を推定する重力加速度推定部と、
前記重力加速度推定部によって推定された前記重力加速度を前記基準ベクトルに基づいて補正する重力加速度補正部と、
を備え、
前記振れ補正部は、前記加速度検出部によって検出された前記直交3軸の各軸方向の加速度から前記重力加速度補正部によって補正された前記重力加速度の対応する軸方向成分を減じた加速度に基づいて、少なくとも撮像光学系の光軸に垂直な直交2軸の各軸方向の並進振れによる像振れを補正する撮像装置。 - 請求項1に記載の撮像装置であって、
前記振れ補正部は、前記加速度検出部によって検出された前記直交3軸の各軸方向の加速度から前記基準ベクトルの対応する軸方向成分を減じた加速度に基づいて、少なくとも撮像光学系の光軸に垂直な直交2軸の各軸方向の並進振れによる像振れを補正する撮像装置。 - 請求項1又は2に記載の撮像装置であって、
前記基準ベクトル生成部は、最新の前記合成ベクトルと、過去の前記合成ベクトル又は過去の前記基準ベクトルとに基づいて前記基準ベクトルを生成する撮像装置。 - 請求項3に記載の撮像装置であって、
前記基準ベクトル生成部は、最新の前記合成ベクトルと、過去の前記合成ベクトル又は過去の前記基準ベクトルとの加重平均によって前記基準ベクトルを生成する撮像装置。 - 請求項4に記載の撮像装置であって、
前記基準ベクトル生成部は、過去の前記合成ベクトル又は過去の前記基準ベクトルからの最新の前記合成ベクトルの変化量に応じて、加重平均における重み係数を変化させる撮像装置。 - 撮像装置に作用する直交3軸の各軸方向の加速度の合成ベクトルの大きさと重力加速度の大きさとの差分が所定の閾値以下である場合の前記合成ベクトルを用いて基準ベクトルを生成する生成ステップと、
撮像装置に作用する前記直交3軸の各軸方向の加速度に基づき、前記基準ベクトルを用いて、少なくとも撮像光学系の光軸に垂直な直交2軸の各軸方向の並進振れによる像振れを補正する補正ステップと、
撮像装置の姿勢変化を検出し、姿勢変化に連動して回転する前記直交3軸の座標系での重力加速度を推定する推定ステップと、
推定された前記重力加速度を前記基準ベクトルに基づいて補正する補正ステップと、
を備え、
前記補正ステップは、撮像装置に作用する前記直交3軸の各軸方向の加速度から補正された前記重力加速度の対応する軸方向成分を減じた加速度に基づいて、少なくとも撮像光学系の光軸に垂直な直交2軸の各軸方向の並進振れによる像振れを補正する像振れ補正方法。 - 請求項6に記載の像振れ補正方法であって、
前記補正ステップは、撮像装置に作用する前記直交3軸の各軸方向の加速度から前記基準ベクトルの対応する軸方向成分を減じた加速度に基づいて、少なくとも撮像光学系の光軸に垂直な直交2軸の各軸方向の並進振れによる像振れを補正する像振れ補正方法。 - 請求項6又は7に記載の像振れ補正方法であって、
前記生成ステップは、最新の前記合成ベクトルと、過去の前記合成ベクトル又は過去の前記基準ベクトルとに基づいて前記基準ベクトルを生成する像振れ補正方法。 - 請求項8に記載の像振れ補正方法であって、
前記生成ステップは、最新の前記合成ベクトルと、過去の前記合成ベクトル又は過去の前記基準ベクトルとの加重平均によって前記基準ベクトルを生成する像振れ補正方法。 - 請求項9に記載の像振れ補正方法であって、
前記生成ステップは、過去の前記合成ベクトル又は過去の前記基準ベクトルからの最新の前記合成ベクトルの変化量に応じて、加重平均における重み係数を変化させる像振れ補正方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014258976 | 2014-12-22 | ||
JP2014258976 | 2014-12-22 | ||
PCT/JP2015/082155 WO2016103976A1 (ja) | 2014-12-22 | 2015-11-16 | 撮像装置及び像振れ補正方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016103976A1 JPWO2016103976A1 (ja) | 2017-08-03 |
JP6220992B2 true JP6220992B2 (ja) | 2017-10-25 |
Family
ID=56150010
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016566032A Active JP6220992B2 (ja) | 2014-12-22 | 2015-11-16 | 撮像装置及び像振れ補正方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9891446B2 (ja) |
JP (1) | JP6220992B2 (ja) |
CN (1) | CN107111207B (ja) |
WO (1) | WO2016103976A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10564177B2 (en) * | 2016-08-01 | 2020-02-18 | Samsung Electronics Co., Ltd. | System and method for user activity recognition using accelerometer |
DE112018002967T5 (de) * | 2017-06-12 | 2020-02-20 | Fujifilm Corporation | Unschärfesdetektionsvorrichtung, abbildungsvorrichtung, objektiv-bzw. linsenvorrichtung, abbildungsvorrichtungshauptkörper,unschärfedetektionsverfahren und unschärfedetektionsprogramm |
CN109199321A (zh) * | 2018-07-01 | 2019-01-15 | 高波 | 一种医用眼动仪 |
US11852888B2 (en) * | 2019-07-26 | 2023-12-26 | Tdk Taiwan Corp. | Optical element driving mechanism |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4717382B2 (ja) * | 2004-06-15 | 2011-07-06 | キヤノン株式会社 | 光学機器 |
JP4789614B2 (ja) * | 2005-12-26 | 2011-10-12 | キヤノン株式会社 | 防振制御装置およびその制御方法 |
JP4717651B2 (ja) | 2006-02-07 | 2011-07-06 | キヤノン株式会社 | 像振れ補正装置および撮像装置 |
JP2011033881A (ja) * | 2009-08-03 | 2011-02-17 | Canon Inc | 撮影システムおよびレンズ装置 |
JP2012204862A (ja) * | 2011-03-23 | 2012-10-22 | Nikon Corp | 撮像システム、遠隔操作装置、遠隔操作方法、及び遠隔操作プログラム |
JP2013054193A (ja) * | 2011-09-02 | 2013-03-21 | Nikon Corp | ブレ補正装置及び光学機器 |
JP2013250414A (ja) * | 2012-05-31 | 2013-12-12 | Nikon Corp | ブレ補正装置および光学機器 |
JP6098874B2 (ja) * | 2012-09-04 | 2017-03-22 | パナソニックIpマネジメント株式会社 | 撮像装置および画像処理装置 |
JP2014215357A (ja) * | 2013-04-23 | 2014-11-17 | 株式会社ニコン | 像ブレ補正装置及び光学機器 |
-
2015
- 2015-11-16 JP JP2016566032A patent/JP6220992B2/ja active Active
- 2015-11-16 CN CN201580069816.2A patent/CN107111207B/zh active Active
- 2015-11-16 WO PCT/JP2015/082155 patent/WO2016103976A1/ja active Application Filing
-
2017
- 2017-06-21 US US15/629,158 patent/US9891446B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JPWO2016103976A1 (ja) | 2017-08-03 |
US20170285365A1 (en) | 2017-10-05 |
US9891446B2 (en) | 2018-02-13 |
WO2016103976A1 (ja) | 2016-06-30 |
CN107111207A (zh) | 2017-08-29 |
CN107111207B (zh) | 2018-07-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6155403B2 (ja) | 撮像装置及び像振れ補正方法 | |
JP6131393B2 (ja) | 撮像装置及び撮像方法 | |
JP6220992B2 (ja) | 撮像装置及び像振れ補正方法 | |
EP2933605A1 (en) | A device orientation correction method for panorama images | |
JP6215337B2 (ja) | 適応型スケールおよび/または重力推定 | |
US20200404178A1 (en) | Video image anti-shake method and terminal | |
CN112229424B (zh) | 视觉惯性系统的参数标定方法及装置、电子设备和介质 | |
CN112414400B (zh) | 一种信息处理方法、装置、电子设备和存储介质 | |
US11218636B2 (en) | Image stabilization for electronic devices such as cameras | |
WO2018143360A1 (ja) | 相対位置検出システム及び画像表示システム | |
KR101525224B1 (ko) | 자동촬영모드를 가지는 휴대용 단말기 | |
WO2016084775A1 (ja) | 撮像装置及び焦点調節方法 | |
JP6364559B2 (ja) | 像ぶれ補正装置、レンズ装置及び撮像装置 | |
CN112308878A (zh) | 一种信息处理方法、装置、电子设备和存储介质 | |
CN113574451B (zh) | 摄像装置的控制装置、摄像装置、摄像装置的控制方法及存储介质 | |
JP2023098136A (ja) | 制御装置、撮像装置、制御方法、制御プログラム | |
JP2024003460A (ja) | 姿勢算出装置、姿勢算出方法、姿勢算出装置を備える撮像装置とその制御方法 | |
CN118138881A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN112771445A (zh) | 摄像装置 | |
JP2014216744A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170419 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170419 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20170419 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20170724 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170818 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171002 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6220992 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |