JP7462240B2 - シャッタスピード決定装置及び撮像装置 - Google Patents
シャッタスピード決定装置及び撮像装置 Download PDFInfo
- Publication number
- JP7462240B2 JP7462240B2 JP2022503122A JP2022503122A JP7462240B2 JP 7462240 B2 JP7462240 B2 JP 7462240B2 JP 2022503122 A JP2022503122 A JP 2022503122A JP 2022503122 A JP2022503122 A JP 2022503122A JP 7462240 B2 JP7462240 B2 JP 7462240B2
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- motion
- image
- shutter speed
- detection process
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000013598 vector Substances 0.000 claims description 279
- 238000001514 detection method Methods 0.000 claims description 176
- 238000000034 method Methods 0.000 claims description 120
- 230000008569 process Effects 0.000 claims description 101
- 238000003384 imaging method Methods 0.000 claims description 19
- 230000008859 change Effects 0.000 claims description 7
- 238000012935 Averaging Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 description 35
- 238000010586 diagram Methods 0.000 description 17
- 230000003287 optical effect Effects 0.000 description 10
- 238000012937 correction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
- G03B7/08—Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
- G03B7/091—Digital circuits
- G03B7/093—Digital circuits for control of exposure time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/215—Motion-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
- G06T7/238—Analysis of motion using block-matching using non-full search, e.g. three-step search
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Description
被写体像を撮像して得られた画像データに対し、指定されたブロックサイズのブロック単位で動きベクトルの検出処理をする動き検出部と、
動き検出部に対してブロックサイズを小さくしながら検出処理を繰り返し実行させ、検出処理を実行する都度動きベクトルの大きさの変化方向と同じ方向に変化する動きベクトル関連値を求め、求めた動きベクトル関連値に基づいて、以後に被写体像を撮像する際のシャッタスピードを決定する制御部と、を備える。
本開示のシャッタスピード決定装置と、
被写体像を撮像して画像データを生成する撮像センサと、
シャッタスピード決定装置で設定されたシャッタスピードで、撮像センサに撮像を行わせる制御部と、を備える。
本実施の形態では、本開示に係るシャッタスピード決定装置及び撮像装置をデジタルカメラに適用した形態を説明する。
図1は、実施の形態1におけるデジタルカメラ100の構成を示すブロック図である。
本実施の形態のデジタルカメラ100の動作について説明する前にまず本開示の具体的な課題について説明する。
(1)各ブロックについて検出した動きベクトルの大きさのうちの最大値
(2)各ブロックについて検出した動きベクトルのうち、上位の大きさを有する動きベクトルの大きさの平均値
(3)各ブロックについて検出した動きベクトルのうち、上位の大きさを有する動きベクトルの大きさの中央値
ここで、(2)、(3)における「上位」とは、「上から所定個数」、「上から所定割合(%)」、「動きベクトルの大きさが所定値以上」などであり、いずれを用いてもよい。
以上説明したように、本実施の形態のデジタルカメラ100(シャッタスピード決定装置の一例)は、被写体像を撮像して得られた画像データに対し、指定されたブロックサイズのブロック単位で動きベクトルの検出処理をする動き検出部310と、動き検出部310に対してブロックサイズを小さくしながら検出処理を繰り返し実行させ、検出処理を実行する都度動きベクトルの大きさの変化方向と同じ方向に変化する動きベクトル関連値を求め、求めた動きベクトル関連値に基づいて、以後に被写体像を撮像する際のシャッタスピードを決定するコントローラ180(制御部の一例)と、を備える。
実施の形態1では撮像画像内の全ブロックについて動きベクトルを検出する構成を説明したが、実施の形態2では、全ブロックのうちの一部のブロックに絞り込んで動きベクトルを検出する構成を説明する。なお、実施の形態1との相違点を中心に説明する。
本実施の形態のデジタルカメラ100は、実施の形態1と同一のハードウェアを有する。そのため、ハードウェアの構成の説明については省略する。
図8は、シャッタスピード決定動作を説明したフローチャートである。図8では、実施の形態1と同じステップについては同じステップ符号を付している。
コントローラ180は、前回(前制御周期で)検出された動きベクトルのうち、上位の大きさを有する動きベクトルが検出されたブロックの存在エリアのみを、今回(今制御周期)の動きベクトル検出処理の対象エリアに設定する。「上位」とは、「上から所定個数」、「上から所定割合(%)」、「動きベクトルの大きさが所定値以上」などである。第2例、第3例における「上位」も同様である。なお、ここでの上位を規定する所定個数や所定割合(%)などの値は、動きベクトルの平均値や中央値を求める際の上位を規定する値とは異なってもよい。
コントローラ180は、前回(前制御周期で)検出された動きベクトルのうち上位の大きさを有する動きベクトルが検出されたブロックとその近傍のブロックとを含むエリアのみを、今回(今制御周期)の動きベクトル検出処理の対象エリアに設定する。近傍のブロックとは、例えば、上位の大きさを有する動きベクトルが検出されたブロックの周囲において当該ブロックに隣接して存在するブロックである。
コントローラ180は、前回(前制御周期)の検出処理で検出された動きベクトルの大きさを前々回のブロックサイズのブロックに対応するエリア単位で平均化して得られた各エリアの平均値と、前々回(前々制御周期)の検出処理で検出された各ブロックの動きベクトルの大きさとの差を各エリアについて求め、求めた差が上位の差を有するエリアのみを今回(今制御周期)の動きベクトル検出処理の対象エリアに設定する。
コントローラ180は、初回の動きベクトル検出処理において、図11(a)の4個のブロックの各々に対して動き検出部310に動きベクトル検出処理を行わせる。
本実施の形態において、コントローラ180(制御部の一例)は、前回の検出処理で検出された動きベクトルのうち上位の大きさを有する動きベクトルが検出されたブロックのエリアのみを、今回の検出処理の対象エリアに設定する。これにより、動き検出部310における動き検出処理の負荷を軽減することができる。
実施の形態3では、撮像画像内の所定物体像を検出し、所定物体像が含まれるブロックのみについて動きベクトルを検出する。所定物体とは、撮像画像において検出を希望する物体、例えば人、動物、自動車などの物体である。どのような物体を所定物体とするかは目的に応じて任意に設定すればよい。以下では、実施の形態1、2との相違点を中心に説明する。
図12は、実施の形態3のデジタルカメラ100Aの構成を示した図である。
コントローラ180は、実施の形態2で説明した図8のフローチャートにしたがって、シャッタスピード決定動作を行う。なお、ステップS21において、コントローラ180は、物体検出部320に、ADコンバータ140でデジタル化された画像データが示す撮像画像に含まれる所定物体像を検出させて、所定物体像が含まれるブロックを識別する信号を出力させる。そして、コントローラ180は、この信号に基づいて、所定物体像が含まれるブロックのエリアのみを動きベクトル検出処理の対象エリアに設定する。それ以外の処理は実施の形態2と同様に行われる。
本実施の形態では、画像データが示す撮像画像に含まれる所定物体像を検出する物体検出部320(所定物体検出部の一例)を備え、コントローラ180(制御部の一例)は、動き検出部310に対して、所定物体像が含まれるブロックのエリアのみについて検出処理を実行させる。これにより、動き検出部310における動き検出処理の負荷を軽減することができる。また、所定物体像の動きベクトルを適切に検出できる。そのため、撮像画像上における所定物体像のぶれやボケをより適切に抑制できる。
本実施の形態では、本開示に係るシャッタスピード決定装置を外部機器に適用した形態を説明する。
本実施の形態では、実施の形態4同様、本開示に係るシャッタスピード決定装置を外部機器に適用した形態を説明する。
以上のように、本出願において開示する技術の例示として、実施の形態1を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態1で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。そこで、以下、他の実施の形態を例示する。
110 光学系
111 ズームレンズ
112 フォーカスレンズ
113 絞り
121 ズームレンズ駆動部
122 フォーカスレンズ駆動部
123 絞り駆動部
130 撮像素子
140 ADC
150 TG
180 コントローラ
190 カードスロット
200 メモリカード
210 レリーズ釦
220 液晶モニタ
300,300A 外部機器
230 内蔵メモリ
310 動き検出部
320 物体検出部
330 演算部
Claims (9)
- 被写体像を撮像して得られた画像データに対し、指定されたブロックサイズのブロック単位で動きベクトルの検出処理をする動き検出部と、
前記動き検出部に対して前記ブロックサイズを小さくしながら前記検出処理を繰り返し実行させ、前記検出処理を実行する都度前記動きベクトルの大きさの変化方向と同じ方向に変化する動きベクトル関連値を求め、求めた動きベクトル関連値に基づいて、以後に被写体像を撮像する際のシャッタスピードを決定する制御部と、を備え、
前記制御部は、前回の検出処理で求められた動きベクトル関連値に対する今回の検出処理で求められた動きベクトル関連値の増加量が閾値以下になった場合、今回の検出処理で求められた動きベクトル関連値に基づいて前記シャッタスピードを決定する、
シャッタスピード決定装置。 - 被写体像を撮像して得られた画像データに対し、指定されたブロックサイズのブロック単位で動きベクトルの検出処理をする動き検出部と、
前記動き検出部に対して前記ブロックサイズを小さくしながら前記検出処理を繰り返し実行させ、前記検出処理を実行する都度前記動きベクトルの大きさの変化方向と同じ方向に変化する動きベクトル関連値を求め、求めた動きベクトル関連値に基づいて、以後に被写体像を撮像する際のシャッタスピードを決定する制御部と、を備え、
前記制御部は、前回の検出処理で検出された動きベクトルのうち上位の大きさを有する動きベクトルが検出されたブロックのエリアのみを、今回の検出処理の対象エリアに設定する、
シャッタスピード決定装置。 - 被写体像を撮像して得られた画像データに対し、指定されたブロックサイズのブロック単位で動きベクトルの検出処理をする動き検出部と、
前記動き検出部に対して前記ブロックサイズを小さくしながら前記検出処理を繰り返し実行させ、前記検出処理を実行する都度前記動きベクトルの大きさの変化方向と同じ方向に変化する動きベクトル関連値を求め、求めた動きベクトル関連値に基づいて、以後に被写体像を撮像する際のシャッタスピードを決定する制御部と、を備え、
前記制御部は、前回の検出処理で検出された動きベクトルのうち上位の大きさを有する動きベクトルが検出されたブロックとその近傍のブロックとを含むエリアのみを、今回の検出処理の対象エリアに設定する、
シャッタスピード決定装置。 - 被写体像を撮像して得られた画像データに対し、指定されたブロックサイズのブロック単位で動きベクトルの検出処理をする動き検出部と、
前記動き検出部に対して前記ブロックサイズを小さくしながら前記検出処理を繰り返し実行させ、前記検出処理を実行する都度前記動きベクトルの大きさの変化方向と同じ方向に変化する動きベクトル関連値を求め、求めた動きベクトル関連値に基づいて、以後に被写体像を撮像する際のシャッタスピードを決定する制御部と、を備え、
前記制御部は、前回の検出処理で検出された動きベクトルの大きさを前々回のブロックサイズのブロックに対応するエリア単位で平均化して得られた各エリアの平均値と、前々回の検出処理で検出された各ブロックの動きベクトルの大きさとの差を前記各エリアについて求め、求めた差が上位の差を有するエリアのみを今回の検出処理の対象エリアに設定する、
シャッタスピード決定装置。 - 前記動きベクトル関連値は、各ブロックについて検出した動きベクトルの大きさのうちの最大値である、
請求項1から4のいずれか1項に記載のシャッタスピード決定装置。 - 前記動きベクトル関連値は、各ブロックについて検出した動きベクトルのうち、上位の大きさを有する動きベクトルの大きさの平均値である、
請求項1から4のいずれか1項に記載のシャッタスピード決定装置。 - 前記動きベクトル関連値は、各ブロックについて検出した動きベクトルのうち、上位の大きさを有する動きベクトルの大きさの中央値である、
請求項1から4のいずれか1項に記載のシャッタスピード決定装置。 - 前記画像データが示す画像に含まれる所定物体像を検出する所定物体検出部を備え、
前記制御部は、前記動き検出部に対して、前記所定物体像が含まれるブロックのみについて前記検出処理を実行させる、
請求項1から4のいずれか1項に記載のシャッタスピード決定装置。 - 請求項1から8のいずれか1項に記載のシャッタスピード決定装置と、
被写体像を撮像して画像データを生成する撮像センサと、
前記シャッタスピード決定装置で決定されたシャッタスピードで、前記撮像センサに撮像を行わせる制御部と、を備える、
撮像装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020029556 | 2020-02-25 | ||
JP2020029556 | 2020-02-25 | ||
PCT/JP2020/048678 WO2021171774A1 (ja) | 2020-02-25 | 2020-12-25 | シャッタスピード決定装置及び撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021171774A1 JPWO2021171774A1 (ja) | 2021-09-02 |
JP7462240B2 true JP7462240B2 (ja) | 2024-04-05 |
Family
ID=77489923
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022503122A Active JP7462240B2 (ja) | 2020-02-25 | 2020-12-25 | シャッタスピード決定装置及び撮像装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230076396A1 (ja) |
JP (1) | JP7462240B2 (ja) |
WO (1) | WO2021171774A1 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008136174A (ja) | 2006-10-24 | 2008-06-12 | Sanyo Electric Co Ltd | 撮像装置及び撮影制御方法 |
JP2016201626A (ja) | 2015-04-08 | 2016-12-01 | キヤノン株式会社 | シフト素子制御装置、シフト素子制御プログラムおよび光学機器 |
JP2017005400A (ja) | 2015-06-08 | 2017-01-05 | キヤノン株式会社 | 撮像制御装置、撮像装置および撮像制御プログラム |
JP2018025611A (ja) | 2016-08-08 | 2018-02-15 | キヤノン株式会社 | 像ブレ補正装置及びその制御方法、プログラム、記憶媒体 |
JP2018037772A (ja) | 2016-08-30 | 2018-03-08 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP2017134185A5 (ja) | 2016-01-27 | 2019-02-28 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0746457A (ja) * | 1993-07-31 | 1995-02-14 | Sony Corp | 動き量検出装置及び動き量検出方法 |
WO2007042073A1 (en) * | 2005-10-12 | 2007-04-19 | Active Optics Pty Limited | Image processing method and system |
JP6702737B2 (ja) | 2016-01-27 | 2020-06-03 | キヤノン株式会社 | 像ブレ補正装置、および、像ブレ補正装置の制御方法 |
KR20180052002A (ko) * | 2016-11-09 | 2018-05-17 | 삼성전자주식회사 | 이미지 처리 방법 및 이를 지원하는 전자 장치 |
JP7032871B2 (ja) * | 2017-05-17 | 2022-03-09 | キヤノン株式会社 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
-
2020
- 2020-12-25 US US17/798,275 patent/US20230076396A1/en active Pending
- 2020-12-25 WO PCT/JP2020/048678 patent/WO2021171774A1/ja active Application Filing
- 2020-12-25 JP JP2022503122A patent/JP7462240B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008136174A (ja) | 2006-10-24 | 2008-06-12 | Sanyo Electric Co Ltd | 撮像装置及び撮影制御方法 |
JP2016201626A (ja) | 2015-04-08 | 2016-12-01 | キヤノン株式会社 | シフト素子制御装置、シフト素子制御プログラムおよび光学機器 |
JP2017005400A (ja) | 2015-06-08 | 2017-01-05 | キヤノン株式会社 | 撮像制御装置、撮像装置および撮像制御プログラム |
JP2017134185A5 (ja) | 2016-01-27 | 2019-02-28 | ||
JP2018025611A (ja) | 2016-08-08 | 2018-02-15 | キヤノン株式会社 | 像ブレ補正装置及びその制御方法、プログラム、記憶媒体 |
JP2018037772A (ja) | 2016-08-30 | 2018-03-08 | キヤノン株式会社 | 撮像装置およびその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2021171774A1 (ja) | 2021-09-02 |
WO2021171774A1 (ja) | 2021-09-02 |
US20230076396A1 (en) | 2023-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5736796B2 (ja) | 電子カメラ、プログラム及び記録媒体 | |
JP2008129554A (ja) | 撮像装置及びオートフォーカス制御方法 | |
JP5623256B2 (ja) | 撮像装置、その制御方法及びプログラム | |
US11729503B2 (en) | Image capturing apparatus and control method thereof | |
WO2015190156A1 (ja) | 画像処理装置、それを備えた撮像装置、画像処理方法、及び画像処理プログラム | |
US10334176B2 (en) | Imaging apparatus | |
JP5696026B2 (ja) | 撮像装置、撮像方法および監視システム | |
JP5868061B2 (ja) | 撮像装置 | |
US10594938B2 (en) | Image processing apparatus, imaging apparatus, and method for controlling image processing apparatus | |
JP5703788B2 (ja) | 撮像装置、画像処理装置、画像処理プログラム | |
US9883096B2 (en) | Focus detection apparatus and control method thereof | |
US11190704B2 (en) | Imaging apparatus and control method for performing live view display of a tracked object | |
US11196925B2 (en) | Image processing apparatus that detects motion vectors, method of controlling the same, and storage medium | |
JP7462240B2 (ja) | シャッタスピード決定装置及び撮像装置 | |
JP5832618B2 (ja) | 撮像装置、その制御方法及びプログラム | |
JP6294607B2 (ja) | 撮像装置およびその制御方法、プログラム並びに記憶媒体 | |
JP2012235255A (ja) | 画像処理装置及びプログラム | |
JP6016546B2 (ja) | 撮像装置、その制御方法、および制御プログラム | |
JP2009077321A (ja) | 画像記録装置及び画像記録処理方法 | |
JP2014153517A (ja) | 画像処理装置および画像処理方法、プログラム並びに記憶媒体 | |
WO2021200191A1 (ja) | 画像処理装置および方法、並びにプログラム | |
US20240171858A1 (en) | Focus control apparatus, image pickup apparatus, and focus control method | |
US20230247289A1 (en) | Focus detecting apparatus, image pickup apparatus, focus detecting method, and storage medium | |
US20230421901A1 (en) | Image processing apparatus and method, and image capturing apparatus | |
WO2015182021A1 (ja) | 撮像制御装置、撮像装置および撮像制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230524 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240305 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240314 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7462240 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |