JP6874251B2 - 装置、撮像装置、移動体、方法、及びプログラム - Google Patents
装置、撮像装置、移動体、方法、及びプログラム Download PDFInfo
- Publication number
- JP6874251B2 JP6874251B2 JP2019135369A JP2019135369A JP6874251B2 JP 6874251 B2 JP6874251 B2 JP 6874251B2 JP 2019135369 A JP2019135369 A JP 2019135369A JP 2019135369 A JP2019135369 A JP 2019135369A JP 6874251 B2 JP6874251 B2 JP 6874251B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- positional relationship
- amount
- focus lens
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/02—Details
- G01C3/06—Use of electric means to obtain final indication
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/32—Means for focusing
- G03B13/34—Power focusing
- G03B13/36—Autofocus systems
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B15/00—Special procedures for taking photographs; Apparatus therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/571—Depth or shape recovery from multiple images from focus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/221—Image signal generators using stereoscopic image cameras using a single 2D image sensor using the relative movement between cameras and objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Electromagnetism (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Measurement Of Optical Distance (AREA)
- Focusing (AREA)
Description
[先行技術文献]
[特許文献]
[特許文献1] 特開2013−242617号公報
撮像制御部110は、第1基準位置と第2基準位置との差に対する第1目標位置と第2目標位置との差の比率を、変化情報として算出してよい。撮像制御部110は、第2目標位置を当該比率で除することによって第2目標位置の補正値を算出してよい。撮像制御部110は、第2基準位置に対する補正値が示す位置を、目標値として算出してよい。撮像制御部110は、目標値に基づいて、撮像装置100の合焦制御を実行してよい。
Peak2=DFDLensP2-DFD2
これにより、Peak2=1580−(−311)=1891が得られる。図7において、合焦状態となるレンズ位置は2000であるため、−109パルス分の誤差が発生することになる。したがって、レンズ210の位置をPeak2に移動させても、被写体に十分に合焦していない状態となり得る。
slope = (DFD2 - DFD1)/(DFDLensP2 - DFDLensP1) ・・・(5)
これにより、slope=0.725が得られる。
PeakCorrection = DFDLensP2 - DFD2/slope
これにより、PeakCorrection=1580−(−311)/0.725=2009となる。合焦状態となるレンズ位置は2000であるため、誤差は9パルス分となる。このように、第2のDFD演算のみに基づいて算出されるPeak2に比べて、誤差を1/10以下に抑制できることがわかる。
20 UAV本体
50 ジンバル
60 撮像装置
100 撮像装置
102 撮像部
110 撮像制御部
120 イメージセンサ
130 メモリ
152 レンズ駆動部
160 表示部
162 指示部
200 レンズ部
210 レンズ
212 レンズ駆動部
220 レンズ制御部
222 メモリ
300 遠隔操作装置
500 曲線
502 極小点
510 被写体
512 錯乱円
610、620、630、650、660、670 グラフ
710 グラフ
711 データ点
712 データ点
720 グラフ
722 直線
800 合焦制御処理
850 DFD処理
1200 コンピュータ
1210 ホストコントローラ
1212 CPU
1214 RAM
1220 入力/出力コントローラ
1222 通信インタフェース
1230 ROM
Claims (10)
- 撮像装置の撮像面とフォーカスレンズとが第1位置関係にある状態で撮像された第1撮像画像に含まれる第1画像のぼけ量と、前記撮像面と前記フォーカスレンズとが第2位置関係にある状態で撮像された第2撮像画像に含まれる第2画像のぼけ量とを取得し、
前記第1画像のぼけ量及び前記第2画像のぼけ量に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す第1予測値を取得し、
前記撮像面とフォーカスレンズとが第3位置関係にある状態で撮像された第3撮像画像に含まれる第3画像のぼけ量を取得し、
前記第2画像のぼけ量及び前記第3画像のぼけ量に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す第2予測値を取得し、
前記第1予測値と前記第2予測値との差に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す目標値を決定する
ように構成された回路を備え、
前記第1位置関係、前記第2位置関係、及び前記第3位置関係のそれぞれは、前記撮像面に対する前記フォーカスレンズの位置を示し、
前記第1予測値は、被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの第1目標位置を示し、
前記第2予測値は、被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの第2目標位置を示し、
前記第1位置関係及び前記第2位置関係の少なくとも一方に基づいて定められる前記フォーカスレンズの位置を第1基準位置とし、前記第2位置関係及び前記第3位置関係の少なくとも一方に基づいて定められる前記フォーカスレンズの位置を第2基準位置として、前記回路は、
前記第1基準位置と前記第2基準位置との差に対する前記第1目標位置と前記第2目標位置との差の比率を算出し、
前記第2目標位置を前記比率で除することによって前記第2目標位置の補正値を算出し、
前記第2基準位置に対する前記補正値が示す位置を、前記被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの目標位置を示す前記目標値として算出するよう構成される
装置。 - 前記回路は、前記目標値に基づいて、前記撮像装置の合焦制御を実行するように構成される
請求項1に記載の装置。 - 前記回路は、
前記第1画像のぼけ量と前記第2画像のぼけ量とを取得し、
前記第1画像のぼけ量及び前記第2画像のぼけ量に基づいて前記第1予測値を取得し、
前記第1予測値の信頼値が予め定められた第1の値以上の場合に、前記第1予測値に基づいて前記撮像装置の合焦制御を実行し、
前記第1予測値の信頼値が予め定められた前記第1の値より低い場合に、前記第3画像のぼけ量を取得し、前記第2画像のぼけ量及び前記第3画像のぼけ量に基づいて前記第2予測値を取得し、前記目標値に基づいて、前記撮像装置の合焦制御を実行するよう構成される
請求項2に記載の装置。 - 第2の値を前記第1の値より低い値として、前記回路は、
前記第1予測値の信頼値が前記第2の値より低い場合に、前記第3画像を取得せずに、前記第1予測値に基づく前記撮像装置の合焦制御を行わず、
前記第1予測値の信頼値が前記第1の値より低く、かつ、前記第2の値以上の場合に、前記第3画像のぼけ量を取得し、前記第2画像のぼけ量及び前記第3画像のぼけ量に基づいて前記第2予測値を取得し、前記目標値に基づいて、前記撮像装置の合焦制御を実行するよう構成される
請求項3に記載の装置。 - 撮像装置の撮像面とフォーカスレンズとが第1位置関係にある状態で撮像された第1撮像画像に含まれる第1画像のぼけ量と、前記撮像面と前記フォーカスレンズとが第2位置関係にある状態で撮像された第2撮像画像に含まれる第2画像のぼけ量とを取得し、
前記第1画像のぼけ量及び前記第2画像のぼけ量に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す第1予測値を取得し、
前記撮像面とフォーカスレンズとが第3位置関係にある状態で撮像された第3撮像画像に含まれる第3画像のぼけ量と、前記撮像面と前記フォーカスレンズとが第4位置関係にある状態で撮像された第4撮像画像に含まれる第4画像のぼけ量を取得し、
前記第3画像のぼけ量及び前記第4画像のぼけ量に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す第2予測値を取得し、
前記第1予測値と前記第2予測値との差に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す目標値を決定する
ように構成された回路を備え、
前記第1位置関係、前記第2位置関係、前記第3位置関係、及び前記第4位置関係のそれぞれは、前記撮像面に対する前記フォーカスレンズの位置を示し、
前記第1予測値は、被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの第1目標位置を示し、
前記第2予測値は、被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの第2目標位置を示し、
前記第1位置関係及び前記第2位置関係の少なくとも一方に基づいて定められる前記フォーカスレンズの位置を第1基準位置とし、前記第3位置関係及び前記第4位置関係の少なくとも一方に基づいて定められる前記フォーカスレンズの位置を第2基準位置として、前記回路は、
前記第1基準位置と前記第2基準位置との差に対する前記第1目標位置と前記第2目標位置との差の比率を算出し、
前記第2目標位置を前記比率で除することによって前記第2目標位置の補正値を算出し、
前記第2基準位置に対する前記補正値が示す位置を、前記被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの目標位置を示す前記目標値として算出するよう構成される
装置。 - 請求項1から5のいずれか一項に記載の装置と、
前記撮像面を備えるイメージセンサと
を備える撮像装置。 - 請求項6に記載の撮像装置と、
前記撮像装置の姿勢を制御可能に支持する支持機構と
を備える撮像システム。 - 請求項6に記載の撮像装置を搭載して移動する移動体。
- 撮像装置の撮像面とフォーカスレンズとが第1位置関係にある状態で撮像された第1撮像画像に含まれる第1画像のぼけ量と、前記撮像面と前記フォーカスレンズとが第2位置関係にある状態で撮像された第2撮像画像に含まれる第2画像のぼけ量とを取得する段階と、
前記第1画像のぼけ量及び前記第2画像のぼけ量に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す第1予測値を取得する段階と、
撮像装置の撮像面とフォーカスレンズとが第3位置関係にある状態で撮像された第3撮像画像に含まれる第3画像のぼけ量を取得する段階と、
前記第2画像のぼけ量及び前記第3画像のぼけ量に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す第2予測値を取得する段階と、
前記第1予測値と前記第2予測値との差に基づいて、被写体に合焦するときの前記撮像面と前記フォーカスレンズとの間の位置関係を示す目標値を決定する段階と
を備え、
前記第1位置関係、前記第2位置関係、及び前記第3位置関係のそれぞれは、前記撮像面に対する前記フォーカスレンズの位置を示し、
前記第1予測値は、被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの第1目標位置を示し、
前記第2予測値は、被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの第2目標位置を示し、
前記第1位置関係及び前記第2位置関係の少なくとも一方に基づいて定められる前記フォーカスレンズの位置を第1基準位置とし、前記第2位置関係及び前記第3位置関係の少なくとも一方に基づいて定められる前記フォーカスレンズの位置を第2基準位置として、前記目標値を決定する段階は、
前記第1基準位置と前記第2基準位置との差に対する前記第1目標位置と前記第2目標位置との差の比率を算出し、
前記第2目標位置を前記比率で除することによって前記第2目標位置の補正値を算出し、
前記第2基準位置に対する前記補正値が示す位置を、前記被写体に合焦するときの前記撮像面に対する前記フォーカスレンズの目標位置を示す前記目標値として算出する
方法。 - 請求項9に記載の方法をコンピュータに実行させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019135369A JP6874251B2 (ja) | 2019-07-23 | 2019-07-23 | 装置、撮像装置、移動体、方法、及びプログラム |
PCT/CN2020/103227 WO2021013143A1 (zh) | 2019-07-23 | 2020-07-21 | 装置、摄像装置、移动体、方法以及程序 |
CN202080003348.XA CN112292712A (zh) | 2019-07-23 | 2020-07-21 | 装置、摄像装置、移动体、方法以及程序 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019135369A JP6874251B2 (ja) | 2019-07-23 | 2019-07-23 | 装置、撮像装置、移動体、方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021018376A JP2021018376A (ja) | 2021-02-15 |
JP6874251B2 true JP6874251B2 (ja) | 2021-05-19 |
Family
ID=74193272
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019135369A Active JP6874251B2 (ja) | 2019-07-23 | 2019-07-23 | 装置、撮像装置、移動体、方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP6874251B2 (ja) |
CN (1) | CN112292712A (ja) |
WO (1) | WO2021013143A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022213340A1 (zh) * | 2021-04-09 | 2022-10-13 | 深圳市大疆创新科技有限公司 | 对焦方法、拍摄设备、拍摄系统以及可读存储介质 |
CN113191349B (zh) * | 2021-05-31 | 2022-06-24 | 浙江大华技术股份有限公司 | 聚焦电机的控制方法、装置、存储介质及电子装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5178553B2 (ja) * | 2009-01-27 | 2013-04-10 | オリンパス株式会社 | 撮像装置 |
JP2013044844A (ja) * | 2011-08-23 | 2013-03-04 | Panasonic Corp | 画像処理装置および画像処理方法 |
JP5932476B2 (ja) * | 2012-05-17 | 2016-06-08 | キヤノン株式会社 | 画像処理装置、撮像装置、距離計測方法および距離計測プログラム |
JP2016218225A (ja) * | 2015-05-19 | 2016-12-22 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP2017228913A (ja) * | 2016-06-22 | 2017-12-28 | オリンパス株式会社 | 撮像装置 |
CN106707658B (zh) * | 2016-12-09 | 2022-06-10 | 东莞佩斯讯光电技术有限公司 | 能修正因镜头倾斜造成的影像模糊的方法及系统 |
JPWO2018185939A1 (ja) * | 2017-04-07 | 2019-04-11 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 撮像制御装置、撮像装置、撮像システム、移動体、撮像制御方法、及びプログラム |
-
2019
- 2019-07-23 JP JP2019135369A patent/JP6874251B2/ja active Active
-
2020
- 2020-07-21 CN CN202080003348.XA patent/CN112292712A/zh active Pending
- 2020-07-21 WO PCT/CN2020/103227 patent/WO2021013143A1/zh active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2021013143A1 (zh) | 2021-01-28 |
CN112292712A (zh) | 2021-01-29 |
JP2021018376A (ja) | 2021-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2018185939A1 (ja) | 撮像制御装置、撮像装置、撮像システム、移動体、撮像制御方法、及びプログラム | |
JP6874251B2 (ja) | 装置、撮像装置、移動体、方法、及びプログラム | |
JP6878736B2 (ja) | 制御装置、移動体、制御方法、及びプログラム | |
JP2019216343A (ja) | 決定装置、移動体、決定方法、及びプログラム | |
US10942331B2 (en) | Control apparatus, lens apparatus, photographic apparatus, flying body, and control method | |
JP6503607B2 (ja) | 撮像制御装置、撮像装置、撮像システム、移動体、撮像制御方法、及びプログラム | |
JP6543875B2 (ja) | 制御装置、撮像装置、飛行体、制御方法、プログラム | |
JP6768997B1 (ja) | 制御装置、撮像装置、移動体、制御方法、及びプログラム | |
JP7019895B2 (ja) | 装置、撮像装置、撮像システム、移動体、方法、及びプログラム | |
JP6972456B1 (ja) | 測距センサ、撮像装置、制御方法、及びプログラム | |
WO2021031833A1 (zh) | 控制装置、摄像系统、控制方法以及程序 | |
US11125970B2 (en) | Method for lens autofocusing and imaging device thereof | |
JP6641574B1 (ja) | 決定装置、移動体、決定方法、及びプログラム | |
JP6696092B2 (ja) | 制御装置、移動体、制御方法、及びプログラム | |
JP6961888B1 (ja) | 装置、撮像装置、移動体、プログラム及び方法 | |
JP6569157B1 (ja) | 制御装置、撮像装置、移動体、制御方法、及びプログラム | |
JP6746857B2 (ja) | 画像処理装置、撮像装置、無人航空機、画像処理方法、及びプログラム | |
WO2020244440A1 (zh) | 控制装置、摄像装置、摄像系统、控制方法以及程序 | |
JP7043706B2 (ja) | 制御装置、撮像システム、制御方法、及びプログラム | |
JP6961889B1 (ja) | 制御装置、撮像装置、制御方法、及びプログラム | |
JP6413170B1 (ja) | 決定装置、撮像装置、撮像システム、移動体、決定方法、及びプログラム | |
JP2022049404A (ja) | 制御装置、撮像装置、制御方法、及びプログラム | |
JP2021047367A (ja) | 制御装置、撮像装置、制御方法、及びプログラム | |
JP2021018309A (ja) | 位相差検出装置、撮像装置、撮像システム、移動体、位相差検出方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190723 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200923 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210323 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210325 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6874251 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |