JP2020028079A5 - Imaging equipment and image processing equipment, their control methods, programs, storage media - Google Patents

Imaging equipment and image processing equipment, their control methods, programs, storage media Download PDF

Info

Publication number
JP2020028079A5
JP2020028079A5 JP2018153205A JP2018153205A JP2020028079A5 JP 2020028079 A5 JP2020028079 A5 JP 2020028079A5 JP 2018153205 A JP2018153205 A JP 2018153205A JP 2018153205 A JP2018153205 A JP 2018153205A JP 2020028079 A5 JP2020028079 A5 JP 2020028079A5
Authority
JP
Japan
Prior art keywords
image
short
unit
exposure
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018153205A
Other languages
Japanese (ja)
Other versions
JP2020028079A (en
JP7100535B2 (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2018153205A priority Critical patent/JP7100535B2/en
Priority claimed from JP2018153205A external-priority patent/JP7100535B2/en
Priority to CN201910743581.0A priority patent/CN110891140B/en
Priority to US16/539,040 priority patent/US11044397B2/en
Publication of JP2020028079A publication Critical patent/JP2020028079A/en
Publication of JP2020028079A5 publication Critical patent/JP2020028079A5/en
Application granted granted Critical
Publication of JP7100535B2 publication Critical patent/JP7100535B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (18)

撮像方向が異なり、部分的に共通な領域を有する複数枚の単位画像を合成することにより1枚の合成画像を生成可能な撮像装置であって、
被写体像を撮像する撮像手段と、
前記撮像手段に、前記複数枚の単位画像を撮像させるとともに、前記複数枚の単位画像のうちのそれぞれの単位画像の撮像の前後に、前記単位画像の露光時間よりも露光時間の短い短秒露光画像を撮像させる制御手段と、
第1の単位画像の撮像の後に撮像された第1の短秒露光画像と、前記第1の単位画像に続いて撮像された第2の単位画像の撮像の前に撮像された第2の短秒露光画像とを用いて、前記第1の短秒露光画像と前記第2の短秒露光画像の間での被写体の移動量を算出する算出手段と、
前記算出手段により算出された前記被写体の移動量に基づいて、前記第1の単位画像と前記第2の単位画像の位置合わせを行い、前記第1の単位画像と前記第2の単位画像を合成する合成手段と、
を備えることを特徴とする撮像装置。
An imaging device capable of generating a single composite image by synthesizing a plurality of unit images having different imaging directions and having a partially common area.
An imaging means for capturing a subject image and
The imaging means is made to image the plurality of unit images, and before and after the imaging of each unit image of the plurality of unit images, a short-second exposure having a shorter exposure time than the exposure time of the unit image. A control means for capturing an image and
A first short exposure image taken after the first unit image is taken and a second short shot taken before the second short shot taken following the first unit image. A calculation means for calculating the amount of movement of the subject between the first short-exposure image and the second short-exposure image using the second-exposure image, and
Based on the movement amount of the subject calculated by the calculation means, the first unit image and the second unit image are aligned, and the first unit image and the second unit image are combined. Synthetic means to do
An imaging device characterized by comprising.
前記被写体は星空であり、前記単位画像は、星空を撮影するための長秒露光で撮影された画像であることを特徴とする請求項1に記載の撮像装置。 The imaging apparatus according to claim 1, wherein the subject is a starry sky, and the unit image is an image taken with a long exposure for photographing the starry sky. 前記短秒露光画像は、星空を短秒露光で撮影するために、前記撮像手段の感度を上げて撮影された画像であることを特徴とする請求項2に記載の撮像装置。 The imaging device according to claim 2, wherein the short-exposure image is an image captured by increasing the sensitivity of the imaging means in order to capture a starry sky with a short-second exposure. 前記短秒露光画像の撮像を実施する必要があるか否かを判定する第1の判定手段をさらに備え、該第1の判定手段により前記短秒露光画像の撮像が必要ないと判定された場合は、前記制御手段は、前記短秒露光画像の撮像を省略することを特徴とする請求項1乃至3のいずれか1項に記載の撮像装置。 When the first determination means for determining whether or not it is necessary to capture the short-exposure image is further provided, and it is determined by the first determination means that the short-exposure image does not need to be captured. The imaging device according to any one of claims 1 to 3, wherein the control means omits imaging of the short-second exposure image. 前記第1の判定手段は、前記第1の短秒露光画像と前記第2の短秒露光画像の間での被写体の移動がない場合に、前記短秒露光画像の撮像が必要ないと判定することを特徴とする請求項4に記載の撮像装置。 The first determination means determines that imaging of the short exposure image is not necessary when there is no movement of the subject between the first short exposure image and the second short exposure image. The image pickup apparatus according to claim 4, wherein the image pickup apparatus is characterized by the above. 前記第1の単位画像と前記第2の単位画像の位置合わせが可能か否かを判定する第2の判定手段と、該第2の判定手段により、前記第1の単位画像と前記第2の単位画像の位置合わせが不可能と判定された場合に警告を発する警告手段と、をさらに備えることを特徴とする請求項1乃至5のいずれか1項に記載の撮像装置。 The first unit image and the second unit image are determined by the second determination means for determining whether or not the alignment of the first unit image and the second unit image is possible, and the second determination means. The imaging device according to any one of claims 1 to 5, further comprising a warning means for issuing a warning when it is determined that alignment of a unit image is impossible. 前記第2の判定手段は、前記算出手段により算出された、前記第1の短秒露光画像と前記第2の短秒露光画像の間での被写体の移動量が所定の量を超えている場合に、前記第1の単位画像と前記第2の単位画像の位置合わせが不可能と判定することを特徴とする請求項6に記載の撮像装置。 The second determination means is when the amount of movement of the subject between the first short-time exposure image and the second short-time exposure image calculated by the calculation means exceeds a predetermined amount. The imaging apparatus according to claim 6, wherein it is determined that the alignment of the first unit image and the second unit image is impossible. 前記第1の短秒露光画像の撮像と前記第2の短秒露光画像の撮像との間の経過時間を計時する計時手段をさらに備え、前記第2の判定手段は、前記経過時間が所定の時間を超えている場合に、前記第1の単位画像と前記第2の単位画像の位置合わせが不可能と判定することを特徴とする請求項6に記載の撮像装置。 The second determination means further includes a time measuring means for measuring the elapsed time between the acquisition of the first short-exposure image and the imaging of the second short-exposure image, and the second determination means has a predetermined elapsed time. The imaging device according to claim 6, wherein it is determined that the alignment of the first unit image and the second unit image is impossible when the time is exceeded. 撮像方向が異なり、部分的に共通な領域を有する複数枚の単位画像を合成することにより1枚の合成画像を生成可能な画像処理装置であって、
前記複数枚の単位画像と、前記複数枚の単位画像のうちのそれぞれの単位画像の撮像の前後に、前記単位画像の露光時間よりも短い露光時間で撮像された短秒露光画像と、を取得する取得手段と、
第1の単位画像の撮像の後に撮像された第1の短秒露光画像と、前記第1の単位画像に続いて撮像された第2の単位画像の撮像の前に撮像された第2の短秒露光画像とを用いて、前記第1の短秒露光画像と前記第2の短秒露光画像の間での被写体の移動量を算出する算出手段と、
前記算出手段により算出された前記被写体の移動量に基づいて、前記第1の単位画像と前記第2の単位画像の位置合わせを行い、前記第1の単位画像と前記第2の単位画像を合成する合成手段と、
を備えることを特徴とする画像処理装置。
An image processing device capable of generating a single composite image by synthesizing a plurality of unit images having different imaging directions and having a partially common region.
Acquires the plurality of unit images and short-second exposure images captured with an exposure time shorter than the exposure time of the unit images before and after imaging of each of the plurality of unit images. Acquisition method and
A first short exposure image taken after the first unit image is taken and a second short shot taken before the second short shot taken following the first unit image. A calculation means for calculating the amount of movement of the subject between the first short-exposure image and the second short-exposure image using the second-exposure image, and
Based on the movement amount of the subject calculated by the calculation means, the first unit image and the second unit image are aligned, and the first unit image and the second unit image are combined. Synthetic means to do
An image processing device comprising.
前記被写体は星空であり、前記単位画像は、星空を撮影するための長秒露光で撮影された画像であることを特徴とする請求項9に記載の画像処理装置。 The image processing apparatus according to claim 9, wherein the subject is a starry sky, and the unit image is an image taken with a long exposure for photographing the starry sky. 前記短秒露光画像は、星空を短秒露光で撮影するために、像手段の感度を上げて撮影された画像であることを特徴とする請求項10に記載の画像処理装置。 The short second exposure image, an image processing apparatus according to claim 10, characterized in that in order to capture the short second exposure starry, a captured image by increasing the sensitivity of an imaging unit. 前記第1の単位画像と前記第2の単位画像の位置合わせが可能か否かを判定する第2の判定手段と、該第2の判定手段により、前記第1の単位画像と前記第2の単位画像の位置合わせが不可能と判定された場合に警告を発する警告手段と、をさらに備えることを特徴とする請求項9乃至11のいずれか1項に記載の画像処理装置。 The first unit image and the second unit image are determined by the second determination means for determining whether or not the alignment of the first unit image and the second unit image is possible, and the second determination means. The image processing apparatus according to any one of claims 9 to 11, further comprising a warning means for issuing a warning when it is determined that the unit image cannot be aligned. 前記第2の判定手段は、前記算出手段により算出された、前記第1の短秒露光画像と前記第2の短秒露光画像の間での被写体の移動量が所定の量を超えている場合に、前記第1の単位画像と前記第2の単位画像の位置合わせが不可能と判定することを特徴とする請求項12に記載の画像処理装置。 In the second determination means, when the amount of movement of the subject between the first short-second exposed image and the second short-second exposed image calculated by the calculation means exceeds a predetermined amount. The image processing apparatus according to claim 12, wherein it is determined that the alignment of the first unit image and the second unit image is impossible. 前記取得手段は、前記第1の短秒露光画像の撮像と前記第2の短秒露光画像の撮像との間の経過時間の情報をさらに取得し、前記第2の判定手段は、前記経過時間が所定の時間を超えている場合に、前記第1の単位画像と前記第2の単位画像の位置合わせが不可能と判定することを特徴とする請求項12に記載の画像処理装置。 The acquisition means further acquires information on the elapsed time between the acquisition of the first short-second exposed image and the acquisition of the second short-second exposed image, and the second determination means obtains the elapsed time. The image processing apparatus according to claim 12, wherein when the number exceeds a predetermined time, it is determined that the alignment of the first unit image and the second unit image is impossible. 撮像方向が異なり、部分的に共通な領域を有する複数枚の単位画像を合成することにより1枚の合成画像を生成可能な撮像装置を制御する方法であって、
被写体像を撮像する撮像手段に、前記複数枚の単位画像を撮像させるとともに、前記複数枚の単位画像のうちのそれぞれの単位画像の撮像の前後に、前記単位画像の露光時間よりも露光時間の短い短秒露光画像を撮像させる制御工程と、
第1の単位画像の撮像の後に撮像された第1の短秒露光画像と、前記第1の単位画像に続いて撮像された第2の単位画像の撮像の前に撮像された第2の短秒露光画像とを用いて、前記第1の短秒露光画像と前記第2の短秒露光画像の間での被写体の移動量を算出する算出工程と、
前記算出工程において算出された前記被写体の移動量に基づいて、前記第1の単位画像と前記第2の単位画像の位置合わせを行い、前記第1の単位画像と前記第2の単位画像を合成する合成工程と、
を有することを特徴とする撮像装置の制御方法。
It is a method of controlling an imaging device capable of generating one composite image by synthesizing a plurality of unit images having different imaging directions and partially having a common area.
The imaging means for capturing the subject image captures the plurality of unit images, and the exposure time is longer than the exposure time of the unit image before and after the imaging of each unit image of the plurality of unit images. A control process for capturing a short short-second exposure image,
A first short exposure image taken after the first unit image is taken and a second short shot taken before the second short shot taken following the first unit image. A calculation step of calculating the amount of movement of the subject between the first short-exposure image and the second short-exposure image using the second-exposure image, and a calculation step.
Based on the movement amount of the subject calculated in the calculation step, the first unit image and the second unit image are aligned, and the first unit image and the second unit image are combined. Synthesis process and
A method for controlling an imaging device, which comprises.
撮像方向が異なり、部分的に共通な領域を有する複数枚の単位画像を合成することにより1枚の合成画像を生成可能な画像処理装置を制御する方法であって、
前記複数枚の単位画像と、前記複数枚の単位画像のうちのそれぞれの単位画像の撮像の前後に、前記単位画像の露光時間よりも短い露光時間で撮像された短秒露光画像と、を取得する取得工程と、
第1の単位画像の撮像の後に撮像された第1の短秒露光画像と、前記第1の単位画像に続いて撮像された第2の単位画像の撮像の前に撮像された第2の短秒露光画像とを用いて、前記第1の短秒露光画像と前記第2の短秒露光画像の間での被写体の移動量を算出する算出工程と、
前記算出こうていにおいて算出された前記被写体の移動量に基づいて、前記第1の単位画像と前記第2の単位画像の位置合わせを行い、前記第1の単位画像と前記第2の単位画像を合成する合成工程と、
を有することを特徴とする画像処理装置の制御方法。
It is a method of controlling an image processing device capable of generating one composite image by synthesizing a plurality of unit images having different imaging directions and having a partially common region.
Acquires the plurality of unit images and short-second exposure images captured with an exposure time shorter than the exposure time of the unit images before and after imaging of each of the plurality of unit images. Acquisition process and
A first short exposure image taken after the first unit image is taken and a second short shot taken before the second short shot taken following the first unit image. A calculation step of calculating the amount of movement of the subject between the first short-exposure image and the second short-exposure image using the second-exposure image, and a calculation step.
Based on the movement amount of the subject calculated in this calculation, the first unit image and the second unit image are aligned, and the first unit image and the second unit image are combined. The synthesis process to synthesize and
A method for controlling an image processing apparatus, which comprises.
コンピュータに、請求項15または16に記載の制御方法の各工程を実行させるためのプログラム。 A program for causing a computer to execute each step of the control method according to claim 15 or 16. コンピュータに、請求項15または16に記載の制御方法の各工程を実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。 A computer-readable storage medium that stores a program for causing a computer to execute each step of the control method according to claim 15 or 16.
JP2018153205A 2018-08-16 2018-08-16 Image pickup device and image processing device, their control method, program, storage medium Active JP7100535B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018153205A JP7100535B2 (en) 2018-08-16 2018-08-16 Image pickup device and image processing device, their control method, program, storage medium
CN201910743581.0A CN110891140B (en) 2018-08-16 2019-08-13 Image pickup apparatus, image processing apparatus, control method therefor, and storage medium
US16/539,040 US11044397B2 (en) 2018-08-16 2019-08-13 Image capturing device and image processing device, control methods of the same, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018153205A JP7100535B2 (en) 2018-08-16 2018-08-16 Image pickup device and image processing device, their control method, program, storage medium

Publications (3)

Publication Number Publication Date
JP2020028079A JP2020028079A (en) 2020-02-20
JP2020028079A5 true JP2020028079A5 (en) 2021-08-12
JP7100535B2 JP7100535B2 (en) 2022-07-13

Family

ID=69620456

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018153205A Active JP7100535B2 (en) 2018-08-16 2018-08-16 Image pickup device and image processing device, their control method, program, storage medium

Country Status (1)

Country Link
JP (1) JP7100535B2 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4356621B2 (en) * 2004-04-16 2009-11-04 ソニー株式会社 Imaging apparatus and imaging method
JP2016005160A (en) * 2014-06-18 2016-01-12 キヤノン株式会社 Imaging device and control method thereof
JP2016149631A (en) * 2015-02-12 2016-08-18 オリンパス株式会社 Imaging apparatus and imaging method
JP6246175B2 (en) * 2015-10-09 2017-12-13 キヤノン株式会社 Imaging apparatus for imaging subject trajectory and control method of imaging apparatus
JP6659162B2 (en) * 2016-03-15 2020-03-04 キヤノン株式会社 Imaging device, imaging device control method, and program

Similar Documents

Publication Publication Date Title
JP2018092580A5 (en) Image processing apparatus, image processing method, and program
JP2013062626A5 (en) Imaging apparatus, image data processing method, and program
JP2019045995A5 (en)
JP2010193058A5 (en)
JP2016063262A5 (en)
JP2016129289A5 (en)
JP2015029865A5 (en) Image processing apparatus and method, fundus image processing apparatus, and fundus image photographing apparatus
JP2006339903A5 (en)
JP2015115714A5 (en)
JP2010183190A5 (en)
JP2018031907A5 (en)
JP2015094925A5 (en)
JP2017212682A5 (en)
JP2019003428A5 (en)
JP2015035717A5 (en)
JP2019036791A5 (en) Image processing device and its control method, program
JP2009212666A5 (en)
JP2018107705A5 (en)
JP2015012567A5 (en)
JP2018098649A5 (en)
JP2012015978A5 (en)
JP2018137613A5 (en)
JP2020188385A5 (en)
JP2014187691A5 (en)
JP2020028079A5 (en) Imaging equipment and image processing equipment, their control methods, programs, storage media